Richard Loving, en hvit bygningsarbeider i Caroline County, Virginia, blir forelsket i en svart kvinne, Mildred Jeter. Når Mildred oppdager at hun er gravid, bestemmer de seg for å gifte seg. Men de vet at ekteskap mellom rasene bryter med loven i Virginia. De kjører til Washington, DC for å gifte seg i 1958. Richard planlegger deretter å bygge et hjem for seg selv og Mildred. Men kort tid senere går en sheriff og hans nestkommanderende hjem til dem, og arresterer begge to.