Den 7. oktober 1953 i New York City giftet Rutherford seg med skuespiller og produsent William Dozier, skaperen av TV-serien som gikk fra 1966 til 1968. Hennes andre ektemann døde i Santa Monica av et slag den 23. april 1991. I 1935 begynte Rutherford sin karriere i Hollywood med hovedrollen som «Joan O'Brien» i den dramatiske filmen for filmstudioet Mascot Pictures.