I 1965, i en alder av 57 år, giftet han seg med Sonia Rachel Hopkins, som da var 32 år gammel. De hadde tre barn sammen: Melinda, Julian (modell og skuespiller) og Deborah.