I november 1951 ble han kjent med kunstneren Gisèle de Lestrange, som han giftet seg med året etter. I 1955 ble deres sønn Eric født.