Se casó cuatro veces, sus tres primeros matrimonios terminaron en divorcio, Barbara Pickard (1969 - 71), Jane Birkin (1965- 68).