Casado en tres ocasiones, tuvo en total seis hijos: Seda (1946), Charles (1952), Patrick (1956, muerto a los 25 años), Katia (1969, corista junto a él desde 1996), Misha (1971) y Nicolás (1977), y una nieta llamada Leila.