Tuvieron dos hijos, pero se divorciarían en 1963 a raíz del escandaloso idilio que él inició con Elizabeth Taylor durante el rodaje de "Cleopatra".