Contrajo de nuevo matrimonio con la viuda de Al Jolson, Erle Chennault Galbraith, el 1 de diciembre de 1951, con la que tuvo tres hijos y con la que permaneció casado hasta su muerte, el 1 de noviembre de 1984 en Los Ángeles, California.