Se casó con Louis Jones (1937-1944) con quien tuvo dos hijos, su hija es la escritora Gail Lumet Buckley que se casó con el director Sidney Lumet) y con Lennie Hayton entre 1947 y 1971, pero su boda (celebrada en Francia) fue anunciada mucho después porque él era blanco y el matrimonio interracial sufrió amenazas de muerte.