En 1925 tuvo una relación con Frania Tye (con quien nunca se casó), y tuvieron 4 hijos antes de romper su relación en 1942.