Heifetz se casó en 1928 con la actriz de películas mudas Florence Vidor, ex-mujer de King Vidor, cuya hija de siete años, Suzanne, fue adoptada por Heifetz.