Se separó de su esposa, la mezzosoprano alemana Margarete Joswig, con quien tuvo sus tres hijos.