Han giftet seg 11. april 1908 med Elly Heuss-Knapp, og paret fikk en sønn. Ekteparet ble viet av Albert Schweitzer, som hadde hørt til Ellys bekjentskapskrets,. Schweizer ble også i fortsettelsen en venn av familien.