Charles Ulm var gift to ganger. Første ekteskap fra 1919 til 1927. Deretter giftet han seg på nytt.