Weber-Lortsch giftet seg den 28. juni 1941 på Schloss Jannowitz i Schlesien med Helene Gräfin zu Stolberg-Wernigerode (* 22. november 1911 i Hirschberg; † 2. juni 1999 i München), datteren til Eberhard Graf zu Stolberg-Wernigerode (1873–1929) og Erika Gräfin zu Solms-Sonnenwalde (1880–1970).