Scholz kjøpte i 1885 Seeheim-slottet ved Konstanz og utvidet det i historisk stil. Han var far til forfatteren Wilhelm von Scholz (1874–1969).