Hartlaub var far til forfatteren Felix Hartlaub (født 1913; savnet 1945) og forfatterinnen Geno Hartlaub (1915–2007).