Herman Laading forble ugift, men påtok seg et helt spesielt ansvar overfor barna til fyrbøter Mathias Olai Svendsen (1827–1889) og hustru Jandine Marie Nielsdatter Hammer (1829–1878), som var oppasserkone på Borgerskolen hans i Cort Piil Smuget. Da Borgerskolen i 1871 endret navn til Laadings Skole og flyttet til Klosteret 28, rode 6, flyttet også familien Svendsen med. De ble boende sammen med skolens styrer i skolebygningen, og Herman Laading sørget for oppfostring av deres sju barn. To av dem, Carl Antonio og Ole Johan, adopterte han og ga dem sitt eget etternavn.