Carl Jacobsen og ektefellen bodde opprinnelig i hovedbygningen på Bakkegården, men huset ble ansett for å være usunt å bo i etter at 4 av ekteparets barn døde av barnesykdommer.