Hans Christian Bergersen var nummer tre i en søskenflokk på syv. Faren var lærer i Knapper. Da faren ble pensjonist flyttet familien til Frogner i Sørum. Hans Christian Bergersen var da nitten år gammel.