Elisabeths foreldre giftet seg i 1825. Elisabeths far, som hadde studert teologi, ble lærer ved Bergen katedralskole i 1819. Fem år senere ble Ahlert Hysing rektor ved det nyopprettende realgymnaset («real» betegnet at skolen var moderne eller vitenskapelig) i Larvik. I årene 1830–1832 ble han valgt inn på Stortinget som representant for Larvik og Sandefjord. Han var med på å organisere Larvik sparebank, var medlem av bankens første styre og fungerte senere som styreleder i tjue år. I tillegg var Ahlert Hysing ordfører i Larvik i 1839, og fra 1841 til 1848. Foreldrene til Elisabeth fikk åtte barn, hvorav seks vokste opp. Etter hustruen Carolines død i 1840 giftet Ahlert Hysing seg i 1842 for andre gang med Elisabeth Freckland (1810–1897). Hennes far var pastor i Søllerød i Danmark.