Han var sønn av bonde Hans Olaus Lisberg og hustru Susanne Elisabeth Jensen. Farmoren Ellen (Elise) Lisberg var søster til folketingsmann Johan Henrik Schrøter d.y. Tippoldefaren var sogneprest og folkeminnesamler Johan Henrik Schrøter d.e.