Jenny Arnesen var datter av gårdbruker Arent Olai Arnesen og Drude Marcusine Christine Krüger. Moren var av en gammel presteslekt. Da foreldrene ble skilt i 1889, tok Jenny Arnesen med seg sin mor og flyttet til Voss.