Lillemor Halvorsen var datter av skuespillerne Nicolai Halvorsen og Inga Margrethe Houge. Hun ble første gang gift med ingeniør Christian Mohr (1876-1908). Som enke ble hun i 1912 gift med kaptein Francis Sidney Arbuthnot.