Halling giftet seg i 1844 i Mandal med Fredrikke Petrine Christiansdotter Weyergang (1820–1860). Andre gangen giftet han seg med Marie Henrikke Bomhoff (1837–1907).