Han var sønnesønn av sogneprest og eidsvollsmann Hans Hein Nysom og halvbror til offiser og stortingsmann Anton David Svendsen Hjorth.