Slektslister skriver navnet også som . Han var gift med Gunhild Marie Brinch (født 1830) fra Arendal og de fikk sønnen Hjalmar Christian Hauge (1862–1907) som ble både diplomat og kongelig kammerherre.