Han giftet seg i 1861 med Sigrid (født Einum), datter av handelsmann og ordfører i Børsa Erik Arntsen Einum og hustru Kari Johnsdatter Handberg. Ole og Sigrid Husebys datter, Ingeborg, ble gift med Anders Johnsen Mo, redaktør i avisen .