Han giftet seg i Vår Frue kirke i 1867 med Ivara Ermegaard Aas, datter av skomaker Lars Aas og Birgitte Ofstad. Hennes brødre Knud og Ernst Aas var kjøpmenn i Trondhjem. Ole og Ivara fikk ti barn, og blant de som vokste opp var Birger Stuevold-Hansen, som ble statsråd, stortingsmann og høyesterettsadvokat.