Han giftet seg i 1876 med Marie Magdalene Selmer, datter av assessor ved Trondhjems stiftsoverrett Johan Jørgen Selmer. De bodde mange år i Søndre gate 17. Blant deres barn var den senere assurandør, kommandør, militærhistoriker og stortingsmann Olav Bergersen.