Holmboe giftet seg i 1842 med sin andre kone, Ingeborg Thorp (født 1812 på Voss, fødenavn Hannestad). De fikk to sønner og to døtre: Christopher og Jens, Cathrine og Olava. Bare Jens og Cathrine levde opp.