Han var gift i første ekteskap med sin slektning på både Blom- og Paus-siden, Martha Paus (født 1761 på Håtveit i Lårdal, død 1786 i Skien), datter av skoginspektør i Øvre Telemark Cornelius Paus og sønnedatter av prokurator Paul Paus og Martha Blom. Svigerfaren var også hans fetter. De hadde fem barn. I andre ekteskap var han gift med Anne Kirstine Falkum (1776–1806), og fikk fem barn også i dette ekteskapet. I tredje ekteskap var han gift med Anne Cathrine Nielsen og hadde ingen barn.