Han giftet seg i 1869 med Karen Sophie Wiborg fra Kragerø. Paret fikk to døtre og tre sønner: Julia (Lullul), Mary, William (Illam), Justus og yngstemann Colin som døde bare 10 år gammel. Bare William og Justus skulle med tiden få egne barn; en av etterkommerne er Tomas Colin Archer.