I 1770 giftet han seg med Agatha Riisbrigh (død 1825), med hvem han fikk sønnen Børge Riisbrigh Thorlacius.