Han var gift med Anna Lange Thulesius. Hun var kjent i Oslo som en klok og vakker kvinne, mens ektemannen Ole Andreas var kjent som utiltrekkende og meget hissig. Det fortelles at Annas mor Birgitte von Heidenmarck mistet et brett fullt av tekopper i gulvet da hun fikk høre hvem datteren skulle gifte seg med.