Ekteskapet mellom Thams og Huitfeldt endte i separasjon og skilsmisse hvoretter Skaugum ble solgt, og Thams formentlig flyttet til Karen Bolette og Neumann på Hovin i Aker. Her døde han i 1776. Huitfeldt hadde da flyttet til Onsøy og kjøpt gården Nordre Walle.