I 1820 døde Stangs hustru, 41 år gammel. Det yngste av barna hennes var bare to år gammelt. Husholdningen ble overtatt av den eldste datteren, Caroline. Økonomien var trang, og Stang var en streng far; etter tapet av hustruen var han en nedbrutt mann. En samtidig, prost Alexander Lange, omtaler ham som en mann med «udmerkede evner og kundskaper, men ogsaa med voldsomme lidenskaper og vistnok blottet for kristelig erkjendelse og tro». Politisk var han mer liberal enn vanlig blant tidens embetsmenn. I forbindelse med en rundspørring blant embetsmennene angående et utkast til formannskapslov fra 1826 skilte han seg ut ved å fraråde at embetsmennene fikk noe med valget til formannskapet å gjøre.