Grøgaard fikk oppført huset som idag er kjent som Tingsalen. Huset ble påbygd flere ganger siden, og har huset alt fra butikk til seilmakerloft, fra sykestue til kino, Lillesands første skole, og mye annet. Noen meter lengre ned i samme gate ligger kjøpmannsgården tilhørende hans storebror, Johannes Grøgaard. Denne er idag Lillesand by- og sjøfartsmuseum.