Fra tiden på Finnøy var faren blitt en god venn med Peder Mandrup Tuxen. Han var dansk marineløytnant og stasjonert i Norge i forbindelse med krigen mot England og den resulterende fastlandssperringen. Etter å ha flyttet til Gjerstad forble han en fast gjest i prestegården. Med sin bakgrunn i navigasjon og matematikk hadde han sannsynligvis en stimulerende innflytelse på den unge Niels Henrik. Der møtte han også prestefruens yngre søster Marie Elisabeth Simonsen som han senere giftet seg med. Tuxen var blant annet dyktig til å lage skyggemalerier eller silhuetter av folk han kjente.