Han ble imidlertid innblandet i en bestikkelseskandale og måtte frasi seg embetene sine og forlate byen. I 1727 fikk han tillatelse til å komme tilbake til hovedstaden av Anna Sophie Reventlow som ikke bare var dronning, men også halvsøster til Rostgaards kone. Etter en kort retur i embetsverket trakk han seg så tilbake med en god pensjon for å jobbe med litteratur.