Etter hvert trakk Fabricius seg tilbake fra aktiv tjeneste. I 1831 søkte han avskjed, men også denne gangen ble det avslått, og først i 1836 – 78 år gammel – kunne han trekke seg endelig tilbake.