Etter raseringen på 1800-tallet lå fortet i ruiner frem til 1962 da «Komiteen for Restaurering av Akerøy Fort» tok til med gjenreisningen. I løpet av 1960-tallet var det meste av murverket gjenreist etter oppmålinger utført av Riksantikvaren. Til arbeidet ble det både samlet inn lokale midler og midler fra myndighetene. En stor del av arbeidet ble imidlertid gjort på dugnad bl.a. ved sommerleirer med unge norske og utenlandske deltakere. I 1999 stoppet videre restaurering opp av mangel på midler.