I 1804 ble festningen nedlagt. Kristiansand hadde fått økt betydning og nyere og viktigere forsvarsanlegg, bl.a. Christiansholm festning og Lagmannsholmen som var anlagt vel fire kilometer lenger inn i fjorden for å kunne beskytte selve byen og havnen.