Selv om det var lagt ned mye arbeid i å befeste klippen, følte en seg ikke trygg på at dette var godt nok. På midten av 1700-tallet vurderte en om hele fortet og klippen kunne sprenges bort, men kostnadene ble for store til at det lot seg gjøre å demolere fortet, noe vi er glade for i dag. I begynnelsen av 1800-tallet hadde fortet mistet sin militære betydning, men ble formelt nedlagt først i 1903 sammen med festningsbyen.