Etter 1814 økte antallet slaver (fanger på straffarbeid) på festningen, og to av rommene i den gamle kaserne ble tatt i bruk som slavelokaler. Bygningen ble da omtalt som .