Bygningen var i bruk som kriminalsasyl i perioden 1895 til 1961, da de resterende innsatte ble overført til Reitgjerdet. De som var plassert her ble regnet som pasienter, men Kriminalasylet var først og fremst en oppbevaringsanstalt og ikke et sted de fikk behandling.