De første fangene var de 97 gislene som tyskerne tok etter det britiske commandoraidet mot Lofoten 4. mars 1941. Etter fire dagers innesperring om bord i troppetransportskipet Bretagne på havna i Svolvær ble de sendt til Trondheim med D/S Renøy, før det bar videre med tog til Oslo. Etter et opphold i Møllergata 19 ankom de Ånebyleiren den 15. mars 1941. I tillegg var 84 politiske fanger innom leiren på grunn av krangel med tyskere, plakatriving og «tyskfiendtlig propaganda».