Under andre verdenskrig overtok de tyske militærmyndighetene de tidligere installasjonene etter Garden og bygget ut en stor brakkeleir på sletta øst for klosterruinene. Også Kommandantboligen og Lavetthuset ble brukt til innkvartering av militære mannskaper, og anlegget fikk navnet . I desember 1943 rekvirerte de båthuset og restauranten til Revierhavnens baatforening og brukte dette som offisersmesse. Nærmest ruinene ble sletta planert til idrettsplass, og brakken som fremdeles står rett nord for ruinene var offisersmesse. Tilsammen hadde tyskerne 11 store brakker med plass til mer enn soldater. I tillegg hadde de et sprengstofflager og feltsykehus med 100 senger.