游的游客中口碑甚佳。1925年，蒂罗尔州副州长弗朗茨·格鲁纳从迈尔手中买下这座城堡，成为他艺术收藏的展览馆，吸引许多社会名流拜访。1938年，纳粹德国吞併奥地利，在奥地利境内大肆扩张盖世太保和集中营设施。伊特尔堡偏僻的地理位置和坚固的建筑结构引起了纳粹党的注意。1940年初，德国政府从格鲁纳处租借了伊特尔堡的使用权，用作德国禁烟联盟奥地利支部办公地点。1942年11月，海因里希·希姆莱从中介入将伊特尔堡充公，并开始改造为一座关押高级囚犯的监狱。原本的客房变成了带有栅栏和铁锁的囚室，豪华的主卧室则由集中营