I 1934 blev bygningen besat af Gestapo og blev senere solgt til kommunen. Først i 1950 blev bygningen (delvis) returneret til byens frimurere. Logebygningen i Nørregravene danner nu ramme for flere frimurerordner såsom "Wilhelm zur nordischen Treue" (stiftet 1969, navngivet efter den preussisk-tyske kajser Wilhelm 1.), "Leuchte im Norden" (stiftet 1930) og den kvindelige frimurerloge "Zu den Nordischen Rosen" (stiftet 2014) samt druidlogen "Nordmark". Den nuværende frimurerloge "Wilhelm zur nordischen Treue" blev stiftet efter den dansk-tyske krig i 1869 og afløste den tidligere danske "St. Johannesloge Frederik" (stiftet 1862, navngivet efter den danske konge Frederik 7.). Frimurernes historie afspejler dermed også de nationalpolitiske konflikter i fjordbyen.