In 1943, tijdens de Tweede Wereldoorlog, werd het pand geconfisqueerd door de bezetter en werd hier de Feldgendarmerie ondergebracht. Tijdens de Waternoodsramp van 1953 kwam ook het buiten gedeeltelijk onder water te staan.