År 1809 flyttet museet inn i det gamle augustinerkonventet. I 1898 ble besluttet å oppføre en ny bygning for museet. Denne ble tegnet av arkitekten Charles van Rysselberghe og ble oppført omkring 1900 i den østlige del av Citadelparken.