Museet åpnet i en bygning fra 1903 tegnet av Johan Schrøder. Det ble utvidet i 1989 og 1992 ved kongelig bygningsinspektør David Bretton-Meyer.