Das Museum am Rand des Parc de Bécon, einer städtischen Grünanlage an der Seine, wurde ursprünglich 1878 für die Weltausstellung in Paris als Pavillon für die damals verbundenen Länder Norwegen und Schweden am Rande des Champ de Mars errichtet. Der Architekt Henrik Thrap Maye hatte den Pavillon im Stil der traditionellen skandinavischen Holzbauweise entworfen und nutzte beim Bau vorgefertigte Elemente, die eine spätere Wiederverwendung des Gebäudes an anderer Stelle ermöglichten.