Huset var formet av arkitekten Charles Correa fra og med 1958. Museet, som har vært Correas viktigste kommisjon, besto opprinnelig av 51 modulære enheter, hver av dem på 6 x 6 meter, og ringer inn en gårdsplass med kunstig vanndam. Komplekset ble innviet av statsminister Jawaharlal Nehru i 1963.