Museet ble opprettet i 1897 av tre døtre av New Yorks ordfører og barnebarn av industrimannen Peter Cooper, opprinnelig som en del av stiftelsen . Museet har siden 1976 tilhold i «Andrew Carnegie Mansion» fra 1903, som ble donert til Smithsonian i 1972.