Den 7 juli 1937 beslagtogs 435 verk, bland andra 100 expressionistiska verk för utställningen "Entartete Kunst", och ett stort antal andra verk dömdes ut. 1937 stängdes museet till följd av den nazistiska kulturpolitiken, och lokalerna övertogs av den preussiska konstakademin. I slutskedet av andra världskriget, 18 mars 1945, förstördes palatset i en bombräd. Ruinerna revs slutligen 1961.