Durante la Segunda Guerra Mundial la mayoría de las obras se trasladaron al sótano del edificio donde se había construido un búnquer, con excepción de las de gran formato como el "Washington cruzando el Delaware" de Emanuel Leutze que en 1942 fue destruido junto con la escalera y seis salas del edificio.