Tras la casi total destrucción del palacio (ver Casón del Buen Retiro) esta parte del mismo fue destinada a albergar el Museo del Ejército, y muy modificada para dicho fin.