En el siglo XIX, tras la destrucción del Buen Retiro, el Casón experimentó una ampliación y se le añadieron dos nuevas fachadas, de estilo neoclásico.