Entre tanto, los edificios principales alojaron al Colegio del Arma de Caballería (1851), a la Milicia Nacional (1855), a los Padres Escolapios (1861-1933), al Instituto Nacional de Enseñanza Media (1933-1947), año en que el Instituto tuvo que trasladarse a otro lugar por el estado ruinoso del edificio), y, desde 1960, tras restaurarse el edificio, a la Escuela Nacional de Administración Pública.