El pabellón que alberga el Conservatorio, rehabilitado por los arquitectos Manuel e Ignacio de las Casas y Jaime Lorenzo, era anteriormente el Hospital Clínico de San Carlos.