Años más tarde pasó a ser propiedad del marqués del Amparo, y desde 1918 hasta 1999 fue colegio de la Compañía de Santa Teresa de Jesús.