Aunque previamente a la creación del convento en 1676 por Real Cédula, existía en el lugar la ermita de la Soledad, que fue cedida por su fundador Tomás de Castro Ayala para su conversión en convento.