Los franciscanos descalzos alcantarinos se instalaron en la ermita en noviembre de 1578 y procedieron a la ampliación de la misma y a la construcción del nuevo convento, eso sí, respetando la dedicación de la capilla a la Virgen del Rosario.