El convento fue fundado por iniciativa de la villa en 1554 y con licencia real, aprovechándose la ermita de la Virgen de la Luz que antes había donde ahora está el convento.