Se levantó sobre la antigua iglesia de Nuestra Señora de las Cinco Villas, que estaba próxima a desmoronarse en el siglo XVI, y de la que subsiste una pequeña portada románica, muy alterada, que da a la Plaza del Carmen.