La historia de esta tradición, no es más que una leyenda que cuenta que haciendo unas obras en la zona del arrabal de la localidad, donde se situaba el Pontón que era el único puente de paso hacia el convento que había fuera de las murallas medievales, un albañil que estaba trabajando en la zona, al picar se topó con una imagen de una virgen policromada sentada en un sillón con un niño al lado izquierdo.