La Cofradía se fundó en el año 1596 en el antiguo convento de San Agustín, cuya iglesia es hoy el archivo municipal.