Se sabe que era deseo de la Cofradía adquirir terrenos para construirse una iglesia propia, pero la precariedad económica y la dificultad de encontrar unos solares en el centro de la ciudad, hicieron la gestión muy difícil.