Pronto, sin embargo, se abandonaría este lugar, pues, en torno a 1541, los señores del Concejo acordaron construir una nueva cárcel, ya que consideraban que era muy necesaria para el buen gobierno de la ciudad.