Sin embargo, miras mezquinas de economía y el deseo de aprovechar los cimientos y escombros de la antigua fortaleza prevalecieron y el Consejo de Castilla ordenó que se hiciese la cárcel en el sitio que ocupaba el castillo, privando a la provincia de una cárcel «igual a las que se conocen en los países más ilustrados».