En los años 1940, durante la etapa en la que el castillo fue penal, uno de los trabajos de los presos consistió en rebajar dos metros la altura de la muralla en la zona norte del castillo, con vistas a la carretera de Valladolid, para emplear la piedra en la construcción del desaparecido sanatorio antituberculoso situado al sur del castillo.