Para la construcción del edificio de la fábrica de sarguetas de San Carlos se aprovechó el recinto suroccidental del antiguo palacio, reforzando los muros preexistentes mediante ladrillo visto y hormigón y abriendo unas ventanas cara al exterior.