Cervantes visitó en varias ocasiones la Villa, y debido a sus truculentas comisiones, en una ocasión fue a dar con su huesos en la cárcel, situada en los bajos del Ayuntamiento (hoy Punto de Información Histórica), y aquí, según el cervantista Jean Canavaggio, se gestaron las primeras páginas del "Quijote".