Así, desde 1808 pese a la resistencia popular, la Villa es dominada por los franceses después de un escaso enfrentamiento que se saldó con varios edificios derruidos, entre ellos el Monasterio Franciscano de San Nicolás, por encontrarse fuera de las murallas, y la ruina del castillo de Ledesma.