En la guerra de Independencia tuvo lugar la Batalla de Talavera cuyo frente corría desde el río Tajo hasta más allá del Cerro de Madellín donde se encontraban las baterías hispaño-inglesas, la batalla de Talavera donde el General García de la Cuesta y el General inglés Arthur Wellesley consiguieron una victoria frente a las tropas napoleónicas y a la que asistió el mismo Rey José y que tuvieron que retirarse hacia Madrid, convencidos que era el final de la ocupación de España.En su retirada fueron destruidos los restos de este castillo, ya que las baterías napoleónicas no distaban mucho de ese lugar.