Остальную часть 1809 года 1-й корпус провёл в Кастилии-Ла-Манче, к югу от Мадрида. В январе 1810 года французские войска вошли в Андалусию и Севилью, но неумелое руководство короля Жозефа позволяет испанцам отступить в Кадис, к хорошо укреплённым позициям. Маршал Виктор 5 февраля 1810 года вынужден начать осаду города. На протяжении всего 1810 года дивизия проводила операции вокруг Кадиса. В 1811 году 1-й корпус всё ещё находился у Кадиса. Англо-испанская армия под командованием генералов Грэма и Пеньи совершает марш против французов, чтобы заставить их снять осаду. Противники сходятся в битве при Барросе 5 марта 1811 года. Военные действия начинаются с захвата дивизией Рюффена высот у Барросы, что позволяет установить французам здесь свою артиллерию. Британский батальон пытается вернуть себе позицию, и сковав людей Рюффена, позволяет подойти бригаде Дилка к месту боя. Завязывается ожесточённая мушкетная дуэль. Виктор направляет Рюффену подкрепление. Но попав под сильный перекрёстный и меткий огонь англичан, французы понесли большие потери. Были смертельно ранены генерал Рюффен (был взят в плен полковником Брауном, и умер в Портсмуте 15 мая) и начальник штаба дивизии, полковник Пельгар (умер 7 марта). Также погиб командир 96-го полка, Жан Менгарно. После гибели Рюффена генерал Барруа исполнял обязанности командира дивизии.