Questo fu l'ultimo conflitto della Guerra d'indipendenza spagnola, dal momento che la sua storia d'amore con lady Charlotte, moglie di Henry Wellesley, gli rese impossibile continuare a prestare servizio sotto il Duca di Wellington, fratello di Wellesley. Il suo unico servizio di guerra dal 1809 al 1815 fu la disastrosa Spedizione di Walcheren del 1809, nella quale ottenne il comando di una divisione. Nel 1810 egli divorziò dalla prima moglie e si sposò con lady Charlotte Wellesley, la quale a sua volta divorziò dal marito.