从此，他再也没有参与半岛战争，因为他与亨利·韦尔斯利（Henry Wellesley，后为考利男爵）的妻子夏洛特女爵（Lady Charlotte）通奸，而夏洛特又是伊比利亚半岛英军总指挥亚瑟·韦尔斯利爵士（Sir Arthur Wellesley，后为威灵顿公爵）的弟媳。阿克斯布里奇在1809年之后、1815年之前，只参与过瓦爾赫倫島戰役。1810年，他与第一任妻子离婚，正式与夏洛特结婚。