尔顿选择退出政坛，结果其议席由托利党政治家乔治·坎宁夺得，至此塔尔顿出仕下院前后近22年。
晚年生涯.塔尔顿退出下院后逐渐淡出政坛，在1814年，他与妻子迁入位于什罗普郡的伦沃丁府（Leintwardine House，今属赫里福德郡），过着平静的退休生活。到1815年1月，英廷决定大举向曾参与拿破崙战争的将士授勋，但当中不包括曾参与美国独立战争的将士。塔尔顿感到心有不甘，遂致函时任陆军及殖民地大臣巴瑟斯特勋爵（Lord Bathurst）要求获得平等待遇，但没有获得正面答覆。塔尔