その後、1796年イギリス総選挙でに鞍替えして再選、1802年イギリス総選挙でに鞍替えして再選、第2次小ピット内閣(1804年-1806年)を支持したが、次の(1806年-1807年、グレンヴィル男爵内閣)で王室会計長官を解任されたため野党に回り、同年の総選挙でグレート・ベッドウィン選挙区に鞍替えして再選した。