セミョーン・ヴォロンツォフ
以降はヴォロンツォフがミハイル・コンドラーティエヴィチ・マカロフ(ロシア語版)の艦隊をイギリスの港に引き止めたことも、アレクサンドル・ベズボロドコの死後に帝国宰相の任命を拒否したこともパーヴェル1世の信頼を揺るがすことができなかったが、やがてパーヴェル1世自身が親仏的な傾向を示すようになり、彼はヴォロンツォフを不適任と考えて、1800年2月にヴォロンツォフの領地を没収した。1801年にアレクサンドル1世が即位すると領地を回復したが、健康と家族の問題で1806年に辞任を余儀なくされた。以降1832年に死去するまでイギリスに住んだ。チャールズ・グレヴィル(英語版)は1829年12月3日の日記で「老ヴォロンツォフは長年大使を務め、以降もここ(イギリス)に住んだが、英語を一言も学ばなかった」と記述した。
ヴォロンツォフは『ロシア戦争についての覚書』『ロシア内務政府についての覚書』や多くの手紙、そして自伝を著した。
死後、ロンドンのメリルボーンにあるペンブルック家の墓地に埋葬された。ヴォロンツォフが住んだ通りの名前は現代では彼の姓をとってWoronzow Roadと呼ばれている。