事上出现纷争，两人事后更在1809年展开决斗，结果两人都被迫辞去政府职务。三年后，即1812年3月，卡苏里获时任英国首相斯宾塞·珀西瓦尔委任为外务大臣，由此展开其长达10年的外相生涯。而在同年5月，斯宾塞·珀西瓦尔在国会大楼遇刺身亡，卡苏里遂兼任下议院领袖一职。在外务大臣任内，卡苏里于1814年3月在休蒙成功促使英国、奥地利帝国、俄罗斯帝国和普鲁士王国结成日后所谓的「四国同盟」，在签订《巴黎和约》的谈判以及维也纳会议中施加大国的影响力。此外，在维也纳会议中，卡苏里除对俄罗斯帝国向西扩张的意图加以反对外，