担任的下一个职位是英联邦关系大臣，两年后，他又兼任殖民地大臣，直到1964年保守党政府下台。这段时期中，他给予了几个殖民地独立，并代表英国对东非一些新的独立国家之间军事冲突作出了反应。1964年保守党下台后，桑兹留在了影子内阁里，直到1966年被爱德华·希思解雇。在罗得西亚引发的争端中，桑兹坚决地支持了伊恩·史密斯。1970年大选中保守党大胜，却并没有给予桑兹职位，而是让他担任英国驻欧洲委员会及西欧联盟代表团的领导。1972年，桑兹宣布退休，次年，他获得了名誉勋位。1974年，桑兹从议会退休，被授予