外，出任澳洲专员。返回英国后，卡灵顿勋爵获聘任至麦美伦政府内出任第一海军大臣。至1963年10月亚历克·道格拉斯-休姆爵士接手组阁后，他改任不管部大臣兼上议院领袖之职。不久，在1964年10月，由于保守党在大选中失利，卡灵顿勋爵亦被迫去职，并成为了上议院的反对党领袖。后来在希思的带领下，保守党终在1970年大选后重新上台，而卡灵顿勋爵则获委任为国防大臣，后在1974年1月转任能源大臣，一直至同年3月保守党政府再次垮台为止。另外，在1972年至1974年期间，卡灵顿勋爵亦曾任保守党主席。保守党沦为在野