迈克尔·富特接任工党党魁。在1983年，卡拉汉得到了「下院之父」的称号，这称号为在下院任议员时间最长者独得，另外在1983年，他和富特也是曾参与1945年大选而仍在世的人（但富特由1955年至1960年都不是下议院议员）。到了1987年，卡拉汉获授嘉德勋章，并于同年放弃竞逐1987年大选，告别长达42年的下议院议员生涯。不久以后，他又被册封为加地夫的卡拉汉男爵，晋身到上议院。卡拉汉的妻子奥黛丽·卡拉汉曾自1969年至1982年出任大奥蒙德街医院（Great Ormond Street Hospital