任着影子外务大臣之职，任内反对工党的单方面裁减核武政策，因而获得不少支持。在1983年，工党在大选再度被保守党打败后，希利不再任副党魁，至于在1987年大选后，希利进而脱离影子内阁，到1992年更不再竞逐过去40年所佔的里兹议席，退出下院；同年获策封为终身贵族，封号则为西约克郡里德尔斯顿的希利男爵（Baron Healey, of Riddlesden in the County of West Yorkshire）。对于自己从未能出任外相，希利曾对此表示可惜；至于在工党内，不少人更评论希利是「我们从没有拥