举中失意，詹金斯也随之下野，任影子财政大臣和工党副领袖。1972年，他被威尔逊辞退，但仅一年后，他又复为影子内务大臣。1974年，威尔逊再次出任首相，他也随之为内务大臣。然而，1976年威尔逊怀疑自己患有癌症而辞去了首相一职，詹金斯也辞去了职务，仅保留伯明翰旳议席。詹金斯表示将不会再出现在英国政坛。
晚年政治.1977年，詹金斯担任欧盟委员会主席，同时辞去了下议院的议席。然而，詹金斯一直希望能重回英国任职。终于，1981年，詹金斯辞去了欧盟委员会主席一职，并于1982年当选黑尔海德