后，降落乙组。吕乐提早退休潜逃离开香港后，五一七球队交由邓家雄负责管理。1996–97年，五一七获得香港乙组足球联赛季军，由于亚军的港会放弃升班，五一七遂以后补资格，阔别三十三年后重返甲组作赛。不过，由于实力所限，五一七于1997–98年，香港甲组足球联赛8 支球队中位列包尾，宣告降班，只角逐了一季便返回乙组作赛。五一七于2008–09年，邀请前香港飞人杜韦诺加盟，最终在香港丙组(甲)足球联赛，以 19 战 10 胜 6 和 3 负得 36 分，以第 5 名完成赛季。