但后因文化大革命而下落不明；四位姐姐嫁人离家后，母子靠着微薄房租相依为命。高二时到报社打工贴补家用，毕业后本打算到台湾读大学，但因家境不允许而作罢。冯淬帆年轻时曾就读同济中学，亦曾参与粤剧戏曲演出。1965年他加盟丽的电视，主演过几部剧集后，获电影导演楚原邀拍首部电影《黑玫瑰之三之红花侠盗》，因而投身影坛，自己亦成为楚原的首徒。1968年冯淬帆加入无线电视，主演该台首部长篇电视剧《梦断情天》，并与谭炳文、姜中平兼任配音。七十年代他多集中拍剧，在剧中多演出脾气暴躁的老粗。1976年他转投佳艺电视任节目监制，