前为无线电视部头合约男艺员。其「潘翁」一花名来自1980年潘志文与着名导演吴回的一次谈话─对方认为潘演活了《变色龙》中的角色，因此与他开玩笑说他配称「潘翁」。潘于2013年重回无线电视四年内，由于先后在《以和为贵》、《EU超时任务》、《幕后玩家》以及《再创世纪》四剧中饰演患上中风的角色，所以被网民戏称为无线「御用中风王」。他曾跟许佩学习唱歌。
背景.潘志文自小父母离异，需要寄人篱下。童年时曾在澳门居住，毕业于当地的左派学校银业小学（即现在与孔教中学合併的教业中学）。他由母亲一方抚养