外课程特约讲师、学海书楼讲师，及树仁学院文史系高级讲师，任教骈文、诗选及应用文。名人如郭咏观医生、许灼勋，以及何佐芝孙女何凤莲等，均曾师从于他。潘氏于1976年与潘新安和梁简能等创立愉社，发扬国学，提倡风雅，于1998年解散。期间社友约有70多位，李汝大也是其中之一。潘氏文风放任自然，有李白之风。其诗歌与香港着名诗人、学者吴天任齐名，人称「南潘北吴」。作品有《余庵诗草》、《余庵诗余》、《余庵文存》、《余庵词》、《余庵游草》等。今渣甸山「适苑」遗址外墙，尚有潘氏题字遗迹可考。