南圻西三省，潘清简绝食而死。次年（1868年），潘帘和弟弟潘荪（原名潘清荪）在永隆招集义兵，反抗法国入侵。潘帘不敌法军，后退入平顺省，跟随阮知方前往北圻河内。嗣德二十六年（1873年），法军攻佔河内，潘帘兄弟被抓。次年（1874年），越法签订《第二次西贡条约》，潘帘兄弟被法军释放。随后奉诏前往京城顺化。潘帘在顺化期间，和范富庶、裴殷年交往密切，凭借文采显名。后被任命为翰林院修撰。嗣德三十四年（1881年）二月，潘帘密折陈奏开商开矿事宜，但嗣德帝认为意见虽好，但“言易行难”。四月，嗣德帝命潘帘前往广安