Later Zhou
En 960, le général Zhao Kuangyin renverse les Zhou postérieurs et fonde la Dynastie des Song. Étant un ancien ami de Zhao, Pan reçoit des missions importantes pour le nouvel empereur et ne le déçoit pas. Au début, Pan persuade le gouverneur militaire Yuan Yan de se soumettre aux Song, puis supervise les armées dans la répression de la révolte de Li Chongjin dans le Huainan. Resté en arrière à Yangzhou après la victoire, il est ensuite envoyé à Qinzhou (秦州, l'actuel Xian de Qin'an, en Gansu), où il devient le commissaire impérial de la milice locale.