红色高棉大屠杀期间，由于红色高棉对知识分子进行迫害，他隐瞒了自己曾接受过教育以及同美国存在关系的事实，将自己伪装成一名出租车司机。当柬埔寨人被迫在劳动营中劳动时，潘只得忍耐四年的饥饿和折磨，直到越南人在1978年12月推翻红色高棉的统治为止。他创造了“杀戮战场”一词，来描述在他逃离40英里（60公里）的路途上看见的受害者的死尸和骨架。他的三个兄弟和一个姐妹被红色高棉杀害。潘回到暹粒后，得知家庭中的50名成员死了。越南人任命他为村长，但他害怕越南人会发现他先前与美国之间的关系，在1979年10月3日逃到了