（1832年），潘清简起复为翰林院检讨，充内阁行走，后迁户部员外郎，署承天府府丞，升鸿胪寺卿，充如清副使。回国后，擢升大理寺卿，兼办刑部事务，充机密院大臣。明命十六年（1835年），潘清简前往镇西城公干，回程路过平顺省，围剿当地起事蛮族而还。后改任广南省布政使，代理巡抚一职。明命十七年（1836年），明命帝打算巡视广南，潘清简上疏阻拦，声称广南当地夏禾歉收，四五月时又是农忙季节，请求暂停巡视。明命帝大为不悦，派武维新为廉访使巡视广南，查处广南弊政，潘清简因此被贬为六品属员，留广南效力。两个月后，调任内阁