江苏省苏州府吴县（今苏州市）人，祖籍安徽歙县，为状元潘世恩孙，曾任晚清政府要职，赐谥文勤。
生平.道光二十六年（1846年）参加顺天乡试挑取誊录。道光二十八年（1848年）获恩赏为举人。道光三十年（1850年）被选任为国子监学正学录。咸丰二年（1852年）考上壬子恩科第一甲第三名探花，授职翰林院编修。后左迁侍读，入值南书房，任日讲起居注官。历任侍读学士、光禄寺卿、左副都御史、工部侍郎、户部侍郎、大理寺卿，礼部右侍郎、工部尚书、刑部尚书、兵部尚书、军机大臣。咸丰十年（1860年），上