套的公文一概称为“春谷笔”。嘉靖十四年（1535年），升为大理寺右寺副，不久又升为右寺正，管理刑狱公正无私，不徇私情，被当权者所厌恶。嘉靖十八年（1539年），升为陕西布政司左参议，任上积极打击贪污腐败，又改革税制，使富人多纳税，穷人少交。因得罪内阁首辅夏言，嘉靖十九年（1540年）即罢官归里。嘉靖三十六年正月初八（1557年2月6日）去世，年仅四十四岁。
家庭.曾祖父潘政、祖父潘璟、父亲潘承爵都为山西都司宁化千户所正千户，母江氏。妻子王氏，是兵部尚书王琼的孙女。潘高为长子，二弟潘