龙门县知县。十九年，任东莞县知县。二十一年，任南雄直隶州知州。二十六年，任四川省叙州府知府。二十七年，任广东督粮道。二十九年，任广东按察使，同年改广东布政使。咸丰二年（1852年），任河南巡抚，同年署理广东巡抚。七年，署理钦差大臣，九年，接替王庆云署理两广总督。1858年1月，自英法联军入侵广州后，为了恢复城内秩序，逮捕两广总督叶名琛，组建“联军委员会”。羁留于观音山的柏贵不久即被英法总局复职并一同管理广州全城。柏贵也成为了中国第一位被西方殖民者操控的傀儡。为维持傀儡地位，柏贵不断说服同僚放弃抗战主张，