宋右丞相赵雄十世孙。幼时聪慧，六岁能读经，嘉靖十四年（1535年）成进士，初任庶吉士，授翰林院编修；王敏肃对他十分称赞。后任右春坊右中允，管司业事，嘉靖二十九年（1550年）陞任左春坊左谕德，兼河南道监察御史。之后因得罪严嵩，而被贬为贵州荔波县典史，量移徽州通判，后历任吏部文选司主事、郎中，光禄寺少卿、通政使司参议、右通政，光禄寺卿、户部右侍郎，皆在南京。嘉靖四十年（1561年）始入为户部右侍郎，又因得罪严嵩遭到罢职，隆庆改元，起用为吏部侍郎兼翰林院学士，掌詹事府事。上幸学，暂掌祭酒事，出为南京礼部尚书；召