之事连坐而下诏狱除名。刘瑾被诛，复官，晋升爲右佥都御史，巡抚宣府。调任山东巡抚，平定曲阜盗乱等。升任工部右侍郎，总理河道，赈济顺天府等地饥荒。明世宗即位后，进工部左侍郎，掌管部事，随即升工部尚书。在任期间减少皇宫以及各地营造与工程。因为奸臣弹劾，而与秦金一同致仕。嘉靖十一年（1532年），恢复官职，未上任而去世。赠太子太保，谥庄靖。
家族.曾祖赵顺茂；祖父赵敏，知县；父赵常，前教谕。母邓氏；继母陈氏。