到《汉书》说杜缓兄弟「五人至大官，唯中弟钦官不至而最知名」，他也会读出来讽刺自己的景况。其后萧子范获授命为宣惠武陵王萧纪的司马，唯他不就任，转任中散大夫、光禄卿、廷尉卿；外任戎昭将军、始兴内史；回都后再任职太中大夫，迁秘书监。梁简文帝继位，征召他为光禄大夫，加金章紫绶，不过因为侯景军队接近没有拜授。同年（550年）葬简皇后，朝廷派他和张缵写下哀策文，简文帝看后说：「现在葬礼虽然简略，但这文章不减从前啊。」赏赐米千石，很快因病在招提寺僧房去世，虚岁六十四。侯景被平定后，梁元帝追赠金紫光禄大夫，谥文，有文集