熙十七年（1048年）复召为南府宰相。21年（1052年）秋，祭祀仁德萧皇后，兴宗与儒臣赋诗，杜防被评为第一、被赐金带。道宗即位，杜防我大行皇帝山陵使。清宁二年（1056年）拜右丞相，加尚父。死后谥元肃，赠中书令。
子.杜公谓，辽道宗时曾任枢密直学士。大安元年（1085年）为参知政事，后拜南府宰相。