位小而不言；仕王世充，为何不极谏？”杜淹回答：“亦有谏，但王世充不从。”太宗说：“王世充若修德从善，当不灭亡；既然他无道拒谏，卿怎么能免祸？”杜淹哑口无言。太宗又问：“卿在今日，为宰相之一，会陈辞极谏吗？”杜淹回答：“臣在今日，必尽死无隐。当年，百里奚在虞国时，虞国亡；在秦国时，秦国霸，臣窃自比之。”太宗笑。当时，杜淹兼二职，而无清廉之誉，又素与长孙无忌关系不好，被当时舆论批评。有病的时候，太宗亲自到他家慰问，赐帛三百匹。贞观二年（628年）杜淹去世，赠尚书右仆射，谥号襄。子杜敬同袭爵，官至鸿胪少卿。杜敬同