，从没有泄露过禁中语。他说：“在我年幼时曾读过《汉书》，上面说孔光不言温室之树，我非常钦佩他的风度。”退朝后，常邀请才俊之士到他家里讨论文学；宴集园池，品评文坛，切磋书法。639年，杨师道任中书省的首长中书令。643年，太子李承干谋反，同谋的赵节是桂阳公主和前夫赵慈景所生的儿子。杨师道负责处理这个案子，他力图为继子赵节说情，触怒了唐太宗，他被解除中书令职务，为吏部尚书，赵节也被处决。唐太宗亲自去姐姐家，桂阳公主“泣谢子罪”，唐太宗哭着说国法为重不能徇私，所以辜负了姐姐。由于杨师道出身高贵，与世家