李渊是旧交，地位反而在他之上，心中不平。每次廷议，就故意和裴寂作对，两人于是产生了隔阂。刘文静有一次和其弟通直散骑常侍刘文起宴饮时，酒后怨言，拔刀击柱，说：“一定要杀了裴寂！”后来刘文静有个爱妾失宠，就把此事告诉了其兄，妾兄遂上告刘文静谋反。李渊让裴寂和萧瑀审讯他。刘文静说：“起义之初，我为司马，估计与长史裴寂地位相当。如今裴寂已官至仆射，居于甲第，赏赐无数。而我的官爵赏赐和众人无异。东征西讨，家口无依无託，确实有不满之心。”高祖李渊听后，对群臣说：“刘文静此言，反心甚明。”李纲、萧瑀都认为刘文静不是谋反，