当时西川附近，一个吐蕃将领投降，李德裕趁机收复了重镇维州（今四川甘孜州东部）。李德裕大喜，立刻上书朝廷，以为自己立下大功，立刻飞黄腾达。但是宰相牛僧孺却对唐文宗说：“李德裕收复了一个维州，算不了什么；跟吐蕃搞坏关系，那才不划算呢！”牛僧孺还要唐文宗下诏，敕命李德裕将维州还给吐蕃，李德裕非常愤怒。后来，到了唐武宗即位，牛党失势，李德裕当上了宰相。他极力排斥牛僧孺、李宗闵，把牛党的人都贬谪到南方。846年，唐宣宗即位后，对武宗时期的旧臣一概排斥，撤了李德裕的宰相职务，把李党的人全部贬谪到崖州（今海南）。