改任太常卿，京兆尹敬昕贬为郴州（在今湖南郴州）参军。武宗得知李珏和杨嗣复不支持他继位，所以罢黜了他们，九月召回李党领袖前宰相李德裕，任命为首席宰相。韦温感慨：“杨三、李七如果听我的话，岂至如此啊！”李珏被认为刘弘逸、薛季稜之党，被遣出长安任检校兵部尚书、桂州刺史，充桂管防御观察等使。魏谟也因被二人连累而遭贬。仇士良深恨刘弘逸、薛季棱，不停弹劾他们。会昌元年（841年）三月，武宗相信仇士良的弹劾，命二人自杀，派宦官去桂州和潭州，命李珏和正被贬为湖南观察使的杨嗣复自杀。杜悰劝武宗不要轻杀大臣，李德裕、再次拜