惩罚过轻，于是九月又贬持节贺州诸军事、贺州刺史。后又迁抚州刺史。
后期仕途和过世的分歧记载.李回后来的生涯和经历在两唐书中自此出现了分歧。据《旧唐书》，宣宗年间的主要宰相白敏中、令狐绹卸任后，大约在白敏中第二次拜相任期结束时即唐懿宗年间的咸通二年（861年），李回被召回长安任兵部尚书，又再次被遣出为成都尹、西川节度使，在那里过世，赠司徒，谥文懿。但《新唐书》称李回卒于抚州，大中九年（855年），唐宣宗追复他为湖南观察使，赠刑部尚书。《唐摭言》载：太和初年李回任京兆府参军时，不送