因而以剑南西川节度、光禄大夫、检校吏部尚书、同平章事、成都尹、上柱国、陇西郡开国公、食邑二千户被贬为湖南观察使、潭州刺史。当月，李商隐曾为他作《为湖南座主陇西公贺马相公登庸启》以贺新任宰相马植。李回不久又以湖南都团练观察处置等使、光禄大夫、行潭州刺史兼御史大夫、上柱国、陇西郡开国公、食邑二千户被贬为行太子宾客空衔（当时并无皇太子），分司东都洛阳。有给事中反对，认为惩罚过轻，于是九月又贬持节贺州诸军事、贺州刺史。后又迁抚州刺史。
后期仕途和过世的分歧记载.李回后来的生涯和经历在两唐书