宪宗后，指出故彰义节度使吴少诚死后，不应由吴少阳继任，并归咎于宰相李藩。宪宗不悦，二月，罢当时还任中散大夫的李藩为守太子詹事。几个月后，宪宗又开始怀念李藩，召他于殿中议事。十月，李藩出任华州刺史、潼关防御、镇国军使兼御史大夫，但未及离京即于次月去世，赠户部尚书，谥贞简。时人认为，李藩能力不及裴垍，严肃不及韦贯之，但为人清正循规，和裴、韦也是一流人物。