警，有才名”，以荫袭封邺侯，贞元中入仕为太常博士，依附裴延龄，陷害阳城和陆贽。又骚扰尊师翰林学士梁肃的遗孀，因咏《冬柳》被贬为随州（今湖北）剌史。在随州时，建南岳书院，后改处州刺史。元和十二年（817年），重修栝苍城墙与城门。元和十五年（820年），韩愈在袁州（今江西宜春）任刺史，李繁请他为孔庙作《处州孔子庙碑》。宝历二年（826年），入朝为大理少卿，弘文馆学士。再出为亳州刺史，州境有贼，李繁出兵加以诛除。时议以为李繁杀伐过甚，又事先不告知节度使，涉于擅兴之罪。朝廷遣监察御史舒元舆调查，元舆与李繁有旧怨