山白鹿洞，十九年（803年）移居嵩山。唐宪宗元和八年（813年）以左拾遗征，不至，移家洛阳。九年上书，拜着作郎。十一年迁右补阙，累历考功员外郎。元和十五年（820年）十一月，定京考官，他不避权幸，曾上书言宰臣萧俛等平庸误国，其性情粗放，令权臣所顾忌。穆宗长庆元年（821年）宰相杜元颖等奏贬为虔州（今江西赣州）刺史，任上奏还信州所移的税钱二百万贯，免税米二万斛，又裁减役夫一千六百人，不满一年，移江州刺史，累迁给事中。敬宗宝历元年（825年）鄠县县令崔发因误辱中官下狱，李渤替崔发鸣不平，反被诬为同党，又出京