封李元吉为镇北将军、太原道行军元帅，封齐王，为并州总管。武德二年，刘武周攻并州，于是高祖派右卫将军宇文歆助李元吉守之。李元吉凶勐好兵，在边地久了，愈发骄侈。乳母陈善意因劝阻他而死。李元吉好畋猎，称“我宁三日不食，不能一日不猎”，纵左右抢夺百姓。辅佐他的宇文歆劝谏无效便向皇帝李渊上表称李元吉游猎扰民，甚至当街射箭，以看人躲箭为乐，百姓怨恨。李元吉因而被免，又说服元老在宫门前请命，不久即复职。刘武周率五千骑至黄蛇岭，李元吉派车骑将军张达率五百步兵迎战，张达称军队少，李元吉坚持派他出战，全军覆没。张达怀恨，引刘武