赐白玉带以示殊礼。四年（830年），李载义打败了进攻卢龙的奚人，执其大将二百余人，俘获其帅茹羯送往长安。六月，以检校司徒加守太保。五年（831年）正月，当李载义在球场和朝廷使者饮宴时，后院兵马使杨志诚兵变，李载义及其子李正源被迫逃往相邻的义武镇的易州，上言愿率妻儿入朝。杨志诚自称留后。文宗本想出兵恢复李载义的地位，但宰相牛僧孺指出朝廷已经无力再进行这样的军事行动，且李载义当初夺取卢龙也并非正道，今日的杨志诚正如当初的李载义。文宗于是允许杨志诚接管卢龙，虽然只任他为兵马留后；派使者去太原迎李载义到长安