炀帝不听。614年，杨广三征高丽，秦琼随张须陀攻打义军卢明月。615年，杨广杀右骁卫大将军郕公李浑，任李渊为河东慰抚大使，杨广北巡长城（《造离宫袁李筹谋 保御驾英雄比武》），被突厥10万骑围困于雁门(今山西代县)，李世民应募从屯卫将军云定兴前往救驾，萧瑀被贬。616年，因裴蕴谗言，苏威下狱,杨义臣剿乱回朝，杨广在宇文述的劝谏下三幸江都，奉信郎崔民象以盗贼充斥，于建国门上表，谏不宜巡幸，被卸掉下巴，然后斩杀，杨广行至汜水，奉信郎王爱仁以盗贼日盛，谏上请还西京，被斩杀，段达与元文都留守东都，李渊升为右骁卫将