为宰相；若尽灭奚、厥，将以何官赏之？”晚年军纪废弛，兵骄将惰。开元二十六年（738年），部将赵堪、白真陀罗假传其命令，逼迫平卢（治今辽宁辽阳）军节度使乌知义率所部袭击奚人。奚反败为胜，唐军为敌所乘，英杰克勤败死。他被贬为括州刺史。不久疽发背而卒。一说高适《燕歌行》即为讽刺他所作，也有人说是讽刺安禄山。