唐肃宗罢免崔光远，任命严武为剑南西川节度使。宝应元年（762年），唐玄宗、唐肃宗相继逝世，唐代宗征调严武入朝修建二帝陵寝，高适代严武为剑南西川节度使、成都尹。广德元年（763年），吐蕃进犯陇右，高适率兵出吐蕃南境，牵制其力，不成功。十二月，吐蕃反兵陷松（今四川松潘）、维（今四川理县）、保（今四川理县新保关）三州及云山新筑二城，高适无法救援，剑南西山诸州也被吐蕃占领。广德二年（764年）正月，严武再次入川任剑南节度使，高适被召还京，任刑部侍郎、左散骑常侍。一直封到渤海县侯，食邑七百户。永泰元年正月二十三日