节度使韦陟会合于安陆，结盟誓师讨伐李璘。高适尚未到达广陵（江苏扬州），李璘已经败死，于是他指挥淮南部队参与援救睢阳的行动。干元元年（758年），因为人正直敢言，得罪了权宦李辅国，高适被贬为太子少詹事，分司东都。干元二年（759年）五月，升任彭州刺史。上元元年（760年），调任蜀州刺史（四川崇州）。在入蜀赴任后，他得知杜甫也在剑南，便写下了《赠杜二拾遗》诗。当时杜甫未能及时回复，直到大历五年（770年），杜甫将死之时，才写了《追酬故高蜀州人日见寄》一诗。高适为缓解百姓劳弊、专心应对吐蕃威胁，上奏请求合并剑