仪和李光弼部从河北召至灵武，并联合回纥，召集朔方节度使15州兵马，开展大规模的反攻，并约定「克城之日，土地、士庶归唐，金帛、子女皆归回纥。」至德二载（757年）正月，安禄山被其子安庆绪杀死。九月，郭子仪率朔方军骑兵和回纥骑兵收复长安，十二月太上皇玄宗回到长安。干元元年（758年）九月，肃宗调动各路大军进攻围攻相州安庆绪，命宦官鱼朝恩为观军容宣慰处置使，总揽全局。玄宗回到长安后，厌恶张皇后与李辅国，常劝肃宗不要宠信他们。李辅国趁机构谄，说玄宗预谋复辟，故软禁玄宗于西宫甘露殿，并流放高力士到巫州。上