二载（757年）正月，安禄山被其子安庆绪杀死。九月，郭子仪率朔方军骑兵和回纥骑兵收复长安，十二月太上皇玄宗回到长安。干元元年（758年）九月，肃宗调动各路大军进攻围攻相州安庆绪，命宦官鱼朝恩为观军容宣慰处置使，总揽全局。玄宗回到长安后，厌恶张皇后与李辅国，常劝肃宗不要宠信他们。李辅国趁机构谄，说玄宗预谋复辟，故软禁玄宗于西宫甘露殿，并流放高力士到巫州。上元元年（760年），玄宗被迫迁居西内太极宫，并于宝应元年农历四月初五日（762年5月3日）病逝于西内的甘露殿。不久肃宗也一病不起，颁布诏令让太子