到两年他就离开了长安。据说是因为他作的《清平调》得罪了当时宠冠后宫的杨贵妃（因李白命“力士脱靴”，高力士引以为大耻，因而以言语诱使杨贵妃认为「可怜飞燕倚新妆」几句是讽刺她）而不容于宫中。天宝三年（745年）「恳求还山，帝赐金放还」，离开长安。后来他在洛阳和另两位着名诗人杜甫、高适相识，并且成为了好朋友。
晚年.天宝十一年（752年）李白年届五十二岁，北上途中游广平郡邯郸、临洺、清漳等地。十月，抵幽州。初有立功边疆思想，在边地习骑射。后发现安禄山野心，登黄金台痛哭。不久即离幽州南