服西域，即任命其为使持节、散骑常侍、都督玉门以西诸军事、安西将军、西域校尉，封顺乡侯，但因前秦于淝水之战后国内大乱而道路不通，未能传达。吕光本来想要留在龟兹，但是受到名僧鸠摩罗什劝阻，而且部众们也想回到中原，遂回师。
佔据凉州.太安元年（385年），吕光军抵宜禾（今新疆安西南），高昌太守杨翰告诉凉州刺史梁熙，称吕光还军必定别有所图，建议关闭天险要道，拒之于外，但梁熙没有听从。吕光最初知道杨翰的计划时曾打算不再前进，但在杜进劝告下还是继续，杨翰即在吕光到达高昌时向吕光请降。梁熙在吕光