这时却擅离职守。高句丽趁乱发动进攻占领了土山，并使其成为安市城防守的武器。唐太宗一怒之下，公开处死了傅伏爱并下令对土山进行疯狂攻击。不过打了三天也没拿下来。李道宗于是赤脚向李世民请罪。不过李世民宽恕了他。随着冬天的临近，唐的供给也开始匮乏。645年九月十八癸未日（10月13日），唐太宗下令撤退。
撤退.李世民在从辽东撤退的时候，强迫辽东城和盖牟城的居民迁往唐的地域内。据《资治通鉴》和《三国史记》记载，大约有7万高句丽人被迫从辽东迁入唐。李世民在过辽河的时候，遇到了泥沼。长孙无忌