谷之战，平家又被打败而逃到赞岐国屋岛（位于今香川县高松市）与长门国彦岛（位于今山口县下关市）。源赖朝命其弟源范赖率3万骑兵进军山阳道，以渡过九州，阻断平家军后退的道路。不过，因为源范赖军的兵粮不足，且平家军拥有优势的水军抵抗，使得进军无法顺利进行。源义经见到此一情况，向后白河法皇取得了追讨平家的认可，并压制了京都内公家的反对意见，向屋岛进军。1185年（元历2年/寿永4年）2月屋岛之战，义经奇袭并攻下了屋岛，平家总大将平宗盛带着安德天皇在濑户内海辗转逃亡，最后逃到了彦岛。同时，源范赖成功地调到了兵粮