册封的行为十分震怒。9月，源义经奉源赖朝之命，娶源赖朝臣下之女为妻（后来称为「」）。一般认为，源赖朝是想利用乡御前来刺探及监视源义经，但就结果而言，乡御前并没有为源赖朝所用，而是真心地跟随着源义经。
屋岛之战.1184年9月，源赖朝刻意冷落源义经，只派源范赖征讨平家。源范赖为绕到平家背后，取径山阳道，但为平家识破，源范赖大军遭平行盛截断，关门海崃亦为平知盛封锁，陷入兵粮不继的困境。1185年1月，源赖朝迫不得已，命源义经领军前往救援。2月，源义经自京都起程前往摄津渡辺港，整备军