Yoritomo había sido exiliado por Taira no Kiyomori después de la Rebelión de Heiji.