Tiempo después, cuando comenzó la rebelión de Hōgen para quitarle el país al Emperador Go-Shirikawa, al cual vencieron y exiliaron a la provincia de Sanuki, en Shikoku.