Toba forzó a uno de sus hijos, Sutoku, a abdicar en favor del hijo de una de sus consortes, Konoe, y después de la muerte de este, el Emperador Sutoku tenía la esperanza de que uno de sus hijos ocupara el trono pero sus expectativas se vieron frustradas cuando otro de sus hermanos ocupó el trono, el Emperador Go-Shirakawa.