A una determinada hora los tres grupos comenzaron a acercarse a la fortaleza encasillándolos; en la fortaleza había alrededor de cinco mil personas lideradas por Taira no Tadanori, hermano de Kiyomori y Taira no Shigehira, hijo de Kiyomori.