為義をかくまっていた義朝だが、鎌田の進言にしたがって勅命のとおりに父を斬ることを決意する。鎌田と波多野義通は七条朱雀に為義を連れ出し、死罪の勅命がくだったことを告げる。為義は涙にくれる。父を見殺しにする義朝を恨み、いっぽうでは彼が父殺しとして世間から非難されることを恐れ、またおさない息子たちの行く末を心配しつつ、最後には南無阿弥陀仏を唱えながら静かに首を打たれる。このころ、頼長の死が天皇方に伝わる。信西はそれを確かめるため、遺骸を掘り起こさせる。頼長の遺骸は埋め戻されることもなく、路傍に捨てられる。この酷い仕打ちに、頼長の息子である師長たちは出家することを志すが、いつか再起をはかるべきであるという祖父忠実の言葉に思いとどまる。この厳しい処罰は崇徳にもおよび、彼は讃岐に流されることに決まる。多くの供をつれていくことも、父鳥羽法皇の墓前に赴くことも許されず、流罪の憂き目にある。流された讃岐でも厳重に監視されることになり、崇徳は光源氏・在原行平・淳仁天皇(淡路廃帝)ら、かつて流離にあった人々に自身を重ね合わせて、我が身の不運を思い嘆く。このとき崇徳の御所の焼け跡か「夢ノ記」が発見される。「夢ノ記」とは皇位に異変があるたびに現れるものである。ついで、崇徳についた貴族たちや、頼長の息子たちも流罪になる。師長は忠実に書簡を贈って自身の嘆きをうちあける。世の人々はこのあまりに過酷な刑罰、とくに老齢の為義を処刑したことをいぶかしむ。その不審は、処刑を命じた天皇にまで及んでいる。鳥羽法皇の旧臣たちは、この悲劇を思い、とりわけ崇徳が讃岐に流されたことについて、玄宗皇帝などと重ね合わせて、いかに帝でもあっても因果から離れることはできないと嘆息する。信西は忠実までも流罪にしようとするが、これは忠通が拒否したので頓挫する。為義の息子のなかで唯一逃げ延びていた為朝も、温泉で養生しているところを平家貞に発見され、丸腰のところを捕らえられてしまう。為朝は死罪となるべきところだったが、罪を減じられて、腕の筋を切られ、弓を引けないようされたうえで伊豆に流される。しかし、自分を運ぶ輿を踏み抜いてみせるなど、為朝の剛勇ぶりはあいかわらずであった。