掌控朝廷的清盛幽禁了上皇，同年平家一门控制了萨摩国、筑前国、长门国、周防国、伊予国、备中国、伯耆国、备前国、赞岐国、阿波国、但马国、播磨国、丹后国、丹波国、淡路国、和泉国、纪伊国、伊势国、若狭国、越前国、加贺国、能登国、佐渡国、越中国、飞驒国、美浓国、尾张国、三河国、骏河国、武藏国、常陆国和上总国，共32处令制国，治承4年（1180年）高仓天皇退位，由清盛的外孙安德天皇继位，清盛亦成为实际上的最高权力者。同年，以仁王在源赖政的劝说下计划举兵反抗平家，园城寺也一同参与，可是走漏风声，赖政和其子战死，以仁王则在