影响力则大幅下降。治承2年（1178年），平德子诞下言仁亲王（后来的安德天皇），并且获册封为皇太子，清盛亦开始对上皇採取和平共存的政策。同年，平盛子和重盛先后死去，上皇与基房趁机联手试图弱化清盛的势力，盛子保有的摄家领由上皇接管，平维盛从重盛处继承的越前国也被院近臣接手。其后，清盛与宗盛率领数千兵马上洛，逼使关白基房和权中纳言松殿师家离任，由近卫基通就任关白和藤氏长者，同时促使上皇停止院政，成功一扫反对势力，是为。实际掌控朝廷的清盛幽禁了上皇，同年平家一门控制了萨摩国、筑前国、长门国、周防国、伊予国、备中