平頼盛
資盛は拝謁を許されず、26日早朝に都を離れた。28日、後白河院は平氏追討・安徳帝の帰京・神器の回復の方策を立てるため、公卿議定を開いた。この議定では、頼盛の処遇も議題に上がった。吉田経房は「帰降者を成敗した例はなく、頼盛は都落ちには同調せず、一族であったため一時的に行動を共にしたに過ぎない」と発言し、他の出席者も賛同した。しかし義仲軍が都を占拠している状況では頼盛も処分を免れることはできず、8月6日に他の平氏一門とともに解官された。
解官後の頼盛は八条院の庇護を受けながら、密かに鎌倉の源頼朝と連絡を取っていたと思われる。それは、後白河院の意向を受けてのことだった可能性もある。後白河院は平氏追討の功績について、第一を頼朝、第二を木曾義仲とするなど義仲を低く評価し、頼朝の上洛に期待をかけていた。8月14日、義仲は後継天皇に自らが擁立した北陸宮を据えることを主張して後白河院の怒りを買う。そして後白河院が義仲の頭越しに寿永二年十月宣旨を頼朝に下したことで、両者の対立は決定的となった。都は極めて不穏な情勢となり、10月20日、頼盛逐電の情報が流れて騒ぎとなった。 閏10月になると、親鎌倉派である一条能保(頼朝の義弟)・持明院基家(頼盛の娘婿、能保の叔父)も危険を察知して鎌倉に亡命した。
解官の理由は、保盛については五節の節会で舞姫参入・御覧の儀式の勤めを、後白河院の指示に従わず毎度怠ったこと、頼盛については、3月26日の滋子の代始めの入内に奉仕しなかったこと、休暇願いを出さずに無断で厳島神社に参詣したこと、鎮西を知行していたにもかかわらず大嘗会関係の課役を勤めなかったことだった。高倉天皇の即位や妻の滋子に関することであったため、後白河院の怒りは激しいものがあった。
処罰はそれだけにとどまらず、12月には頼盛の家人6名が解官される。彼らは武官職にある軍事貴族であり、頼盛の軍事的基盤は粉砕されてしまった。この時期、重盛は病により健康がすぐれず権大納言を辞任している。解官の背景には、独自の動きを見せていた頼盛を完全な統制下に置くことで、重盛の地位を守ろうとする清盛の意思が介在していた可能性もある。
頼盛の失脚は一年の長きに渡り、出仕が許されたのは嘉応元年(1169年)11月だった。
京都に戻った頼盛は、再び朝廷に出仕する。12月16日には後白河院が八条室町の頼盛邸に御幸して、摂政・近衛基通の春日詣の行列を見物している。頼盛の地位は安定したかに見えたが、法住寺合戦を前に京都から逃亡したことや鎌倉の厚遇を受けたことで院近臣の反発を買い、朝廷内で孤立したと推測される。12月20日、頼盛は権大納言を辞任、光盛を近衛少将に任じることを奏請した。
翌元暦2年(1185年)3月、平氏一門は壇ノ浦の戦いに敗れて滅亡する。一門の滅亡を頼盛がどのように思ったかは定かでないが、それから程なく頼朝に出家の素懐を申し送って了承を得ると、5月29日、東大寺で出家して法名を重蓮と号した。翌月、後白河院は播磨国・備前国を院分国として、知行権を頼盛に与えた(『玉葉』6月30日条)。この措置は頼朝の要請によると見られ、頼盛は藤原実明を播磨守、光盛を備前守に推挙した。
これ以降、頼盛は八条室町の自邸に籠居して表舞台にほとんど姿を見せなくなる。文治2年(1186年)正月に後鳥羽天皇の方違行幸が行われた時、八条院の邸宅が地震により破損が著しく修復も済んでいなかったため、隣の頼盛邸に白羽の矢が立ったが頼盛は「家に穢れがある」と称して固辞した。あるいは、すでに健康を害していた可能性もある。
6月2日、頼盛は54歳で死去した。この頃、幕府の京都守護・一条能保は義経の捜索に没頭していた。九条兼実も頼盛の死を日記に記すことはなく、その死は周囲から忘れ去られたひっそりとしたものだった。