北条政子
『玉葉』(正治2年正月2日条)によると、他の武士たちに嫉まれ、恨まれた景時は、頼家の弟実朝を将軍に立てようとする陰謀があると頼家に報告し、他の武士たちと対決したが言い負かされ、讒言が露見した結果、一族とともに追放されたという。『愚管抄』では景時滅亡と後の頼家殺害の因果関係を強く指摘している。
頼家は遊興にふけり、ことに蹴鞠を好んだ。政子はこの蹴鞠狂いを諌めるが頼家は聞かない。訴訟での失政が続き、御家人の不満が高まっていた。更に頼家は乳母の夫の比企能員を重用し、能員の娘は頼家の長子・一幡を生んで、権勢を誇っていた。比企氏の台頭は北条氏にとって脅威であった。
建仁3年(1203年)、頼家が病の床につき危篤に陥った。政子と時政は一幡と実朝で日本を分割することを決める。これを不満に思う能員は病床の頼家に北条氏の専断を訴えた。頼家もこれを知って怒り、北条氏討伐を命じた。これを障子越し聞いていた政子は、使者を時政に送り、時政は策を講じて能員を謀殺。政子の名で兵を起こして比企氏を滅ぼしてしまった。一幡も比企氏とともに死んだ(比企能員の変)。頼家は危篤から回復し、比企氏の滅亡と一幡の死を知って激怒し、時政討伐を命じるが、既に主導権は北条氏に完全に握られており、頼家は政子の命で出家させられて将軍職を奪われ、伊豆の修善寺に幽閉されて翌元久元年(1204年)に死去した。