宮騒動、宝治合戦に続く執権・北条時頼による得宗専制体制強化の過程で、有力御家人の勢力が削がれていく中でも、父の義氏は幕府宿老として重んじられていたが、建長3年（1251年）12月、泰氏は36歳で無断出家してしまい、幕府の許可無く出家したことを咎められ、自身が拝領した下総埴生荘を没収されて足利の本領に閉居した。
在经历宫骚动（日语：宫騒动）和宝治合战后，执权时赖强化得宗的专制统治，多数御家人的势力均被削弱，但是泰氏父亲义氏仍然作为幕府宿老而受到重用，但是在建长3年（1251年）12月，36岁的泰氏未经幕府许可自行决定出家，最终幕府没收他在下总埴生庄（现千叶县印旛郡内）以作惩罚，泰氏只好隐居足利的本领，其后亦再没有参政。