足利义持继任将军，自己迁居新建的北山第（今鹿苑寺）隐居、督政。足利义满死后，义持迁居北山第，室町第成为别邸，直到六代将军足利义教时才迁回室町第听政、居住。1472年，八代将军足利义政在位时爆发应仁之乱，近二十多位守护大名纷纷自领国率领军队到京都加入细川胜元的东军或山名宗全的西军，近二十万军队云集京都混战，十一年后东、西两军议和、应仁之乱结束，京都经历十一年的战火被夷为平地。幕府失去对全国的统治权，日本进入战国时代，花之御所也为战火焚毁，之后，足利义政开始剥削百姓募集金钱新建了东山第并迁居该邸，抛弃了花之