人的事件中，曾经有嫌隙，富子因此也连带不喜欢义材。1491年死去、享年52岁。同年、赠従一位太政大臣。1491年义视过世后，日野富子开始谋画更换将军之事。1493年，富子与细川政元合作，废除义材的将军之位，改立堀越公方足利政知之子足利义澄当将军。（详见明应之变）