Poco después consideró retirarse y convertirse en un monje budista, sin embargo, Fujiwara no Tsunetō logró persuadirlo para no hacerlo.