しかし、永享5年(1433年)に無断で帰国したことを義教に咎められ、管領細川持之の仲介で許された。