Al inicio apoyó a Kiyohara no Iehira y a su medio hermano Fujiwara no Kiyohira en contra de Kiyohara no Sanehira, pero después de la muerte de Sanehira, Yoshiie e Iehira se opusieron el uno al otro.