Durante la Batalla de Sekigahara de 1600 Hiroie no entró en el combate en apoyo al bando de Ishida Mitsunari, el cual fue derrotado estrepitosamente. Después de la derrota Tokugawa Ieyasu redujo sus propiedades a los han de Suo y Nagato.