Accedió a la posición de Karō (jefe mayor del consejo) en 1860 sirviendo a la novena generación del daimyō de Aizu, Matsudaira Katamori.Sin embargo en 1862 Katamori es seleccionado para el puesto de Kyōto Shugoshoku y se asignan a Aizu nuevas obligaciones que entiende que comprometerán la seguridad del han y deseando advertir a Katamori de los peligros y solicitarle que no acepte la designación del shogunato Tokugawa, junto con Tanaka Tosa viajan a Edo para hablar directamente con Katamori.