Originalmente fue daimyō en 1680 después de la muerte de su padre, y fue educado por el "rōnin" neoconfucionista Arai Hakuseki, quien fue su tutor personal y consejero durante el resto de su vida.