Fue el segundo hijo de un samurai que trabajó como médico personal de Tokugawa Tsunayoshi, quien se convertiría en el quinto shōgun del Japón.