Avec l'augmentation des activités anti-shogunales dans une partie du domaine de Satsuma au sud et du domaine de Chōshū à l'est, et avec le domaine de Saga voisin montrant des signes de penchant vers l'alliance anti-Tokugawa, la situation au domaine de Shimabara est de plus en plus incertaine. Pour aggraver les choses, Tadakazu reçoit l'ordre en provenance d'Edo de mener ses forces contre le domaine de Chōshū à la fois dans la première expédition punitive de Chōshū de 1864 et dans la deuxième expédition en 1866. Les deux expéditions sont extrêmement impopulaires parmi les samouraï, dont un grand nombre est tombé sous l'influence du mouvement "Sonnō jōi".