慶応3年(1867年)に説得のために帰藩するが、熊本藩は佐幕派が実権を握っていたために逆に投獄された。