慶応3年(1867年)、副島とともに将軍・徳川慶喜に大政奉還を勧めることを計画し、脱藩して京都へ赴いたが、捕縛のうえ佐賀に送還され、1か月の謹慎処分を受けた。