Finalmente en 1864, Hisamitsu lo perdonó y lo envió a Kioto como asistente del feudo ante la Corte Imperial.