安政5年(1859年)には隠居して彰常に家督を譲った。