James Barry se retira en 1864 y muere el 25 de julio de 1865.