Finalmente, la guarnición, junto con el gobernador, abandonó la isla en 1850, momento en que empieza realmente el declive de la isla, que no se recuperaría hasta bien entrada la década de 1960.