A petición propia fue relevado de su cargo a finales de 1764 y se estableció en La Habana a la espera de un nuevo destino.