Harto de la camarilla de Casa-Irujo y las dificultades que le ponen para poder solucionar los problemas que provoca el comercio español con los Estados Unidos, solicita su retorno a España y lo obtiene en 1809.