En 1804 cuando se encontraba regresando a España en un barco con toda su familia, buques ingleses atacaron su barco, fallecieron todos en el episodio, excepto él y Carlos María de Alvear, quién años más tarde fue general de las Provincias Unidas del Río de la Plata y esposo de una andaluza con quien tuvo diez hijos.