En 1766 la repentina enfermedad y muerte de Hew Scott, el hermano del Duque, puso fin al viaje, forzando un repentino retorno a Gran Bretaña.