Viajó a Londres y en el invierno de 1771 conoció a Penélope Pitt, esposa del vizconde Edward Ligonier, con la que inició una relación amorosa.