Etter dette trakk Petty seg ut av politikken og levde resten av livet på sine gods. Etter William Pitt den yngres maktovertagelse i 1784 ble han utnevnt til marki av Lansdowne, en ny tittel som ble opprettet for ham. Etter hans død ble biblioteket hans kjøpt av British Museum.