Las tensiones con el nuevo virrey, sir Gilbert Elliot, acabaron por aislarle políticamente y le animaron a exiliarse nuevamente a Londres el 14 de octubre de 1795.