La relación entre Lady Hester y su tío el ministro William Pitt (el Joven) llegó a ser muy estrecha, al extremo de asumir Lady Hester desde agosto de 1803 el papel de una pseudo-esposa (Pitt era soltero), profesándole además una gran admiración.