También fue la promotora principal de los jardines de Walmer Castle durante su mandato como Señor Guardián del Cinque Ports, en este aspecto, Lady Hester aprendió el arte de la jardinería.