En 1732 el rey Jorge II dio estas tres casas a "sir" Robert Walpole como agradecimiento a los servicios prestados a la nación.