Barón con la herencia que le dejó su abuelo, Sir George Downing, que sirvió a Cromwell y a Carlos II y que construyó el 10 de Downing Street (una de las puertas que formó parte del 10 de Downing Street se usa en el college).