Det ble først omtalt som et palass 1100-tallet da Henrik I bodde der deler av året, men tilknytningen til monarken går antagelig tilbake til Alfred den store som var der i 890 og Ethelred II som holdt råd der.