Enrique III construyó un lujoso palacio real dentro del recinto a mediados de ese siglo y Eduardo III fue más allá con la reconstrucción del palacio, que creó un conjunto mayor de edificios que se convertiría en «el proyecto arquitectónico secular más caro de toda la Edad Media en Inglaterra».