El palacio fue creciendo de forma orgánica alrededor de la antigua residencia del cardenal Wolsey hasta convertirse en el palacio más grande de Europa, con más de 1500 habitaciones.