En 1563, el monarca ordenó instalar en el piso superior la Armería Real, que hasta entonces se guardaba en la ciudad de Valladolid, lo que significó variar el diseño inicial, que reservaba esa planta a los aposentos de los mozos de servicio.