Se construyeron tres recintos concéntricos amurallados y con fosos: el primero lo delimitaba el palacio, el Gabinete de Historia Natural y la tapia del jardín; el segundo tenía forma de cuña y se situaba detrás del palacio y el último, un fortín en forma de estrella rodeaba la Fábrica de Porcelana en la cima de la colina.