Con la anexión de Nápoles a la corona de Aragón en la condición de virreinato en 1504, el castillo perdió su función de residencia real, que no recuperaría hasta 1734, cuando Carlos VII de Nápoles (más tarde, Carlos III de España) tomase posesión del trono napolitano.