Existía un edificio habitable en 1572, según se deduce del testamento de Marcantonio de tal fecha, pero la hipótesis es que con la muerte de Marcantonio en los años 1580 los trabajos se interrumpieron definitivamente, aunque parece demostrada la voluntad de concluir, al menos, la parte del complejo reservada a los apartamentos señoriales.