Después se conoció como "Palacio Ducal", al establecer allí su residencia Cosme I de Médici en 1540.