Entre 1540 y 1565 fue la residencia del duque "Cosme I de Médici", el cual encargó al artista Battista del Tasso la ampliación del palacio, creando una nueva serie de apartamentos donde poder alojar a la corte, a los huéspedes y a la propia familia.