El palacio, en aquellos tiempos llamado "Palacio de los Priores", estuvo construido sobre las estructuras de otros palacios: el "Palazzo dei Fanti" y el "Palazzo dell'essecuttore di Giustizia" perteneciente a la familia guibelina de los Uberti.