El palacio vino a ser conocido como el palacio del Arzobispo cuando la ciudad ascendió a la categoría de arzobispado poco después de que della Rovere asumiera el cargo.