Han kom fra den florentinske adelige Acciaiouli-familien og ble født som det tredje av ti barn av Ottaviano Acciaiuoli og Maria Acciaioli. Andre kardinaler i familien var nevøen Filippo Acciaiuoli (1700–1766) og Angelo Acciaiuoli (1340–1408).