Nacido Annibale Francesco Clemente Melchiorre Girolamo Nicola Sermattei della Genga Periberti di Fabriano, pertenecía a la familia de los condes de La Genga, un pequeño pueblo de la Marca de Ancona.