Seit dem 21. Dezember 1818 Kardinalbischof von Frascati, wurde er am 13. August 1821 Kardinalbischof von Porto e Santa Rufina und nahm am Konklave 1823 teil, aus dem Leo XII. als Papst hervorging. Ebenso nahm er am Konklave 1829 teil, das Pius VIII. zum Papst wählte. Am 5. Juli 1830 wurde er Kardinalbischof von Ostia und Dekan des Kardinalskollegiums. Zuletzt, in den Jahren 1830–1844, war Kardinal Pacca Sekretär der Kongregation der römischen und allgemeinen Inquisition. Auch am Konklave 1830–1831, durch das Papst Gregor XVI. gewählt wurde, nahm er teil; als Kardinaldekan fiel ihm die Aufgabe zu, dieses Konklave zu leiten.