Nel 1524, Clemente VII permise al Carafa di rinunciare ai suoi benefici e di entrare nell'Oratorio del Divino Amore, a Roma: qui conobbe Gaetano Thiene, con cui decise di fondare l'ordine dei Chierici regolari teatini (dal nome latino della città di Chieti, "Teate"). Nel 1527 scampò al Sacco dei Lanzichenecchi e si rifugiò a Venezia, dove rimase fino al 1534.