1524年、クレメンス7世の許しを得て全ての聖職禄を辞し、と共同でとして知られる聖カエタノス修道会の創設に加わり、初代総長として修道生活に入った。ところが1527年のローマ略奪でテアティノ会はローマからヴェネツィアへ退去、カラファもヴェネツィアへ逃れティエーネが次の総長になったが、カラファは1532年にヴェネツィアで教会改革の意見書をクレメンス7世へ送り、改革派の急先鋒として知られるようになった。やがて改革教皇といわれていたパウルス3世に声をかけられてローマに戻り、、レジナルド・ポールらと共に教会改革のための委員に任命された。