Etter eksamenirt i 1898 fra den berømte jesuittskole i Chyrów, den gang i Galizien i Østerrike-Ungarn, dro han til Riga for å studere. I 1903 ble han uteksaminert fra handels- og mekanikkfakultetet ved Universitetet i Riga. I 1903 flyttet han til Fribourg i Sveits, hvor han fortsatte studiene ved Universitetet i Fribourgs juridiske fakultet. Året etter begynte O'Rourke, formodentlig influert av biskopen av Vilnius Eduard Freiherr von der Ropp, på det teologiske fakultet ved Universitetet i Innsbruck i Østerrike-Ungarn.