Da han kom tilbake til Pennsylvania i 1926, ble O'Hara privatsekretær til kardinal Denis Dougherty, erkebiskopen av Philadelphia. O'Hara var også dommer ved Tribunalet i Philadelphia.