I oktober 1842 var Dzwonkowski blitt en sentral skikkelse blant de katolske utlendingene som var bosatt i Christiania. Ettersom det på den tid ikke hersket religionsfrihet i Norge, søkte han kong Karl Johan om tillatelse til både å opprette en katolsk menighet, og å få ansatt katolske prester. Søknaden ble innvilget ved kongelig resolusjon den 6. mars det påfølgende år. Allerede måneden etter ble St. Olavs menighet opprettet i byen. De første katolske messene i menighet ble avholdt i bokhandler Dzwonkowskis gård i Storgaten 27, på hjørnet mot Youngsgaten. I andre etasje ble det innredet et «St. Olavs kapell», som ble høytidelig innviet på Olsok, 29. juli, samme år (Kjelstrup 1942:44).