De eerste kerk van de Dominicanen buiten de stadsmuren, die al eerder de Heilige Geestkerk in het centrum van de stad bouwden, werd in 1624 in de buurt van een begraafplaats gesticht. De kerk werd gewijd aan de apostelen Jacobus en Filippus. Het kerkgebouw viel tijdens de Pools-Russische Oorlog in 1655 ten prooi aan vlammen en werd herbouwd, maar brandde vervolgens in 1684 opnieuw af. De Dominicanen besloten in 1690 daarom een geheel nieuwe stenen kerk te bouwen in 1690, waarvan de werkzaamheden zich tot 1737 zouden gaan voltrekken.