O santuário medieval foi destruído durante a Reforma Protestante por volta de 1524 e a forca foi colocada no mesmo local para assustar os fiéis católicos. Quase um século depois, foi reconstruída pelo secretário pessoal do rei Sigismundo III, que comprou a terra onde ficava a estatueta desaparecida. Uma pintura de Maria com o menino Jesus de um mestre pintor belga Bartholomew Pens de Elbing substituiu a relíquia perdida. Durante o dilúvio sueco, muitos dos itens de valor inestimável do tesouro da capela foram escondidos em Gdańsk (Danzig) e sobreviveram à turbulência. Como o catolicismo permaneceu a religião dominante nas proximidades de Warmia (Ermland), os devotos de toda a Comunidade Polonês-Lituana viajavam regularmente para o local, principalmente de Varsóvia e Vilnius.