Im Schwedisch-Polnischen Krieg (1656) erstürmte der brandenburgische Feldherr Andreas Derfflinger die Burg, die Umgebung wurde geplündert. Infolge der Zweiten Teilung Polens wurde Priment Teil des preußischen Staates. Da die Stadt gerade mal 300 Einwohner zählte, wurde ihr zum 1. Juni 1797 das Stadtrecht entzogen. Das Kloster wurde säkularisiert und infolgedessen 1834 aufgelöst.