1520 wurden die Gebäude durch polnische Truppen niedergebrannt. Einige Mönche lebten wahrscheinlich noch einige Zeit in den Gebäuderesten, im Zuge der Reformation wurde das Kloster um 1525 aufgelöst. Das Gelände wurde vom Bischof von Samland verwaltet, der einige Teile an Bürger abgab. 1563 ließ Herzog Albrecht das St.-Georgen-Hospital an dieser Stelle errichten, das bis 1865 dort blieb.