Ohne militärische Bedeutung stand die Festung seit 1651 fast menschenleer. Die bereits während des Krieges beschlossene Schleifung der Anlage kam zunächst nicht zur Realisierung. Am 10. März 1657 befahl der Herzog erneut die Zerstörung und bestellte auch eine Kommission zur Ausführung derselben, allein die Unruhen des schwedisch-polnischen Krieges mit dem Durchzug zahlreicher plündernder polnischer und brandenburgischer Truppen durch Mecklenburg, sowie die katastrophalen Verhältnisse in der Stadt Plau, die zu diesem Zeitpunkt (1649) lediglich noch 238 Einwohner hatte, ließen das Vorhaben scheitern. Nach dem Frieden von Oliva (3. Mai 1660) begann der bis 1668 dauernde Abriss eines Teiles der Befestigungsanlagen und Gebäude. Prinz Christian Ludwig fand bei einer Besichtigung 1715 noch Reste vor und berichtete: „Was das Schloss Plau und dessen Bau anbelangt, so ist solches einer rechten Mörderhöhle ähnlich. Es muss alles rasiret und der Erden gleich gemacht werden. Die Mauern sind 14 Fuß dick und alle von Feldsteinen, welches ein rechts spectacul ist. Wenn man über die elende und gefährliche Brücke ins Schloss fahren will, muß man erst unter einem niedrigen und finstern Gewölbe von 70 Schritt lang durch passiren, wofür Einem recht grauet. Ich glaube, daß kaum mit 50.000 Taler es könne so erbauet werden, daß E.F.D. allda mit Vergnügen leben könnten.“ So ging man nun auch daran, die äußere Ringmauer mit den Resten der kleinen Wachtürme, das Torhaus mit dem Torgewölbe und auch die Ruine des Zeughauses abzutragen und zu beseitigen. Erhalten blieben bis heute Teile der inneren Wallmauern und der Burgturm.