Nach dem Aussterben der Greifenherzöge während des Dreißigjährigen Krieges kam das Schloss in den Besitz des schwedischen Statthalters Johan Banér (1596–1641), dessen Erben es 1648 an die schwedische Königinwitwe Maria Eleonora abtraten. Von ihrer Tochter Königin Christina, erwarb 1654 Clas Graf Tott (1630–1674) Schloss und Amt Wollin und verpfändete es 1655 – die Bestätigung der Rechtmäßigkeit erfolgte 1657 – an Christoph Carl Graf Schlippenbach (1624–1660). Bereits während der Belagerung und Erstürmung Wolins 1659 im Zweiten Schwedisch-Polnischen Krieg durch kaiserliche und brandenburgische Truppen stark beschädigt, brannte das Schloss bei der Eroberung durch die Brandenburger im Schwedisch-Brandenburgischen Krieg 1675 nieder und wurde nicht wieder aufgebaut.