Schließlich kam es bei den Auseinandersetzungen um die Konföderation von Bar erneut zu erheblichen Schäden, diesmal verursacht von russischen Truppen. Noch einmal wurde das Schloss im 18. Jahrhundert teilweise wiederaufgebaut und unter Erzbischof Michael Poniatowski als Produktionsstätte für Leinwände genutzt. Während der preußischen Herrschaft nach der Zweiten Teilung Polens wurde es um 1800 jedoch erneut zerstört. Von da an diente es nur noch als Steinbruch für Neubauten in Łowicz.