W dniu 7 lutego 1656 zamek został ograbiony i spalony podczas najazdu Szwedów pod dowództwem Karola Gustawa. Następnie odbudowany i rozbudowany w stylu barokowym przez rodzinę Lubomirskich, w których posiadaniu znajdował się do pierwszej połowy XVIII w. Odbudową kierował architekt holenderski Tylman z Gameren.