Slottet ble solgt i 1457 til den polske kongen Kasimir Jagelloneren som hadde beleiret det, og var fra den tid av og frem til 1772 en av den polske kongens residenser. Under den første polsk-svenske krig ble slottet med byen inntatt av den svenske kong Gustav Adolf i 1626, men innlemmet i Polen igjen i 1635.