Desde a primeira metade do século XVII, houve um declínio gradual da cidade. Em 1630, Szydłów foi incendiada por um destacamento de tropas mercenárias rebeldes. O exército não remunerado, incapaz de penetrar nos muros, incendiou os subúrbios, dos quais uma parte da cidade também se ocupava. A invasão sueca e a invasão de Jorge Rákóczi II causaram enormes danos. Em 1655 a cidade e o castelo foram destruídos. Apenas cerca de 350 sobreviveram de 1 300 habitantes de Szydłów. O número de casas diminuiu para 54 em 1663. Após essa derrota, a cidade não conseguiu se recuperar. Durante a Grande Guerra do Norte, uma epidemia eclodiu em Szydłów e dizimou a população local.