W połowie XVI wieku Iłża przekroczyła poziom 1000 mieszkańców i stała się jednym z większych miast województwa sandomierskiego. W roku 1645 Iłżę zamieszkiwało około 2050 osób. Po potopie szwedzkim i epidemiach związanych z działaniami wojennymi, liczba mieszkańców miasta zmniejszyła się do około 1000 mieszkańców. Sytuacja nie zmieniła się aż do końca XVIII wieku. W roku 1787 odnotowano 1141 mieszkańców Iłży.