Mongolene ødela festningen på 1200-tallet. Den nevnes neste gang i dokumenter først i 1389, i traktaten mellom Vasilij I og hans onkel Vladimir den skallede. Ved folketellingen i 1672 hadde Jaropoltsj bare 133 innbyggere, og i 1703 ble den ødelagt av brann. Den gamle bosetningen ble etter dette dominert av handelsslobodaen Vjazniki, som lå noe lavere på høyden og som hadde vært attestert siden 1300-tallet. I 1778 fikk Vjazniki byrettigheter.