В конце XVII века, после общего для заречных слобод расцвета, отмеченного постройкой храмов Воскресения Христова, Николы в Толмачах, Григория Неокесарийского (на Полянке) и стрелецкого Николы в Пыжах, слобода утратила свои привилегии. Неизвестно, затронул ли её прямо разгром стрельцов после бунта 1698 года, но вскоре Кадаши пришли в упадок.