18世紀には主に古儀式派の信者である地元の商人たちが町の不動産のほとんどを買い取った。彼らは後にロシア革命が起こると攻撃の的となった。第二次世界大戦では、1942年、モスクワ近郊へ追いつめられた赤軍がドイツ軍に対して反攻に出、ルジェフとヴャジマへ向かって進軍を始めた（ルジェフの戦い）。この戦いでルジェフ付近のみを残してソ連軍が前線を西へ押し返し、さらにルジェフに残ったドイツ軍の突出部に対して再度攻撃が行われた（第二次ルジェフ会戦）。激しい戦いでルジェフの建物は全て消滅した。大戦中、市の人口の6分の1以上がドイツに送られ強制労働をさせられ、その他の市民のうち9,000人は射殺されたり拷問を受けたり市の中心に設けられた収容所で飢えたりして死んでいった。これらの戦いのため、古い建物は何も残っていない。