У вайну 1812 г. асноўныя пабудовы былі разбураны. У 1846 г. Альба была здадзена іншаземным уладальнікам у шасцігадовую арэнду. Англійскі парк здзічэў. У 1860-я гг. насаджэнні былі ў значнай ступені павысяканы. Новы пад'ём пачаўся пасля 1875 г., калі Антоні Вільгельм Радзівіл, муж Марыі Дароты дэ Кастэлян, стаў на чале Нясвіжскай ардынацыі. Марыя Дарота выступіла ініцыятарам адраджэння Нясвіжскага замка, стварыла побач з ім паркавы комплекс, сабрала ў замку значную бібліятэку. Работы працягваліся пасля Першай сусветнай вайны. Былі добраўпарадкаваны парк на тэрыторыі 80 га, звярынец, ставы, фазанарый, гаспадарчыя пабудовы.