Die Familie bewohnte die Hertener Anlage bis kurz nach dem Ersten Weltkrieg. Nachdem sie aber ab 1920 auf Schloss Merten in Eitorf residierte und damit Schloss Herten als Wohnsitz aufgegeben hatte, wurde es dem Verfall anheimgegeben. Einen Großteil der prächtigen Ausstattung nahmen die Eigentümer bei ihrem Weggang mit. Während der Ruhrgebietsbesetzung 1923 bis 1925 diente es noch als Unterkunft für französische Truppen, die das Schloss in einem Zustand der Verwüstung zurückließen.