Mit Anschluss der Abtei an das Trierer Kurfürstentum im 16. Jahrhundert verlor die Burg stark an Bedeutung, obwohl sie zunächst noch ausgebaut und mit Artilleriebastionen versehen worden war. Nach der Säkularisation des Kurfürstentums nach den französischen Revolutionskriegen wurde die zu diesem Zeitpunkt schon teilweise verfallene Burganlage zur Nutzung als Steinbruch veräußert.