1583 wurde die Burg während des Truchsessischen Krieges von Truppen des abgesetzten Kurfürsten Gebhard I. von Waldburg belagert und anschließend eingenommen. Doch bereits am 7. Mai 1584 wurde die Anlage an Truppen des neuen Kurfürsten Ernst von Bayern zurückgegeben und die von Westerholt konnten wieder über ihren Besitz verfügen. Jedoch hatte die Anlage unter der Belagerung und Besetzung arg zu leiden gehabt. Darüber hinaus ließ Ernst von Bayern nach der Rückgabe ihre Verteidigungswälle schleifen, weil der Burgherr Bernd von Westerholt seinen Verwandten Konrad von Westerholt, seit 1574 Statthalter des Bistums Münster, bei der Förderung des Protestantismus dort unterstützt hatte. Seit Ende des 16. Jahrhunderts befand sich die Burg daher in einem schlechten baulichen Zustand.