Den Türken gelang es weder im Verlauf der Ersten Türkenbelagerung 1529 noch bei einem weiteren Versuch 1532, die Burg einzunehmen, so verwüsteten sie die Umgebung. Im 16. und auch bereits im 15. Jahrhundert war die Burg oft in Pfandbesitz. 1595 erwarb sie der Kammerpräsident von Niederösterreich, Ludwig Gomez Freiherr von Hoyos, dessen Familie noch heute Besitzer der Ruine und der umliegenden Wälder ist. Nach dem Kauf wurde sie von Meister Ulrich von Ebenfurt repariert. Die Burg war in der Folge auch Sitz eines Landgerichtes, in dem auch zahlreiche Hexenprozesse stattfanden. 1641 wurde zum Beispiel eine arme Häuslerin wegen Zauberei und Blutschande zum Tode verurteilt und daraufhin lebendig am Scheiterhaufen verbrannt.