Lors du premier siège turc en 1529, le château est détruit. Après la reconstruction, le domaine passe en 1551 à la famille Teuffenbach et en 1588 à Sigmund von Hohenburg zu Pranckh. En 1654, il est finalement acquis par Éléonore de Nevers-Mantoue, épouse de l'empereur Ferdinand III de Habsbourg. Après des dégâts lors du second siège turc en 1683, le château est reconstruit par son nouveau propriétaire, le fonctionnaire de la cour Andreas Schellerer, en un Wasserburg baroque. En 1708, Élisabeth-Christine de Brunswick-Wolfenbüttel, épouse du futur empereur Charles VI, y passe deux nuits.