Am 23. Juli 1703 kommt es während des spanischen Erbfolgekrieges zu einem Einfall der Bayern in Tirol. Während des sogenannten Bayrischen Rummels ziehen sich tirolische Truppen auf die Burg zurück und als sie der drückenden Übermacht nicht mehr standhalten konnten, sprengen sie schließlich die Burg. Auch der Meierhof unterhalb der Burg brannte nieder. Allerdings ließ ihn Johann Martin Gumpp wieder aufbauen; die zerstörte Burg wurde aber dem Verfall überlassen.