1933 kam es zur Wiederherstellung durch die Kärntner Landsmannschaft. Bis 1934 wurden hier alljährlich die Gedenkfeiern zum 10. Oktober abgehalten, veranstaltet von der Kärntner Landsmannschaft. 1958 war die Grundsteinlegung für das „Heimkehrerkreuz“, einem 20 m hohen Kreuz neben der Ruine, als Gedächtnisstätte für die im Zweiten Weltkrieg gefallenen Soldaten. Im selben Jahr kam es zur Renovierung der Kirchenruine. Seit 1958 findet dort jährlich das Treffen der Ulrichsberggemeinschaft statt. Die „Heimkehrer-Gedenkstätte“ wurde 1959 eingeweiht.