Z trosek hradu se postavil kostel, zatímco Otto ve svém Kammerstein (zřícenina hradu) mohl bydlet. Nedaleko hradu byl postaven nový "městský hrad", který hlavně sloužil jako správní centrum v jihovýchodním koutu dnešního náměstí. Otto II, který později bojoval v bitvě u Dürnkrutu a Jedenspeigenu (1278) na straně Rudolfa Habsburského nechal hrad znovu postavit. Kolem roku 1270 mohla být hlavní část hradu dokončena.