Pagoda została zbudowana za rządów cesarza Tang Gaozonga (649–683) i osiągała wysokość 54 m. Jednak pięć dekad później konstrukcja z ubitej ziemi, z kamienną fasadą zewnętrzną, zawaliła się. Cesarzowa Wu Zetian odbudowała pagodę w 704 roku, dodając do niej pięć kondygnacji. W 1556 roku, podczas trzęsienia ziemi w Shaanxi, budowla została poważnie uszkodzona i zniszczeniu uległy trzy kondygnacje. Ostatecznie ostało się siedem kondygnacji, które zachowały się do obecnego dnia. Cała konstrukcja jest wyraźnie pochylona (kilka stopni) w kierunku zachodnim. Podobna pagoda – pochodząca z VIII w. Mała Pagoda Dzikich Gęsi – w owym trzęsieniu ziemi doznała jedynie niewielkich szkód, które nie zostały naprawione do dnia dzisiejszego. Wielka Pagoda Dzikich Gęsi była intensywnie remontowana w okresie panowania dynastii Ming (1368–1644), a w roku 1964 dokonano renowacji. Obecnie pagoda ma wysokość 64 m i stanowi dobry punkt obserwacyjny.