પણ અગિયારમી સમદીમાં મહમદ ગજનવીના આક્રમણથી આ મંદીરનો વૈભવ નષ્ટ થઈ ગયો.