૧૨ થી ૧૫મી સદી સુધીમાં રૂદ્રમહાલય અત્યંત ભવ્ય,સમૃદ્ધ અને સમ્પન્ન મંદિર હતું. ત્યારબાદ મુસ્લિમ આક્રાન્તાઓ દ્વારા ક્રુરતાપૂર્વક એનો વિનાશ કરાયો અને આ ઐતિહાસિક મંદિરને પણ ભારતના અન્ય મંદિરોની જેમ બળપૂર્વક મસ્જીદમાં પરીવર્તિત કરવામાં આવ્યું.