કેટલાક લોકોનું માનવું છે કે મંદિરને ધરાશાયી કરીને મસ્જિદ બનાવાઈ હતી.