આખા વિવાદના કેન્દ્રમાં એ બાબત છે કે 1526માં જે ઇમારતનું નિર્માણ કરવામાં આવ્યું હતું તેને મુસલમાનો મસ્જિદ માને છે અને હિંદુઓ કહે છે કે મંદિરને તોડીને એ મસ્જિદ બનાવવામાં આવી હતી.