જોકે તેમનું કહેવુ છે કે, પ્રથમ મુઘલ બાદશાહ બાબરે 1529માં બાબરી મસ્જીદ બનાવી હતી અને તે બાબરના વંશજ છે તેથી જમીન તેમને સોંપી દેવામાં આવે.