તે પછીના ચાર દાયકા સુધી હિંદુ અને મુસ્લિમ જૂથો આ સ્થળના કબજા માટે તથા સ્થળ પર પૂજા-અર્ચના અને નમાઝ માટે કોર્ટમાં કેસ કરતા રહ્યા હતા.