બાબરી મસ્જિદને લઈને પણ સ્વામીએ વિવાદ છેડયો હતો, અને આ મસ્જિદ નથી પરંતુ આજે પણ ત્યાં મંદિર છે.