તે બાદ અંગ્રેજી શાસનમાં પણ આ પત્થરને અહીથી હટાવવાનો પ્રયાસ કરવામાં આવ્યો હતો.