જો કે કોંગ્રેસ તરફથી તેને મંજુરી ન મળતા તેમણે 1925માં કોંગ્રેસ પાર્ટીને અલવિદા કરી દીધી હતી અને ત્યારે તેમને અહેસાસ થયો કે, આ પાર્ટી મનથી દલિતો સાથે નથી.