સંજેલીમાં મુસ્લિમ, આદિવાસી સમાજ બંધમાં જોડાયો