કુંવરજી બાવળીયા, જવાહર ચાવડા જેવા મૂળ કોંગ્રેસી લોકોએ પણ પક્ષ છોડ્યો છે.