સ્વામીએ ભાજપે ટેકો પાછો ખેંચી લીધા પછી વી. પી. સિંહના જનતા દળને તોડવામાં પણ ભાગ ભજવ્યો હતો તેમ કહેવાય છે.