સ્વામીએ ભાજપે ટેકો પાછો ખેંચી લીધા પછી વી. પી. સિંહના જનતા દળને તોડવામાં પણ ભાગ ભજવ્યો હતો તેમ કહેવાય છે. અજિતસિંહના જૂથના જનતા દળના ૨૦ સાંસદો તૂટીને ચંદ્રશેખર તરફ આવી ગયેલા તેનો યશ (!) સ્વામીને જાય છે. સ્વામીએ એક પત્રકારને હસતા હસતા કહેલું, તમારી પત્રકારોની કોઈ સંસ્થાને તોડવી હોય તો મને કહેજો!