પહેલા ભાજપ, પછી કોંગ્રેસના ખાતામાં