તેમ છતાં કોંગ્રેસે વિપક્ષી દળો સાથે મળીને ૨૦૦૩માં અટલ સરકારની સામે અવિશ્વાસ પ્રસ્તાવ લાવ્યા હતા, કેમકે એમણે સરંક્ષણ મંત્રાલયની જવાબદારી જ્યોર્જ ફર્નાન્ડિસને સોંપાઈ હતી.