પણ 2004ના લોકસભા ચૂંટણીમાં તે સત્તામાં વાપસી નહી કરી શકયા.