જો કે, 2004 ની લોકસભાની ચૂંટણીઓમાં, તેમણે આ બેઠક તેમના પુત્ર રાહુલ માટે છોડી દીધી હતી અને પોતે રાયબરેલી ગયા હતા.