વર્ષ 2007માં ભાજપે તેમને ટિકિટ આપવાની ના પાડી દીધી અને તેમની જગ્યાએ મુરલી મનોહર જોશીને ઉમેદવાર ઘોષિત કરતા રાયે પક્ષ છોડી દીધો હતો.