આ ઉપરાંત 1980થી 1990 સુધી તેઓ વિધાનસભામાં ભાજપના વ્હીપ રહ્યા હતા. 2008માં તેઓને રાજ્યનની વિધાનસભામાં સ્પિકર પદ બેસાડવામાં આવ્યા જે જવાબદારી તેઓએ 2010માં અવસાન સુધી સંભાળી હતી. જોકે આ વખતે ભાજપને મળેલી હારનું કારણ જણાવતા તેમને પુત્ર અને ભાજપના ઉમેદવાર ભુષણ ભટ્ટ કહે છે કે, ‘નવા સીમાંકન પહેલા ખાડિયામાં રાયખડ વિસ્તાર આવતો હતો જેના કારણે આ વિસ્તારમાં હિંદુ અને મુસ્લીમ બંને સમાજની વસ્તી બરાબર હતી. 2010માં જ્યારે અશોકભાઈનું અવસાન થયું ત્યારે પેટા ચૂંટણી મે જીતી હતી. પરંતુ 2012માં નવા સીમાંકન બાદ આ ખાડિયાને જમાલપુર સાથે મર્જ્ડ કરી દેવામાં આવ્યું. જેના કારણે અહીં 1 લાખ મુસ્લીમ વોટર્સ સામે 80,000 હિંદુ વોટ રહ્યા. જો કે ત્યારે અમે ફાઇટ આપી હતી અને જીત્યા હતા પરંતુ આ વખતે કોંગ્રેસની વિભાજનકારી નીતિ ફાવી ગઈ અને અમારી હાર થઈ.’