જે દરમ્યાન તેમની પત્ની ભાવનાબેનને ઉમરેઠ તાલુકાના રતનપુરામાં રહેતા અજય સોમાભાઈ હરીજન સાથે આડોસંબંધ બંધાઈ જતા જેની જાણ હર્ષદભાઈને થતા તેઓ ચોંકી ઉઠયા હતા.