અક્ષયપુરીશ્વર મંદિર સાથે એક પ્રાચીન કથા જોડાયેલી છે અને આ કથા અનુસાર શનિદેવે તેમના અપંગ રોગને મટાડવા માટે આ સ્થળે ભગવાન શિવની પુજા કરી હતી.