Los orígenes de Chalma son de origen prehispánico, en sus alrededores existieron cuevas en las cuales se veneraba a deidades como Oztoteotl y Tlazacotl, según la leyenda que dio origen a la veneración del Señor de Chalma, cuenta que cuando los evangelizadores agustinos se dirigían a destruir los ídolos, encontraron en la caverna una imagen de Cristo con los ídolos destruidos a sus pies.