La leyenda cuenta que un pastor que llevaba a su rebaño por el castillo, lo perdió, y siguió a una mujer hasta una cueva, viendo que se había metido uno de sus animales en una cueva bajo el castillo calatravo que se alzaba en la sierra.