Toledo cayó en manos del rey Alfonso VI de León en 1085, por lo que los servicios del vigía habrían terminado, pero muchos excursionistas cuentan que, algunas tardes, cercana ya la noche, se han visto resplandores en su cumbre, que sería la hoguera que encendería al anochecer un misterioso moro fantasma, que siglos después continuaría advirtiendo de la presencia cristiana.