Según una leyenda, dos pastores de La Garganta hallan una imagen de la Virgen y reciben el encargo de construir un templo: es la Virgen del Castañar, patrona de Béjar.