Tras la caída del Imperio Romano, esta zona pasa a estar bajo el poder de los visigodos, sin embargo de esa época no hay restos en la propia Ledesma, sí en algunos pueblos cercanos como La Peña, y la cercanía de la famosa y mítica ciudad-estado de Sabaria.