No está claro en qué momento surge La Silva como población separada de Castrelo de Abajo, aunque ya aparece como tal en mapas del siglo XVIII.