Toma nombre, como su patrona la Virgen de Carballeda, de la abundancia de robles carvallos, llamados "Carbayus" en la zona.