统治者的驱除和歧视，一般在山区居住，因此有“无山不成瑶”之说，而「南岭无山不有瑶」 更是明确地指出其为中国南方典型的山地民族。由于分支众多，语言差异大，有勉语、布努语、拉珈语等多种。80年代创制了瑶文，用拉丁字母拼写勉语优勉土语。通用汉语。很多人能同时操壮语、苗语等语言。
輋族、瑶族与畲族.《说蛮》载：「輋，巢居也」，「輋人亦徭种也」。《南越笔记》说：「赋以刀为准者曰徭，徭所止曰輋，亦曰輋，是为畬蛮之类。」。《岭表纪蛮》说：「畬与輋同音，盖以同一种族，故音同字异」。顾炎武在