墓葬等，都说明仡佬族与古僚人有渊源关系。古僚人，是西汉时夜郎国（主要在今贵州、云南境内）的主体民族之一。距今2100多年前，夜郎境内的僚人亦“魅结、耕田、有邑聚”(《史记·西南夷列传》)，即已过着定居的农耕生活，出现了村落和集镇，有了君长，其社会已处于原始社会末期或阶级社会初期。公元前130年，汉朝以夜郎地设置犍为郡，前111年又分设群。从此，这一带与中原地区的联系逐渐密切。汉族封建社会的生产方式影响了僚人社会，从而缓慢地向封建社会过渡。7世纪时，唐朝在今贵州省北部僚人居住地区，建立了羁縻州、县。这时，僚人