自会稽，与其后人的说法自相矛盾，而宋代官方记载杨氏为「播州夷人」。学界一致认定《杨氏家传》其先太原人以及杨贵迁为杨家将之后都是明朝初年编造的，杨氏应当是唐末从泸(治今泸州市)、叙(治今宜宾市)二州的边徼羁縻州地区迁来播州的少数民族中的酋豪，即为罗族（今称彝族）的一支，后裔渐次汉化，遂依托为中原名门之后，着于谱牒。宋徽宗宣和三年（1121年）一度废播州、遵义军。南宋理宗嘉熙三年（1239年）复设播州安抚司。南宋末年，播州军为抗元主力之一。
成为土司.元朝世祖至元十二年（1275年）下