同時內遷胡人畀漢人管住，要向朝廷納稅，又因為華夷之辨嘅觀念畀漢人歧視，而未內遷嘅胡人同漢人貿易時，邊境嘅漢人土豪時不時欺詐胡人，令好多胡人好不滿。