古族称土族为“白鞑靼”，藏族称其为“霍尔”。藏族很早就知道蒙古尔人，东胡有一部分人前往青海游牧，藏族称为霍尔。土族是东胡一部分，因此称为霍尔。沙陀与汪古及吐谷浑是最主要的族源。土族的祖先是古代的鲜卑人一个支系，隋朝时曾在青海一带建立强大的吐谷浑国，在唐朝时受到吐蕃的挤压，沦为唐的附庸。中晚唐时被称为土浑、退浑，曾依附契丹。宋代时和羌族、党项人联合建立西夏帝国。西夏被蒙古人灭亡后，吐谷浑人加入到蒙古的军队，在元朝时地位较高，和西域色目人同等待遇。他们其实是吐谷浑人与不同时间来到的蒙古与汪古军人混血种，明代