为赵郡隆庆李氏之后，而朱希祖考证认为确系陇西李氏，属于关陇集团之一，与北周皇室和隋朝皇室的关系密切。其先祖为南北朝时期的李虎，他因功被封为西魏北周的八柱国之一，封陇西郡公。其子李昞在隋时封唐国公。唐朝皇室以老子后裔自居，于佛道之争时偏袒道教。和尚法琳称李氏非老子李耳后裔，与陇西李氏无关，乃拓跋氏之后，因而触怒皇室，被流放益州而死。宋代朱熹与郑思肖以李唐闺门失礼家法缪戾，有李唐源自夷狄的说法。冯承钧认为李虎的兄弟名为起头与乞豆，怀疑李渊家族有可能出身胡人。日本学者金井之忠发表〈李唐源流出于夷狄考〉主张