郡为郡望的韦姓士族，汉朝时期就有俗谚称京兆韦氏和京兆杜氏为“城南韦杜、去天尺五”，自南北朝以后，京兆韦氏已发展为关中郡姓首族，在唐朝，京兆韦氏又成为李武韦杨集团的一部分，家族共宰相十七人。
家族起源.西汉初年，韦孟被任命为楚元王刘交的太傅，韦孟在楚王刘戊时期多次规谏，却不起效果，韦孟因此辞官，举家迁至山东邹鲁一带。韦孟的玄孙韦贤不仅精通《礼》、《尚书》，并传习《鲁诗》，产生了韦氏《鲁诗》一派，奠定了家族的经学传统。韦贤后被征召为博士、给事中，为汉昭帝傅，又出任光禄大夫、詹事，至大鸿