他回平陵上坟。回朝，拜为大鸿胪。当时，议论政事的很多人说郡国贡举都不是依靠功勋，所以守职日益懈怠而政事荒疏，过错在州郡。汉章帝下诏把这件事交给公卿朝臣议论。韦彪上议：“陛下明诏，担忧百姓，垂恩选举，务得人才。国家以选拔贤才为要务，贤才应以孝行为第一。孔子说：‘事亲孝故忠可移于君，是以求忠臣必于孝子之门。’大多数人才能和品行少有兼备，所以孟公绰能胜任赵氏、魏氏的家臣，不可以为滕国、薛国的大夫。忠孝之人，心地厚道；老练官吏，心地刻薄。三代的官员能正直处事，在于有办法能使他们得到磨炼。选士应该以才行为先，不可