如果免去府县的色役，军府议论纷纷。请允准会昌三年十二月的敕令，各路军队的节度使不能强行让百姓参军。”唐宣宗李忱听从了。同年十二月，盗贼砍断唐景陵神道的门戟，韦博被罚两个月的俸禄。韦博和御史中丞纷争不息，两人都获罪，韦博被贬任卫尉卿，又外任平卢节度使、检校礼部尚书，转任昭义节度使。韦博在虚龄六十二岁时去世，朝廷赠予兵部尚书。