劝赵眜不要去汉朝的京城，以免被汉武帝找借口扣留，无法返回南越国，而导致亡国。于是，赵眜在其十多年的统治时期内，一直以生病为借口，没有前往汉朝京城朝见汉武帝。唐蒙在出使南越国时，从南越人请他吃蜀郡出产的杞酱一事中了解到，蜀郡至夜郎，再从牂柯江（今云南、贵州两省境内的北盘江）乘船而下，可以直达番禺。于是唐蒙上书汉武帝，请求在夜郎征集十万精兵，乘船沿牂柯江而下，可出奇兵攻打南越国。汉武帝同意了唐蒙的请求，任他为郎中将，带领一千士兵和许多的粮食辎重从巴符关（今四川省合江县附近）进入夜郎，劝说夜郎侯多同归属汉朝。