通夜郎以制南越国，因此武帝派唐蒙出使夜郎，见其首领夜郎侯多同，并厚赐其财物，约定要在当地设置郡县官吏并以其子为县令，夜郎侯认为其国家与汉朝距离远，就暂且先答应，但后屡次不服于汉，后因此有了「汉孰与我大」此一名言，成为「夜郎自大」一成语的典故，蒲松龄在《聊斋志异·绛妃》中写道：「驾砲车之狂云，遂以夜郎自大。恃贪狼之逆气，漫以河伯为尊。」直到汉朝灭亡南越国后，夜郎国才开始入朝，武帝封为夜郎王。《汉书》记载夜郎王兴在汉成帝河平二年（前27年）时举兵反汉，汉朝派兵诛灭，夜郎国亡。改设郡县。直到宋朝还短暂的出现过夜郎