Известен с XIII века, однако основание города приписывалось легендарному Довспрунгу (якобы прибывшему из Рима в Литву в 924 году вместе с Палемоном) и относилось к X веку. На горе, получившей позже название Замковой, находился замок для защиты города, на который неоднократно производились нападения Ордена меченосцев, начиная с XIII века. По словам летописца, в одном из сражений пало 10 000 меченосцев, причём был взят в плен король Корибут, которого они поддерживали. В 1434 году вблизи города произошла битва под Вилькомиром, ставшая поворотной точкой в гражданской войне в Великом княжестве Литовском. Во времена Польши был местом дворянских собраний и сеймиков и в нём находились земский и городской суды; город считался староством. Городские привилегии и магдебургское право городу даровал Сигизмунд I. C 1566 года — центр повета. В 1711 году во время Северной войны город был разграблен шведами. В 1797 году стал уездным городом Виленского наместничества, в том же году — Литовской губернии, а в 1842 году — Ковенской.