1321 starb mit Georg (Juri), Sohn des Lew I., der letzte Adlige der Gründungslinie in der Schlacht am Irpen gegen Gediminas, Großfürst von Litauen. Dieser verleibte Festung und Stadt seinem Reich ein. 1340 wurde mit dem Bau der Liubartas-Burg begonnen. 1349 wurde die Stadt von Truppen des polnischen Königs Kasimirs des Großen für kurze Zeit erobert, sie fiel aber bereits kurze Zeit später wieder an das Fürstentum Halytsch-Wolodymyr.