Au , Hervé III, seigneur de Vierzon en 1252-1270, transmet ses biens à sa fille héritière Jeanne († av. 1296), qui épouse en secondes noces en 1277 Godefroy de Brabant († à Courtrai en 1302). Deux de leurs filles font passer Vierzon et Lury dans la maison des comtes de Juliers : Marie de Brabant († vers 1330/1332 ; sans postérité survivante de son union avec Walram de Juliers), puis sa sœur Elisabeth/Isabelle de Brabant († vers 1350/1355 ; femme du frère de Walram, Gérard V de Juliers). En 1378, le petit-fils d'Isabelle et Gérard, Guillaume VI de Juliers, s’étant allié à l’Angleterre et ayant déjà cédé Vierzon à Jean le Bon en 1361, se voit confisquer le château, ainsi que ses rentes et droits féodaux sur Lury par le roi Charles V.