En 1283 et 1284, le roi Philippe le Hardi vint régulièrement chasser à Milly. Le domaine passa de main en main jusqu’en 1286 où Philippe le Bel l’offrit à son chambellan , le domaine comprenant alors le château de Forest et les terres de Mondeville et surtout l’érection en baronnie-pairie. En 1287, par la cession par Estienne de Sully des terres, Hugues de Bouville devint propriétaire de la totalité du domaine. Au début du , il fonda le chapitre de Notre-Dame, confirmé en 1304 par l’archevêque de Sens Estienne Besquart. En 1320, Blanche de Bouville épousa au château Olivier de Clisson devant le roi Philippe le Long. En 1330, les paroisses de Saint-Pierre et de Notre-Dame furent réunies. En 1337, la terre appartenait à un certain Guillaume de Meullent, puis à son frère Jean de Meulan, évêque de Meaux, de Noyon puis archevêque de Paris. En 1356, à la suite de la défaite de Poitiers, la ville fut ravagée par des pillards et en partie rasée par les Anglais. En 1371, ce sont les troupes d’Édouard de Woodstock qui prirent la ville. En 1373, Isabelle de Meulan accorda aux Milliacois le droit de chasse sur les terres de la paroisse.