Au cours du , la famille Sévin fait bâtir le château, qui est plusieurs fois agrandi ou remanié jusqu'à nos jours. En 1712, François Boula rachète la seigneurie à Charles Sévin, dit le Marquis de Quincy. Trois ans plus tard, le nouveau seigneur finance la reconstruction de l'école. Son petit-fils, Antoine François Alexandre Boula de Nanteuil est nommé intendant de Poitiers en 1784. Lors de la Révolution française, lorsqu'il est arrêté au château de Quincy en 1794, l'assemblée communale intervient en sa faveur au nom des services rendus par sa famille et obtient sa libération. Son fils, ultraroyaliste convaincu, est maire du village jusqu'en 1830 . Le curé de Ségy, Jacques Hébert, a moins de chance pendant la Révolution : il est tué dans la prison de Meaux lors des massacres de septembre 1792.