La seigneurie est concédée en 1729 à Charles de la Boische et à son frère Claude de Beauharnois de Beaumont. En 1750, la seigneurie est reconcédée à François de Beauharnois, fils de Claude. En 1763, après le traité de Paris, par lequel la France cède la Nouvelle-France à la Grande-Bretagne, Beauharnois, qui vit alors à Paris, vend la seigneurie à Michel Chartier de Lotbinière, lequel acquiert à la même époque les seigneuries de Vaudreuil et de Rigaud. À cette époque, seules les rives du lac près de Beauharnois sont occupées, l’ensemble de la seigneurie étant encore sous couvert forestier. Dans la deuxième moitié du , la seigneurie génère des revenus importants par la vente de bois, laquelle est plus profitable que la concession de terres, ce qui retarde le développement du territoire. En 1795, Chartier vend la seigneurie à Alexander Ellice. Celui-ci fait arpenter la seigneurie en 1800 et le domaine est réparti en section. Ellice désigne la seigneurie à partir du prénom de son épouse, soit "Annfield". Toutefois, ce nom ne réussit pas à s’imposer et les documents officiels font à peu près toujours mention de la seigneurie de Beauharnois. Il fait construire un moulin à farine. Ellice meurt en 1804 et après une tenure successive par ses fils George et Robert, son autre fils, Edward, hérite de la seigneurie. Il amorce alors le début de l’occupation du territoire et plusieurs colons s’établissent dans les différentes parties de la seigneurie. En 1838, les Patriotes s'emparent du manoir seigneurial et font Edward Ellice prisonnier. Ellice vend alors la seigneurie à un banquier londonien du nom de Scott et retourne en Angleterre.