I 1680 ble Samuel Lauritzen, sønn av sogneprest i Vestre Moland, Lauritz Nilsen, eier av Nørholm. Dermed var det slutt på Nørholms privilegium som setegård. Samuel Lauritzen var en driftig og dyktig mann som arbeidet seg fram til stor velstand, og endte som sognets mektigste mann. Han la under seg en rekke gårder i Eide. Ved siden av sitt gårdsbruk drev han også skipsbygging, rederi, mølle og sagbruk. Samuel Lauritzen giftet seg i 1644 med Maren Nielsdatter, datterdatter av Helvig Nielsdatter Skade og Jacob Friis. Helvig Nielsdatter Skade var dansk, angivelig med aner tilbake til Ulvhild Olavsdatter, datter av kong Olav den hellige. Nørholm eller Nørholmen kom i 1749 i den gamle Tjorefamiliens eie gjennom ekteskapet mellom Marie Kristine Sørensdatter Nørholmen (oldebarn av Samuel Lauritzen) og Tellef Nielsen Tjore.