Geologisk er øya dannet av to rygger av istidsmorener hovedsakelig bestående av grus og løs sten over dypt grunnfjell. Teknisk sett er øya egentlig en halvøy adskilt fra fastlandet av East River, et tidevannsestuar fra Hudsonelva. Den østre siden av øya er fortsatt delvis preget av landbruk, og inneholder nå mange vingårder i tillegg til tradisjonelle jordbruk. Fiske er også en industri på øya, i landsbyene Northport and Montauk.