大潭的东边是大潭港和大潭湾这两个海湾。它们位于赤柱半岛和鹤咀半岛两半岛之间。大潭的南边是白笔山，该半岛大部分土地兴建成低层豪宅如红山半岛、红山花园、龟背湾、皇府湾及玫瑰园的所在地；西边是大潭水塘和大潭郊野公园；北边是大潭笃。现在的大潭比以前殖民地时期初期所指的范围少，所以「大潭笃」和「大潭头」分别是指以前大潭的北端和大潭半岛的南端。
历史.「大潭」一名在明朝着作的《粤大记》内已经有记载。位于附近的大潭湾（Tytam Bay）曾经作为18世纪代表香港岛的一个港口，而维多