麻盛放时，黄麻地远观就像一块黄色的石头，所以该地又称为黄石。这亦是该地较常用的称唿。黄麻地有很多郊游设施，有美丽海景。但政府为了保护这区美丽的环境，控制这区的汽车流量，在北潭涌设立关卡，只有公共交通工具和有许可证的车辆可以进入。区内最着名的地点是黄石公众码头，为一个街渡码头。
行政区划.黄麻地并不划入西贡区的原因是以前西贡并未开通西沙公路往十四乡，加上未有标准道路开往北潭坳、黄麻地等地区，而且西贡北地区的乡村如深涌、荔枝庄、榕树澳，和岛屿赤洲等都依赖街渡、渡轮往来马料水和大埔滘