岛上的北庄遗址是胶东地区最大的古人类文化遗迹，1996年被列为中国全国重点文物保护单位。自唐代开始，大黑山岛成为流放重刑犯的目的地，史料上称作沙门岛，很多罪犯，包括一些犯罪的官员被流放到岛上，在岛上繁衍生息，形成岛上的居民群落。明中叶，大黑山岛曾经一度被倭寇占据，后被明军收回。一些海盗的后裔也定居在岛上。现在大黑山岛归属长岛县黑山乡管辖，岛上有三个自然形成的居民点南庄、北庄和土港，位于岛的东侧和南北两侧，除了居民，岛上还有二炮部队的一个雷达站，客货运码头一个，渔港一个，常住居民约2000人。长岛县黑山乡