度约200公尺的橄榄门与南小岛的拳头岭相望。两者之间的橄榄门海崃长约150公尺，过去在东海遭遇较强风浪时台湾渔民多会将船只驶于此水道以躲避风浪。北小岛最高峰为位于南部、海拔高度135公尺的狮峰，而第二高峰则为位于中部偏北的鹰峰，其他较高处还有孔明石以及莲花石。北小岛岛屿上栖息着各种鸟类，高良铁夫在1953年8月发现北小岛附近海域有大量出被列为濒危物种的短尾信天翁，而在2002年时也有报告指短尾信天翁开始于岛屿上繁殖。1970年12月10日，九州、长崎大学合同学术调査团也在北小岛发现数只黑脚信天翁。