I 1787 bodde det 17 personer på øya. Dette tallet økte til ca. 50 personer i 1940. Fraflyttingen begynte i 1960-årene, og nå er det ingen fastboende på Æbelø.