Et fruktbart jordsmonn har gjort at det har bodd folk på øya i lang tid. Etter 2. verdenskrig bodde det om lag 200 personer på Fugløya. Så sent som i 1960 hadde øya 124 innbyggere. I dag brukes husene i all hovedsak som feriehus.