I 1567 hadde øya allerede 4 oppsittere. De bodde da i gammer. 1770 er det et tømret hus på Sessøya. Deretter har det bodd folk på øya stort sett hele tiden. Det var ikke fiskemottak, men en god del hus på øya. Man leverte trolig fisken til fiskebruket i Rekvik.