De første som bodde på Sygnefestberget var husmenn. De fleste av disse husmennene var mannskap på jektene, eller så drev de fiske ved siden av det de fikk ut av de små jordlappene. Noen hadde ikke jord i det hele tatt, men var strandsittere.