Den tredje gruppen var husmenn, en underklasse i samfunnet på den tiden. Dette var folk som fikk leie et lite stykke jord av en gårdbruker, og de levde av det stykket. Dette var fattige mennesker som måtte spe på med mye ekstraarbeid rundt omkring for å klare seg. Den fjerde og siste gruppen ble kalt . Dette var en forholdsvis stor gruppe som utgjorde nær 13 % av innbyggerne, noe høyere enn landsgjennomsnittet. De bodde i vanlige hus og tjente penger ved å arbeide for andre. Slik var samfunnet i Sauda før industrien gjorde sitt inntog i 1915, og det som i dag er sentrum besto den gangen for det meste av husmannslapper. Men allerede på 1800-tallet var det mange hotelleiere og handelsmenn som hadde etablert seg der. På det som i dag omtales som «smelteverksområdet» fantes det også etablerte kjøpmenn og gårdsbruk.