Cirka 1893 bygde firma J. A. Killengreen & Søn, fra Tromsø, fiskesalteri, landhandel og noe seinere rorbuer på øya. Det var 15 – 20 båter stasjonert på øya da, og cirka 60 innbyggere i 1900. Røssholmen hadde en bra, men litt trang, havn, og lå jo nært til godt fiskehav. Vannforsyningen ble forbedret og rundt 1930 bygde man en rausmolo ut til «Vedskjæret». Det ble også bygd en bra vei rundt hele været. På øya var det en brygge i 3 etasjer, flere egnerbuer, bolighus med bakeri i kjelleren, trandamperi, fjøs, butikk, «månedskarstua» (hus til dem som hadde sesongarbeid på øya).