De siste fire familiene med til sammen 24 personer dro fra Helle i 1950. Av de 15 familiene som fikk lån for å flytte fra Helle og Refsvika flyttet 11 til Sørvågen. Ved fraflyttingen fra Helle og de andre stedene på yttersida ble hus og naust revet og tatt med for å bygges opp igjen der folk så slo seg ned, og dermed sto bare hustufter og båtstøer igjen.