Russehandelen, de mange tilreisende fiskerne og ishavsfarta fra Tromsø gjorde at Torsvåg ble prioritert som storhavn og utbygging av havna ble igangsatt. Mellom 1919 og 1929 bygde Havnevesenet en molo fra Kåja mot Vanna i sør, og en i nord med en åpning for at båtene kunne passere. Kåja ble ikke landfast før i 1962, da først ble åpningen i den nordre moloen fylt. Fram mot 1972 ble moloen i sør forlenget, og en ny molo ble bygd ut fra Vannasida.