På den langt mindre Austøya ligger det lave Vårberget som siden 1950-tallet har huset Forsvarets anlegg, og derfor har vært forbudt område for de fleste innbyggerne i byen, tross sin vakre utsikt. Nordre del av Austøya kalles Vestervågen og søndre del av Austøya kalles naturligvis Østervågen.