På nordsiden av Gåsfjorden ligger bygda Gåsbøl. Gås-delen av navnet skal visstnok ikke ha noe med fuglen gås å gjøre, men kan komme av et gammelt samisk navn; . Rundt fjorden finnes gamle samiske boplasser og rester fra steinalderen.