Rundt fjorden ligger gården Grunnfjord og bygda Arnøyhamn. Navnet Grunnfjord ble også brukt på bygda, men da det i 1931 ble etablert postkontor her fikk det navnet Arnøyhamn siden navnet Grunnfjord var i bruk annet sted. Etter hvert ble Arnøyhamn også det vanlige navnet som ble benyttet på bygda.