Gravermarka ligger på et lite flatt platå på nordvestkysten av Austvågøy, mellom Gravermarkfjellene i øst og Gimsøystraumen i vest. Gimsøya ligger direkte ovenfor Gravermarka i vest, over Gimsøystraumen. Gravermark grenser i sør til bygden Sydal som den er omtrent vokst sammen med. Gravermarka og Sydal deles av «Storåsen» som gir et naturlig skille. Området i foten av Slettafjellet i sør, som er bebodd og ligger høyere enn resten av Gravermarka, kalles kort for «Åsen». Mot vest og nærmere Gimsøystraumen blir åsen større og kalles «Storåsen». På Åsen, i foten av fjellet, ligger litt bebyggelse og ungdomshuset til Ungdomslaget Nøkkåsen.