Fjellene som omgir sundet er rundt tusen meter på Austvågøya med blant annet Olsanestinden (999 moh.), Svartsundtindan (1 050 moh.) og Trolltindan - mens på Hinnøya går fjellene opp mot ca. 650 moh. med korte, lavereliggende daler mellom høydene som gir rom for noe bosetning. Berggrunnen tilhører Lofot-eruptivene hvorav om lag halvparten utgjør Raftsundmangeritten. Vest for Ulvøya og Brakøya skjærer Grunnfjorden og Trollfjorden seg inn mellom fjellene. På østsiden går Tennfjorden og midtveis i sundet Raftvågen. Bredden er på mellom 3,4 km i sørenden og ca. 220 meter ved Trongstraumen. Ved Digermulen fortsetter to sund sørover: Øyhellsundet på vestsiden av Stormolla og Ulvågsundet på østsiden.