Byen Hveragerði ligger tett inntil et par fjell i Árnessýsla, Núpafjall (med den slyngete veien ned Kambar) og Reykjafjall. Den ligger ved Þjóðvegur 1 rundt 15 km vest for Selfoss og 10 km nord for Þorlákshöfn. Byen skuer ut over lavlandet som er dannet rundt Ölfusá. Østenfor byen renner elva Varmá, og den danner kommunegrensen til Sveitarfélagið Ölfus.