Holtefjell har flere atskilte topper og åsrygger. Det høyeste punktet er Myrehogget (707 moh.), som har et flott rundskue mot blant annet Blefjell og utover Drammensmarka og Eikerdalen. Andre markante topper er Vestbyvarden (670 moh.) og Surtvarden (668 moh.). I nordøst avsluttes platået av en rekke høydedrag – Middagsåsen, Hafella og Vestbyvarden – som skråner bratt ned mot dalføret Bingen i Øvre Eiker. I nordvest og vest er terrenget mindre bratt, og her ender Holtefjellplatået mellom grendene Fønset og Ulland i Flesberg. I sør går Holtefjell over i den smale åsryggen Grasåsen, som danner skillet mellom Eiker og Numedal. I øst skråner Holtefjellplatået nedover mot Hoensvannet, mens det blir brattere lenger nord, der Salsåsen går ned mot Spitelva.