Navnet skal være en relativt moderne forkortelse av , betegnelsen som ble brukt i deler av Hallingdal. Opprinnelig kan navnet ha vært spøkefullt ment, men det kan også ha oppstått fordi en hems åpner seg mot stuerommet på samme måte som Hemsedal møter hoveddalføret Hallingdal ved Gol.