Navnet var på gammelnorsk Vors og ble fra rundt 1300 skrevet Voss. Betydningen er usikker og kan bety "høyde" som sikter til åser ved Vossevangen.