Den gammelnorske formen av navnet var Hvammr som betyr "(liten) dal", dette viser kanskje til Steinsdalen vest for Norheimsund. Før 1911 het kommunen Vikør, som kommer fra det gammelnorske ordet Vikøyar. Det var navnet på gården hvor gamle Vikøy kirke lå.