Se mantienen topónimos normandos y franceses del periodo en el que la isla estuvo bajo la jurisdicción del Ducado de Normandía El mapa de la Isla de Herm, publicado por el Tenant de Herm, indica que los principales topónimos, incluyendo el nombre de la isla, tienen orígenes desconocidos, aunque existe una anglicanización de los nombres; por ejemplo, "La Pointe du gentilhomme" fue cambiada a "Alderney Point".