Varianter av stedsnavnet Voster kan spores tilbake til år 1338, da det i et brev ble kunngjort at Thorkel Bergulfssön solgte «6 Maanedmatsbol i Vervik i Bonster (Vormster) Sogn i Ryfylke» til Abbed Hogne for 9 Mark sølv. Andre navn stedet har blitt omtalt som, er bl.a. Wormster, Vormsta og Varstad. Dagens skrivemåte har blitt brukt siden 1886..