Som mange andre steder, ble bygden oppkalt etter kirkestedet. Selv om Vanse var bygdesentrum, var det forholdsvis lite bebyggelse. De gamle husmannsplassene lå spredt over et stort område. Folketallet holdt seg i overkant av hundre fra folketellingen 1845 og fram til 1900. Men i 1930 var det 153 og i 1960, 230. I påfølgende tiår ble Vanse og tilgrensede områder av Bryne og Skeime et tettsted. Vanse ble navn på tettstedet, uavhengig av de gamle gårdsgrensene. miniatyr|290x290px|Vanse prestegard med Vanse kirke og Vanse skole.