Frem til slutten av 1800-tallet var bygdenavnet Aalund (Ålund). Navnet på tettstedet som en i dag ofte betegner som Ølensjøen sies å stamme fra «Landhandlerstedet Aalundssøen». Like ovenfor Ølensjøen ligger bygdemuseet Nerheimstunet, på den gamle og sentrale gården Nerheim. Dette navnet ble skrevet som Niarðhæim i 1326 og kommer av guden Njord fra norrøn mytologi. Her stod det et gudehov til ære for Njord. Senere ble det vigslet til kirkested, og de to første Ølenskirkene stod her i den første kristne tiden og frem til 1874. Da den nye kirken ble bygget i 1874 ble denne plassert lenger nede ved sjøen, blant annet for at den ikke skulle stå så værhardt til, og for å være lettere tilgjengelig for de som kom sjøveien.