Lysefjorden er kanskje mest kjent for de to kulturminnene Lysøen og Lyse kloster. Veldig mange av båtbyggerne som bygde båttypen Oselver holdt også til i Lysefjorden, og bygden har fremdeles et sterkt miljø som tar vare på denne båtbyggerkulturen.