Den indre delen av fjorden har over ti større holmer og småøyer. Den største av disse er Lysøen, der Ole Bull bygde det kjente huset sitt. Fjorden er oppkalt etter Lyse kloster, som ligger 1,5 kilometer lenger øst.