Den lokale kirken; Rugsund kirke har siden 1838 ligget på fastlandet på sørsiden av fjorden i Hessevågen og er tegnet av arkitekt Hans Linstow. Eldste omtale av en kirke i Rugsund er fra ca. 1330; det var da trolig en stavkirke som stod på det middelalderske kirkestedet på Rugsundøya på en høyde over Rugsund Handelssted, kirkegården, noen av de umerkete gravene og muren rundt er fremdeles synlig der.