I tillegg til granskog, består skogsmark av varmekjær lauvskog langs sørsida mot sjøen. Ytterøya har en stor rådyrstamme, og salg av jakt på rådyr er en viktig tilleggsnæring for grunneierne. Ytterøya har også et rikt fugleliv. På sørsiden av øya ligger Kjølsvikholmen på ca. 22 daa som er foreslått som biotopverneområde. Her har det bl.a. hekket stokkand, ærfugl, hettemåke, fiskemåke og teist.