Etter at skoleloven ble innført i 1739, var det omgangsskole på øyene. Faste skoleordninger med egne skolebygninger kom på 1860-tallet da den nye skoleloven krevde det. Borgheim ungdomsskole var tidligere Nøtterøy kommunale realskole.