Navnet Borgheim var opprinnelig navnet på bygningen som i dag utgjør den nordligste delen av REMA 1000-butikken. Etter hvert begynte man å bruke Borgheim som et navn på hele området. Denne bygningen ble bygd i 1877, og skulle da fungere som forretningsbygg for Nøterø Forbrugsforening. Kjøpmann Carl Fosaas kjøpte bygningen i 1921, som drev kolonialforretning der fram til 1959. Da ble den kjøpt opp av Dagfinn Karseth, som fortsatte driften av forretningen. Rema 1000 tok over i 1990.