Allerede i midten av 1960-årene så Fred. Olsen hvilke muligheter som lå innen oljesektoren, spesielt på letesiden, og han var en av initiativtakerne til etableringen av Norwegian Oil Consortium (NOCO) og senere Saga Petroleum A/S. Dette viste seg å være en riktig satsing. Gjennom en 45 % eierinteresse i NOCO hadde man et betydelig engasjement innen oljeleting, produksjon og salg av olje. Disse interessene ble solgt i 1991. Også innen offshoresektoren har Fred. Olsen & Co. – selskapene vært blant pionerene i Norge. I et raskt stigende olje- og offshoremarked ble det fra 1973 bygget opp en meget slagkraftig offshoredivisjon med Dolphin International Inc., Houston og senere Dolphin A/S, Tananger og Dolphin Drilling Aberdeen som operasjonsselskaper.