Oracle Cloud Infrastructure
IaaS ( Infrastructure as a Service)
HPC&AI向けOCI東京データセンターサービス概要のご紹介
日本オラクル株式会社
クラウド・テクノロジー事業統括
公共営業統括 松山 慎

1Copyright © 2019 Oracle and/or its affiliates.

以下の事項は、弊社の⼀般的な製品の⽅向性に関する概要を説明するものです。また、情報提供を唯⼀の⽬的とするものであり、いかなる契約にも組み込むことはできません。以下の事項は、マテリア
ルやコード、機能を提供することをコミットメント（確約）するものではないため、購買決定を⾏う際の判断材料になさらないで下さい。オラクル製品に関して記載されている機能の開発、リリースおよび時期については、弊社の裁量により決定されます。
OracleとJavaは、Oracle Corporation 及びその子会社、関連会社の米国及びその他の国における登録商標です。
文中の社名、商品名等は各社の商標または登録商標である場合があります。

2

Oracle Cloud Infrastructure Global Footprint
Next Year: 36 Oracle RegionsUK

TORONTOMONTREALEUROPECHICAGOBAY AREAPHOENIX

US GOVAMSTERDAMFRANKFURTZURICHCHUNCHEONASHBURNSEOULISRAELISRAEL GOV
DUBAIUAE 2JEDDAHSAUDI 2Commercial

TOKYO

ASIA
OSAKA
MUMBAIHYDERABAD
SINGAPORE

Government
BELO HORIZONTESAO PAULO

Microsoft Azure
Interconnect
Microsoft Azure
Interconnect Planned

CHILE

3Copyright © 2019 Oracle and/or its affiliates.

SOUTH AFRICASYDNEYMELBOURNE

Oracle Cloud 基本戦略
Integrated Cloud: エンタープライズ向けの統⼀化されたプラットフォーム
SaaS

ERP

基幹系
本番SoR

JavaSales

Java EE

Content

Human Capital ManagementBI

Integration

IoT

PaaS
Database

Exadata4

DB Backup GoldenGate Developer Management
Security

Archive Object
Storage Storage

NetworkMarketing

Big Data
Big Data
Data
Discovery Preparation Visualization

MobileComputeIaaS

ServiceNoSQLGPUHPC

NodeContainer

Container

情報系開発
SoE

Oracle Cloud Infrastructure
ベアメタル
フラット＆ノンブロッキングネットワーク / オーバーサブスクリプションなし

5Oracle Cloud Infrastructure: 全体アーキテクチャ
Compute & Storage
HPC
w/ RDMA

GPU

Bare Metal

Bare Metal
w/NVMeContainer

VirtualMachine

Block
Volumes

Virtual Network

Physical Network

RegionDatacenters
6

Availability
Domain 1

Availability
Domain 2

Availability
Domain 3

Object / ArchiveStorageFlat, non-Blocking Network: 分離性と拡張性の両立

1

1…

2…

14

15…

…

4…
1…

32

General Compute
Pod #1

7n…

1…

1… 32

4…
1…

32

General Compute
Pod #2

General Compute
Pod #3• Availability Domain内はフラットな物理ネットワークにより、⾼いスケーラビリティを実現• Network や CPU のオーバーサブスクリプションがなく、安定した帯域と性能を実現• Compute と Storage は最⼤2ホップかつ低レイテンシーで接続可能

7

Accenture社によるAvailability Domain間通信遅延測定

Other Cloud

Oracle Cloud
Infrastructure
https://www.accenture.com/t20171003T083750Z__w__/us-en/_acnmedia/PDF-62/Accenture-Enterprise-WorkloadsMeet-Cloud.pdf のP.6 より

他社 Cloudでは遅延が平均約5倍大きいだけで無く、大きなスパイクが時々発生しインスタンス間やインスタンスとブロックストレージの間の通信時間が非常に不安定
8

他社に比べ、圧倒的なコストパフォーマンスを実現
ComputeGPUStorage

Network9

Oracle Cloud の強み

Oracle Cloud ベアメタルを基調としたサービス
 Elastic な遅延1.5μsのRDMA環境も提供¥80.82/時

 V100 NVLINK 8GPU
 NVIDIA GPU CloudやNVIDIA GRIDも利用可
能 1PB年間374万円のArchive Storageも提供
 IOPS設定の課金なし
 AD間無償 10TB/月まで無償
 専用線接続時はデータ転送無償

Compute(VM.Standard2.8; 8コア,120GB, Windows)

某クラウドベンダ
同等サービス(公開情報)¥180.48/時

¥

55%
低価格

¥461.34/時

¥

23%
低価格

¥171,000/月

¥

97%
低価格

¥614,645/月

¥

97%
低価格

¥354/時Compute - GPU(VM.GPU3.1: NVIDIA
Tesla
V100/16GB x 1GPU)¥5,222/月
Block Volume(1TB, 20K IOPS)¥18,972/月
FastConnect(1Gbps, 100TB)*専用線接続IBM Spectrum Scale (GPFS) がMarketplaceから利用可能
60GB/sを達成• IBM Spectrum ScaleのマシンイメージをMarketplaceから利用できる様になりました。
• 左記構成にて58GB/sを達成• IO500 2019/11リストにて13位

Copyright © 2019 Oracle and/or its affiliates. Content as of Oracle OpenWorld 2019

仮想マシン/Windows サーバ価格比較

Oracle Cloud Infrastructure( OCI )

M社 サービスA (公開情報より)
8vcpu (Haswell or Broadwell)
28GBメモリ
Windows Server OS
400GB ⼀次ストレージ

8ocpu (Skylake)
120GBメモリ
Windows Server OS
Windows Server 2016, 2012R2 or
2008R2400GB Boot Volumes
Tokyoリージョン年額 (税抜き)\732,70811

東⽇本リージョン年額 (税抜き)32％
低価格\1,070,408-

Oracle Cloud Infrastructure の SINET接続• 2019年10月敷設完了• SINET-OCI Tokyoリージョン間の回線はOracleが敷設しご利用機関様負担¥0-。
• 接続開始にご利用機関様、SINET様、オラクルの3社連携した2週間程度の手続が必要。
• ご利用テナントへのVirtual Circuit 接続でOCIのFastConnectサービスのプロビジョンが必要。
• L3接続が要件。BGP対応ルータの設定およびIEEE802.1q(tagVLAN)の設定が必要。
• FastConnect/SINET経由の通信 は上り/下りとも転送データ量課金無制限に¥0-。

12

14

Copyright © 2019, Oracle and/or its affiliates. All rights reserved. |15

Copyright © 2019, Oracle and/or its affiliates. All rights reserved.

Solaris 11.4(x86)イメージ提供
OCI MarketplaceにてLinuxと同じくOSに対する課金無しでイメージ提供
既存Solaris環境およびSolaris ZFS環境のCloud Lift & Shift を実現

16Compute Cloud Service for HPC & AI
フラット＆ノンブロッキングネットワーク / オーバーサブスクリプションなし

17

HPC用途での想定潜在課題とOracle Cloud Infrastructure
オンプレミス導入

他社クラウドサービス

Oracle Cloud Infrastructure

計算処理能力要求に対して電力供給や設置スペースが追いつかない。

オーバーサプスクリプションのある仮想サーバとネットワークのため、ストレージやネットワークのI/Oにオーバヘッドと不安定さがし、CPU稼働率が上がらない。

最新ハードウェアを用いたベアメタルサーバを時間単位で提供。

5年間程度の運用期間後半のハードウェア陳腐化。
製品サイクルに追従することが困難。
ワークロードのピークに合せたサイズで導入が必須で、シーズナリティや繁忙期の短期プロジェクトに対応出来ない。
大規模計算資源の運用を多くの小さなジョブが圧迫する。
高速ファイルサーバの容量半分を半年以上アクセスの無いファイルが占める。
18

アウトバウンド通信パケットに課金されるため大量のデータを扱うHPC分野では通信費用が高額となる。
日本国内データセンタのサービスが高く設定される

仮想サーバもオーバサブスクリプション無し。
物理ネットワークはオーバーサブス
クリプションの無いフラットネットワー
クでバンド幅とレーテンシを確保。
Elasticな100Gbps/<2μsのRDMAネッ
トワークもHPCインスタンスで提供。
利用サービス切換自由、契約変更無しにテクノロジリフレッシュ可能。
Outbound Traffic 毎月10TBまで無料。
閉域接続では通信パケット無制限に無料。
低価格 IaaSをWW同一価格で提供。

Oracle Cloudを用いたHybrid / Separate HPC システム
- HPC Function Virtualization - (全体イメージ)
オンプレミス• ジョブスケジューラと連携して必要なクラウドリソースを起動/停止

パブリッククラウド• 適宜最新HWに更新

小さいジョブやコプロセッサ処理
もしくは一部の一連の処理• ユーザはリソースの場所を意識しない

ログイン/
バッチジョブ
サーバ

大規模長時間ジョブ
計算リソース
大規模ジョブジョブスケジューラが自動的にジョブ分配/
データステージング
19

Compute• オンプレミスファイルサーバの利用が少ない時
間帯にデータをコピー

GPU

ファイルサーバ or
並列ファイルシステム

一定期間アクセスの無いファイル
ファイルサーバ

超安価
アーカイブ
ストレージ

• 一定期間アクセスの無いファイルをアーカイブストレージに移動

OCI HPC Capabilities

Bare Metal HPCIntel 36 Cores, 384GB RAM,

6.4TB NVMe SSD
100Gbps <2us RDMA Interconnect
1x 25GbE NIC

Bare Metal & VM GPU

1-8x Tesla V100 GPUs
NVLINK Interconnect
6-52 CPU Cores,
90-768 GB RAM,up to 512 TB Block Storage
up to 2x 25GbE NIC

Virtual Machines
Intel 1-24 Cores,
15-320 GB RAM,Or
AMD 1-8 Cores,
8-64 GB RAM

20

Bare Metal Standard2Intel 52 Cores, 768 GB RAM,up to 512 TB Block Storage
2x 25GbE NIC

Block Storage

50 GB-2 TB volumes
Up to 25K IOPS per volume
400K IOPS per hostiSCSIBare Metal Standard.E2
AMD 64 Cores, 512 GB RAM,up to 512 TB Block Storage
2x 25GbE NIC

File Storage Service

Managed distributed file service
NFSv3 mount point
Pay for what you use

Bare Metal DenseIO2Intel 52 Cores, 768 GB RAM,51.2 TB of local NVMe SSD
2x 25GbE NIC

Object Storage /Archive Storage
ServiceStandard S3 Compatible &Archive Storage

Bare Metal HPC 構成概要

Availability Domain
112…

15…

14…

…

… HPC

21

HPC … HPC
RDMA SW

HPC Compute
Pod #1

HPC Compute
Pod #2…

1…

RDMASW• Skylake 3.0-3.7GHz (Turbo Boost) 18core x 2CPU…

• 理論ピーク3.456TFLOPS/ノード

4…

RDMA SWRDMASWn…

4…
HPC• HPCインスタンス…
…
General Compute
Pod #1•••••384GBメモリ
6.4TB NVMe SSD
Block Volume (up to 1PB)
100Gbps RDMA NIC x 125Gbps Ethernet x 1• 100Gbps/port, <1.6μs Latency
RDMA

Announcing: New Instances in SC19

Availability : Q1 – Q4 2020

New AMD, Intel and GPU Shapes

E2 Standard Instances

X9 Standard Instances

X9 HPC Instances

Next GPU Instances AMD RomeArchitecture Both Bare-Metal & VMs
 Cores: 1 – 128 cores at
2.2Ghz base with up to
3.4Ghz boost
 Memory: up to 2TB
 2x 50G Bandwidth Next Gen Intel Xeon Both Bare-Metal &VMs
 Cores: 1 – 64 cores at
2.4Ghz Memory: up to 1TB
 1x 50G Bandwidth Next Gen Intel Xeon
 Cores: 1–36 cores with
High-Frequency (3.xGhz+)
 2x 100Gbps RDMA
 Local NVME SSDs

 New E2 Instancesbase 8x GPUs w/NVLINK 25TB NVME
 8x 100Gbps RDMACopyright © 2019 Oracle and/or its affiliates. Content as of Oracle OpenWorld 2019

Compute: イメージ/サポート提供OS
Name
Oracle Linux

Version (対応Shape)

Provisioning

7 (VM,BM,GPU)

標準テンプレートとして提供

6 (VM,BM)

Oracle Linux Premier Support が利用可能

商用OS

18.04 LTS (VM,BM,GPU)

Ubuntu16.04 LTS (VM,BM,GPU)

標準テンプレートとして提供

14.04 LTS (VM,BM)

CentOS

6, 7 (VM,BM)

標準テンプレートとして提供

Oracle Solaris11.4 (VM,BM)

Marketplaceにて提供

Redhat Enterprise Linux 7.4 (VM,BM)
2016 (VM,BM,GPU)

Windows Server

2012 R2 (VM,BM,GPU)
2008 R2 (VM)

BYOI (OSイメージ持ち込み)
標準テンプレートとして利用可能
BMのみBYOL可能

サポートはオラクルが提供(Priceに含む)
Oracle Linux Premier Support 相当
従量課金 (追加料金が必要)
Compute + ¥2.448 OCPU/Hour
サポートはオラクルが提供* 対応Shape: VM(Virtual Machine Instance), BM (Bare Metal Instance), GPU (GPU Instance)* Bring-Your-Own Hypervisor, Emulation Mode Virtual Machines を利用することで上記以外も利用可能
23

Confidential – Oracle Internal/Restricted/Highly Restricted

https://docs.cloud.oracle.com/iaas/Content/Compute/References/images.htmOracle Cloud Infrastructure 上のKubernetes

⾃前構築、Quickstartインストーラ、Managedサービス
OCI

簡易インストーラ
OSS Github Installer

OCI Container Engine
OCI Registory‐ Integrate with your existing OCI
tenancy & infrastructure

自前のコンテナ構築
24

Unmanaged
Kubernetes サービス

エンタープライズ・クラスのManaged Kubernetesサービス

連携可能なファイルシステム & ジョブスケジューラ ファイルシステムなど
LustreGfarm *Gluster
BeeGFS
etc…

 ジョブスケジューラ
Altair PBSworks *Univa Grid Engine
Son of Grid Engine
Slurm *
etc…

*ファイルシステムレベルでオンプレミス-クラウドのレプリケーション可能＊:ジョブ投⼊と連動した計算リソースの起動停⽌機能確認済み

25

Object Storage Cloud Service:
ニーズに合わせた2つの階層を用意

Object Storage Cloud Service
Storage

業界準拠オブジェクト・ストレージ
REST API、Amazon S3 compatible API、SDK、CLI、GUI、HDFS Connector

利⽤ケース

Oracle Cloud 環境での汎⽤ストレージ

容量価格：\3.06/GB⽉
リクエスト価格: \0.408/10k Req⽉

Archive Storage Cloud Service
ArchiveStorage

超低価格アーカイブ・ストレージ
利⽤ケース

⼤容量/⻑期保管が必要なアーカイブ・デー
タ

価格： \0.312/GB⽉

1PB年= \3,744,000書込み翌⽇Archivedとなり読み出し(リストア)に最⼤4時間程度必要

オブジェクト・ライフサイクル管理（アーカイブ・削除）
26

日本国内リージョン料金比較
データ転送料金/専用ネットワーク接続/Archive Storage＜⽇本国内リージョンの通信費⽤>
専⽤ネットワーク接続Outbound通信無料データ量
専⽤ネットワーク接続
Archive Object Storage(取り出し時間8時間以内の安価なストレージ)

して120TBダウンロードした場合の⽉額

27

Copyright © 2019, Oracle and/or its affiliates. All rights reserved.

無制限に\01Gbps/⽉\18,615

10Gbps/⽉\111,690

1PB/⽉\311,997

Archive Storageデータ取り出し必要時間
10GbpsでSINET接続し、1ヶ⽉間1PBを保存

OCI

4時間
専⽤10Gbps\423,687

Oracle Archive ServiceのためのStorageの階層化• データはすぐに発見が可能• 移動するデータオブジェクトを識別するようにポリシーを構成• 違反オブジェクトは、カタログへのクエリによって識別• 作成日時、所有者、コレクション、またはユーザー定義のメタデータを考慮• データの移動は、iRODSによって自動的に処理• ユーザーによる再呼び出し要求のために、データはiRODSによって適正に管理クラウド無料ご利用枠
Oracle Cloud Free Tier

https://www.oracle.com/jp/cloud/free/ Always Free
以下構成を無期限に無料で提供• Object Storage 10GB
• Archive Storage 10GB
• 2 x 仮想マシン 1/8ocpu、1GBメモリ• 2 ｘ Block Storage 合計100GB• ⽉あたりOutbound データ転送 10TB
• Autonomous Database、監視/通知機能(詳細は上記URL参照)

29

 30⽇間フリートライアル• $300(約35,000円)のクレジットを無料取得できます• トライアル期間中は優遇レート(＝IaaS料⾦のみ)が適⽤されるため、多様なサービスをお試しいただけます• 30⽇間有効、以降も商⽤環境として継続
使⽤可能• 30以上のPaaS/IaaSが利⽤可能

Oracle for Research (旧Oracle Innovation Accelerator)

研究機関様、教育機関様向けクラウドリソース
提供プログラム
教育者、学生、研究者、大学起業家の皆様に利用目的などに応じてOracle Cloudでご利用頂けるクレジットを提供

クレジット提供には審査がございます。
https://www.oracle.com/oracle-forresearch/
お気軽にご相談下さい。

30

【お問い合わせ先】
⽇本オラクル株式会社
公共営業本部 第⼆営業部
松⼭ 慎 ( まつやま まこと )E-Mail: Makoto.Matsuyama@oracle.com
電話: 080-1289-8315
お気軽にご連絡ください!

31