1DDN Update 2019
JLUG 2019

DataDirect Networks Japan, Inc.
2019/10/17

橋爪 信明 (nhashizume@ddn.com)

DDN Storage | © 2019 DDN Storage© 2015 DataDirect Networks, Inc. * Other names and brands may be claimed as the property of others.
Any statements or representations around future events are subject to change.

22019年9月よりEXA5を提供• EXAScalerとは？
► DDNが提供するLustre Linux Distribution► CentOSベース► DDN SFAストレージ向け最適化► Lustreソリューションの構築を可能な限り簡素化• EXA5とは？
► 最新版EXAScaler == EXAScaler5.0► ベースコンポーネントはLustr2.12.2とCentOS7.6► EXA5用最新DDN Softwareをバンドル

DDN Storage | © 2019 DDN Storage© 2015 DataDirect Networks, Inc. * Other names and brands may be claimed as the property of others.
Any statements or representations around future events are subject to change.

2

3EXA5新機能 – Hot Pool
• ストレージプール間の自動データ階層化• 自動パージおよびレプリケーションの初期フレームワークを提供、このフレームワークでは、時間経過とともにフローの一部を更新することが可能• 自動レプリケーション► MDTをスキャンするデーモン► 最後のオープン後、設定した期間が経過した場合、事前に構成したエージェントがlfsコマンドを利用しレプリカを作成• 自動パージ► 空き領域の閾値を監視するソースプル
上のOSTをスキャンするデーモン► Stratagemのパージ機能を使用し、空き領域が閾値に達した場合に、レプリカを有効にし、ソースデータを削除• アドミンガイド10.12参照

DDN Storage | © 2019 DDN Storage

FlashPool
LRUを元にHDD poolへ自動マイグレーション
APIによりFlash Poolへミラーを作成 (job/request/policy)

HDDPool© 2015 DataDirect Networks, Inc. * Other names and brands may be claimed as the property of others.
Any statements or representations around future events are subject to change.

3

4EXA5新機能 – Data on MDT• Lustre Data on MDT (DoM)は、小さなファイルをMDTに直接格納することによって、小さなファイルIOの性能を改善

open, write data, read, attr
Client• 小さなランダムIOが引き起こす
OSTデバイスのシークによるストリーミングIO性能の劣化を抑制し、大きなファイルIOの性能も向上

MDS

layout, lock, size, read data

Small file IO directly to MDS
Example DoM/PFL File Layout
MDT[0, 1MB)

4 OST stripes[1MB, 1GB)60 OST stripes[1GB, ∞)• MDTのフォーマット時にDoMの使用可否を決める必要あり…

inode数とDoMで使用する領域サイズを事前に調整する必要あり► アドミンガイド10.9.1を参照►

DDN Storage | © 2019 DDN Storage© 2015 DataDirect Networks, Inc. * Other names and brands may be claimed as the property of others.
Any statements or representations around future events are subject to change.

4

5EXA5新機能 – Multi-Rail LNet
• ExaScaler4.xの複数ネットワークイン
タフェースを集約する機能を元に開発• Dynamic LNet Configuration►

複数のLNetを共有するピアを自動的に構成することでMulti-Rail構成を簡素化• LNet Network Health►

複数のLNetインタフェースを使用する場
合、エラーが発生時、またはイニシャルリクエストでメッセージがロストした時に、代替ネットワーク経由でRPCの再送信するオプションを提供• より少ないOSSによって要求されるスループットを達成可能

DDN Storage | © 2019 DDN Storage© 2015 DataDirect Networks, Inc. * Other names and brands may be claimed as the property of others.
Any statements or representations around future events are subject to change.

5

6EXA5新機能 – SSD性能の改善• TRIM►

領域を効率的に解放し、SSDの能力を最大化►1000

SFA11.5のSCSI UNMAPによってサポート• 性能向上►IOPS

Lustre 2.12.xで、いくつかのSSDに対する性能向上を実施
ランダムRead IOPsとスループッ
トで+35%の性能向上を達成• http://cdn.opensfs.org/wpcontent/uploads/2019/07/LUG201
9-Lustre_Optimizations_for_FlashIhara.pdf

IOPS (Kops/sec)

►1200

800

70%
Efficiency

600+37%B/W

IOPS andB/W

Network B/W
Limit

400

200
2.10.7 on RHEL7

04KB

8KB

16KB

2.12.1on RHEL7
32KB

64KB

128KB

I/O Size (Bytes)

DDN Storage | © 2019 DDN Storage© 2015 DataDirect Networks, Inc. * Other names and brands may be claimed as the property of others.
Any statements or representations around future events are subject to change.

6DDN SFA
7ALL-FLASH AND HYBRID BLOCK STORAGE PLATFORMS
2019年より全グレードで新ラインナップを展開

200NV

400NV

7990

18K

Block:23GB/s
Embedded:20GB/s
1M IOP/s

Block:46GB/s
Embedded:40GB/s
2M IOP/s

Block:23GB/s
Embedded:20GB/s
1M IOP/s

Block:92GB/s
Embedded:72GB/s
3.2M IOP/s

24 NVME Slots

24 NVME Slots

Up to 450
SSD/HDD

48 NVMe Slots
Up to 1872
SSD/HDDEDR IB (4),FC32 (8), FC (8)EDR IB (8)EDR IB (4)FC16 (8)EDR IB (16)

OPAは標準構成では無くなりました、案件毎に要相談
DDN Storage | © 2019 DDN Storage© 2015 DataDirect Networks, Inc. * Other names and brands may be claimed as the property of others.
Any statements or representations around future events are subject to change.

7本年度(2019/1〜2020/3)
8主なEXAScaler導入実績（含む導入予定）
サイト

物理容量

東京大学様Oakbridge-CX

16.128PB

東京大学地震研究所様1.024PB

東京大学医科学研究所ヒトゲノム解析センター様

1.53PB

筑波大学様Cygnus

3.2PB

国立環境研究所様

28.224PB

国立遺伝学研究所様
気象庁気象研究所様
京都大学化学研究所様
某国立研究所様

13.2PB

HDD
物理146.862PB
実効約117PB

23.328PB
4.66PB
33.6PB

某省庁様

13.92PB

某企業研究所様

1.68PB

某企業研究所様

3.28PB

某国営企業研究所様1.328PB

某製造業様

1.76PB

産総研様ABCI北海道大学様OIST様JAMSTEC様

DDN Storage | © 2019 DDN Storage

SSD
物理1.868PB
実効約1.49PB

1.38PB(All Flash)
75TB(All Flash)
338TB(All Flash)
75TB(All Flash)© 2015 DataDirect Networks, Inc. * Other names and brands may be claimed as the property of others.
Any statements or representations around future events are subject to change.

89本年度の主な導入実績より• All Flashをもっと売りたい► 146.862PB(HDD) : 1.868PB(SSD) == 98.75 : 1.25
► 来年はせめて全体の10%ぐらいには、、、• 今年は大規模なスパコン調達が少なかった► HDDは安定して100PB以上ですが、HDDの容量が大きくなっているのでコンポーネントは少なくなっています► 容量の増加に帯域の増加が着いて行っていない• PCIe gen4, gen5,,,• NVMeの性能とネットワーク帯域のアンマッチも• 来年はSSD(NVMe)領域とHDD領域を持つHybrid Storageをスパコン・HPCに対して更に推進したい► All Flash► SCM対応、NVMEoF対応などは？？？
DDN Storage | © 2019 DDN Storage© 2015 DataDirect Networks, Inc. * Other names and brands may be claimed as the property of others.
Any statements or representations around future events are subject to change.

910HW製品アップデート• 本四半期以降HW製品に以下のアップデートを行う予定です• コントローラプロセッサ► SkyLake → CascadeLake• コントローラメモリのクロックアップ• Infiniband HCA► CX5 → CX6► CX6はEDRとHDR100► HDR200は現行ラインナップ上では予定無し• 詳細はSC19@DenverでDDN Storage | © 2019 DDN Storage© 2015 DataDirect Networks, Inc. * Other names and brands may be claimed as the property of others.
Any statements or representations around future events are subject to change.

10

11

Thank You!
Keep in touch with us

Team-JPSales@ddn.com

Tokyu Bancho Bldg. 8F
6-2 Yonbancho Chiyoda-ku,
Tokyo 102-0081@ddn_limitless+81-3-3261-9101+81-3-3261-9140

company/datadirect-networks

DDN Storage | © 2019 DDN Storage© 2015 DataDirect Networks, Inc. * Other names and brands may be claimed as the property of others.
Any statements or representations around future events are subject to change.