DataDirect Networks
ご紹介資料

ITエンジニアリング事業部
HPCソリューション部

ストレージに何を求めますか？

2011/3/31

パフォーマンス

容量スペース

価格

Copyright (C) 2009 - 2010 SCS All Right Reserved.

2

DDNならハイ・パフォーマンス

高密度- 高スループット・IOPS -- 僅か4U に最大120TB -省スペース- 2ラックで2.4PB -2011/3/31

低価格- 例：680万円@
SATA60TB構成 -Copyright (C) 2009 - 2010 SCS All Right Reserved.

3

ポジショニング

ハイエンド

アプリケーション的を絞る事がカギ！

HPCマーケット

エントリーレベルミッドレンジ

Archive

デジタルコンテンツ・IPTV

データベース
2011/3/31

ローデータ
Copyright (C) 2009 - 2010 SCS All Right Reserved.

⼤規模4DataDirect Networks, Inc.
z 会社概要¾ 会社設立から20年、製品出荷から10年以上の歴史¾ HPCベンダーとメディア関連でOEM供給の実績¾ Top500 の上位10サイト中で7～8サイトで採用
z HPCとエンタープライズのマーケットで多くの納入実績¾ WW ではCray, IBM, Dell, SGI等へのOEM¾ Sony へのOEM（放送局向け編集システムで採用）

z 日本法人は2007年に設立
2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

5

DDN 製品の特徴
z DDN 製品は以下の特徴があります。
¾ 高スループット
9 2GB/s ～10 GB/s（@コントローラ） コントローラ台数を増やすことでスループットの向上が可能¾ 高実装密度9 高さ4Uのシャーシに60disk drive （120TB@SATA 2TB）

¾ 高信頼性
9 独自のパリティチェック機構により高速化と信頼性を実現
9 Active/Activeのコントローラ、RAID 6（S2A9900）RAID 1,5,6,10（S2A6620, SFA10000)¾ 省スペース9 僅か2ラックで2.4PB実装可能¾ 拡張性
9 1システムからスループットの要求に合わせシステムを拡張可能等です。
2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

6

DDN ストレージ・システム構成
FileStorage

高速並列ファイルシステム

ExaScaler
20K Clients
200GB/s+

GridScaler

1000s of Clients
200GB/s+, NAS

Storage
Systems

S2A9900

SAN ファイルシステム

Virtual TapexStreamScaler

xStream VTL

100s SAN/LAN Clients
HSM Capable

S2A6620

Object Storage

1-8 VTL Servers
FC, iSCSI, iSERSFA10000

WOS

6GB/s
1,200 Drives in 2 Racks

2GB/s, Up to 350K IOPS
120 Drives in 8U

Disks

SASSATAUp to 15K
2011/3/31

10GB/s, Up to 1M IOPS
1,200 Drives in 2 Racks

Up to 2TB
Normal & Low Power

Copyright (C) 2009 - 2010 SCS All Right Reserved.

40 Billion Objects
4 Replicated Sites
SLC SSD

32 & 64GB
Up to 35K I0PS
7コントローラの種類とスペック

SFA 10000

S2A 9900

S2A 6620

WOS

スループット

10GB/s

6GB/s

2GB/s

>1,000,000 FRPS

RAID

1, 5, 6, 10

RAID 6

1, 5, 6, 10

レプリケーションで対応

インターフェイス

FC 8 x 16, IB QDRx8

FC 8 x 8, IB DDR x 8

FC 8 x 4

ノードあたりGbE x 4キャッシュサイ/コントローラあたり

16GB

5GB

6GB

サポートされている最大シャーシ数2020

220

最大ディスク本数120012001201200

最大容量2.4PB

2.4PB

240TB

1ノード：60TB、１クラスター：2.4PB

スループットとIOPSの両立

ブロックサイズ大のアプリ向き

コントローラ内蔵

カプレットタイプ特徴
2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

8

ラック実装例

2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

DataDirect Networks

DataDirect Networks

DataDirect Networks～600kg/㎡ の計算機
室ではコントローラ（1セット）、ディスクシャーシ（5セット、300 disk drive）を42Uラックに搭載しています。
z 空きスペースにはサーバ、ネットワーク機器などを搭載可能です。

DataDirect Networksz 通常、床耐荷重が500

9SFAの概要z S2A9900はスループット追求の製品
z SFAはスループットと高IOPS性能を導き出します。

¾ SFAはスループットとIOPSの両方を提供し、様々なデータ処理が混在する計算環境を提供します。

9 キャッシュに対し1M ランダム IOPS (カプレットあたり)
9 ディスクに対し 300K ランダム IOPS (カプレットあたり)
9 10 GB/s Read 及び Write スループット (カプレットあたり)¾ キャッシュ・コヒーレンシ又はwriteスルー・キャッシュ付き

完全なActive/ActiveのHAカプレット構成¾ RAID 1,5, 6 及び 10 をサポート¾ SASディスク・ドライブ 又は SATAディスク・ドライブを1,200台までサポート¾ FC-8 又は 8 DDR/QDR IBを16ホスト, 又は カプレットあたり10GEを8ポートまでサポート

2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

10

SFA10000次世代アーキテクチュア（1）高並列化 SFA ストレージ・エンジン

16 x 8Gb Fibre Channel Host Ports
or 8 x QDR InfiniBand Host Ports
SFA Interface Virtualization

8GB High-Speed
Cache

SFA Interface Virtualization

60Gb/sCache Link

Internal SASSwitching

8GB High-Speed
Cache

Internal SASSwitching

480Gb/s Internal SAS Storage Management Network

12345612345m

12341m1P

RAID 5,61Q

RAID 672m

8P

RAID 5,63m4m

コントローラはActive/Active デザイン
Highly Parallelized READ, WRITE:10GB/sの速度
Storage Processing
100万超の IOPS
350K ランダムディスク IOPS
16GBバッテリー付き,
Massive I/O
ミラードキャッシュ
Back-EndRAID 1*/5/6/10*
インテリジェント・ブロック・ストライピング
SATAssureデータプロテクション
Q SFA RAID 5,6
GUI, SNMP, CLI
FC8 及び QDR-IB Host-Port
SFARAID
105mOptions

RAID 6

SFA RAID 5,6

SFA RAID 1

2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

11SFA10000次世代アーキテクチュア（2）16 x 8Gb Fibre Channel Host Ports
or 8 x QDR InfiniBand Host Ports
SFA Interface Virtualization

8GB High-Speed
Cache

SFA Interface Virtualization

60Gb/sCache Link

Internal SAS
Switching

8GB High-Speed
Cache

Internal SAS
Switching

フロントエンドは最大320 Gbps
（40Gbps QDR ×8本）でサーバと接Highly 続し、バックエンド（1シャーシ内Parallelized
Storage Processing部のSAS接続レーン）は最大480Gbps で全Disk drive と接続される。
Massive I/O
Back-End480Gb/s Internal SAS Storage Management Network

12345612345m

12341m1

SFA RAID 1

2011/3/31

P

RAID 5,61Q

RAID 672m8P

RAID 5,63m

SFA RAID 5,64m

Q

RAID 65m

DDNのRAID 6は、ファイルを1バイト毎にスライスし、スライスされたファイルを1ビット×8個のSFA RAID 5,6
HDDと2個のパリティディスクに分割し読み／書きするアーキテク
SFA RAID
10チュアです。また、Read/Writeのどちらでもパリティチェックを行うため、データの信頼性が向上します。

Copyright (C) 2009 - 2010 SCS All Right Reserved.

12

SFA10000 シャーシ構成

5 Enclosure System
Up to 300 Drives
28U Total

2011/3/31

SFA10000は5、10、20シャーシの3パターンでのご提供

10 Enclosure System
Up to 600 Drives, 48UTotal

SASケーブルの長さ制限で最大は20シャーシまでです

20 Enclosure System
Up to 1,200 Drives, 88U Total

Copyright (C) 2009 - 2010 SCS All Right Reserved.

13

S2A6620 ミッドレンジ・アプライアンス
z 最高速エントリーレベルのミッドレンジ・アレイ¾ 最適化されたRAID SWとマルチスレッド機能¾ 2GB/sのスループット¾ 350,000 キャッシュ IOPS, ディスクへは30,000

z 業界トップクラスの高密度

S2A6620
高密度60スロット・エンクロージャ¾ 4Uで60ドライブ¾ 4U拡張エンクロージャで最大120ドライブまで増設可能

z フレキシブル¾ SSD, SAS , SATAの混在が可能

z 高信頼性¾ Active/Active フェイルオーバー¾ SATAssure 機能でデータ保全性を確保

z RAID 1/5/6/10 対応¾ バッテリー搭載キャッシュ(ミラーリング機能有り)

最適化、マルチコア・エンジンを搭載した高密度ストレージ
S2A6620 は様々なサービスを可能にするオープン・ストレージ・プラットフォームです2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

14

比較

CX4-960

Bandwidth

IOPS

Scalability

Rack
Density

10GB/sR/W

1M Burst

2.4PB

1.2PB

300K (disk R)
80,000 (disk W)

1.92 PB Usable

1.92 PB Usable

2.5GB/s W
3.2GB/s R

550,000 (burst)

960TB

210 TB

2.2GB/s W

164,000 (spec)

1.176TB

196 TB

3.5GB/s W
6GB/s R

700,000 (burst)
172,000 R (disk)
45,000 W (disk)

448TB

600TB

FAS6080

LSI 7900
IBM DS5000
2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

15

適合アプリケーション
HPC•クラスタシステムのストレージ（Lustreファイルシステム）•ライフサイエンス （高速・大規模NAS）

デジタル画像（特に高解像度・非圧縮）•動画（リッチメディア、IP TV、Web 動画サイト、監視カメラ）•静止画（医療画像、航空衛星写真、地図情報、Web フォトアルバム）

ファイルアーカイブ•階層型ストレージ•VTL

仮想化、クラウド•SaaS（Storage as a Service)

2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

16

HPC
大規模Lustre
並列ファイルシステム

HPC Cluster

SFA10000はQDR InfiniBandをサポートし、クラスタシステムとシームレスに接続！
複数のコントローラによりスループットを向上

IBスイッチInfiniBand QDR (40Gbps）接続

Lustre OST, MDT, OSS, MDS

2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

OSS, MDS

17

xdd （write）パフォーマンス

OSSが8台、OSTが28/30のケース

OSSが1台、OSTが15のケース

2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

18

SFA10000 Lustre BMT

2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

19大規模NASシステム構成例
NFS Client
Solaris,Windows,Debian, Mac

GridScaler
Clients(RHEL Suse)

10 GbE Switch
GridScaler
NAS Gateways~475 MB/sec
per GbE Link

GridScaler
Gateways~800 MB/sec
per 10 GbE link

FC 8 Gbps
FC 8 Gbps Switch x 2

SFA 10KRAID 5/6, 300 Disks
SAS 15K rpm
Up to 144 TB
Up to 500,000 Disk IOPS
Up to 1,000,000 Burst IOPS
Up to 10 GB/sec

S2A9900 Couplet
1200 Disks, RAID 6
5.5 GB/sec Read/Write
Up to 2.4 PB
Single System

ラージファイルのシーケンシャルアクセスのための大容量ストレージ

2011/3/31

FC 8 × 16
Ports

スモール／ラージファイルのランダ
ムアクセスのための高速ストレージ
SINGLE FILESYSTEM!

Copyright (C) 2009 - 2010 SCS All Right Reserved.

20

ライフサイエンスの各サイトで採用“DDNのExaScaler S2A9900 システム導入以前は、TGENでこのレベルの次世代シーケンス・アラインメントをサポートすることは不可能でした”- James Lowey, TGen Director of HPC

2011/3/31

次世代遺伝子解析等、ライフサイエンスの次世代アプリケーションにはパフォーマンス とケーラビリティ、そしてコスト効率が必要です。そのため、次世代遺伝子解析のリーダーはDDNのストレージ選んでいます。

Copyright (C) 2009 - 2010 SCS All Right Reserved.

21

ローレンスリバモア研究所

z ローレンス・リバ

モア国立研究所では、SATAディスク実装におけるデータ信頼性の維持と常時140GB/s以上のスループットを必要としていました。

z このパフォーマン

ス要求に応えることができたのはDDNのみでした

2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

22

LHcb – ATLASのためのストレージソリューシ
ョン
1.2 PB of Atlas Storage
DDNのS2A9900はCERN LHCb実験になくてはならない必須のプロダクトです

1.5 PB of Atlas Storage

Selected DDN’s S2A9900
17 PB of Atlas Storage

1.2 PB of Atlas Storage

Selected DDN’s S2A9900
2.4 PB of Atlas Storage

600 TB of Atlas Storage
2011/3/31

DDNは、次世代の素粒子物理学研究に、コスト効率がよく、かつ高い可用性ストレージを提供するリーダーです

Copyright (C) 2009 - 2010 SCS All Right Reserved.

23

最先端の科学技術をサポート
z 各分野の科学研究をリードする大学・研究機関がDDN のストレージソリューションを採用¾ ライフサイエンス：膨大なデータ量の次世代のゲノムとプロテオム研究を実現¾ 高エネルギー物理学：最大規模の科学実験が生み出す大規模データのためのストレージソリューション
¾ 天文学：大規模データの管理と分析のためのストレージ・ソリューション

2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

24導入事例 国内ユーザ

用途

ファイルシステム

容量

筑波大学

大規模計算機システム

ExaScaler(Lustre)

12 GB/s, 1.2 PB

東京大学ICRR

大規模実験データアー
カイブ

GPFS

4 GB/s, 1.5 PB

北陸先端大学院大学

大規模ファイルサーバ

Grid Scaler NAS

1.2 PB NAS

半導体企業

大規模アーカイブ

DDN-ZFS

750 TB NAS

農林水産技術会議

HPCストレージ

ExaScaler (lustre)

5 GB/s, 220 TB

大手自動車メーカ

シミュレーション

Lustre1.5GB/s, 20 TB

放送局

ニュース編集用システ
ム

xStramScaler

5 GB/s, 100 TB

国立天文台

計算機システムとニアライン

Lustre ZFS

4 GB/s, 120 TB

NICT

大規模ファイルサーバ

GPFS NAS

240TB

農林水産技術会議

同上

DDN-IBRIX

300TB

2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

25導入事例 国内企業
用途

ファイルシステム

パフォーマンス

容量

半導体企業

大規模アーカイブ

ZFS

10GB/s

750TB

大手自動車メーカ

シミュレーションシステム

xStreamScaler1.5GB/s

30TB

放送局

ニュース配信用システム

xStreamScaler

5 – 6GB/s

100TB

Usen Gyao

配信

xStreamScaler

20Gbps96TB

IMAGICA

ノンリニア編集

CXFS

1GB/s

30TB

大手ゲーム企業

ノンリニア編集

xStreamScaler

1 – 2 GB/s

30TB

大手プロダクション
企業

DVDオーサリング

xStramScaler

2GB/s

120TB

大手プロダクション
企業

DVDオーサリング

xStreameScaler

6GB/s

100TB

ユーザ

2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

26

S2A 6620 ファイルサーバ構築例
z 物理容量60TB構成¾ （想定サーバ：Windows Server

2008R2)

製品

数量

金額

S2A6620 （本体）1

¥3,572,000

SATA 2TB HDD

30¥2,478,000

FC 4Gbps HBA

1¥223,000

FCケーブル2¥17,000

S2A6620 - RAID-6
and SATAssure（ソフトウェア）

1¥510,000

FC 4 ケーブル× 2

本体小計 ¥6,800,000
インストール&初
年度保守費用
2011/3/31¥700,000
Copyright (C) 2009 - 2010 SCS All Right Reserved.

27

お問い合わせ先

住商情報システム株式会社
ITエンジニアリング事業部
HPCソリューション部
Phone: 03-5859-3011

2011/3/31

Copyright (C) 2009 - 2010 SCS All Right Reserved.

28