DataDirect
Dt Di t Networks
N tk
ご紹介資料

ITエンジニアリング事業部
HPCソリューション部

ストレ ジに何を求めますか？
ストレージに何を求めますか？

パフォーマンス

容量スペ ススペース

価格

2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

2

DDNならハイ・パフォーマンス

高密度- 高スループット・IOPS -- 僅か4U に最大120TB -省スペース- 2ラックで2.4PB -2010/11/26

低価格- 例：680万円@
例 680万円
SATA60TB構成 -Copyright (C) 2009 - 2010 SCS All Right Reserved.

3

ポジショニング

ハイエン
ンド

アプリケーション的を絞る事がカギ！

HPCマーケット

エントリーーレベル

ミミッドレンジ

Archive

デジタルコンテンツ・IPTV

データベース2010/11/26

ローデータ
Copyright (C) 2009 - 2010 SCS All Right Reserved.

⼤規模4DataDirect Networks,, Inc.
z 会社概要¾ 会社設立から20年、製品出荷から10年以上の歴史¾ HPCベンダーとメディア関連でOEM供給の実績¾ Top500 の上位10サイト中で7～8サイトで採用
z HPCとエンタープライズのマーケットで多くの納入実績¾ WW ではCray, IBM, Dell, SGI等へのOEM¾ Sonyy へのOEM（放送局向け編集システムで採用）

z 日本法人は2007年に設立
2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

5

DDN 製品の特徴
z DDN 製品は以下の特徴があります。
製品は以下の特徴があります¾ 高スループット
9 2GB/s ～10 GB/s（@コントローラ） コントローラ台数を増やすことでスループットの向上が可能
コントロ ラ台数を増やすことでスル プットの向上が可能¾ 高実装密度9 高さ4Uのシャーシに60disk drive （120TB@SATA 2TB）

¾ 高信頼性
9 独自のパリティチェック機構により高速化と信頼性を実現
9 Active/Activeのコントローラ、RAID 6（S2A9900）RAID 1,5,6,10（S2A6620, SFA10000)¾ 省スペース
9 僅か2ラックで2.4PB実装可能¾ 拡張性
9 1システムからスループットの要求に合わせシステムを拡張可能等です。
2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

6

DDN ストレージ・システム構成
File
Sttorage

高速並列ファイルシステム

ExaScaler
20K Clients
200GB/s+

GridScaler

1000s of Clients
200GB/s+, NAS

Storage
Sys
stems

S2A9900

SAN ファイルシステム

Virtual TapexStreamScaler

xStream VTL

100s SAN/LAN Clients
HSM Capable

S2A6620

Object Storage

1-8 VTL Servers
FC, iSCSI, iSERSFA10000

WOS

6GB/s
1,200 Drives in 2 Racks

2GB/s, Up to 350K IOPS
120 Drives in 8U

Disks

SASSATAUp to 15K
2010/11/26

10GB/s, Up to 1M IOPS
1,200 Drives in 2 Racks

Up to 2TB
Normal & Low Power

Copyright (C) 2009 - 2010 SCS All Right Reserved.

40 Billion Objects
4 Replicated Sites
SLC SSD

32 & 64GB
Up to 35K I0PS
7

コントローラの種類とスペック

SFA 10000

S2A 9900

S2A 6620

WOS

スループット

10GB/s

6GB/s

2GB/s

>1 000 000 FRPS
>1,000,000

RAID

1, 5, 6, 10

RAID 6

1, 5, 6, 10

レプリケーションで対応

インターフェイス
インタフェイスFC 8 x 16,16 IB QDRx8

FC 8 x 88, IB DDR x 8

FC 8 x 4

ノードあたりノドあたり
GbE x 4キャッシュサイ/コ
ントローラあたり

16GB

5GB6GB

サポートされている最大シャーシ数

2020

220

最大ディスク本数

1200

1200

120

1200

最大容量

2.4PB

2.4PB

240TB

1ノード：60TB、
１クラスター：2.4PB

スループットとIOPSの両立

ブロックサイズ大のアプリ向き

コントローラ内蔵

カプレットタイプ特徴
2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

8

ラック実装例

2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

DataDirect Networrks

DataDirect Networrks

DataD
Direct Networrks～600kg/㎡ の計算機
室ではコントローラ（1セット） ディス（1セット）、ディスクシャーシ（5セット、300 disk drive）を42Uラックに搭載しています。
z 空きスペースにはサーバ
サバ、ネットワ
ネットワー
ク機器などを搭載可能です。

DataD
Direct Networrks

z 通常、床耐荷重が500
通常 床耐荷重が500

9SFAの概要z S2A9900はスル
S2A9900はスループット追求の製品
プット追求の製品
z SFAはスループットと高IOPS性能を導き出します。

¾ SFAはスループットとIOPSの両方を提供し、様々なデータ処理が混在する計算環境を提供します。

9 キャッシュに対し1M ランダム IOPS (カプレットあたり)
9 ディスクに対し
デ スクに対し 300K ランダム IOPS (カプレットあたり)(カプレ トあたり)
9 10 GB/s Read 及び Write スループット (カプレットあたり)¾ キャッシュ・コヒーレンシ又はwriteスルー・キャッシュ付き

完全なActive/ActiveのHAカプレット構成¾ RAID 1,5, 6 及び 10 をサポート¾ SASディスク・ドライブ 又は SATAディスク・ドライブを1,200台までサポート¾ FC-8
FC 8 又は 8 DDR/QDR IBを16ホスト,IBを16ホスト 又は カプレットあたり10GEを8
カプレ トあたり10GEを8ポートまでサポート

2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

10SFA10000次世代アーキテクチュア（1）高並列化 SFA ストレ
ストレージ・エンジン
ジ・エンジン

16 x 8Gb Fibre Channel Host Ports
or 8 x QDR InfiniBand Host Ports
SFA Interface Virtualization

8GB High-Speed
Cache

SFA Interface Virtualization

60Gb/sCache Link

Internal SAS
Switching

8GB High-Speed
Cache

Internal SAS
Switching

480Gb/s Internal SAS Storage Management Network

12345612345m

12341m1P

RAID 5,61Q

RAID 672m8P

RAID 5,63m4m

コントローラはActive/Active デザイン
Highly Parallelized READ, WRITE:10GB/sの速度
Storage Processing
100万超の IOPS
350K ランダムディスク IOPS
16GBバッテリー付き,M
Massivei
I/O
ミラードキャッシュ
ドキ
シBack-End
RAID 1*/5/6/10*
インテリジェント・ブロック・ストライピング
SATA
デ タプロテクシ ン
SATAssureデータプロテクション
Q SFA RAID 5,6
GUI, SNMP, CLI
FC8 及び QDR-IB Host-Port
SFA
RAID
105mOptions

RAID 6

SFA RAID 5,6

SFA RAID 1

2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

11SFA10000次世代アーキテクチュア（2）16 x 8Gb Fibre Channel Host Ports
or 8 x QDR InfiniBand Host Ports
SFA Interface Virtualization

8GB High-Speed
Cache

SFA Interface Virtualization

60Gb/sCache Link

Internal SAS
Switching

8GB High-Speed
Cache

Internal SAS
Switching

フロントエンドは最大320 Gbps
（40Gbps QDR ×8本）でサーバと接続し、バックエンド（1シャーシ内Highly Parallelized
Storage部のSAS接続レ
Processing部のSAS接続レーン）は最大ン）は最大480Gbps で全Disk drive と接続される。8GBのキャッシュは主にdisk へのwrite
時に一時保管の目的で使用。
時に時保管の目的で使用。
M
MassiveiI/O
Back-End

480Gb/s Internal SAS Storage Management Network

12345612345m

12341m1SFA RAID 1

2010/11/26

P

RAID 5,61Q

RAID 672m8P

RAID 5,63m

SFA RAID 5,64m

Q

RAID 65m

DDNのRAID 6は、ファイルを1バイト毎にスライスし、スライスイト毎にスライスし、スライスされたファイルを1ビット×8個のSFA RAID 5,6
HDDと2個のパリティディスクに分割し読み／書きするアーキテク
SFA RAID
10チュアです。また、Read/Writeのどちらでもパリティチェックを行うため、データの信頼性が向上します。

Copyright (C) 2009 - 2010 SCS All Right Reserved.

12

SFA10000 シャーシ構成

5 Enclosure Systemy
Up to 300 Drives
28U Total

2010/11/26

SFA10000は5、10、20シャーシの3パターンでのご提供

10 Enclosure Systemy
Up to 600 Drives, 48UTotal

SASケーブルの長さ制限で最大は20シャ シまで20シャーシまでです

20 Enclosure System
Up to 1,200 Drives, 88U Total

Copyright (C) 2009 - 2010 SCS All Right Reserved.

13

S2A6620 ミッドレンジ・アプライアンス
z 最高速エントリーレベルのミッドレンジ・アレイ
最高速トドジイ¾ 最適化されたRAID SWとマルチスレッド機能¾ 2GB/sのスループット¾ 350,000 キャッシュ IOPS, ディスクへは30,000

z 業界トップクラスの高密度

S2A6620
高密度60スロット・エンクロージャ¾ 4Uで60ドライブ¾ 4U拡張エンクロージャで最大120ドライブまで増設可能

z フレキシブル¾ SSD, SAS , SATAの混在が可能

z 高信頼性¾ Active/Active フェイルオーバー¾ SATAssure 機能でデータ保全性を確保

z RAID 1/5/6/10 対応¾ バッテリー搭載キャッシュ(ミラーリング機能有り)
バ テリ 搭載キシ ミラ リ グ機能有り

最適化、マルチコア・エンジンを搭載した高密度ストレージ
S2A6620 は様々なサ
は様々なサービスを可能にするオープン・ストレージ・プラットフォームです
ビスを可能にするオ プン ストレ ジ プラットフォ ムです2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

14

比較

CX4-960

Bandwidth

IOPS

Scalability

RackDensity

10GB/sR/W

1M Burst

2 4PB
2.4PB

1 2PB
1.2PB

300K (disk R)
80,000 (disk W)

1.92 PB Usable

1.92 PB Usable

2.5GB/s
25GB/ W
3.2GB/s R

550,000 (burst)

960TB

210 TB

2.2GB/s W

164,000 (spec)

1.176TB

196 TB

3.5GB/s W6GB/s R

700,000 (burst)
172,000 R (disk)
45,000 W (disk)

448TB

600TB

FAS6080

LSI 7900
IBM DS5000
2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

15

適合アプリケーション
HPCC•クラスタシステムのストレージ（Lustreファイルシステム）•ライフサイエンス （高速・大規模NAS）

デジタル画像（特に高解像度・非圧縮）•動画（リッチメディア、IP TV、Web 動画サイト、監視カメラ）•静止画（医療画像、航空衛星写真、地図情報、Web フォトアルバム）

ファイルアーカイブ•階層型ストレージ•VTL

仮想化、クラウド•SaaS（Storage as a Service)2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

16

HPC
大規模Lustre
大規模Lt
並列ファイルシステム

HPC Cluster

SFA10000はQDR InfiniBandをサポートし、クラスタシステム
ポとシームレスに接続！
複数のコントローラによりスループットを向上IBスイッチ
InfiniBand QDR (40Gbps）接続

Lustre OST, MDT, OSS, MDS

2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

OSS, MDS

17xdd （write）パフォーマンス

OSSが8台、OSTが28/30のケ ス
28/30のケース

OSSが1台、OSTが15
OSSが1台OSTが15のケース

2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

18

SFA10000 Lustre BMT

2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

19大規模NASシステム構成例
NFS Client
Solaris,Windows,Debian, Mac

GridScaler
Clients(RHEL Suse)

10 GbE Switch
GridScaler
NAS Gateways~475 MB/secper GbE Link

GridScaler
Gateways~800 MB/sec
per 10 GbE link

FC 8 Gbps
FC 8 Gbps Switch x 2

SFA 10K
RAID 5/6,
5/6 300 Disks
SAS 15K rpm
Up to 144 TB
Up to 500,000 Disk IOPS
Up to 1,000,000 Burst IOPS
Up to 10 GB/sec

S2A9900 Couplet
1200 Disks, RAID 6
5.5 GB/sec Read/Write
Up to 2.4 PB
Single System

ラージファイルのシーケンシャルアクセスのための大容量ストレージ
大容量ストレジ2010/11/26

FC 8 × 16Ports

スモール／ラージファイルのランダ
ムアクセスのための高速ストレージ
SINGLE FILESYSTEM!

Copyright (C) 2009 - 2010 SCS All Right Reserved.

20

ライフサイエンスの各サイトで採用“DDNのExaScaler S2A9900 システム導入以前は、TGENでこのレベルの次世代シーケンス・アラインメントをサポートすることは不可能でした”- James Lowey,y, TGen Director of HPC

2010/11/26

次世代遺伝子解析等
次世代遺伝子解析等、ライフサイエンスの次世代アプリケーションにはパフォーマンス とケーラビリ
ティ、そしてコスト効率が必要です。そのため、次世代遺伝子解析のリ ダ は遺伝子解析のリーダーはDDNのストレージ選んでいます。

Copyright (C) 2009 - 2010 SCS All Right Reserved.

21

ローレンスリバモア研究所

z ローレンス・リバ

モア国立研究所では SATAディスク
は、SATAディスク実装におけるデータ信頼性の維持と常時140GB/s以上のスル プ トを必スループットを必要としていました。

z このパフォーマン

ス要求に応えることができたのはDDNのみでした

2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

22

LHcb – ATLASのためのストレージソリューション
1.2 PB of Atlas Storage
DDNのS2A9900はCERN
はLHCb実験に実験なくてはならない必須のプロダクトです

1.5 PB of Atlas Storage

Selected DDN’s S2A9900
17 PB of Atlas Storageg

1.2 PB of Atlas Storage

Selected DDN’s S2A9900
2.4 PB oof Atlasas Storage
S o age

600 TB of Atlas Storage
2010/11/26

DDNは、次世代の素粒子物理学研究に、コスト効率がよく、かつ高い可用性ストレージを提供するリーダーです
レジを提供するリ ダ です

Copyright (C) 2009 - 2010 SCS All Right Reserved.

23

最先端の科学技術をサポート
z 各分野の科学研究をリードする大学・研究機関がDDN
各分野の科学研究をリ ドする大学 研究機関がDDN のストレージソリューションを採用¾ ライフサイエンス：膨大なデータ量の次世代のゲノムとプロテオム研究を実現¾ 高エネルギー物理学：最大規模の科学実験が生み出す大規模データのためのストレージソリューション
¾ 天文学：大規模データの管理と分析のためのストレージ・ソ
天文学：大規模デ タの管理と分析のためのストレ ジ・ソ
リューション

2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

24導入事例 国内ユーザ
ユザ

用途

ファイルシステム

容量

筑波大学

大規模計算機システム

ExaScaler(Lustre)

12 GB/s, 1.2 PB

東京大学ICRR
東京大学

大規模実験データアー
カイブ

GPFS/ , 1.5 PB
4 GB/s,

北陸先端大学院大学

大規模ファイルサーバ

Grid Scaler NAS

1.2 PB NAS

半導体企業

大規模アーカイブ

DDN-ZFS

750 TB NAS

農林水産技術会議

HPCストレージ

ExaScaler (lustre)

5 GB/s, 220 TB

大手自動車メーカ

シミュレーション

Lustre1.5GB/s, 20 TB

放送局

ニュース編集用システムxStramScaler

5 GB/s, 100 TB

国立天文台

計算機システムとニアライン

Lustre ZFS

4 GB/s, 120 TB

NICT

大規模ファイルサーバ

GPFS NAS

240TB

農林水産技術会議

同上

DDN-IBRIX

300TB

2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

25導入事例 国内企業
用途

ファイルシステム

パ
パフォーマンス

容量

半導体企業

大規模アーカイブ

ZFS

10GB/s

750TB

大手自動車メーカ

シミュレーションシステム

xStreamScaler

1.5GB/s

30TB

放送局

ニュース配信用システム

xStreamScaler

5 – 6GB/s

100TB

Usen Gyao

配信

xStreamScaler

20Gbps96TB

IMAGICA

ノンリニア編集

CXFS

1GB/s

30TB

大手ゲーム企業

ノンリニア編集

xStreamScaler

1 – 2 GB/s

30TB

大手プロダクション
企業

DVDオーサリング

xStramScaler

2GB/s

120TB

大手プロダクション
企業

DVDオーサリング

xStreameScaler

6GB/s

100TB

ユーザ
ザ2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

26

S2A 6620 ファイルサーバ構築例
z 物理容量60TB構成¾ （想定サーバ：Windows Server

2008R2)

製品数量金額S2A6620 （本体）1

¥3,572,000

SATA 2TB HDD

30¥2,478,000

FC 4Gbps HBA

1¥223,000

FCケーブル2¥17,000

S2A6620 - RAID-6
RAID 6and SATAssure（ソフトウェア）

1¥510,000

FC 4 ケーブル× 2

本体小計 ¥6,800,000
インストール&初
年度保守費用
2010/11/26¥700,000
Copyright (C) 2009 - 2010 SCS All Right Reserved.

27

お問い合わせ先

住商情報システム株式会社
ITエンジニアリング事業部
HPCソリュ ション部
HPCソリューション部
Phone: 03-5859-3011

2010/11/26

Copyright (C) 2009 - 2010 SCS All Right Reserved.

28