最先端シミュレーションとAIにおけるこれからのストレージとは2024年3⽉13⽇
スキャリティジャパン株式会社

Agenda1. Scality会社紹介
2. 最先端シミュレーションとAI分野での課題§ 検討すべき項⽬は何か？
3. まとめScality 会社案内•

Scality••••••

設⽴: 2009年
本社所在地：フランス パリ
拠点：パリ、サンフランシスコ、ロンドン、ワシントンDC、東京
製品：Scality RING (オブジェクトストレージソフトウェア)
Gartner MQ for Distribu?on Filesystem and Object Storage にて8年連続 Leaderポジションを獲得

Scality Japan

•••

設⽴: 2015年3⽉
所在地：東京都千代⽥区⼤⼿町
国内の主なお客様：メディア系、研究機関、⼤学、中央政府系機関、医療機関、通信事業者、サービスプロバイ
ダ、⾦融業、製造業など••

⽇本国内で100PB以上（実効容量）の出荷実績
2021年の⽇本のオブジェクトストレージ市場でシェア1位 (スマプラ総合研究所調べ)

最先端シミュレーションとAI分野での課題§ シミュレーションとAIにおけるデータに対する共通の課題§ より精度の⾼い結果を得たい=より多くのデータを⽤いて⾏う必要がある
この課題を解決するための技術として§ IoTによるリアルタイムでの詳細な情報取得§ 計算機リソースや通信技術の進化よる⼤容量のデータ処理/データ転送技術の進歩により、シミュレーションやAI分野も加速的に良い方向へ進んでいる

ただし技術が進歩するほど、データ容量は増加する§ データ増加に対する検討すべき項⽬は何か§ 巨⼤化するデータの⻑期的な保管§ 柔軟なデータへのアクセスと管理§ データ主権4

巨⼤化するデータに対するScality
⼤規模データとの10年以上の歩み
Scality RINGの特徴
§§
§
§
§
§

⼤規模なLinuxコンピュートクラスタ/GPUファームの計算結果蓄積
最新のAI/MLライブラリやツールを使⽤するHPCの結果も蓄積
S3とRINGの組み合わせでインターネットアクセスを広げる
RINGはTieringされた領域としてアーカイブ
スケーラビリティ（拡張性）
⻑期にわたっての保管§ 実績のある業種（おもに欧州）§ ⼤⼿通信業§ 動画配信基盤§ ⼤⼿製造業（衝突解析データ蓄積）§ 国有鉄道の取得データ§ 最近は航空宇宙開発企業§ 監視カメラ※ 10年以上、拡張を⼗数度⾏い、数⼗PBのデータ蓄積を⾏っている実績も多数§ 永年保管に近いアーカイブが求められる →HPCやAI領域での永年アーカイブにも応⽤
5事例紹介: 某⾃動⾞メーカー (Simula/on Data Archive/36PB/S3, SMB, FUSE)§ 基本情報l

⾃動運転などの次世代⾃動⾞の開発を先進的に取り組むl

実⾛⾏データの格納先としての基盤を模索

センサーデータ
S3

フランスに本社を置く多国籍メーカー
SMBl§ 悩みと課題l

⾼い書き込み性能をもつストレージ基盤l

優れたコスト効率をもつストレージであることl

将来的な容量拡張（ペタバイト以上）を実現できること

l

RINGの採⽤により利⽤部⾨が要求するストレージ性能を実現

l

汎⽤的なIAサーバーを利⽤できることにより⼤幅なGB単価低減を実現

l

⼤容量に耐えうるストレージ基盤のため、過去11回の増設をへて実⾏容量36PBのストレージ基盤に成⻑l

当初はファイルプロトコルのみを利⽤していたが、S3 APIも利⽤することでシステム全体の最適化を実現

FUSE

S3

§ RING導⼊後の成果

S3

事例紹介:海外某医療機関 (HPC Archive /Data:5PB/S3)§ 基本情報l

ボストンに本社を構える⽶国のバイオ医薬品企業

l

研究開発におけるHPCシステムを保有

l

⾼速ストレージ領域としてWeka.ioを選定

l5PBを超える対象データを保有

計算専⽤クラスタ§ 悩みと課題l

アーカイブ領域として将来の拡張も⾒据えた⼤容量なデータ保管ができることl

コスト効率よくデータアーカイブすることlWeka.ioから透過的にアクセスできること§ RING導⼊後の成果
l

⼤規模な拡張実績を持つRING採⽤することで将来の拡張計画が可能にlアーカイブ容量のTB単価の低くすることでコストの最適化を実現

lWeka.ioからの透過的なアクセスの実現により運⽤コスト低減を実現

S3
プライマリ

Weka.io専⽤
ストレージクラスタ

事例紹介:海外某⺠間宇宙開発企業(Telemetry Data Archive/9PB/S3)§ 基本情報l

⽶国の某⺠間宇宙開発企業

lテレメトリーデータ、衛星画像などを保管ならびに解析

lS3 APIを利⽤したアプリケーションを⾃社で開発ならびに利⽤

S3 API
衛星データ§ 悩みと課題l

コスト効率のよい（AWS S3より単価の低い）S3準拠のオブジェクトス
トレージサービスを⾃社内にて展開したいl

テレメトリーデータ取得時の性能要件

l

他社での豊富な実績（⼤容量で顧客運⽤に耐えれるか）l

将来の容量増加に現実的に対応できる拡張性を持った製品§ RING導⼊後の成果

l

HW部分に汎⽤IAサーバーを利⽤できるため、ストレージコストの低減を実現

l

社内でAWS S3よりも安価なストレージサービスの提供が可能に

l

当初の想定を上回る性能を実現

l

複数回に渡る容量拡張も容易に⾏なえるため、ストレージを複数セット⽤意する必要がなくなり運⽤効率が向上

分析システムとの連携

S3

S3 S3

「データ主権」と⾔った新たなる課題§ 「データ主権」と⻑期保管§ 「データ主権（data sovereignty）」は世界中で⼤きな課題§ プライベートクラウドにデータを保護§ 地政学リスク、欧州のGDPR、個⼈情報の保護§ データ＝誰が何のために何処に保護するのか§ シミュレーションやAI におけるデータセットは知的資産であり社会的源泉

9

まとめ
最先端シミュレーションとAIにおけるこれからのストレージのポイント
１、巨⼤化するデータの⻑期的な保管
２、柔軟なデータへのアクセスと管理
３、データ主権1.

今後もデータ増加は⽌まりません、そのため将来を⾒据えた拡張性やコスト、災害対策などの考慮が重要

2.

リアルタイムでのデータ収集や広範囲で容易にアクセスできる環境を考え、S3プロトコルのようなインターネットアクセスを主体した設計が必要

3.

シミュレーションやAI分野でもパーソナルデータの取り扱いを考慮するとデータ主権の問題にも適切な対応が重要

事例集とホワイトペーパー

2024
2024

フォローアップセミナーの実施
下記のとおり、Supercompu)ng Now! 2024 のフォローアップセミナーを実施します。
本⽇ご説明したScalityが選ばれる３つのポイントに関する詳細をご紹介させて頂きます§ 巨⼤化するデータの⻑期的な保管§ 柔軟なデータへのアクセスと管理§ データ主権• 4⽉10⽇（⽔）• 4⽉17⽇（⽔）• 4⽉24⽇（⽔）

12:00 – 12:30
16:00 – 16:30
19:00 – 19:30

オンライン形式での実施となります※いずれも同じ内容にて実施させて頂きます。

ご参加登録フォームはこちら
もしくは右記ＵＲＬコードからご登録をお願い致しますThank you