RDM部会

研究データの活用・共有・公開・長期保存に向けたAWSの活用
aws-jpps-er@amazon.com
アマゾン ウェブ サービス ジャパン合同会社
2022/12© 2022, Amazon Web Services, Inc. or its affiliates.

パブリックセクター© 2022, Amazon Web Services, Inc. or its affiliates.

内容についての注意点
本資料では2022年 12月 6日時点のサービス内容および価格についてご説明しています。最新の情報はAWS公式ウェブサイト(http://aws.amazon.com)にてご確認ください。
資料作成には十分注意しておりますが、資料内の価格とAWS公式ウェブサイト記載の価格に相違があった場合、AWS公式ウェブサイトの価格を優先とさせていただきます。
価格は税抜表記となっています。日本居住者のお客様が東京リージョンを使用する場合、別途消費税をご請求させていただきます。
AWS does not offer binding price quotes. AWS pricing is publicly available and is subject to change inaccordance with the AWS Customer Agreement available at http://aws.amazon.com/agreement/. Any
pricing information included in this document is provided only as an estimate of usage charges for AWSservices based on certain information that you have provided. Monthly charges will be based on youractual use of AWS services, and may vary from the estimates provided.

© 2022, Amazon Web Services, Inc. or its affiliates.

自己紹介
櫻田武嗣 (Takeshi SAKURADA) ,Ph.D
パブリックセクター シニアソリューションアーキテクト
主に教育・研究機関のお客様を担当
情報処理学会出版委員会監修

経歴等 2000～ 郵政省(総務省) : 通信総合研究所にて主に広帯域ネットワークに関わる研究に従事
2003～ 東京農工大学にてキャンパスITに関わる広範囲な研究・業務に従事
キャンパス内ITシステムの他、国立大学の1/5が利用する遠隔講義システム等の大学に関わるITシステムの立案から運用まで幅広く経験。学会、研究機関各種委員。企画した複数のシステムは製品化され他大学でも利用されるなど幅広く利用されている。

2018～ アマゾン ウェブ サービス ジャパン
シニアソリューションアーキテクト。高等教育機関や研究所等向けのシステム設計支援の他、クラウドコンピューティング活用のための啓蒙活動や講義・講演等実施。
好きなAWSサービス

Direct Connect / Amazon S3© 2022, Amazon Web Services, Inc. or its affiliates.

Our Mission
地球上でもっともお客様を大切にする企業であること© 2022, Amazon Web Services, Inc. or its affiliates.

最大規模のコミュニティ
AWS は世界中で何百万ものアクティブなお客様によって支えられています

AWS User Group – Japan (JAWS-UG)
JAWS-UG は AWS が提供するクラウドコンピューティングを利用する人々の集まり（コミュニティ）です
一人ではできない学びや交流を目的としてボランティアによる勉強会の開催や交流イベントなどが行われていますEnterprise-JAWS
エンドユーザー企業を対象としたクローズドな場として設立された
AWS をお使いの企業のコミュニティです
非公開を前提とした場で AWS のクラウド活用における課題や取り組みに関するさまざまなディスカッションが進んでいます© 2022, Amazon Web Services, Inc. or its affiliates.

スケールメリットをお客様に還元
AWSは2006年のサービス開始以降、非常に速いスピードで提供規模を拡大し、実質的に制限のないITリソースを提供しています
このスケールメリットを生かし、コスト低下分をお客様に還元することで111回を超える値下げを実現しています

規模の拡大とイノベーション

コストダウンを推進

より多くのお客様値下げ

効率改善

規模の経済

継続的な値下げによるお客様への還元
資本投資

115 回以上
技術投資© 2022, Amazon Web Services, Inc. or its affiliates.

データを安全に保管・長期保管・大容量データ保管

Amazon SimpleStorage Service (S3)

➢ 研究・業務データを保管したい✓ 長期保存が求められる (長期継続保管…、ストレージの入れ替えの対応を減らしたい…)✓ 将来どれだけのデータになるか分からない (研究データ、ログ…)✓ オンプレミスストレージのバックアップ、災害対策をしたい , etc …

例) Amazon S3の活用✓ 高耐久、３ケ所以上に自動で隔地保存される✓ 2006年からサービススタート、長期稼働の実績✓ 利用した分だけの課金、無制限の容量 → スモールスタート可能✓ データレイクとして様々なデータを集約、後から様々な方法で活用、S3へ直接クエリ等✓ 利用頻度の低いデータは自動でアーカイブ階層としてコスト削減可能✓ オンプレミスストレージのバックアップ先としてからはじめる、S3プラグインなどで対応しているストレージも多数✓ 機関内と閉じた環境で接続、共同研究機関とのデータ共有での利© 2022, Amazon Web Services, Inc. or its affiliates.

研究データの管理

https://aws.amazon.com/jp/blogs/news/researchdatastore/◼ 研究データを10年以上保存の必要性◼ 研究データ管理の仕組みが必要

研究が続いている限り、途切れず新たにデータを保管し続ける必要
成果発表◼

国立情報学研究所(NII)にて、研究データ管理基盤GakuNin RDMの提供を開始

10年以上

時間t

研究データ/資料A
研究データ/資料B
研究データ/資料C

下記の点を考慮する必要
1. メンバー管理・アクセスコントロール
2. ファイル等のバージョン管理3. 研究証跡の記録
4. ファイル保管5. 高い耐久性でかつ大容量のストレージ
6. 長期保管…
…

研究データ/資料D
研究データ/資料E

スモールスタートが可能

Amazon S3は 2006年からサービスを提供✓✓✓

AWS上に構築されたシステムと閉じた環境で接続も可能
使用しただけのコスト、スモールスタートが可能
標準で99.999999999%の高い耐久性、地理的に離れた場所に3つの複製© 2022, Amazon Web Services, Inc. or its affiliates.

ストレージ容量M[GB]開始時

三角形の面積
T=N x M / 2
Nヶ月後

認証システムも安定した AWS の基盤上に• 様々なシステムやサービスと連携する認証系のシステムも安定した AWS 基盤上で利用• 学認(shibboleth) などとの連携• IDaaS や on AWS上に環境を構築しての利用• Extic, okta, Cisco Duo, HENGE• AXEOLE, Account@Adapter+• KeyCloakなど© 2022, Amazon Web Services, Inc. or its affiliates.

学認IdPとして機能するIDaaS「Extic」• 学外から学認SP利用、多要素認証やシングルサインオンなど必要なセキュリティ機能をサービスとして提供しているIDaaSが「Extic」です。

多要素認証

SSO
学認SP

学内・学外サービス提供機関

Extic については、展示会場F-O1 エクスジェン・ネットワークス社の展示ブースがございます。
© 2022, Amazon Web Services, Inc. or its affiliates.

AWSのストレージ関連サービス
データの格納 (ストレージリソースの提供)

Amazon S3 andAmazon S3 Glacier

Amazon EBS

Object (API)

Block

データ管理

Amazon EFS

Amazon FSx forWindows File Server

Amazon FSx for
NetApp ONTAP

Amazon FSx for
LustreAmazon FSx for
openZFSNFS

SMB

SMB / NFS / iSCSILustreNFS

エッジサービスAWS Backup

AWS Storage
Gateway

AWSサービス全体のバックアップとコン
プライアンス

オンプレミスからク
ラウドストレージへのゲートウェイ

データの移動（物理デバイス）

AWS DataSync
AWSストレージサー
ビスへのデータ転送

AWS Transfer
Familyファイル転送プロト
コル (SFTP / FTPS /FTP) の提供© 2022, Amazon Web Services, Inc. or its affiliates.

AWS Snowmobile

AWS SnowballEdge

AWS Snowcone

AWSストレージサービスと、クラウドのエッジやネットワークのエッジ間でデータの移動を行うための物理デバイス
国内では、AWS Snowball EdgeとAWS Snowconeを提供中

Amazon S3とAvailability Zone (AZ)
データ保存・バックアップ用途に向くオブジェクトストレージ Amazon S3•

http(s)でアクセス可能•

自動的に 3 箇所以上の AZ (意味のある距離離れて独立したデータセンター群)へ隔地保管 ( S3 OneZone-IA は除く）•

AZ間、データセンター間は、低遅延のプライベートネットワークで接続•

設計上のデータ耐久性は、99.999999999%•

容量無制限、サイジング不要 (1オブジェクトあたり5TBまで、オブジェクトの数は無制限)•

データ容量に依存しない、スケーラブルで安定した性能•

暗号化をサポート•

WEBの静的コンテンツ配信機能•

IAM、バケットポリシー、S3 アクセスポイントなどによる細かなアクセス制御が可能•

PrivateLinkを利用しDirectConnect経由でアクセス可能

AZ1
AZ2

AZ3
© 2022, Amazon Web Services, Inc. or its affiliates.

※ AZは物理的に距離の離れたデータセンター群※ オブジェクトは自動的に3ケ所以上のAZへ隔地保存Amazon S3をデータレイクとして活用
Amazon S3 を中心に様々なデータ活用のサービスと連携
データカタログAWS GlueIoT

AWS IoT Core

AmazonRDSAWS Glue

可視化・BI

データ分析

AWS
LambdaAmazonAthenaAmazonRedshift

AWS
AWS
Snowball Storage
Gateway

AmazonEMR

AmazonQuickSight

AmazonElasticsearchService

機械学習・AIサービス

AmazonKinesisAmazon S3

データ転送・
バックアップオンプレミス

ETL

データアーカイブ

AmazonSageMaker

AmazonRekognition

AmazonTextract

AmazonPersonalize

AmazonForecast

AmazonComprehend

コンテンツ配信

AWS
BackupAmazon S3 Glacier

AmazonCloudFront© 2022, Amazon Web Services, Inc. or its affiliates.

ストレージ階層を利用したデータ保護とコスト低減
Amazon S3 Intelligent Tiering の例

Frequent
AccessTier

Infrequent
AccessTier

Archive
InstantAccess
Tier

Archive
AccessTier

通常3-5時間

明示的にFrequent Access Tierにコピーする必要がある© 2022, Amazon Web Services, Inc. or its affiliates.

Deep
Archive
AccessTier

通常12時間構成パターン例：
CloudFront + S3で静的ウェブサイトを仮想サーバを使用せず構築

ACM➢

S3の静的コンテンツ配信機能を利用し、CloudFrontより配信

CloudFront

証明書のインポート

キャッシュ➢
証明書の発行る場合に有効な構成➢

ファイル取得ウェブサイトが静的コンテンツのみ配信していフルマネージドサービスを利用しており、低コストかつサーバ管理は不要

静的ファイルS3・HTML・JavaScript・css・画像/動画 など(アクセス例)・https://www.example.co.jp/index.html
・CloudFrontはindex.htmlをS3から取得し、クライアントへ返す
・2回目以降のアクセスは、CloudFrontがキャッシュから返す➢

ACMを利用することで独自ドメインを簡単にHTTPS化可能

サーバメンテナンス時や非常時の広報で利用などにも© 2022, Amazon Web Services, Inc. or its affiliates.

https://d1.awsstatic.com/webinars/jp/pdf/services/20180710_AWS-BlackBelt_WebSiteHosting.pdf

2021年

大阪リージョン
3 Availability zones

2011年

東京リージョン
4 Availability zones© 2022, Amazon Web Services, Inc. or its affiliates.

耐障害性と高可用性を実現するインフラストラクチャ
AWSが世界規模で展開するグローバルインフラストラクチャは柔軟性、信頼性、拡張性、そしてセキュリティを兼ね備えています

リージョン

アベイラビリティー
ゾーン（AZ）

データセンター

Point of Presence（PoP）© 2022, Amazon Web Services, Inc. or its affiliates.

すべてのリージョンは独立し、物理的に離れた場所にある複数のアベイラビリティーゾーンで構成されています

複数のアベイラビリティーゾーンでシステムを構成することで、高い耐障害性を実現できます

アベイラビリティーゾーンは1つ以上のデータセンターで構成され、互いに低遅延な専用線で接続されています

世界中に配置されたPoint of Presence からの低レイテンシーな高速転送で世界中のユーザーにコンテンツを安全に配信できますAWS グローバルクラウドインフラストラクチャ

9630
さらに 15+ のアベイラビリティゾーン・5+ リージョンを追加予定

410+
21 のローカルゾーン / 29 の© 2022, Amazon Web Services, Inc. or its affiliates.

AWS クラウドセキュリティ
AWSはクラウドコンピューティングの先駆者として、セキュリティを最優先事項としてお客様のイノベーションに迅速に対応可能なクラウドインフラストラクチャーを創造してきました。セキュリティ機能の実装や厳格なコンプライアンス要件へ対応でお客様は最も柔軟かつセキュアなクラウドコンピューティング環境を実現可能です

AWS コンプライアンスプログラム

クラウドセキュリティのためのサービス

セキュリティとコンプライアインスのためにAWSに導入されている堅牢な管理は、独立した監査人によって評価されています。これにより、AWSはお客様のコンプライアンス要件への準拠をサポートします

AWSの提供するセキュリティ、ID、コンプライアンスのための包括的なサービスと機能を活用いただくことでセキュリティとコンプライアンスの要件を満たす能力を向上させることができます
アイデンティティ & アクセス管理

コンプライアンスプログラムの例

脅威の検出と継続的なモニタリング

インフラストラクチャとデータの保護
AWS コンプライアンスプログラム
https://aws.amazon.com/jp/compliance/programs/

AWSのデータセンター

https://aws.amazon.com/jp/compliance/data-center/data-centers/© 2022, Amazon Web Services, Inc. or its affiliates.

インシデントへの対応

コンプライアンスデータプライバシー
AWS はお客様のデータにアクセスできず、データの保存、管理、保護方法はお客様が選択します。
責任共有モデルにおけるデータの所有権と管理に関して、4つの重要な基本事項があります。
1. お客様は継続してデータを所有します。
2. お客様は、データを保存する地理的な場所を選択します。お客様がデータの移動を選択しない限り、データが移動されることはありません。
3. お客様はいつでもデータをダウンロードまたは削除できます。
4. お客様はデータの機密性を考慮し、転送中や保管時にデータを暗号化するかどうか、および暗号化方法を決定します。
• 東京リージョンや大阪リージョンを選択すればデータは日本国内に置かれます• 住所が日本の場合、基本的に第一審裁判所は東京地方裁判所となります© 2022, Amazon Web Services, Inc. or its affiliates.

SINET と AWS との接続の関係
IX経由での接続と、SINET クラウド接続サービス経由での接続ができます。
一般の Internet に出ずに通信A 通常のインターネット利用
B 通常通りAWSヘアクセス
C SINET クラウド接続サービス

Internet

教育・研究機関等

AWS
アカウント

Internet Exchange (IX)

VPC
東京DC(大手町)

Campus NetworkA
B

VPC
冗長構成を推奨

大阪DCC※ AWSの データ out 料金はDirect Connect と同じとなります。
※ Direct Connect ポート費用、物理回線費用は現在 AWSJapan が負担

SINET 網© 2022, Amazon Web Services, Inc. or its affiliates.

既に物理回線は敷設済。
地理的冗長構成も可能。
それぞれ10Gbps 複数本。
※ 図はわかりやすさのため簡略化しています大規模データの共有・公開
Amazon S3を利用した共有・公開の例
利用者が自分の環境にコピーコピーにかかかる料金を、リクエストした側が支払うリクエスタ課金も可能

AWS上に解析環境を構築し、そのままデータ利用することで、データ移動にかかる時間を節約
利用者側環境

提供側環境
共有・公開
データ

ネットワーク経由でダウンロード

データセットを販売したい

研究機関

Amazon Simple Storage
Service (Amazon S3)

Amazon S3
AWS Data Exchange

暗号化デバイスで配送
AWS Snowcone
AWS Snowball EdgeAWS Snowmobile

Open Data on AWS

データをオープンな形で公開したいOpen Data Sponsorship Program
公開に必要なストレージ料金をAWS側で負担(審査・条件有)© 2022, Amazon Web Services, Inc. or its affiliates.

Open Data は AWS アカウントが無くても利用可能オープンデータ公開
https://registry.opendata.aws/

Open Data on AWS• 様々なデータが公開されている• 自由にダウンロード、利用可能• AWS上で利用することにより、データ移動にかかる時間を減らして利用可能

Open Data Sponsorship Program により、オープンデータのストレージコストをカバー可能です。(審査有)https://aws.amazon.com/jp/opendata/open-data-sponsorship-program/© 2022, Amazon Web Services, Inc. or its affiliates.

23

AWS Data Exchange（ADX）

データの販売・購買• 数百万のAWSユーザー向けに自社が持つデータを提供できるプラットフォーム• 2019年のローンチ以降プロバイダー数は急増、200以上の企業による3,600以上のデータ• S3に保存できるテキスト、動画、画像、音声などフォーマットは様々• COVID19、ESG関係のデータも多数• サンプルデータ提供も可能（その場合費用はかからない）• Private Products機能により特定の企業・個人だけにデータを提供することも可能© 2022, Amazon Web Services, Inc. or its affiliates.

24

Global Data Egress Waiver について
• 研究機関や学術機関のお客様を対象に、データ out 転送料金についてAWS利用料総額の最大15%まで免除する割引プログラムです。
• Payer Accountに対して適用されます。
• 中国リージョンを除く、すべてのAWSリージョンでの利用が適用対象です。

• AWS Region間（e.g 東京リージョンから大阪リージョン）の通信費用、CloudFront, Direct Connect (per-Gbps) port speed fees, VPNの費用は本プログラム適用対象外です。
• データ転送料金が月額利用総額15%を超えた場合、超えた分のみ通常のデータ転送費用が適用されます。

（一般的なデータ転送費用の割合は月額費用の3~5%）
適用条件
1. 教育や国立研究所などの学術研究機関に所属していること。
2. SINETもしくはAWS Direct Connectを使用していること。
3. すべてのメンバーアカウントは、お客様またはお客様の従業員によって開設された、お客様またはお客様の従業員が使用するための機関用電子メールアドレスを使用していること。（例：個人用のgmailアドレスではなく、ac.jpアドレスなど）。AWSパブリックセクターが認定した Reseller 経由で発行したアカウントも適用対象になります。
https://aws.amazon.com/jp/blogs/publicsector/data-egress-waiver-available-for-eligible-researchers-and-institutions/© 2022, Amazon Web Services, Inc. or its affiliates.

AWS Cloud Credit for Researchhttps://aws.amazon.com/jp/government-education/research-andtechnical-computing/cloud-credit-for-research/© 2022, Amazon Web Services, Inc. or its affiliates.

研究助成プログラム✓クラウドでホストされるサービス、ソフトウェア、ツールの構築、研究プロセスのクラウド移行等の新しいプロジェクトをサポートするプログラム。
✓申請は四半期ごとに審査されます。
✓申請金額に上限はありません。
✓研究環境のオンプレミスからクラウドへの移行の検証✓研究プロジェクトのメンバーのトレーニング✓研究の公開のための基盤構築などの目的で応募可能。
26

研究でAWSの活用
スモールスタート、常に新しいリソースの利用、繁忙期にリソース増で研究を加速✓ ITリソースは必要なときに起動、不要になったら削除➢ 研究立ち上げにスモールスタート、論文投稿や卒・修士論文研究時等の繁忙期にAWSの潤✓✓✓✓✓

沢なリソースを活用➢ HPC環境はキュー待ちを無くした、自分だけのHPC環境➢ 潤沢なリソースを利用し、並列実行で短時間に。コストは同じ。
常に新しいGPU/アクセラレータ/CPU、FPGA等を利用可能して計算、高価なリソースも時間で利用
マネージドサービス活用で、研究環境立ち上げの効率化➢ 手元のPC環境を壊すこと無く研究、研究環境の保全、再現可視化もクラウドで行い、データを持ち出さず、データ移動にかかる時間も節約
機関外からリソースにアクセスして研究を継続
研究成果の公開、研究証跡管理での利用 (Amazon S3、CloudFrontの活用等)
AWSを活用し、リソース準備にかかる手間、時間を減らし、研究の本質に集中© 2022, Amazon Web Services, Inc. or its affiliates.

まとめ
AWS の各種ストレージサービスを適材適所で活用••

データを安全に保管・長期保管・大容量データ保管•

高耐久、３ケ所以上に自動で隔地保存され、長期サービス提供し続けている Amazon S3 の活用、学認RDMに連携可能•

各ストレージ階層の活用してコスト効率良く利用•

認証基盤等も安定したAWS基盤上で•

AWS上でのデータ共有や解析を行うことで、移動にかかる手間や時間を短縮••

データセットの販売、データの公開のサービスの活用•

オープンデータ公開には AWS Open Data Sponsorship Program の活用等

研究助成やデータ転送料低減プログラムなど、各種制度を活用© 2022, Amazon Web Services, Inc. or its affiliates.

学術・研究機関向け問い合わせ先

aws-jpps-er@amazon.com© 2022, Amazon Web Services, Inc. or its affiliates.

© 2022, Amazon Web Services, Inc. or its affiliates.