2021 年 12 月 21 日

筑波大学計算科学研究センター学際共同利用プログラム
2022 年度（MCRP2022）公募

計算科学研究センター（以下 CCS）では、2022 年度、下記のスーパーコンピュータを運用します。
・NVIDIA 社 V100 GPU と Intel 社 Stratix10 FPGA を搭載した多重複合型スーパーコンピュータ
Cygnus。2019 年 5 月より運用開始。総ピーク演算性能約 2.3 PFLOPS（倍精度浮動小数点数）、ノード当たり 30 TFLOPS（同）の超高性能演算ノードを持つ。
・2022 年度後半からは、GPU、不揮発性メモリを搭載したビッグメモリスーパコンピュータ
Cygnus-BD の運用を開始する予定です。
一方、東京大学情報基盤センターと筑波大学計算科学研究センターが共同運営する最先端共同HPC 基盤施設（JCAHPC）が運用してきたメニーコア搭載スーパーコンピュータ Oakforest-PACS
は、2021 年度末で運用を終了します。2022 年度から JCAHPC が運用する新たなスーパーコンピ
ュータが稼働を開始するまでの期間、東京大学情報基盤センターの運用する Wisteria/BDEC-01のシミュレーションノード群 Odyssey（Wisteria-O）を、CCS を通して利用することが可能になりました。
CCS では、全国の学際的計算科学の発展に資するべく「学際共同利用プログラム」(MCRP)を実施し， Cygnus 全計算資源の約 50%、Wisteria-O の全資源の約 15%を本プログラムに供します。なお、Cygnus-BD の学際共同利用プログラムでの利用に関しては、今回の申請には含まれません。
学際共同利用についての詳細は，本センターホームページ
https://www.ccs.tsukuba.ac.jp/kyodoriyou/gakusaiに記載されています。以上をご了承の上、奮ってのご応募をお待ち申し上げます。
筑波大学計算科学研究センター長
朴 泰祐

日程
公募期間：

2021 年 12 月 21 日〜2022 年 1 月 23 日 24:00
メンバー登録は 1 月 31 日 24:00 まで可能

採択決定通知：2022 年 3 月 23 日

利用期間：

2022 年 4 月 1 日〜2023 年 3 月 31 日

報告書提出：

2023 年 4 月

成果報告会：

2023 年秋頃

1 学際共同利用プログラム
本センターの学際共同利用プログラムは，大規模計算を必要とする革新的研究課題，異分野間連携を推進する研究課題に加えて，本センターのスタッフと共同で推進する研究課題を公募する。2022 年度公募する研究分野は，科学分野として、素粒子分野，宇宙分野，原子核分野，物質科学分野，生命分野，地球環境分野，生物分野，化学分野、計算機工学分野として，超高速計算システム分野，計算情報学分野，数値解析分野である。

2 成果報告会
学際共同利用採択プロジェクトは，1 年間のプロジェクト終了後に開催されるシンポジウム
CCS International symposium “Discovery, Fusion, Creation of New Knowledge by MultidisciplinaryComputational Sciences”
における成果報告が義務づけられている。例年、秋頃に開催される。

3 計算機使用料
学際共同利用の計算機使用料は無料とする。

4 利用可能計算資源と計算規模
4.1 Cygnus について
Cygnus は，筑波大学計算科学研究センターが運営する，GPU と FPGA を同一ノード内に搭載する多重複合型スーパーコンピュータである。筑波大学計算科学研究センター学際共同利用に対して，総リソースの約 50%を充てる。
Cygnus のシステム概要・ハードウェア諸元については以下を参照。
URL: https://www.ccs.tsukuba.ac.jp/supercomputer/#Cygnus
Cygnus の利用方法の詳細については，「Cygnus 利用の手引き」（プロジェクト採択後にアクセス方法を通知）を参照のこと。

4.1.1 共同利用ユーザのアクセス範囲
Cygnus では，システムの利用単位はノードであり，1 ノード上に複数ジョブが実行されることはない。すなわち，各ジョブは割り当てられたノード内の全てのリソースを利用することができる。1 つのジョブで複数ノードを利用する場合，MPI による並列プログラミングを行うことが推奨されるが，単一ノードで実行可能なタスクを複数のノードで同時実行するような使い方もできる。
各プロジェクト（研究課題）において，同時利用可能な最大ノード時間積は課題申請及び審査結果に基づいて決定される。ファイルシステムに関しても，各プロジェクトの利用最大容量には制限が課される。なお，計算ノードの利用はプロジェクト実施の年度末で終了するが，Cygnus のログインノードへのログイン及びファイルシステムへのアクセスについては，プロジェクト終了の年度末後の 1 ヶ月間（4 月末まで）は許可される。各プロジェクトのユーザはこの 1 ヶ月以内に全てのファイルを引き上げる必要がある。この期間を過ぎた時点で，終了プロジェクトの全ファイルは消去される。

4.1.2 利用可能計算機資源
Cygnus では，最大で 78 ノードが利用可能である。今回の募集では，2022 年度を通して合計約 320,000 ノード時間を利用する課題申請を募集する。Cygnus の計算ノード数は全 78 台であり，全てのノードに CPU 及び GPU が搭載される。さらに，78 台中 32 台のノードにはこれらに加え FPGA が搭載される。FPGA を利用するプロジェクトは、上記とは別のクラス(FPGA)として課題募集する。

4.1.3 計算時間
各プロジェクトに与えられる総計算ノード時間積（計算ノード数×計算時間）は「バジェット」と呼ばれる。1 つのジョブが終了する度に，そのプロジェクトのバジェットから，ジョブが利用した計算ノード数×計算時間が減算され，バジェット残高がゼロになった時点で，当該プロジェクトのジョブの投入は禁止される。各プロジェクトに属するユーザは当該プロジェクトのバジェットを共有し，プロジェクト内のどのユーザがジョブを実行しても，バジェットは減算される。ただし，重大なシステム上の障害等によって，ユーザジョブが不慮の中断を余儀なくされた場合，当該ジョブのバジェットはプロジェクトのバジェットに差し戻される。

4.1.4 ディスク割り当て
各プロジェクトが使用可能なファイルサーバ上のディスク領域は，採択クラスで異なり、20TB (MCRP-L)、10 TB (MCRP-M/MCRP-FPGA)、5 TB (MCRP-S)である。ただし，特にプロジェク
トの性質上より多くのディスク領域が必要な場合は，必要な容量とその容量が必要な理由を申請書に記入すること。ディスク容量の決定は共同研究委員会の判断により，申請した値より削減される場合がある。

4.1.5 Cygnus-FPGA 部の利用について
Cygnus の FPGA 部を利用するプロジェクトは，筑波大学計算科学研究センター・高性能計算システム研究部門との共同研究プロジェクトとして実施する。この共同研究プロジェクトでは研究代表者または共同研究者として最低１名，高性能計算システム研究部門の教員を含めることとし，当該教員との協議で研究内容を定めた上で，研究計画書の中にその教員の役割分担を明記する必要がある。

4.2 Wisteria/BDEC-01 Odyssey (Wisteria-O)について
Wisteria-O は東京大学が運営するスーパーコンピュータであり、世界最高性能を有するスーパーコンピュータ「富岳」と同じ富士通株式会社の「FUJITSU Processor A64FX」を搭載した計算ノード 7,680 台から構成される。この総リソースの約 15%を、筑波大学計算科学研究センターの学際共同利用プログラムを通した利用に充てる。
Wisteria-O のシステム概要・ハードウェア諸元については以下を参照。
https://www.cc.u-tokyo.ac.jp/supercomputer/wisteria/system.php
Wisteria-O の利用方法の詳細については，以下の「Wisteria 利用支援ポータルサイト」を参照。
https://wisteria-www.cc.u-tokyo.ac.jp/cgi-bin/hpcportal.ja/index.cgi（プロジェクト採択後に発行されるアカウントが必要）を参照のこと。

4.2.1 共同利用ユーザのアクセス範囲
Wisteria-O では，システムの利用単位はノードであり，1 ノード上に複数ジョブが実行されることはない。すなわち，各ジョブは割り当てられたノード内の全てのリソースを利用することができる。1 つのジョブで複数ノードを利用する場合，MPI による並列プログラミングを行うことが推奨されるが，単一ノードで実行可能なタスクを複数のノードで同時実行するような使い方もできる。
各プロジェクト（研究課題）において，総計算ノード時間積は課題申請及び審査結果に基づいて決定される。ファイルシステムに関しても，各プロジェクトの利用最大容量には制限が課される。なお，計算ノードの利用はプロジェクト実施の年度末で終了し，翌営業日には全てのデータが削除される。

4.2.2 利用可能計算機資源
MCRP2022 において、並列ジョブは最大で 2,304 ノードが利用可能である。今回の募集では，2022 年度を通して合計約 9,000,000 ノード時間を利用する課題申請を募集する。

4.2.3 計算時間
各プロジェクトに与えられる総計算ノード時間積（計算ノード数×計算時間）は「バジェット」と呼ばれる。1 つのジョブが終了する度に，そのプロジェクトのバジェットから，ジョブが利用した計算ノード数×計算時間が減算され，バジェット残高がゼロになった時点で，当該プロジェクトのジョブの投入は禁止される。各プロジェクトに属するユーザは当該プロジェク
トのバジェットを共有し，プロジェクト内のどのユーザがジョブを実行しても，バジェットは減算される。ただし，重要なシステム上の障害等によって，ユーザジョブが不慮の中断を余儀なくされた場合，当該ジョブのバジェットはプロジェクトのバジェットに差し戻される。

4.2.4 ディスク割り当て
各プロジェクトが使用可能なファイルサーバ上のディスク領域は，採択クラスで異なり、30TB (MCRP-L)、15 TB (MCRP-M)、5 TB (MCRP-S)である。ただし，特にプロジェクトの性質上より多くのディスク領域が必要な場合は，必要な容量とその容量が必要な理由を申請書に記入すること。ディスク容量の決定は共同研究委員会の判断により，申請した値より削減される場合がある。

5 申請・利用条件
5.1 申請資格（プロジェクト代表者）
プロジェクト申請代表者は、次のいずれかに該当する者とする。
1.

筑波大学の役員及び職員、学生（科目等履修生、研究生，特別聴講学生及び特別研究学生を含む），研究員，企業等共同研究員

2.

国内の大学（大学院大学及び短期大学），高等専門学校及び大学共同利用機関の教員，学生及びこれに準ずる者

3.

国内の学術研究及び学術振興を目的とする国又は自治体が所轄する機関に所属し，研究に従事する者

4.

特に，センター長が利用を認めた者

スーパーコンピュータ Cygnus を利用するプロジェクト申請については、下記のグループ A に属する国の大学，学術研究を目的とする国又は自治体が所轄する機関で研究に従事する者も、代表者としての申請を可とする。

5.2 利用資格
上記の 1.から 4.に該当する者に加え、企業の研究者についても、計算により得られた成果を公開する場合に限り、共同研究者として利用が可能である。プロジェクト申請代表者は、企業の研究者を共同研究者に含める場合、成果の公開に関する確約を予め得ることが必要である。
Wisteria-O の利用に関しては、「共同研究契約書の写し」、又は「請負契約書の写し」と「適切に監督を行うことを記した誓約書（様式任意）」の提出が求められる。
国籍に関わらず，海外に居住する研究者（非居住者）については，下記のグループ A に指定されている国の場合は，所定の手続きを経て利用を認める。その場合、利用開始前に、安全保障貿易管理のための申請書の提出が必要となる。手続きの詳細は，共同研究運用委員会に問い合わせること。また、居住者・非居住者の厳密な定義は、以下の「外国為替法令の解釈及び運用について(抄)」を参照。
＜グループ A＞ 下記ページに記載の「輸出令別表第３の地域」に該当する国。
https://www.meti.go.jp/policy/anpo/anpo03.html#howaitokoku
2021 年 11 月現在、以下の地域が当てはまります。ただし、変更される可能性があります。
アルゼンチン、オーストラリア、オーストリア、ベルギー、ブルガリア、カナダ、チェコ、デンマーク、フィンランド、フランス、ドイツ、ギリシャ、ハンガリー、アイルランド、イタリア、ルクセンブルク、オランダ、ニュージーラ
ンド、ノルウェー、ポーランド、ポルトガル、スペイン、スウェーデン、スイス、英国、アメリカ合衆国＜外国為替法令の解釈及び運用について(抄) ＞
https://www.meti.go.jp/policy/anpo/law_document/tutatu/t02chukai/t02chukai_unyokaishaku.p
df

5.3 HPCI を通した利用申請者について
Cygnus 及び Wisteria-O は、学際共同利用プログラムとともに HPCI への申請による利用が可能であり、筑波大学計算科学研究センターとしては、学際共同利用と HPCI の双方を通じた効率の良い資源提供を目指している。この観点から、学際共同利用プログラムとともに、関連した研究で HPCI への申請を行った課題に対して、後者の採否に関わらず、学際共同利用プログラムの配分時間を全て消費した後の追加配分などでインセンティブを付与することがある。学際共同利用プロジェクト申請代表者が、Cygnus および（または）Wisteria-O の HPCI を通した利用申請において課題（副）代表者であることを条件とする。
HPCI を通した利用申請については、以下の URL を参照。
http://www.hpci-office.jp

6 プロジェクトの申請
6.1 公募時期と利用期間
公募期間は，2021 年 12 月 21 日〜2022 年 1 月 23 日である。本公募の採択プロジェクトの決定は，2022 年 3 月 23 日を予定しており，利用期間は 2022 年 4 月 1 日より 2023 年 3 月 31日までである。ただし、諸事情により 4 月 1 日に全てのユーザーアカウントが用意できない可能性がある。また、保守作業等により実際の利用期間は 3 月 31 日より短くなることがある。

6.2 申請クラスと申請フォーム
Wisteria-O および Cygnus の GPU 部のみを利用するプロジェクトは，申請規模に応じて以下のように３つのクラスに分類する。MCRP-L については、プロジェクトの主目的は「プロダクトラン」に限るが、MCRP-M/S については「コード開発」を主目的とする申請も認める。
Cygnus と Wisteria-O を併用するプロジェクトは、一つの申請フォームに２つの内容を併記することとし、申請書を２つ提出する必要はない。Cygnus の FPGA 部を利用するプロジェクトは、これらとは別のプロジェクトとして申請書を作成する。このプロジェクトは、筑波大学計算科学研究センターとの「共同研究プロジェクト」として実施するため、申請書「MCRP-FPGA」のフォームを用いて作成する。
(1) MCRP-L（大型）， 申請書言語：英語
Cygnus: 申請可能最大ノード時間積：50,000 ノード時間、標準ディスク容量：20 TB
Wisteria-O: 申請可能最大ノード時間積：800,000 ノード時間、標準ディスク容量：30 TB(2) MCRP-M（中型）， 申請書言語：英語または日本語
Cygnus: 申請可能最大ノード時間積：20,000 ノード時間、標準ディスク容量：10 TB
Wisteria-O: 申請可能最大ノード時間積：250,000 ノード時間、標準ディスク容量：15 TB(3) MCRP-S（小型）， 申請書言語：英語または日本語
Cygnus: 申請可能最大ノード時間積：5,000 ノード時間、標準ディスク容量：5 TB
Wisteria-O: 申請可能最大ノード時間積：50,000 ノード時間、標準ディスク容量：5 TB(4) MCRP-FPGA（Cygnus FPGA 利用）， 申請書言語：英語または日本語
Cygnus: 申請可能最大ノード時間積：10,000 ノード時間、標準ディスク容量：10 TB

6.3 プロジェクトの申請方法
申請はオンライン申請となる。別ファイルのオンライン申請の手引きを参照すること。上記の申請規模に応じて申請フォームが異なるので注意すること。

6.4 申請に関する注意事項
6.4.1 申請数の制限
プロジェクト代表者としての申請は 1 課題まで、プロジェクト・メンバーとしては、代表となっている課題も含めて 3 課題までとする。同一のプロジェクトにおいて、Cygnus とWisteria-O を併用することは可。また、Cygnus の FPGA 部を利用する共同研究プロジェクトは、別枠として取り扱い、この申請数制限は適用しない。

6.4.2 特記事項
MCRP-L で不採択となった課題は、MCRP-M/S のクラスで再審査し、中小規模の計算資源を提供する場合がある。

7 応募プロジェクトの審査
共同研究委員会は，申請書類の書面審査を行い，採否および配分計算資源量を決定する。
共同研究委員会の構成
分野

素粒子宇宙

原子核物質

生命

地球

生物

計算機

センター内委員

11111

111

センター外委員

32222222

MCRP-S および MCRP-FPGA の申請は，センター内委員のみで審査する。また，必要に応じて委員以外の内外の研究者に書面審査を依頼する場合がある。

8 旅費および研究集会開催の補助
8.1 プロジェクト研究実施・プロジェクト研究成果発表
プロジェクト研究実施のためにセンターに滞在する必要がある場合は，共同利用旅費を申請することができる。また，学際共同利用で得られた成果を発表するための国内外旅費を申請することができる。成果発表の際、学際共同利用で得られた結果である旨の謝辞を明記すること。

8.2 研究集会開催支援
プロジェクト研究実施に必要な研究集会をセンター主催で開催し，その支援をセンターに申請することができる。また、研究集会開催に際し，研究者の招聘およびアルバイト等の短期雇用の申請を行うことができる。ただし，センターに所属しないプロジェクト代表者が申請する
場合には，センター内の担当者を置くこととする。

8.3 申請方法
センターに所属しないプロジェクト代表者が上記の補助を希望する場合は，ホームページの全国共同利用／共同研究支援のページにある申請書に必要事項を記入の上，実施の２ヶ月以上前までに，下記に添付ファイルとしてメールで送ること。
送付先：project-shien@ccs.tsukuba.ac.jp

9 成果公開・共同利用ユーザの義務
1.

プロジェクトに採択された者は，センター主催のユーザーズミーティングやシンポジウムで研究成果・進捗状況の報告を行い，年度毎に報告書を提出するものとする。ただし，国内に課題参加者がいないプロジェクトについては，シンポジウムでの研究成果・進捗状況の報告を免除することがある。

2.

プロジェクトによって得た結果を学術雑誌、学会発表、プレスリリース等で発表する際には，筑波大学計算科学研究センター学際共同利用プログラムによったことに言及すること。例については，「学際共同利用」謝辞の手引きを参照のこと。
学際共同利用謝辞の手引き：
http://www.ccs.tsukuba.ac.jp/kyodoriyou/gakusai/acknowledgement10 共同利用ユーザの管理
1.

共同利用ユーザの管理は，プロジェクト毎に定める group id と，ユーザ毎に定める userid によるものとする。

2.

Cygnus では，group id は，プロジェクト申請者が申請時に希望名を記載し，必要に応じセンター側で変更を加えた上，決定するものとする。user id はアカウント登録システムからユーザ自身の作業によって決定される。Wisteria-O では，group id 及び user id は機械的に決定する。

3.

複数のプロジェクトに属するユーザの user id は， 同一である。ホームディレクトリはプライマリグループの１つのみとし，作業用の work ディレクトリについてはプロジェクト毎に準備される。

4.

認証は公開鍵認証を許可する。ユーザはアカウント登録システム上でのアカウント登録時にパスフレーズが設定された秘密鍵に対応する自身の公開鍵を登録する。

5.

終了したプロジェクトに属する Cygnus ユーザのアカウントは，プロジェクト終了後 1 ヶ月を後処理のための期間として継続することとし，2 ヶ月経過時点で残存ファイルとともに消去する。一方、Wisteria-O のアカウント、および残存ファイルは、プロジェクト終了とともに削除されるので注意すること。

11 その他
・本プログラムで採択された課題に関しては、ホームページ上において、その課題名・代表者名・成果報告書が公開される。また、プロジェクト・メンバーの氏名・所属に関しても、審査期間中等、必要に応じて公開される。

・

不慮の事故によって利用者のプログラムやデータが破損，消滅する場合があるので，計算機の利用に当っては，この点に十分留意し，バックアップなどの事前の策を講じること。
・センター側で必要と判断される場合（障害発生時の障害発生原因追求などの時）は，利用者のソースコードの開示をその目的に限って求めることがあるので，協力すること。

12 技術事項に関する問い合わせ先
共同利用に関わる計算機の技術事項についての問い合わせは，共同利用サポート担当委員が受け付けるので，project-support@ccs.tsukuba.ac.jp へ電子メールにて連絡のこと。
〒305-8577 茨城県つくば市天王台 1-1-1
筑波大学計算科学研究センター
共同研究運用委員会