古澤SMOKA
大学望遠鏡観測データをSMOKAで公開する方法
内山久和
中島康、小澤武揚、古澤久徳、市川伸一(国立天文台 天文データセンター)小澤

内山市川中島INDEX
1. SMOKAの現状

2. データ公開の必要性

3. SMOKAでの観測データ公開 (現在の標準型)

4. SMOKAでの観測データの公開 (新型)2

1. SMOKAの現状

SUBARU-MITAKA-OKAYAMA-KISO-ARCHIVE SYSTEM✓日本の光赤外望遠鏡の天文観測データのアーカイブシステム https://smoka.nao.ac.jp/index.jsp✓多くの観測装置のデータが既に公開: 3893万フレーム、458TB (2024年3月6日時点)

すばる望遠鏡: S-Cam, FOCAS, HDS, OHS/CISCO, IRCS, CIAO, COMICS, CAC, MIRTOS,MOIRCS, Kyoto-3DII, HiCIAO, FMOS, HSC, CHARIS, IRD, SWIMS, MIMIZUKU, VAMPIRES
岡山観測所 188cm: ISLE, KOOLS, HIDES, OASIS, SNG, MuSCAT
木曽観測所: kCCD, 2kCCD, KWFC

3MiTSuME (東工大): MTA, MTO

Tomo-e Gozenのstacked data、

かなた望遠鏡 (東広島天文台): HOWPol, HONIR

写真乾板のデジタル化データ、

なゆた望遠鏡 (西はりま天文台): NIC

全天モニタ画像も類似のシステムで公開

せいめい望遠鏡: KOOLS-IFU, TriCCS

1. SMOKAの現状
SMOKAが提供している機能✓検索機能

シンプル検索、アドバンスド検索、S-Cam専用検索、HSC専用検索、ピンポイント検索、カレンダー検索、全項目検索
環境情報(全天モニタ等)も豊富✓請求機能

検索結果画面からの請求、メール請求
4✓整備されたドキュメント

https://smoka.nao.ac.jp/index.jsp

2. データ公開の必要性
なぜ観測データを公開することが重要なのか？
✓ 新しい研究成果の創出、研究結果の検証、研究教育活動の推進

主に生データの公開・提供✓ Data Availability Statement

論文中で報告する知見の解釈、再現と発展に必要な「最低限のデータセット」を第三者が利用可能であるか、可能であればどのように入手できるかの記述。
Nature, MNRAS, ApJ, AJ, A&Aはデータ公開も要求/推奨✓ Open Science

政策レベルで研究データのオープン化が重視 (2013年G8, 2016年G7, 2022年米OSTP等)「オープンサイエンスの深化と推進に向けて」2020年5月28日 日本学術会議による提言
5

3. SMOKAでの観測データ公開 (現在の標準型)
データの流れと観測所に求められるもの✓ データ公開の必要性(P.5)を全て満たすにあたり、観測所に求められるもの: 2020年中島講演

ユーザー

データをSMOKAに(定期的)に送る

1. データ検索(特に)FITSヘッダの整備

・請求修正追加情報の提供△ドキュメントの整備

どのデータをいつ公開するかを決める

4. データの所在
URLSMOKA
2. データ検索

3. データの所在
URL

DB

ストレージ

データに対する責任を持つ
メタデータ

⚫︎⚫︎

⚪︎

⚪︎

⚪︎

6

5. データ取得

観測データ

観測所

3. SMOKAでの観測データ公開 (現在の標準型)
データの流れと観測所に求められるもの✓ データ公開の必要性(P.5)を全て満たすにあたり、観測所に求められるもの: 2020年中島講演

ユーザー

データをSMOKAに(定期的)に送る

1. データ検索(特に)FITSヘッダの整備

・請求修正追加情報の提供

2. データ検索

どのデータをいつ公開するかを決める

3. データの所在
URL

DB

ストレージ

データに対する責任を持つ
メタデータ

データ公開の敷居が高いと思われることが多々

⚫︎

⚫︎

⚪︎

⚪︎

⚪︎

7

一方、データ公開の必要性が高まっている

5. データ取得

SMOKA

労力と時間

△ドキュメントの整備

4. データの所在
URL

観測データ

観測所

4-1. SMOKAでの観測データ公開 (新型)P.5の「DATA AVAILABILITY」を満たすことを第一目的とすると以下のような方式も可能だろう✓ 観測データ本体を利用者に提供するのは観測所/大学/etc.
✓ 観測所に求められるもの

ユーザー
1. データ検索・請求

4. データの所在
URL)
断データをSMOKAに(定期的)に送る
SMOKA
判の々※
但し、これができれば
3. データの所在(特に)FITSヘッダの整備(各2. データ検索
P.5上のSMOKAのURL
能可
修正追加情報の提供
略
3つの大目的には叶う
省DB△ドキュメントの整備
どのデータをいつ公開するかを決める

⚫︎⚫︎

⚪︎

⚪︎

⚪︎

8

データに対する責任を持つ

5. データ取得

メタデータ

観測所/大学

ストレージ
観測データ

4-2. SMOKAでの観測データ公開 (新型)SMOKAでのデータ公開時に観測所/大学側に求められるもの✓ SMOKAは検索エンジンとデータ請求の入口として働く(データそのものには関知しない)- データの整備を各々の判断で定めることができるので、労力と時間の節約- データの入手先にSMOKAのURLを書くことができる✓ あらかじめ定めた、 またはデータ請求毎にデータの所在URL(+パスワード)をSMOKAに知らせる
9- ユーザーは基本はHTTPS (TBD) でのアクセス

4-3. SMOKAでの観測データ公開 (新型)SMOKAでのデータ公開時に観測所/大学側に求められるもの✓ 公開するデータについて- 検索項目の値 (観測日時、赤経赤緯、波長、積分時間は最低限必要。それ以外は観測所/大学の責任の範囲でどこまで整備するか決定) を抽出してSMOKAに送る、またはFITSヘッダを切り離して送る。できれば、thumbnailを作ってSMOKAに送る(この作業プログラムはSMOKAから提供可); これらは時々まとめてでも良い✓ SMOKAと事前相談するのは- FITSヘッダをもとに検索方式等を定めること
10- データ所在の伝え方とユーザーのアクセスの仕方を定めること✓日本の光赤外望遠鏡の天文観測データのアーカイブシステム✓約3900万フレーム、データサイズ約460TBのデータを公開✓多数のデータ検索機能ならびに請求機能✓Data Availabilityなど世界的にデータを公開する必要性がSUMMARY
大学望遠鏡観測データをSMOKAで公開する方法SMOKA
Subaru-Mitaka-OkayamaKiso-Archive system

高まってきている✓データ公開への敷居を下げるため、SMOKAでは新しいデータ公開システムを考えている✓新型SMOKAは検索エンジンとデータ請求の入り口✓SMOKA公開にて観測所/大学に求められるのはデータの所在URLと検索項目の値を切り出した
メタデータの提供✓検索方式やユーザーへのデータの所在の伝え方およびユーザーのアクセスの仕方については事前相談が必要