学術メディア創成センター
シンポジウム2022－メタバースを活用した教育DX－
2022年8月31日（水）13:00 – 14:30
主催：学術メディア創成センター 教育DX推進タスクフォース
共催：数理・データサイエンス・AI教育センター1

教育を中心としたDXの取り組み
学術メディア創成センター
教授 西山 宣昭2

学術メディア創成センター◼ 学内のネットワークシステム、情報基盤システム、ポータルの開発、運用◼ LMS(WebClass)、オンラインツール(Webex,Zoom,Teams)運用
数値解析など、各種ソフトウエアの全学ライセンスによる教育支援

多数の科目開講によるデータサイエンス教育への貢献◼ 2021.4の改組とともに上記の業務に加えて、xR技術の教育での活用に着手●xR教材（VRコンテンツ、MRコンテンツ）の開発●xR教材の配信・視聴システムの開発（VR空間、xRスタジオ、LMS(webClass)など）
3

xR教材の開発◼大規模・高次元データの可視化技術としてのVR、MRに着目◼VR、MR技術を用いた研究データ利活用と教育への還元●人が持つ優れた空間認識能を生かす。
●没入観察による新たな発見に導く教育効果●多人数でのデータ共有、理解を促す。
◼VRコンテンツ、MRコンテンツの開発●空間データ、多次元計測データ、数値シミュレーション生成データ
電磁波の空間分布、流体シミュレーションなど MRによるデータ統合●新規の空間データの取得
3Dスキャナー、フォトグラメトリ、共焦点レーザー顕微鏡、X線CTスキャナー等による空間データの取得
Unity,Maya,Blender等を利用した3Dモデリング●オープンデータ
地形・都市空間データ、臨床データなど◼ 実験・実習シミュレーションの可能性について検討

MR技術の活用4

xR教材の開発
学内の研究データのxR教材化

基板上のアクチンフィラメントの原子間力顕微鏡像（ナノ生命科学研究所提供）

海底でのウミガメ組織腐食後の骨格（地球社会基盤学系ジェンキンス准教授 提供）
5

xR教材の開発
オープンデータの活用

国土交通省
3D都市モデルオープンデータ
PLATEAUによる金沢大学キャンパスモデル
6

xR教材の開発

NIH Cancer Imaging Archiveの臨床画像オープンデータの活用
S.F.Paulo et al.
3D Reconstruction of CT Colonography Models for
VR/AR Applications using Free Software Tools.
7

xR教材の開発

8

xR教材の開発

9xR教材の開発

融合科学系
藤生研究室
提供
10

xR教材の開発

11

xR教材の開発

12

xR教材の開発

13

多人数アクセス可能なVRシステムの開発◼ VRヘッドセット、スマートフォン、パソコン等で利用。MRとの連動も予定◼ 全講義で利用、全構成員が利用可能とするためのシステムを開発中
xRキャンパスシステム
VR講義

VRキャンパス

VR会議

・講義A
・講義B
・講義C

・角間キャンパス
・鶴間キャンパス
・宝町キャンパス

・会議A
・会議B

VR相談室

VRフィールド・パソコン利用相談
・悩み相談
・アカハラ等

・避難訓練
・イベントA
・イベントB

14

xRスタジオ

様々な映像、音声が利用可能① カメラ・マイク

様々な視聴方法を提供
同時にすべてを提供することも可能

録画（オンデマンド）

トラッキング信号
SDI・HDMI出力

リアルタイムネット配信② リアルタイムVFX（Vizrt）
NHK・eスポーツ等の放送局でも利用されているシステム
SDI出力(Fill・Key信号/クロマキー用背景画像・動画)KINDAI
DOGA

外部データからテロップ
文字を動的反映

リアルタイムUnity Vizrt 千里浜

合成・クロマキー③ クロマキー用背景画像・動画
トラッキング信号※トラッキングと連動させる
場合は、Vizrtから出力④ Unity

SDI出力(Fill・Key信号)

世界の3DシミュレーションシェアNo1エンジン

リアルタイム視聴⑤ Unreal Engine
映画マトリックスを再現した3D技術

SDI出力(Fill・Key信号)

15

DX教材を活用したxRスタジオ紹介
学術メディア創成センター
専門業務職員 二木 恵

16xRスタジオ整備
xRスタジオ◼ グリーンバックによるクロマキー対応◼ 撮影領域の横で、撮影した動画等の教材作成◼ リアルタイムVFXシステム導入➢ Vizrt（NHK等の放送局でも活用）を導入➢ Unity、Unreal Engine等と連携し、xRスタジオ整備

17

xRスタジオ整備
各機器

Vizrtワークステーション
PTZカメラVizrt（Viz Airtist）操作用卓Vizシナリオ操作用パソコン

プレゼン資料投影用パソコン
映像スイッチャー音声スイッチャー
撮影確認用モニタPTZカメラコントロールユニットネット配信用パソコン
Unity・Unreal Engine映像出力用パソコン
18

xRスタジオ概要

様々な映像、音声が利用可能① カメラ・マイク

様々な視聴方法を提供
同時にすべてを提供することも可能

録画（オンデマンド）

トラッキング信号
SDI・HDMI出力

リアルタイムネット配信② リアルタイムVFX（Vizrt）
NHK・eスポーツ等の放送局でも利用されているシステム
SDI出力(Fill・Key信号/クロマキー用背景画像・動画)

KINDAI
DOGA

外部データからテロップ
文字を動的反映

リアルタイムUnity Vizrt 千里浜

合成・クロマキー③ クロマキー用背景画像・動画
トラッキング信号※トラッキングと連動させる
場合は、Vizrtから出力④ Unity

SDI出力(Fill・Key信号)

世界の3DシミュレーションシェアNo1エンジン

リアルタイム視聴⑤ Unreal Engine
映画マトリックスを再現した3D技術

SDI出力(Fill・Key信号)

19多目的室スタジオ説明
多目的教室◼ 多目的教室として授業でも使用可能なスタジオ◼ 必要な時に、グリーンカーテン、グリーカーペットでクロマキーを利用し柔軟な運用が可能◼ xRスタジオと比較して、広い空間のため、多人数での撮影や、運動系の撮影に適しており、用途により使い分け20

DXシステム整備とDXサービス紹介
学術メディア創成センター
助教 東 昭孝

21

xRキャンパスシステム整備◼ VRヘッドセット、スマートフォン、パソコン等で利用。MRとの連動も予定◼ 全講義で利用、全構成員が利用可能なように開発中
xRキャンパスシステム
VR講義

VRキャンパス

VR会議

・講義A
・講義B
・講義C

・角間キャンパス
・鶴間キャンパス
・宝町キャンパス

・会議A
・会議B

VR相談室

VRフィールド・パソコン利用相談
・悩み相談
・アカハラ等

・避難訓練
・イベントA
・イベントB

22

3D教材素材データベースの整備
３Dモデリング• Unity、Maya、Blender等を利用して3Dモデル作成

３Dスキャナー• 簡単に3Dデータをスキャナーして作成• iPhoneのLiDAR機能等でも簡易的に作成

360度カメラ• 360度静止画の素材作成• 360度動画の素材作成

フォトグラメトリ

iPhone LiDAR利用• Metashape等のソフトウェアを活用
して平面写真から３Dデータ生成
23

DX教材利用• xRキャンパスシステム上で利用可能な効果的な3D教材を作成中。主にUnityを用いた効果的な動的なDX教材も作成して利用• 作成したDX教材は、xRキャンパス以外にリアルタイムVFXシステムを利用したスタジオの撮影にも、利用可能
分子モデル教材A（３D動画）

海亀生態系教材

CDの部屋

分子モデル教材B（３D動画）

24

リアルタイム3Dデータモーション配信◼ 様々な仕組みを利用して、3Dキャラクター(アバター)のモーション配信（VTuberのようなイメージ）、モーションを読み取って3Dデータの制御の取り組み➢ ニンテンドースイッチのジョイコン（コントローラー）➢ VRヘッドセットのコントローラー➢ Kinect（キネクト）➢ AIによる映像解析
ニンテンドースイッチ ジョイコン

モーションにあわせて・アバター操作
・3Dモデル教材表示
・3Dテロップ表示
VRヘッドセット コントローラー

サーバー・アバター
・３Dモデル教材
・3Dテロップ

Kinect（キネクト）

AI映像解析

25

KU-xRデータベースシステム◼ 作成した3D教材を、アップロードして、ブラウザで閲覧して操作可能◼ 金沢大学IDで認証して利用可能◼ 講義の関係者のみ閲覧可能なアクセス制御も可能◼ 3Dモデル（obj・FBX等）、Unityで作成したアセット教材（制限あり）等が利用可能◼ 現在、開発中で今年度中に公開予定

26

Unityアカデミックアライアンスによる教育支援◼ Unityアカデミックアライアンス➢ Unityの教育支援➢ Unity認定試験受験料の無償化 既に合格者5名➢ ライセンスベース製品の割引き◼ 講義➢ Unityの講義 3Qに2コマ、4Qに1コマ予定➢ Unityとは直接関係ありませんが、リアルタイムVFXシステムの講義は4Qに1コマ予定

27

Unity支援の取り組みの紹介
国際基幹教育院GS教育系
地球社会基盤学類（2年）
融合学域先導学類（2年）
理工3学類（１年）

准教授 唐島 成宙
西 彩華
工藤 柊真
羽田 響
28

1. VR唐島先生が歩く、階段を登る、ジャンプする、飛び降りる29

2. 教育入院用VRクリニックの開発

（外観）

30

3. 教育入院用VRクリニックの開発

（内覧）

31

本学のデータサイエンス教育プログラムを支えるシステム
数理・データサイエンス・AI教育センター
学務部学務課学務企画係長 辻谷 友紀

32

本学のデータサイエンス教育プログラムを支えるシステム「タイムライン（ガクチカの自動収集）」と「アワード（教育プログラムの自動管理）」
学務部学務課学務企画係長

辻谷友紀

1．本学のデータサイエンス教育プログラム

認定の有効期限：令和８年３月31日まで

認定の有効期限：令和９年３月31日まで

1-1．実績

対象科目数566

令和3年度修了者科目※令和3年度末現在

1,074人※ブロンズランク以上修了者
33

本学のデータサイエンス教育プログラムを支えるシステム「タイムライン（ガクチカの自動収集）」と「アワード（教育プログラムの自動管理）」
学務部学務課学務企画係長

辻谷友紀

登録不要・修了申請不要・認定証は自分でダウンロード

2．アワードシステムを活用したプログラム運営（１）△：データサイエンスのための特別な科目を開講する◎：既存科目のデータサイエンス要素（＝スキル）を可視化する
スキル1
授業科目A

スキル2
可視化

スキル3

授業科目B

スキル1
スキル4

自動修了判定対象科目数

566

累計科目

※令和3年度末現在

1,351

スキル

※令和3年度末現在
34

本学のデータサイエンス教育プログラムを支えるシステム「タイムライン（ガクチカの自動収集）」と「アワード（教育プログラムの自動管理）」
学務部学務課学務企画係長

辻谷友紀

2．アワードシステムを活用したプログラム運営（２）35本学のデータサイエンス教育プログラムを支えるシステム「タイムライン（ガクチカの自動収集）」と「アワード（教育プログラムの自動管理）」
学務部学務課学務企画係長

辻谷友紀

3．「アワード」から「タイムライン」へ、学生の実績を「ガクチカ」として自動記録

36