# [A15］民俗芸能 3D データアーカイブの活用による継承支援

中中川源洋 1), 笹垣信明 1)

1) 株式会社ニコン, 〒244-8533 神奈川県横浜市栄区長尾台町 471

E-mail: Yoshihiro.Nakagawa@nikon.com
## Inheritance support of folk performing arts utilizing 3D data archive

NAKAGAWA Yoshihiro"), SASAGAKI Nobuaki1),

1) Nikon Corporation, 471 Nagaodai-cho, Sakae-ku, Yokohama-city, Kanagawa, Japan, 2448533

## 【発表概要】

無形の民俗芸能の保存は、そのままの形で保存させることが困難であるため、映像記録が広く用いられている。しかしながら目的ごとに求められる映像コンテンツが異なるため、予算や撮影条件が限られている場合は目的が限定され、必ずしも有効に活用されないことがあった。そこで様々な目的に適用が可能な記録を得るために、数台の測距カメラを組み合わせて民俗芸能を 3 次元 $(3 D)$ 的に記録・データ化する技術を開発した。本技術を郷土芸能保存会のような団体自身により、公演や練習の様子をデータ化/アーカイブ化していくこと想定している。取得データは演技空間そのものを記録しているので、目的に合わせた形態への加工が可能となる。例えば再生視点を自由に選べることから、行事全体を理解するための広角の映像、演者の動きや部位に注視した映像、更には広報用の極端なアングルやクローズアップ映像などに再構成させることができる。 また取得した $3 \mathrm{D}$ データを解析し、熟達者と初心者間の動きを定量的に比較し継承支援につなげたり、取得データを利用した芸能体験アプリなどによる観光目的への展開なども可能となる。

本稿では岩手県で継承されている鹿踊りや神楽の $3 \mathrm{D}$ データ化実験と、取得データを活用した訪日外国人向け芸能体験アプリの実験の結果を報告する。

## 1. はじめに

無形の民俗芸能の保存には、音声と動画が同時に保存できる映像記録が広く用いられている。しかしながら映像記録は撮影者や編集者により空間の切り取りが行われるため、記録された映像が目的に沿わず、必要な状態が映っていないなどの課題があった。

東京文化財研究所の「無形文化財映像記録作成の手引き」[1]によれば、映像記録作成の目的は「記録保存」「広報・普及」「伝承・後継者支援」の 3 つに集約され、また、その作成目的を明確にすることを重要視している。記録目的の映像は広く演技空間を撮影しなければならないが、広報目的であれば映像自身を飽きずに見続けてもらうために、クローズアップを織り交ぜるなど、目的によってコンテンツの種類を変える必要がある。予算や撮影条件が限られている場合は目的を限定せざるを得ず、撮影した動画を多目的に活用することは難しいという課題を有していた。
また民俗芸能の現場では、後継者不足や活動資金不足などから、継承に不安を抱えている。2018 年 9 月北上市民俗芸能連合会により、北上市内における民俗芸能団体の実態調査 ${ }^{[2]}$ が実施された。調查の目的は、活動実態や課題を明らかにすることである。北上市の調查によれば、 $23 \%$ の団体が今後の継承に不安を抱えているという結果であった。このような傾向は北上市に限るものではなく、全国的に同じような状況であると考えられる。このように継承のための施策が必要な団体ほど、継承用のコンテンツや広報用のコンテンツの作成費用が捻出しにくいという状況である。

無形の民俗芸能という特性を考慮すると、

早急な対策が必要であると考えられる。

## 2. $3 \mathrm{D$ データによる記録}

## 2. 1 従来技術

$3 \mathrm{D}$ データは出力時に再生画角や視点を自由に変更することができるため、様々な目的のコンテンツへの活用が可能である。その特
徴は民俗芸能のアーカイブに適している。

一般的に 3D データの作成は、モーションキャプチャを用いる方法 $[3-5]$ と、多数のカメラを用いる手法[6]が一般に使用されている。

モーションキャプチャシステムは別途作成された 3DCG モデルにシステムによって得られた演者の動きを付与し、3D データを作成している。しかしながら本方式では演者の動きしか取得できないため、民俗芸能の要素である衣装の動きなどの記録はできなかった。

多数のカメラを用いる手法では、数 10 台に及ぶカメラを配置し、それぞれのカメラの相対位置を算出した後、被写体の特徴点を解析し、モデル化することで $3 \mathrm{D}$ データを得るものである。

いずれの手法も自由多視点を実現できるが、専門知識が必要で製作コストも高く、撮影条件の制約も多いことから、民俗芸能の現場では使用しにくいという課題があった。

## $2.23 \mathrm{D$ データ取得システム}

従来技術の課題を解決するために、数台の測距カメラ(図 1)による $3 \mathrm{D}$ データ取得システムを開発した。測距カメラは、画角内の各ポイントにおける距離を取得できる。これにより取得した距離情報(デプスマップ。図 2)とレンズ情報などから各画素の三次元位置を算出し、カメラに映った範囲の空間を $3 \mathrm{D}$ データに変換する。1 台のカメラから取得したデー タであっても、正面視点のみではなく、例えば俯瞰視点での位置の確認などができ、フォ ーメーションなども把握できる。

更に数台のカメラを組み合わせれば、死角が減り、より精度の高い $3 \mathrm{D}$ データが得られる。

図 1. 測距カメラ

## 2. 3 データアーカイブ実験

岩手県釜石市で開催された民俗芸能発表会において、データ取得実験を実施した。本実験は 1 台の測距カメラを用いた実験である。

データ取得結果を図 3-5 に示す。図が示すように、装束の動きや舞台装置を含んだ演技の様子が 3D データとして取得され、自由視点での再生が可能なデータ取得となっていることがわかる。

(a) 演技写真

(b) 点群デー夕 (正面)

(c) 点群データ (俯瞰)

図 3. 臼澤鹿子踊り

(a)演技写真

(b) 点群データ (正面)

図 4. 橋野鹿踊り

(a)演技写真

(b) 点群データ (正面)

図 5. 橋野鹿踊り

更に岩手県一関市での南部神楽の練習の様子を複数台のシステムで $3 \mathrm{D}$ データ化する実験を実施した。本実験では 3 台の測距カメラを用いている。図 6 が示すように死角が少ない全周のデータが得られており、任意の視点で映像が確認できるので、継承支援などにも利用可能なデータとなっている。また取得デー タを加工することにより、CG などへの展開するためのデータも得ることができる。

(a)データ取得の様子

(b)点群データ(全周)

(c) 3D モデル

図 6. 達古袋南部神楽

## 3. アーカイブの活用実験

2.2 節で述べた南部神楽の実証実験で取得したデータから演者の姿勢データを抽出するとともに、演者へのヒアリングと組み合わせて、演舞のポイントを数值化した。更にその数値データを教師データとした体験アプリを作成した。本アプリは体験者の動きをリアルタイムで取得し、教師データとの一致度をフイードバックするものである。今回は民俗芸能体験を目的としたが、教師データとの一致度の厳密さを上げることで継承支援にも活用できる。

本アプリの有用性を確認するため、日本在住の留学生に体駼(図 7)いただいたところ、対象となった民俗芸能への関心が高まるという結果が得られた。本アプリを空港などに設置することでインバウンド増加などが期待でき、観光業界からの資金獲得なども見込める。

図 7．南部神楽体験アプリ

## 4. おわりに

本稿では開発した $3 \mathrm{D}$ データ取得システムにより民俗芸能のデータ化が可能であることを示した。更に取得されたデータを教師デー タとする体験アプリを開発し、在日留学生を対象とした実証実験を実施した。継承支援を主目的にしたデータを活用することで、インバウンド増加など観光産業への貢献も期待で
きる。

今後は学校教育との連携を検討している。例えば学校教育の中で生徒にデータ取得やアプリ開発の一部を担わせることで、児童・生徒の教育活動を進めつつ継続的なアーカイブの拡充が可能になるためである。更に、民俗芸能に触れる人口を増やすことにもなり、継承支援にも貢献できると考えている。

## 5. 謝辞

本稿で示した実験は縦糸横糸合同会社の協力いただいた。同社、および、実験に参加いただいた橋野鹿踊り・手踊り保存会、東禅寺しし踊り保存会、臼澤鹿子踊保存会、達古袋神楽をはじめとした関係者の皆様に感謝申し上げる。

## 参考文献

[1] 国立文化財機構東京文化財研究所無形文化遺産部編. 無形民俗文化財映像記録作成の手引き, 2018, $\mathrm{p} 48$.

[2] 北上市民俗芸能連合会. 民俗芸能団体の実態に関するアンケート調查報告書, 2018, p12. [3] Yoko, Usui.; Katsumi, Sato.; Shinichi, Watanabe. The Effect of Motion Capture on Learning Japanese Traditional Folk Dance. Proceedings of World Conference on Educational Media and Technology. 2013, p.2320-2325.

[4] Yoko, Usui.; Katsumi, Sato.; Shinichi, Watanabe. Reflection CG in the Learning of Dance Movements. Proceedings of World Conference on Educational Media and Technology. 2014, p.2779-2775.

[5] 薄井洋子. 松浦秀平. 佐藤克美. 渡部信一. 神楽の舞踊練習におけるモーションキャプチャのリアルタイム活用の評価. 教育情報学研究. 2014, 13 号, p19-24.

[6] 延原章平. 3 次元ビデオによる人体 3 次元計測とその応用. 情報処理学会研究報告. 2013, Vol.2013-CG-153, No.18, p1-8.

この記事の著作権は著者に属します。この記事は Creative Commons 4.0 に基づきライセンスされます(http://creativecommons.org/licenses/by/4.0/)。出典を表示することを主な条件とし、複製、改変はもちろん、営利目的での二次利用も許可されています。