人文学マイクロコンテンツ
研究ツールとしてのIIIF Curation Platform
2021年2月18日
第14回CODHセミナー
ROIS-DS人文学オープンデータ共同利用センター / 国立情報学研究所
鈴木親彦

自己紹介
鈴木親彦
ROIS-DS人文学オープンデータ共同利用センター

特任助教

国立情報学研究所兼務

専門分野：人文情報学・文化資源学

主に「人文学資料のマイクロコンテンツ化」（後述）のためにIIIF Curation
Platformを活用している

レシピの内容 人文学研究者の研究活用事例を軸に北本センター長が示したICPの諸機能を、実際に利用した事例を軸として、実践的なレシピをご紹介します
1. ICPを使ったマイクロコンテンツ「顔貌コレクション」と、ICPを利用した美術史学研究
2. ICPを利用したグループワーク・キュレーソン
3. ICPの利用環境と環境構築

顔貌コレクション（顔コレ）

顔貌コレクション（顔コレ）http://codh.rois.ac.jp/face/•様々な機関が、IIIFで公開している美術作品に出現する顔貌を収集し、整理・検索可能にしたもの•日本の絵巻物、絵入本を中心に顔貌を収集•全顔貌にメタデータを付与•299作品・8,845顔貌（2021年2月現在）

「顔コレ」とIIIF Curation Platform
顔コレではIIIF Curation Platformのほぼ全機能を利用している● IIIF Curation Viewerによる顔貌の切り取り● IIIF Curation Viewerによるメタデータ付与※IIIF Curation Editorによるメタデータ項目一括付与● IIIF Curation Managerによる管理とIIIF Curation Editorによる編集● IIIF Curation Finderによるファセット検索● 機械学習との連携、データセット構築● IIIF Curation Boardを活用した整理・分析・研究

IIIF Curation Viewer

1.画像表示 ★
顔貌を収集する作品をIIIF Curation Viewerで表示
各施設のWebサイトやアーカイブから、IIIFマニフェストをドラッグ＆ドロップ。簡単に読み込むことが可能

IIIF Curation Viewer

2.画像収集 ★
矩形選択機能で顔貌を囲んで、キュレーションリストへ登録していく

IIIF Curation Viewer

3.キュレーションの保存 ★
各作品単位で一度キュレーションをエクスポートして、保存する※この段階でJsonKeeperに格納されURLが作られるので、共有は可能

IIIF Curation Editor

4.名前を付けて管理 ★
キュレーションに名前を付けることで管理を容易にする
IIIF Curation Managerで一括管理しているキュレーション
を、IIIF Curation Editorから編集。Object直下のlabelに記入した文字列がタイトルになる※初期値は「Curating list」

IIIF Curation Viewer

5.メタデータの付与 ★
メタデータ付与機能で、メタデータを付与していく
顔コレであれば：向き・性別・職業…
…ただし、画像ごとにいちいち「＋item」を使って項目を作るのは作業者として大きな手間IIIF Curation Editor

6.メタデータ項目一括登録 ★＋0.5
IIIF Curation Editorを開き一括でメタデータ項目を設定する※一括置換はICEditor上のCtrl+Fでも可能。
右例では外部のエディタ（Oxygen）を利用して複雑な置換を実施している

IIIF Curation Viewer

7.作業の中断 ★
キュレーション(顔切り抜き・メタデータ段階を問わず)作業を一時中断するために、上書きでのエクスポート「上書き更新」を行う
注意※メタデータを更新した際は、メタデータ入力欄からエクスポートしないと正しく保存されない

IIIF Curation Manager

8.グループ作業管理 ★
ICPでのグループ作業管理

顔コレは複数の作業者によって構築されているグループ作業を補助するため、管理者
は各作業者のログインアカウントを把握し、ICManagerからキュレーションを管理している

User A

User BIIIF Curation Finder / Canvas Indexer

9.メタデータでの検索 ★
IIIF Curation Finderを利用して公開すること
で、付与したメタデータでの検索が可能に
検索結果は「キュレーション」単位と「キャンバス」単位で表示切替可能
http://codh.rois.ac.jp/face/iiif-curation-finder/
右は「僧侶」でキャンバス検索した結果

IIIF Curation Finder

10.派生キュレーション ★
IIIF Curation Finderの画像の「+」ボタンを選んでリストに登録、エクスポートすることで派生的キュレーションを作成可能
顔コレでは気になる顔貌・似た顔貌を抽出してキュレーションを想定している※美術史の古典的な様式分析手法
でもある

IIIF Curation Finder / Canvas Indexer

11.一括情報取得① ★★
IIIF Curation Finderに表示される情報（メタデータ・画像座標）一括確認
searchEndpointUrlとfacetsEndpointUrlを活用※後述の顔コレデータセット構築にも活用

searchEndpointUrl
Canvas Indexerの検索用エンドポイントURL→含まれる各キュレーションの個別の画像・メタデータを確認可能

curationの中身

IIIF Curation Finder / Canvas Indexer

12 .一括情報取得②★★

IIIF Curation Finderに表示される情報（メタデータ・画像座標）一括確認
searchEndpointUrlとfacetsEndpointUrlを活用※後述の顔コレデータセット構築にも活用
facetsEndpointUrl
Canvas Indexerのファセット一覧
取得用エンドポイントURL→メタデータの一覧、付与数を取得可能

その他

13.機械学習での利用 ★★★
「顔コレデータセット」
IIIF Curation Platformと連携し、顔コレの顔貌画像・メタデータ全てを機
械学習用データセット「顔コレデータセット」として構築
http://codh.rois.ac.jp/face/dataset/

機械学習で自動生成された日本絵巻風顔貌

IIIF Curation Viewer

14.座標入力による矩形選択 ★
顔コレデータセットの活用● 顔コレデータセットを利用して機械学習で、絵巻物から顔貌の自動認識を実施● 自動認識結果は、IIIF Curation Viewer「選択サイズ座標入力」機能を活用して、さらなるデータセッ
ト構築支援に利用※参考文献
Alexis Mermet, Asanobu Kitamoto, Chikahiko Suzuki, Akira
Takagishi. “Face Detection on Pre-modern Japanese
Artworks using R-CNN and Image Patching for SemiAutomatic Annotation”. Proceedings of the 2nd Workshop
on Structuring and Understanding of Multimedia heritage
Contents (SUMAC'20), 2020, p.23–31,
doi:10.1145/3423323.3423412「座標入力」で表示されるボックスに数値を入力することで、矩形選択を行うことが可能

IIIF Curation Platform全機能

15.「顔コレ」と美術史研究 ★★
IIIF Curation Platformの全機能を使った美術史研究
髙岸輝（東京大学美術史学研究室准教授）との共同研究● 『遊行上人縁起絵巻 清浄光寺甲本』顔コレを新たに構築● 服装・髪型が同じ僧侶・尼僧をすべてピックアップ● IIIF Curation Boardを使って整理し、男女の「顔」が違うか●を網羅的に確認担当した絵師ごとの傾向の違いまで明確になった※参考資料
鈴木 親彦・髙岸 輝・本間 淳・Alexis Mermet・北本 朝展「日本中世絵巻における性差の描き分け－IIIF Curation Platformを活用したGM法による『遊行上人縁起絵巻』の様式分析」『じんもんこん2020論文集 』, pp.67-74, 2020

IIIF Curation Board
IIIF Curation Board はキュレーションした画像を整理し、情報を付加できる
http://codh.rois.ac.jp/software/iiif-curation-board/
様々な機能があるので、段階的に示していきます
スタート段階最終段階

IIIF Curation Board

16.画像の読み込み ★
IIIF Curation Boardにキュレーションを読み込む

ICManagerからの起動

ログインしてキュレーションを作成していれば、ICManagerから簡単に起動が可能
また、キュレーションのURLを直接指定しても起動可能
キュレーションのURLを直接指定して、ICBoardへドラッグアンドドロップでも起動可能

IIIF Curation Board

17.画像の移動と整理 ★
ICBoardの平面上に整理読み込まれた画像は、ドラッグすることで平面上を自由に移動させることができる
KJ法の様に画像を整理していく

平面上の移動させ、顔貌をグループ化

IIIF Curation Board

18.自動整列・枠の追加 ★
グループ化の補助

手動で作ったグループを分かりやすく表示するために、自動整列や枠線配置による明確化が可能

範囲選択と自動整列

枠線によるグループの明確化

IIIF Curation Board

19.シール機能 ★
色分けによる属性表示

グループの属性等を明確にするために画像にシールを張っていくことができる（全5色）※一つの画像に複数のシールを張ることも可能

IIIF Curation Board

20.付箋機能 ★
文字情報を付加

付箋機能を利用することで、文字情報による説明を付加することができる
付箋にもシールを張ることができるので、色分けの意図を明確にすることも可能

IIIF Curation Board

21.表示の切り替え ★
情報の表示・非表示

情報表示（i）ボタンを押すことで、情報の表示・非表示を切り替え可能
・マニフェストに基づく情報・シール・キュレーションのメタデータ
整理作業中と成果を示す際などに使い分けると便利IIIF Curation Platform全機能

22.人文学資料のマイクロコンテンツ化 ★★
顔コレの実践で示した、デジタル化された人文学資料の部分を特定の粒度で整理し直して研究活用可能にする試み

IIIF Curation Platformによるワークフロー
IIIFに則ってデジタル化された資料

資料から部分を抽出・収集

メタデータの付与

横断検索・一覧化・研究活用

マイクロコンテンツ化 IIIF Curation Viewer/Manager/Editor
マイクロコンテンツ分析 IIIF Curation Finder/Board

顔コレ以外にも様々な試みをおこなっている● 「江戸買物案内」 http://codh.rois.ac.jp/edo-shops/● 「江戸観光案内」 http://codh.rois.ac.jp/edo-spots/ICPを使ったグループワークと「キュレーソン」

キュレーソン（Curathon）
アイデアソンなどの「○○ソン」と同様、時間内にキュレーションのアイデアをみんなで出し合い、それをみんなの前で発表することで、キュレーションで見出された新しい発見や考え方を共有するイベント
CODHでは、これまで以下二つのキュレーソンを実施● Digital Humanities for Japanese Culture: Resources and Methods○

http://codh.rois.ac.jp/tutorial/dhsi-2019/● 東京大学文学部「絵巻ゼミ」キュレーソン
○http://codh.rois.ac.jp/tutorial/04/

IIIF Curation Viewer / IIIF Curation Manager

23.キュレーソンの実施 ★
キュレーソンの流れ

1. 参加者にIIIF Curation Platformの基本的な使い方をレクチャー

2. 参加者が自由にキュレーションを実施

髷に注目したキュレーション

3. 参加者の作ったキュレーションを共有し、相互に解説※テーマを決めておく、予めデータベース・デー
タセットや検索キーワードを準備しておくとスムーズ

背景の植物に注目したキュレーション

IIIF Curation Manager

24.アカウント共有 ★
キュレーソン成果の管理・共有How to大人数のキュレーソンを実施し、後日成果をまとめる場合事前に運営側が準備した「共通のメールアドレス・パスワード」を利用すると便利IIIF Curation Editor

25.”description”の記入 ★
キュレーションした画像への説明文の追加

IIIF Curation Editorのdescription項目を編集することで、キュレーションした画像に文章を付すことができる
キュレーソンにおいては、制作の意図を残したり、展示の解説文の様に使うことが可能

IIIF Curation Player

26.”description”の表示 ★
キュレーションに付した説明文を表示

IIIF Curation Playerでキュレーションを読み込むことで、descriptionに記述した文章を表示できる
スライドショーによるプレゼンの他、自動再生機能を使って展示解説の様に使うことも可能

IIIF Curation Playerを全画面表示にすると自動再生ボタンが表示される

ICFinderによるグループワーク
美術史教育の一環として、先達の研究プロセスを入門者である学生が追体験するグループワークを実施『石山寺縁起絵巻』の全顔貌を準備し、その中から先行研究で様式同定に利用された顔貌はどれかを考察し、議論を行うツールとしてIIIF Curation Finderの画像検索を使って顔貌を発見する

相澤正彦「石山寺縁起詳解」『石山寺縁起絵巻集成』
中央公論美術出版（2016）

ICFinderによるグループワーク
美術史教育の一環として、先達の研究プロセスを入門者である学生が追体験するグループワークを実施『石山寺縁起絵巻』の全顔貌を準備し、その中から先行研究で様式同定に利用された顔貌はどれかを考察し、議論を行うツールとしてIIIF Curation Finderの画像検索を使って顔貌を発見する

相澤正彦「石山寺縁起詳解」『石山寺縁起絵巻集成』
中央公論美術出版（2016）

IIIF Curation Platform全機能

27.美術史グループワーク ★★
ICFinderを利用したグループワーク準備

1. 限定的な顔コレ（IIIF Curation Finder）を使いたいので、新たにICPを準備

2. 課題となる資料（今回は『石山寺縁起絵巻五巻』）の全顔貌をキュレーション

3. 検索の用に供するメタデータ付与
4. ICFinderへ反映IIIF Curation Finder

28.美術史グループワーク ★
ICFinderを利用したグループワーク実践

1. 参加者は、ICFinderの検索機能を利用し、正解の画像を考察
2. 派生キュレーションを作成して、グループごとに発表を行う

向きや性別などから検索して、先達が「似ている典型」とした顔貌を選んでいく

ICPの利用環境

IIIF Curation Platformを利用したい
ユースケース

インストール方法

プロジェクト専用環境

CODHが用意するデモ環境を利用する場
合インストールは不要

不可

2

ICPクライアントだけを利用する場合

ZIPファイルをダウンロードしてウェブサーバの必要な位置に展開するだけでよい

不適

3

ICPサーバも必要な場合

独自インストールも可能だがDockerを利用すると便利可能

1

今回は最も汎用性の高い1と3を解説

IIIF Curation Platform 全機能

29.デモ環境での利用 ★
CODHが用意するデモ環境でICPを利用する
CODHのサイト上で、IIIF Curation Finderを除いて、自由に利用できるデモ環境を提供している認証を行えば、 各機能を横断してキュレーションを利用可能
http://codh.rois.ac.jp/icp/
IIIF Curation Viewer： http://codh.rois.ac.jp/software/iiif-curation-viewer/demo/
IIIF Curation Manager： http://codh.rois.ac.jp/software/iiif-curation-manager/demo/
IIIF Curation Editor： http://codh.rois.ac.jp/software/iiif-curation-editor/demo/
IIIF Curation Player： http://codh.rois.ac.jp/software/iiif-curation-player/demo/
IIIF Curation Board： http://codh.rois.ac.jp/software/iiif-curation-board/demo/

IIIF Curation Platform 全機能（Docker版）

30.Dockerによる利用 ★★
Docker版IIIF Curation Platform
http://codh.rois.ac.jp/software/icp-docker/
独自の環境を構築するのが容易
自身の作ったキュレーションをIIIF Curation Finderで検索させたい場合に便利
ポート、Proxyの設定が分かる程度のサーバー管理知識は必要
またDockerに関する基本的な知識も必要とはいえ基礎が分かっている初級者であれば対応できる（鈴木もそのレベル）

最後に：ICPチュートリアル
今回のレシピで紹介した手順を含め、基本的なICPの操作方法を紹介
https://www.ch-suzuki.com/icpt/
随時更新していきますので、ぜひご活用くださいご清聴ありがとうございました

全ての画像提供者・共同研究者の皆様に感謝いたします