一次史料テキストマイニング・プラットフォーム

Gale Digital Scholar Lab
Galeウェビナー
2021年4月28日

センゲージラーニング株式会社
Gale部門 商品担当
森澤 正樹
masaki.morisawa@cengage.com

本日のアジェンダ• Gale Primary Sources について
• デジタル人文学：３つの障害• Gale Digital Scholar Lab とは• Gale Digital Scholar Lab デモンストレーション• インターフェースの更新予定について

会社紹介• 米国の教育出版社センゲージ ラーニングの図書館部門• 本部：米国ミシガン州ファーミントン・ヒルズ市• 出版形態
 百科事典・年鑑などのレファレンス書籍
 電子ブック・文学情報・雑誌記事などのデータベース
 一次資料・新聞などのマイクロフォーム
 一次資料・新聞などのデジタル・アーカイブ

Gale Primary Sources•

Gale のデジタル一次史料データベース群の総称•

同データベース群の横断検索プラットフォームの名称•

データベース数400種以上、総ページ数2億ページ以上•

主な商品の例：–

Eighteenth Century Collections Online (ECCO)–

Nineteenth Century Collections Online (NCCO)–

The Times Digital Archive–

The Making of the Modern World (MOMW)–

U.S. Declassified Documents Online

–

ほか、多数

歴史資料のフルテキスト検索

OCR = 光学文字認識 (Optical Character Recognition)
HTR = 手書き文字認識 (Handwritten Text Recognition)* HTRは一部の最新データベースのみ

Gale Primary Sources 商品群

OCRテキスト『タイムズ』紙と婦人参政権運動

ノッティンガム大学 キャット・グプタ先生

『タイムズ』紙と婦人参政権運動

ノッティンガム大学 キャット・グプタ先生

２つの異なるワークフロー

検索 → 閲読

データ収集 → 分析

デジタル人文学： ３つの障害

１： 分析用に最適化された元データの入手

Slide courtesy of the COMHIS Collective: https://comhis.github.io/ http://j.mp/comhis-bsecs

２： データの保存場所の確保と管理３： 分析ツールの難しさ

２つの異なるワークフロー

検索 → 閲読

データ収集 → 分析

それぞれに最適なプラットフォーム

Gale Primary Sources

Gale Digital Scholar Lab

Gale Digital Scholar Lab
Galeの一次史料テキストマイニング専用プラットフォーム•

Gale Primary Sources データベース群のOCRテキストを搭載•

主要なテキストマイニング・ツール（分析ツール）を内蔵•

OCRクリーニング・ツールを内蔵•

分析結果・OCRテキストのダウンロード機能•

ユーザー自身のテキストのアップロード機能（ベータ版）•

充実したヘルプファイル、カリキュラムサポート•

プログラミング等の知識は不要！

３つの障害を解決

既に分析用に最適化されたデータを格納

クラウド上で管理されている

主な分析ツールを搭載

現在 Lab に搭載可能なコンテンツセット
















Amateur Newspapers from the American Antiquarian Society
American Fiction 1774-1920
American Historical Periodicals from the American Antiquarian Society
Archives UnboundArchives of Sexuality and Gender
Associated Press Collections Online
Brazilian and Portuguese History and Culture
British Library Newspapers
China and the Modern World
Crime, Punishment, and Popular Culture, 1790-1920
Daily Mail Historical Archive 1896-2016
Declassified Documents Online: Twentieth Century British Intelligence
The Economist Historical Archive, 1843-2015
Eighteenth Century Collections Online (ECCO)The Illustrated London News Historical Archive 1842-2003
The Independent Historical Archive
Indigenous Peoples of North America
International Herald Tribune Historical Archive, 1887-2013
Liberty Magazine Historical Archive, 1924-1950
The Listener Historical Archive, 1929-1991
The Making of Modern Law: American Civil Liberties Union Papers
The Making of Modern Law: Foreign Primary Sources, 1600–1970
The Making of Modern Law: Foreign, Comparative and International Law,
1600–1926
The Making of Modern Law: Landmark Records and Briefs of the U.S.
Courts of Appeals, 1950-1980


























The Making of Modern Law: Legal Treatises, 1800–1926
The Making of Modern Law: Primary Sources
The Making of Modern Law: Trials, 1600–1926
The Making of Modern Law: U.S. Supreme Court Records and Briefs,
1823–1978
The Making of the Modern World (MOMW)
Mirror Historical Archive 1903-2000
Nineteenth Century Collections Online (NCCO)
Nineteenth Century U.S. Newspapers
Nineteenth Century UK Periodicals
Picture Post Historical Archive 1938-1957
Political Extremism and Radicalism
Public Health Archives: Public Health in Modern America, 1890-1970
Punch Historical Archive 1841-1992
Refugees, Relief, and Resettlement
Sabin Americana: History of the Americas, 1500-1926
Seventeenth and Eighteenth Century Burney Newspapers Collection
Seventeenth and Eighteenth Century Nichols Newspapers Collection
Slavery and Anti-Slavery: A Transnational Archive
Smithsonian Collections Online
The Sunday Times Historical Archive 1822-2016
The Telegraph Historical Archive 1855-2016
The Times Digital Archive 1785-2014
The Times Literary Supplement Historical Archive 1902-2019
U.S. Declassified Documents Online
Women's Studies Archive現在 Lab に搭載できないコンテンツセット
••
•
•
•
•
•

Financial Times Historical Archive
National Geographic Magazine Archive
Chatham House Online Archive
World Scholar: Latin America & the Caribbean
British Literary Manuscripts Online
State Papers Online
Early Arabic Printed Books from the British Library

主な理由：


権利関係の理由（Financial Times、National Geographic）

プラットフォームが未統合（Chatham House, World Scholar）



手稿中心でOCRがない（British Literary Manuscripts、State Papers）



言語の障壁（Early Arabic Printed Books）

Gale Digital Scholar Lab デモンストレーション

Gale Digital Scholar Lab のワークフロー

検索・選択

コンテンツ
セットの構築クリーニング
ツールの適用分析・ダウンロード

19世紀～20世紀前半の『タイムズ』紙における「社会主義」• The Times Digital
Archive 1785-2014• タイトルが「socialis*」を含む新聞記事• 年代：1820～1945

Gale Digital Scholar Lab で現在利用可能な分析ツール
ツール名

主な用途

ライブラリ・ツールキット

Ｎグラム頻度 Ngram

頻出単語・フレーズの抽出

Lucene×

クラスタリング Clustering

文書を類縁性で分類

SciKit Learn○

トピック・モデリング Topic Modelling

複数の文書に共通するトピックの抽出

Mallet○

感情分析 Sentiment Analysis

文書内容が肯定的か否定的かを分析

OpenNLP○

固有表現抽出 Named Entity Recognition

固有名詞・数字・日付等の抽出

spaCy

○

品詞タグ付け Parts-of-Speech Tagger

著者ごとに品詞の使用頻度を比較

spaCy

○

オープンソースGale Digital Scholar Lab のワークフロー
検索・選択• 基本検索／詳細検索• メタデータの表示• ページ画像とOCRテキストの対照表示• 検索履歴（セッション毎）• 検索結果の文書を一度に選択可能（ただし最大１万件）• 自身のコンテンツのアップロード（ベータ版）

コンテンツセットの構築

クリーニングツールの適用• 検索／アップロードした文書のコンテンツセットへの追加• デフォルトのクリーニングを適用する（特段の操作は不要）• コンテンツセットの名称・説明文を指定• もしくは、任意のクリーニング設定を作成し、適用する• 各コンテンツセットに最大１万件の文書を追加可能

分析・ダウンロード• 分析ツールの適用• プログラミング技術は不要• 視覚化／表形式の出力• 簡単な設定項目• ドキュメントへのリンク• 複数のコンテンツセットを管理• 実行履歴からの再現• コンテンツセットの複製• １セッションあたり最大５千件の文書のOCRをダウンロード• 検索履歴の表示

Gale Digital Scholar Lab
Galeの一次史料テキストマイニング専用プラットフォーム•

Gale Primary Sources データベース群のOCRテキストを搭載•

主要なテキストマイニング・ツール（分析ツール）を内蔵•

OCRクリーニング・ツールを内蔵•

分析結果・OCRテキストのダウンロード機能•

ユーザー自身のテキストのアップロード機能（ベータ版）•

充実したヘルプファイル、カリキュラムサポート•

プログラミング等の知識は不要！

インターフェースの更新予定について49

Gale Digital Scholar Lab インターフェース更新予定••

新インターフェースの特色–

分析ツールの改良–

使いやすさ・見やすさの向上–

他のGale商品と使い勝手を統一–

アクセサビリティの向上（WCAG 2.0準拠）

2021年6月： 新インターフェースを利用可能に（新旧インターフェースを並行して運用）•2021年9月： 新インターフェースに完全移行※時期は変更になる場合がございます。

分析結果の移行について• インターフェース移行後も、ユーザーのコンテンツセットおよびクリーニング設定は保持されます。
• ただし、分析ツールのデザイン仕様が変わるため、分析結果のアウトプット（画像・CSV・JSON形式）は新旧インターフェースでは異なります。
• 念のため、完全移行前に旧インターフェースによる分析結果をローカルにダウンロードし保存しておくことをお勧めします。
• 上記の点についてはデータベース内においても通知する予定です。

コンテンツセット画面
現行インターフェース•

フォルダーによる整理•

複数のコンテンツセットを結合する機能

新インターフェース

クラスタリング・ツール
現行インターフェース•

特定クラスターの文献の詳細情報を表示•

特定クラスターをコンテンツセットへ追加する機能

新インターフェース

Nグラム頻度ツール（グラフ表示）
現行インターフェース

新インターフェース• 個々のNグラムの詳細情報を表示• 絶定数／頻度の切替表示

Nグラム頻度ツール（ワードクラウド）
現行インターフェース

新インターフェース• より自然なクラウド型に• 絶定数／頻度によるカラーコーディング• メタデータによるグループ分け機能

感情分析ツール
現行インターフェース• 感情スコアの視覚化

新インターフェース• メタデータによるグループ分け機能

品詞タグ付けツール
現行インターフェース• 品詞分類の視覚化

新インターフェース• トピック含有比率による並び替え機能

トピックモデリング・ツール
現行インターフェース• メタデータによるグループ分け機能

新インターフェース

まとめ• 一次資料のデジタル化が可能にする新たな研究 〈検索⇒閲読〉 〈収集⇒分析〉 の２つの異なるワークフロー• デジタル人文学実践の３つの障害
 分析に適したデータの入手、その保存・管理、分析ツールの難しさ• 一部の限られた研究者から、より幅広い層へ広がる可能性 デジタル時代の人文学教育に大きな示唆

ご清聴ありがとうございました。
GaleJapan@cengage.com

65