『昭和・平成書き言葉コーパス』（バージョン 2023.5）新聞レジスター 概説書
2023年12月5日 間淵洋子

１．はじめに『昭和・平成書き言葉コーパス 新聞』（以下、SHC新聞）は、明治初期に創刊され今日まで続く『読売新聞』の昭和・平成期期間に刊行された一部をコーパス化したものである。本文書では、収録資料、テキストの仕様、コーパス検索アプリケーション「中納言」1の検索結果に表示されるテキストおよびアノテーション（テキストに付与する付加情報）の項目について、その概要を示す。

２．収録資料
本コーパスでは、『日本語歴史コーパス 明治・大正編Ⅴ新聞』2（以下、CHJ明治・大正編Ⅴ新聞）に接続して利用でき、また、戦前から戦後、さらに現在にかけての公共的な書き言葉の変化を捉えることができる資料として、「CHJ明治・大正編V新聞」が収録対象とする『読売新聞』を引き続き収録対象とし、「CHJ明治・大正編V新聞」がおよそ8年おきにテキストを収録するのに倣い、1933・1941・1949・1957・1965・1973・1981・1989・1997・2005・2013の各年を収録年次とした。また、1か年につき原則として5月2日・11月2日の2日分の全国版朝刊1冊のテキストを取得した「明治・大正編V新聞」を拡張し、より多くのデータ量を確保することを目的に、原則として奇数月2日（2日が休刊日の場合は3日）の計6日分の全国版朝刊1冊を対象とした。本コーパスの収録年月日と、次節に述べるサンプル単位の別、サンプル数、短単位数を表1に示す。

表1 収録年月日の一覧
収録年

収録月日

2

サンプ
ル数

短単位数（万）1933(昭和 8)年

5 月 2 日・7 月 2 日・9 月 2 日・11 月 2 日面

4712.81941(昭和 16)年

1 月 3 日・3 月 2 日・5 月 2 日・7 月 2 日・9 月 2 日・11 月 2 日

面4314.6

1949(昭和 24)年

1 月 3 日・1 月 4 日・3 月 2 日・5 月 2 日・7 月 2 日・7 月 3 日・
9 月 2 日・11 月 2 日

面

29

11.7

1957(昭和 32)年

5 月 2 日・7 月 2 日・11 月 2 日面

3710.1

1965(昭和 40)年

1 月 3 日・3 月 2 日・5 月 2 日・7 月 2 日・9 月 2 日・11 月 2 日

記事

407

27.9

1973(昭和 48)年

1 月 3 日・3 月 2 日・5 月 2 日・7 月 2 日・9 月 2 日・11 月 2 日

記事

770

37.9

1981(昭和 56)年

1 月 3 日・3 月 2 日・5 月 2 日・7 月 2 日・9 月 2 日・11 月 2 日

記事

787

35.6

1989(昭和 64,平成元)年

1 月 3 日・3 月 2 日・5 月 2 日・7 月 2 日・9 月 2 日・9 月 3 日・
11 月 2 日

記事

821

31.7

1997(平成 9)年

1 月 3 日・3 月 2 日・5 月 2 日・7 月 2 日・9 月 2 日・11 月 2 日

記事

627

27.1

2005(平成 17)年

1 月 3 日・3 月 2 日・5 月 2 日・7 月 2 日・9 月 2 日・11 月 2 日

記事

563

23.7

2013(平成 25)年

1 月 3 日・3 月 2 日・5 月 2 日・7 月 2 日・9 月 2 日・11 月 2 日

記事

553

22.94684

255.9

合計

1

サンプル単位https://chunagon.ninjal.ac.jp/
https://clrd.ninjal.ac.jp/chj/meiji_taisho.html#shinbun
1３．テキストの収録範囲とサンプル
新聞紙1冊分における本文テキストの収録範囲は、「明治・大正編V新聞」に倣い、広告記事および固有名詞や数値の羅列を中心とする記事（叙任・辞令，スポーツの試合結果・株式の取引結果等）を除外した全ての記事のうち、図表や写真・挿絵の中のテキストと、それらのキャプションに相当する文書要素を除外した全文である。
これらの対象テキストをコーパスに収録する際には、テキストを一定の範囲で分割する必要があり、その各範囲を「サンプル」と呼ぶ。新聞レジスターのサンプル単位は、発行年により、新聞の1記事に相当する範囲（「記事」）と、新聞の1ページに相当する単位（「面」）の2種に分けられている。本来は、一律に、「CHJ明治・大正編Ⅴ新聞」やSHCの他のレジスターで採用する「記事」による分割とすべきところであるが、発行年が1933年から1957年の4か年分については、構築作業上の都合により「記事」を単位とする分割ができなかったため、「面」による分割になっている。ただし、その場合でも、新聞紙1ページ内に文芸作品（小説、短歌・俳句、詩など）を含む場合は、個別にその部分を「記事」として分割した。このように、新聞レジスターにおいては、サンプルの分割単位が不統一であるため、サンプルを単位とした分析が不適当となる場合がある点に、特段の注意が必要である3。
こうして分割したサンプルには、各サンプルを一意に特定するID（「サンプルID」と呼ぶ）が付けられている。サンプルIDの構成を表2にあげる。表2の基準によると、例えば、1933年11月2日の3つめのサンプルは「70P読売1933_B2003」というサンプルIDが付けられていることになる。

表2桁数

サンプルIDの構成値

説明

1〜2

70 / 80

時代区分を表す。「70」は「昭和」、「80」は「平成」を表す。

3P

レジスターを表す。すべて「P」で「新聞（Paper）」を表す。

4〜5

読売

紙名を表す。すべて「読売」で「読売新聞」を表す。

6〜9(4 桁の数字)

サンプルの発行年を西暦で表す。

10_

サンプル ID の区切り記号(アンダーバー)。

11(1 桁の数字)

発行月を 32 進数で表す(1〜9 月はアラビア数字で、10 月以降は ABC... に対応する)。

12(1 桁の数字)

発行日を 32 進数で表す(1〜9 日はアラビア数字で、10 月以降は ABC... に対応する)。

13〜15(3 桁の数字)

サンプルの通し番号を表す。

４．テキストの仕様
４．１ テキストに使用する文字
新聞レジスターでは、テキスト電子化の文字集合として、原則としてUnicodeを使用した。構築作業における便宜上の仕様であるが、その結果「CHJ明治・大正編Ⅴ新聞」やSHCの他のレジスターと文字集合の異なっている点については、特に留意が必要である。表3に、他のレジスターで包摂対象となる漢字字体を一覧にして示す。

3

原則として面を単位に分割した1933年から1957年のサンプル数は156、１サンプルあたりの語数平均は3151.1語、記事を単位に分割した1965年から2013年のサンプル数は4984、１サンプルあたりの語数平均は456.6語であり、サンプルの性質が大きく異なることが推定される。
2

表3
新聞使用文字

包摂対象文字文字

Unicode文字

Unicode䘙

U+4619

衛U+885B

俱U+4FF1倶倂

U+5002

剝

留意すべき字体の一覧新聞使用文字

備考*

包摂対象文字備考*文字

Unicode文字

UnicodeJIS 包摂狀

U+72C0状

U+72B6

雑・書包摂

U+5036

雑・書包摂

玆U+7386

兹U+5179

JIS 包摂併

U+4F75

雑・書包摂

甁U+7501

瓶

U+74F6

雑・書包摂

U+525D

剥U+5265

雑・書包摂

畵U+7575

畫U+756B

JIS 包摂卽U+537D

即U+5373

雑・書包摂

瘦U+7626

痩U+75E9

雑・書包摂吞U+541E

呑U+5451

雑・書包摂

硏U+784F

研

U+7814

雑・書包摂

噓U+5653

嘘U+5618

雑・書包摂

綠U+7DA0緑U+7DD1

雑・書包摂

增U+589E

増U+5897

雑・書包摂

緖U+7DD6緒U+7DD2

雑・書包摂姸U+59F8

妍U+598D

雑・書包摂

緣U+7DE3

縁U+7E01

雑・書包摂

寬U+5BEC

寛U+5BDB

雑・書包摂

繫U+7E6B

繋U+7E4B

雑・書包摂

屛U+5C5B

屏U+5C4F

雑・書包摂

羡U+7FA1

羨

U+7FA8JIS 包摂巢U+5DE2

巣

U+5DE3

雑・書包摂

脋U+810B

脅U+8105

JIS 包摂幷U+5E77

并U+5E76

雑・書包摂

薰U+85B0

薫U+85AB

雑・書包摂

强U+5F3A

強U+5F37

JIS 包摂虛U+865B

虚U+865A

雑・書包摂

徵U+5FB5

徴U+5FB4

雑・書包摂

賴U+8CF4

頼U+983C雑・書包摂

德U+5FB7

徳U+5FB3

雑・書包摂

郞U+90DE郎U+90CE

雑・書包摂

戾U+623E

戻U+623B

雑・書包摂

鄕U+9115

郷U+90F7

雑・書包摂

揭U+63ED

掲

U+63B2

雑・書包摂

錄U+9304

録U+9332

雑・書包摂擊U+64CA撃

U+6483

雑・書包摂

鍊U+934A

錬U+932C

雑・書包摂

旣U+65E3

既U+65E2

JIS 包摂髙U+9AD9

高U+9AD8

JIS 包摂昻U+663B

昂

U+6602JIS 包摂鬪U+9B2A

闘

U+95D8

雑・書包摂

晚U+665A

晩U+6669

雑・書包摂

鬭U+9B2D

闘

U+95D8

雑・書包摂

暜U+669C普U+666E

JIS 包摂黃U+9EC3

黄U+9EC4

雑・書包摂

曆U+66C6

暦U+66A6

雑・書包摂

黑U+9ED1

黒U+9ED2

雑・書包摂

槪U+69EA

概U+6982

雑・書包摂

欄

U+F91D

欄

U+6B04

雑・書包摂

橫U+6A6B

横U+6A2A

雑・書包摂

蠟U+F927

蠟U+881F

JIS 包摂櫎U+6ACE

横U+6A2A

JIS 包摂廊

U+F928廊

U+5ECA

雑・書包摂

欫U+6B2B

缺U+7F3A

JIS 包摂朗

U+F929

朗U+6717

雑・書包摂

步U+6B65

歩U+6B69

雑・書包摂

虜U+F936

虜U+865C

雑・書包摂

歷U+6B77

歴U+6B74

雑・書包摂

殺U+F970

殺U+6BBA

雑・書包摂

每U+6BCF

毎U+6BCE

雑・書包摂

類

U+F9D0類

U+985E

雑・書包摂

涉U+6D89

渉U+6E09

雑・書包摂

隆

U+F9DC

隆U+9686

雑・書包摂淚U+6DDA涙

U+6D99

雑・書包摂

塚

U+FA10塚

U+585A

雑・書包摂

渴U+6E34

渇

U+6E07

雑・書包摂

猪U+FA16

猪U+732A

雑・書包摂

溫U+6EAB

温U+6E29

雑・書包摂

礼

U+FA18

礼

U+793CJIS 包摂瀨U+7028

瀬U+702C

雑・書包摂

神

U+FA19神

U+795E

雑・書包摂

3

新聞使用文字

包摂対象文字文字

Unicode文字

Unicode祥U+FA1A

祥U+7965

福U+FA1B

福靖

U+FA1C

諸新聞使用文字備考*

包摂対象文字備考*文字

Unicode文字

Unicode雑・書包摂

禎U+FA53

禎U+798E

雑・書包摂

U+798F

雑・書包摂

穀U+FA54

穀

U+7A40

雑・書包摂

靖

U+9756

JIS 包摂突

U+FA55突

U+7A81

雑・書包摂

U+FA22

諸U+8AF8

雑・書包摂

節

U+FA56

節

U+7BC0

雑・書包摂

都

U+FA26

都U+90FD

雑・書包摂

練

U+FA57

練U+7DF4

雑・書包摂

侮

U+FA30

侮U+4FAE

雑・書包摂

繁U+FA59

繁U+7E41

雑・書包摂

僧U+FA31

僧U+50E7

雑・書包摂

署

U+FA5A署

U+7F72

雑・書包摂

免

U+FA32

免U+514D

雑・書包摂

者

U+FA5B者

U+8005

雑・書包摂

勉

U+FA33

勉

U+52C9

雑・書包摂

臭U+FA5C

臭U+81ED雑・書包摂

勤

U+FA34

勤

U+52E4

雑・書包摂

著

U+FA5F

著

U+8457

雑・書包摂

卑U+FA35

卑U+5351

雑・書包摂褐U+FA60褐U+8910

雑・書包摂喝U+FA36

喝U+559D

雑・書包摂

視

U+FA61

視

U+8996

雑・書包摂

嘆

U+FA37

嘆

U+5606

雑・書包摂

謁

U+FA62謁

U+8B01

雑・書包摂

器

U+FA38器

U+5668

雑・書包摂

謹

U+FA63

謹

U+8B39

雑・書包摂

塀

U+FA39

塀U+5840

雑・書包摂

賓

U+FA64賓

U+8CD3雑・書包摂

墨U+FA3A

墨U+58A8

雑・書包摂

贈U+FA65

贈U+8D08

雑・書包摂

層U+FA3B

層U+5C64

雑・書包摂

逸U+FA67

逸U+9038

雑・書包摂

悔U+FA3D

悔U+6094

雑・書包摂

難

U+FA68

難U+96E3

雑・書包摂

慨U+FA3E

慨U+6168

雑・書包摂

響U+FA69響

U+97FF

雑・書包摂

憎

U+FA3F憎

U+618E

雑・書包摂

頻

U+FA6A

頻U+983B

雑・書包摂

懲

U+FA40懲

U+61F2

雑・書包摂

𠮟U+20B9F

叱U+53F1

雑・書包摂

敏

U+FA41

敏

U+654F

雑・書包摂

𠮷U+20BB7

吉U+5409

JIS 包摂暑U+FA43

暑U+6691雑・書包摂

梅U+FA44

梅U+6885

雑・書包摂

海

U+FA45

海U+6D77

雑・書包摂

渚

U+FA46渚

U+6E1A

雑・書包摂

漢U+FA47

漢U+6F22

雑・書包摂

煮

U+FA48煮

U+716E

雑・書包摂

琢U+FA4A

琢U+7422

雑・書包摂

碑

U+FA4B碑

U+7891

雑・書包摂

社

U+FA4C社

U+793E

雑・書包摂

祉U+FA4D

祉U+7949

雑・書包摂

祈U+FA4E

祈U+7948

雑・書包摂

祐U+FA4F

祐U+7950

雑・書包摂

祖U+FA50

祖U+7956

雑・書包摂

祝U+FA51

祝U+795D

雑・書包摂

禍U+FA52

禍U+798D

雑・書包摂《備考》欄の凡例
JIS包摂…JIS X0213:2004の包摂基準により包摂対象文字に包摂されるもの
雑・書包摂…雑誌・ベストセラー書籍レジスター
では須永他（2011）、須永他（2013）に準じて包摂対象文字に包摂されるもの

4なお、Unicode文字集合に含まれるものの、入力・表示環境が十分ではない変体仮名については、現行の平仮名によって電子化した。また、文字集合に含まれない記号類は、形・用途の近い文字集合内の記号によって電子化したほか、文字集合に含まれない漢字については、Unicodeで表現可能な異体字を有する場合はその異体字により代用し、代用が不可能な場合は「〓」（げた記号、U+3013）で表した。底本の文字のかすれや破損・抹消によって判読が困難な文字・記号は、「␣」（空白記号、U+2423）によって表した。
４．２ テキストの校訂
本コーパスでは、国立国語研究所が開発・公開する他のコーパスと斉一な形態論情報を付与するため、形態素解析辞書UniDic（以下UniDic）を使用した形態素解析に基づき形態論情報を付与した。そこで、コーパスのテキストをUniDicによる形態素解析に適したものとするため、底本のテキストに対して以下にあげる改変（ここでは「校訂」と呼ぶ）を施した。
なお、「中納言」では、校訂後のコーパスのテキストと同時に、校訂前のテキストを底本の状態に近い形で電子化したものを「原文KWIC」「原文文字列」として表示させることができる。利用に際しては、必要に応じて「原文KWIC」や「原本文字列」を確認されたい。
踊り字
踊り字は繰り返される文字列に置き換える。ただし、「国々」「人〻」等、1短単位内部で直前の1字を繰り返す「々」「〻」は置き換えの対象としない。

表4 踊り字の電子化例
種類例

コーパステキスト

原文KWIC・原本文字列〳〵

ニヨキニヨキ

ニヨキ〳〵

ゝ

ここへ味を

こゝへ味を

５. 形態論情報
本コーパスでは、原則として底本の本行のテキストを本文として、それに対して形態論情報（語彙素・語彙素読み・品詞・活用型・活用形等の語に関する情報）を付与した。ルビの情報はデータ化していないため、語彙素認定において一切考慮していない。よって、「CHJ明治・大正編Ⅴ新聞」が実装している、同一文字列に複数の形態論情報を付与する機能は用いていない。
形態論情報は短単位のみ付与しており、長単位は未実装である。短単位の形態論情報は、UniDic4を使用した形態素解析に基づき、ごく一部について人手による修正を施した。新聞レジスター（バージョン4

1933年から1941年の全サンプルに「旧仮名口語UniDic」を、1949年から2013年の全サンプルに「現代書き言葉UniDic」を使用した。
5

2023.5）における形態論情報（語彙素レベル）の精度（適合率）は、97.98%となっている5。

６．「中納言」上の表示項目
テキストおよびアノテーションのデータは、コーパス検索アプリケーション「中納言」での検索結果の形で利用者に提供する（図1）。

図1 「中納言」の検索結果のイメージ「中納言」の検索結果で表示されるテキスト・アノテーションのうち、初期設定で表示される項目について、表5に内容を示す。

表5 「中納言」検索結果の主な表示項目
情報種別

コーパス情報

項目名

内容

サンプルID

検索対象の含まれるサンプルのID（3節参照）。

開始位置

検索対象の含まれる短単位の先頭の文字の、サンプル内における位置を表すID。10きざみの連番。

連番

検索対象の含まれる短単位の、サンプル内における位置を表すID。
10きざみの連番。

コア

検索対象の含まれるサンプルが非コアデータであることを表す。
「0」が非コアを表す。

「掛詞」や「振り仮名」などの、多重化を行う要因を表す。本コーパス
多重化種別* では、全件が「振り仮名」である。
前文脈

検索対象の前方文脈。

キー

検索対象の含まれる短単位の書字形出現形（表記形）。

後文脈検索対象の後方文脈。

原文KWIC

上記項目「前文脈」「キー」「後文脈」に対する、校訂前の底本に近い形のテキスト（4.2節参照）。

語彙素

検索対象の含まれる短単位の語彙素の表記。語彙素は、単語の様々なバリエーション（語形、活用形、表記形など）を統合した辞書の見出しに相当するもので、一般の和語・漢語は漢字平仮名表記、外来語・人名・地名は片仮名表記である。

形態論情報5

ここでいう精度（適合率）は、（調査対象とした）整備済みコーパスの語数で、そのうちの正解語数を除した値である。語形、活用型、活用形のみの誤りも含む。
6情報種別

項目名内容

語形

検索対象の含まれる短単位の語形。語形は、語彙素では統合される語形の別（例：語彙素「矢張り」に対する「ヤハリ」「ヤッパリ」など）や活用型の別（例：語彙素「読む」に対する「ヨム（五段-マ行）」「ヨム（文語四段-マ行）」「ヨメル（下一段-マ行；可能動詞形）」など）等を区別した語の個々の形に相当する。片仮名表記である。
検索対象の含まれる短単位の品詞で、UniDicの体系に基づく。学校文法における「形容動詞」は、語幹が「形状詞」、活用語尾が「助動詞」に分割される点に注意が必要である。
このほか、本コーパスに含まれる、UniDicの体系に基づかない特殊な品詞には以下の種類がある。

品詞

漢文 …漢文の文字列。
外国語 …外国語の文字列。
欠損 …原文の欠損、かすれにより判読できない文字列。
コーパステキストでは「␣」で表示される。
読取不可 …原文の文字潰れにより判読できない文字列。
コーパステキストでは「〓」で表示される。
絵文字・記号等 …入力のできない絵文字や企業マークなど。
コーパステキストでは「〓」で表示される。
未知語 …形態論情報の付与を保留した文字列。

形態論情報

活用型

検索対象の含まれる短単位の活用の型。活用語の場合のみ表示される。
口語活用は活用の型と行で「五段-サ行」のように、文語活用は「文語」が加わり「文語四段-サ行」のように示される。検索対象の「文体」項目の値が「文語」である活用語には文語活用型を、「口語」である活用語には口語活用型を割り当てる。

活用形

検索対象の含まれる短単位の活用形。活用語の場合のみ表示される。

原文文字列
振り仮名
本文種別

話者

検索対象の含まれる短単位の、校訂前の底本に近い形のテキスト（4.2 節参照）。
検索対象の含まれる短単位に付された振り仮名（右ルビ）の文字列。
本レジスターでは不使用のため空欄である。
検索対象の含まれる文が「地の文」以外の場合の、その種別。
本レジスターでは不使用のため空欄である。
上記項目「本文種別」が「引用」の場合の典拠文献名や著者名、「会話」の場合の話者名や属性名（男、先生など）を表す。
本レジスターでは不使用のため空欄である。
検索対象の含まれる文の文体。以下の種類がある。

形態論情報
文体

文語…文語体。文末辞が「なり」「たり」「つ」「ぬ」「き」「り」のもの。
口語…口語体。文末辞が「だ」「ぢや」「である」「です」「ます」のもの。

7

情報種別

本文情報

項目名

内容

ジャンル

検索対象の含まれるサンプルの文章内容に基づく分類。小説や詩歌には「文芸」、それ以外のサンプルには「非文芸」が表示される。

作品名

検索対象の含まれるサンプルが収録された資料名。全て「読売新聞」と表示される。

成立年

検索対象の含まれるサンプルが収録された年。
検索対象の含まれるサンプルが収録された資料の編名・巻名、および巻名等

作者検索対象の含まれるサンプルの著者名。著者名の認定は、底本テキストの記載に基づく（記名のないものなど著者が判明しないものは「＊」と表示されている）。
対応付けが可能な範囲で、「国立国会図書館典拠データ検索・提供サービス（Web NDL Authorities）」のウェブページでの著者情報へのリンクを付与している。

生年

検索対象の含まれるサンプルの著者の生年。西暦4桁で示す。
不明な場合は空欄である。

底本

検索対象の底本（原資料）。「読売新聞<1989-11-02-第40737号>」のように、< >内に年、月、日、号数を示す。

作者情報

底本情報

サンプルのタイトル。本レジスターでは、ページをサンプル単位とした1933から1957年は面数を表示し（例：〈1面〉）、記事をサンプル単位とした1965年から2013年は、記事タイトルを表示する（ただし、1997年以降は未整備につき「＊」と表示されている）。

ページ番号
出版社

検索対象の底本におけるページ（紙面）番号。
底本の出版社を示す。本レジスターでは「読売新聞社」が表示される。

底本リンク

検索対象の底本画像へのリンク。
本レジスターでは未整備につき空欄である。

参照リンク

検索対象の底本以外の参照本画像へのリンク。
本レジスターでは該当画像がないため空欄である。

その他

付記
本レジスターを含む『昭和・平成書き言葉コーパス』は、JSPS 科研費 19H00531「昭和・平成書き言葉コーパスによる近現代日本語の実証的研究」（代表：小木曽智信）の研究成果を報告したものである。

参考文献
須永哲矢・堤智昭・高田智和（2011）「明治前期雑誌の異体漢字と文字コード―『明六雑誌』を事例として―」『じんもんこん 2011 論文集』pp.381-388.
須永哲矢・堤智昭・近藤明日子・木川あづさ・服部紀子（2013）「明治中期雑誌の異体漢字とJIS漢字―『国民之友』を事例として―」『じんもんこん 2013 論文集』2013(4)、pp.201-208.
間淵洋子（2018）「明治・大正期『読売新聞』コーパスの構築と課題」『言語処理学会 第24回年次大会発表論文集』pp.500-503 https://anlp.jp/proceedings/annual_meeting/2018/pdf_dir/P44.pdf
8

関連URL
コーパス検索アプリケーション「中納言」 https://chunagon.ninjal.ac.jp/
国立国会図書館典拠データ検索・提供サービス(Web NDL Authorities) http://id.ndl.go.jp/auth/ndla/
日本語歴史コーパス https://ccd.ninjal.ac.jp/chj/
日本語歴史コーパス 明治・大正編V新聞 https://clrd.ninjal.ac.jp/chj/meiji_taisho.html#shinbun
読売新聞社「ヨミダス歴史館」https://database.yomiuri.co.jp/about/rekishikan/
UniDic https://unidic.ninjal.ac.jp/

9