単語の難易度埋め込みを用いた日本語のテキスト平易化

日本における在留外国人数は年々増加傾向にあり、その数は今や290万人1）を超えている。さらに、在留外国人の国籍の多様化も進んでおり、在留外国人の国籍および出身地域の数は約200種類2）である。そのため、在留外国人をはじめとする日本語非母語話者への情報伝達の際に、各人の母語へ翻訳することは困難である。また、2010年の調査[1]では、日常生活に困らない言語として日本語を挙げた在留外国人は約62%であり、英語や中国語を大きく上回ることが報告されている。そこで、緊急時の情報発信や平時の生活情報案内など、様々な場面においてやさしい日本語3）での情報提供が推奨されている。やさしい日本語などの制限言語の生成は、テキスト平易化[2]の技術による自動化が期待されている。テキスト平易化では、文の意味を保持したまま、難解な文を平易に変換する。近年は、テキスト平易化を同一言語内の機械翻訳の問題として捉え、難解文と平易文の対からなるパラレルコーパス[3]を用いて系列変換モデルを訓練するアプローチ[4–6]が主1）https://www.moj.go.jp/isa/content/001381744.pdf2）https://www.moj.go.jp/isa/publications/press/1300028.html3）語彙や文法を制限した初学者にも理解しやすい日本語流である。この技術を用いて、所与の日本語文をやさしい日本語へ自動的に変換する日本語のテキスト平易化の研究[7–11]が行われている。しかし、テキスト平易化の多くの先行研究[3–5,10–14]は、機械翻訳などで用いられる標準的な系列変換モデルを適用し、テキスト平易化タスクの特徴である難易度を充分に考慮していない。多段階の文の難易度が付与されたパラレルコーパス[3,5,15]を利用可能な状況では、難易度を考慮した手法[16–18]も提案されているが、日本語を含む英語以外の言語には、そのようなコーパスは存在しない。日本語には文の難易度が付与されたコーパスは存在しないものの、単語の難易度が登録された辞書[19]は複数存在する。そこで本研究では、単語の難易度を考慮した日本語のテキスト平易化手法を提案する。提案手法では、やさしい日本語コーパス[7–9]に付属の基礎語彙を使用し、Transformer[20]に基づく系列変換モデルにおいて単語埋め込みに単語難易度の情報を組み込む。やさしい日本語コーパスにおける評価実験の結果、単語難易度の考慮によってテキスト平易化の性能を改善できた。