MonakaによるBCCWJ2における長単位情報の付与支援

現代日本語書き言葉均衡コーパス(BCCWJ)の拡張(BCCWJ2)に向けて，人手アノテーション(コアデータ)と非コアデータ作成のために，深層学習による長単位情報付与について検討を行った結果について報告する．従前のBCCWJを対象とした検討で，正解率99.80%，BCCWJ2において99.45%という実用的な性能を実現した．また異なる事前学習済み言語モデルを比較から形態論情報についてはスケール則が単純に当てはまらないことが示唆された．さらに，長単位付与のエラーからは，長単位の認定基準の更新につながる示唆が得られた．