『現代日本語書き言葉均衡コーパス』に対する分類語彙表番号悉皆付与

『現代日本語書き言葉均衡コーパス』(BCCWJ)[1]は検索系「中納言」により、文字列、正規表現や形態論情報に基づく検索を行うことができる。品詞連接や活用形に基づく表現の問い合わせが可能であるが、語義情報に基づく問い合わせは行えない。本研究では、多様なレジスタからなる1億語規模のBCCWJを語義情報で検索できるようにすることを目標とし、all-wordsWSD技術を用いてBCCWJ全体に語義タグとして『分類語彙表』[2]の分類番号を付与した。本稿では、1億語規模の語義情報付与作業について、利用したデータと解析手法を解説する。解析モデルは学習データを訓練データ・検証データ・テストデータに基づいて最良のものを用いたが、訓練データにないレジスタのデータについてさらに500語ずつ人手で語義情報を確認し、解析結果の性能を検証した。言語研究に資するために同データに基づき語義タグつき頻度表を構成した。語義タグに基づくレジスタ差を検証するとともに、新聞記事レジスタについては記事分類についての語彙分布の差についても検証した。古宮嘉那子東京農工大学kkomiya@go.tuat.ac.jp浅原正幸国立国語研究所masayu-a@ninjal.ac.jp