JParaCrawlからの大規模日本語言い換え辞書の構築

本研究では，先行研究よりも25倍大きい3.8億対の日本語言い換え辞書を構築し，公開する．言い換え知識獲得は，BilingualPivotingと呼ばれる対訳コーパス上での単語アライメントによって行われてきた．本手法で獲得できる表現の多様性は対訳コーパスの規模に依存するが，既存の日本語言い換え辞書は200万文対の日英対訳コーパスから得られた1,500万言い換え対が最大である．我々は，10倍大きい2,000万文対の日英対訳コーパスJParaCrawlを用いて，より多様な言い換え知識獲得に取り組む．評価実験の結果，我々の言い換え辞書は再現率と適合率の両方で先行研究を上回り，文類似度推定の外的評価においてもより高い性能を達成した．