文法誤り訂正における編集ベクトルの最適輸送に基づく性能評価尺度

文法誤り訂正の編集レベルの評価尺度では仮説編集と参照編集との一致を確認するが，表層の厳密な一致に依存しており，編集が多様化したドメインには適用が難しい．本研究では，編集をベクトル化した編集ベクトルを提案し，ベクトルの類似度に基づいて仮説編集と参照編集とのソフトアライメントを考える尺度UOT-ERRANTを提案する．編集ベクトルは編集を適用する前後での文表現の差分ベクトルとして定義され，編集同士の類似度には最適輸送を用いている．SEEDAデータセットを用いたメタ評価では従来尺度を上回る相関を示し，輸送計画が解釈性に寄与することを報告する．