生成AIによる多肢選択式語彙問題および錯乱肢の生成と訂正

本論では語彙学習を目的とした多肢選択式空所補充問題の作成のため生成AI等の技術を活用し，その性能を検証した．最初に英単語300語に対し，ChatGPTにプロンプトを与え問題文と錯乱肢を生成した．錯乱肢には人手で訂正の有無をアノテーションし，ChatGPTとGeminiを用いて自動訂正の可能性を検討した．結果として，問題生成については訂正が不要であった一方，錯乱肢生成では約17.8%で訂正を要した．この結果を受けて，生成AIの錯乱肢の訂正能力を検証したところ，F1値が最大0.291となり，不十分な結果となった．提案手法として，予め準備した錯乱肢をBERTの確率により選別する方式を試した結果，訂正が必要な場合は11.0%となり，生成AIに対する優位性が明らかになった．