生成AIによる多肢選択式語彙問題および錯乱肢の生成と訂正

LLMの台頭により自然言語処理技術は飛躍的な進歩を遂げたが，ChatGPTの登場はその技術の利用者層を格段に広げた．英語教育においてもその影響は大きく，翻訳，質問応答，文章生成，要約など様々なタスクをこなすことが可能なチャットボットは，教育者・学習者双方から注目されている．我々は英語教育における生成AIの活用先の一つとして語彙問題生成に着目し，能力を検証した．本論では，語彙問題生成の最高性能達成ではなく，実世界でのタスクにチャットボット応用した際に，どの程度の性能が得られるかを把握することを目的としている．具体的には，英語教員が汎用チャットボットを使用し，授業で使用する多肢選択式語彙問題を生成するという状況を想定している．そのため，アルゴリズムの改良やﬁne-tuningなど複雑な操作が必要な方法ではなく，zero-shotやfew-shot，プロンプト，単純なプログラミングなどにより実行できる手法でどの程度適切な問題が得られるかを明らかにすることがゴールとなる．本論で生成したい問題は多肢選択式の空所補充問題であり，問題文，正解肢1，錯乱肢3からなるフォーマットとした．以下に例題を示す．Masked-languagemodelisa(n)approachforimprovingnaturallanguageprocessing.(a)successful(b)devastated(c)tiny(d)optical