検出器の判断に基づく大規模言語モデルの生成テキストの特徴分析

本研究では，大規模言語モデル(LLM)が生成するテキスト(LLM-text)の特徴をヒトが書いたテキスト(human-text)との比較から明らかにする．エッセイを対象に2つの実験を行った.1つ目はhuman-textとLLM-textからLLM-textを分類する実験，2つ目は，LLM-textに改変を加えることでLLM-textの検出を妨害する実験である．1つ目の実験からLLM-textに固有の特徴があることを示した．さらに2つ目の実験から，その特徴が「単語の連なりの滑らかさ」であることを示した．そして，この他の特徴をLLM-textが備え得ることや，LLM-textの特徴の軽減とhuman-textの特徴の付加について今後の課題として議論する.