一つのプロンプト記述による対話フロー制御の有効性の評価

タスク指向型対話システムではタスク達成に加えて，ユーザ発話への柔軟な応答が求められる．近年，大規模言語モデル(LLM)の柔軟な応答生成能力で、ユーザ発話への柔軟な応答を実現しようとする取り組みがある．その中で，対話フローをプロンプトに自然言語で記述し，一つのプロンプトのみで対話制御を行う手法が提案されている．本研究では，この手法による対話フローの適応的な制御について，LLM-as-a-judgeによる定量的な評価を行った．タスク達成度，システム応答の適応性に関して高い定量評価値が得られ，一つのプロンプトによる対話フロー制御の有効性を確認した．