マルチエージェント強化学習に基づく共同作業を自律的に行う対話システムの最適化

対話で行われる複雑な共同作業では，各エージェントが自律的に行動することが望まれる．しかし，従来手法では，エージェントは相手の発話に応答するようにモデル化されており，自律性に限界がある．本研究では，複雑な共同作業を自律的に行う対話エージェントの実現を目指し，マルチエージェント強化学習を用いた対話システムの学習手法を提案する．具体的には，相手の反応が得られなくても自律的に発話するための工夫としてskipトークンを導入し，2体のエージェントに説得対話を実施させる．そして，相手が発話しない状況であっても，説得に最適な発話を行うように各エージェントを強化学習によって更新する．実験の結果，自然性や自律性に課題は残るものの，マルチエージェント強化学習によって，エージェントが自律的に説得的な発話が可能なことを確認した．