ロボット対話によるインタラクティブ観光プランニング

本稿では，対話ロボットコンペティション2023で最優秀賞を獲得したマルチモーダル対話ロボットについて詳述し，課題や知見も共有する．本コンペティションは，実際に店舗にヒューマノイドロボットを置いて観光プランニングを行うものであり，テキスト対話ではなくマルチモーダル対話が要求される．我々は大規模言語モデルを活用するだけでなく，画像，音声，動作，地図などを総合的に用いることで観光プランニングタスクを適切に達成することを狙ったシステムを構築した．