なぜホワイトボードを使うと良い議論ができるのか？ホワイトボードを使用した共同作業における対話の流れの分析

近年，人工知能技術の発展に伴い，創造的な共同作業を行う対話システムの研究が盛んに行われている．[1,2,3]しかし，現在の対話システムの多くは，ユーザとの共同作業における相互理解の手段が言語中心となっており，言語以外のモダリティの考慮が限定的である[4,5]．一方，人間同士が創造的なアイデアを交換し，共同作業を行う際は，必ずしも言語のみを用いているわけではない．むしろ，状況や内容に応じて多様な表現手段を組み合わせながらコミュニケーションを行っている[6,7]．例えば，ホワイトボードを用いた議論の場面では，参加者は文字による説明に加えて，図形，矢印，記号，イラストなど自由な表現手段を活用している．対話システムにおいても，同様の多様で自由な表現手段を活用できるようになれば，人間との創造的な共同作業をより効果的かつ自然に行えると考えられる[8,9]．我々は，ホワイトボードを用いた対話に着目し，この領域における対話システムの実現を目指している．そして，これまでそのための基礎データとして，映像構成考案タスクを設定し，ホワイトボードを使用した共同作業の対話データを収集してきた．また，比較のため，同タスクでホワイトボードを使用しない条件でも対話データを収集した．さらに，ホワイトボードを使用した対話についての知見を得るため，発話と描画の時系列的な関係についてクラスタリングを行い，発話と描画のパターンが対話の満足度に与える影響の分析などを行った．しかし，これらの分析では，ホワイトボードの使用が，対話の流れや構造そのものにどのような影響をもたらしているかまでは明らかにできていないという問題があった．そこで本研究では，対話の文脈的・意味的な構造を定量的に評価するため，対話データを一定の時間でセグメンテーションし，各セグメント間の発話類似度とホワイトボード上の描画距離を行列化する．この行列の特徴を調査することで，隣接する文脈の連続性だけでなく，離れた時点間の関係性も含めた話題の推移や一貫性といった対話全体の流れを分析する．