知識ベースの検索を伴うVideoQAタスクの提案

ユーザの過去の発言や行動等の知識をもとに質問に答えられる質問応答システムの登場が期待される．Knowledge-BasedVideoQuestionAnswering(KBVQA)では，テレビドラマを実世界に見立ててこの問題に取り組んでいる．KBVQAでは，質問に対して必要な知識が紐付けられて利用されている．本研究では質問と知識の紐付けを行わず，全体の長大な知識ベースからの知識検索を伴うVideoQAタスクであるMAGQAを提案する．また，動画像字幕からの自動知識ベース作成，知識検索及び質問応答を行うベースライン手法を提案し，本タスクの難しさと提案手法の有効性を示す．