複数動画に対する抽象的キャプション生成のための基本モデルの検討

複数動画に対する抽象的キャプション生成は，複数動画に共通する内容を自然言語で説明するVisionandLanguageタスクである．本研究では複数動画に対する抽象的キャプション生成を行うための基本モデルとして，End-to-Endモデル及びCascadeモデルを検討する．モデル構造の比較実験の結果，End-to-Endモデルが複数の評価指標でCascadeモデルを凌駕していることを示す．加えて，モデルに対する複数動画の入力手法がモデルに与える影響を報告する．