表・グラフに対する高難度の日本語QAデータセットの構築

VLMは，図表の読み取りやそれに基づく質問応答(QA)への応用が期待される．本研究では，既存の日本語グラフQAベンチマークでは捉えにくい図表に対する計算・比較を伴う推論能力に着目した，高難度の日本語QAデータセットを提案する．本データセットは，棒グラフ，線グラフ，円グラフ，および表を含む画像に対する質問・正答のペアから構成される．また，各質問に対して，図表タイプ，推論ステップの種類，ステップ数，および計算・比較の必要性の有無を示すタグ情報を付与することで，推論構造に基づく詳細な分析を可能とする．実験の結果，本データセットがVLMに対して高度な図表推論能力を要求することが確認された．