ESG-QA:日本語ESG文書を対象としたマルチモーダル質問応答ベンチマークの構築

統合報告書などの日本語ESG文書は,非定型なレイアウトや図表を含むため,正確な文書理解や質問応答が困難である.こうしたESG文書に対するモデルの実用的な能力を適正に評価するため,本研究では専門家が作成した質問,回答,及び根拠箇所の矩形を含む日本語ESG文書データセット「ESG-QA」を構築した.該当ページ検索,根拠箇所からの回答生成,根拠箇所の領域検出の3つのタスクを通じて,モデルのESG文書理解能力を多角的に評価するとともに,データセットが抱える課題を明らかにした.