WikiOriginQA:知識の起源を組み込んだ文化的バイアス分析用QAデータセットの自動構築

本研究では，Wikipediaの各言語版の履歴情報をもとに知識の起源を客観的に表現することで抽出した，各文化圏由来の知識に基づくQAデータセットを提案し，大規模言語モデル(LLM)における文化的バイアスの検証を行った．既存の文化的知識データセットは構築に各文化圏に精通したアノテータによる検証が必要であり，自動化や多言語への拡張が困難であった．本手法は構築プロセス全体が自動化されているため，人的コストを削減しつつ高い拡張性を有する．検証実験の結果，LLMの性能が英語圏文化に偏重する傾向が確認され，本データセットの文化的バイアス検証における有効性が確認された．