JCuisines:日本の地域文化の理解にむけた郷土料理視覚言語ベンチマーク

日本の各地域に対する大規模視覚言語モデル（LVLM）の文化理解度を評価することを目的として，各地の郷土料理を題材としたVQAベンチマークであるJCuisinesを提案する．JCuisinesはすべての都道府県の郷土料理を網羅した初のベンチマークであり，各地域の自然的条件と歴史的条件という2つの地域的特性の理解を問う問題からなる．実際にJCuisinesでLVLMを評価した結果，特にオープンモデルについて，地域的特性に関する知識量やその知識と視覚情報を回答の生成に繋げる能力に差があることを確認した．これらの知見は，特定の地域の文化や知識に特化した日本語LVLMの構築指針となり得る．