高精度な日本語マルチモーダル大規模言語モデルの構築にむけたデータセットの検討

近年，大規模言語モデル(LLM)に視覚情報を統合した，マルチモーダル大規模言語モデル（MLLM）が注目を集めており，その応用範囲は急速に拡大している．しかし，日本ドメインに特化したMLLMを作る上で，英語のデータに比べて公開データが少ない課題がある．本研究では，高精度な日本語MLLMを構築するためのデータセットの作成方法について検討し，実験を行った．構築したモデルは，日本ドメインの画像理解を問うベンチマークにおいて，他のモデルよりも優位な結果を示し，その有効性を実証した．