大規模言語モデルによるセリフを含む物語の可視化手法

近年，大規模言語モデル（LLM:LargeLanguageModel）を活用した物語の視覚的表現が注目されているが，物語のセリフや感情，キャラクターの行動といった本質的要素を取り入れる試みは十分に行われていない．本研究では，LLMを用いてChainofThought（CoT）Promptingにより物語を解析・分割し，画像生成プロンプトを構築する新たな手法を提案する．本手法の特徴は，物語中のセリフを含めた可視化に焦点を当てる点にある．CLIPScoreによる評価実験では，提案手法が物語本文からそのまま画像生成する手法に比べ，セリフの有無に関わらず視覚的情報が画像に正確に反映されることを示す．