発話内容に基づく目標印象を付与する話し顔生成

本稿では，目標印象（好感が持てる/配慮がある）を与える話し顔生成を扱う．発話の印象は顔表情だけでなく発話内容にも依存する．しかし，従来の話し顔生成では，音声は主に口唇運動との同期のために用いられており，入力特徴として音韻情報が用いられるため，発話内容を考慮することができない．そこで本稿では，入力発話の音声認識結果から得られる言語情報を導入し，発話内容を考慮可能な話し顔生成法を提案する．評価実験では，各発話に印象ラベルを付与した音声・映像データセットを用いて，提案法と言語情報を用いない比較条件との性能を比較する．その結果，顔表情特徴量の推定誤差が低減し，言語情報の導入が有効であることを示す．