情報処理学会 インタラクション 2024
IPSJ Interaction 2024

2P-752024/2/28

異性アバタを用いる VTuber における音声加工の有無の印象評価の検討
呉 健朗1

越後 宏紀2

新井 貴紘3

富永 詩音4

概要：YouTube やニコニコ動画，Twitch などの動画配信サイトで自身の作成したコンテンツを投稿することが容易になってきている．投稿される動画の配信スタイルも多様であり，我々は特に VTuber として配信することに着目している．VTuber の配信を視聴すると，配信者の声の出し方の違いに気づく．例えば，男性が女性のアバタを用いる際には，ボイスチェンジャを利用して容姿だけでなく自身の声も女性に近づけるような配信者もいれば，自身の地声をそのまま使用する配信者もいる．あるいは，VTuber としてデビューをした直後はボイスチェンジャを用いていたが，途中から使用をしなくなるケースも存在する．
しかし，このように多種多様な声の出し方がある一方で，我々が調査した限りでは，VTuber として配信を行う際に，どのような声を用いればよいか検証を行っている事例は存在しなかった．この状況を鑑み，VTuber が配信を行う際に使用する声が視聴者に与える影響を調査を行ってきた．先行研究では男性が女性アバタを用いて配信する場合における視聴者からの配信者・コンテンツへの印象の評価を行ってきた．
本研究では女性が男性アバタを用いて配信する場合の検証方法とその分析方法について検討を行ったことについて報告する．

KENRO GO1

HIROKI ECHIGO2

TAKAHIRO ARAI3

1. はじめにSHION TOMINAGA4

りも内容を重要視する結果が得られた [1]．
ユーザが適切な配信スタイルを選定する支援を行う研究

CG 技術の発達により，配信者は顔出しをせずアバタをを進める上で我々は VTuber が配信する際の声に注目して利用して配信を行うことが可能となっている．本論文でいる．現在 VTuber として配信する際の声の出し方として，はこのように，2D CG または 3D CG で描画されたアバ

男性が女性のアバタを用いる際には，ボイスチェンジャをタを利用して配信を行う配信者のことを VTuber(Virtual利用して容姿だけでなく自身の声も女性に近づけるようなYouTuber) と総称する．VTuber は CG 技術の発達と配信者もいれば，自身の地声をそのまま使用する配信者もともに活動の幅が広がっており，顔を出して配信していいる．あるいは，VTuber としてデビューをした直後はボる YouTuber と遜色がなくなってきている. VTuber とイスチェンジャを用いていたが，途中から使用をしなくな

YouTuber の違いについて数多くの調査も行われており，るケースも存在する．我々が調査した限りでは，VTuber

我々は，配信する動画カテゴリと配信スタイルの違いに対として配信を行う際に，どのような声を用いればよいか検する視聴者の印象の変化の検証を行い，ゲーム配信時には証を行っている事例は存在しなかった．この状況を鑑み，配信者の反応が誇張されて伝わる配信スタイル，ニュース

VTuber が配信を行う際に使用する声が視聴者に与える影

配信時には現実味が増すような配信スタイルが好まれる傾響を調査を行ってきた [2]．実験の結果，男性配信者が女性向にあること，また，学習コンテンツ配信時には見た目よ

アバタを用いる場合，ボイスチェンジャを使用して声をア

1

2

34

日本大学大学院総合基礎科学研究科
Nihon University
ソフトバンク株式会社
SoftBank Co.
株式会社 NTT ドコモ
NTT DOCOMO Inc.
株式会社ドワンゴ
DWANGO Co., Ltd.

© 2024 Information Processing Society of Japan

バタに合わせて加工することで，視聴者からの配信者・コンテンツへの印象が，地声のまま配信する場合よりも良くなることを確認した．本研究では女性が男性アバタを用いて配信する場合の視聴者からの印象変化と，性差を明らかにするための検証方法について検討を行ったことについて報告する．

956

情報処理学会 インタラクション 2024
IPSJ Interaction 2024

2. 関連研究

2P-75
2024/2/28

横田 [10] は，VTuber は視聴者にとって「自分の都合に応じて視聴できる」，「自分の安心できる世界観の中に浸ることコミュニケーション支援や動画配信など，ユーザがアバができる」，「共感や自己肯定感を感じることができる」とタを用いるシーンは数多く存在している．本章ではそれらいう特徴があることを示している．VTuber と YouTuberの事例や，特に VTuber として配信にアバタを用いることの大きな違いとして，VTuber はキャラクタ設定の自由度に関する調査について紹介する．

が高く, 配信者に合った世界観を創り出すことができるこ渡辺ら [3] は対話者の化身であるバーチャルアクターを利用して対話するバーチャルコミュニケーションシステムを提案している. アバタに行わせる動作を頭部に限定したとがあげられている．

3. 研究課題

提案システムを用いてコミュニケーションを行う検証の結2 章で述べた研究のように，オンラインでのコミュニケー果，自己と他者のインクラクションが分かる場面が好まれションをとる手法としてアバタを利用することや，その効ること，対話者の呼吸の引き込み現象が存在することをそ果の検証が行われている．我々はアバタの活用方法としてれぞれ確認している．下江ら [4] はアバタとピクトグラム

特に，ユーザが動画の配信に利用することに着目している．

を用いたウェブサイトを検討している. アバタとピクトグ

2D CG または 3D CG で描画されたアバタを利用して配信ラムを組み合わせてアニメーションすることで，非言語コを行う VTuber は，CG 技術の発達とともに活動の幅が広ミュニケーションが円滑に行えることを示している. 松本

がっており，顔を出して配信している YouTuber と遜色がら [5] は, 仮想空間でアバタを利用してコミュニケーションなくなってきている．近年では，VTuber として配信するをとるシステムを提案しており, 1 対 1 でのコミュニケー方法についても様々な手法が増えてきている．例えば見たションの場合, 上半身の実写映像が表示されると, 相手の雰目について，吸血鬼や妖精などの非人間を用いる手法が存

囲気が良く伝わり, コミュニケーションしやすいというこ在する．あるいは，見た目は女性アバタにも関わらず，音とが示されている. Li ら [6] や黒田ら [7] の研究は，オンラ声は男性という見た目と声が異なる配信手法が存在する．

インショッピングでアバタを利用する試みを行っている．

このように多種多様に考えられる配信手法のうち，視聴者

顧客のアバタへの印象について，実際の商品の購入数を指にとって印象が良いものを模索する上で，動画の視聴回数標に検証を行った結果，外見と振る舞いの一致率が高い方やチャンネル登録者数, アナリティクス機能,Twitter を中が推薦効果があるという結果が得られている．

心とした SNS のトレンド, メディアによる話題性などの指動画配信に自身の姿の代わりにアバタを用いるよう標から判断することが多い. しかしながら, これらの指標

な，VTuber の数が増えてきている．VTuber の特徴としは長期かつ持続的に配信を行うことで得られるデータであて,YouTuber よりも視覚情報を気にする必要が無いこと

り, これから新たに配信者になろうと考えている人は得らがあげられる．Mehrabian[8] は, 人の判断に影響を与えるれない指標である. このため, これから配信者になろうとのは「外見などの視覚情報」が 55%,「声や話し方などのしているユーザにとっては, 自身の考えている配信スタイ聴覚情報」が 38%,「話す言葉や内容などの言語情報」がルが視聴者にとって印象が良いかどうかについて判断する7%であると報告している. このため, 実写で顔出しの配信ことが難しい．我々は自身と異なる性別のアバタを用いてを行う場合, メイクや髪色, 服装, 照明の当たり具合, カメ配信する際の声に着目している．現在 VTuber として配信

ラに映る周辺環境などの視覚情報に配慮する必要がある.

する際の声の出し方として，男性が女性のアバタを用いる

一方で,VTuber のようにアバタを利用する場合はこれら際には，ボイスチェンジャを利用して容姿だけでなく自身の視覚情報に配慮する必要が無い. また, アバタは年月がの声も女性に近づけるような配信者もいれば，自身の地声経っても容姿が変化しないため, 同じ容姿で長期間配信活をそのまま使用する配信者もいる．あるいは，VTuber と動を行うことが可能である. このような特徴があることかしてデビューをした直後はボイスチェンジャを用いていた

ら,YouTuber やアナウンサーなど実写の顔出しで活動してが，途中から使用をしなくなるケースも存在する．我々がいた方が,VTuber としても活動するという事例も誕生して調査した限りでは，VTuber として配信を行う際に，どのいる.

ような声を用いればよいか検証を行っている事例は存在しVTuber と YouTuber の違いについての調査も行われてなかった．この状況を鑑み，男性配信者が女性アバタを用きている．Lu ら [9] によると，VTuber の視聴者が配信をいて配信する際の声の違いが，視聴者からのコンテンツやみるモチベーションは,YouTuber と類似しているものの,配信者に対する印象に与える影響について検証を行ってき

VTuber の方が YouTuber よりも配信者と視聴者の間に距た [2]．しかし，先行研究は男性配信者が女性アバタを用い離感を感じている傾向があることが示されている. この距る場合の検証に留まっており，女性が男性アバタを用いた離感とは,VTuber が 2D CG や 3D CG といった仮想世界場合の視聴者からのコンテンツや配信者に対する印象や，の存在であるため, 現実世界との距離があるものと考える.

男性配信者が女性アバタを用いて配信する際の声の印象と© 2024 Information Processing Society of Japan957

情報処理学会 インタラクション 2024
IPSJ Interaction 2024の違いについて検証を行えていない．

2P-75
2024/2/28

我々が過去に学会で発表した内容や最先端技術についてま以上のことから，自身の性別とは異なる性別のアバタをとめたスライドを発表する内容を収録して用いる．ニュー

用いて配信を行う際に使用する声の違いが，視聴者に与えスカテゴリの動画コンテンツは 6 種類用意し，M-C1〜C3，る影響を性差の観点から明らかにすることを本稿の研究課

F-C1〜F-C3 条件でそれぞれ収録する．この際，同一コンテ題とする．

ンツを異なる条件で撮り直しする際におこる実験へのノイ4. 実験計画

ズをなくすために，M-C1，F-C1 の地声条件で収録した動画に対して，Retrieval-based-Voice-Conversion(RVC)[11]

3 章で述べたように，本研究は VTuber が配信を行う際を用いて配信者の声を加工することで M-C2，C3，F-C2，に使用する声が視聴者に与える影響を明らかにすることをF-C3 のボイスチェンジャ条件の動画を作成する．動画中目的としている．研究を段階的に進めるうえで，本実験でのアバタは，多くの VTuber 配信者が典型的に行っているは性別が異なるアバタを使用する際に，地声を用いて配信配信スタイルに合わせ，主要コンテンツの右下に上半身がした場合と，性別に合わせてボイスチェンジャを用いた場見えるように配置する．以上の条件で作成された動画を図合で，配信に対する視聴者の印象が異なるかどうか明らか

1, 図 2 に示す．にすることを実験目的とする．

4.1 実験条件・手順
本研究では，自身の性別とは異なる性別のアバタを用いて配信を行う際に使用する声の違いが，視聴者に与える影響を性差の観点から明らかにすることを目的としている．
このため，実験では男性が女性アバタを用いる際の声の異なる 3 条件と，女性が男性アバタを用いる際の声の異なる3 条件をそれぞれ用意する．
M-C1 男性-地声条件：配信者は男性である．声は地声を

図 1

女性アバタを用いた動画用いる．アバタは女性のキャラクタを用いる．

M-C2 男性-異性変換条件：配信者は男性である．声はボイスチェンジャを用いて女性の加工された音声を用いる．アバタは女性のキャラクタを用いる．

M-C3 男性-同性変換条件：配信者は男性である．声はボイスチェンジャを用いて男性の加工された音声を用いる．アバタは女性のキャラクタを用いる．

F-C1 女性-地声条件：配信者は女性である．声は地声を用いる．アバタは男性のキャラクタを用いる．

F-C2 女性-異性変換条件：配信者は女性である．声はボ

図 2

男性アバタを用いた場合の動画

イスチェンジャを用いて男性の加工された音声を用いる．アバタは男性のキャラクタを用いる．

F-C3 女性-同性変換条件：配信者は女性である．声はボイスチェンジャを用いて女性の加工された音声を用いる．アバタは男性のキャラクタを用いる．

実験手順を下記に示す．

Step 1: 実験者が M-C1〜C3，F-C1〜F-C3 条件間からランダムに選択する．

Step 2: 実験参加者は選択された条件の動画を視聴する．
Step 3: 実験参加者は Step2 で視聴した動画についてア実験参加者には，上述の条件それぞれによる動画を 1 度ンケートに回答する．

ずつ視聴してもらい，配信者・コンテンツへの印象に関す

Step 4: Step 1 に戻り，選択されなかった条件をランダるアンケートにそれぞれ回答してもらった．M-C1〜C3，ムに選択した後に再度動画の視聴とアンケートへの回

F-C1〜F-C3 条件間で比較を行う際，配信者が用いるアバタ答を繰り返す．の服装の違いなどが実験に与える影響を少なくするためにアンケートの内容は下記の通りである．各アンケート，なるべく男性アバタと女性アバタの見た目を近づけるよう7 段階のリッカート尺度（7: とても感じた〜1: 全く感じに自作した．配信者が配信する動画のコンテンツについてなかった）で回答を行わせる．Q1〜Q8 が配信者に対するは，先行研究 [1] と同様に，ニュースカテゴリの動画として，印象，Q9〜Q11 が動画に対する印象を問う内容になって© 2024 Information Processing Society of Japan958

情報処理学会 インタラクション 2024
IPSJ Interaction 2024

2P-75
2024/2/28

いる．

Q1: 配信者に親しみを感じましたか？
Q2: 配信者にユーモアを感じましたか？

[9]

Q3: 配信者への印象は良いと感じましたか？
Q4: 配信者の見た目に親しみを感じましたか？
Q5: 配信者の見た目への印象は良いと感じましたか？
Q6: 配信者の声に親しみを感じましたか？
Q7: 配信者の見た目と声があっていると感じましたか？
Q8: 配信者の声への印象は良いと感じましたか？
Q9: 視聴した動画が興味深いと感じましたか？
Q10: 視聴した動画が面白い (ユーモア) と感じましたか？

[10]
[11]

Mickelson, V.: Silent messages : implicit communication of emotions and attitudes, Wadsworth Pub. Co.
(1981).
Lu, Z., Shen, C., Li, J., Shen, H. and Wigdor, D.: MoreKawaii than a Real-Person Live Streamer: Understanding How the Otaku Community Engages with and Perceives Virtual YouTubers, Proceedings of the 2021 CHI
Conference on Human Factors in Computing Systems,
CHI ’21 (2021).
横田健治： バーチャル YouTuber の提供価値の分析，電子情報通信学会誌， Vol. 102, No. 7, pp. 654–659 (2019).
Retrieval-based-Voice-Conversion:
https://
huggingface.co/lj1995/VoiceConversionWebUI/tree/main.

Q11: 同一配信者の別の動画を見たいと感じましたか？

5. おわりに
本稿は，自身と異なる性別のアバタを用いて VTuber として配信する際，自身の生の声で配信した場合と，ボイスチェンジャにより性別にあった声で配信した場合の，視聴者の配信への印象を比較するための実験計画を述べたものである．今後は検討した内容を元に，実験を行うことで女性が男性アバタを使用した際の声の違いと視聴者のコンテンツ・配信者への影響の検証や，先行研究の男性が女性アバタを用いた際の声の違いが与える影響との比較を行っていく．
参考文献
[1]

[2]

[3]

[4]

[5]

[6]

[7]

[8]

越後宏紀，呉 健朗，新井貴紘，富永詩音，小林 稔： カ
テゴリ別における VTuber と YouTuber の配信スタイルによる印象評価，情報処理学会論文誌， Vol. 64, No. 1,
pp. 86–95 (2023).
新井 貴紘 富永 詩音呉 健朗： VTuber の変声と地声の違いによる印象評価，情報処理学会シンポジウム論文集, マルチメディア，分散，協調とモバイル (DICOMO2023)，
Vol. 2023, pp. 1643–1648 (2023).
富夫渡辺，雅史大久保： 身体的コミュニケーション解析のためのバーチャルコミュニケーションシステム，情報処理学会論文誌， Vol. 40, No. 2, pp. 670–676 (1999).
下江優太，濱本和彦，野須 潔，小河幸次： アバターとピクトグラムを用いた非言語コミュニケーションの検討，電気学会論文誌Ｃ（電子・情報・システム部門誌）， Vol. 130,
No. 3, pp. 476–482 (2010).
敏宏松本，宣彦松浦，昌平菅原： デスクトップ VR 会議
におけるアバタ表現方式の評価，情報処理学会研究報告，Vol. 99, No. 88, pp. 13–18 (1999).
Li, F.-L., Zhao, Z., Lu, Q., Lin, X., Chen, H., Chen,
B., Pu, L., Zhang, J., Sun, F., Liu, X., Xie, L., Huang,Q., Zhang, J. and Chen, H.: AliMe Avatar: MultiModal Content Production and Presentation for LiveStreaming E-Commerce, Proceedings of the 44th International ACM SIGIR Conference on Research andDevelopment in Information Retrieval, p. 2635–2636(2021).
黒田拓也，山田誠二，寺田和憲： オンラインショッピング
における商品推薦エージェントの外見と振る舞いの関係が購買意欲に与える影響，人工知能学会論文誌， Vol. 31,
No. 2, pp. G–F78 1–11 (2016).
Mehrabian, A., Hayden, R., Evans, P., Broad, D. and© 2024 Information Processing Society of Japan959