情報処理学会 インタラクション 2024
IPSJ Interaction 2024

3B-34
2024/2/28

遠隔会議の自己表示映像に対する身体所有感や操作主体感を変更するコミュニケーション支援システム
岸本諒大1,a)土田修平2,b)

寺田 努1,c)

塚本昌彦1,d)

概要：遠隔会議では，参加者が顔出しを行わずコミュニケーションが円滑に行えないことがある．そのため，顔出しの抵抗を軽減しつつ，円滑にコミュニケーションが取れる表示法を提案することは有用である．
そこで，筆者らは表示部位と表示効果をリアルタイムで変更し，既存のアプリケーションに適用できるシステムを作成した．表示できる部位は顔全体，口と目であり，表示効果はぼかし加工，遅延，大きさを変更できる．本研究では，効果的な遠隔会議体験の構築に向けた提案を行うため，作成したシステムを用いて，表示映像における身体所有感と操作主体感を調査した．

1. はじめに
近年，遠隔会議は利便性の観点から日常生活に深く浸透している．その一方で，参加者は自身の映像を他の参構成される無数の表示法に対して，恥ずかしさやコミュニケーションの円滑性などの会議特性を調査するためには，各表示法について被験者に遠隔会議を行ってもらう必要があり，多分な労力を要してしまう．

加者に表示すること (顔出し) に恥ずかしさを感じやすい．

そこで筆者らは，自己表示映像に対する身体所有感 (自Garau ら [1] によると，視覚による非言語情報が喪失する身のものである感覚) と操作主体感 (操作しているのは自分とコミュニケーションの質が低下することが分かっていである感覚) に着目した．これらの感覚は従来の研究ではる．そのため，遠隔会議において参加者が顔出しを行わな四肢や自己身体そのものに対して検討されている [6]．仮いと，円滑にコミュニケーションができない恐れがある．に図 1 のように，これらの感覚に基づいて遠隔会議の顔出参加者同士が円滑にコミュニケーションを取ることはブレ

しの恥ずかしさやコミュニケーションの円滑性が変化すインストーミングや初対面の顔合わせ，企画会議などいかるならば，自己映像の表示法におけるこれらの感覚を質問ような会議の目的においても重要である．そのため，遠隔紙を通じて個々に計測するだけで，恥ずかしさ，コミュニ会議の質を向上させるためには，顔出しの恥ずかしさを低ケーションの円滑性などの遠隔会議の特性が予想できる．

減しつつ，コミュニケーションの円滑性を向上させる必要

つまり，これらの感覚を調整することにより，恥ずかしさがある．

や会話の円滑性を最適化するような自己映像の適切な表示

筆者らの以前の研究 [2] では，通常表示，表示なし，口のみの表示，目のみの表示に対する顔出しの恥ずかしさにつ法が提案できるため，遠隔会議の質の向上が期待できると考える．

いて調査し，目のみの表示が通常表示と比較して顔出しのそこで本研究では，遠隔会議における自己表示映像に対恥ずかしさを低減できるとわかった. 一方で，これら自己するこれらの感覚が遠隔会議の特性にどのような影響を及

表示映像のどのような心理的要因に基づいて顔出しの恥ずぼすか調査するために，遠隔会議における表示部位と表示かしさやコミュニケーションの円滑性が変化するかは明ら効果を変更できるシステムを作成した．

かになっていない．そのため，表示部位や表示効果により12a)b)c)d)

神戸大学大学院工学研究科
Grad. School of Engineering, Kobe University
お茶の水女子大学 文理融合 AI・データサイエンスセンター
Ochanomizu University, Center for Interdisciplinary AI andData Sciencekishimoto-ryota@stu.kobe-u.ac.jp
tsuchida.shuhei@ocha.ac.jp
tsutomu@eedept.kobe-u.ac.jp
tuka@kobe-u.ac.jp© 2024 Information Processing Society of Japan

2. 提案システム
2.1 表示部位
コミュニケーション相手の感情を認識するうえで，相手の表情の認知は重要である．番場ら [3] によると基本となる 6 感情を認知する際，すべての表情刺激において目に対する注視時間が最も長く，表情認知において目から得られる情報が重要である可能性を示した．加えて，Calder ら [4]1216情報処理学会 インタラクション 2024
IPSJ Interaction 2024

遠隔会議の特性

3B-34
2024/2/28

心理要因

物理量表
示部
位変更表示部位顔出しの恥ずかしさ

身体所有感

••••

顔全体
口
目
口と目 etc…

表示効果
コミュニケーションの円滑性

操作主体感

• 大きさ
• ぼかし
• 遅れ

表示
効
果変
更• ぼかしと遅れetc ...

図 2
図 1

システム操作画面調査目的のイメージ調整が難しい」というものがあった．そのため，システム
は，表情から幸福感を判別するテストにおいて顔の下半分には部位の大きさを変更できる機能が求められる．また，と顔全体を見せた際，1%の精度の誤差で，かつ前者の表示

後者の問題には顔の輪郭の表示機能を搭載することで，部法がより素早く判別できることを示した．これにより，人位の相対的位置の把握を容易にした．

は幸福感を主とする感情を相手の表情から認識する際，口を重点的に注視することがわかる．また，目を表示するこ

2.3 設計要件とで，会話中の相手の視線情報を伝えることができること

システムを設計するための要件を以下の二点とする．

や，口は顔の部位の中でも特に大きく，動きの変化の幅も• 即座に表示部位と表示効果を変更できる．

広い．このように，会話相手の表情を認識する際に口や目• 既存の遠隔会議アプリケーションに適用できる．

が重視されることや，視線情報を伝えられる点，部位自体表示される部位や効果を変更するために会議を抜けたが大きく表現の幅が広い点などから，表示を切り替えるこり，時間を要してしまうと会議に影響を及ぼし，コミュニとができる部位は目と口とした．コミュニケーションをすケーションを円滑に行うことができない．そのため，本シる際に目や口から多くの情報を得られることがわかっていステムは遠隔会議中に時々のシチュエーションに応じて即る一方で，筆者らの調査では遠隔会議の自己表示映像に対座に表示部位，表示効果を変更できる必要がある．また現する身体所有感や操作主体感を調査する試みは未だ行われ在，遠隔会議を行う際は Zoom や Microsoft Teams に代表ていなかった．そのため，表示部位によるこれらの感覚のされる遠隔会議アプリケーションを使用することが主流で変化についての知見は少なく，今後の調査を通じて表示さある．そのため，本システムにおいて新しく遠隔会議アプせる部位を再考する必要があると考えられる．

リケーションを作成することは実社会への導入を考えると現実的ではなく，これら既存のアプリケーションへ適用で2.2 表示効果
木村ら [5] によると，遠隔会議において参加者の映像にぼかし加工を行うことで参加者の顔出しする抵抗を軽減できることが示唆されている．ぼかし加工は明確に顔の輪郭きることが望ましい．以上より，この二点を本システムにおける設計要件とする．

3. 実装

や部位の細かな動きを確認できないことから身体所有感が2 章で挙げたような設計要件を満たすシステムを作成し下がると予想され，本研究の目的である顔出しの抵抗を軽た．作成したシステムの操作画面を図 2 に示す．表示部位減することとの関係を調査するために表示効果として有用

変更機能では通常の顔表示に加え，表示 OFF，口のみ表示，であると考える．加えて，神谷ら [7] は動きに対する視覚目のみ表示を選択できる．なお，口のみの表示と目のみの的映像の遅延による身体所有感や操作主体感について調査表示は併用できる．自己表示映像の画像処理は Python のしており，遅延時間が 350ms を超えるとこれらの感覚が画像処理ライブラリである OpenCV や Google が提供して自己のものから非自己のものへと変化することを示していいる機械学習ライブラリである Media Pipe を用いた．こる．これより，身体所有感，操作主体感を操作しうる連続のようにして処理した自己表示映像を遠隔会議アプリケー的なパラメタとして，自己表示映像に対するぼかし加工とションに適用するためにライブ配信用ソフトウェアである動きに対する視覚的映像の遅延を用いることとした．そのOBS Studio を用いた．

ため，これらのパラメタをリアルタイムで変更できる機能

次に，図 3 に変更した自己表示映像のイメージを示す．

が必要となる．また，プロトタイプを作成した際の被験者表示部位としては口と目である．表示の大きさは等倍をのコメントとして「部位が小さく，動きを確認しづらい」や1.0 倍として，対応する操作ウィンドウ上のスライダーは「カメラ映像の取得範囲から顔が出てしまった際に，位置5.0 倍までを 0.1 単位で調整できる．表示のぼかし度合いに© 2024 Information Processing Society of Japan1217

情報処理学会 インタラクション 2024
IPSJ Interaction 2024

×1.0×3.0

3B-342024/2/28×5.0

大きさ

身体所有感
*6050

操作主体感
*

6442200-2100*p<.05

顔口目

通常表示

ぼかし

遅れ-4*-2*p<.05

顔口目

通常表示

ぼかし

遅れ-4

ぼかし

図 4
図 3

*

表示部位を要因とした比較

表示のイメージ

身体所有感

操作主体感

ついては OpenCV の一般的な平滑化処理である Gaussian

6フィルタを用いた．対応する操作ウィンドウ上のスライ

442200

ダーは 0 から 100 までを 1 単位で変更できる．この数値を GaussianBlur 関数における縦横方向の標準偏差とし，画像処理を行った．表示までの遅れについても Python の同コードにて実装しており，先述の研究 [7] を参考にし，300ms までの遅れを 10ms を単位に変更できるようにしている．システム作成後，参加者に適切にシステムを配布で*

*

*

6-2

*-2*p<.05-4
通常表示

ぼかし

遅れ

-6*p<.05-4
通常表示

ぼかし

遅れ

-6
顔

き，会議中にぼかし加工や表示部位の大きさを変更できる口目

図 5顔口目

表示効果を要因とした比較ことを確認した．

4. 実験
4.1 実験環境
表示部位や表示効果を変更することで，自己表示映像にこれらの項目に 0-6 の 7 段階で回答してもらった．なお，各項の (b) 設問は制御用の設問であり，(a) の設問の値から (b) の設問の値を引いた値を各表示における身体所有感，操作主体感とした．

対する身体所有感や操作主体感が変化するかを調査するた
めに実験を行った．被験者は 20 代男女 10 名である．行っ

4.2 結果た表示法は表示部位が顔表示，口のみ表示，目のみ表示の図 4 に表示部位を要因とした比較結果を示す．二元配置

3 種類に対し，表示効果が加工なし，ぼかし加工，遅れ加分散分析を行った結果，身体所有感の表示部位の主効果に工の 3 種類の計 9 種類である．被験者にはこれらの加工をおいて有意差が見られた (p < .05)．LSD 法による多重比行った状態で，以下の動作を各 4 秒ずつ行ってもらった．

較の結果，顔と口，顔と目において有意差が見られた．ま• 首を縦に振る

た，操作主体感の表示部位と遅れ加工の要因間で有意差が• 首を横に振る見られ，交互作用を認めた．LSD 法による多重比較の結• 笑顔，口を開く，すぼめる

果，顔と口，口と目において有意差が見られた．なお，図に• 目を大きく開く，すぼめる

おける黒実線は主効果において有意に差が生じたことを示

その後，各表示映像に対する身体所有感と操作主体感を調し，橙実線は要因間の交互作用において有意に差が生じた査するための質問紙に回答してもらった．

ことを示す．次に，図 5 に表示効果を要因とした比較結果( 1 ) 身体所有感を示す．二元配置分散分析を行った結果，身体所有感，操( a ) 画面に表示された顔は自分の顔の一部であると感じた．

( b ) 画面に表示された部位は他者の顔の一部のように感じた．

( 2 ) 操作主体感( a ) 自分の意思で画面に表示された動きをコントロールできたと感じた．

( b ) 画面に表示された顔の動きが自分の意思をコントロールしていると感じた．

© 2024 Information Processing Society of Japan

作主体感のどちらも表示効果の主効果において有意差が見られた (p < .05)．LSD 法による多重比較の結果，身体所有感においては通常表示とぼかし加工，通常表示と遅れ加工に有意差が見られ，操作主体感においては通常表示と遅れ加工，ぼかし加工と遅れ加工において有意差が見られた．

5. まとめと今後について筆者らは，遠隔会議における通常の表示よりも恥ずかしさを軽減し，顔出しを行わない時よりもコミュニケーショ1218情報処理学会 インタラクション 2024
IPSJ Interaction 2024

3B-34
2024/2/28

ンの円滑性を向上することを目的として表示部位と表示効果を変更できるシステムを作成した．また，作成した映像加工システムを用いて各表示における身体所有感と操作主体感を調査した．今後は，作成したシステムを用いて，会議の恥ずかしさやコミュニケーションの円滑性などの特性を調査し，これらの感覚との関係を調査する．これらの調査に代表される今後の研究で得られる知見は，効果的な遠隔会議体験の構築に向けた提案やガイドラインの策定に貢献することが期待される．
謝辞 本研究の一部は，JST CREST(JPMJCR18A3) および科学研究費補助金基盤研究 (A)(22H00550) の支援によるものである．ここに記して謝意を表す．
参考文献
[1]

[2]

[3]

[4]

[5]

[6]

[7]

M. Garau, M. Slater, S. Bee, and M. A. Sasse: Theimpact of eye gaze on communication using humanoidavatars, In Proceedings of the SIGCHI Conference on
Human Factors in Computing Systems, pp. 309–316(2001).
岸本諒大, 土田修平, 寺田 努, 塚本昌彦: FaceShow: 顔の部分表示による遠隔会議支援システム, 第 30 回インタラ
クティブシステムとソフトウェアに関するワークショッ
プ (WISS2022), pp. 31-37(2022).
番場あやの, 上村保子: 基本 6 表情認知における注視部位の基礎的検討-FACS に基づいた日本人表情刺激を用いて-, 昭和女子大学大学院生活機構研究科紀要, Vol.16, No.
2, pp. 73–84 (2007).
A. Calder, J. Young, J. Keane, and M. Dean: ConﬁguralInformation in Facial Expression Perception, Journal ofExperimental Psychology, Vol. 26, pp. 527–551(2000).
木村悠児, 今井 廉, 呉 健朗, 峯岸暉歩, 酒井知尋, 小島一憲, 宮田章裕: ぼかしの動的制御によるビデオ会議支援の基礎検討, 情報処理学会インタラクション 2021, vol.1,pp.1040-1044 (2021).
A. Kalckert and H. Ehrsson: Moving a rubber handthat feels like your own: A dissociation of ownershipand agency, Frontiers in Human Neuroscience, pp.
1–14(2012).
神谷聖耶, 葭田貴子: 遅延した自己身体像や視野映像が自己のものとして感じられなくなる臨界遅れ時間, 日本視覚学会 (VISION), vol.26, pp. 122-126(2014).

© 2024 Information Processing Society of Japan1219