情報処理学会 インタラクション 2021
IPSJ Interaction 2021

1B16
2021/3/10

オンライン会議における足元の触覚コミュニケーションシステムの提案
三浦光梨†1

光岡宏海†1

北野るな†1栗原渉†2有山大地†2

串山久美子†2

概要：感染症の流行によりビデオチャットツールを使用したオンライン上でのコミュニケーションが増加したが，コミュニケーションの取りづらさが問題となっている．ビデオオフであればストレスの少ない状態で参加することができるが，同時に非言語行動がなくなるため，空気感の伝わりづらさから会話量が減少してしまう．そこで本稿では，触覚を伴うコミュニケーションシステムを制作した．触覚を送受信し，足元で相手の感情や反応を確認することができる．このシステムをオンライン会議に取り入れることでインフォーマルコミュニケーションを促進し，コミュニケーション全体の活性化に寄与する．

1. はじめにングを搭載したシステムを開発し，インフォーマルコミュニケーションを支援した．また田中ら[5]は，ビデオ会議感染症の流行で働き方が見直されたことにより，オンラシステムに遠隔握手のインターフェースを実装した．双方

イン上でのコミュニケーションが注目されている．中でも性の遠隔触覚がソーシャルテレプレゼンスを強化し，相手クラウド型のビデオチャットツールは仕事の会議や授業なに親近感を与えることを示している．宮崎ら[6]は，ユー

ど，あらゆる場面で使用される頻度が増加している．

ザが言葉に対して感じる温度を設定し，他のユーザとの温ビデオチャットツールでは，ビデオと音声のオンオフを度差を確かめ合うコンテンツが会話を発生させたことを示切り替えることができる．しかし，ビデオオンでは 1 つのしている．しかし，触覚を用いたオンライン会議のインフ画面に 1 人が映ることから，常に見られる状態にあるためォーマルコミュニケーション支援は進んでいない．に心理的な圧力を感じてしまう[1]．反面，ビデオオフではそこで，本研究では，オンラインにおける新しいイン心理的な圧力は感じないが，相手の表情が見えないことかフォーマルコミュニケーション支援を目的とした，ビデオら感情を読み取ることが難しい．高木[2]が述べているようチャットツールと触覚デバイスを併用するシステムを制作に，非言語行動はコミュニケーションを円滑にするためにした．

重要な要素の一つである．ビデオオフでは非言語行動がないため場の空気感を感じることが難しく，不安や孤独感から発言のしにくさに繋がってしまう．

3. システム概要
本システムは，3〜6 人グループのオンライン会議で使用

この問題を解決するため，本研究では，対面でのコミュすることを想定する．また，ビデオはオフ，音声はオンのニケーションでの話しかけるときに肩を叩く行動や，喜び状態とする．本システムは，図１で示すように，一人につを共有するときにハイタッチをする行動から，触覚が会話

き PC１台，足元に 2 つの部分がある触覚デバイス１台でのトリガとなり得ることに着目した．オンライン会議に触構成される．

覚を伴うコミュケーションを取り入れることで，遠隔での会話の促進を目指す．なお，オンライン会議では PC の使用で手が塞がっていることを想定し，足の触覚を用いたビデオチャットツールと併用するデバイスを考案した．また，笹岡ら[3]が足裏からの温度上昇によるネガティブ感情緩和作用について示していることから，足元のデバイスにすることで不安や孤独感を緩和する機能の実装が可能になると考えた．
本稿では，触覚を送受信し，足で相手の感情や反応を確かめることでコミュニケーションを促進させるシステムの制作について述べる．

2. 先行研究

図 1

システムのレイアウト

まず，ユーザの表情は温度による触覚として自動的に相手に送信され，触覚を送られたユーザは，足元にある触覚デバイスの表情提示部で相手の感情を確かめることができ榊原ら[4]は，分散勤務における不安や孤独感を解消する．なお，表情提示部は，ユーザ 1 人に対してパネル 1 つるため，双方向性を保った映像伝送や分散並列メッセージが手前中央部分以外で予め割り当てられている．次に，ユ†1 東京都立大学システムデザイン学部†2 東京都立大学大学院システムデザイン研究科© 2021 Information Processing Society of Japan243

情報処理学会 インタラクション 2021
IPSJ Interaction 2021

1B16
2021/3/10

ーザはリアクションの種類を選び，相手の足元のデバイスに触覚として送信する．リアクションが送られたユーザは，デバイスの手前中央部分に配置されたリアクション提示部に足を置くことで，その触覚を受け取ることができる．
本システムにより，聴覚のみのオンラインコミュニケーションに触覚を足すことができる．触覚での新しいコミュニケーションによってインフォーマルコミュニケーションを促進し，コミュニケーション全体の活性化を目指す．

4. ユーザの体験設計
ユーザは本システムを利用するにあたり 2 つの段階を経て，温度と振動による触覚を伴ったコミュニケーションをとることができる．

図 2

表情認識アプリケーション

5.2 触覚デバイス
触覚によるリアクションを足元に伝えるために，Arduino
Uno を用いて振動モーターとペルチェ素子を組み込んだデ

1 つ目は，「相手の感情を知る」段階である．「happy」バイスを制作した．双方のユーザの手元には「共感」と「慰「neutral」「sad」の表情認識を行い，それぞれに「温かい」める」の 2 つのボタンを用意し，「共感」を押すと振動モー「変化なし」「冷たい」の温度を当てはめる．そして，そのターが動作して相手のデバイスが振動，「慰める」を押すと温度変化は自動的に相手の触覚デバイスに送られる．送らペルチェ素子が動作して相手のデバイスが温かくなるようれたユーザは，感情を知りたいユーザに対応した表情提示に設計した．

部に足を置くことで送られてきた温度を確かめ，相手の感

なお，ペルチェ素子はボタンを押している間のみ温度が情を受け取ることができる．なお，相手の感情による自分上昇する仕組みとしたが，上昇後は一定の温度に保つ必要の感情への過度な影響を防ぐため，任意のタイミングで相がある．そのため，サーミスタでペルチェ素子表面の温度手の感情を確認することができる設計とした．

を取得し，モータードライバによって発熱を制御すること

2 つ目は，「相手にリアクションをする」段階である．1

で，ペルチェ素子の温度管理を可能とした．

つ目の段階で認知した相手の感情，もしくは話している内ペルチェ素子と振動モーターはスチレンボードの台に容に対して，触覚で相手に反応を示すことができる．リア埋め込み，足元に設置した．また，ペルチェ素子の上にはクションは「共感」と「慰める」を送ることができ，それ銅板を置き，熱伝導を利用して温かさを感じられる範囲をぞれ相手のデバイスのリアクション提示部が振動，温かく広げた．システム全体の外観を図 3 に示す．

なることで伝えられる．
触覚の送受信により，会話のきっかけや，不安，孤独感の解消に繋がる効果が期待される．

5. 実装
本稿では，プロトタイプとして 2 人用のシステムを制作した．本システムは本来，表情提示部とリアクション提示部で構成された触覚デバイスを用いるが，プロトタイプではリアクション提示部のみのデバイスとした．表情は，円グラフとして PC のディスプレイに表示し，ユーザはそれをもとに相手の感情を認知して触覚でリアクションを返す．

図 3

5.1 表情認識・送信アプリケーション
表情認識をするにあたり，本システムでは Javascript ラシステム外観

6. おわりにイブラリの clmtrackr を使用した．本ライブラリはビデオや本稿では，「相手の感情を知る」段階では視覚，「相手に画像の顔を追跡し，輪郭，眉，目，鼻，口からなる顔モデリアクションをする」段階では触覚を利用して実装した．

ルを適合させて，その座標位置を配列として出力するもの「相手の感情を知る」段階でも触覚を利用することで，よである．その座標位置をもとに表情の判別を行なった．

りコミュニケーションの促進効果が上がると期待される．

また，socket.io ライブラリでリアルタイムでの双方向通信を実現する WebSocket を使用し，お互いの表情がリアルタイムで送信されるアプリケーションを制作した．アプリ
ケーション画面を図 2 に示す．

© 2021 Information Processing Society of Japan

今後は表情を温度として相手のデバイスに送り，足で相手の感情を認知できるようにシステムを整えていく．
また，使用人数を 3~6 人に拡大し，相手にリアクションを送る際は，ボタンではなく PC のディスプレイで選択で244

情報処理学会 インタラクション 2021
IPSJ Interaction 2021

1B16
2021/3/10

きるよう開発を進めていく．オンライン会議に参加しながら，同一の PC でリアクションができるようユーザビリテ
ィを高める．完成後は実験を行い，本システムが及ぼすオンライン会議におけるコミュニケーションへの影響を検証し，改善を行う．

参考文献
[1]

[2]

[3]

[4]

[5]

[6]

“苦手なオンライン会議「画面の顔にストレス」も”. 産経新聞社. 2020-06-02.
https://www.sankei.com/life/news/200602/lif2006020022-n1.html,(参照 2020-12-08).
高木幸子. コミュニケーションにおける表情および身体動作の役割. 早稲田大学大学院文学研究科紀要.第 1 分冊, 2005,vol.51, p. 25-36.
笹岡貴史,渡邉和彦,原田宗子,坂本和夫,沖本裕,山脇成人．暖かい部屋での脚の温度上昇はネガティブ感情を緩和する. 日本心理学会大会発表論文集, 2018, vol.82, p. 1PM-080-1PM080.
榊原憲,加藤政美,田處喜久,宮崎貴識. メディア空間による分散勤務者のコミュニケーション支援システム「e-office」. 情報処理学会論文誌, 2002. vol.38, no.8, p. 2821-2831.
田中一晶,和田侑也,中西英之．遠隔握手：ビデオ会議と触覚提示デバイスの一体化によるソーシャルテレプレゼンスの強化. 情報処理学会論文誌, 2012, vol.56, no.4, p. 1228-1236．
宮崎優子,加能侑生子,木下真希,栗原渉,串山久美子．温度を介して言葉の印象の違いを体感する温冷感コンテンツ. 情報処
理学会インタラクション 2020 論文集, 2020, p. 599-600.

© 2021 Information Processing Society of Japan245