情報処理学会 インタラクション 2017
IPSJ Interaction 2017

1-409-72
2017/3/2

発話を活用した情報共有インタフェースが対面協調作業へ与える効果の検証
山本 卓嗣1

是常 雄大2今本 恕2

高田 秀志1

概要：複数人で共通の目的を達成するために，対面して協調検索を行う機会が増えてきている．対面した協調検索では，Web 上の情報を検索し，他者と検索結果の共有を行う．また，この際の参加者間でのコミュニケーションは発話によって行われる．協調検索において発話によるコミュニケーションは重要であるが，ボタン操作によって共有が行われる既存の情報共有インタフェースを利用した場合，情報共有時に「会話の途切れ」が発生する．そこで，本研究では，この「会話の途切れ」を解消するために，発話を活用した情報共有インタフェースを構成する．また，発話を活用した情報共有インタフェースが協調検索のコミュニケーションに与える効果を検証する．

Evaluating Eﬀects of an Information Sharing Interface Utilizing
Utterance on Collaborative Work
Yamamoto Takatsugu1

Koretsune Takehiro2

Imamoto Jo2

Takada Hideyuki1

Abstract: The opportunity to perform a collaborative search task in face-to-face for achieving a common
purpose has been increasing. In collaborative search, people search the information on the Web and sharesearch results with others. In addition, communication between participants is taken by utterance when we
perform collaborative search. During such a task, the traditional information sharing method causes ”interruption of talk” when we send and receive information with the button action. In this paper, we propose amethod of information sharing utilizing utterance to prevent ”interruption of talk” in collaborative search.
We also investigate in how the sharing interface utilizing utterance influences to a collaborative search task.

1. はじめに
近年のスマートフォンやタブレット端末の普及により，端末間で情報共有を行うためには，送信側では共有相手へ情報を送信する操作，受信側では受け取った情報を閲覧する操作が必要である．

複数人が端末を持ち寄り，対面して協調検索を行う機会

協調検索において，参加者が共通の目的を達成するためが増えてきた [1]．対面した協調検索では，検索した Webにコミュニケーションをとることは重要である．コミュニ

ページをその場で相手と共有したくなるような場面が多ケーションをとることによって，参加者全員の意見がよりく見られる．その際に利用される既存の情報共有インタ反映された成果が得られるようになり，参加者それぞれのフェースとして，Apple 社の iOS 端末に搭載されている満足度の高い協調検索が実現する．参加者が対面して行う

AirDrop や，メッセージングアプリケーションの LINE な

協調検索の場合，コミュニケーションは発話によってとらどが挙げられる．協調検索において，参加者が持ち寄ったれる．しかし，上記のような既存の情報共有インタフェー
スを介した情報共有手法では，共有後に受信者が受け取っ

1

2

立命館大学情報理工学部
College of Information Science and Engineering, Ritsumeikan University, Kusatsu, Shiga 525-8577, Japan
立命館大学大学院情報理工学研究科
Graduate School of Information Science and Engineering,
Ritsumeikan University, Shiga 525-8577, Japan© 2017 Information Processing Society of Japanた Web ページに集中し過ぎてしまい，発話が行われない場合がある．このような行為が発生する原因を，本研究では，既存の情報共有インタフェースを介した情報共有手法を用いた場合，情報共有操作に伴う「会話の途切れ」が発351

情報処理学会 インタラクション 2017
IPSJ Interaction 2017

1-409-72
2017/3/2

検索画面

発話の流れ

発話共有画面発話途切れ

HOMEボタン

前の発話実際の情報共有(ボタン操作)後の発話行為の流れ

検索画面へ戻る進むボタン

共有兼音声認識ボタン

図 1 情報共有の流れ
図 2

本システムの画面例

生するからであると予測する．
そこで，本研究では情報共有インタフェースに発話を活ついて評価が行われてきた．これに対して，本研究では，用することを考える．その上で，発話を用いた情報共有手音声認識機能を備えたインタフェースがコミュニケーショ法が，対面での協調検索内のコミュニケーションにどのよンに与える効果を検証する．

うな影響を与えるか検証する．

2. 研究のアプローチ

また，手渡し動作による情報共有手法が協調検索内のコミュニケーションに与える効果を検証した研究 [4] では，人間が日常的に行っている，紙を手で相手に渡すという自然

本節では，情報共有操作に伴う「発話の途切れ」の問題な動作を活用した情報共有手法が，協調検索内のコミュニについて述べ，この問題に対する，発話を活用した情報共ケーションを向上させる可能性があることが示されている．

有インタフェースの必要性について述べる．また，本研究と関連のある文献を紹介する．

この研究では，端末を振るという日常的動作を情報共有インタフェースとして採用している．これに対して，本研
究は，日常的に行われる発話を情報共有インタフェースと2.1 「会話の途切れ」
協調検索において，情報共有を行う際に既存の情報共有手法を用いた場合，図 1 のように，情報共有の前に，送受して採用する．

3. 発話を活用した情報共有インタフェース

信者間で発話によるやりとりが行われる．その後，情報共

本節では，情報共有インタフェースの機能と，その実装有をボタン操作によって行い，共有された情報について再方法について述べる．本研究では，電子端末として iPadび発話を行う．ここで，これらの行為は一連の流れであるを利用する．にもかかわらず，図 1 に示すように，情報共有のボタン操作の際に会話が途切れてしまう場合が多いと考えられる．

3.1 機能本研究では，このような「会話の途切れ」があると，協調各ユーザは iPad をそれぞれ所持していることとする．

検索内でコミュニケーションが円滑に行われない場合があ

ユーザが Web 検索をする時の検索画面と，ユーザが受けると考える．

取った Web ページを閲覧する共有画面を図 2 に示す．ユー

そこで，本研究では発話を活用した情報共有インタフェー

ザは検索作業を行なっている時に，他のユーザと共有したスを採用することによって，情報共有操作に伴う「会話のい Web ページがあれば，検索画面の右下にある共有ボタ途切れ」を解消することを考える．発話を活用した情報共ンをタップし，「(送信先ユーザ名) へ送る」などと発話す

有インタフェースを構成するために，音声認識機能を利用る．すると，発話されたユーザ名に対応する端末の検索画する．

面上に「受けとりますか？」というポップアップが表示されるので，受信したい場合は「はい or いいえ」ボタンを2.2 関連研究タップした後に「はい」と発話する．これにより，検索画

Web 検索時に利用され始めている音声認識によるテキス

面から共有画面へ遷移し，共有された Web ページが表示

ト入力の操作性を検証した研究 [2] では，音声認識システされる．共有画面で戻るボタンをタップすることにより，ムを用いた場合，入力操作が比較的容易になることが示さ

ユーザは検索画面に戻ることができる．受信したくない場れている．また，音声認識機能を用いた翻訳システムの研合は「はい or いいえ」ボタンをタップした後に「いいえ」

究 [3] では，音声翻訳技術の研究の過程と現状が述べられと発話することで，ポップアップが消え，検索作業に戻るており，固有名詞が含まれない発話内容に対して高い精度ことができる．

があると示されている．
このように，音声認識技術の研究では，テキスト入力や翻訳など，音声認識を利用したシステムの性能や操作性に© 2017 Information Processing Society of Japan3.2 提案インタフェースの実装
提案インタフェースの実装では，iPad 間の通信に Apple352

情報処理学会 インタラクション 2017
IPSJ Interaction 2017

1-409-72
2017/3/2

⼈

SpeechRec Server②音声データを送信⑤音声データを送信③⑥認識結果を送信

100cm

机⼈

④URLデータ送信①ボタンタップ

105cm

ポップアップ
共有側端末

送信側端末

図 3

⑦共有画面or
通常の検索画面へシステム構成社が提供している Multipeer Connectivity*1 を用いている．
また，音声認識機能として，エヌ・ティ・ティアイ社が提供する SpeechRec API*2 を用いている．情報共有インタ
フェースの動作手順を図 3 に示す．また，詳細を以下に示す．

( 1 ) 「共有ボタン」が押されると音声認識 API が作動し，発話の録音を開始．

( 2 ) API が発話の終了を検知．録音した音声データをSpeechRec 音声認識サーバへ送信．
( 3 ) SpeechRec 音声認識サーバが音声データを解析し，その結果をテキスト形式で送信者側の端末へ送信．

( 4 ) テキストデータ内に相手の iPad の端末名が含まれていた場合，その iPad に検索画面で閲覧している Web
ページの URL を送信．

( 5 ) URL を受信した iPad では，図 3 に示す「受けとりますか？」というポップアップを表示．

( 6 ) ポップアップの「はい or いいえ」ボタンが押されることにより，音声認識を開始．

( 7 ) 音声認識サーバから受信したテキストデータに「はい」が含まれていた場合，受信した URL を基に Web ページを表示．
テキストデータに「いいえ」が含まれていた場合，通常の検索画面を表示．

4. 実験と評価
本節では，発話を活用した情報共有インタフェースが協調検索内のコミュニケーションに与える効果を検証するために実施する実験と評価について述べる．

図 4 実験環境

情報共有インタフェースでの協調検索と，AirDrop のような，ボタン操作のみを活用した情報共有インタフェースでの協調検索を比較する．実施する協調作業の内容として
は，福岡県と神奈川県への旅行計画をそれぞれ立案する．
各グループは，実現可能な計画を立案し，観光地名や食事処，移動経路などを計画書にまとめる．また，実験の様子を録画し，各作業後にアンケートを行う．

4.2 評価方法
提案インタフェースがコミュニケーションに与える効果を検証するために，被験者の協調検索への満足度をアンケートにより評価する．また，実験動画の観察より発話解析を行う．発話解析より，「会話の途切れ」を解消することによって発生するコミュニケーションの差異を，比較インタフェースを採用した協調検索と比較して評価する．今
回は，コミュニケーションの差異を評価する項目として，「Web ページ共有後の発話の有無」と「Web ページ共有後の発話の長さ」を設定する．

5. おわりに
本稿では，発話を活用した情報共有インタフェースを採用することによって，情報共有操作に伴う「会話の途切れ」を解消することを提案した．これにより，より円滑なコミュニケーションが実現できると考える．今後は，評価実験を行い，提案インタフェースを採用した情報共有手法が協調検索内のコミュニケーションに与える効果を検証する．
参考文献
[1]

4.1 実験内容
本実験は，3 人一組のグループで行う．被験者の間で画[2]面を直接見せ合う情報共有が起こらないように被験者の間隔を図 4 のように設定する．各被験者はそれぞれ iPad を使用して協調検索を行う．グループごとに発話を活用した
*1
*2

⼈

Multipeer Connectivity https://developer.apple.com/
reference/multipeerconnectivity
SpeechRec API https://dev.smt.docomo.ne.jp/?p=docs.
api.page&api_name=speech_recognition&p_name=api_
usage_scenario© 2017 Information Processing Society of Japan

[3]
[4]

Morris, M. R., Lombardo, J. and Wigdor, D.: WeSearch:Supporting Collaborative Search and Sensemaking on aTabletop Display, in Proceedings of the 2010 ACM conference on Computer supported cooperative work, pp.
401–410 (2010).
甲斐充彦, 中野崇広, 中川聖一：音声認識サーバ-SPOJUSを利用した WWW ブラウザの音声操作システム, 情報処理学会研究報告. 音声言語情報処理 (SLP), Vol. 1998, No. 12,
pp. 81–86 (1998).
中村哲：音声翻訳システムの研究開発, 電子情報通信学会
技術研究報告. SP, 音声 (2009).
今本恕, 伊藤直人, 高田秀志：タブレット端末間での手渡し動作による情報共有方法の協調作業への効果の検証, 情報処理学会研究報告. GN,[グループウェアとネットワークサービス], Vol. 2015, No. 9, pp. 1–8 (2015).

353