(57)【要約】      （修正有）【課題】従来よりも有用な接客システムを提供する。【解決手段】接客システム１は、顧客がディスプレイ装置１００の前に来ると、ディスプレイ装置１００の顧客が閲覧する為の第１のディスプレイに、お薦め商品を選択可能に表示すると共に、ディスプレイ装置１００の店員が閲覧する為の第２のディスプレイに、第１のディスプレイとおなじ内容を表示し、カメラ２００で、顧客の視線の先の位置を検出し、第２のディスプレイに表示する。【選択図】図１
2017084090.tif 000002
【特許請求の範囲】
【請求項１】
第１のディスプレイと、
センサと、
出力部と、
制御部と、を備え、前記制御部は、
前記センサからの情報に基づいて、前記第１のディスプレイの前にいる人の視線に関する情報を前記出力部に出力させる、接客システム。
【請求項２】
前記出力部は、第２のディスプレイであって、
前記制御部は、前記第２のディスプレイに、前記第１のディスプレイに表示されている画面上に前記視線の位置を表示させる、請求項１に記載の接客システム。
【請求項３】
入力部をさらに備え、
前記制御部は、前記入力部を介して前記第１のディスプレイの画面に表示されるオブジェクトを指定する命令を受け付け、前記第１のディスプレイにおける指定された前記オブジェクトの表示を変える、請求項２に記載の接客システム。
【請求項４】
前記制御部は、前記入力部を介して、前記画面に表示されるオブジェクトの選択命令を受け付ける、請求項３に記載の接客システム。
【請求項５】
前記制御部は、前記センサからの情報に基づいて、前記視線が前記第１のディスプレイから外れた場合に、前記第１のディスプレイの周辺における前記視線に関する情報を前記出力部に出力させる、請求項１から４のいずれか１項に記載の接客システム。
【請求項６】
前記制御部は、前記センサからの情報に基づいて、前記視線が店員のいる方向を向いていることを前記出力部に出力させる、請求項１から５のいずれか１項に記載の接客システム。
【請求項７】
マイクをさらに備え、
前記制御部は、前記視線が前記第１のディスプレイの近傍または前記出力部の近傍を向いている場合に、前記マイクを介して入力された音声の処理の結果を前記出力部に出力させる、請求項１から６のいずれか１項に記載の接客システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、レジやチケットカウンターなどの接客場所に配置されるディスプレイを含む接客システムに関する。
【背景技術】
【０００２】
従来から、商品の販売などの支援に利用される機器が提案されている。たとえば、特開２０１２−２２５８９号公報（特許文献１）には、商品選択支援方法が開示されている。特開２０１２−２２５８９号公報（特許文献１）によると、表示画面の前に注視する利用者が居ない場合には、表示画面に複数の商品の画像がランダムな配列でスクロールする商品一覧画面が表示され、利用者が表示画面に近づいて商品一覧画面の特定の商品の画像を注視すると、その注視点を含む注視領域内の商品の画像が、中央部に注視領域が設定されて、この注視領域内に位置付けられた商品一覧画面が表示される。さらに、この注視領域内の商品の画像を注視続けると、この商品の画像が強調表示される。
【０００３】
また、特開２００８−２２６１６１号公報（特許文献２）には、注視認識システムが開示されている。特開２００８−２２６１６１号公報（特許文献２）よると、この注視認識システムは、改札通路に沿って配置され、所定の場所に広告画面表示部が付設された改札機本体と、この改札機本体に配置され、かつ改札通路を移動する通行人の顔の存在領域に設定された視線検知範囲を撮像するカメラと、カメラから得られた撮像情報に基づいて、広告画面表示部に対する通行人の視線変化を検出する視線変化検出部とを備えるように構成される。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１２−２２５８９号公報
【特許文献２】特開２００８−２２６１６１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
従来よりも有用な接客システムが求められている。そこで、本発明の目的は、従来よりも有用な接客システムを提供することにある。
【課題を解決するための手段】
【０００６】
この発明のある態様に従うと、第１のディスプレイと、センサと、出力部と、制御部と、を備える接客システムが提供される。前記制御部は、前記センサからの情報に基づいて、前記第１のディスプレイの前にいる人の視線に関する情報を前記出力部に出力させる。
【０００７】
好ましくは、前記出力部は、第２のディスプレイである。前記制御部は、前記第２のディスプレイに、前記第１のディスプレイに表示されている画面上に前記視線の位置を表示させる。
【０００８】
好ましくは、接客システムは、入力部をさらに備える。前記制御部は、前記入力部を介して前記第１のディスプレイの画面に表示されるオブジェクトを指定する命令を受け付け、前記第１のディスプレイにおける指定された前記オブジェクトの表示を変える。
【０００９】
好ましくは、前記制御部は、前記入力部を介して、前記画面に表示されるオブジェクトの選択命令を受け付ける。
【００１０】
好ましくは、前記制御部は、前記センサからの情報に基づいて、前記視線が前記ディスプレイから外れた場合に、前記第１のディスプレイの周辺における前記視線に関する情報を前記出力部に出力させる。
【００１１】
好ましくは、前記制御部は、前記センサからの情報に基づいて、前記視線が店員のいる方向を向いていることを前記出力部に出力させる。
【００１２】
好ましくは、接客システムは、マイクをさらに備える。前記制御部は、前記視線が第１のディスプレイの近傍または前記出力部の近傍を向いている場合に、前記マイクを介して入力された音声の処理の結果を前記出力部に出力させる。
【発明の効果】
【００１３】
以上のように、この発明によれば、従来よりも有用な接客システムが提供される。
【図面の簡単な説明】
【００１４】
【図１】第１の実施の形態にかかるシステム１の全体構成と第１のユースシーンとを示すイメージ図である。
【図２】第１の実施の形態にかかるシステム１の全体構成と第２のユースシーンとを示すイメージ図である。
【図３】第１の実施の形態にかかるシステム１のハードウェア構成を表わすブロック図である。
【図４】第１の実施の形態にかかるディスプレイ装置１００の情報処理を示すフローチャートである。
【図５】第２の実施の形態にかかるシステム１の全体構成とユースシーンとを示すイメージ図である。
【図６】第２の実施の形態にかかるディスプレイ装置１００の情報処理を示すフローチャートである。
【図７】第３の実施の形態にかかるシステム１の全体構成とユースシーンとを示すイメージ図である。
【図８】第３の実施の形態にかかるディスプレイ装置１００の情報処理を示すフローチャートである。
【図９】第４の実施の形態にかかるシステム１の全体構成とユースシーンとを示すイメージ図である。
【図１０】第４の実施の形態にかかるディスプレイ装置１００の情報処理を示すフローチャートである。
【図１１】第８の実施の形態にかかるシステム１の全体構成とユースシーンとを示すイメージ図である。
【図１２】第９の実施の形態にかかるシステム１の全体構成とユースシーンとを示すイメージ図である。
【図１３】第１０の実施の形態にかかるシステム１の全体構成とユースシーンとを示すイメージ図である。
【図１４】第１１の実施の形態にかかるシステム１の第３の全体構成とユースシーンとを示すイメージ図である。
【図１５】第１２の実施の形態にかかるシステム１の全体構成とユースシーンとを示すイメージ図である。
【発明を実施するための形態】
【００１５】
以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。
＜第１の実施の形態＞
＜システム１の全体構成＞
【００１６】
まず、図１および図２を参照して、本実施の形態にかかるシステム１の全体構成について説明する。なお、図１は、本実施の形態にかかるシステム１の全体構成と第１のユースシーンとを示すイメージ図である。図２は、本実施の形態にかかるシステム１の全体構成と第２のユースシーンとを示すイメージ図である。
【００１７】
図１および図２を参照して、本実施の形態にかかるシステム１は、コンビニやスーパーなどのレジ付近に配置される。システム１は、客が閲覧するためのディスプレイ装置１００と、ディスプレイ装置１００の前にいる客の視線を取得するためのカメラ２００とを含む。
【００１８】
ディスプレイ装置１００は、顧客が閲覧するための第１のディスプレイと、店員が閲覧するための第２のディスプレイとを有する。本実施の形態においては、第１のディスプレイと第２のディスプレイとは、背中合わせに配置されている。
【００１９】
ディスプレイ装置１００と、カメラ２００とは、有線または無線によって接続されている。ディスプレイ装置１００は、カメラ２００が取得した画像データを取得することができる。ただし、カメラ２００は、ディスプレイ装置１００の客側の表面に搭載される形態であってもよい。
＜システムのユースシーン＞
【００２０】
次に、本実施の形態にかかるシステム１の代表的なユースシーンについて説明する。まず、図１を参照して、本実施の形態にかかるシステム１の第１のユースシーンについて説明する。
【００２１】
図１（ａ）に示すように、客がレジのディスプレイ装置１００の前に来ると、自動的に、あるいは店員によって、第１のディスプレイがお薦めの商品を選択可能に表示する。そして、カメラ２００が、逐次、客の顔の画像データを、ディスプレイ装置１００に送信する。ディスプレイ装置１００は、第２のディスプレイに、第１のディスプレイと同様の画面を表示しながら、客の視線の先にある第１のディスプレイの位置を表示する。これによって、店員が、客の見ている位置や商品などを把握することができる。
【００２２】
図１（ｂ）に示すように、店員が、第２のディスプレイの客が見ている商品のボタンにタッチすると、第１のディスプレイにおける当該商品の表示が変わる。たとえば、当該商品の周囲を、黄色や赤で点滅させたりする。この状態で、店員が、当該商品の説明をすることが好ましい。
【００２３】
このように、本実施の形態にかかるシステム１においては、客が見ている商品を店員が把握することができるで、効果的な営業を行うことができる。また、客も、店員が説明してくれている商品がどれであるかをすぐに理解することができる。
【００２４】
次に、図２を参照して、本実施の形態にかかるシステム１の第２のユースシーンについて説明する。図２（ａ）に示すように、客がレジのディスプレイ装置１００の前に来ると、自動的に、あるいは店員によって、第１のディスプレイは、言語の選択画面を表示する。そして、カメラ２００が、逐次、客の顔の画像データを、ディスプレイ装置１００に送信する。ディスプレイ装置１００は、第２のディスプレイに、第１のディスプレイと同様の画面を表示しながら、客の視線の先の位置を表示する。これによって、店員が、客の見ている位置を把握することができる。
【００２５】
図２（ｂ）に示すように、店員が、第２のディスプレイの客が見ている言語のボタンにタッチすると、第１のディスプレイにおける当該言語の表示が変わる。たとえば、当該言語の周囲を、黄色や赤で点滅させたりする。この状態で、店員が、当該言語の説明をしたり、そのまま店員が当該言語の選択命令を入力したりする。なお、言語の選択命令は、客が第１のディスプレイにタッチするか、店員が第２のディスプレイに２回タッチする、または長押しするなどして、入力される。
【００２６】
このように、本実施の形態にかかるシステム１においては、客が見ている言語を店員が把握することができるで、接客がスムーズに行われ、店員の言語を話すことができない客も安心してレジにて買い物ができる。
【００２７】
以下では、このような機能を実現するためのシステム１について詳細に説明する。
＜ディスプレイ装置１００のハードウェア構成＞
【００２８】
まず、システム１を構成するディスプレイ装置１００のハードウェア構成の一態様について説明する。なお、図３は、本実施の形態にかかるシステム１のハードウェア構成を表わすブロック図である。
【００２９】
図３を参照して、本実施の形態にかかるディスプレイ装置１００は、主たる構成要素として、プロセッサ１１０と、メモリ１２０と、第１のタッチパネル１３０（ディスプレイ１３１とポインティングデバイス１３２）と、第２のタッチパネル１４０（ディスプレイ１４１とポインティングデバイス１４２）と、通信インターフェイス１６０と、マイク１７０と、スピーカ１８０とを含む。
【００３０】
プロセッサ１１０は、メモリ１２０あるいは外部の記憶媒体に記憶されているプログラムを実行することによって、ディスプレイ装置１００の各部を制御する。すなわち、プロセッサ１１０は、メモリ１２０に格納されているプログラムを実行することによって、後述する各種の処理を実現する。
【００３１】
メモリ１２０は、各種のＲＡＭ（Random Access Memory）や各種のＲＯＭ（Read Only Memory）などによって実現される。メモリ１２０は、たとえば、プロセッサ１１０によって実行されるプログラムや、プロセッサ１１０によるプログラムの実行により生成されたデータ、第１および第２のタッチパネル１３０，１４０から入力されたデータ、カメラ２００から受信した画像データ、画像データから算出した視線の位置データ、第１および第２のタッチパネル１３０，１４０に表示すべき商品のデータや広告のデータなどを記憶する。
【００３２】
第１および第２のディスプレイ１３１，１４１は、プロセッサ１１０からの信号に基づいて、文字や画像、たとえば図１および図２などに示す画面を出力する。第１および第２のポインティングデバイス１３２，１４２は、ユーザからの命令を受け付けて当該命令をプロセッサ１１０に入力する。なお、本実施の形態においては、ディスプレイ装置１００は、第１のディスプレイ１３１と第１のポインティングデバイス１３２とが組み合わされた第１のタッチパネル１３０と、第２のディスプレイ１４１と第２のポインティングデバイス１４２とが組み合わされた第２のタッチパネル１４０とを有する。
【００３３】
通信インターフェイス１６０は、アンテナやコネクタによって実現される。通信インターフェイス１６０は、有線通信あるいは無線通信によって他の装置、たとえばカメラ２００との間でデータをやり取りする。プロセッサ１１０は、通信インターフェイス１６０を介して、カメラ２００から画像データを受信したり、商品の購入履歴をサーバに送信したりする。
【００３４】
マイク１７０は、各種の音声を受け付けて、音声信号をプロセッサ１１０に入力する。スピーカ１８０は、プロセッサ１１０からの音声信号に基づいて、各種の音声を出力する。
＜カメラ２００のハードウェア構成＞
【００３５】
次に、システム１を構成するカメラ２００のハードウェア構成の一態様について説明する。
【００３６】
図３を参照して、本実施の形態にかかるカメラ２００は、主たる構成要素として、プロセッサ２１０と、メモリ２２０と、画像センサ２３０と、通信インターフェイス２６０とを含む。
【００３７】
プロセッサ２１０は、メモリ２２０あるいは外部の記憶媒体に記憶されているプログラムを実行することによって、カメラ２００の各部を制御する。すなわち、プロセッサ２１０は、メモリ２２０に格納されているプログラムを実行することによって、後述する各種の処理を実現する。
【００３８】
メモリ２２０は、各種のＲＡＭや各種のＲＯＭなどによって実現される。メモリ２２０は、たとえば、画像センサ２３０が読み取った画像データを一時的に記憶する。
【００３９】
画像センサ２３０は、複数の撮像素子を含む。画像センサ２３０は、外部からの光を検知して、画像信号をプロセッサ２１０に入力する。プロセッサ３１０は、画像信号に基づいて、画像データをメモリ２２０に格納する。
【００４０】
通信インターフェイス２６０は、アンテナやコネクタによって実現される。通信インターフェイス２６０は、有線通信あるいは無線通信によって他の装置、たとえばディスプレイ装置１００との間でデータをやり取りする。たとえば、プロセッサ２１０は、通信インターフェイス１６０を介して、メモリ２２０に一時的に記憶した画像データをディスプレイ装置１００に送信する。
＜ディスプレイ装置１００のプロセッサ１１０の処理＞
【００４１】
次に、図４を参照しながら、本実施の形態にかかるディスプレイ装置１００の情報処理について説明する。なお、図４は、本実施の形態にかかるディスプレイ装置１００の情報処理を示すフローチャートである。
【００４２】
まず、カメラ２００は、定期的に画像データを取得して、ディスプレイ装置１００に画像データを送信する。ディスプレイ装置１００のプロセッサ１１０は、カメラ２００からデータを受信すると、以下の処理を実行する。
【００４３】
プロセッサ１１０は、受信したデータから画像データを取得する（ステップＳ１０２）。
【００４４】
プロセッサ１１０は、画像データから、カメラ２００に対する客の視線の方向を取得する。プロセッサ１１０は、カメラ２００に対する客の視線の方向と、カメラ２００に対する第１のディスプレイ１３１の位置および向きと基づいて、第１のディスプレイ１３１の画面のうちの視線の先の位置を計算する（ステップＳ１０４）。
【００４５】
プロセッサ１１０は、第２のディスプレイ１４１に、第１のディスプレイ１３１に表示されている画像を表示させるともに、当該画像上に客の視線の位置を表示させる（ステップＳ１０６）。
【００４６】
プロセッサ１１０は、第２のポインティングデバイス１４２を介して、店員が第２のタッチパネル１４０にタッチしたか否かを判断する（ステップＳ１０８）。プロセッサ１１０は、店員が第２のタッチパネル１４０にタッチしなかった場合（ステップＳ１０８にてＮＯの場合）、ステップＳ１１２からの処理を実行する。
【００４７】
一方、プロセッサ１１０は、店員が第２のタッチパネル１４０のいずれかの商品または言語にタッチした場合（ステップＳ１０８にてＹＥＳの場合）、第１のディスプレイ１３１の当該商品または当該言語の部分が目立つように、表示態様を変更する（ステップＳ１１０）。
【００４８】
プロセッサ１１０は、第１のポインティングデバイス１３２を介して、客が第１のタッチパネル１３０にタッチしたか否かを判断する（ステップＳ１１２）。プロセッサ１１０は、客が第１のタッチパネル１３０にタッチしなかった場合（ステップＳ１１２にてＮＯの場合）、通信インターフェイス１６０を介して、次の画像データを待ち受ける。
【００４９】
一方、プロセッサ１１０は、客が第１のタッチパネル１３０のいずれかの商品または言語にタッチした場合（ステップＳ１１２にてＹＥＳの場合）、当該命令を実行する（ステップＳ１１４）。たとえば、プロセッサ１１０は、客が商品のボタンにタッチした場合は、当該商品の詳細な説明を第１のディスプレイ１３１に表示させたり、当該商品の購入を受け付けたりする。あるいは、プロセッサ１１０は、客が言語のボタンにタッチした場合は、第１のディスプレイ１３１の表示言語を当該言語のものに変更する。プロセッサ１１０は、通信インターフェイス１６０を介して、次の画像データを待ち受ける。
【００５０】
なお、プロセッサ１１０は、店員が第２のタッチパネル１４０のいずれかの商品または言語をダブルクリックした場合にも、ステップＳ１１４と同様の処理を実行することが好ましい。
＜第２の実施の形態＞
【００５１】
第１の実施の形態にかかるシステム１は、客が第１のディスプレイのどの部分をみているのかを店員に伝えるものであった。本実施の形態にかかるシステム１は、第１の実施の形態のシステム１に、第１のディスプレイの周囲、たとえばレジ付近のどのエリアをみているかを店員に伝える機能を追加したものである。
＜システムの全体構成＞
【００５２】
まず、図５を参照して、本実施の形態にかかるシステム１の全体構成について説明する。なお、図５は、本実施の形態にかかるシステム１の全体構成とユースシーンとを示すイメージ図である。
【００５３】
図５を参照して、本実施の形態にかかるシステム１は、客が閲覧するためのディスプレイ装置１００と、ディスプレイ装置１００の前にいる客の視線を取得するための第１のカメラ２００Ａと、客の方向からディスプレイ装置１００の周辺を撮影するための第２のカメラ２００Ｂとを含む。
【００５４】
ディスプレイ装置１００は、顧客が閲覧するための第１のディスプレイと、店員が閲覧するための第２のディスプレイとを有する。本実施の形態においても、第１のディスプレイと第２のディスプレイとが、背中合わせに配置されている。
【００５５】
ディスプレイ装置１００と、第１のカメラ２００Ａおよび第２のカメラ２００Ｂとは、有線または無線によって接続されている。ディスプレイ装置１００は、第１のカメラ２００Ａと第２のカメラ２００Ｂとが取得した画像データを取得することができる。
＜システムのユースシーン＞
【００５６】
次に、本実施の形態にかかるシステム１の代表的なユースシーンについて説明する。まず、図５を参照して、本実施の形態にかかるシステム１のユースシーンについて説明する。
【００５７】
図５（ａ）に示すように、客がレジの第１のディスプレイの前に来ると、自動的に、あるいは店員によって、第１のディスプレイは、お薦めの商品を表示する。そして、第１のカメラ２００Ａが、逐次、客の顔の画像データを、ディスプレイ装置１００に送信する。第２のカメラ２００Ｂは、ディスプレイ装置１００を含む、レジ周辺の画像データをディスプレイ装置１００に送信する。
【００５８】
ディスプレイ装置１００は、客が第１のディスプレイを見ている場合には、第２のディスプレイに、第１のディスプレイと同様の画面を表示しながら、客の視線がある位置を画面上に表示する。そして、本実施の形態においては、ディスプレイ装置１００は、客が第１のディスプレイの周囲を見ている場合には、第２のカメラ２００Ｂからの画像を利用して、第２のディスプレイに、第１のディスプレイの周囲あるいはレジ周辺の画像を表示しながら、客の視線がある位置を画面上に表示する。これによって、店員は、第１のディスプレイの画面に限らず、客の見ている位置を把握することができる。
【００５９】
図５（ｂ）に示すように、店員が、第２のディスプレイの客が見ている部分にタッチすると、第１のディスプレイは、第１のディスプレイの周囲の画像を表示しながら、店員がタッチした位置にポインタなどを表示する。この状態で、店員が、当該商品の説明をすることが好ましい。
【００６０】
このように、本実施の形態にかかるシステム１においては、客が見ている商品を店員が把握することができるで、効果的な営業を行うことができる。また、客も、店員が説明している商品がどれかをすぐに理解できるため、商品の理解が容易になる。
【００６１】
以下では、このような機能を実現するためのシステム１について詳細に説明する。ただし、ディスプレイ装置１００のハードウェア構成は、第１の実施の形態のディスプレイ装置１００のハードウェア構成と同様であるため、ここでは説明を繰り返さない。また、第１のカメラ２００Ａと第２のカメラのハードウェア構成は、第１の実施の形態のカメラ２００のハードウェア構成と同様であるため、ここでは説明を繰り返さない。
＜ディスプレイ装置１００のプロセッサ１１０の処理＞
【００６２】
次に、図６を参照しながら、本実施の形態にかかるディスプレイ装置１００の情報処理について説明する。なお、図６は、本実施の形態にかかるディスプレイ装置１００の情報処理を示すフローチャートである。
【００６３】
カメラ２００は、定期的に画像データを取得して、ディスプレイ装置１００に送信する。ディスプレイ装置１００のプロセッサ１１０は、カメラ２００からデータを受信すると、以下の処理を実行する。
【００６４】
プロセッサ１１０は、受信したデータから画像データを取得する（ステップＳ２０２）。
【００６５】
プロセッサ１１０は、画像データから、カメラ２００に対する客の視線の方向を取得する。プロセッサ１１０は、カメラ２００に対する客の視線の方向と、カメラ２００に対する第１のディスプレイ１３１の位置および向きと基づいて、第１のディスプレイ１３１に対する視線の位置を計算する（ステップＳ２０４）。
【００６６】
本実施の形態においては、プロセッサ１１０は、客の視線の先が第１のディスプレイ１３１の画面内にあるか否かを判断する（ステップＳ２０５）。
【００６７】
客の視線が第１のディスプレイ１３１の画面内にある場合（ステップＳ２０５にてＹＥＳである場合）、プロセッサ１１０は、第２のディスプレイ１４１に、第１のディスプレイ１３１に表示されている画像を表示させるともに、当該画像のうちの客の視線の先の位置を表示させる（ステップＳ２０６）。プロセッサ１１０は、ステップＳ２０８からの処理を実行する。
【００６８】
一方、客の視線が第１のディスプレイ１３１の外側にある場合（ステップＳ２０５にてＮＯである場合）、プロセッサ１１０は、第２のディスプレイ１４１に、第２のカメラ２００Ｂからの画像データに基づいて第１のディスプレイ１３１の周囲の画像を表示させるともに、当該画像のうちの客の視線の先の位置を表示させる（ステップＳ２０７）。
【００６９】
プロセッサ１１０は、第２のポインティングデバイス１４２を介して、店員が第２のタッチパネル１４０にタッチしたか否かを判断する（ステップＳ２０８）。プロセッサ１１０は、店員が第２のタッチパネル１４０にタッチしなかった場合（ステップＳ２０８にてＮＯの場合）、ステップＳ２１２からの処理を実行する。
【００７０】
一方、プロセッサ１１０は、店員が第２のタッチパネル１４０のいずれかの商品または言語にタッチした場合（ステップＳ２０８にてＹＥＳの場合）、第１のディスプレイ１３１の当該商品または当該言語の部分が目立つように、表示態様を変更する（ステップＳ２１０）。
【００７１】
より詳細には、店員が第２のタッチパネル１４０にタッチした時に、客の視線が第１のディスプレイ１３１の内側にある場合には、プロセッサ１１０は、第１のディスプレイ１３１に、通常の画面において、当該商品または当該言語の部分が目立つように、表示態様を変更させる。一方、店員が第２のタッチパネル１４０にタッチした時に、客の視線が第１のディスプレイ１３１の外側にある場合には、プロセッサ１１０は、第１のディスプレイ１３１に、第２のカメラ２００Ｂが撮影したレジ周辺の画像を表示させながら、店員がタッチした部分が目立つように、表示態様を変更したり、当該部分にポインタを表示させたりする。
【００７２】
プロセッサ１１０は、第１のポインティングデバイス１３２を介して、客が第１のタッチパネル１３０にタッチしたか否かを判断する（ステップＳ２１２）。プロセッサ１１０は、客が第１のタッチパネル１３０にタッチしなかった場合（ステップＳ２１２にてＮＯの場合）、通信インターフェイス１６０を介して、次の画像データを待ち受ける。
【００７３】
一方、プロセッサ１１０は、客が第１のタッチパネル１３０のいずれかの商品または言語にタッチした場合（ステップＳ２１２にてＹＥＳの場合）、該当する命令を実行する（ステップＳ２１４）。たとえば、プロセッサ１１０は、客が商品のボタンにタッチした場合は、当該商品の詳細な説明を第１のディスプレイ１３１に表示させたり、当該商品の購入を受け付けたりする。あるいは、プロセッサ１１０は、客が言語のボタンにタッチした場合は、第１のディスプレイ１３１の表示言語を当該言語のものに変更する。プロセッサ１１０は、通信インターフェイス１６０を介して、次の画像データを待ち受ける。
【００７４】
なお、プロセッサ１１０は、店員が第２のタッチパネル１４０のいずれかの商品または言語をダブルクリックした場合にも、ステップＳ１１４と同様の処理を実行することが好ましい。
＜第３の実施の形態＞
【００７５】
本実施の形態にかかるシステム１は、第１または第２の実施の形態のシステム１に、客が店員の方を向いているときに、その旨を店員に伝えることができる機能を追加したものである。
＜システムの全体構成＞
【００７６】
まず、図７を参照して、本実施の形態にかかるシステム１の全体構成について説明する。なお、図７は、本実施の形態にかかるシステム１の全体構成とユースシーンとを示すイメージ図である。
【００７７】
図７を参照して、本実施の形態にかかるシステム１は、客が閲覧するためのディスプレイ装置１００と、ディスプレイ装置１００の前にいる客の視線を取得するためのカメラ２００とを含む。ディスプレイ装置１００は、顧客が閲覧するための第１のディスプレイと、店員が閲覧するための第２のディスプレイとを有する。第１のディスプレイと第２のディスプレイとが、背中合わせに配置されている。
【００７８】
ディスプレイ装置１００とカメラ２００とは、有線または無線によって接続されている。ディスプレイ装置１００は、カメラ２００が取得した画像データを取得することができる。
＜システムのユースシーン＞
【００７９】
次に、本実施の形態にかかるシステム１の代表的なユースシーンについて説明する。まず、図７を参照して、本実施の形態にかかるシステム１のユースシーンについて説明する。
【００８０】
図７（ａ）に示すように、客がレジのディスプレイ装置１００の前に来ると、自動的に、あるいは店員によって、第１のディスプレイは、お薦め商品の選択画面や言語の選択画面を表示する。そして、カメラ２００が、逐次、客の顔の画像データを、ディスプレイ装置１００に送信する。ディスプレイ装置１００は、第２のディスプレイに、第１のディスプレイと同様の画面を表示しながら、客の視線がある位置を画面上に表示する。これによって、店員が、客の見ている位置を把握することができる。
【００８１】
図７（ｂ）に示すように、客が店員の方を見ると、ディスプレイ装置１００は、カメラ２００からの画像データに基づいて、客の視線が店員の方向を向いていること把握する。ディスプレイ装置１００は、第２のディスプレイに、客が店員の方を向いていることを表示する。
【００８２】
このように、本実施の形態にかかるシステム１においては、店員が第２のディスプレイに集中して、客が店員の方を向いていることに気が付かないという事態の発生を抑制することができる。
【００８３】
以下では、このような機能を実現するためのシステム１について詳細に説明する。ただし、ディスプレイ装置１００のハードウェア構成は、第１の実施の形態のディスプレイ装置１００のハードウェア構成と同様であるため、ここでは説明を繰り返さない。また、カメラ２００のハードウェア構成は、第１の実施の形態のカメラ２００のハードウェア構成と同様であるため、ここでは説明を繰り返さない。
＜ディスプレイ装置１００のプロセッサ１１０の処理＞
【００８４】
次に、図８を参照しながら、本実施の形態にかかるディスプレイ装置１００の情報処理について説明する。なお、図８は、本実施の形態にかかるディスプレイ装置１００の情報処理を示すフローチャートである。
【００８５】
カメラ２００は、定期的に画像データを取得して、ディスプレイ装置１００に送信する。ディスプレイ装置１００のプロセッサ１１０は、カメラ２００からデータを受信すると、以下の処理を実行する。
【００８６】
プロセッサ１１０は、受信したデータから画像データを取得する（ステップＳ３０２）。
【００８７】
プロセッサ１１０は、画像データから、カメラ２００に対する客の視線の方向を取得する。プロセッサ１１０は、カメラ２００に対する客の視線の方向と、カメラ２００に対する第１のディスプレイ１３１の位置および向きと基づいて、第１のディスプレイ１３１の画面に対する視線の位置を計算する（ステップＳ３０４）。
【００８８】
本実施の形態においては、プロセッサ１１０は、客の視線が第１のディスプレイ１３１内にあるか否かを判断する（ステップＳ３０５）。
【００８９】
客の視線が第１のディスプレイ１３１の内側にある場合（ステップＳ３０５にてＹＥＳである場合）、プロセッサ１１０は、第２のディスプレイ１４１に、第１のディスプレイ１３１に表示されている画像を表示させるともに、当該画像のうちの客の視線の位置を表示させる（ステップＳ３０６）。プロセッサ１１０は、ステップＳ３０８からの処理を実行する。
【００９０】
一方、客の視線が第１のディスプレイ１３１の外側にある場合（ステップＳ３０５にてＮＯである場合）、プロセッサ１１０は、第２のディスプレイ１４１に、第１のディスプレイ１３１の周囲の画像を表示させるともに、当該画像のうちの客の視線の位置を表示させる（ステップＳ３０７）。
【００９１】
さらに、プロセッサ１１０は、客の視線が店員の方へ向いているか否かを判断する（ステップＳ３２２）。たとえば、プロセッサ１１０は、客の視線が第１のディスプレイ１３１または第２のディスプレイ１４１の上方に位置する場合に、客の視線が店員の方へ向いていると判断する。あるいは、プロセッサ１１０は、第２のカメラ２００Ｂから店員の位置を取得して、第１のカメラ２００Ａからのデータに基づいて、客の視線が店員の方へ向いているか否かを判断してもよい。
【００９２】
そして、客の視線が店員の方へ向いていない場合（ステップＳ３２２にてＮＯの場合）、プロセッサ１１０は、ステップＳ３０８の処理へ進む。一方、客の視線が店員の方へ向いている場合（ステップＳ３３２にてＹＥＳである場合）、プロセッサ１１０は、第２のディスプレイ１４１に、客が店員の方を向いている旨を出力する（ステップＳ３２４）。
【００９３】
ステップＳ３０８以降の処理については、第２の実施の形態のステップＳ２０８以降の処理と同様であるため、ここでは説明を繰り返さない。
＜第４の実施の形態＞
【００９４】
第１の実施の形態にかかるシステム１は、客が第１のディスプレイのどの部分をみているのかを店員に伝えるものであった。本実施の形態にかかるシステム１は、第１〜第３の実施の形態のシステム１に、客がレジやディスプレイ装置１００の方を向いているときに音声認識処理を実行し、客がいない場合や客が別の方向を向いているときに音声認識処理を実行しないという機能を追加したものである。
＜システムの全体構成＞
【００９５】
まず、図９を参照して、本実施の形態にかかるシステム１の全体構成について説明する。なお、図９は、本実施の形態にかかるシステム１の全体構成とユースシーンとを示すイメージ図である。
【００９６】
図９を参照して、本実施の形態にかかるシステム１は、客が閲覧するためのディスプレイ装置１００と、ディスプレイ装置１００の前にいる客の視線を取得するためのカメラ２００とを含む。ディスプレイ装置１００は、顧客が閲覧するための第１のディスプレイと、店員が閲覧するための第２のディスプレイと、マイクとを有する。本実施の形態においても、第１のディスプレイと第２のディスプレイとが、背中合わせに配置されている。
【００９７】
ディスプレイ装置１００と、カメラ２００とは、有線または無線によって接続されている。ディスプレイ装置１００は、カメラ２００が取得した画像データを取得することができる。
＜システムのユースシーン＞
【００９８】
次に、本実施の形態にかかるシステム１の代表的なユースシーンについて説明する。まず、図９を参照して、本実施の形態にかかるシステム１のユースシーンについて説明する。
【００９９】
図９（ａ）に示すように、客がレジのディスプレイ装置１００の前に来ると、自動的に、あるいは店員によって、第１のディスプレイは、お薦めの商品を表示する。そして、カメラ２００が、逐次、客の顔の画像データを、ディスプレイ装置１００に送信する。ディスプレイ装置１００は、客が第１のディスプレイを見ている場合には、第２のディスプレイに、第１のディスプレイと同様の画面を表示しながら、客の視線がある位置を画面上に表示する。
【０１００】
そして、特に、本実施の形態においては、客が横を向いて話をしている場合には、マイクが音声認識処理を実行しない。
【０１０１】
一方、図９（ｂ）に示すように、客がディスプレイ装置１００や店員の方向を見ている場合には、ディスプレイ装置１００はマイクが拾った音声を認識し、店員の言語に翻訳し、翻訳結果を第２のディスプレイに表示する。
【０１０２】
そして、図９（ｃ）に示すように、店員は、客が見ている商品または位置と、翻訳結果とに基づいて、返事をする。ディスプレイ装置１００は、返事の音声をマイクで取得して、客の言語に翻訳し、翻訳結果をスピーカから出力する。
【０１０３】
なお、店員は、第２のディスプレイの客が見ている部分にタッチすることによって、第１のディスプレイが店員のタッチした位置にポインタなどを表示した状態で、当該商品の説明を音声で入力してもよい。
【０１０４】
このように、本実施の形態にかかるシステム１においては、店員に問いかけられた可能性が高い場合にだけ翻訳結果を出力するため、システム１や店員が無駄な労力を払う必要がなくなる。
【０１０５】
以下では、このような機能を実現するためのシステム１について詳細に説明する。ただし、ディスプレイ装置１００のハードウェア構成は、第１の実施の形態のディスプレイ装置１００のハードウェア構成と同様であるため、ここでは説明を繰り返さない。また、カメラ２００のハードウェア構成も、第１の実施の形態のカメラ２００のハードウェア構成と同様であるため、ここでは説明を繰り返さない。
【０１０６】
なお、本実施の形態にかかるディスプレイ装置１００は、１つのマイク１７０を有するものであるが、たとえばディスプレイ装置１００は客の方に向けた第１の指向性マイクと店員の方に向けた第２の指向性マイクとを有するものであってもよい。そして、プロセッサ１１０は、客が向いている方向に応じて、第１の指向性マイクで取得した音声認識処理を実行するか否かを判断し、店員が向いている方向に応じて、第２の指向性マイクで取得した音声認識処理を実行するか否かを判断してもよい。
＜ディスプレイ装置１００のプロセッサ１１０の処理＞
【０１０７】
次に、図１０を参照しながら、本実施の形態にかかるディスプレイ装置１００の情報処理について説明する。なお、図１０は、本実施の形態にかかるディスプレイ装置１００の情報処理を示すフローチャートである。
【０１０８】
カメラ２００は、定期的に画像データを取得して、ディスプレイ装置１００に送信する。ディスプレイ装置１００のプロセッサ１１０は、カメラ２００からデータを受信すると、以下の処理を実行する。
【０１０９】
プロセッサ１１０は、受信したデータから画像データを取得する（ステップＳ４０２）。
【０１１０】
プロセッサ１１０は、画像データから、カメラ２００に対する客の視線の方向を取得する。プロセッサ１１０は、カメラ２００に対する客の視線の方向と、カメラ２００に対する第１のディスプレイ１３１の位置および向きと基づいて、第１のディスプレイ１３１に対する視線の位置を計算する（ステップＳ４０４）。
【０１１１】
本実施の形態においては、プロセッサ１１０は、客の視線がディスプレイ装置１００や店員の方向を向いているか否かを判断する（ステップＳ４０６）。
【０１１２】
客の視線がディスプレイ装置１００や店員の方向を向いていない場合（ステップＳ４０６にてＮＯである場合）、プロセッサ１１０は、通信インターフェイス１６０を介して、次の画像データを待ち受ける。
【０１１３】
客の視線がディスプレイ装置１００や店員の方向を向いている場合（ステップＳ４０６にてＹＥＳである場合）、プロセッサ１１０は、マイク１７０を介して音声を取得し、音声を翻訳し、翻訳結果をスピーカ１８０または第２のディスプレイ１４１に出力させる（ステップＳ４０８）。プロセッサ１１０は、通信インターフェイス１６０を介して、次の画像データを待ち受ける。
＜第５の実施の形態＞
【０１１４】
第４の実施の形態にかかるシステム１は、客がレジやディスプレイ装置１００の方を向いているときにマイクから音声を取得し、音声認識処理を実行し、翻訳処理を実行し、翻訳結果を出力するものであった。一方、客がいない場合や客が別の方向を向いているときに音声認識処理以降を実行しないというものであった。
【０１１５】
しかしながら、ディスプレイ装置１００のプロセッサ１１０は、客がいない場合や客が別の方向を向いているときはマイクを動作させずに音声を取得することしないものであってもよい。
＜第６の実施の形態＞
【０１１６】
あるいは、ディスプレイ装置１００のプロセッサ１１０は、客がいない場合や客が別の方向を向いているときはマイクから音声を取得し、音声認識処理を実行するが、翻訳処理以降を実行しないものであってもよい。
＜第７の実施の形態＞
【０１１７】
あるいは、ディスプレイ装置１００のプロセッサ１１０は、客がいない場合や客が別の方向を向いているときはマイクから音声を取得し、音声認識処理を実行し、翻訳処理も実行するが、翻訳結果を出力しないものであってもよい。
＜第８の実施の形態＞
【０１１８】
第１〜第７の実施の形態にかかるシステム１は、ディスプレイ装置１００がほとんどの処理を実行するものであった。しかしながら、ディスプレイ装置１００やカメラ２００の役割分担は、そのような形態には限られない。
【０１１９】
たとえば、図１１に示すように、システム１は、サーバ３００を有するものであってもよい。サーバ３００は、ＬＡＮまたはＷＡＮおよび／またはインターネットなどを介して、ディスプレイ装置１００とデータの送受信が可能である。そして、ディスプレイ装置１００のプロセッサ１１０の役割の一部または全部をサーバ３００のプロセッサが担ったり、ディスプレイ装置１００が記憶しているデータの一部または全部をサーバ３００が記憶したりしてもよい。
＜第９の実施の形態＞
【０１２０】
第１〜第８の実施の形態にかかるシステム１は、第１のディスプレイと第２のディスプレイとが背中合わせに配置されるものであった。しかしながら、第１のディスプレイと第２のディスプレイとはそのような配置に限定されるものではない。
【０１２１】
たとえば、図１２に示すように、第１のディスプレイと第２のディスプレイとが別々の装置であってもよい。換言すれば、第１の装置１００Ａが第１のディスプレイ１３１を搭載し、第２の装置１００Ｂが第２のディスプレイ１４１を搭載し、いずれかの装置１００Ａ，１００Ｂがディスプレイ装置１００の機能の大部分を搭載してもよい。そして、第１の装置１００Ａと第２の装置１００Ｂとカメラ２００とが、互いにデータ通信可能であればよい。
＜第１０の実施の形態＞
【０１２２】
あるいは、図１３に示すように、レジ付近または店員の控室または店の事務室に配置されるパーソナルコンピュータ４００などの別の通信機器が、第１から第９の実施の形態のディスプレイ装置１００の機能の一部、たとえばプロセッサ１１０やメモリ１２０やマイク１７０やスピーカ１８０などの機能の一部、または全部を搭載してもよい。そして、第１の装置１００Ａが第１のディスプレイ１３１を搭載し、第２の装置１００Ｂが第２のディスプレイ１４１を搭載してもよい。当然に、パーソナルコンピュータ４００は、第１の装置１００Ａ、第２の装置１００Ｂ、カメラ２００などと、直接的または間接的にデータ通信可能である。
＜第１１の実施の形態＞
【０１２３】
また、図１４に示すように、パーソナルコンピュータ４００の代わりに、システム１は、第１のディスプレイ１３１と第２のディスプレイ１４１とカメラ２００と、ＬＡＮまたはＷＡＮおよび／またはインターネットなどを介して通信可能なサーバ３００を利用してもよい。
＜第１２の実施の形態＞
【０１２４】
第１〜第１１の実施の形態にかかるシステム１は、店員向けの各種の情報を第２のディスプレイからテキストまたは画像によって出力するものであり、客向けの各種の情報を第１のディスプレイからテキストまたは画像によって出力するものであった。しかしながら、出力形態はこれに限定されるものではない。
【０１２５】
図１５に示すように、店員向けの各種の情報は、店員が装着しているイヤホン５００から出力されるものであってもよい。すなわち、本実施の形態にかかるディスプレイ装置１００のプロセッサ１１０は、第２のディスプレイ１４１に出力するべき情報を、通信インターフェイス１６０を介して、イヤホン５００から出力させる。たとえば、プロセッサ１１０は、イヤホン５００に、「お客様はディスプレイの唐揚げを見ています」と出力させたり、「お客様は肉まんの棚を見ています」と出力させたり、「お客様はタバコの棚を見ています」と出力させたり、「お客様が店員を見ています。」と出力させたり、翻訳結果を出力させたりする。
【０１２６】
これによって、店員は、第２のディスプレイを見なくても、客が見ているものを知ることができるので、「唐揚げ、できたてですよ。」とか「肉まん、１割引きですよ。」などと、効率的な商品の提案ができる。
【０１２７】
なお、この場合にも、プロセッサ１１０は、各種情報の音声出力に合わせて、第２のディスプレイ１４１にも各種情報を表示させてもよい。
＜第１３の実施の形態＞
【０１２８】
あるいは、システム１のプロセッサ１１０は、客向けの各種の情報を、ディスプレイ装置１００のスピーカ１８０から出力させてもよい。
【０１２９】
この場合も、プロセッサ１１０は、各種情報の音声出力に合わせて、第１のディスプレイ１３１にも各種情報を表示させてもよい。
＜第１４の実施の形態＞
【０１３０】
第１〜第１３の実施の形態にかかるシステム１は、レジの前にいる客の視線を、レジの後にいる店員が利用するためのものであった。しかしながら、客や店員は、レジの前ではなく、別の場所にいてもよい。
【０１３１】
たとえば、第１のディスプレイは客に見える場所であれば、レジに限らず、商品棚の近くに配置してもよい。あるいは、第１のディスプレイは、テレビショッピングの視聴に利用されるテレビであってもよいし、ネットショッピングに利用されるパーソナルコンピュータのディスプレイであってもよい。
【０１３２】
また、第２のディスプレイは、サービスや商品の提供者に見える場所であれば、レジに限らず、店員の控室や、テレフォンセンターなどに配置されてもよい。
＜第１５の実施の形態＞
【０１３３】
さらに上記のシステム１は、サービスや商品の販売以外の目的で利用されてもよい。たとえば、店員と客とに利用される代わりに、上記のシステム１を利用する教師が、生徒の視線を確認しながら、授業を進めることも可能である。
＜第１６の実施の形態＞
【０１３４】
上記の第１〜第１５の実施の形態にかかるシステム１は、カメラ２００からの画像に基づいて客の視線を取得するものであった。しかしながら、本実施の形態として、システム１は、カメラ２００からの画像データに限らず、他の画像センサ、熱センサ、音センサ、人感センサなどからの情報に基づいて、客の位置や視線を取得するものであってもよい。なお、視線の方向の検出方法は、公知のいずれかの方法を採用すればよい。
＜その他の応用例＞
【０１３５】
本発明は、システム或いは装置にプログラムを供給することによって達成される場合にも適用できることはいうまでもない。そして、本発明を達成するためのソフトウェアによって表されるプログラムを格納した記憶媒体（あるいはメモリ）を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読出し実行することによっても、本発明の効果を享受することが可能となる。
【０１３６】
この場合、記憶媒体から読出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。
【０１３７】
また、コンピュータが読出したプログラムコードを実行することにより、前述した実施の形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）などが実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される場合も含まれることは言うまでもない。
【０１３８】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わる他の記憶媒体に書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される場合も含まれることは言うまでもない。
＜まとめ＞
【０１３９】
以上、第１〜第１６の実施の形態およびその応用例においては、第１のディスプレイ１３１と、センサ２００と、出力部１４１，５００と、制御部１１０と、を備えるシステム１が提供される。制御部１１０は、センサ２００からの情報に基づいて、第１のディスプレイ１３１の前にいる人の視線に関する情報を出力部１４１に出力させる。
【０１４０】
好ましくは、出力部１４１は、第２のディスプレイ１４１である。制御部１１０は、第２のディスプレイ１４１に、第１のディスプレイ１３１に表示されている画面上に視線の位置を表示させる。
【０１４１】
好ましくは、システム１は、入力部１４２をさらに備える。制御部１１０は、入力部１４２を介して第１のディスプレイ１３１の画面に表示されるオブジェクトを指定する命令を受け付け、第１のディスプレイ１３１における指定されたオブジェクトの表示を変える。
【０１４２】
好ましくは、制御部１１０は、入力部１４２を介して、画面に表示されるオブジェクトの選択命令を受け付ける。
【０１４３】
好ましくは、制御部１１０は、センサ２００からの情報に基づいて、視線が第１のディスプレイ１３１から外れた場合に、第１のディスプレイ１３１の周辺における視線に関する情報を出力部１４１，５００に出力させる。
【０１４４】
好ましくは、制御部１１０は、センサ２００からの情報に基づいて、視線が店員のいる方向を向いていることを出力部１４１，５００に出力させる。
【０１４５】
好ましくは、システム１は、マイク１７０をさらに備える。制御部１１０は、視線が第１のディスプレイ１３１の近傍または出力部１４１，５００の近傍を向いている場合に、マイク１７０を介して入力された音声の処理の結果を出力部１４１，５００に出力させる。
【０１４６】
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した説明ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
【符号の説明】
【０１４７】
１        ：システム
１００    ：ディスプレイ装置
１００Ａ  ：第１の装置
１００Ｂ  ：第２の装置
１１０    ：プロセッサ（制御部）
１２０    ：メモリ
１３０    ：第１のタッチパネル
１３１    ：第１のディスプレイ（出力部）
１３２    ：第１のポインティングデバイス（入力部）
１４０    ：第２のタッチパネル
１４１    ：第２のディスプレイ（出力部）
１４２    ：第２のポインティングデバイス（入力部）
１６０    ：通信インターフェイス
１７０    ：マイク
１８０    ：スピーカ
２００    ：カメラ
２００Ａ  ：第１のカメラ
２００Ｂ  ：第２のカメラ
２１０    ：プロセッサ
２２０    ：メモリ
２３０    ：画像センサ
２６０    ：通信インターフェイス
３００    ：サーバ
３１０    ：プロセッサ
４００    ：パーソナルコンピュータ
５００    ：イヤホン（出力部）
【図１】
2017084090.tif 000003
【図２】
2017084090.tif 000004
【図３】
2017084090.tif 000005
【図４】
2017084090.tif 000006
【図５】
2017084090.tif 000007
【図６】
2017084090.tif 000008
【図７】
2017084090.tif 000009
【図８】
2017084090.tif 000010
【図９】
2017084090.tif 000011
【図１０】
2017084090.tif 000012
【図１１】
2017084090.tif 000013
【図１２】
2017084090.tif 000014
【図１３】
2017084090.tif 000015
【図１４】
2017084090.tif 000016
【図１５】
2017084090.tif 000017