(57)【要約】【課題】複数人が同時に閲覧する情報提示面において、特定のユーザだけが視認可能なエリアと全ユーザが視認可能なエリアとを判別することが可能な情報処理装置および制御方法を提供する。【解決手段】提示情報に対する複数のユーザの視線を検出する視線検出部と、前記検出された複数のユーザの視線に基づいて、前記複数のユーザが視認して情報を共有する共有エリア、および他ユーザからは視認されず各ユーザの情報を秘匿する秘匿エリアの判定を行うエリア判定部と、を備える、情報処理装置。【選択図】図３
2016045623.tif 000002
【特許請求の範囲】
【請求項１】
提示情報に対する複数のユーザの視線を検出する視線検出部と、
前記検出された複数のユーザの視線に基づいて、前記複数のユーザが視認して情報を共有する共有エリア、および他ユーザからは視認されず各ユーザの情報を秘匿する秘匿エリアの判定を行うエリア判定部と、
を備える、情報処理装置。
【請求項２】
前記エリア判定部は、前記提示情報の提示面において、前記検出された複数のユーザの視線に応じた視界範囲が重なる領域を共有エリアと判定し、前記複数のユーザの視界範囲が互いに重ならない領域を秘匿エリアと判定する、請求項１に記載の情報処理装置。
【請求項３】
前記秘匿エリアは、さらに対象ユーザから一定距離内の領域で判定される、請求項２に記載の情報処理装置。
【請求項４】
前記秘匿エリアは、さらに前記共有エリアから一定距離離れた領域で判定される、請求項２に記載の情報処理装置。
【請求項５】
前記エリア判定部は、各ユーザのユーザコンテキストに応じて各ユーザの視界範囲の大きさを調整する、請求項２に記載の情報処理装置。
【請求項６】
前記ユーザコンテキストは、ユーザが何を見ている状態かを示し、当該ユーザの視線の動きから推定される、請求項５に記載の情報処理装置。
【請求項７】
前記情報処理装置は、
前記エリア判定部による判定の結果に応じて、提示面に提示する提示情報の出力制御を行う出力制御部をさらに備える、請求項１に記載の情報処理装置。
【請求項８】
前記出力制御部は、セキュリティ確保が必要な情報が展開された場合、当該情報を前記秘匿エリアに提示するよう制御する、請求項７に記載の情報処理装置。
【請求項９】
前記出力制御部は、前記秘匿エリアにおいて低解像度で情報を提示するよう制御する、請求項７に記載の情報処理装置。
【請求項１０】
前記出力制御部は、前記共有エリアに提示された情報がユーザ操作により当該ユーザの秘匿エリアに移動された場合、当該情報をコピーし、前記秘匿エリアに提示するよう制御する、請求項７に記載の情報処理装置。
【請求項１１】
前記出力制御部は、前記秘匿エリアに提示された情報がユーザ操作により前記共有エリアに移動された場合、当該情報をコピーし、さらに共有閲覧に適した大きさ、解像度に変更した上で、前記秘匿エリアに提示するよう制御する、請求項７に記載の情報処理装置。
【請求項１２】
前記出力制御部は、前記秘匿エリアに提示された情報がユーザ操作により前記共有エリアに移動された場合、当該情報をコピーし、さらに当該コピーした情報に含まれる秘匿情報を遮蔽または削除した上で、前記秘匿エリアに提示するよう制御する、請求項７に記載の情報処理装置。
【請求項１３】
前記視線検出部は、前記ユーザの視線方向、頭部方向、または姿勢に基づいて視線を検出する、請求項１に記載の情報処理装置。
【請求項１４】
前記ユーザの視線方向、頭部方向、または姿勢は、撮像装置により撮像されたユーザの撮像画像、または収音装置により収音されたユーザの音声データの少なくともいずれかに基づいて推定される、請求項１３に記載の情報処理装置。
【請求項１５】
前記出力制御部は、表示画面への情報表示制御、または投影面への情報投影制御を行う、請求項７に記載の情報処理装置。
【請求項１６】
前記表示画面または投影面は、テーブルトップである、請求項１５に記載の情報処理装置。
【請求項１７】
前記出力制御部は、スピーカからの指向性を有する音声出力制御を行う、請求項７に記載の情報処理装置。
【請求項１８】
前記エリア判定部は、提示面に存在する物体の認識結果に応じて各ユーザの視界範囲の大きさを調整する、請求項２に記載の情報処理装置。
【請求項１９】
提示情報に対する複数のユーザの視線を検出することと、
前記検出された複数のユーザの視線に基づいて、前記複数のユーザが視認して情報を共有する共有エリア、および他ユーザからは視認されず各ユーザの情報を秘匿する秘匿エリアの判定を行うことと、
を含む、制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、情報処理装置および制御方法に関する。
【背景技術】
【０００２】
近年、複数人で同時操作を行ったり資料を見たりといったユースケースが増加している。例えば大画面（壁面表示部、電子ボード等）やテーブルトップ（テーブル型画像表示装置）を複数人で取り囲み、画像表示装置に表示される資料を見ながら会議を行う。
【０００３】
このような複数人で閲覧できる画像表示装置に関して、例えば下記特許文献１、２が提案されている。具体的には、テーブル型の画像表示装置において、ディスプレイ上に打合せの資料等であるオブジェクトを表示し、打合せの参加者が同じオブジェクトに基づいて討議している場合、討議をしている参加者に見やすいようにオブジェクトを拡大（特許文献１）または分離（特許文献２）して表示する技術が提案されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特再表ＷＯ２０１０／０２１２４０号公報
【特許文献２】特再表ＷＯ２０１０／０１８７７０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ここで、複数人が同時に操作する環境では、オブジェクトの共同視聴等、複数人をベースにしたインタラクションが重要である一方、セキュリティ情報を他の閲覧者から隠すことも重要となってくる。例えば、ＰＩＮ（Personal Identification Number）コードの入力画面やメールの内容等の秘匿情報に関しては、複数人で画面を見ている場合でも閲覧され難くする必要がある。
【０００６】
しかしながら、上記いずれの従来技術においても、セキュリティ情報の秘匿については言及されていなかった。
【０００７】
そこで、本開示では、複数人が同時に閲覧する画像提示面において、特定のユーザだけが視認可能なエリアと全ユーザが視認可能なエリアとを判別することが可能な情報処理装置および制御方法を提案する。
【課題を解決するための手段】
【０００８】
本開示によれば、提示情報に対する複数のユーザの視線を検出する視線検出部と、前記検出された複数のユーザの視線に基づいて、前記複数のユーザが視認して情報を共有する共有エリア、および他ユーザからは視認されず各ユーザの情報を秘匿する秘匿エリアの判定を行うエリア判定部と、を備える情報処理装置を提案する。
【０００９】
本開示によれば、提示情報に対する複数のユーザの視線を検出することと、前記検出された複数のユーザの視線に基づいて、前記複数のユーザが視認して情報を共有する共有エリア、および他ユーザからは視認されず各ユーザの情報を秘匿する秘匿エリアの判定を行うことと、を含む制御方法を提案する。
【発明の効果】
【００１０】
以上説明したように本開示によれば、複数人が同時に閲覧する情報提示面において、特定のユーザだけが視認可能なエリアと全ユーザが視認可能なエリアとを判別することが可能となる。
【００１１】
なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
【図面の簡単な説明】
【００１２】
【図１】本開示の一実施形態による制御システムの概要を説明する図である。
【図２】図１に示すテーブルトップの上面図を示す図である。
【図３】本実施形態による情報処理装置１の構成の一例を示すブロック図である。
【図４】本実施形態による可読エリアの判定処理を示すフローチャートである。
【図５】可読エリアの横方向（長径）の判定について説明する図である。
【図６】可読エリアの縦方向（短径）の判定について説明する図である。
【図７】本実施形態による共有・秘匿エリアの判定処理を示すフローチャートである。
【図８】共有・秘匿エリアの判定について説明する図である。
【図９】セキュリティ確保が必要なコンテンツを開いた場合における秘匿エリアへの提示制御について説明する図である。
【図１０】共有エリアから秘匿エリアへのコンテンツ移動時における自動コピーについて説明する図である。
【図１１】秘匿エリアから共有エリアへのコンテンツ移動時における最適化制御について説明する図である。
【図１２】秘匿情報の遮蔽／削除の具体例について説明する図である。
【図１３】本実施形態の変形例による物体認識を考慮したエリア判定の概要について説明する図である。
【図１４】本実施形態の変形例による物体を考慮したエリアの判定処理を示すフローチャートである。
【発明を実施するための形態】
【００１３】
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１４】
また、説明は以下の順序で行うものとする。
１．本開示の一実施形態による制御システムの概要
２．基本構成
３．動作処理
３−１．可読エリア判定処理
３−２．共有・秘匿エリア判定処理
４．提示制御例
４−１．秘匿情報の提示制御
４−２．エリア間のコンテンツ移動
４−３．コンテンツ移動時における秘匿情報の遮蔽／削除
５．変形例
６．まとめ
【００１５】
＜＜１．本開示の一実施形態による制御システムの概要＞＞
まず、本開示の一実施形態による制御システムの概要を図１、図２に示して説明する。図１に示す例では、複数人（ユーザＡ、ユーザＢ）がテーブルトップ６を囲んでテーブルトップ６上に提示される情報（静止画、動画、テキスト等々）を閲覧しながら討議を行っている。具体的には、テーブルトップ６には、天井つるし型ユニット５に設けられたプロジェクタ（以下、情報処理装置１と称す）により画像が投影される。ユーザＡ、ユーザＢは、テーブルトップ６に投影される画像を見ながら討議を行うことができる。
【００１６】
情報処理装置１により投影される情報は、情報処理装置１内の記憶部１３（図３参照。所謂ローカルストレージ）に格納されていてもよいし、ネットワーク７を介してネットワーク上のコンテンツＤＢ８（所謂Ｗｅｂ
Ｓｔｏｒａｇｅまたはサーバ）から取得されてもよい。または、情報処理装置１が外部機器（モバイル端末等）とＷｉ−Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、近接無線通信等の無線または有線により接続し、外部機器から取得してもよい。
【００１７】
また、天井つるし型ユニット５には、撮像装置２ａが内蔵されている。撮像装置２ａは、テーブルトップ６を継続的に撮像し、テーブルトップ６に投影された画像に対するユーザの操作を撮像する。また、撮像装置２ａは、テーブルトップ６を取り囲むユーザを撮像する。撮像装置２ａにより撮像された画像は、情報処理装置１に送信される。
【００１８】
また、天井つるし型ユニット５には、スピーカ３ａおよびマイクロフォン４ａが設けられている。スピーカ３ａは、投影される画像に付随した音を出力する。例えば動画の映像が情報処理装置１により投影されると共に、当該動画の音声がスピーカ３ａから出力される。出力する音声データは、情報処理装置１から送信される。マイクロフォン４ａは、テーブルトップ６を取り囲むユーザの音声を収音し、情報処理装置１に送信する。
【００１９】
また、テーブルトップ６には、図１に示すように、撮像装置２ｂ、スピーカ３ｂ、およびマイクロフォン４ｂが設けられている。撮像装置２ｂは、テーブルトップ６を取り囲むユーザを撮像し、撮像画像を情報処理装置１に送信する。また、スピーカ３ｂおよびマイクロフォン４ｂの作用は、スピーカ３ａおよびマイクロフォン４ａと同様である。
【００２０】
なお、テーブルトップ６に設けられている撮像装置２ｂ、スピーカ３ｂ、およびマイクロフォン４ｂの配置は、図２の上面図に示すように、複数の撮像装置２ｂは異なる方向を向くよう設置され、スピーカ３ｂおよびマイクロフォン４ｂは一組ずつ分散されて設置されている。
【００２１】
（背景）
ここで、従来、複数人で閲覧できるよう、電子ボードやテーブルトップ型表示装置において、ディスプレイ上に打合せの資料等であるオブジェクトが表示される技術が提案されていた。このような従来技術では、複数人での共同視聴の利便性が重視され、セキュリティ情報を他の閲覧者から隠すことは考慮されていなかった。
【００２２】
そこで、本実施形態では、複数人が同時に閲覧する情報提示面において、特定のユーザだけが視認可能なエリア（秘匿エリアと称す）と全ユーザが視認可能なエリア（共有エリアと称す）とを判別し、各エリアへの情報提示制御を行うことで、複数人での共同視聴の利便性を重視しつつ、セキュリティを確保することができる。
【００２３】
具体的には、例えば図２に示すように、テーブルトップ６を取り囲むユーザＡ、ユーザＢの視線に応じて、両者の視界が重複する共有エリアＭと、ユーザＡのみが視認可能な秘匿エリアＳ１と、ユーザＢのみが視認可能な秘匿エリアＳ２とを判定する。ユーザＡ、Ｂの視線方向は、例えば撮像装置２ｂによる撮像画像や、マイクロフォン４ｂによる音声データに基づいて推定される。
【００２４】
そして、情報処理装置１は、エリアの判定結果に応じて、秘匿エリアＳ１にはユーザＡのみが見る情報（コンテンツ）１４０を提示するよう投影制御し、秘匿エリアＳ２にはユーザＢのみが見る情報１４１を提示するよう投影制御し、共有エリアＭには全ユーザで見る情報１４２を提示するよう投影制御する。
【００２５】
以上、本開示の一実施形態による制御システムの概要について説明した。なお、撮像装置２ａ、２ｂ、スピーカ３ａ、３ｂ、マイクロフォン４ａ、４ｂの数および設置位置は図１、図２に示す例に限定しない。また、スピーカ３およびマイクロフォン４が無くてもよい。続いて、本実施形態の制御システムに含まれる情報処理装置１の基本構成について説明する。
【００２６】
＜＜２．基本構成＞＞
図３は、本実施形態による情報処理装置１の構成の一例を示すブロック図である。図３に示すように、情報処理装置１は、制御部１０、通信部１１、記憶部１３、および投影部１４を有する。
【００２７】
（制御部１０）
制御部１０は、例えばＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、不揮発性メモリ、インターフェース部を備えたマイクロコンピュータにより構成され、情報処理装置１の各構成を制御する。具体的には、本実施形態による制御部１０は、図３に示すように、視線検出部１０ａ、エリア判定部１０ｂ、ユーザコンテキスト推定部１０ｃ、出力制御部１０ｄ、および操作検出部１０ｅとして機能する。
【００２８】
・視線検出部１０ａ
視線検出部１０ａは、テーブルトップ６を取り囲むユーザの視線方向を検出し、検出結果をエリア判定部１０ｂに出力する。具体的には、視線検出部１０ａは、撮像装置２ａ、２ｂから送信された撮像画像に基づいて各ユーザの視線方向を検出する。ユーザの視線方向は、眼（瞳孔）の動きや、頭部方向、または姿勢（身体の向き）から検出され得る。また、視線検出部１０ａは、マイクロフォン４ａ、４ｂから送信された音声データ（ユーザの音声）から音源方向を解析し、ユーザの頭部方向または姿勢（身体の向き）を推定してユーザの視線方向を検出することも可能である。また、視線検出部１０ａは、検出結果をユーザコンテキスト推定部１０ｃに出力してもよい。
【００２９】
・エリア判定部１０ｂ
エリア判定部１０ｂは、視線検出部１０ａにより検出された複数のユーザの視線方向に基づき、テーブルトップ６（提示面）において、複数のユーザが視認可能な共有エリア、および他ユーザからは視認されず各ユーザの情報を秘匿する秘匿エリアの判定を行う。具体的には、エリア判定部１０ｂは、視線方向に基づく各ユーザの可読エリア（視界範囲）が重なる領域を共有エリアと判定し、各ユーザの可読エリアが重ならない領域を各ユーザの秘匿エリアと判定する。秘匿エリアは、さらに対象ユーザから一定距離内の領域であって、かつ共有エリアから一定距離離れた領域で判定されてもよい。かかるエリア判定部１０ｂによるエリア判定処理については、図４〜図８を参照して後述する。
【００３０】
また、エリア判定部１０ｂは、後述するユーザコンテキスト推定部１０ｃからユーザコンテキストが出力された場合、当該ユーザコンテキストを考慮して上記可読エリアの大きさを調整してもよい。
【００３１】
・ユーザコンテキスト推定部１０ｃ
ユーザコンテキスト推定部１０ｃは、視線検出部１０ａにより検出された視線の動きに基づいて、ユーザが何を見ている状態か（すなわちユーザコンテキスト）を推定する。例えば、ユーザコンテキスト推定部１０ｃは、ユーザの視線の動きに基づいて、ユーザが文章読解中か、動画視聴中か等を推定する。通常、人間の視野は、文章読解中等の文字を認識する際は視野が狭められる。したがって、ユーザコンテキスト推定部１０ｃによりユーザが何を見ている状態かを推定し、推定結果（ユーザコンテキスト）をエリア判定部１０ｂに出力することで、エリア判定部１０ｂでは、可読エリアを調整する（例えばユーザが文章読解中の場合は可読エリアを狭める）ことができる。
【００３２】
・出力制御部１０ｄ
出力制御部１０ｄは、エリア判定部１０ｂによる判定結果に応じて、提示情報の出力制御を行う。具体的には、出力制御部１０ｄは、テーブルトップ６上の各ユーザの秘匿エリアには各ユーザのみが見る情報（コンテンツ）を投影するよう投影部１４を制御し、共有エリアには全ユーザで見る情報を投影するよう投影部１４を制御する。
【００３３】
また、出力制御部１０ｄは、エリア判定部１０ｂによる判定結果に応じて、スピーカ３ａ、３ｂからの音声出力制御を行ってもよい。すなわち、出力制御部１０ｄは、各ユーザのみが聞く情報（例えばビデオ音声等）を各ユーザの位置に対して指向性を持たせてスピーカ３ａ、３ｂから音声出力するよう制御し、全ユーザで聞く情報は指向性を持たせず（無指向性）で音声出力するようスピーカ３ａ、３ｂを制御する。
【００３４】
・操作検出部１０ｅ
操作検出部１０ｅは、テーブルトップ６に提示された情報に対するユーザ操作（タップ操作、ドラッグ操作等）を検出する。操作検出部１０ｅは、撮像装置２により継続的に撮像される撮像画像に基づいてユーザ操作を検出してもよいし、テーブルトップ６の上面全体に設置されたタッチパネル等の接触／接近検出デバイス（不図示）による検出結果に基づいてユーザ操作を検出してもよい。または、操作検出部１０ｅは、マイクロフォン４により収音されたユーザの音声に基づいて、音声入力によるユーザ操作を検出してもよい。
【００３５】
（通信部１１）
通信部１１は、無線／有線により外部装置と接続し、データの送受信を行う機能を有する。本実施形態による通信部１１は、例えば撮像装置２、スピーカ３、マイクロフォン４、またはネットワーク上の外部のコンテンツＤＢ７と接続し、撮像画像、音声データ、コンテンツを受信したり、音声出力を指示する制御信号を送信したりする。
【００３６】
（記憶部１３）
記憶部１３には、制御部１０の各処理を実行するためのプログラムが格納される。また、記憶部１３には、写真、映像、文書等の各種コンテンツが格納されていてもよい。
【００３７】
（投影部１４）
投影部１４は、光源、可動ミラー、照明光学系、および投射光学系等を備える。投影部１４は、映像を投影する表示装置であって、高輝度の光源から照射された光を、例えば液晶パネルを透過させてテーブルトップ６（提示面）等に投射する。具体的には、光源から照射された光は、照明光学系に出力され、照明光学系において液晶パネルを透過させて映像光が生成される。生成された映像光は投射光学系に出力され、投射光学系に含まれる投射レンズ等から映像光がテーブルトップ６（提示面）等に投射される。投射光学系は、光源の投射方向に対してほぼ垂直方向の光軸を有する。
【００３８】
以上、本実施形態による情報処理装置１の構成について具体的に説明した。なお本実施形態では、テーブルトップ６に提示する情報を、情報処理装置１の投影部１４から投影する手法を用いているが、本開示はこれに限定されない。例えば、テーブルトップ６に表示装置が設けられている場合、情報処理装置１の出力制御部１０ｄは、エリア判定部１０ｂの判定結果に従ったコンテンツの提示制御を、通信部１１を介して表示装置に指示する。表示装置は、例えばＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）またはＯＬＥＤ（Ｏｒｇａｎｉｃ  Ｌｉｇｈｔ−Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ）等により実現され、テーブルトップ６上において水平方向に広がっている。
【００３９】
また、図３に示す情報処理装置１の構成は一例であって、本開示はこれに限定されず、例えば投影部１４が外部装置であってもよいし、撮像装置、スピーカ、およびマイクロフォンを内蔵してもよい。
【００４０】
＜＜３．動作処理＞＞
続いて、本実施形態による制御システムのエリア判定処理について、図４〜図８を参照して説明する。
【００４１】
＜３−１．可読エリア判定処理＞
まず、図４を参照して本実施形態による可読エリアの判定処理について説明する。図４に示すように、ステップＳ１０３において、情報処理装置１は、撮像装置２から撮像画像を取得する。撮像画像の取得は継続的に行われ、複数の撮像装置２ａ、２ｂが設置されている場合は各撮像装置２ａ、２ｂから継続的に撮像画像を取得する。
【００４２】
次に、ステップＳ１０６において、情報処理装置１の視線検出部１０ａは、撮像画像に基づいて各ユーザの視線検出を行う。具体的には、視線検出部１０ａは、撮像画像に写るユーザの眼を解析し、瞳孔や虹彩の位置、動きに応じて視線方向を検出する。また、視線検出部１０ａは、赤外線ＬＥＤを照らしてできた角膜上の反射光を検出して視線方向を検出することも可能である。
【００４３】
次いで、視線検出が出来ない場合（Ｓ１０６／Ｎｏ）、ステップＳ１０９において、視線検出部１０ａは、撮像画像に基づいて各ユーザの頭部方向を推定する。例えばユーザの眼が写っていない場合や、眼が写っていても視線検出可能なレベルで写っていない場合は、視線検出が出来ないと判断される。また、撮像装置２が広角レンズで周囲を広範囲撮影している場合、視線検出部１０ａは撮像画像を拡大して解析するため、解像度が低い場合は視線検出が困難となる。したがって、このような場合、視線検出部１０ａは、ユーザの頭部方向を撮像画像から推定する。
【００４４】
次に、ステップＳ１１２において、視線検出部１０ａは、頭部方向を視線方向と仮定する。これにより、ユーザの正確な視線方向が撮像画像から検出できない場合であっても、頭部方向を視線方向と仮定することで、後述の可読エリア判定を行うことができる。
【００４５】
一方、頭部方向の推定が出来ない場合（Ｓ１０９／Ｎｏ）、ステップＳ１１５において、視線検出部１０ａは、撮像画像に基づいて各ユーザの姿勢を推定する。具体的には、視線検出部１０ａは、各ユーザの身体の向きを推定する。
【００４６】
次に、ステップＳ１１８において、視線検出部１０ａは、身体の前面方向を視線方向と仮定する。これにより、ユーザの正確な視線方向が撮像画像から検出できない場合や、頭部方向が推定できない場合であっても、身体の前面方向を視線方向と仮定することで、後述の可読エリア判定を行うことができる。
【００４７】
続いて、ステップＳ１２１において、ユーザコンテキスト推定部１０ｃは、視線検出部１０ａによる視線検出結果に基づいて、ユーザコンテキストを推定する。例えばユーザコンテキスト推定部１０ｃは、視線方向の動きに応じて、ユーザが文章読解中であるか、動画視聴中であるか等をユーザコンテキストとして推定する。
【００４８】
そして、ステップＳ１２４において、エリア判定部１０ｂは、視線検出部１０ａの検出結果に応じて、各ユーザの可読エリアを判定する。また、必要に応じてユーザコンテキスト推定部１０ｃにより推定されたユーザコンテキストを参照する。
【００４９】
ここで、エリア判定部１０ｂによる可読エリア判定の具体例について図５、図６を参照して説明する。図５に示す例では、ユーザＡの可読エリアＲ１を判定している。テーブルトップ６の全範囲が提示面である場合、ユーザＡの視線方向と提示面との交点を注視点Ｐ１として、注視点Ｐ１の周囲を可読エリアＲ１と判定する。可読エリアＲ１は、ユーザＡの視野のうち、少なくとも事物を認識できる情報受容能力に優れる有効視野であって、例えば図５に示すように注視点Ｐ１から水平方向に１５度、図６に示すように注視点Ｐ１から垂直方向に１０度の範囲としてもよい。このように判定された可読エリアの領域は、例えば以下のように示される。
user_id:12345,
readable_area:[ｘ,ｙ（注視点Ｐ）,Ｈ（短径）,Ｗ（長径）]
ここで、注視点Ｐは図５に示す原点Ｏを基点とし、また、短径Ｈは注視点Ｐを基点としたユーザの視野における垂直（縦）方向の長さ、長径Ｗは注視点Ｐを基点としたユーザの視野における水平（横）方向の長さを示す。
【００５０】
以上説明したような可読エリアの判定処理がユーザＢに対しても同様に行われ、ユーザＡ、ユーザＢの可読エリアが出力される。なお図５、図６に示す例では、可読エリアＲの大きさは、水平方向に１５度および垂直方向に１０度といったように一意の大きさとしたが、本開示はこれに限定されず、可読エリアの大きさを複数段階でレベル設定してもよい。また、エリア判定部１０ｂは、上述したユーザコンテキストに応じて、可読エリアの大きさを調整してもよい。具体的には、エリア判定部１０ｂは、ユーザコンテキストに応じて予め設定されたエリア拡大係数（Z）を用いて可読エリアを算出する。エリア拡大係数（Z）は、注意力が必要なタスクほど係数が小さく設定される。例えば、読解中は「Z=0.5」、動画視聴中は「Z=0.8」と設定される。
【００５１】
このような複数段階のレベル設定およびユーザコンテキストを考慮した可読エリアの判定データの一例を以下に示す。
user_id:12345,
100%_readable_area:[75,50,20*Z,40*Z],
50%_readable_area:[75,50,40*Z,80*Z],
…
context:gazing_image
【００５２】
以上、本実施形態による可読エリアの判定処理について具体的に説明した。続いて、エリア判定部１０ｂは、判定した各ユーザの可読エリアに基づき、共有エリアおよび秘匿エリアの判定を行う。以下、図７〜図８を参照して具体的に説明する。
【００５３】
＜３−２．共有・秘匿エリア判定処理＞
図７は、本実施形態による共有・秘匿エリアの判定処理を示すフローチャートである。図７に示すように、ステップＳ１３３において、情報処理装置１のエリア判定部１０ｂは、複数のユーザの可読エリアの重複があるか否かを判断する。例えば、図８に示す例では、テーブルトップ６の中央付近において、ユーザＡの可読エリアＲ１と、ユーザＢの可読エリアＲ２が重複している。
【００５４】
次に、重複があると判断された場合（Ｓ１３３／Ｙｅｓ）、ステップＳ１３６において、エリア判定部１０ｂは、重複部分の重心Ｃを算出する。
【００５５】
次いで、ステップＳ１３９において、エリア判定部１０ｂは、重心Ｃを基準として共有エリアＭを判定する。共有エリアＭは、図８に示すように、ユーザＡの可読エリアＲ１とユーザＢの可読エリアＲ２が重複する重複する領域内において最大サイズとしてもよいし、重心Ｃを基準として所定の最小サイズ以上としてもよい。
【００５６】
一方、重複がない場合（Ｓ１３３／Ｎｏ）、共有エリアの判定は行われず、秘匿エリアの判定処理（次に説明するＳ１４２）が行われる。
【００５７】
続いて、ステップＳ１４２において、エリア判定部１０ｂは、対象ユーザから一定の距離内に、他のユーザの可読エリアと重複しない領域があるか否かを判断する。例えば、エリア判定部１０ｂは、ユーザＡの秘匿エリアを判定する場合、ユーザＡの位置を中心として平均的な腕の長さで円弧を描いた範囲内に、ユーザＢの可読エリアＲ２と重複しない領域があるか否かを判断する。
【００５８】
次に、他ユーザの可読エリアＲと重複しない領域がある場合（Ｓ１４２／Ｙｅｓ）、ステップＳ１４５において、エリア判定部１０ｂは、他ユーザの可読エリアＲから一定距離保てる（離れた）領域があるか否かを判定する。
【００５９】
対象ユーザから一定の距離内に他のユーザの可読エリアと重複しない領域がない場合（Ｓ１４２／Ｎｏ）、または、他ユーザの可読エリアＲから一定距離保てる領域がない場合（Ｓ１４５／Ｎｏ）、秘匿エリアの判定は行われず、判定処理は終了する。
【００６０】
次いで、他ユーザの可読エリアＲから一定距離保てる領域がある場合（Ｓ１４５／Ｙｅｓ）、ステップＳ１４８において、該当領域を対象ユーザの秘匿エリアＳとして判定する。例えば、図８に示すように、ユーザＡから一定の距離内であって、ユーザＢの可読エリアＲ２と重複せず、また、可読エリアＲ２から一定距離保てる領域を、秘匿エリアＳ１として判定する。かかる秘匿エリアの判定は、全ユーザに対して行われ、各ユーザの秘匿エリアＳ１、Ｓ２が判定される。
【００６１】
＜＜４．提示制御例＞＞
以上、本実施形態による制御システムの構成およびエリア判定処理について具体的に説明した。次に、エリア判定結果に応じた情報処理装置１による提示制御等について、図９〜図１２を参照して説明する。
【００６２】
＜４−１．秘匿情報の提示制御＞
本実施形態において、情報処理装置１の出力制御部１０ｄは、セキュリティ確保が必要な情報（秘匿情報）は秘匿エリアＳに提示するよう制御する。どういった種類の情報を秘匿エリアＳに提示するかは、所定の定義情報に従って判断される。この定義情報は、ユーザにより設定されてもよいし、ユーザの操作履歴に基づいて自動的に設定されてもよいし、ソフトウェア更新等によりアップデートされてもよい。
【００６３】
例えば、図９に示すように、共有エリアＭでコンテンツ１４５を操作している場合に、セキュリティ確保が必要なコンテンツ（例えばＰＩＮコードの入力画面、入力履歴表示画面、閲覧履歴表示画面等）が開かれると、出力制御部１０ｄは、かかるセキュリティ確保が必要なコンテンツ１４６を秘匿エリアＳに提示するよう制御する。これにより、複数人で同時操作・閲覧をしている際に、意図しない情報漏えいを防ぐことができる。
【００６４】
また、出力制御部１０ｄは、画像ギャラリー、またはメール画面（送信／受信Ｂｏｘ）等が開かれた場合に秘匿エリアＳに表示するよう制御してもよい。ユーザは必要なコンテンツのみ共有エリアＭに移動してシェアすることで、不要な情報の漏えいを防ぐことができる。
【００６５】
また、出力制御部１０ｄは、上記セキュリティ確保が必要なコンテンツが動画等の音声を伴うコンテンツである場合、指向性スピーカが接続されていれば、コンテンツの所有ユーザへのみ音声を発信するよう音声出力制御を行う。
【００６６】
なお、高秘匿エリアがない場合、出力制御部１０ｄは、セキュリティ確保が必要なコンテンツを提示する前に、例えばユーザにダイアログ等を提示して承認を受けてから共有エリアＭに提示するよう制御してもよい。
【００６７】
さらに、出力制御部１０ｄは、秘匿エリアＳでは低画像度化してコンテンツを提示するよう制御してもよい。これにより、他ユーザに覗かれてしまった場合でも可能な限り情報漏えいを防ぐことができる。
【００６８】
＜４−２．エリア間のコンテンツ移動＞
続いて、ユーザが共有エリアＭから自身の秘匿エリアＳにコンテンツを移動した場合、または自身の秘匿エリアＳから共有エリアＭにコンテンツを移動した場合における提示制御について図１０、図１１を参照して説明する。
【００６９】
（共有エリアＭからのコンテンツ移動）
図１０は、共有エリアＭから秘匿エリアＳへのコンテンツ移動時における自動コピーについて説明する図である。図１０に示すように、共有エリアＭに提示されているコンテンツ１４５が選択され、秘匿エリアＳへのドラッグが検出されると、出力制御部１０ｄは、選択されたコンテンツ１４５をコピーしたコンテンツ１４５ｃを提示し、ユーザによるドラッグ操作に合せて移動させる。そして、秘匿エリアＳでコンテンツ１４５ｃがドロップされると、出力制御部１０ｄは、コンテンツ１４５ｃを秘匿エリアＳに提示するよう制御する。
【００７０】
これにより、一のユーザのコンテンツ操作によって他のユーザのコンテンツ視聴を妨げないようにすることができる。なお、図１０に示す例では、ユーザがコンテンツ１４５を選択した時点でコンテンツ１４５の自動コピーが行われているが、本開示はこれに限定されず、例えばコンテンツ１４５が共有エリアＭの外縁に達した時点で自動コピーが行われてもよい。
【００７１】
また、情報処理装置１は、指向性スピーカが接続されている場合、コンテンツコピー後は各ユーザに対する音量の最適化を行い、各ユーザに向けて音声を出力するよう制御することで、お互いの視聴を妨げないようにすることも可能である。
【００７２】
（秘匿エリアＳからのコンテンツ移動）
図１１は、秘匿エリアＳから共有エリアＭへのコンテンツ移動時における最適化制御について説明する図である。図１１に示すように、秘匿エリアＳに画像ギャラリーが一覧表示されている場合に、ユーザは一覧の中から他ユーザとシェアしたいコンテンツ１４７を選択し、共有エリアＭに移動させる。この際、出力制御部１０ｄは、コンテンツ１４７をコピーしてコンテンツ１４７ｃを生成し、さらに複数人での閲覧に適した大きさ、解像度に変化させて提示するよう制御する。
【００７３】
このように、共有エリアＭにコンテンツを提示する際、複数人での閲覧に適した状態でコンテンツを提示するよう制御することで、ユーザビリティを向上させることができる。なお複数人での閲覧に応じたコンテンツ提示の最適化は、上述した自動拡大や、高解像度化に限定されず、例えば共有エリアＭにおけるコンテンツの提示位置、提示方向、提示角度等を複数人での閲覧に最適化してもよい。
また、出力制御部１０ｄは、各ユーザの視線検出結果に応じて、複数人のユーザが見ている場合は複数人視聴の最適な位置等で提示し、他ユーザの視線が外れたら残りの視聴ユーザの最適な位置等で提示するよう制御（指向性スピーカがあればスピーカ方向を調整）してもよい。
【００７４】
また、出力制御部１０ｄは、動画等の音声を含むコンテンツの場合、指向性スピーカが接続されていれば、秘匿エリアＳではコンテンツ所有ユーザへのみ音声を出力するよう制御し、共有エリアＭにコンテンツが移動された後は全ユーザに対して最適な視聴となるよう指向性方向および音量を最適化するよう制御する。
【００７５】
＜４−３．コンテンツ移動時における秘匿情報の遮蔽／削除＞
次に、共有エリアＭにコンテンツを移動した際に、当該コンテンツに含まれる秘匿情報を自動的に遮蔽／削除する提示制御について説明する。
【００７６】
例えば、秘匿エリアＳにメールＢｏｘが表示されている場合に、ユーザが必要なメールを選択し、秘匿エリアＳから共有エリアＭにドラッグして移動させた場合（共有エリアＭへのコンテンツ移動については、図１１に示す場合と同様）、出力制御部１０ｄは、当該メールに含まれる秘匿情報（例えばメールの宛先情報、画像のexif情報等）を自動的に遮蔽または削除することで、意図しない情報漏洩を防ぐことができる。削除・遮蔽する秘匿情報の定義は事前にシステム情報として設定されていてもよいし、ユーザにより設定されてもよいし、ユーザの操作履歴に基づいて自動的に設定されてもよいし、ソフトウェア更新等によりアップデートされてもよい。
【００７７】
ここで、秘匿情報の遮蔽／削除の具体例について図１２を参照して説明する。図１２左には、秘匿エリアＳ内で提示されているコンテンツ１４９（ここでは一例として送信メールの一覧画面を用いる）を示す。出力制御部１０ｄは、コンテンツ１４９が秘匿エリアＳから共有エリアＭに移動された場合、コンテンツ１４９をコピーし、コピーしたコンテンツ１４９ｃを複数人視聴に最適な大きさ、解像度に変化させた上で、さらに秘匿情報の遮蔽／削除を行う。
【００７８】
具体的には、出力制御部１０ｄは、図１２右に示すように、コンテンツ１４９ｃにおいてメールの宛先情報を遮蔽し、遮蔽部分付近に表示切換ボタンＮを表示する。表示切換ボタンＮはメールの宛先情報の遮蔽表示を切り替えるものであって、選択されると遮蔽が外され、メールの宛先情報が見える状態となる。また、表示切換ボタンＮの操作は、コンテンツの提供ユーザ（所有者）のみが可能なものとしてもよい。
【００７９】
以上、本実施形態による提示制御について説明した。なおコンテンツ移動時等に対象ユーザの視線が一時的に秘匿エリアＳに向けられるが、一定時間内であれば、可読エリア、共有エリア、秘匿エリアの各エリアは維持したままとしてもよい。また、本実施形態によるエリア判定部１０ｂは、所定時間毎に可読エリア、共有エリア、秘匿エリアの各エリアの判定を更新してもよい。
【００８０】
＜＜５．変形例＞＞
以上、本実施形態による制御システムについて具体的に説明した。本実施形態では、情報の提示面の一例としてテーブルトップ６を用いたが、テーブルトップ６には物体（ＰＣ、本等）が置かれている場合も想定される。この場合、物体の位置や大きさによってはユーザの視野に影響を及ぼすことがある。そこで、本実施形態の変形例では、エリア判定の際に、テーブルトップ６に置かれた物体を考慮することについて説明する。
【００８１】
＜５−１．概要＞
図１３は、本実施形態の変形例による物体認識を考慮したエリア判定の概要について説明する図である。図１３に示すように、テーブルトップ６に物体９が存在する場合、物体９の高さにもよるが、各ユーザの視野は物体９により遮られる。例えばユーザＡは、物体９の向こう側（ユーザＢ側）が見えなくなり、ユーザＢも物体９の向こう側（ユーザＡ側）が見えなくなる。したがって、各ユーザの可読エリアは、図８に示す可読エリアＲ１、Ｒ２と異なり、図１３に示すように物体９の反対側の領域がそれぞれ除かれた可読エリアＲ１’、Ｒ２’となる。
【００８２】
このように、可読エリアＲ１’、Ｒ２’が変化することで、各可読エリアが重複する領域も異なるため、共有エリアＭ’も変化する。また、可読エリアＲ１’、Ｒ２’の変化に伴い、各ユーザの秘匿エリアＳ１’、Ｓ２’も変化する。このようなテーブルトップ６上の物体認識を考慮した場合のエリアの判定処理について図１４を参照して説明する。
【００８３】
＜５−２．動作処理＞
図１４は、本実施形態の変形例による物体を考慮したエリア判定処理を示すフローチャートである。図１４に示すように、まず、ステップＳ２００において、情報処理装置１のエリア判定部１０ｂは、通常の可読エリア判定処理を行う。通常の可読エリア判定処理とは、具体的には図４を参照して説明した判定処理である。
【００８４】
次に、ステップＳ２０３において、エリア判定部１０ｂは、テーブルトップ６に物体が存在するか否かを判断する。物体認識は、例えば撮像装置２により取得された撮像画像に基づいて行われる。この際、エリア判定部１０ｂは、物体の位置や大きさ、高さ等を認識する。
【００８５】
次いで、物体が存在すると判断された場合（Ｓ２０３／Ｙｅｓ）、ステップＳ２０６において、エリア判定部１０ｂは、物体エリアと可読エリアに重複があるか否かを判断する。物体エリアとは、物体９とテーブルトップ６が接触している領域である。
【００８６】
続いて、物体エリアと可読エリアに重複があると判断された場合（Ｓ２０６／Ｙｅｓ）、ステップＳ２０９において、エリア判定部１０ｂは、可読エリアのうち、物体エリアと、必要に応じて対象ユーザから見て物体９の反対側の領域を除外して、可読エリアを再判定する。物体９が高さのあるものである場合、ユーザの視線が遮られるため、物体エリア（物体９により隠れる領域）に加えて、物体９の向こう側が見えなくなる。したがって、エリア判定部１０ｂは、物体９の位置、高さ、物体９と対象ユーザとの位置関係等を考慮して、対象ユーザの可読エリアを調整する。
【００８７】
そして、ステップＳ２１２において、エリア判定部１０ｂは、図７を参照して上述した共有・秘匿エリアの判定処理を行う。
【００８８】
以上説明したように、本実施形態の変形例では、テーブルトップ上に置かれた物体も考慮した上で各エリアを判定することができる。
【００８９】
＜＜６．まとめ＞＞
上述したように、本開示の実施形態による制御システムでは、複数人が同時に閲覧する情報提示面（例えばテーブルトップ６）において、特定のユーザだけが視認可能なエリア（秘匿エリア）と全ユーザが視認可能なエリア（共有エリア）とを判別することを可能とする。そして、各エリアの特性に応じた情報提示制御を行うことで、複数人での共同視聴の利便性を重視しつつ、セキュリティを確保することができる。
【００９０】
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本技術はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
【００９１】
例えば、上述した情報処理装置１に内蔵されるＣＰＵ、ＲＯＭ、およびＲＡＭ等のハードウェアに、情報処理装置１の機能を発揮させるためのコンピュータプログラムも作成可能である。また、当該コンピュータプログラムを記憶させたコンピュータ読み取り可能な記憶媒体も提供される。
【００９２】
また、共有エリアが小さいためにコンテンツを最適化表示できない場合、出力制御部１０ｄは、同コンテンツのコピーを各ユーザの秘匿エリアに提示するよう制御してもよい。
【００９３】
また、情報提示面はテーブルトップ６に限定されず、例えば壁面であってもよい。
【００９４】
また、視線検出部１０ａは、ユーザの視線検出に利用するセンシング情報（撮像画像、音声データ等）を動的に切り替えてもよく、これによりセンシング状況による視線検出精度の変化を小さくすることができる。
【００９５】
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
【００９６】
なお、本技術は以下のような構成も取ることができる。
（１）
提示情報に対する複数のユーザの視線を検出する視線検出部と、
前記検出された複数のユーザの視線に基づいて、前記複数のユーザが視認して情報を共有する共有エリア、および他ユーザからは視認されず各ユーザの情報を秘匿する秘匿エリアの判定を行うエリア判定部と、
を備える、情報処理装置。
（２）
前記エリア判定部は、前記提示情報の提示面において、前記検出された複数のユーザの視線に応じた視界範囲が重なる領域を共有エリアと判定し、前記複数のユーザの視界範囲が互いに重ならない領域を秘匿エリアと判定する、前記（１）に記載の情報処理装置。
（３）
前記秘匿エリアは、さらに対象ユーザから一定距離内の領域で判定される、前記（２）に記載の情報処理装置。
（４）
前記秘匿エリアは、さらに前記共有エリアから一定距離離れた領域で判定される、前記（２）または（３）に記載の情報処理装置。
（５）
前記エリア判定部は、各ユーザのユーザコンテキストに応じて各ユーザの視界範囲の大きさを調整する、前記（２）〜（４）のいずれか１項に記載の情報処理装置。
（６）
前記ユーザコンテキストは、ユーザが何を見ている状態かを示し、当該ユーザの視線の動きから推定される、前記（５）に記載の情報処理装置。
（７）
前記情報処理装置は、
前記エリア判定部による判定の結果に応じて、提示面に提示する提示情報の出力制御を行う出力制御部をさらに備える、前記（１）〜（６）のいずれか１項に記載の情報処理装置。
（８）
前記出力制御部は、セキュリティ確保が必要な情報が展開された場合、当該情報を前記秘匿エリアに提示するよう制御する、前記（７）に記載の情報処理装置。
（９）
前記出力制御部は、前記秘匿エリアにおいて低解像度で情報を提示するよう制御する、前記（７）または（８）に記載の情報処理装置。
（１０）
前記出力制御部は、前記共有エリアに提示された情報がユーザ操作により当該ユーザの秘匿エリアに移動された場合、当該情報をコピーし、前記秘匿エリアに提示するよう制御する、前記（７）〜（９）のいずれか１項に記載の情報処理装置。
（１１）
前記出力制御部は、前記秘匿エリアに提示された情報がユーザ操作により前記共有エリアに移動された場合、当該情報をコピーし、さらに共有閲覧に適した大きさ、解像度に変更した上で、前記秘匿エリアに提示するよう制御する、前記（７）〜（１０）のいずれか１項に記載の情報処理装置。
（１２）
前記出力制御部は、前記秘匿エリアに提示された情報がユーザ操作により前記共有エリアに移動された場合、当該情報をコピーし、さらに当該コピーした情報に含まれる秘匿情報を遮蔽または削除した上で、前記秘匿エリアに提示するよう制御する、前記（７）〜（１１）のいずれか１項に記載の情報処理装置。
（１３）
前記視線検出部は、前記ユーザの視線方向、頭部方向、または姿勢に基づいて視線を検出する、前記（１）〜（１２）のいずれか１項に記載の情報処理装置。
（１４）
前記ユーザの視線方向、頭部方向、または姿勢は、撮像装置により撮像されたユーザの撮像画像、または収音装置により収音されたユーザの音声データの少なくともいずれかに基づいて推定される、前記（１３）に記載の情報処理装置。
（１５）
前記出力制御部は、表示画面への情報表示制御、または投影面への情報投影制御を行う、前記（７）に記載の情報処理装置。
（１６）
前記表示画面または投影面は、テーブルトップである、前記（１５）に記載の情報処理装置。
（１７）
前記出力制御部は、スピーカからの指向性を有する音声出力制御を行う、前記（７）に記載の情報処理装置。
（１８）
前記エリア判定部は、提示面に存在する物体の認識結果に応じて各ユーザの視界範囲の大きさを調整する、前記（２）に記載の情報処理装置。
（１９）
提示情報に対する複数のユーザの視線を検出することと、
前記検出された複数のユーザの視線に基づいて、前記複数のユーザが視認して情報を共有する共有エリア、および他ユーザからは視認されず各ユーザの情報を秘匿する秘匿エリアの判定を行うことと、
を含む、制御方法。
【符号の説明】
【００９７】
１    情報処理装置
１０    制御部
１０ａ    視線検出部
１０ｂ    エリア判定部
１０ｃ    ユーザコンテキスト推定部
１０ｄ    出力制御部
１１    通信部
１３    記憶部
１４    投影部
２、２ａ〜２ｂ    撮像装置
３、３ａ〜３ｂ    スピーカ
４、４ａ〜４ｂ    マイクロフォン
５    天井つるし型ユニット
６    テーブルトップ
７    ネットワーク
８    コンテンツＤＢ
９    物体
Ｍ    共有エリア
Ｓ    秘匿エリア
Ｒ    可読エリア
【図１】
2016045623.tif 000003
【図２】
2016045623.tif 000004
【図３】
2016045623.tif 000005
【図４】
2016045623.tif 000006
【図５】
2016045623.tif 000007
【図６】
2016045623.tif 000008
【図７】
2016045623.tif 000009
【図８】
2016045623.tif 000010
【図９】
2016045623.tif 000011
【図１０】
2016045623.tif 000012
【図１１】
2016045623.tif 000013
【図１２】
2016045623.tif 000014
【図１３】
2016045623.tif 000015
【図１４】
2016045623.tif 000016