(57)【要約】  ユーザがより確実に所定の物体の位置を認識するための眼鏡型ウェアラブル端末であって、ユーザの周辺を撮像するための撮像手段を備えている。また、前記撮像手段を用いた撮像によって取得した映像中に所定の対象物が含まれているか否かを判定する判定手段も備えている。さらに、前記判定手段で前記所定の対象物が含まれていると判定した場合に、前記所定の対象物の位置を表示する表示手段を備えたことを特徴とする眼鏡型ウェアラブル端末である。
2017163514.tif 000002
【特許請求の範囲】
【請求項１】
周辺を撮像する撮像手段と、
前記撮像手段で撮像された映像中に所定の対象物が含まれているか否かを判定する判定手段と、
前記判定手段で前記所定の対象物が含まれていると判定した場合に、前記所定の対象物の位置を表示する表示手段と、
を備えた眼鏡型ウェアラブル端末。
【請求項２】
前記表示手段は、前記所定の対象物が、前記眼鏡型ウェアラブル端末の表示範囲外である場合に、前記所定の対象物がいる方向を示す矢印を表示する請求項１に記載の眼鏡型ウェアラブル端末。
【請求項３】
前記表示手段は、前記所定の対象物までの距離に基づいて、前記矢印の大きさまたは色を変更する請求項２に記載の眼鏡型ウェアラブル端末。
【請求項４】
前記判定手段は、前記所定の対象物に設けられた無線タグからの信号を受信し、前記信号に基づいて、前記判定を行なう請求項１乃至３のいずれか１項に記載の眼鏡型ウェアラブル端末。
【請求項５】
前記信号は、前記所定の対象物の位置情報を含む請求項４に記載の眼鏡型ウェアラブル端末。
【請求項６】
前記撮像手段は、前記眼鏡型ウェアラブル端末の前方および後方を撮像し、
前記判定手段は、前記映像中に、前記眼鏡型ウェアラブル端末に向かって近づく物体がいるか否かを判定し、
前記表示手段は、前記物体の位置を表示する請求項１および５のいずれか１項に記載の眼鏡型ウェアラブル端末。
【請求項７】
前記判定手段は、前記映像中に含まれた、前記眼鏡型ウェアラブル端末に向かって所定の閾値以上の速度で近づく物体を検出する請求項１乃至６のいずれか１項に記載の眼鏡型ウェアラブル端末。
【請求項８】
前記判定手段は、周囲の混雑度を判定し、前記混雑度が高いと前記所定の閾値を高くする請求項７に記載の眼鏡型ウェアラブル端末。
【請求項９】
前記撮像手段は、前記眼鏡型ウェアラブル端末の前方および後方を撮像し、
前記判定手段は、前記映像中に、あらかじめ登録した人物が含まれているか否かを判定し、
前記表示手段は、前記あらかじめ登録した人物の位置を表示する請求項１乃至５のいずれか１項に記載の眼鏡型ウェアラブル端末。
【請求項１０】
周辺を撮像する撮像手段を含む眼鏡型ウェアラブル端末の制御方法であって、
前記撮像手段で撮像された映像中に所定の対象物が含まれているか否かを判定する判定ステップと、
前記判定ステップで前記所定の対象物が含まれていると判定した場合に、前記所定の対象物の位置を表示する表示ステップと、
を含む眼鏡型ウェアラブル端末の制御方法。
【請求項１１】
周辺を撮像する撮像手段を含む眼鏡型ウェアラブル端末の制御プログラムであって、
前記撮像手段で撮像された映像中に所定の対象物が含まれているか否かを判定する判定ステップと、
前記判定ステップで前記所定の対象物が含まれていると判定した場合に、前記所定の対象物の位置を表示する表示ステップと、
を含む眼鏡型ウェアラブル端末の制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、眼鏡型ウェアラブル端末、その制御方法および制御プログラムに関する。
【背景技術】
【０００２】
上記技術分野において、特許文献１には、眼鏡型ウェアラブル端末に設けられたカメラで撮像された画像中に不審者を特定し、警告メッセージを出力する技術が開示されている。特許文献２には、周辺カメラを備えた眼鏡型の端末によって、装着者に物体が近づいていることを報知する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−０８１４８０号公報
【特許文献２】特開２０１３−００８３０７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記文献に記載の技術では、不審者や物体がどこにあるか分からなかった。【０００５】
本発明の目的は、上述の課題を解決する技術を提供することにある。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明に係る端末は、
周辺を撮像する撮像手段と、
前記撮像手段で撮像された映像中に所定の対象物が含まれているか否かを判定する判定手段と、
前記判定手段で前記所定の対象物が含まれていると判定した場合に、前記所定の対象物の位置を表示する表示手段と、
を備えた眼鏡型ウェアラブル端末。【０００７】
上記目的を達成するため、本発明に係る方法は、
周辺を撮像する撮像手段を含む眼鏡型ウェアラブル端末の制御方法であって、
前記撮像手段で撮像された映像中に所定の対象物が含まれているか否かを判定する判定ステップと、
前記判定手段で前記所定の対象物が含まれていると判定した場合に、前記所定の対象物の位置を表示する表示ステップと、
を含む眼鏡型ウェアラブル端末の制御方法である。【０００８】
上記目的を達成するため、本発明に係るプログラムは、
周辺を撮像する撮像手段を含む眼鏡型ウェアラブル端末の制御プログラムであって、
前記撮像手段で撮像された映像中に所定の対象物が含まれているか否かを判定する判定ステップと、
前記判定手段で前記所定の対象物が含まれていると判定した場合に、前記所定の対象物の位置を表示する表示ステップと、
を含む眼鏡型ウェアラブル端末の制御プログラムである。
【発明の効果】
【０００９】
本発明によれば、ユーザは眼鏡型ウェアラブル端末を用いて、所定の物体の位置を認識できる。
【図面の簡単な説明】
【００１０】
【図１】本発明の第１実施形態に係る眼鏡型ウェアラブル端末の機能構成を示すブロック図である。
【図２Ａ】本発明の第２実施形態に係る眼鏡型ウェアラブル端末の機能構成を示すブロック図である。
【図２Ｂ】本発明の第２実施形態に係る眼鏡型ウェアラブル端末の外観を示す図である。
【図３Ａ】本発明の第２実施形態に係る眼鏡型ウェアラブル端末の処理の流れを示すフローチャートである。
【図３Ｂ】本発明の第２実施形態に係る眼鏡型ウェアラブル端末の処理の流れを示すフローチャートである。
【図４】本発明の第２実施形態に係る眼鏡型ウェアラブル端末の表示画面例を示す図である。
【図５】本発明の第２実施形態に係る眼鏡型ウェアラブル端末の表示画面例を示す図である。
【図６】本発明の第２実施形態に係る眼鏡型ウェアラブル端末の表示画面例を示す図である。
【図７】本発明の第２実施形態に係る眼鏡型ウェアラブル端末の表示画面例を示す図である。
【発明を実施するための形態】
【００１１】
以下に、図面を参照して、本発明の実施の形態について例示的に詳しく説明する。ただし、以下の実施の形態に記載されている構成要素はあくまで例示であり、本発明の技術範囲をそれらのみに限定する趣旨のものではない。
【００１２】
［第１実施形態］
本発明の第１実施形態としての眼鏡型ウェアラブル端末１００について、図１を用いて説明する。図１に示すように、眼鏡型ウェアラブル端末１００は、撮像部１０１と判定部１０２と表示部１０３とを含む。
【００１３】
撮像部１０１は、眼鏡型ウェアラブル端末１００の少なくとも前方を撮像し、判定部１０２は、撮像部１０１で撮像された映像中に所定の対象物が含まれているか否かを判定する。
【００１４】
表示部１０３は、判定部１０２で所定の対象物が含まれていると判定した場合に、所定の対象物の位置を表示する。
【００１５】
上記構成によれば、ユーザは眼鏡型ウェアラブル端末を用いて、より確実に所定の物体の位置を認識できる。
【００１６】
［第２実施形態］
次に本発明の第２実施形態に係る眼鏡型ウェアラブル端末２００について、図２を用いて説明する。図２Ａは、本実施形態に係る眼鏡型ウェアラブル端末２００の機能構成図であり、図２Ｂは、眼鏡型ウェアラブル端末２００の外観図である。
【００１７】
図２Ａに示すように、眼鏡型ウェアラブル端末２００は、前方カメラ２０１、後方カメラ２０２、ディスプレイ２０３、マイク２０４、スピーカ２０５、通信部２０６、操作部２０７、記憶部２０８、制御部２０９を備えている。これらは基本的にハードウェアで実装される機能構成である。また、眼鏡型ウェアラブル端末２００は、画像生成部２１０、対象検知部２１１、距離判定部２１２、接近判定部２１３、顔識別部２１４、混雑度判定部２１５、および位置方位検出部２１６を備えている。これらの構成２１０〜２１６は、基本的にソフトウェアで実装される。つまり記憶部２０８に保存されたプログラムモジュールを制御部２０９が実行することにより実現される機能である。ディスプレイ２０３は左右両方に存在してもよい。また、左右のレンズの範囲を判定して、左右のどちらに表示させるかを判定してもよい。
【００１８】
前方カメラ２０１および後方カメラ２０２は、眼鏡型ウェアラブル端末２００の周辺を撮像する。通信部２０６は、外部の無線タグ２２０と通信可能であり、無線タグ２２０の位置情報を位置検出部２２１から取得する。位置検出部２２１は、ＧＰＳ（Global Positioning System）受信機を備え、無線タグ２２０の地球上の絶対位置を受信してもよい。
【００１９】
操作部２０７は、眼鏡型ウェアラブル端末２００を装着したユーザからの操作を受け付ける。記憶部２０８は、各種プログラムの他、各種データを記憶する。
【００２０】
画像生成部２１０は、ディスプレイ２０３に表示する画像を生成する。具体的には、所定の対象物の位置を表示する画像を生成する。対象検知部２１１は、無線タグ２２０から受信した信号に基づいて所定の対象を検知したり、撮像された画像中に所定の対象物が含まれているかを判定したりする。距離判定部２１２は、無線タグ２２０から受信した信号の強さに基づいて、所定の対象までの距離を判定する。接近判定部２１３は、前方カメラ２０１または後方カメラ２０２で撮像された画像を解析して、急接近してきた物体があるか否かを判定する。
【００２１】
顔識別部２１４は、カメラ２０１、２０２によって撮像された画像を解析して、画像中の顔を識別し、あらかじめ登録した人物が周囲に存在する否か判定する。混雑度判定部２１５は、カメラ２０１、２０２によって撮像された画像を解析して、周囲の混雑度合いを判定する。位置方位検出部２１６は、眼鏡型ウェアラブル端末２００の位置およびその向き（方位）を検出する。
【００２２】
図３Ａ、図３Ｂは、眼鏡型ウェアラブル端末２００の処理の流れを示すフローチャートである。ステップＳ３０１において、無線タグ２２０から、無線タグ２２０の位置情報を含む信号を受信すると、ステップＳ３０３に進む。ステップＳ３０３では、位置方位検出部２１６が検出した眼鏡型ウェアラブル端末２００の位置情報と無線タグ２２０の位置情報とを比較して、眼鏡型ウェアラブル端末２００から見た無線タグ２２０の方向が、ディスプレイ２０３の表示範囲内か判定する。ディスプレイ２０３の表示範囲については、位置方位検出部２１６で検出した、眼鏡型ウェアラブル端末２００の向き（方位）によって算出できる。例えば、眼鏡型ウェアラブル端末２００の方位が真北の場合には、無線タグ２２０が眼鏡型ウェアラブル端末２００から見て、東経４５度から西経４５度までの間に含まれていればディスプレイ２０３の表示範囲内と判断する。
【００２３】
無線タグ２２０がディスプレイ２０３の表示範囲内であれば、ステップＳ３０５に進み、画像生成部２１０は、無線タグ２２０の位置の上方に、無線タグ２２０が示す対象名と下向きの矢印を表示する。このとき矢印の大きさや数を、眼鏡型ウェアラブル端末２００と無線タグ２２０との距離に応じた大きさとする。無線タグ２２０が店員や駅員を示す情報を送信するものであれば、図４の画面４０１や画面４０２に示すような表示になる。画面４０１では、対象名表示４１１として「駅員」、位置を示す識別子として矢印４１２が、ガラスディスプレイ越しに見える背景と重なるように表示されている。画面４０２には、対象名表示４２１、４２２として「店員」、位置を示す識別子として矢印４２３、４２４が表示されている。矢印４２４で示されている店員は、眼鏡型ウェアラブル端末２００に近いため、矢印４２４は矢印４２３よりも大きく表示される。対象との距離に応じて矢印の色を変えてもよい。
【００２４】
無線タグ２２０がディスプレイ２０３の表示範囲外であれば、ステップＳ３０５に進み、無線タグ２２０が示す対象名と、方向（表示範囲よりも右側にあるか、左側にあるか）を示す矢印とを表示する。このとき矢印の大きさや数を、眼鏡型ウェアラブル端末２００と無線タグ２２０との距離に応じた大きさまたは数とする。例えば、図５に示す画面５００では、対象名表示５０１としての「駅員」と矢印５０２とが表示される。この例では、駅員が遠いので、矢印５０２が２つ表示されている。さらに遠ければ、矢印は３つ表示される。近ければ、矢印は１つ表示される。無線タグ２２０は、店員や駅員などに限らず、任意の人物または物体に取り付けることができる。無線タグ２２０に自分の子供の情報を保存して、子供の衣服などに取り付ければ、図６に示すように、子供６０１が迷子になっても、眼鏡型ウェアラブル端末２００を装着した親６０２は、画面表示６０３を見て、どの子供がどの方向のどの距離の位置にいるかを即座に認識することができる。
【００２５】
以上説明した図３Ａの処理は、ユーザから対象物の場所を表示するようにリクエスト操作があった場合に開始される。ただし、無線タグ内の情報の属性によっては、定期的に、無線タグ２２０と眼鏡型ウェアラブル端末２００との距離を算出し、所定距離以上離れた場合に、アラート表示（方向および距離を含む）を行なう設定としてもよい。例えば、子供に無線タグを装着させる場合、子供６０１が離れたことを即座に親に知らせることができるようになる。
【００２６】
図３Ｂにおいては、ステップＳ３１１において、接近判定部２１３が、カメラ２０１、２０２で撮像された画像を解析して、眼鏡型ウェアラブル端末２００に向かって近づく接近物体があるか否か判定する。接近物体があれば、ステップＳ３１３からステップＳ３１５に進み、混雑度判定部２１５は、眼鏡型ウェアラブル端末２００を装着したユーザの周囲の混雑度を判定する。さらに判定した混雑度に応じて設定した所定速度（閾値）と、接近物体の接近速度とを比較する。混雑時には、接近人物として誤検出される可能性が高くなるため、所定の速度を高くして、歩行者とのすれ違いに関しての誤検知を低減する。高速移動中（車運転、電車に乗っている等）の場合には、衝突検知をＯＦＦしてもよい。混雑度は、画像内の顔を検出し、検出した顔が所定数以上ある場合に、混在していると判定してもよい。また、混雑度は、監視場所に存在する人の多さの度合いを示す指標値であり、人数、密度、人数および密度の少なくとも一方を用いた計算により得られる値で示されてもよい。例えば、検出した顔の数に基づいて、混雑度の指標を算出する構成とすることもできる。さらに、混雑度を数値として表す手法としては、群衆（人の塊）を検出し、検出した群衆の数を用いて、監視画像内の人数を高精度に推定することもできる。
【００２７】
物体の接近速度が所定速度以上であれば、ステップＳ３１９に進み、画像生成部２１０は、接近物体の位置（方向および距離）を表示する。図７は接近してくる人物についてアラート表示をした場合の画面７００を示している。画面７００に示すように接近してくる人物がいる場合、画像生成部２１０は、対象名表示７０１として「接近注意！」という警告を表示し、位置を示す識別子として矢印７０２を、その人物との距離に応じた大きさで表示する。これらの画像は、ガラスディスプレイ越しに見える背景と重なるように表示される。さらに、接近人物とぶつかった（加速度センサが、所定値以上の加速を検出した）場合には、カメラ２０１、２０２で撮像した映像を記録する。
【００２８】
［他の実施形態］
以上、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。また、それぞれの実施形態に含まれる別々の特徴を如何様に組み合わせたシステムまたは装置も、本発明の範疇に含まれる。
【００２９】
また、本発明は、複数の機器から構成されるシステムに適用されてもよいし、単体の装置に適用されてもよい。さらに、本発明は、実施形態の機能を実現する情報処理プログラムが、システムあるいは装置に直接あるいは遠隔から供給される場合にも適用可能である。したがって、本発明の機能をコンピュータで実現するために、コンピュータにインストールされるプログラム、あるいはそのプログラムを格納した媒体、そのプログラムをダウンロードさせるＷＷＷ(World Wide Web)サーバも、本発明の範疇に含まれる。特に、少なくとも、上述した実施形態に含まれる処理ステップをコンピュータに実行させるプログラムを格納した非一時的コンピュータ可読媒体（non-transitory computer readable medium）は本発明の範疇に含まれる。
【００３０】
［実施形態の他の表現］
上記の実施形態の一部または全部は、以下の付記のようにも記載されうるが、以下には限られない。
（付記１）
周辺を撮像する撮像手段と、
前記撮像手段で撮像された映像中に所定の対象物が含まれているか否かを判定する判定手段と、
前記判定手段で前記所定の対象物が含まれていると判定した場合に、前記所定の対象物の位置を表示する表示手段と、
を備えた眼鏡型ウェアラブル端末。
（付記２）
前記表示手段は、前記所定の対象物が、前記眼鏡型ウェアラブル端末の表示範囲外である場合に、前記所定の対象物がいる方向を示す矢印を表示する付記１に記載の眼鏡型ウェアラブル端末。
（付記３）
前記表示手段は、前記所定の対象物までの距離に基づいて、前記矢印の大きさまたは色を変更する付記２に記載の眼鏡型ウェアラブル端末。
（付記４）
前記判定手段は、前記所定の対象物に設けられた無線タグからの信号を受信し、前記信号に基づいて、前記判定を行なう付記１乃至３のいずれか１項に記載の眼鏡型ウェアラブル端末。
（付記５）
前記信号は、前記所定の対象物の位置情報を含む付記４に記載の眼鏡型ウェアラブル端末。
（付記６）
前記撮像手段は、前記眼鏡型ウェアラブル端末の前方および後方を撮像し、
前記判定手段は、前記映像中に、前記眼鏡型ウェアラブル端末に向かって近づく物体がいるか否かを判定し、
前記表示手段は、前記物体の位置を表示する付記１および５のいずれか１項に記載の眼鏡型ウェアラブル端末。
（付記７）
前記判定手段は、前記映像中に含まれた、前記眼鏡型ウェアラブル端末に向かって所定の閾値以上の速度で近づく物体を検出する付記１乃至６のいずれか１項に記載の眼鏡型ウェアラブル端末。
（付記８）
前記判定手段は、周囲の混雑度を判定し、前記混雑度が高いと前記所定の閾値を高くする付記７に記載の眼鏡型ウェアラブル端末。
（付記９）
前記撮像手段は、前記眼鏡型ウェアラブル端末の前方および後方を撮像し、
前記判定手段は、前記映像中に、あらかじめ登録した人物が含まれているか否かを判定し、
前記表示手段は、前記あらかじめ登録した人物の位置を表示する付記１乃至５のいずれか１項に記載の眼鏡型ウェアラブル端末。
（付記１０）
周辺を撮像する撮像手段を含む眼鏡型ウェアラブル端末の制御方法であって、
前記撮像手段で撮像された映像中に所定の対象物が含まれているか否かを判定する判定ステップと、
前記判定ステップで前記所定の対象物が含まれていると判定した場合に、前記所定の対象物の位置を表示する表示ステップと、
を含む眼鏡型ウェアラブル端末の制御方法。
（付記１１）
周辺を撮像する撮像手段を含む眼鏡型ウェアラブル端末の制御プログラムであって、
前記撮像手段で撮像された映像中に所定の対象物が含まれているか否かを判定する判定ステップと、
前記判定ステップで前記所定の対象物が含まれていると判定した場合に、前記所定の対象物の位置を表示する表示ステップと、
を含む眼鏡型ウェアラブル端末の制御プログラム。
【００３１】
この出願は、２０１６年３月２３日に出願された日本出願特願２０１６−０５８０２５を基礎とする優先権を主張し、その開示の全てをここに取り込む。
【図１】
2017163514.tif 000003
【図２Ａ】
2017163514.tif 000004
【図２Ｂ】
2017163514.tif 000005
【図３Ａ】
2017163514.tif 000006
【図３Ｂ】
2017163514.tif 000007
【図４】
2017163514.tif 000008
【図５】
2017163514.tif 000009
【図６】
2017163514.tif 000010
【図７】
2017163514.tif 000011
【国際調査報告】
2017163514.tif 000012
2017163514.tif 000013
2017163514.tif 000014
2017163514.tif 000015