(57)【要約】  情報表示装置は、表示制御部（２５）と、ジェスチャー検出部（１０）と、ジェスチャー情報に基づいて操作者のジェスチャーの識別を行い、識別の結果に基づく信号を出力するジェスチャー識別部（２３）と、操作者（２）と表示部（３０）との間の距離を推測する距離推測部（２１）と、推測された距離が第１の設定距離を超えているときにジェスチャー識別部（２３）によって識別可能なジェスチャーの個数が、推測された距離が第１の設定距離以下であるときにジェスチャー識別部（２３）によって識別可能なジェスチャーの個数より少なくなるように、ジェスチャー識別部（２３）によって識別可能なジェスチャーを設定する識別機能設定部（２２）とを有する。
2016170872.tif 000002
【特許請求の範囲】
【請求項１】
表示部に情報を表示させる表示制御部と、
操作者によって実行されるジェスチャーに基づくジェスチャー情報を生成するジェスチャー検出部と、
前記ジェスチャー検出部で生成された前記ジェスチャー情報に基づいて前記ジェスチャーの識別を行い、前記識別の結果に基づく信号を出力するジェスチャー識別部と、
前記操作者と前記表示部との間の距離を推測する距離推測部と、
予め決められた第１の設定距離を記憶し、前記距離が前記第１の設定距離を超えているときに前記ジェスチャー識別部によって識別可能なジェスチャーの個数が、前記距離が前記第１の設定距離以下であるときに前記ジェスチャー識別部によって識別可能なジェスチャーの個数より少なくなるように、前記ジェスチャー識別部によって識別可能なジェスチャーを設定する識別機能設定部と、
を有することを特徴とする情報表示装置。
【請求項２】
前記表示制御部は、前記距離に応じて、前記表示部に表示される情報を変更させることを特徴とする請求項１に記載の情報表示装置。
【請求項３】
前記表示制御部は、前記距離に応じて、前記表示部に表示される画像のレイアウトを変更させることを特徴とする請求項２に記載の情報表示装置。
【請求項４】
前記表示制御部は、前記距離に応じて、前記表示部に表示される文字、アイコン、及びポインタの内の少なくとも１つのサイズを変更させることを特徴とする請求項２に記載の情報表示装置。
【請求項５】
前記表示制御部は、前記距離が前記第１の設定距離を超えているときに、前記距離が前記第１の設定距離以下であるときに前記表示部に表示されていた情報の一部を、拡大表示させることを特徴とする請求項１に記載の情報表示装置。
【請求項６】
前記表示制御部は、前記距離が前記第１の設定距離を超えているときに、前記距離が前記第１の設定距離以下であるときに前記表示部に表示されていた文字、アイコン、及びポインタの内の少なくとも１つを、拡大表示させることを特徴とする請求項５に記載の情報表示装置。
【請求項７】
前記表示制御部は、前記識別機能設定部によって設定された前記識別可能なジェスチャーに応じて、前記表示部に表示される情報を変更させることを特徴とする請求項１から６のいずれか１項に記載の情報表示装置。
【請求項８】
前記識別機能設定部は、
前記第１の設定距離よりも大きい第２の設定距離を予め記憶し、
前記距離が予め決められた前記第２の設定距離を超えているときに前記ジェスチャー識別部によって識別可能なジェスチャーの個数が、前記距離が前記第２の設定距離以下であるときに前記ジェスチャー識別部によって識別可能なジェスチャーの個数より少なくなるように、前記ジェスチャー識別部によって識別可能なジェスチャーを設定する
ことを特徴とする請求項１から７のいずれか１項に記載の情報表示装置。
【請求項９】
前記表示制御部は、前記距離が前記第２の設定距離を超えているときに、前記距離が前記第１の設定距離を超えており且つ前記第２の設定距離以下であるときに前記表示部に表示されていた情報と異なる情報を前記表示部に表示させることを特徴とする請求項８に記載の情報表示装置。
【請求項１０】
前記ジェスチャー検出部は、前記操作者のジェスチャーの撮像を行い、
前記ジェスチャー情報は、前記撮像によって生成された画像データである
ことを特徴とする請求項１から９のいずれか１項に記載の情報表示装置。
【請求項１１】
前記ジェスチャー検出部は、前記操作者の身体に保持され、前記表示部の撮像を行い、前記撮像によって生成された画像データを送信する操作装置を有することを特徴とする請求項１から１０のいずれか１項に記載の情報表示装置。
【請求項１２】
前記距離推測部は、前記ジェスチャー検出部から出力された画像データに基づいて前記操作者と前記表示部との間の距離を推測することを特徴とする請求項１０又は１１に記載の情報表示装置。
【請求項１３】
前記距離推測部は、前記操作者が、前記表示部を中心にして左側又は右側のいずれの側にいるかを判別する左右判別部を有し、
前記表示制御部は、前記左右判別部による判別結果に基づいて、前記表示部の表示内容を切り替える
ことを特徴とする請求項１０から１２のいずれか１項に記載の情報表示装置。
【請求項１４】
前記ジェスチャー検出部における撮像によって生成された複数フレームの画像における動きを検出し、検出された前記動きの中に、定められたある一定の期間における規則的な動きが含まれている場合、前記規則的な動きを外乱と判断し、前記判断に基づくフィルタ情報を生成する外乱検出部をさらに有し、
前記距離推測部は、前記フィルタ情報に基づいて、複数フレームの画像における動きを補正する
ことを特徴とする請求項１０から１３のいずれか１項に記載の情報表示装置。
【請求項１５】
前記操作者の顔画像と前記操作者の属性情報とを互いに関連付けて記憶し、前記操作者を特定する操作者認識部をさらに備え、
前記距離推測部は、前記操作者認識部によって特定された前記操作者の属性情報と前記画像データとに基づいて前記操作者と前記表示部との間の距離を推測する
ことを特徴とする請求項１０から１４のいずれか１項に記載の情報表示装置。
【請求項１６】
複数の基準ジェスチャーを示す基準ジェスチャー情報と前記複数の基準ジェスチャーに対応する指示内容とをジェスチャーデータベースとして記憶する記憶部をさらに有し、
前記ジェスチャー識別部は、前記ジェスチャー検出部から出力された前記ジェスチャー情報と前記記憶部に記憶されている前記基準ジェスチャー情報との比較を行い、前記比較の結果に基づいて、前記ジェスチャーの識別を行う
ことを特徴とする請求項１から１５のいずれか１項に記載の情報表示装置。
【請求項１７】
前記ジェスチャー識別部による前記識別の結果に基づく機能を実行する機能実行部をさらに有することを特徴とする請求項１から１６のいずれか１項に記載の情報表示装置。
【請求項１８】
前記機能実行部は、前記ジェスチャー識別部による前記識別の結果に基づく信号を前記表示制御部に出力することを特徴とする請求項１７に記載の情報表示装置。
【請求項１９】
前記表示部をさらに有することを特徴とする請求項１から１８のいずれか１項に記載の情報表示装置。
【請求項２０】
表示部に情報を表示させる情報表示装置が実行する情報表示方法であって、
操作者によって実行されるジェスチャーに基づくジェスチャー情報を生成するジェスチャー検出ステップと、
前記ジェスチャー検出ステップにおいて生成された前記ジェスチャー情報に基づいて前記ジェスチャーの識別を行い、前記識別の結果に基づく信号を生成するジェスチャー識別ステップと、
前記操作者と前記表示部との間の距離を推測する距離推測ステップと、
前記距離が予め決められた第１の設定距離を超えているときに前記ジェスチャー識別ステップにおいて識別可能なジェスチャーの個数が、前記距離が前記第１の設定距離以下であるときに前記ジェスチャー識別ステップにおいて識別可能なジェスチャーの個数より少なくなるように、前記ジェスチャー識別ステップにおいて識別可能なジェスチャーを設定する識別機能設定ステップと、
を有することを特徴とする情報表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、操作者（ユーザー）が行うジェスチャーによって操作者の指示が入力される情報表示装置及び情報表示方法に関するものである。
【背景技術】
【０００２】
近年、テレビ（放送受信機）、ＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）、カーナビゲーションシステム、及びデジタルサイネージシステム等のユーザーインタフェースとして、ジェスチャーＵＩ（Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）が採用され始めている。ジェスチャーＵＩは、操作者の身体の動き及び身体の形状（例えば、手の動き、手の形状、指の動き、及び指の形状等）のようなジェスチャーにより、操作者が機器を操作することを可能にする。例えば、手の動きに応じて表示部（ディスプレイ）の画面上のポインタを移動させるハンドポインティングを利用するジェスチャーＵＩは、操作者が手でポインタ位置を指し示すというジェスチャーを行うと、このジェスチャーに応じて画面上のポインタを移動させる。【０００３】
ジェスチャーＵＩは、ＲＧＢ（赤、緑、青）カメラなどの撮像装置又はＴｏＦ（Ｔｉｍｅ  ｏｆ  Ｆｌｉｇｈｔ）センサ等のようなジェスチャー検出部（センサ部）を用いることによって操作者のジェスチャーを検出（撮像）する。ジェスチャーＵＩは、操作者を撮像することによって得られた画像データを解析してジェスチャーを識別（特定）し、ジェスチャーが意味する指示内容を示す信号を出力する。しかし、操作者がジェスチャー検出部（センサ部）から離れるほど、撮像によって生成された各フレームの画像における操作者のサイズは小さくなり、操作者のジェスチャーによる身体の部位の移動量も小さくなる。このように、操作者がジェスチャー検出部から離れた位置にいる場合には、ジェスチャーＵＩは、身体の部位の小さな移動に基づいてジェスチャーを識別（特定）し、ジェスチャーが示す指示内容を示す信号を出力しなければならない。このため、ジェスチャーＵＩでは、操作者がジェスチャー検出部から離れたときに、ジェスチャーを誤って識別（特定）する又はジェスチャーを識別することができないという問題が発生する。【０００４】
また、特許文献１は、画像処理装置において、ジェスチャー検出部としての撮像装置によって生成された画像における検出対象の位置及び大きさに基づいて、操作対象領域を設定することを提案している。この画像処理装置では、操作者の手又は顔を検出対象とすることによって、設定される操作対象領域とこの操作対象領域に含まれる操作者の手又は顔の大きさとの比率は、一定に保たれる。これにより、操作者による操作性が向上する。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１３−２５７７６２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、上記いずれの従来技術においても、操作者がジェスチャー検出部から離れるほど、撮像によって生成された各フレームの画像における操作者のサイズは小さくなるので、ジェスチャーＵＩによるジェスチャーの誤識別が発生しやすくなるという問題がある。【０００７】
そこで、本発明は、上記従来技術の課題を解決するためになされたものであり、操作者が情報表示装置から離れた位置にいる場合であっても、操作者のジェスチャーの誤識別が発生し難い情報表示装置及び情報表示方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明に係る情報表示装置は、表示部に情報を表示させる表示制御部と、操作者によって実行されるジェスチャーに基づくジェスチャー情報を生成するジェスチャー検出部と、前記ジェスチャー検出部で生成された前記ジェスチャー情報に基づいて前記ジェスチャーの識別を行い、前記識別の結果に基づく信号を出力するジェスチャー識別部と、前記操作者と前記表示部との間の距離を推測する距離推測部と、予め決められた第１の設定距離を記憶し、前記距離が前記第１の設定距離を超えているときに前記ジェスチャー識別部によって識別可能なジェスチャーの個数が、前記距離が前記第１の設定距離以下であるときに前記ジェスチャー識別部によって識別可能なジェスチャーの個数より少なくなるように、前記ジェスチャー識別部によって識別可能なジェスチャーを設定する識別機能設定部と、を有することを特徴とする。【０００９】
本発明に係る情報表示方法は、表示部に情報を表示させる情報表示装置が実行する情報表示方法であって、操作者によって実行されるジェスチャーに基づくジェスチャー情報を生成するジェスチャー検出ステップと、前記ジェスチャー検出ステップにおいて生成された前記ジェスチャー情報に基づいて前記ジェスチャーの識別を行い、前記識別の結果に基づく信号を生成するジェスチャー識別ステップと、前記操作者と前記表示部との間の距離を推測する距離推測ステップと、前記距離が予め決められた第１の設定距離を超えているときに前記ジェスチャー識別ステップにおいて識別可能なジェスチャーの個数が、前記距離が前記第１の設定距離以下であるときに前記ジェスチャー識別ステップにおいて識別可能なジェスチャーの個数より少なくなるように、前記ジェスチャー識別ステップにおいて識別可能なジェスチャーを設定する識別機能設定ステップと、を有することを特徴とする。
【発明の効果】
【００１０】
本発明においては、操作者が情報表示装置の表示部から離れた位置にいる場合に、識別可能なジェスチャーの個数が少なくなるように、識別可能なジェスチャーを設定する。このように、本発明によれば、操作者が表示部から離れた位置にいる場合に、例えば、身体の移動量の小さいジェスチャーを識別可能なジェスチャーから除外することによって、操作者のジェスチャーの誤識別を発生し難くすることができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の実施の形態１に係る情報表示装置の使用状態を示す概略図である。
【図２】実施の形態１に係る情報表示装置の構成を概略的に示すブロック図である。
【図３】実施の形態１に係る情報表示装置が、操作者を撮像することによって取得した画像の一例を示す図である。
【図４】実施の形態１に係る情報表示装置の動作状態を示す概略図である。
【図５】実施の形態１に係る情報表示装置の表示部に表示された画像の一例を示す図である。
【図６】実施の形態１に係る情報表示装置の表示部に表示された画像の他の例を示す図である。
【図７】実施の形態１に係る情報表示装置の表示部に表示された画像の他の例を示す図である。
【図８】実施の形態１に係る情報表示装置の表示部に表示された画像の他の例を示す図である。
【図９】実施の形態１に係る情報表示装置の表示部に表示された画像の他の例を示す図である。
【図１０】（ａ）及び（ｂ）は、実施の形態１に係る情報表示装置の表示部に表示された画像の遷移（操作者が表示部に近い位置にいる場合）を示す図である。
【図１１】（ａ）及び（ｂ）は、実施の形態１に係る情報表示装置の表示部に表示された画像の遷移（操作者が表示部から遠い位置にいる場合）を示す図である。
【図１２】（ａ）から（ｃ）は、実施の形態１に係る情報表示装置の使用状態を示す概略図である。
【図１３】実施の形態１に係る情報表示装置における初期設定を示すフローチャートである。
【図１４】実施の形態１に係る情報表示装置の動作を示すフローチャートである。
【図１５】本発明の実施の形態２に係る情報表示装置の動作を示すフローチャートである。
【図１６】本発明の実施の形態３に係る情報表示装置の使用状態を示す概略図である。
【図１７】実施の形態３に係る情報表示装置の構成を概略的に示すブロック図である。
【図１８】本発明の実施の形態４に係る情報表示装置の使用状態を示す概略図である。
【図１９】実施の形態４に係る情報表示装置の構成を概略的に示すブロック図である。
【図２０】本発明の実施の形態５に係る情報表示装置の構成を概略的に示すブロック図である。
【図２１】実施の形態５の変形例に係る情報表示装置の構成を概略的に示すブロック図である。
【図２２】実施の形態５に係る情報表示装置の動作を示すフローチャートである。
【図２３】本発明の実施の形態６に係る情報表示装置の構成を概略的に示すブロック図である。
【図２４】実施の形態６に係る情報表示装置の動作を示すフローチャートである。
【図２５】本発明の実施の形態７に係る情報表示装置の使用状態を示す概略図である。
【図２６】実施の形態７に係る情報表示装置の構成を概略的に示すブロック図である。
【図２７】実施の形態７に係る情報表示装置の動作を示すフローチャートである。
【図２８】実施の形態１から７に係る情報表示装置の変形例の構成を示すハードウェア構成図である。
【発明を実施するための形態】
【００１２】
《１》実施の形態１
《１−１》構成
図１は、本発明の実施の形態１に係る情報表示装置１の使用状態を示す概略図である。図１に示されるように、情報表示装置１は、ディスプレイとしての表示部３０と、撮像装置（カメラ）又はＴｏＦなどの撮像部としてのジェスチャー検出部（センサ部）１０とを備えている。情報表示装置１は、操作者（ユーザー）２が行うジェスチャーによって、情報表示装置１を操作するジェスチャーＵＩを備えている。実施の形態１においては、ジェスチャー検出部１０は、情報表示装置１の本体上部に取り付けられている。ただし、ジェスチャー検出部１０は、情報表示装置１の本体内部に収納されてもよいし、情報表示装置１の本体の近傍に備えられてもよい。また、ジェスチャー検出部１０と情報表示装置１の本体との位置関係を示す情報を情報表示装置１が保持する場合には、ジェスチャー検出部１０は、情報表示装置１の本体から離れた位置に備えられてもよい。操作者２は、操作者２の身体の動き及び形状（例えば、手２Ａ及び指２Ｂによる予め決められた動作及びポーズ、又は、顔２Ｃの表情など）であるジェスチャーによって、情報表示装置１に指示情報を入力する。ジェスチャーとしては、例えば、操作者２が、手２Ａを右横方向に動かす動作、手２Ａを左横方向に動かす動作、手２Ａを上方向に動かす動作、手２Ａを下方向に動かす動作、指２Ｂで指し示す動作、手２Ａと指２Ｂでピースサインを形成する動作等を挙げることができる。
【００１３】
図２は、実施の形態１に係る情報表示装置１の構成を概略的に示すブロック図である。情報表示装置１は、実施の形態１に係る情報表示方法を実施することができる装置である。図２に示されるように、情報表示装置１は、撮像部であるジェスチャー検出部１０と、制御部２０とを備えている。また、情報表示装置１は、ディスプレイとしての表示部３０と、メモリなどの記憶部４０とを備えてもよい。制御部２０は、距離推測部２１と、識別機能設定部２２と、ジェスチャー識別部（ジェスチャー判定部）２３と、表示制御部２５とを有している。また、情報表示装置１は、機能実行部２４を有してもよい。
【００１４】
ジェスチャー検出部１０は、操作者２によって行われるジェスチャーＧＥに基づくジェスチャー情報Ｇ１を生成する。例えば、ジェスチャー検出部１０は、操作者２のジェスチャーＧＥを撮像し、ジェスチャーＧＥに応じた画像データを含むジェスチャー情報Ｇ１を生成する。画像データは、例えば、時間順に並ぶ複数フレームの静止画像データ、又は、動画像データである。なお、実施の形態１においては、ジェスチャー検出部１０が撮像部である場合を説明するが、ジェスチャー検出部１０は、操作者２のジェスチャーに応じたジェスチャー情報を生成することができる装置であれば、操作者２の身体の一部に装備される操作装置（実施の形態４で説明される）などのような他の装置であってもよい。
【００１５】
ジェスチャー識別部２３は、ジェスチャー検出部１０で生成されたジェスチャー情報Ｇ１に基づいてジェスチャーの識別（特定）を行い、この識別の結果に基づく信号Ｇ２を出力する。ここで、ジェスチャーの識別とは、操作者２が行うジェスチャーがどのような指示内容を示すジェスチャーであるかを特定する処理のことである。
【００１６】
ジェスチャー識別部２３は、ジェスチャー検出部１０によって生成された画像データからジェスチャーの動きパターンを検出する。このとき、ジェスチャー識別部２３は、時間順に並ぶ複数フレームの静止画像データ又は動画像データから、操作者２の身体の部位を含む検出領域の変位を解析することによって、ジェスチャーの動きパターンを検出する。
【００１７】
また、ジェスチャー検出部１０が被写体の奥行きの情報を取得することができるステレオカメラである場合には、ジェスチャー識別部２３は、操作者２の身体の部位を含む検出領域の３次元位置を推測することによって、ジェスチャーの動きパターンを検出する。
【００１８】
また、ジェスチャー検出部１０が１つのレンズを有する単眼カメラである場合には、ジェスチャー識別部２３は、距離推測部２１で推測した距離Ｄ０と、検出領域の画像データとに基づいて、ジェスチャーの動きパターンを検出する。
【００１９】
記憶部４０は、複数の基準ジェスチャーと複数の基準ジェスチャーの各々に対応する指示内容とを関連付けたジェスチャーデータベース（ＤＢ）４０ａを記憶している。ジェスチャー識別部２３は、検出した動きパターンとジェスチャーＤＢ４０ａとして記憶されている複数の基準ジェスチャーの各々とを比較し、記憶された複数の基準ジェスチャーから、検出した動きパターンに対応するものを特定する。ジェスチャー識別部２３は、特定された基準ジェスチャーに関連付けられた指示内容が、操作者２の指示内容であると判定する。なお、ジェスチャーＤＢ４０ａとして記憶部４０に記憶されるジェスチャー及び指示内容は、予め記憶されている。また、操作者２が、ジェスチャーとこれに対応する指示内容を決定し、ジェスチャーＤＢ４０ａとして記憶部４０に記憶させることも可能である。
【００２０】
距離推測部２１は、ジェスチャー検出部１０から出力されたジェスチャー情報Ｇ１に基づいて、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０を推測して、距離Ｄ０を示す距離情報Ｇ３を識別機能設定部２２及び表示制御部２５に与える。図１に示されるように、実施の形態１においては、操作者２と表示部３０との間の距離は、操作者２とジェスチャー検出部１０との間の距離に等しいか、又は、操作者２とジェスチャー検出部１０との間の距離と一定の関係があり、算出可能である。例えば、距離推測部２１は、画像データに含まれる操作者２の身体の特定部位を検出領域として検出し、各フレームの画像における検出領域の大きさに基づいて、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０を推測（算出）する。ただし、距離推測部２１は、他の方法で距離Ｄ０を算出してもよい。
【００２１】
図３は、実施の形態１に係る情報表示装置１のジェスチャー検出部１０が、操作者２を撮像することによって取得した画像２００の一例を示す図である。距離推測部２１は、画像２００に含まれる操作者２の手２Ａを、検出領域２０１として検出する。ここで、距離推測部２１は、画像に含まれる色の情報から操作者の肌の色を検出し、操作者の身体の特定部位を検出領域としている。また、検出領域が顔である場合には、顔の部位（目、鼻、口等）を判定した後に、顔全体の領域を判定することも可能である。また、距離推測部２１は、画像中に探索窓を設けて、分類器により顔の領域か否かを判定する方法により、顔を判定するなどの、他の方法を採用してもよい。例えば、操作者２の顔と手２Ａの両方を検出領域としても良い。距離推測部２１は、画像２００における検出領域２０１の大きさに基づいて、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０を推測（算出）する。
【００２２】
距離推測部２１による、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０の推測としては、距離Ｄ０を推測する場合と、操作者２が、予め決められた基準距離よりも表示部３０に近い位置にいるか又は遠い位置にいるかを判定する場合とがある。
【００２３】
操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０を推測（算出）する場合、距離推測部２１は、画像２００における検出領域２０１の大きさと距離Ｄ０との間の相関データを、予め記憶しておく。距離推測部２１は、この相関データに基づいて、生成された画像２００における検出領域２０１の大きさから、距離Ｄ０を推測（算出）する。検出領域２０１の大きさは、検出領域２０１の面積、又は、検出領域２０１の縦の長さＬｖ及び横の長さＬｈの少なくとも一方により導出可能である。
【００２４】
操作者２が、予め決められた基準位置よりも表示部３０に近い位置にいるか又は遠い位置にいるかを判定する場合、距離推測部２１は、操作者２がジェスチャーを行う予定である位置を基準位置として、その基準位置及び基準位置における画像２００における検出領域２０１の大きさを相関データとして予め記憶しておく。距離推測部２１は、相関データに基づいて、生成された画像２００における検出領域２０１の大きさから、操作者２が基準位置よりも近い位置にいるか又は遠い位置にいるかを判定する。この場合には、制御部２０における計算量が低減される。
【００２５】
識別機能設定部２２は、予め決められた第１の設定距離Ｄ１を記憶し、距離Ｄ０が第１の設定距離を超えているときにジェスチャー識別部２３によって識別可能なジェスチャーの個数が、距離Ｄ０が第１の設定距離Ｄ１以下であるときに、ジェスチャー識別部２３によって識別可能なジェスチャーの個数より少なくなるように、ジェスチャー識別部２３によって識別可能なジェスチャーを設定する。第１の設定距離Ｄ１は、情報表示装置１の使用を開始する際に予め設定される。
【００２６】
識別機能設定部２２は、距離Ｄ０が第１の設定距離Ｄ１以下である場合、ジェスチャー識別部２３によって識別可能なジェスチャーを制限しない。このとき、情報表示装置１の動作状態を、全機能モードという。識別機能設定部２２は、識別可能なジェスチャーをジェスチャー識別部２３に通知し、情報表示装置１の動作状態を表示制御部２５に通知する。
【００２７】
識別機能設定部２２は、距離Ｄ０が第１の設定距離Ｄ１より大きく第２の設定距離Ｄ２以下である場合、ジェスチャー識別部２３によって識別可能なジェスチャーを制限する。ここで、制限された識別可能なジェスチャーは、操作者２の利用頻度の高い機能のためのジェスチャーである。このとき、情報表示装置１の動作状態を、制限機能モードという。
【００２８】
識別機能設定部２２は、距離Ｄ０が第２の設定距離Ｄ２より大きい場合、ジェスチャー識別部２３によって識別可能なジェスチャーをさらに制限する。ここで、さらに制限された識別可能なジェスチャーは、操作者２の利用頻度のさらに高い機能のためのジェスチャーである。このとき、情報表示装置１の動作状態を、特定機能モードという。
【００２９】
識別機能設定部２２で基準となる距離Ｄ２は、ジェスチャー識別部２３でのジェスチャーの認識が困難である距離とする。この距離Ｄ２は、ジェスチャー検出部１０で使用されるカメラの解像度といったセンサ性能、分光フィルタ情報、ＭＴＦ（Ｍｏｄｕｌａｔｉｏｎ  Ｔｒａｎｓｆｅｒ  Ｆｕｎｃｔｉｏｎ）等のレンズ性能、照明光の色及び照度といった照明環境の情報、並びに、検出対象物の大きさ及び色情報、のいずれか又は全てをもとに設定される。
【００３０】
機能実行部２４は、ジェスチャー識別部２３から出力された信号Ｇ２に基づく機能を実行する。また、機能実行部２４は、機能を実行した結果を、表示制御部２５に通知する。
【００３１】
表示制御部２５は、表示部３０の表示動作を制御する。例えば、表示制御部２５は、操作メニューを生成し、操作メニューを表示部３０に表示させる。表示制御部２５は、識別機能設定部２２によって設定された動作状態が、全機能モード、制限機能モード、特定機能モードのいずれであるかに応じて、表示部３０の表示レイアウト、及び、表示内容を設定する。また、表示制御部２５は、距離推測部２１によって推測（算出）された距離Ｄ０に基づいて、表示部３０に表示される文字、アイコン、及びポインタのサイズを調整してもよい。例えば、表示制御部２５は、距離Ｄ０が小さい場合は、表示される文字、アイコン、及びポインタのサイズを小さくし、距離Ｄ０が大きくなるにつれて、表示される文字、アイコン、及びポインタのサイズを大きくする。このようにすることで、アイコン、文字、及びポインタ等の視認性が保たれる。また、表示制御部２５は、機能実行部２４から通知された結果を表示部３０に表示させる。
【００３２】
《１−２》動作
図４は、実施の形態１に係る情報表示装置１の動作状態を示す概略図である。図４は、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０と、操作者２が情報表示装置１をジェスチャー操作するときに、情報表示装置１によって識別可能（使用可能）なジェスチャーの種類と、情報表示装置１の状態との関係を示す。図４の例では、情報表示装置１をジェスチャー操作するときに、識別可能（使用可能）なジェスチャーが、３種類のジェスチャーＧＥ１、ＧＥ２、ＧＥ３に分類されている。３種類のジェスチャーは、情報表示装置１による識別の容易さが異なる。例えば、第１の種類のジェスチャーＧＥ１は、操作者２が手を振る動作であるスワイプであり、第２の種類のジェスチャーＧＥ２は、操作者２が指で方向又は位置を示す動作であるポインティングであり、第３の種類のジェスチャーＧＥ３は、操作者２が手の形状を特定の形状にするポーズである。第１の種類のジェスチャーＧＥ１は、手２Ａ等の身体の特定部位の移動方向のみで判別され得るジェスチャーである。これに対し、第３の種類のジェスチャーＧＥ３は、手２Ａ等の身体の特定部位の移動方向のみでは判別不可能であり、身体の特定部位の変位量まで解析しなければ判別することができない。このように、第２の種類のジェスチャーＧＥ２は、少し認識され難いジェスチャーであり、第３の種類のジェスチャーＧＥ３は、最も認識され難いジェスチャーである。
【００３３】
距離Ｄ０が第１の設定距離Ｄ１以下である場合（すなわち、情報表示装置１が全機能モードである場合）、情報表示装置１をジェスチャー操作するときに、操作者２はすべての種類のジェスチャーＧＥ１、ＧＥ２、ＧＥ３を用いることができる。距離Ｄ０が第１の設定距離Ｄ１より大きく第２の設定距離Ｄ２以下である場合（すなわち、情報表示装置１の状態が制限機能モードである場合）、操作者２は、第１の種類のジェスチャーＧＥ１及び第２の種類のジェスチャーＧＥ２を用いることができるが、第３の種類のジェスチャーＧＥ３を用いることができない。距離Ｄ０が第２の設定距離Ｄ２を超えている場合（すなわち、情報表示装置１の状態が特定機能モードである場合）、操作者２は、第１の種類のジェスチャーＧＥ１を用いることができるが、第２の種類のジェスチャーＧＥ２及び第３の種類のジェスチャーＧＥ３を用いることができない。
【００３４】
図５は、実施の形態１に係る情報表示装置１の表示部３０の画面３１に表示される画像の一例を示す図である。図５は、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０が第１の設定距離Ｄ１以下である場合の、表示内容の一例を示す。この場合、表示部３０の画面３１全体に、映像コンテンツに基づく視聴番組画像３０１が表示されている。また、画面３１の左下には、「ＭＥＮＵ」アイコン３０２が表示されている。ここで、情報表示装置１が操作者２の予め決められたジェスチャー（操作メニューを含む表示内容に遷移することを指示内容とするジェスチャー）を識別した場合、又は、操作者２が「ＭＥＮＵ」アイコン３０２を選択する操作を行った場合、図５に示される表示は、操作メニューを含む表示内容（図６）に遷移する。
【００３５】
図６は、実施の形態１に係る情報表示装置１の表示部３０の画面３１に表示される画像の他の例を示す図である。図６は、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０が第１の設定距離Ｄ１以下である場合の、表示内容の例を示す。図６は、図５の表示内容から遷移した後の表示内容を示す。図６においては、画面３１は４つの領域に分割されている。画面３１の左上の領域には、映像コンテンツに基づく視聴番組画像３０１が表示される。また、画面３１の右上の領域には、現在視聴中の視聴番組画像３０１についての情報を示すコンテンツ情報３０３が表示される。また、画面３１の左下には、操作メニューとしてのコンテンツ設定情報３０４が表示される。画面３１の中央の右下側には、操作メニューとしてのアプリケーションメニュー情報３０５が表示される。コンテンツ設定情報３０４は、視聴番組画像３０１に対する操作情報、すなわち、チャネル切り替え、音量調整、録画及び再生、画質及び音質変更、通信方式等の情報を含む。アプリケーションメニュー情報３０５は、情報表示装置１が持つアプリケーションを選択するためのアイコンを含む情報を示す。また、「番組に戻る」アイコン３０６は、図６の表示内容から図５の表示内容に遷移するためのアイコンである。
【００３６】
操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０が第１の設定距離Ｄ１以下である場合、情報表示装置１は、全機能モードである。図６に示される操作メニューである、コンテンツ設定情報３０４及びアプリケーションメニュー情報３０５は、全機能モードにおいて操作者２が操作可能な機能に関する情報である。
【００３７】
表示部３０の画面３１に示されるアイコン、文字、及びポインタは、距離Ｄ０が小さい場合はサイズが小さくなり、距離Ｄ０が大きくなるにつれてサイズが大きくなる構成とすることができる。これにより、操作者２は、情報表示装置１が、操作者２と情報表示装置１との間の距離を把握していることを認識することができる。言い換えれば、情報表示装置１が距離Ｄ０を認識していることを、アイコン、文字、及びポインタ等のサイズを通して、操作者２にフィードバックすることができる。
【００３８】
なお、画面３１におけるアイコン、文字、及びポインタの最適なサイズは、情報表示装置１において、予め設定されている。そのため、情報表示装置１においては、これらのサイズが変更される場合であっても、画面３１における各情報のレイアウトが崩れたり、アイコン、文字、及びポインタが表示された画面３１の領域からはみ出したりする等、視認性が損なわれるほどの変化が生じないように設定されている。
【００３９】
図７は、実施の形態１に係る情報表示装置１の表示部３０の画面３１に表示される画像の他の例を示す図である。図７は、距離Ｄ０が第１の設定距離Ｄ１より大きく第２の設定距離Ｄ２以下である場合の、表示の一例を示す。この場合、画面３１の領域は、分割されていない。映像コンテンツに基づく視聴番組画像３０１は、背景画像として画面３１の全体に示されている。また、アプリケーションメニュー情報３０５は、視聴番組画像３０１を背景として、画面３１の全体に示されている。
【００４０】
距離Ｄ０が第１の設定距離Ｄ１より大きく第２の設定距離Ｄ２以下である場合、情報表示装置１は、機能制限モードである。機能制限モードにおいて、操作者２がジェスチャー操作することができる機能は、利用頻度が高い機能に制限される。視聴番組画像３０１に対する操作情報は、操作者２の利用頻度が低い機能に関するものである。そのため、図７に示されるように、図６において示されていたコンテンツ設定情報３０４は、機能制限モードでは表示されていない。また、図６において示されていたコンテンツ情報３０３も、必ずしも操作者２にとって利用頻度が高い情報ではないため、図７に示されるように、機能制限モードでは表示されていない。なお、図７において、「映画」アイコン３０５Ａは、情報表示装置１に映画の映像コンテンツを表示させるためのアイコンである。図７においては、「映画」アイコン３０５Ａが、ポインタとしての矢印によって選択されている様子が示されている。
【００４１】
このように、機能制限モードでは、表示部３０には、操作者２の利用頻度の低い情報は表示されず、操作者２の利用頻度の高いアプリケーションメニュー情報３０５が表示部３０の画面３１全体に大きく表示されることになる。このため、表示部３０から離れたとしても、操作者２は、表示部３０の表示内容を視認することができる。また、利用頻度の高い情報が表示されるため、操作者２が情報表示装置１を操作する場合、情報表示装置１の操作性を保つことができる。
【００４２】
なお、機能制限モードにおいて表示部３０に表示される内容は、アプリケーションメニュー情報３０５に限定されない。例えば、操作者２が予め頻繁に使用する項目を選択して順位付けを行い、情報表示装置１が、順位情報に基づいて表示部３０に表示される内容を決定してもよい。
【００４３】
また、情報表示装置１が操作者２のジェスチャーによって使用された操作項目をカウントし、カウントの結果を記憶しておくことによって、情報表示装置１は、機能制限モードで表示される内容を決定することも可能である。
【００４４】
図８は、実施の形態１に係る情報表示装置１の表示部３０の画面３１に表示される画像の他の例を示す図である。図８における「映画」アイコン３０５Ｂは、ポインタ（矢印）によって選択される代わりに、「映画」アイコン３０５Ｂの枠が太枠になっている。このように、距離Ｄ０に応じて、選択されたアイコンの表示を変更することができる。なお、距離Ｄ０に応じて、「映画」アイコン３０５Ａ（３０５Ｂ）又はアプリケーションメニュー情報３０５に含まれる他のアイコン及び文字等のサイズが変更される構成とすることもできる。
【００４５】
図９は、実施の形態１に係る情報表示装置１の表示部３０の画面３１に表示された画像の他の例を示す図である。図９は、距離Ｄ０が第２の設定距離Ｄ２を超えているときに、表示部３０の画面３１に表示される画像の例を示す。図９に示される例においては、表示部３０の画面３１全体に、映像コンテンツに基づく視聴番組画像３０１が表示されている。
【００４６】
距離Ｄ０が第２の設定距離Ｄ２を超えている場合には、情報表示装置１は、特定機能モードである。特定機能モードにおいて、操作者２がジェスチャー操作することができる機能は、利用頻度がより高い機能、例えば、操作者２が視聴中の映像コンテンツに関する、チャネル切り替え及び音量の変更等に制限される。このため、特定機能モードにおいて、表示部３０の画面３１には、操作メニューを含む表示内容に遷移するための「ＭＥＮＵ」アイコン３０２（図５）は、表示されない。このように、情報表示装置１の機能は操作者２の利用頻度の高い機能に制限され、表示部３０には操作者２の利用頻度が低い情報は表示されない。このように、操作者２が表示部３０からさらに離れたとしても、不必要な情報が表示されないため、表示部３０の表示内容が操作者に視認しづらくなる状況を回避することができる。
【００４７】
図１０（ａ）及び（ｂ）は、実施の形態１に係る情報表示装置１による表示内容の遷移を示す図である。図１０（ａ）及び（ｂ）は、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０が第１の設定距離Ｄ１以下である場合に、情報表示装置１の表示部３０の表示内容が遷移する様子を示す。図１０（ａ）における表示部３０の表示内容は、図５に示される表示部３０の表示内容と同じである。また、図１０（ｂ）に示される表示部３０の表示内容は、図６に示される表示部３０の表示内容と同じである。操作者２が、ジュスチャーを行って図１０（ａ）の表示部３０の「ＭＥＮＵ」アイコン３０２を選択すると、表示部３０の表示内容は、図１０（ａ）の表示内容から図１０（ｂ）の表示内容に遷移する。また、操作者２がジェスチャーを行い、「番組に戻る」アイコン３０６（図６）を選択すると、図１０（ｂ）に示される表示部３０の表示内容から、図１０（ａ）に示される表示部３０の表示内容に遷移する。
【００４８】
図１１（ａ）及び（ｂ）は、実施の形態１に係る情報表示装置１による表示内容の遷移を示す図である。図１１（ａ）及び（ｂ）は、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０が第１の設定距離Ｄ１より大きく第２の設定距離Ｄ２以下である場合に、情報表示装置１の表示部３０の表示内容が遷移する様子を示す。図１１（ａ）における表示部３０の表示内容は、図５に示される表示部３０の表示内容と同じである。また、図１１（ｂ）に示される表示部３０の表示内容は、図７に示される表示部３０の表示内容と同じである。操作者２がジュスチャーを行い、図５に示される「ＭＥＮＵ」アイコン３０２を選択すると、図１１（ａ）に示される表示部３０の表示内容から、図１１（ｂ）に示される表示部３０の表示内容に遷移する。また、操作者２がジェスチャーを行い、図７に示される「番組に戻る」アイコン３０６を選択すると、図１３（ｂ）に示される表示部３０の表示内容から、図１１（ａ）に示される表示部３０の表示内容に遷移する。
【００４９】
図１２（ａ）から（ｃ）は、実施の形態１に係る情報表示装置１の使用状態を示す概略図である。図１２（ａ）は、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０が第２の設定距離Ｄ２を超えている場合に、情報表示装置１の表示部３０の表示内容を示す。また、図１２（ｂ）及び（ｃ）は、操作者２が行うジェスチャーの一例を示す。図１２（ａ）における表示部３０の表示内容は、図９における表示部３０の表示内容と同じである。操作者２は、図１１（ｂ）に示されるように、チャネルを切り替えるときは、左右スワイプ（手２Ａを矢印方向である左又は右に移動させる）を行う。また、音量を調節するときは、上下スワイプ（手２Ａを矢印方向である上又は下に移動させる）を行う。
【００５０】
このように、操作者２は、表示部３０に示される操作メニューによらずに、利用頻度が高いチャネル切替及び音量調整の機能を、ジェスチャーのみで操作することが可能となる。また、このときに使用されるジェスチャーであるスワイプは、情報表示装置１によって容易に識別されるジェスチャーである。そのため、操作者２と情報表示装置１との間の距離が大きい場合でも、情報表示装置１によって誤識別される可能性を低くすることができる。
【００５１】
なお、距離Ｄ０が第２の設定距離Ｄ２を超える場合に、操作者２が操作可能な機能は、チャネル切替及び音量調整に限られない。だだし、操作者２が用いることができるジェスチャーは、操作者２の手２Ａ等の特定部位の変移量によって識別されるものではなく、移動方向によって識別されるものであることが望ましい。
【００５２】
図１３は、実施の形態１に係る情報表示装置１における初期設定を示すフローチャートである。情報表示装置１は、第１の設定距離Ｄ１を設定する（ステップＳ１）。情報表示装置１は、ジェスチャー検出部１０（又は表示部３０）から第１の設定距離Ｄ１だけ離れた位置にいる操作者２の手２Ａ、指２Ｂ、及び顔２Ｃ等を、ジェスチャー検出部１０によって撮像し、撮像した画像に含まれる手２Ａ、指２Ｂ、及び顔２Ｃ等の大きさを記憶する。ここで、情報表示装置１が記憶するものは、図３の検出領域２０１に示されるように、手２Ａ、指２Ｂ、及び顔２Ｃを検出領域とした場合の検出領域の面積、縦の長さＬｖ、及び横の長さＬｈ等である。次に、情報表示装置１は、第２の設定距離Ｄ２を設定する（ステップＳ２）。情報表示装置１は、ステップＳ１と同様に、ジェスチャー検出部１０（又は表示部３０）から第２の設定距離Ｄ２だけ離れた位置にいる操作者２を撮像し、検出領域の面積等を記憶する。
【００５３】
図１４は、実施の形態１に係る情報表示装置１の動作を示すフローチャートである。ジェスチャー検出部１０は、操作者２の予め決められたジェスチャーをトリガーとしてジェスチャーの撮像（検出）を開始する（ステップＳ１０）。予め決められたジェスチャーは手２Ａによるポーズでもよいし、手２Ａによる動きでもよい。ジェスチャー検出部１０は、操作者２のジェスチャーを撮像し画像データを生成する。なお、以下の説明においては、生成された画像データには操作者１人のみが撮像されているものとするが、本発明はこれに限定されない。本発明は、画像データに複数人が含まれている場合にも適用可能である。画像データに複数人が含まれている場合には、例えば、最初に身体の予め決められた部位を検出した人物についてジェスチャー認識を行う方法、又はすべての人物についてジェスチャー認識を行う方法が適用される。
【００５４】
次に、情報表示装置１は、図１３に示される初期設定、すなわち、第１の設定距離Ｄ１及び第２の設定距離Ｄ２の設定（ステップＳ１及びＳ２）が完了しているかを判断する（ステップＳ１１）。初期設定がされていない場合、情報表示装置１は、図１３に示される初期設定を行う（ステップＳ１２）。
【００５５】
次に、距離推測部２１は、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０を推測する（ステップＳ１３）。情報表示装置１は、距離Ｄ０が第１の設定距離Ｄ１以下の場合、処理をステップＳ１５に進め、距離Ｄ０が第１の設定距離Ｄ１より大きく第２の設定距離Ｄ２以下である場合、処理をステップＳ１６に進め、距離Ｄ０が第２の設定距離Ｄ２を超える場合、処理をステップＳ１７に進める（ステップＳ１４）。
【００５６】
距離Ｄ０が第１の設定距離Ｄ１以下の場合、識別機能設定部２２は、情報表示装置１の動作状態を全機能モードにする（ステップＳ１５）。距離Ｄ０が第１の設定距離Ｄ１より大きく第２の設定距離Ｄ２以下である場合、識別機能設定部２２は、情報表示装置１の動作状態を機能制限モードにする（ステップＳ１６）。距離Ｄ０が第２の設定距離Ｄ２を超える場合、識別機能設定部２２は、情報表示装置１の動作状態を特定機能モードにする（ステップＳ１７）。
【００５７】
次に、表示制御部２５は、情報表示部１ａの動作状態に基づいて、映像コンテンツ及び操作メニューが表示されるレイアウトを変更し、表示部３０に表示させる。また、表示制御部２５は、距離Ｄ０に基づいて、表示部３０に表示される文字、アイコン、及びポインタのサイズを調整する（ステップＳ１８）。
【００５８】
ジェスチャー識別部２３は、操作者２のジェスチャーが示す動きパターンと識別機能設定部２２によって制限された識別可能なジェスチャーとに基づいて、ジェスチャーの識別を行う（ステップＳ１９）。ジェスチャー識別部２３は、ジェスチャーＤＢ４０ａを参照して、操作者２の指示内容を判定する。このとき、ジェスチャーの識別に要する時間が制限時間を超える場合、又は操作者２がリモコン等によって情報表示装置１を操作する場合、ジェスチャー識別部２３は、ジェスチャー識別処理を停止する（ステップＳ２２）。
【００５９】
操作者２のジェスチャーの指示内容が判定されると、機能実行部２４は、指示内容に基づく機能を実行する（ステップＳ２０）。
【００６０】
情報表示装置１は、操作者２のジェスチャーによる操作が終了するかどうか判断する（ステップＳ２１）。操作者２の操作がある場合（ステップＳ２１でＮＯ）、ジェスチャー識別部２３は、操作者２のジェスチャーの識別を行う。
【００６１】
《１−３》効果
以上に説明したように、実施の形態１に係る情報表示装置１においては、操作者２が情報表示装置１の表示部３０から離れた位置（例えば、第１の設定距離Ｄ１よりも離れた位置）にいる場合に、識別可能なジェスチャーの個数が少なくなるように、識別可能なジェスチャーを設定する。このように、実施の形態１に係る情報表示装置１によれば、操作者２が表示部３０から離れた位置にいる場合に、例えば、身体の移動量の小さいジェスチャーを識別可能なジェスチャーから除外することによって、操作者２のジェスチャーの誤識別を発生し難くすることができる。
【００６２】
また、実施の形態１に係る情報表示装置１においては、操作者２が情報表示装置１の表示部３０から離れた位置（例えば、第１の設定距離Ｄ１よりも離れた位置）にいる場合に、識別可能なジェスチャーを利用頻度の高い機能のためのジェスチャーに制限する。このように、実施の形態１に係る情報表示装置１によれば、操作者２が表示部３０から離れた位置にいる場合に、識別可能なジェスチャーを少なくしている（例えば、操作者の利用頻度の高い機能についてのジェスチャーに制限している）ので、操作者２のジェスチャーの誤識別を発生し難くすることができる。
【００６３】
また、実施の形態１に係る情報表示装置１においては、操作者２が情報表示装置１の表示部３０から離れた位置（例えば、第１の設定距離Ｄ１よりも離れた位置）にいる場合に、表示部３０に表示される画像のレイアウトを変更し、アイコン、文字、及びポインタ等の操作メニューを拡大して表示している。このように、実施の形態１に係る情報表示装置１によれば、操作者２が表示部３０から離れた位置にいる場合であっても、操作メニューが拡大表示されるので、操作者２による表示部３０の表示内容の見やすさ（視認性）及び操作のし易さ（操作性）の低下を抑制することができる。
【００６４】
なお、上記説明においては、第１の設定距離Ｄ１及び第２の設定距離Ｄ２を用いて、動作状態を切り替える例を示した。しかし、情報表示装置１は、第１の設定距離Ｄ１又は第２の設定距離Ｄ２のいずれか一方のみを用いる方法を採用してもよいし、又は、３つ以上の設定距離を用いる方法を採用してもよい。
【００６５】
《２》実施の形態２
実施の形態１においては、操作者２のジェスチャーが情報表示装置１によって識別（判定）されなかった場合、情報表示装置１のジェスチャー識別判定処理は停止し（図１４のステップＳ２２）、再度、ジェスチャーによる操作が行われる。これに対し、実施の形態２においては、ジェスチャーが識別されないことを表示部３０に表示する。なお、実施の形態２における情報表示装置の構成は、実施の形態１に係る情報表示装置１の構成と同じである。したがって、実施の形態２の説明に際しては、図１をも参照する。
【００６６】
図１５は、本発明の実施の形態２に係る情報表示装置の動作を示すフローチャートである。図１５においては、図１４に示される処理ステップと同じ処理ステップには、図１４に示される符号と同じ符号が付されている。
【００６７】
ジェスチャー識別部２３は、操作者２のジェスチャーが示す動きパターンと識別機能設定部２２によって制限された識別可能なジェスチャーとに基づいて、ジェスチャーの識別を行う（ステップＳ１９）。ここで、実施の形態２においては、操作者２のジェスチャーから指示内容を判定できない場合、その原因に応じた処理を行う。操作者２によって行われたジェスチャーが、ジェスチャーＤＢ４０ａに記憶された複数の基準ジェスチャーのうち対応する基準ジェスチャーがないと判定された場合、ジェスチャー識別部２３は、機能実行部２４を介して、操作者２のジェスチャーが識別不能であることを表示制御部２５に通知する。表示制御部２５は、表示部３０に、ジェスチャーが識別不能であることを表示させる（ステップＳ２３）。ジェスチャーの識別に要する時間が制限時間を超える場合、又は操作者２がリモコン等によって情報表示装置１を操作する場合、ジェスチャー識別部２３は、ジェスチャー識別処理を停止する（ステップＳ２２）。
【００６８】
以上に説明したように、実施の形態２においては、ジェスチャーが識別されない場合に、表示部３０にジェスチャーが識別不能であることを表示する。表示部３０による表示により、操作者２は、ジェスチャーが識別されなかったことを把握することができる。このため、操作者２は、再度ジェスチャーを行う、又はリモコン等のデバイスにより操作する、を選択することができる。この結果、操作者２のジェスチャーが情報表示装置１によって識別されない場合でも、情報表示装置１の操作性が著しく低下したと操作者２によって認識されることを回避することができる。
【００６９】
なお、実施の形態２に係る情報表示装置及び情報表示方法は、上記以外の点を除き、実施の形態１の装置及び方法と同じである。
【００７０】
《３》実施の形態３
実施の形態１においては、ジェスチャー検出部１０が情報表示装置１の本体（表示部３０の上部）に設置されていた。実施の形態３においては、ジェスチャー検出部が表示部（ディスプレイ）３０を備えた情報表示部から離れた位置に設けられている場合を説明する。
【００７１】
図１６は、本発明の実施の形態３に係る情報表示装置１００の使用状態を示す概略図である。図１６において、図１（実施の形態１）に示される構成要素と同一又は対応する構成要素には、図１における符号と同じ符号が付されている。図１６に示されるように、情報表示装置１００は、表示部３０を有する情報表示部１ａと、ジェスチャー検出部１０ａとを備えている。操作者２は、ジェスチャーを行い、情報表示部１ａを操作する。実施の形態３においては、ジェスチャー検出部１０ａが情報表示部１ａから離れた位置、例えば、部屋の壁面等に設けられている。
【００７２】
図１７は、実施の形態３に係る情報表示装置１００の構成を概略的に示すブロック図である。図１７において、図２（実施の形態１）に示される構成要素と同一又は対応する構成要素には、図２における符号と同じ符号が付されている。図１７に示されるように、情報表示装置１００は、ジェスチャー検出部１０ａと、情報表示部１ａとを有する。
【００７３】
ジェスチャー検出部１０ａは、撮像部１３と送信部１１とを備えている。撮像部１３は、操作者２のジェスチャーＧＥを撮像して、画像データを生成する。送信部１１は、撮像部１３によって生成された画像データを、情報表示部１ａの受信部１２に送信する。
【００７４】
情報表示部１ａの受信部１２は、ジェスチャー検出部１０ａの送信部１１から送信された画像データを受信し、受信された画像データを制御部２０へ送る。送信部１１と受信部１２との間の通信方式は、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）、赤外線通信、及びＷｉ−Ｆｉ通信等の無線通信、及び、有線通信のいずれであってもよい。
【００７５】
実施の形態３においては、ジェスチャー検出部１０ａは、操作者２のジェスチャーを検出することができる位置に固定される。また、情報表示部１ａは、ジェスチャー検出部１０ａが固定されている位置を示す位置情報（例えば、ＸＹＺ座標で示される）及び情報表示部１ａの表示部３０の位置を示す位置情報（例えば、ＸＹＺ座標で示される）を保持している。このため、距離推測部２１は、上述の位置情報と受信部１２から受け取った画像データとに基づいて、操作者２と表示部３０との間の距離を推測（算出）することができる。また、ジェスチャー識別部２３は、受信部１２から受け取った画像データに含まれる操作者２の身体の部位（検出領域）の変位を解析することにより、動きパターンを検出することができる。
【００７６】
このように、ジェスチャー検出部１０ａが情報表示部１ａから離れた位置に設けられている場合でも、操作者２と表示部３０との間の距離を推測することができる。推測した距離に応じて表示部３０における表示内容が変更されるため、情報表示装置１００は、操作者２が情報表示部１ａを操作する際の良好な操作性を保つことができる。
【００７７】
また、情報表示部１ａがジェスチャー検出部１０を搭載していない場合でも、情報表示部１ａのソフトウェアを更新することにより、ジェスチャー検出部１０と情報表示部１ａとを組み合わせて、実施の形態３に係る情報表示装置を構成することが可能である。このように、実施の形態３に係る情報表示装置は、従来の情報表示装置にも適用することができる。
【００７８】
なお、実施の形態３に係る情報表示装置及び情報表示方法は、上記以外の点を除き、実施の形態１又は２の装置及び方法と同じである。
【００７９】
《４》実施の形態４
実施の形態３においては、ジェスチャー検出部１０ａが予め決められた位置に固定され、且つ、ジェスチャー検出部１０ａによる検出対象（撮像対象）が操作者２である場合を説明した。実施の形態４においては、ジェスチャーを行う操作者２の身体にジェスチャー検出部としての操作装置を装着し（例えば、操作者が操作装置を手に持ち）、且つ、ジェスチャー検出部としての操作装置による検出対象（撮像対象）が、例えば、情報表示装置の表示部である場合を説明する。
【００８０】
図１８は、本発明の実施の形態４に係る情報表示装置１００ａの使用状態を示す概略図である。図１８において、図１６（実施の形態３）に示される構成要素と同一又は対応する構成要素には、図１６における符号と同じ符号が付されている。図１８に示されるように、情報表示装置１００ａは、表示部３０を有する情報表示部１ｂと、ジェスチャー検出部としての操作装置１０ｂとを備えている。操作者２は、操作装置１０ｂを身体に取り付けた状態（例えば、手に持った状態）でジェスチャーを行うことによって、情報表示部１ｂの受信部１２（後述の図１９に示される）に操作信号を入力する。操作者２は、例えば、操作装置１０ｂを、左横に向けて、右横に向けて、上に向けて、又は、下に向けて移動させる（振る）、或いは、操作装置１０ｂで空間に文字及びマークを描くなどのようなジェスチャーにより、情報表示部１ｂに操作信号を入力する。操作装置１０ｂの形状及びサイズは、図１８に示されるものに限定されず、他の形状であってもよい。
【００８１】
図１９は、実施の形態４に係る情報表示装置１００ａの構成を概略的に示すブロック図である。図１９においては、図１７（実施の形態３）に示される構成要素と同一又は対応する構成要素には、図１７に示される符号と同じ符号が付されている。
【００８２】
操作装置１０ｂは、認識センサとしての撮像部１５と、特徴抽出部１４と、送信部１１とを備えている。撮像部１５は、操作者２がジェスチャーを行う間、情報表示部１ｂを含む領域を被写体として撮像して、画像データを生成する。撮像部１５は、例えば、ＲＧＢカメラ及びＴｏＦセンサである。また、ＲＧＢカメラは、情報表示部１ｂとの通信機能を実現するためのソフトウェアがインストールされたスマートフォン等の携帯情報端末に搭載されたカメラであってもよい。
【００８３】
特徴抽出部１４は、撮像部１５によって生成された画像データから、操作者２が行ったジェスチャーの特徴を抽出する。ジェスチャーの特徴は、画像データに含まれる撮像されたある物体（対象物）について、時間順に並ぶ複数枚の静止画像データ又は動画像データにおける対象物の変移量を解析することにより、操作装置１０ｂの動きベクトル（操作装置１０ｂの動きの軌跡）として抽出される。特徴抽出部１４は、撮像部１５によって生成された画像データに含まれる対象物として、情報表示部１ｂの表示部３０を用いることができる。特徴抽出部１４は、生成された画像データ、ジェスチャーの特徴、及び表示部３０の領域についての情報を、送信部１１へ送る。
【００８４】
送信部１１は、生成された画像データ、ジェスチャーの特徴、及び情報表示部１ｂの表示部３０の領域についての情報を、情報表示部１ｂの受信部１２に向けて送信する。
【００８５】
このように、実施の形態４に係る情報表示装置１００ａは、操作者２が操作装置１０ｂを手に持ちながらジェスチャーを行うことによって、操作者２と表示部３０との間の距離を推測することができる。情報表示装置１００ａは、推測された距離に応じて表示内容が変更されるため、操作者が情報表示装置を操作する際の操作性を保つことができる。
【００８６】
また、実施の形態３と同様に、情報表示部１ｂが撮像部１５を搭載していない場合でも、情報表示部１ｂのソフトウェアを更新することにより、撮像部１５と情報表示部１ｂとを組み合わせて、実施の形態４に係る情報表示装置を構成することが可能である。このように、実施の形態４に係る情報表示装置は、従来の情報表示装置に適用することができる。
【００８７】
なお、実施の形態４に係る情報表示装置及び情報表示方法は、上記以外の点を除き、実施の形態３の装置及び方法と同じである。
【００８８】
《５》実施の形態５
実施の形態１から４においては、操作者２がジェスチャー操作を行う場所の環境（例えば、照明の状況及び自然光の状況など）及び情報表示装置１（又は情報表示部１ａ、１ｂ）が設置される場所の環境（例えば、照明の状況、自然光の状況など）により、情報表示装置１によって生成された画像データが、揺れ、照明、及び自然光（外光）等の外乱による影響を受けた場合、情報表示装置１が操作者２によるジェスチャー操作の内容を誤認識するおそれが増加する。これに対し、実施の形態５に係る情報表示装置１ｃは、外乱検出部２６を備えることにより、外乱の影響による誤認識を抑制し、ジェスチャー操作による情報表示装置１ｃの操作性を向上させている。以下、実施の形態５に係る情報表示装置１ｃ及びその変形例に係る情報表示装置１ｄについて、図２０及び図２１を参照して説明する。
【００８９】
図２０は、本発明の実施の形態５に係る情報表示装置１ｃの構成を概略的に示すブロック図である。図２０において、図２（実施の形態１）に示される構成要素と同一又は対応する構成要素には、図２における符号と同じ符号が付されている。図２０に示されるように、実施の形態５に係る情報表示装置１ｃは、制御部２０ｃが外乱検出部２６を有する点及び制御部２０ｃの距離推測部２１ｃの処理内容の点において、実施の形態１に係る情報表示装置１と異なる。
【００９０】
外乱検出部２６は、ジェスチャー検出部１０における撮像によって生成された複数フレームの画像（複数枚の画像データ）Ｇ１における動きを検出し、この検出された動きの中に、定められたある一定の期間における規則的な動きが含まれている場合、この規則的な動きを外乱（例えば、振動、照明の状況の変化、及び自然光の状況の変化など）と判断し、この判断に基づくフィルタ情報Ｇ５（外乱による影響を除去する処理に使われる情報）を生成する。
【００９１】
外乱検出部２６により生成されたフィルタ情報Ｇ５は、距離推測部２１ｃへ送られる。距離推測部２１ｃは、ジェスチャー検出部１０から受け取ったフィルタ情報Ｇ５に基づいて、複数フレームの画像（複数枚の画像データ）Ｇ１における動きを補正する。より具体的に言えば、距離推測部２１ｃは、複数フレームの画像（複数枚の画像データ）Ｇ１から、外乱による影響である規則的な動きの成分を除去することによって、外乱による影響の無い（又は外乱による影響が軽減された）複数フレームの画像（複数枚の画像データ）Ｇ３を生成する。
【００９２】
図２１は、実施の形態５の変形例に係る情報表示装置１ｄの構成を概略的に示すブロック図である。図２１において、図２０に示される構成要素と同一又は対応する構成要素には、図２０における符号と同じ符号が付されている。図２１に示されるように、情報表示装置１ｄは、制御部２０ｄの外部の構成として外乱検出部２６ｄを有する点において、実施の形態５に係る情報表示装置１ｃと異なる。情報表示装置１ｄの制御部２０ｄは、情報表示装置１ｃの制御部２０ｃと同じ制御を行う。
【００９３】
外乱検出部２６ｄは、ジェスチャー検出部１０における撮像によって生成された複数フレームの画像（複数枚の画像データ）Ｇ１における動きを検出し、この検出された動きの中に、定められたある一定の期間における規則的な動きが含まれている場合、この規則的な動きを外乱（例えば、加速度、振動、傾斜、照明の状況の変化、及び自然光の状況の変化など）と判断し、この判断に基づくフィルタ情報Ｇ５（外乱による影響を除去する処理に使われる情報）を生成する。このように、外乱検出部２６ｄは、制御部２０ｄの外部に新たに設置されるものであり、例えば、加速度、振動、傾斜、照明の状況、及び自然光の状況等の外乱を検知することができる加速度センサ、振動センサ、傾斜センサ、光学センサ等であっても良い。
【００９４】
外乱検出部２６ｄにより生成されたフィルタ情報Ｇ５は、距離推測部２１ｄへ送られる。距離推測部２１ｄは、ジェスチャー検出部１０から受け取ったフィルタ情報Ｇ５に基づいて、複数フレームの画像（複数枚の画像データ）Ｇ１における動きを補正する。より具体的に言えば、距離推測部２１ｄは、複数フレームの画像（複数枚の画像データ）Ｇ１から、外乱による影響である規則的な動きの成分を除去することによって、外乱による影響の無い（又は外乱による影響が軽減された）複数フレームの画像（複数枚の画像データ）Ｇ３を生成する。
【００９５】
図２２は、実施の形態５における情報表示装置１ｃ及び１ｄの動作を示すフローチャートである。図２２において、図１４（実施の形態１）に示される処理ステップと同じ処理ステップには、図１４に示される符号と同じ符号が付されている。図２２に示される処理は、ステップＳ２４及びＳ２５を有する点において、図１４に示される処理と異なる。以下に図２２を参照して、情報表示装置１ｃの動作の主要箇所を説明する。
【００９６】
図２２に示されるように、ジェスチャー検出部１０は、操作者２の予め決められたジェスチャーをトリガーとしてジェスチャーの撮像（検出）を開始する（ステップＳ１０）。
【００９７】
次に、外乱検出部２６は、外乱の検出処理を行う（ステップＳ２４）。外乱検出部２６が外乱を検出した場合（ステップＳ２４においてＹＥＳ）には、距離推測部２１ｃは、画像データＧ１から外乱に起因する規則的な動きの成分を除去することによって外乱の影響を補正する（ステップＳ２５）。外乱検出部２６が外乱を検出しなかった場合（ステップＳ２４においてＮＯ）には、距離推測部２１ｃは、外乱の影響を補正する処理を行わずに、処理をステップＳ１１に進める。ステップＳ１１以降の処理は、図１４（実施の形態１）に示される処理と同じである。
【００９８】
なお、図２２に示されるフローチャートでは、ジェスチャー検出が開始（ステップＳ１０）された後に、外乱検出（ステップＳ２４）を行っているが、外乱検出（ステップＳ２４）を行った後にジェスチャー検出を開始（ステップＳ１０）してもよい。
【００９９】
また、上記以外の点を除き、実施の形態５に係る情報表示装置１ｃ及び情報表示方法は、実施の形態１から４の装置及び方法と同じである。また、上記以外の点を除き、実施の形態５の変形例に係る情報表示装置１ｄ及び情報表示方法は、実施の形態１から４の装置及び方法と同じである。
【０１００】
実施の形態５に係る情報表示装置１ｃ，１ｄ及び情報表示方法によれば、外乱の影響を軽減できるので、ジェスチャー認識の精度を向上させることができる。
【０１０１】
《６》実施の形態６
実施の形態１から５においては、操作者２を特定することなく、ジェスチャー検出部１０によりジェスチャーを検出し距離を測定する構成について説明した。これに対し、実施の形態６では、操作者認識部２７がジェスチャー検出部１０で生成された画像（画像データ）Ｇ１から、ジェスチャー操作を行う操作者２を特定（認識）し、事前に登録された操作者２の身体部位の大きさ情報を用いて距離を測定する場合について説明する。
【０１０２】
図２３は、本発明の実施の形態６に係る情報表示装置１ｅの構成を概略的に示すブロック図である。図２３において、図２（実施の形態１）に示される構成要素と同一又は対応する構成要素には、図２における符号と同じ符号が付されている。図２３に示されるように、情報表示装置１ｅは、制御部２０ｅが操作者認識部２７を有する点及び制御部２０ｅの距離推測部２１ｅの処理内容の点において、実施の形態１に係る情報表示装置１と異なる。
【０１０３】
操作者認識部２７は、識別機能設定部２２に初期設定情報（予め決められた第１の設定距離Ｄ１及び第２の設定距離Ｄ２）を記憶させる際に、操作者２の顔画像（顔画像データ）と操作者２の属性情報とを互いに関連付けて（紐付けして）、予め記憶する。操作者認識部２７で記憶される属性情報は、大人又は子供、男性又は女性、年代（年齢）、国籍など、操作者２の属性を判別するための情報を含む。属性情報は、初期設定時に登録される顔、体格、手の大きさ、及び肌の色等のように、ジェスチャー検出部１０の撮影によって生成される画像中に写る身体の一部から推定されるものであっても良く、又は、設定時に操作者２により選択されるものであっても良い。
【０１０４】
操作者認識部２７で記憶される操作者２の属性情報と、距離推測部２１ｅで推測される距離情報とに応じて、表示制御部２５により制御される文字、アイコン、ポインタのサイズ、表示内容を変化させることができる。
【０１０５】
図２４は、実施の形態６に係る情報表示装置１ｅの動作を示すフローチャートである。図２４において、図１４に示される処理ステップと同じ処理ステップには、図１４に示される符号と同じ符号が付されている。図２４に示される処理は、ステップＳ２６、Ｓ２７、及びＳ２８を有する点において、図１４に示される処理と異なる。以下に図２４を参照して、情報表示装置１ｅの動作の主要箇所を説明する。
【０１０６】
図２４に示されるように、ジェスチャー検出部１０は、操作者２の予め決められたジェスチャーをトリガーとしてジェスチャーの撮像（検出）を開始する（ステップＳ１０）。次に、情報表示装置１ｅは、図１３に示される初期設定、すなわち、第１の設定距離Ｄ１及び第２の設定距離Ｄ２の設定（ステップＳ１及びＳ２）が完了しているかを判断する（ステップＳ１１）。初期設定がされていない場合、情報表示装置１ｅは、図１３に示される初期設定を行う（ステップＳ１２）。
【０１０７】
次に、操作者認識部２７は、ジェスチャーの検出が開始され、操作者登録を含む初期設定がされているか確認されると（ステップＳ１０、Ｓ１１、Ｓ１２）、操作者認識処理を行う（ステップＳ２６）。操作者２が認識されると（ステップＳ２６においてＹＥＳ）、操作者認識部２７は、操作者２を設定し、操作者２の設定に基づく表示設定情報Ｇ４と画像データＧ１とを距離推測部２１ｅに送る（ステップＳ２７）。操作者２の認識ができない場合（ステップＳ２６においてＮＯ）、操作者認識部２７は、ゲスト設定情報を設定し、ゲスト設定情報と画像データＧ１とを距離推測部２１ｅに送る（ステップＳ２８）。
【０１０８】
次に、距離推測部２１ｅは、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０を推測する（ステップＳ１３）。図２４におけるステップＳ１３以降の処理は、図１４（実施の形態１）に示されるステップＳ１３以降の処理と同じである。
【０１０９】
このように、操作者認識部２７により操作者２を識別（特定）する処理を行い、操作者２の属性情報と画像データＧ１とに基づいて距離推測部２１ｅにおける処理を行うことにより、表示部３０に操作者２の識別情報をも表示させることができる。この場合には、情報表示装置１ｅから同じ距離だけ離れた位置に複数の人がいる場合であっても、情報表示装置１ｅが複数の人の中の誰を操作者２として認識しているかを、操作者２自身に伝えることができる。このため、操作者２は、情報表示装置１ｅをジェスチャー操作する際に、良好な操作性を得ることができる。
【０１１０】
実施の形態６に係る情報表示装置１ｅ及び情報表示方法によれば、複数の者がいる場合であって、操作者２を特定してジェスチャー認識することができるので、ジェスチャー認識の精度を向上させることができる。
【０１１１】
なお、上記以外の点を除き、実施の形態６に係る情報表示装置１ｅ及び情報表示方法は、実施の形態１から４の装置及び方法と同じである。
【０１１２】
《７》実施の形態７
実施の形態１から４において、距離推測部２１は、ジェスチャー検出部１０から出力されたジェスチャー情報Ｇ１に基づいて、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０を推測するが、操作者２がジェスチャー検出部１０（又は表示部３０）の左側又は右側のいずれの側にいるかを判別していない。これに対し、実施の形態７に係る情報表示装置１ｆは、図２５に示されるように、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０だけでなく、操作者２がジェスチャー検出部１０（又は表示部３０）の正面中央位置の左側又は右側のいずれの側にいるかを判別する。すなわち、情報表示装置１ｆは、２人の者（操作者２と他の者３）がいる場合に、操作者２がジェスチャー検出部１０の正面中央位置の左側又は右側のいずれの側にいるかを判別することができる機能を備えている。
【０１１３】
図２６は、本発明の実施の形態７に係る情報表示装置１ｆの構成を概略的に示すブロック図である。図２６において、図２（実施の形態１）に示される構成要素と同一又は対応する構成要素には、図２における符号と同じ符号が付される。図２３に示されるように、情報表示装置１ｅは、制御部２０ｆの距離推測部２１ｆが左右判別部２１ｆａを有する点及び制御部２０ｆの距離推測部２１ｆの処理内容の点において、実施の形態１に係る情報表示装置１と異なる。
【０１１４】
左右判別部２１ｆａは、ジェスチャー検出部１０で撮像され生成される各フレーム画像中に写る検出領域（操作者２が検出された領域）が画像を左右に２分割した場合に、操作者２が２分割された領域の内の右側にあるか左側にあるかを判別する。これにより、左右判別部２１ｆａは、操作者２がフレーム画像を左側と右側に２分割された領域の内の、右側にいるか左側にいるかを判別することができる。
【０１１５】
左右判別部２１ｆａは、ジェスチャー検出部１０又は表示部３０の位置を基準としたとき、ジェスチャー検出部１０から操作者２までの距離の測定と、操作者２がフレーム画像を左右に２分割した場合における、右側にいるか左側にいるかの判別をすることができる。例えば、左右判別部２１ｆａは、車内空間において、操作者２が運転席に座っている運転手（右ハンドル車の場合には、ジェスチャー検出部１０から見て左側）、又は、助手席に座っている者（右ハンドル車の場合には、ジェスチャー検出部１０から見て右側）、又は、後部座席に座っている者（後部座席のジェスチャー検出部１０から見て右側又は左側）のいずれであるかを判別することができる。
【０１１６】
図２７は、本発明の実施の形態７に係る情報表示装置の動作を示すフローチャートである。図２７において、図１４に示される処理ステップと同じ処理ステップには、図１４に示される符号と同じ符号が付されている。図２７に示される処理は、ステップＳ２９及びＳ３０を有する点及びステップＳ３０の判断結果に基づいて、ステップＳ１４、Ｓ１５、Ｓ１６、Ｓ１７の処理又はステップＳ１４ａ、Ｓ１５ａ、Ｓ１６ａ、Ｓ１７ａの処理のいずれかを行う点において、図１４に示される処理と異なる。以下に図２７を参照して、情報表示装置１ｆの動作の主要箇所を説明する。
【０１１７】
図２７に示されるように、ジェスチャー検出部１０は、操作者２の予め決められたジェスチャーをトリガーとしてジェスチャーの撮像（検出）を開始する（ステップＳ１０）。次に、情報表示装置１ｆは、図１３に示される初期設定、すなわち、第１の設定距離Ｄ１及び第２の設定距離Ｄ２の設定（ステップＳ１及びＳ２）が完了しているかを判断する（ステップＳ１１）。初期設定がされていない場合、情報表示装置１は、図１３に示される初期設定を行う（ステップＳ１２）。
【０１１８】
次に、距離推測部２１ｆは、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０を推測する（ステップＳ１３）。次に、左右判別部２１ｆａは、距離Ｄ０が推測（ステップＳ１３）された後、ジェスチャー検出部１０ａで撮像し生成されたフレーム画像から、操作者２が表示部３０から見て左側又は右側のいずれの側にいるかを判定する（ステップＳ２９）。
【０１１９】
操作者２が表示部３０から見て左側又は右側のいずれの側にいるかを判別することができれば、情報表示装置１ｆは、左側又は右側の距離Ｄ０に基づくいずれかのモードに移行する（ステップＳ３０）。なお、操作者２が表示部３０から見て左側又は右側のいずれの側にいるかを判別することができなかった場合は、予め決められた処理（例えば、ステップＳ１４〜Ｓ１７又はステップＳ１４ａ〜Ｓ１７ａ）を選択し、判別ができなかったことを表示制御部２５に通知し、表示部３０に表示してもよい。また、操作者２が、表示部３０から見て左側又は右側のいずれの側にいること、或いは、判別できなかったことを、表示部３０に表示しても良い。
【０１２０】
実施の形態７に係る情報表示装置１ｆにおいては、距離推測部２１ｆは、左右判別部２１ｆａを有し、例えば、操作者２が運転席に座る操作者２であるか、助手席に座る操作者２であるかを判別することにより、表示制御部２５により制御される表示内容を切り替えることができる。例えば、操作者２が運転席に座る者である場合には、情報表示装置１ｆは、ジェスチャー操作が可能な全ての操作を表示部３０に表示し、操作者２が助手席に座る者である場合には、情報表示装置１ｆは、ジェスチャー操作が可能な操作のうちの安全に関係しない機能のみ（制限された機能）を表示部３０に表示させることができる。
【０１２１】
次に、距離推測部２１ｆは、操作者２とジェスチャー検出部１０（又は表示部３０）との間の距離Ｄ０を推測する（ステップＳ１３）。次に、距離推測部２１ｆは、ステップＳ２９及びＳ３０において、操作者２が左側にいると判別した場合には、情報表示装置１ｆは、距離Ｄ０が第１の設定距離Ｄ１以下であれば、処理をステップＳ１５に進め、距離Ｄ０が第１の設定距離Ｄ１より大きく第２の設定距離Ｄ２以下であれば、処理をステップＳ１６に進め、距離Ｄ０が第２の設定距離Ｄ２を超える場合、処理をステップＳ１７に進める（ステップＳ１４）。また、距離推測部２１ｆは、ステップＳ２９及びＳ３０において、操作者２が右側にいると判別した場合には、情報表示装置１ｆは、距離Ｄ０が第１の設定距離Ｄ１以下であれば、処理をステップＳ１５ａに進め、距離Ｄ０が第１の設定距離Ｄ１より大きく第２の設定距離Ｄ２以下であれば、処理をステップＳ１６ａに進め、距離Ｄ０が第２の設定距離Ｄ２を超える場合、処理をステップＳ１７ａに進める（ステップＳ１４ａ）。なお、ステップＳ１５ａ、Ｓ１６ａ、Ｓ１７ａは、操作者２が右側にいる点を除いて、ステップＳ１５、Ｓ１６、Ｓ１７と同等の処理である。
【０１２２】
実施の形態７に係る情報表示装置１ｆ及び情報表示方法によれば、操作者２が情報表示装置１ｆから見てどの方向にいるのかを判別することができ、判別された方向（例えば、左側又は右側）に応じて操作内容（表示部３０における表示内容）を切り替えることができる。
【０１２３】
上記以外の点を除き、実施の形態７に係る情報表示装置１ｆ及び情報表示方法は、実施の形態１から４の装置及び方法と同じである。
【０１２４】
《８》変形例
図２８は、上記実施の形態１から７に係る情報表示装置の変形例の構成を示すハードウェア構成図である。実施の形態１から７に係る情報表示装置は、ソフトウェアとしてのプログラムを格納する記憶装置としてのメモリ９１と、メモリ９１に格納されたプログラムを実行する情報処理部としてのプロセッサ９２とを用いて（例えば、コンピュータにより）実現することができる。この場合には、図２、図１７、及び図１９に示される記憶部４０は、図２８におけるメモリ９１に相当し、図２、図１７、及び図１９に示される制御部２０は、図２８におけるプログラムを実行するプロセッサ９２に相当する。なお、図２、図１７、及び図１９に示される制御部２０の一部を、図２８におけるメモリ９１とプロセッサ９２とによって実現してもよい。なお、本発明は、本発明の趣旨を逸脱しない範囲で、変更することが可能である。
【０１２５】
上記実施の形態１から７に係る情報表示装置の構成を、組み合わせることが可能である。例えば、実施の形態５の外乱の抑制機能、実施の形態６の操作者認識結果を利用して距離を求める機能、及び実施の形態７の操作者のいる方向（装置から見て左側又は右側）に応じて表示内容を切り替える機能、を任意に組み合わせることが可能である。
【０１２６】
（産業上の利用可能性）
本発明は、例えば、テレビ、ＰＣ、カーナビゲーションシステム、リアシートエンターテインメントシステム（ＲＳＥ）、駅及び空港等に設置されるデジタルサイネージシステム等のような各種の情報表示装置に適用可能である。
【符号の説明】
【０１２７】
１，１ｃ，１ｄ，１ｅ，１ｆ  情報表示装置、  １ａ，１ｂ  情報表示部、  ２  操作者、  １０，１０ａ  ジェスチャー検出部、  １０ｂ  操作装置、  １１  送信部、  １２  受信部、  １４  特徴抽出部、  ２０，２０ｃ，２０ｄ，２０ｅ，２０ｆ  制御部、  ２１，２１ｃ，２１ｄ，２１ｅ，２１ｆ  距離推測部、  ２１ｆａ  左右判別部、  ２２  識別機能設定部、  ２３  ジェスチャー識別部、  ２４  機能実行部、  ２５  表示制御部、  ２６  外乱検出部、  ２７  操作者認識部、  ３０  表示部、  ３１  画面。
【図１】
2016170872.tif 000003
【図２】
2016170872.tif 000004
【図３】
2016170872.tif 000005
【図４】
2016170872.tif 000006
【図５】
2016170872.tif 000007
【図６】
2016170872.tif 000008
【図７】
2016170872.tif 000009
【図８】
2016170872.tif 000010
【図９】
2016170872.tif 000011
【図１０】
2016170872.tif 000012
【図１１】
2016170872.tif 000013
【図１２】
2016170872.tif 000014
【図１３】
2016170872.tif 000015
【図１４】
2016170872.tif 000016
【図１５】
2016170872.tif 000017
【図１６】
2016170872.tif 000018
【図１７】
2016170872.tif 000019
【図１８】
2016170872.tif 000020
【図１９】
2016170872.tif 000021
【図２０】
2016170872.tif 000022
【図２１】
2016170872.tif 000023
【図２２】
2016170872.tif 000024
【図２３】
2016170872.tif 000025
【図２４】
2016170872.tif 000026
【図２５】
2016170872.tif 000027
【図２６】
2016170872.tif 000028
【図２７】
2016170872.tif 000029
【図２８】
2016170872.tif 000030
【手続補正書】
【提出日】平成28年7月15日(2016.7.15)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
複数の人のうち一名を操作者として認識した結果を表示部に表示させる表示制御部と、
操作者によって実行されるジェスチャーに基づくジェスチャー情報を生成するジェスチャー検出部と、
前記ジェスチャー検出部で生成された前記ジェスチャー情報に基づいて前記ジェスチャーの識別を行い、前記識別の結果に基づく信号を出力するジェスチャー識別部と、
予め決められた第１の設定距離を記憶し、前記操作者と前記表示部との間の距離が前記第１の設定距離を超えているときに前記ジェスチャー識別部によって識別可能なジェスチャーの個数が、前記距離が前記第１の設定距離以下であるときに前記ジェスチャー識別部によって識別可能なジェスチャーの個数より少なくなるように、前記ジェスチャー識別部によって識別可能なジェスチャーを設定する識別機能設定部と、
前記操作者の顔画像と前記操作者の属性情報とを互いに関連付けて記憶し、前記操作者を特定する操作者認識部と、
前記操作者認識部によって特定された前記操作者の属性情報と前記ジェスチャー情報とに基づいて前記距離を推測する距離推測部と
を有することを特徴とする情報表示装置。
【請求項２】
前記表示制御部は、前記距離に応じて、前記表示部に表示される情報を変更させることを特徴とする請求項１に記載の情報表示装置。
【請求項３】
前記表示制御部は、前記距離に応じて、前記表示部に表示される画像のレイアウトを変更させることを特徴とする請求項２に記載の情報表示装置。
【請求項４】
前記表示制御部は、前記距離に応じて、前記表示部に表示される文字、アイコン、及びポインタの内の少なくとも１つのサイズを変更させることを特徴とする請求項２に記載の情報表示装置。
【請求項５】
前記表示制御部は、前記距離が前記第１の設定距離を超えているときに、前記距離が前記第１の設定距離以下であるときに前記表示部に表示されていた情報の一部を、拡大表示させることを特徴とする請求項１に記載の情報表示装置。
【請求項６】
前記表示制御部は、前記距離が前記第１の設定距離を超えているときに、前記距離が前記第１の設定距離以下であるときに前記表示部に表示されていた文字、アイコン、及びポインタの内の少なくとも１つを、拡大表示させることを特徴とする請求項５に記載の情報表示装置。
【請求項７】
前記表示制御部は、前記識別機能設定部によって設定された前記識別可能なジェスチャーに応じて、前記表示部に表示される情報を変更させることを特徴とする請求項１から６のいずれか１項に記載の情報表示装置。
【請求項８】
前記識別機能設定部は、
前記第１の設定距離よりも大きい第２の設定距離を予め記憶し、
前記距離が予め決められた前記第２の設定距離を超えているときに前記ジェスチャー識別部によって識別可能なジェスチャーの個数が、前記距離が前記第２の設定距離以下であるときに前記ジェスチャー識別部によって識別可能なジェスチャーの個数より少なくなるように、前記ジェスチャー識別部によって識別可能なジェスチャーを設定する
ことを特徴とする請求項１から７のいずれか１項に記載の情報表示装置。
【請求項９】
前記表示制御部は、前記距離が前記第２の設定距離を超えているときに、前記距離が前記第１の設定距離を超えており且つ前記第２の設定距離以下であるときに前記表示部に表示されていた情報と異なる情報を前記表示部に表示させることを特徴とする請求項８に記載の情報表示装置。
【請求項１０】
前記ジェスチャー検出部は、前記操作者のジェスチャーの撮像を行い、
前記ジェスチャー情報は、前記撮像によって生成された画像データである
ことを特徴とする請求項１から９のいずれか１項に記載の情報表示装置。
【請求項１１】
前記ジェスチャー検出部は、前記操作者の身体に保持され、前記表示部の撮像を行い、前記撮像によって生成された画像データを送信する操作装置を有することを特徴とする請求項１から１０のいずれか１項に記載の情報表示装置。
【請求項１２】
前記距離推測部は、前記ジェスチャー検出部から出力された画像データに基づいて前記操作者と前記表示部との間の距離を推測することを特徴とする請求項１０又は１１に記載の情報表示装置。
【請求項１３】
前記距離推測部は、前記操作者が、前記表示部を中心にして左側又は右側のいずれの側にいるかを判別する左右判別部を有し、
前記表示制御部は、前記左右判別部による判別結果に基づいて、前記表示部の表示内容を切り替える
ことを特徴とする請求項１０から１２のいずれか１項に記載の情報表示装置。
【請求項１４】
前記ジェスチャー検出部における撮像によって生成された複数フレームの画像における動きを検出し、検出された前記動きの中に、定められたある一定の期間における規則的な動きが含まれている場合、前記規則的な動きを外乱と判断し、前記判断に基づくフィルタ情報を生成する外乱検出部をさらに有し、
前記距離推測部は、前記フィルタ情報に基づいて、複数フレームの画像における動きを補正する
ことを特徴とする請求項１０から１３のいずれか１項に記載の情報表示装置。
【請求項１５】
複数の基準ジェスチャーを示す基準ジェスチャー情報と前記複数の基準ジェスチャーに対応する指示内容とをジェスチャーデータベースとして記憶する記憶部をさらに有し、
前記ジェスチャー識別部は、前記ジェスチャー検出部から出力された前記ジェスチャー情報と前記記憶部に記憶されている前記基準ジェスチャー情報との比較を行い、前記比較の結果に基づいて、前記ジェスチャーの識別を行う
ことを特徴とする請求項１から１４のいずれか１項に記載の情報表示装置。
【請求項１６】
前記ジェスチャー識別部による前記識別の結果に基づく機能を実行する機能実行部をさらに有することを特徴とする請求項１から１５のいずれか１項に記載の情報表示装置。
【請求項１７】
前記機能実行部は、前記ジェスチャー識別部による前記識別の結果に基づく信号を前記表示制御部に出力することを特徴とする請求項１６に記載の情報表示装置。
【請求項１８】
前記表示部をさらに有することを特徴とする請求項１から１７のいずれか１項に記載の情報表示装置。
【請求項１９】
表示部に情報を表示させる情報表示装置が実行する情報表示方法であって、
複数の人のうち一名を操作者として認識した結果を表示部に表示させる表示制御ステップと、
操作者によって実行されるジェスチャーに基づくジェスチャー情報を生成するジェスチャー検出ステップと、
前記ジェスチャー検出ステップにおいて生成された前記ジェスチャー情報に基づいて前記ジェスチャーの識別を行い、前記識別の結果に基づく信号を出力するジェスチャー識別ステップと、
前記操作者と前記表示部との間の距離が予め定められた第１の設定距離を超えているときに前記ジェスチャー識別ステップにおいて識別可能なジェスチャーの個数が、前記距離が前記第１の設定距離以下であるときに前記ジェスチャー識別ステップにおいて識別可能なジェスチャーの個数より少なくなるように、前記ジェスチャー識別ステップにおいて識別可能なジェスチャーを設定する識別機能設定ステップと、
前記操作者の顔画像と前記操作者の属性情報とを互いに関連付けて記憶し、前記操作者を特定する操作者認識ステップと、
前記操作者認識ステップにおいて特定された前記操作者の属性情報と前記ジェスチャー情報とに基づいて前記距離を推測する距離推測ステップと
を有することを特徴とする情報表示方法。
【国際調査報告】
2016170872.tif 000031
2016170872.tif 000032
2016170872.tif 000033
2016170872.tif 000034