(57)【要約】【課題】ジェスチャ認識の開始点を効率よく、また精度よく検出し、ジェスチャ認識精度の向上を図る。【解決手段】センサ３からの入力を検知するセンサ感知部２２と、センサ３からの入力が検知されたときを基準として、カメラ５が撮影した画像を用いたジェスチャ認識を開始するジェスチャ認識処理部２４と、を備える【選択図】図１
2013196047.tif 000002
【特許請求の範囲】
【請求項１】
ジェスチャ主体がカメラに対して行うジェスチャを認識し、認識したジェスチャに基づいて制御対象機器を制御するジェスチャ入力装置であって、
センサからの入力を検知するセンサ検知手段と、
上記センサからの入力が検知されたときを基準として、上記カメラが撮影した画像を用いたジェスチャ認識を開始するジェスチャ認識手段と、
を備えることを特徴とするジェスチャ入力装置。
【請求項２】
上記センサは、無線通信に用いられる電波を感知する電波感知センサであり、
上記センサ検知手段は、上記電波感知センサからの入力を検知するものであることを特徴とする請求項１に記載のジェスチャ入力装置。
【請求項３】
上記ジェスチャ認識手段は、上記ジェスチャ認識に成功した場合、上記ジェスチャ認識を終了することを特徴とする請求項１または２に記載のジェスチャ入力装置。
【請求項４】
上記ジェスチャ認識手段は、上記ジェスチャ認識を開始した時点から、所定時間が経過した場合、上記ジェスチャ認識を終了することを特徴とする請求項１から３のいずれか１項に記載のジェスチャ入力装置。
【請求項５】
上記センサ検知手段は、上記センサからの入力を検知したときに、上記カメラの電源をオンにすることを特徴とする請求項１から４のいずれか１項に記載のジェスチャ入力装置。
【請求項６】
請求項１から５のいずれか１項に記載のジェスチャ入力装置を動作させるための制御プログラムであって、コンピュータを上記各手段として機能させるための制御プログラム。
【請求項７】
請求項６に記載の制御プログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項８】
請求項１から５のいずれか１項に記載のジェスチャ入力装置と、
上記ジェスチャ入力装置にセンサデータを出力するセンサと、
上記ジェスチャ入力装置に撮影した画像を出力するカメラと、
上記ジェスチャ入力装置によって制御される制御対象機器と、を備えることを特徴とする電子機器。
【請求項９】
請求項１から５のいずれか１項に記載のジェスチャ入力装置と、
センサデータを出力するセンサと接続するためのインターフェースと、
撮影した画像を出力するカメラと接続するためのインターフェースと、
上記ジェスチャ入力装置によって制御される制御対象機器と、を備えることを特徴とする電子機器。
【請求項１０】
請求項１から５のいずれか１項に記載のジェスチャ入力装置と、
上記ジェスチャ入力装置にセンサデータを出力するセンサと、
上記ジェスチャ入力装置に撮影した画像を出力するカメラと、
上記ジェスチャ入力装置によって制御される制御対象機器と、を備えることを特徴とするジェスチャ入力システム。
【請求項１１】
上記制御対象機器は、室内に設置され、
上記センサは、ジェスチャ主体が、上記室内に入口から入室することを感知可能に構成され、
上記カメラは、上記室内の上記入口付近の所定範囲を撮影可能に構成されていることを特徴とする請求項１０に記載のジェスチャ入力システム。
【請求項１２】
ジェスチャ主体がカメラに対して行うジェスチャを認識し、認識したジェスチャに基づいて制御対象機器を制御するジェスチャ入力装置の制御方法であって、
センサからの入力を検知するセンサ検知ステップと、
上記センサからの入力が検知されたときを基準として、上記カメラが撮影した画像を用いたジェスチャ認識を開始するジェスチャ認識ステップと、
を含むことを特徴とするジェスチャ入力装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザのジェスチャを認識することにより、機器を制御する制御信号を生成するジェスチャ入力装置、制御プログラム、コンピュータ読み取り可能な記録媒体、ジェスチャ入力システム、電子機器、および、ジェスチャ入力装置の制御方法に関する。
【背景技術】
【０００２】
近年、カメラを用いたジェスチャ認識によるユーザインターフェースに対する需要が高まっている。ジェスチャ認識によるユーザインターフェースでは、特定の入力器具を用いなくてもユーザが手軽に操作を行うことができる一方で、ユーザのジェスチャを誤認することがある。
【０００３】
このため、ジェスチャ認識によるユーザインターフェースでは、ジェスチャ認識精度の向上が望まれている。特に、ジェスチャ認識の開始点が検出できていないと、ジェスチャ認識の誤認識が増えてしまうため、従来、ユーザのジェスチャの開始点を精度よく認識するための様々な技術が提案されている。
【０００４】
例えば、特許文献１には、ユーザが所持するペンライトの点灯によりジェスチャの開始を認識し、当該ペンライトの消灯によりジェスチャの終了を認識するジェスチャ認識装置であって、上記開始から終了までのペンライトの移動状態に基づいてジェスチャの種別を認識するジェスチャ認識装置が記載されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平９−３１１７５９号公報（１９９７年１２月２日公開）
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１の技術では、ペンライトの点灯を検知するため、常に画像処理を行ってペンライトを補足していなければならず、処理負荷が高かった。また、ペンライトを画像認識して、ジェスチャの開始点を認識しているに過ぎなかったため、画像認識の精度が悪いと、開始点の認識精度もまた悪くなってしまっていた。従って、特許文献１の技術には、ジェスチャの開始点の認識において処理時間がかかったり、十分な精度が得られなかったりするという課題があった。
【０００７】
よって、ジェスチャ認識の開始点を精度よく認識するという課題に対して、依然として有効な対応策が示されていないのが現状である。
【０００８】
本発明は、上記の問題点に鑑みてなされたものであり、その目的は、ジェスチャ認識の開始点を効率よく、また精度よく検出し、ジェスチャ認識の精度向上を図ることができるジェスチャ入力装置等を実現することにある。
【課題を解決するための手段】
【０００９】
上記の課題を解決するために、本発明に係るジェスチャ入力装置は、ジェスチャ主体がカメラに対して行うジェスチャの認識を行い、認識したジェスチャに基づいて制御対象機器を制御するジェスチャ入力装置であって、センサからの入力を検知するセンサ検知手段と、上記センサからの入力が検知されたときを基準として、上記カメラが撮影した画像を
用いたジェスチャ認識を開始するジェスチャ認識手段と、を備えることを特徴とする。
【００１０】
上記の課題を解決するために、本発明に係るジェスチャ入力装置の制御方法は、ジェスチャ主体がカメラに対して行うジェスチャの認識を行い、認識したジェスチャに基づいて制御対象機器を制御するジェスチャ入力装置の制御方法であって、センサからの入力を検知するセンサ検知ステップと、上記センサからの入力が検知されたときを基準として、上記カメラが撮影した画像を用いたジェスチャ認識を開始するジェスチャ認識ステップと、を含むことを特徴とする。
【００１１】
ジェスチャ主体とは、ジェスチャを行う主体であり、ジェスチャにより制御対象機器の操作を行うユーザである。なお、ジェスチャ主体は、人に限られず、動物や、可動する物体であってもよい。ジェスチャとは、ジェスチャ主体の特定部位の形状（特徴量）または動作、または、それらの組み合わせのことである。
【００１２】
例えば、ジェスチャ主体が人である場合、その人の顔（目、口等）、手、腕、胴、脚等のその人の身体の所定の形状もしくは所定の動作、または、それらの組み合わせを意味する。
【００１３】
また、ジェスチャ主体が人である場合、所定の動作としては、例えば、“手を旋回させる”、“手を振る”、“手を握ったり、開いたりする”が挙げられる。なお、所定の動作には、静止していることが含まれる。
【００１４】
上記構成では、ジェスチャ主体のジェスチャ認識を行い、認識したジェスチャに基づいて制御対象機器を制御する。当該ジェスチャ認識では、例えば、画像データを解析し、パターン認識によりジェスチャを認識する手法を採用することができる。
【００１５】
また、上記構成では、センサからの入力を検知する。センサは、温度・圧力・流量・光・磁気・音波・電磁波などを検知するものである。また、センサは、これらの物理量を計測したり、当該物理量の変化量を検出したり、これらの物理量およびその変化量を検出して物理的な状態変化を感知したりしてもよい。
【００１６】
また、センサは、ジェスチャ主体周辺の物理量または該物理量の変化を計測できるよう構成されていてもよい。このような構成によれば、センサがジェスチャ主体周辺の物理量等を計測したことを感知して、上記ジェスチャ主体の存否を判定することができる。
【００１７】
センサから取得したセンサデータから、ジェスチャ主体の存否を判定する手法については、特に限定されず、例えば、赤外線等を用いて物体を検知する手法等を採用することができる。
【００１８】
また、ジェスチャ主体そのものの物理量等を検出して、直接的に判定してもよいし、ジェスチャ主体の付随物に関する物理量等を検出し、間接的に判定してもよい。この付随物は、ジェスチャ主体が人である場合は、例えば、その人が所持している物も含まれる。例えば、その人が所有している携帯電話機等も含まれる。
【００１９】
より具体的には、ジェスチャ主体またはジェスチャ主体の付随物が熱を発している場合、センサ周囲の温度が所定値以上となることが観測できるときに、ジェスチャ主体が存在すると判定することができる。また、人が携帯電話機を所持している場合、携帯電話機が発信する電波を感知して、ジェスチャ主体が存在すると判定することができる。
【００２０】
以上のように、センサからの入力が検知される状況は、ジェスチャ主体によってジェス
チャが開始される可能性が高い状況ということができる。
【００２１】
上記構成によれば、センサからの入力が検知されたときを基準として、カメラが撮影した画像を用いたジェスチャ認識を開始するので、ジェスチャ主体によってジェスチャが開始される可能性が高い状況から、上記ジェスチャ認識を開始することができる。なお、基準とするとは、ジェスチャ主体が存在すると判定された時点を起点としても、当該時点から所定時間をおいた時点を起点としても構わないということである。
【００２２】
その結果、ジェスチャ認識の開始点を効率よく、また精度よく検出することができ、ジェスチャ認識の精度向上を図ることができるという効果を奏する。
【００２３】
本発明に係るジェスチャ入力装置では、上記センサは、無線通信に用いられる電波を感知する電波感知センサであり、上記センサ検知手段は、上記電波感知センサからの入力を検知するものであることが好ましい。
【００２４】
上記構成によれば、例えば、ジェスチャ主体が携帯電話機等の携帯通信端末を携帯しているような場合、携帯電話機の無線通信に用いられる電波を感知することで、間接的にジェスチャ主体を感知することができる。
【００２５】
本発明に係るジェスチャ入力装置では、上記ジェスチャ認識手段は、上記ジェスチャ認識に成功した場合、上記ジェスチャ認識を終了することが好ましい。
【００２６】
上記構成によれば、次のジェスチャ認識は、ジェスチャ主体が改めて感知されたときに開始される。すなわち、上記構成によれば、ジェスチャ入力の際に、ジェスチャ主体を感知してから、ジェスチャ認識を行うという一連の動作を都度行うことになる。
【００２７】
このように、ジェスチャ入力の際、都度、ジェスチャ主体を感知してから、ジェスチャ認識を行うことで、ジェスチャ認識の精度向上を図ることができる。
【００２８】
本発明に係るジェスチャ入力装置では、上記ジェスチャ認識手段は、上記ジェスチャ認識を開始した時点から、所定時間が経過した場合、上記ジェスチャ認識を終了することが好ましい。
【００２９】
上記構成によれば、所定期間内にジェスチャ認識が成功しなければジェスチャ認識を終了する。よって、ジェスチャ主体が感知されたが、ジェスチャ主体がジェスチャを行わないような場合、不用意にジェスチャ認識を継続することを避けることができる。
【００３０】
本発明に係るジェスチャ入力装置では、上記センサ検知手段は、上記センサからの入力を検知したときに、上記カメラの電源をオンにすることが好ましい。
【００３１】
ジェスチャ主体が存在しない可能性が高いときは、ジェスチャ入力が行われない。よって、このようなときには、カメラの電源をオフにしておけば、カメラの無駄な消費電力を抑えることができる。
【００３２】
上記構成によれば、ジェスチャ主体が存在しないときは、カメラの電源がオフになっていても、ジェスチャ主体が感知されたときに、カメラの電源をオンにして、カメラで撮影を開始することができる。よって、カメラの無駄な消費電力を抑えることができる。
【００３３】
なお、上記ジェスチャ入力装置は、コンピュータによって実現してもよく、この場合には、コンピュータを上記ジェスチャ入力装置の各手段として動作させることにより、上記
ジェスチャ入力装置をコンピュータにて実現させる制御プログラム、及びそれを記録したコンピュータ読み取り可能な記録媒体も本発明の範疇に入る。
【００３４】
また、上記ジェスチャ入力装置と、上記ジェスチャ入力装置にセンサデータを出力するセンサと、上記ジェスチャ入力装置に撮影した画像を出力するカメラと、上記ジェスチャ入力装置によって制御される制御対象機器と、を備える電子機器も本発明の範疇に入る。
【００３５】
また、上記ジェスチャ入力装置と、センサデータを出力するセンサと接続するためのインターフェースと、撮影した画像を出力するカメラと接続するためのインターフェースと、上記ジェスチャ入力装置によって制御される制御対象機器と、を備えることを特徴とする電子機器
また、上記ジェスチャ入力装置と、上記ジェスチャ入力装置にセンサデータを出力するセンサと、上記ジェスチャ入力装置に撮影した画像を出力するカメラと、上記ジェスチャ入力装置によって制御される制御対象機器と、を備えるジェスチャ入力システムも本発明の範疇に入る。
【００３６】
また、上記ジェスチャ入力システムにおいて、例えば、上記制御対象機器は、室内に設置され、上記センサは、ジェスチャ主体が、上記室内に入口から入室することを感知可能に構成され、上記カメラは、上記室内の上記入口付近の所定範囲を撮影可能に構成されていてもよい。
【００３７】
上記構成によれば、室内に制御対象機器が設置されている場合において、ジェスチャ認識の精度を向上させることができる。
【発明の効果】
【００３８】
本発明に係るジェスチャ入力装置は、センサからの入力を検知するセンサ検知手段と、上記センサからの入力が検知されたときを基準として、上記カメラが撮影した画像を用いたジェスチャ認識を開始するジェスチャ認識手段と、を備える構成である。
【００３９】
本発明に係るジェスチャ入力装置の制御方法は、センサからの入力を検知するセンサ検知ステップと、上記センサからの入力が検知されたときを基準として、上記カメラが撮影した画像を用いたジェスチャ認識を開始するジェスチャ認識ステップと、を含む方法である。
【００４０】
よって、ジェスチャの開始点を効率よく、また精度よく検出することができ、ジェスチャ認識の精度向上を図ることができる。
【図面の簡単な説明】
【００４１】
【図１】本発明の一実施形態に係るジェスチャ入力装置１を含むジェスチャ入力システムの機能的構成の一例を示す機能ブロック図である。
【図２】上記ジェスチャ入力装置が備える記憶部に格納されているジェスチャ認識データの一例を示す図である。
【図３】上記記憶部に格納されている制御信号テーブルの一例を示す図である。
【図４】上記ジェスチャ入力装置におけるジェスチャ入力処理の一例を示すフローチャートである。
【図５】本発明の他の実施形態に係るジェスチャ入力システムの機能的構成の一例を示す機能ブロック図である。
【図６】テレビジョン受像機の記憶部に格納されている制御内容テーブルの一例を示す図である。
【図７】上記ジェスチャ入力システムにおいて、テレビジョン受像機の電源をＯＮにする場合の使用態様の例について示した図である。
【図８】本発明のさらに他の実施形態に係るジェスチャ入力システムの機能的構成の一例を示す機能ブロック図である。
【図９】上記ジェスチャ入力システムにより、照明を点灯する場合の使用態様の例について示した図である。
【図１０】上記ジェスチャ入力システムの変形例について示す図である。
【図１１】本発明のさらに他の実施形態に係るジェスチャ入力システムの機能的構成の一例を示す機能ブロック図である。
【図１２】上記ジェスチャ入力システムにおいて、エアーコンディショナの電源をＯＮにする場合の使用態様の例について示した図である。
【図１３】本発明のさらに別の実施形態に係るジェスチャ入力システムについて示した図である。
【発明を実施するための形態】
【００４２】
〔実施形態１〕
図１〜図４を用いて、本発明の一実施形態に係るジェスチャ入力システムＳＹＳ１について説明すると以下のとおりである。
【００４３】
（システム概要）
まず、図１を参照しながら、ジェスチャ入力装置１を含むジェスチャ入力システムＳＹＳ１全体について説明する。
【００４４】
ジェスチャ入力システムＳＹＳ１は、ジェスチャ入力装置１、センサ３、カメラ５、および制御対象機器７を備える。
【００４５】
ジェスチャ入力装置１は、カメラ５から入力された画像に基づいて、ジェスチャ主体Ｕのジェスチャを認識し、認識したジェスチャに応じた操作を制御対象機器７に実行させるものである。
【００４６】
ジェスチャ主体Ｕとは、ジェスチャを行う主体であり、ジェスチャにより制御対象機器７の操作を行うユーザである。また、ジェスチャとは、ジェスチャ主体Ｕの特定部位の形状（特徴量）または動作、または、それらの組み合わせのことである。例えば、ジェスチャ主体Ｕが人である場合、その人の顔（目、口等）、手、腕、胴、脚等のその人の身体の所定の形状もしくは所定の動作、または、それらの組み合わせを意味する。この動作には、静止していることが含まれる。
【００４７】
また、ジェスチャ入力装置１は、ジェスチャ認識の開始時期を、センサ３からのセンサデータに基づいて決定する。ジェスチャ入力装置１の構成については、後ほど詳しく説明する。
【００４８】
センサ３は、温度・圧力・流量・光・磁気・音波・電磁波などの物理量を計測したり、当該物理量の変化量を検出したり、これらの物理量およびその変化量を検出して物理的な状態変化を感知したりするものである。センサ３は、上記ジェスチャ主体周辺の物理量等を感知するために設けられる。センサ３は、検知結果をセンサデータとして出力する。なお、センサ３は、単一のセンサではなく、複合的なセンサであっても構わない。例えば、センサ３は、音波センサおよび電波感知センサを含む構成であってもよい。
【００４９】
また、センサ３は、ジェスチャ主体Ｕを直接的または間接的に感知するためのセンサデータを収集するために設けられる。なお、図１において、ジェスチャ主体Ｕと、センサ３との間を点線の矢印で結線しているのは、直接的関係および間接的関係が含まれることを
示している。
【００５０】
ジェスチャ主体Ｕが人である場合、センサ３には、人感センサを用いることができる。また、ジェスチャ主体Ｕが、ＲＦＩＤタグなどの電波発信素子等を身に着けていることが想定される場合、センサ３には、電波感知センサなどを用いることができる。
【００５１】
カメラ５は、ジェスチャ主体Ｕを撮像素子等により撮影し、撮影した画像の画像データを出力するものである。ジェスチャ主体Ｕは、例えば、制御対象機器７のユーザであり、ジェスチャ入力装置１に対してジェスチャ入力を行うものである。また、カメラ５は、画像データを、連続的に生成して、動画像データとして出力してもよいし、所定間隔で、あるいは、非定期的に画像データを生成して、静止画像データとして出力してもよい。
【００５２】
制御対象機器７は、ジェスチャ入力装置１からの制御信号に従って当該機器の動作を制御する動作制御部７１を備えている。制御対象機器７は、例えば、テレビ、照明、エアコン、ＰＣ等の家電機器である。
【００５３】
ただし、これに限られず、制御対象機器７は、制御信号を受信し、受信した制御信号に基づいて処理を実行する機器であれば何でもよい。例えば、銀行等に設置されているＡＴＭ（Automated teller machine）、自動販売機、および駅等に設置されている券売機であっても構わない。また、制御対象機器７は、ジェスチャ入力装置１を内部に備えていてもよいし、外部に設けられたジェスチャ入力装置１から制御信号を受信するように構成されていてもよい。
【００５４】
（ジェスチャ入力装置）
次に、図１を用いて、ジェスチャ入力装置１の機能的構成について説明する。図１は、ジェスチャ入力装置１の機能的構成の一例を示す機能ブロック図である。
【００５５】
図１に示すように、ジェスチャ入力装置１は、記憶部１０および制御部２０を備える。以下、記憶部１０および制御部２０について順に説明する。
【００５６】
［記憶部］
記憶部１０は、制御部２０が参照するプログラムや各種データ等を格納するものである。より詳細には、記憶部１０は、センサ判定基準データ１１、ジェスチャ認識データ１２、および制御信号テーブル１３を格納している。以下、図２および図３を参照しながら、これらについて説明する。
【００５７】
センサ判定基準データ１１は、ジェスチャ主体Ｕをセンサで感知したか否かを判定するための基準となる情報である。センサ判定基準データ１１では、例えば、センサからのセンサデータに対応した閾値等が定義される。より具体的には、電波センサから電波強度がセンサデータとして出力されてくる構成の場合、電波強度の閾値等を定義しておく。また、例えば、センサからのセンサデータが示す電波強度が、当該閾値以上であるか否かに応じて、ジェスチャ主体Ｕをセンサで感知したか否かが判定される。
【００５８】
ジェスチャ認識データ１２は、ジェスチャを認識するためのパターンを定義する。ジェスチャ認識データ１２の具体例を、図２に示している。図２に示すように、ジェスチャ認識データ１２では、複数のジェスチャパターンが定義されている。例えば、ジェスチャ認識データ１２には、“手を旋回させる”ジェスチャパターンＧ１、“手を握る・開く”ジェスチャパターンＧ２、および、“手を左右に振る”ジェスチャパターンＧ３が含まれる。
【００５９】
制御信号テーブル１３は、送出すべき制御信号と、ジェスチャとを対応付けるテーブルである。制御信号テーブル１３の具体例を、図３に示している。制御信号テーブル１３では、例えば、制御信号ＳＩＧ００１、ＳＩＧ００２、およびＳＩＧ００３が、それぞれ、ジェスチャパターンＧ１、Ｇ２、およびＧ３と対応付けられている。
【００６０】
［制御部］
制御部２０は、記憶部１０から一時記憶部（不図示）に読み出されたプログラムを実行することにより、各種の演算を行うと共に、ジェスチャ入力装置１が備える各部を統括的に制御するものである。より詳細には、制御部２０は、センサ情報取得部２１、センサ感知部（センサ検知手段）２２、カメラ映像取得部２３、ジェスチャ認識処理部（ジェスチャ認識手段）２４、および機器制御指示部２５を備える。これらの制御部２０の各機能ブロック（２１〜２５）は、ＣＰＵ（central processing unit）が、ＲＯＭ（read only memory）等で実現された記憶装置に記憶されているプログラムをＲＡＭ（random access memory）等で実現された一時記憶部に読み出して実行することで実現できる。
【００６１】
センサ情報取得部２１は、センサ３から出力されるセンサデータを取得するとともに、取得したセンサデータをセンサ感知部２２に供給する。
【００６２】
センサ感知部２２は、ジェスチャ主体Ｕがセンサで感知されたか否かを判定するものである。さらにいえば、センサ感知部２２は、ジェスチャ主体Ｕがジェスチャ入力装置１にジェスチャ入力を行える位置にいるか否かをセンサデータに基づいて判定してもよい。
【００６３】
例えば、センサ感知部２２は、センサ情報取得部２１にセンサ３からの入力があったときに、ジェスチャ主体Ｕがセンサで感知されたと判定する。
【００６４】
また、例えば、センサ感知部２２は、記憶部１０から読みだしたセンサ判定基準データ１１に基づいて、センサデータを判定することで、ジェスチャ主体Ｕの存否を判定する。
【００６５】
より詳しく説明すると次のとおりである。例えば、センサデータが電波強度を示すものであり、センサ判定基準データ１１が電波強度の閾値を定義している場合、センサ感知部２２は、電波強度が閾値以上であるか否かを判定する。
【００６６】
また、例えば、センサ感知部２２は、電波強度が閾値以上である場合、ジェスチャ主体Ｕが存在すると判定し、電波強度が閾値より小さい場合、ジェスチャ主体Ｕが存在しないと判定する。
【００６７】
しかしながら、上述の例は、単なる例示であり、これに限定されない。ジェスチャ主体Ｕがセンサで感知されたか否かの判定は、物体・人等の存在を検出するための任意の手法を用いることができる。また、複合的なセンサを用いる場合、上記判定は、複数のセンサデータおよびセンサ判定基準データ１１に基づいて行う。これによりジェスチャ主体Ｕの存否の判定の精度の向上を図ることができる。
【００６８】
なお、センサ感知部２２は、ジェスチャ主体Ｕがセンサで感知された場合、ジェスチャ認識処理部２４に、ジェスチャ主体Ｕがセンサで感知された旨を通知する。
【００６９】
カメラ映像取得部２３は、カメラ５が出力する画像データを取得するとともに、取得した画像データをジェスチャ認識処理部２４に供給する。
【００７０】
ジェスチャ認識処理部２４は、画像データを解析して画像データに示されるジェスチャを認識するジェスチャ認識処理を行う。ジェスチャ認識処理部２４は、具体的には、ジェ
スチャ主体Ｕの存在が確認されたことを契機に、画像データのジェスチャ認識を開始する。すなわち、ジェスチャ認識処理部２４は、ジェスチャ主体Ｕがセンサ感知された時点をジェスチャの開始時点と認識し、その時点からの画像データに基づいてジェスチャ認識処理を開始する。
【００７１】
上記ジェスチャ認識処理において、ジェスチャ認識処理部２４は、画像データとジェスチャ認識データ１２とを照合し、画像データに、ジェスチャパターンに一致するジェスチャが含まれるか否かを判定する。
【００７２】
なお、ジェスチャ認識処理部２４は、画像データに、ジェスチャパターンに一致するジェスチャが含まれる場合、一致したジェスチャパターンを機器制御指示部２５に通知する。
【００７３】
機器制御指示部２５は、ジェスチャパターンに応じた制御信号を生成し、制御対象機器７に対して出力する。機器制御指示部２５は、具体的には、制御信号テーブル１３を参照して、ジェスチャパターンに対応付けられている制御信号を生成する。また、機器制御指示部２５は、生成した制御信号を制御対象機器７の動作制御部７１に対して出力する。
【００７４】
なお、機器制御指示部２５は、制御信号の出力を終了したとき、その旨をジェスチャ認識処理部２４に通知してもよい。また、ジェスチャ認識処理部２４は、この制御信号の出力の終了通知を受信した場合、ジェスチャ認識を終了してもよい。
【００７５】
また、ジェスチャ入力装置１の機器制御指示部２５と、制御対象機器７の動作制御部７１との間は、どのような接続形態であっても構わない。例えば、制御対象機器７が、ジェスチャ入力装置１を内部に備える構成であれば、プロセス間通信、データバス、配線等により両者の間が接続されていてもよい。また、制御対象機器７が、外部に設けられたジェスチャ入力装置１から制御信号を受信する構成であれば、無線通信手段または有線通信手段によって、両者の間がネットワーク接続されていてもよい。
【００７６】
〔ジェスチャ入力処理の流れ〕
次に、図４を用いて、ジェスチャ入力装置１におけるジェスチャ入力処理について説明する。図４は、ジェスチャ入力装置１におけるジェスチャ入力処理の一例を示すフローチャートである。
【００７７】
図４に示すように、まず、センサ情報取得部２１が取得したセンサデータに基づいて、センサ感知部２２が、ジェスチャ主体Ｕがセンサで感知されたか否かを判定する（Ｓ１１）。
【００７８】
ジェスチャ主体Ｕがセンサで感知されていない場合（Ｓ１１においてＮＯ）、センサ感知部２２は、引き続きセンサデータを受け付ける。
【００７９】
一方、ジェスチャ主体Ｕがセンサで感知された場合（Ｓ１１においてＹＥＳ）、センサ感知部２２は、その旨をジェスチャ認識処理部２４に通知し、これによりジェスチャ認識処理部２４において画像データに基づくジェスチャ認識が開始される（Ｓ１２）。
【００８０】
次に、ジェスチャ認識処理部２４が、ジェスチャ認識処理を行って（Ｓ１３）、ジェスチャ認識処理が成功したか否かを判定する（Ｓ１４）。
【００８１】
画像データにおいて、ジェスチャパターンに一致するジェスチャが含まれておらず、ジェスチャ認識処理が失敗した場合（Ｓ１４においてＮＯ）、ジェスチャ認識処理部２４は
、引き続き画像データを受け付けてジェスチャ認識処理を行う（Ｓ１３に戻る）。
【００８２】
一方、画像データにおいて、ジェスチャパターンに一致するジェスチャが含まれており、ジェスチャ認識処理が成功した場合（Ｓ１４においてＹＥＳ）、機器制御指示部２５が、一致したジェスチャパターンに対応付けられている制御信号を生成し、生成した制御信号を制御対象機器７に対して出力する。
【００８３】
その後、ジェスチャ認識処理部２４は、ジェスチャ認識を終了し（Ｓ１６）、ジェスチャ入力処理が終了する。
【００８４】
なお、ジェスチャ主体Ｕがセンサで感知された場合、Ｓ１２において、ジェスチャ認識処理部２４が画像データに基づくジェスチャ認識を開始することとしたが、次のように構成することもできる。
【００８５】
すなわち、ジェスチャ主体Ｕがセンサで感知されていない間は、カメラ映像取得部２３が、カメラから画像データを取得することを停止する一方で、ジェスチャ主体Ｕがセンサで感知されたときから、ジェスチャ認識処理部２４への画像データの供給を開始するよう構成してもよい。
【００８６】
また、Ｓ１２において、ジェスチャ認識処理部２４は、ジェスチャ主体Ｕがセンサで感知された時点から、所定時間をおいて、ジェスチャ認識を開始してもよい。
【００８７】
なお、センサの設置場所と、カメラの設置場所とが離れている場合、所定時間は次のように決定できる。例えば、当該所定時間は、センサの設置場所と、カメラの設置場所との距離、およびジェスチャ主体Ｕが、当該距離を移動するためにかかると予測される時間に応じて決定することができる。
【００８８】
また、Ｓ１４において、ジェスチャ認識処理に失敗した場合において、ジェスチャ認識の開始から、所定時間が経過していれば、ジェスチャ認識を終了してもよい（すなわち、Ｓ１１に戻ってもよい）。
【００８９】
また、Ｓ１６において、ジェスチャ認識処理部２４がジェスチャ認識を終了するようにしたが、カメラ映像取得部２３が、画像データを取得することを終了してもよい。
【００９０】
また、以上では、ジェスチャ認識が成功すれば、ジェスチャ認識を終了する構成とした。すなわち、上記構成によれば、ジェスチャ入力操作の都度、ジェスチャ主体Ｕを感知する。
【００９１】
これは、ジェスチャ入力操作が続けて行われない場合もあり、一つのジェスチャ認識がいったん終了し、次にジェスチャ認識を行う際には、改めてジェスチャ主体Ｕを感知し直したほうが好ましい場合があるためである。
【００９２】
すなわち、一つのジェスチャ入力操作が終わってから、次のジェスチャ入力操作までに、所定の時間間隔があるようであれば、ジェスチャ入力操作の都度、ジェスチャ主体Ｕを感知することが、ジェスチャ認識精度向上の観点から好ましい。しかしながら、これに限られずジェスチャ認識を継続して行うことも可能である。
【００９３】
（作用・効果）
以上に示した通り、ジェスチャ入力装置１は、ジェスチャ主体Ｕがカメラ５に対して行うジェスチャを認識し、認識したジェスチャに基づいて制御対象機器７を制御するジェス
チャ入力装置１であって、ジェスチャ主体Ｕ周辺の物理量または該物理量の変化を計測するためのセンサ３からの入力を検知するセンサ感知部２２と、センサ３からの入力が検知されたときを基準として、カメラ５が撮影した画像を用いたジェスチャ認識を開始するジェスチャ認識処理部２４と、を備える構成である。
【００９４】
これにより、ジェスチャ認識の開始点を効率よく、また精度よく検出することができ、ジェスチャ認識の精度向上を図ることができるという効果を奏する。
〔実施形態２〕
図５〜図７を用いて、本発明の他の実施形態に係るジェスチャ入力システムＳＹＳ２について説明すると以下のとおりである。なお、説明の便宜上、前記実施形態１にて説明した図面と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
【００９５】
（システム概要）
まず、図５を用いて、ジェスチャ入力システムＳＹＳ２の概要について説明する。図５に示すジェスチャ入力システムＳＹＳ２は、図１に示したジェスチャ入力システムＳＹＳ１の構成を、より具体的な機器に適用したものである。
【００９６】
すなわち、図５に示すジェスチャ入力システムＳＹＳ２は、図１に示すジェスチャ入力システムＳＹＳ１において、制御対象機器７を、テレビジョン受像機７Ａとしたものである。また、図５において、図１におけるジェスチャ主体Ｕに相当するのは、当該テレビジョン受像機７Ａを使用する視聴者Ｕ１である。
【００９７】
図５に示すジェスチャ入力システムＳＹＳ２は、携帯電話機（携帯通信端末）１００を使用する視聴者Ｕ１が、テレビジョン受像機７Ａを操作して番組を視聴するためのジェスチャ入力機能を提供する。また、以下では、テレビジョン受像機７Ａにおいて、視聴者Ｕ１が使用する携帯電話機１００を感知することにより、間接的にジェスチャ主体Ｕを検出する例について説明する。
【００９８】
（システム構成）
図５に示すように、ジェスチャ入力システムＳＹＳ２は、携帯電話機１００およびテレビジョン受像機７Ａを備える。
【００９９】
携帯電話機１００は、携帯電話網、および近距離無線通信網に通信接続することが可能な通信端末である。近距離無線通信網としては、例えば、ＷＬＡＮ（Wireless LAN）、Ｗｉｍａｘ、およびＢｌｕｅｔｏｏｔｈ（登録商標）等が挙げられる。
【０１００】
また、以下では、例示的に、ジェスチャ入力システムＳＹＳ２が携帯電話機１００を備える構成について説明するが、これに限られない。携帯電話機１００は、その他の携帯通信端末であっても構わない。例えば、タブレット型ＰＣや、スマートフォン（多機能携帯電話機とも称される）であってもよい。
【０１０１】
テレビジョン受像機７Ａは、近距離無線装置３Ａと、カメラ５と、電源部８と、記憶部１０と、制御部２０とを備える。
【０１０２】
近距離無線装置３Ａは、図１のセンサ３に対応する電波感知センサ３１を備えている。電波感知センサ３１は、携帯電話機１００の電波発信部１０１から発信される電波を感知するためのセンサである。電波発信部１０１は、視聴者Ｕ１の操作に応じて上記近距離無線通信網で用いられる周波数帯の電波を発信する。例えば、近距離無線網が、ＷＬＡＮである場合、電波発信部１０１は、ＷＬＡＮの周波数帯である２．１２ＧＨｚ〜２．４７２ＧＨｚの電波を発信する。
【０１０３】
カメラ５は、これまでに説明したとおりであるので、その説明を省略する。
【０１０４】
電源部８は、カメラ５をはじめとする、テレビジョン受像機７Ａの各部が動作するための電源を供給する。電源部８は、後に説明する機器制御指示部２５からの制御信号に従って、各部への電源供給を開始および停止する。
【０１０５】
なお、テレビジョン受像機７Ａが、“電源ＯＦＦ”の状態であっても、少なくともジェスチャ入力装置１が動作するための電源が電源部８から供給されるものとする。
【０１０６】
また、テレビジョン受像機７Ａは、ジェスチャ入力装置１を内部に備えている。ジェスチャ入力装置１が備える構成要素については、既に説明した通りであるのでその説明を省略する。
【０１０７】
記憶部１０および制御部２０は、ジェスチャ入力装置１とテレビジョン受像機７Ａとの間で、共有されている。
【０１０８】
なお、記憶部１０では、上述したジェスチャ入力装置１の構成要素に加えて、動作制御部７１が参照できるように構成されている制御内容テーブル７２を設けている。
【０１０９】
制御内容テーブル７２は、テレビジョン受像機７Ａの制御内容を定義したテーブルである。図６に、制御内容テーブル７２の具体的構成例を示している。図６に示すように、制御内容テーブル７２は、機器制御指示部２５が出力する制御信号と、当該制御信号に従って実行すべき制御内容とを対応付けている。
【０１１０】
より詳細には、制御内容テーブル７２では、例えば、制御信号ＳＩＧ００１、ＳＩＧ００２、およびＳＩＧ００３に、それぞれ、“電源ＯＮ／ＯＦＦ”、“決定”、および“キャンセル”が対応付けられている。
【０１１１】
また、制御部２０は、上述したジェスチャ入力装置１の構成要素に加えて、テレビジョン受像機７Ａの動作制御部７１を備える。
【０１１２】
（使用態様の例）
次に、図７を参照しながら、ジェスチャ入力装置１を含むジェスチャ入力システムＳＹＳ２の使用態様の例について説明する。図７の（ａ）〜（ｄ）は、ジェスチャ入力システムＳＹＳ２において、テレビジョン受像機７Ａの電源をＯＮにする場合の使用態様の例について示した図である。なお、以下の説明では、図４に示したフローチャートにおける対応するステップを括弧書きにて記載している。また、図７には、記載の便宜上、ジェスチャ入力システムＳＹＳ３の大まかな構成のみ示しているので、その構成詳細については、図５も併せて参照されたい。
【０１１３】
まず、図７の（ａ）に示す状態では、テレビジョン受像機７Ａは、電源ＯＦＦの状態であるとする。また、テレビジョン受像機７Ａの付近（例えば、同じ部屋）に設置されているデスクの上には、携帯電話機１００が静置されている。近距離無線装置の電波感知センサ３１は、電波を感知していないので、センサ感知部２２は、視聴者Ｕ１が感知されるのを待ち受ける（Ｓ１１においてＮＯ）。携帯電話機１００は、例えば、充電中であってもよい。なお、図７の（ａ）〜（ｄ）では、説明の便宜のため、視聴者Ｕ１の手だけを示している。
【０１１４】
次に、図７の（ｂ）に示すように、視聴者Ｕ１が、携帯電話機１００の電波発信部１０
１に対して操作を行う。これに伴って、電波Ｒ１は電波発信部１０１から発信される。電波発信部１０１は、例えば、ユーザの操作を受け付けるための操作部を有していてもよい。
【０１１５】
また、上記ユーザの操作は、携帯電話機１００の所定の操作以外の操作を制限するロック機能を解除する操作であっても構わない。上記操作部は、物理的なボタンであってもよいし、タッチパネル等の入力インターフェースであっても構わない。
【０１１６】
また、電波発信部１０１は、携帯電話機１００に導入可能なアプリケーションによって実現されていても構わない。また、上記アプリケーションは、テレビジョン受像機７Ａを、電波を用いてリモートコントロールするための機能を備えていてもよい。
【０１１７】
一方、テレビジョン受像機７Ａでは、近距離無線装置３Ａでは、電波感知センサ３１が、電波Ｒ１を検出し、検出結果に基づくセンサデータを生成する。そして、センサ情報取得部２１が取得したセンサデータに基づいて、センサ感知部２２が、“視聴者Ｕ１が感知された”と判定する（Ｓ１１においてＹＥＳ）。これにより、ジェスチャ認識処理部２４が、ジェスチャ認識を開始する（Ｓ１２）。なお、視聴者Ｕ１がジェスチャを行う前に、携帯電話機１００が静置されている場所から、カメラの撮影範囲まで移動することが想定される場合、“視聴者Ｕ１が感知された”と判定されたときから、所定時間後に、ジェスチャ認識を開始してもよい。
【０１１８】
次に、図７の（ｃ）に示すように、視聴者Ｕ１が、カメラ５に向かってジェスチャを行う。ここでは、視聴者Ｕ１が、“手を旋回させる”ジェスチャを行うものとする。これに対して、ジェスチャ認識処理部２４がカメラ５からの画像データに基づき、ジェスチャ認識処理を実行する（Ｓ１３）。
【０１１９】
次に、図７の（ｄ）に示すように、ジェスチャ認識処理部２４が認識したジェスチャに応じてテレビジョン受像機７Ａの電源がＯＮとなる。具体的には、“手を旋回させる”ジェスチャ（図２に示すジェスチャパターンＧ１）のジェスチャ認識処理が成功すると（Ｓ１４においてＹＥＳ）、機器制御指示部２５が、図３に示した制御信号テーブル１３に基づいて制御信号ＳＩＧ００１を生成し、動作制御部７１に出力する（Ｓ１５）。動作制御部７１は、図６に示した制御内容テーブル７２を参照し、制御信号ＳＩＧ００１に対応する電源ＯＮ動作を実行する。その後、ジェスチャ認識処理部２４は、ジェスチャ認識を終了する（Ｓ１６）。
【０１２０】
なお、センサ感知部２２において、“視聴者Ｕ１が感知された”と判定されるまでは、カメラ５に対する電源供給は停止されていてもよい。そして、センサ感知部２２が、“視聴者Ｕ１が感知された”と判定したときに、電源部８に対して、カメラ５の電力供給を開始するように指示しても構わない。これにより、カメラ５の消費電力を低減することが可能である。
（変形例）
以上では、テレビジョン受像機７Ａが、カメラ５および電波感知センサ３１を備える構成であったが、これに限られない。テレビジョン受像機７Ａは、カメラ５および電波感知センサ３１と接続するためのインターフェースを備える構成であってもよく、当該インターフェースを介して、カメラ５および電波感知センサ３１と接続されてもよい。
【０１２１】
また、以上では、近距離無線装置３Ａにおいて、電波を感知するための電波感知センサ３１を設ける構成について説明したが、これに限られず以下のとおりに構成することも可能である。
【０１２２】
（１）近距離無線装置３Ａにおいて、携帯電話機１００が、無線ネットワークに参加したことを検出し、その旨を示すセンサデータを出力してもよい。また、近距離無線装置３Ａが出力するセンサデータが、携帯電話機１００が無線ネットワークに参加したことを示すとき、センサ感知部２２は、“視聴者Ｕ１が感知された”と判定してもよい。
【０１２３】
（２）近距離無線装置３Ａにおいて、次のように複合的なセンサを設ける構成とし、携帯電話機１００からの出力される電波等を複合的に検知するようにすることができる。
【０１２４】
すなわち、携帯電話機１００は、電波発信部１０１に加えて、ユーザの操作に応じて音声を出力する音声出力部を備える構成とする。音声出力部は、ユーザが画面入力操作を行ったときや、着信や音楽再生を行ったときに音声を出力するものである。
【０１２５】
また、近距離無線装置３Ａは、電波感知センサ３１に加えて、音感知センサを備える構成とする。これにより、近距離無線装置３Ａは、電波発信部１０１から出力される電波に加えて、上記音声出力部から出力される音声を感知することができる。
【０１２６】
また、携帯電話機１００に対して行う視聴者Ｕ１の操作は、ロック機能を解除する機能であってもよい。また、携帯電話機１００では、ロック機能の解除に伴って、上記電波および音声が出力されるように構成されていてもよい。
【０１２７】
上記構成によれば、視聴者Ｕ１が携帯電話機１００のロック機能を解除したことを、近距離無線装置３Ａにおいて検知することができる。このように、近距離無線装置３Ａにおいて複合的なセンサを設けることにより、視聴者Ｕ１を感知する精度を向上させることができる。
【０１２８】
（３）また、以上では、携帯電話機１００に対する操作に基づいて視聴者Ｕ１の存在を感知していたが、次のとおり構成変更することも可能である。
【０１２９】
すなわち、携帯電話機１００を、テレビジョン受像機７Ａの赤外線リモートコントローラに変更するとともに、電波感知センサ３１を、赤外線入力部に変更してもよい。また、リモートコントローラのジェスチャスイッチがＯＮになったことを、赤外線入力部において感知することで、視聴者Ｕ１の存在を感知してもよい。
〔実施形態３〕
図８〜図１０を用いて、本発明のさらに他の実施形態に係るジェスチャ入力システムＳＹＳ３について説明すると以下のとおりである。なお、説明の便宜上、これまで説明した実施形態にて説明した図面と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
【０１３０】
（システム概要）
まず、図８を用いて、ジェスチャ入力システムＳＹＳ３の概要について説明する。図８に示すジェスチャ入力システムＳＹＳ３は、図１に示したジェスチャ入力システムＳＹＳ１を、室内照明システムに適用したものである。
【０１３１】
すなわち、図８に示すジェスチャ入力システムＳＹＳ３は、図１に示したジェスチャ入力システムＳＹＳ１において、制御対象機器７を、照明７Ｂとしたものである。また、図８において、図１におけるジェスチャ主体Ｕに相当するのは、照明器具が設けられた室内に入室する入室者Ｕ２である。
【０１３２】
図８に示すジェスチャ入力システムＳＹＳ３は、自動ドア３Ｂが設けられた室内に入室する入室者Ｕ２が、室内に設けられた照明７Ｂを操作するためのジェスチャ入力機能を提
供する。また、以下では、自動ドア３Ｂにおいて、入室者Ｕ２を感知することにより、直接的にジェスチャ主体Ｕを検出する例について説明する。
【０１３３】
（システム構成）
図８に示すように、ジェスチャ入力システムＳＹＳ３は、ジェスチャ入力装置１、自動ドア３Ｂ、カメラ５、および照明７Ｂを備える。
【０１３４】
図８に示すジェスチャ入力装置１は、図１に示すジェスチャ入力装置１において、接続部９を追加した構成である。
【０１３５】
接続部９は、ジェスチャ入力装置１を、自動ドア３Ｂ、カメラ５、および照明７Ｂと接続するための端子またはネットワークインターフェースを備える。接続部９における接続形態は、任意のものを採用することができる。例えば、接続部９は、金属配線を接続するための端子を備えていてもよい。また、接続部９は、有線または無線ＬＡＮ（Local Area
Network）のネットワークインターフェースを備えていてもよい。
【０１３６】
なお、ジェスチャ入力システムＳＹＳ３に含まれるジェスチャ入力装置１のジェスチャ認識データ１２および制御信号テーブル１３では、ジェスチャパターンＧ２およびＧ３に関する定義を省略してもかまわない。
【０１３７】
自動ドア３Ｂは、開閉式のドアを備えており、開閉センサ３２により入室者Ｕ２を感知することで開閉する。開閉センサ３２は、所定範囲の人物の存否を感知するものである。開閉センサ３２として、例えば、赤外線により人物の存否を検出するもの等を用いることができるが、これに限られず任意の人感センサを用いることができる。また、開閉センサ３２は、ジェスチャ入力装置１の接続部９に接続されている。
【０１３８】
カメラ５は、これまでに説明したとおりであるので、その説明を省略する。
【０１３９】
照明７Ｂは、ジェスチャ入力装置１の機器制御指示部２５から出力される電源ＯＮ／ＯＦＦ制御信号に従って、点灯／消灯する。
【０１４０】
（使用態様の例）
次に、図９を参照しながら、ジェスチャ入力装置１を含むジェスチャ入力システムＳＹＳ３の使用態様の例について説明する。図９の（ａ）〜（ｃ）は、ジェスチャ入力システムＳＹＳ３により、照明７Ｂを点灯する場合の使用態様の例について示した図である。また、以下の説明では、図４に示したフローチャートにおける対応するステップを括弧書きにて記載している。また、図９には、記載の便宜上、ジェスチャ入力システムＳＹＳ３の大まかな構成のみ示しているので、その構成詳細については、図８も併せて参照されたい。また、図９の（ａ）〜（ｃ）では、ジェスチャ入力装置１と、自動ドア３Ｂ、カメラ５、および照明７Ｂとの接続の記載を省略している。
【０１４１】
また、図９の（ａ）〜（ｃ）では、開閉センサ３２の感知範囲を符号Ｒ１１にて示し、カメラ５の撮影範囲を符号Ｒ１２にて示している。カメラ５の撮影範囲Ｒ１２は、自動ドア３Ｂを通じて、ユーザが外部から入室してくる位置に設定される。また、図示のとおり、照明７Ｂは、室内に設置されている。
【０１４２】
まず、図９の（ａ）に示すように、入室者Ｕ２は、部屋の外におり、これから部屋の内部に入室しようとしている。ここで、開閉センサ３２が、その感知範囲Ｒ１１に移動してきた入室者Ｕ２を感知し、これに伴い、センサ感知部２２では、“入室者Ｕ２が感知された”と判定する（Ｓ１１においてＹＥＳ）。
【０１４３】
次に、図９の（ｂ）に示すように、開閉センサ３２によって入室者Ｕ２が感知されたことに応じて、自動ドア３Ｂのドアが開く一方で、ジェスチャ認識処理部２４が、ジェスチャ認識を開始する（Ｓ１２）。入室者Ｕ２が、部屋の中に移動することで、カメラ５の撮影範囲Ｒ１２に入ってくる。なお、ジェスチャ認識処理部２４は、“入室者Ｕ２が感知された”と判定されたときから、所定時間後に、ジェスチャ認識を開始してもよい。
【０１４４】
また、部屋に入室した入室者Ｕ２は、カメラ５に向かって電源ＯＮ／ＯＦＦのジェスチャを行う。すなわち、入室者Ｕ２は、ジェスチャパターンＧ１の“手を旋回させる”ジェスチャを行う。これに対して、ジェスチャ認識処理部２４がカメラ５からの画像データに基づき、ジェスチャ認識処理を実行する（Ｓ１３）。
【０１４５】
次に、図９の（ｃ）に示すように、ジェスチャ認識処理部２４が認識したジェスチャに応じて照明７Ｂの電源がＯＮとなる。具体的には、“手を旋回させる”ジェスチャ（図２に示すジェスチャパターンＧ１）のジェスチャ認識処理が成功すると（Ｓ１４においてＹＥＳ）、機器制御指示部２５が、図３に示した制御信号テーブル１３に基づいて制御信号ＳＩＧ００１を生成し、照明７Ｂに出力する（Ｓ１５）。
【０１４６】
照明７Ｂは、制御信号ＳＩＧ００１に応じて電源ＯＮ動作を実行する。その後、ジェスチャ認識処理部２４は、ジェスチャ認識を終了する（Ｓ１６）。
【０１４７】
（変形例）
図１０を用いて、ジェスチャ入力システムＳＹＳ３の変形例について説明すると次のとおりである。図１０は、ジェスチャ入力システムＳＹＳ３の変形例であるジェスチャ入力システムＳＹＳ３Ａの構成例について示す図である。
【０１４８】
図１０に示すように、ジェスチャ入力システムＳＹＳ３Ａは、ジェスチャ入力システムＳＹＳ１、開閉センサ３４が設けられた開き戸３Ｄ、カメラ５、ＡＴＭ７Ｄを備える。
【０１４９】
すなわち、ジェスチャ入力システムＳＹＳ３Ａは、ジェスチャ入力システムＳＹＳ３において、自動ドア３Ｂを、開き戸３Ｄに変更するとともに、照明７Ｂを、ＡＴＭ７Ｄに変更した構成である。
【０１５０】
開閉センサ３４は、開き戸３Ｄが開かれているか、それとも閉じられているかを感知する。また、カメラ５の撮影範囲Ｒ３１は、開き戸３Ｄが開けられてユーザが入室してくる位置に設定される。
【０１５１】
入室者Ｕ２が開き戸３Ｄを開けたことが開閉センサ３４によって感知されると、ジェスチャ認識処理部２４がジェスチャ認識を開始する。すなわち、ジェスチャ認識処理部２４が、カメラ５が撮影範囲Ｒ３１を撮影して得られる画像データに基づくジェスチャ認識を開始する。
【０１５２】
ここで、入室者Ｕ２がカメラ５に向かってジェスチャを行うことにより、ジェスチャ認識処理部２４がジェスチャ認識処理を行い、認識されたジェスチャに応じて機器制御指示部２５がＡＴＭに対して制御信号を出力する。これにより、ＡＴＭ７Ｄは、制御信号に従った動作を行う。
〔実施形態４〕
図１１および図１２を用いて、本発明のさらに他の実施形態に係るジェスチャ入力システムＳＹＳ４について説明すると以下のとおりである。なお、説明の便宜上、前記実施形態１にて説明した図面と同じ機能を有する部材については、同じ符号を付記し、その説明
を省略する。
【０１５３】
（システム概要）
まず、図１１を用いて、ジェスチャ入力システムＳＹＳ４の概要について説明する。図１１に示すジェスチャ入力システムＳＹＳ４は、図１に示したジェスチャ入力システムＳＹＳ１の構成を、より具体的な機器に適用したものである。
【０１５４】
すなわち、図１１に示すジェスチャ入力システムＳＹＳ４は、図１に示すジェスチャ入力システムＳＹＳ１において、制御対象機器７を、エアーコンディショナ７Ｃとしたものである。また、図１１において、図１におけるジェスチャ主体Ｕに相当するのは、当該エアーコンディショナ７Ｃを使用する使用者Ｕ３である。
【０１５５】
図１１に示すジェスチャ入力システムＳＹＳ４は、エアーコンディショナ７Ｃを使用する使用者Ｕ３がエアーコンディショナ７Ｃを操作するためのジェスチャ入力機能を提供する。また、以下では、エアーコンディショナ７Ｃに設けられた人感センサにより、使用者Ｕ３を感知することにより、直接的にジェスチャ主体Ｕを検出する例について説明する。
【０１５６】
（システム構成）
図１１に示すように、ジェスチャ入力システムＳＹＳ４は、エアーコンディショナ７Ｃから構成される。エアーコンディショナ７Ｃは、人感センサ３Ｃと、カメラ５と、記憶部１０と、制御部２０とを備える。
【０１５７】
人感センサ３Ｃは、所定範囲の人物の存否を感知するものである。人感センサ３Ｃとしては、例えば、赤外線により人物の存否を検出するもの等を用いることができるが、これに限られず任意の人感センサを用いることができる。なお、人感センサ３Ｃを、カメラ５の付近に設けて、人感センサ３Ｃの感知範囲と、カメラ５の撮影範囲との少なくとも一部が一致するように構成してもよい。
【０１５８】
カメラ５は、これまでに説明したとおりであるので、その説明を省略する。
【０１５９】
また、エアーコンディショナ７Ｃは、ジェスチャ入力装置１を内部に備えている。ジェスチャ入力装置１が備える構成要素については、既に説明した通りであるのでその説明を省略する。
【０１６０】
記憶部１０および制御部２０は、ジェスチャ入力装置１とエアーコンディショナ７Ｃとの間で、共有している。
【０１６１】
なお、記憶部１０に格納されている制御内容テーブル７２および制御部２０が備える動作制御部７１については、既に説明したとおりであるので、その詳細な説明を省略する。
【０１６２】
（使用態様の例）
次に、図１２を参照しながら、ジェスチャ入力装置１を含むジェスチャ入力システムＳＹＳ４の使用態様の例について説明する。図１２の（ａ）〜（ｃ）は、ジェスチャ入力システムＳＹＳ４において、エアーコンディショナ７Ｃの電源をＯＮにする場合の使用態様の例について示した図である。なお、以下の説明では、図４に示したフローチャートにおける対応するステップを括弧書きにて記載している。また、図１２には、記載の便宜上、ジェスチャ入力システムＳＹＳ４の大まかな構成のみ示しているので、その構成詳細については、図１１も併せて参照されたい。
【０１６３】
まず、図１２の（ａ）に示す状態では、エアーコンディショナ７Ｃは、電源ＯＦＦの状
態であるとする。また、図示のとおり、エアーコンディショナ７Ｃの正面に人感センサ３Ｃおよびカメラ５が並設されている。このため、人感センサ３Ｃの感知範囲およびカメラ５の撮影範囲は、エアーコンディショナ７Ｃの手前付近となる。なお、人感センサ３Ｃとカメラ５とを並設する構成は、あくまで例示のためのものであり、これに限定されない。使用者Ｕ３を感知および撮影できる範囲で、任意の構成を採用することができる。
【０１６４】
ここで、センサ感知部２２は、使用者Ｕ３が感知されるのを待ち受けている（Ｓ１１）ところに、使用者Ｕ３が、エアーコンディショナ７Ｃの手前に移動してくると、人感センサ３Ｃが使用者Ｕ３を感知する。人感センサ３Ｃからのセンサデータに基づいて、センサ感知部２２が、“使用者Ｕ３が感知された”と判定する（Ｓ１１においてＹＥＳ）。これにより、ジェスチャ認識処理部２４が、ジェスチャ認識を開始する（Ｓ１２）。
【０１６５】
次に、図１２の（ｂ）に示すように、使用者Ｕ３が、カメラ５に向かってジェスチャを行う。ここでは、使用者Ｕ３が、“手を旋回させる”ジェスチャを行うものとする。これに対して、ジェスチャ認識処理部２４がカメラ５からの画像データに基づき、ジェスチャ認識処理を実行する（Ｓ１３）。
【０１６６】
次に、図１２の（ｃ）に示すように、ジェスチャ認識処理部２４が認識したジェスチャに応じてエアーコンディショナ７Ｃの電源がＯＮとなる。具体的には、“手を旋回させる”ジェスチャ（図２に示すジェスチャパターンＧ１）のジェスチャ認識処理が成功すると（Ｓ１４においてＹＥＳ）、機器制御指示部２５が、図３に示した制御信号テーブル１３に基づいて制御信号ＳＩＧ００１を生成し、動作制御部７１に出力する（Ｓ１５）。動作制御部７１は、図６に示した制御内容テーブル７２を参照し、制御信号ＳＩＧ００１に対応する電源ＯＮ動作を実行する。その後、ジェスチャ認識処理部２４は、ジェスチャ認識を終了する（Ｓ１６）。
【０１６７】
なお、ジェスチャ入力システムＳＹＳ４において、エアーコンディショナ７Ｃを、ＡＴＭ、券売機や、自動販売機等に変更することも可能である。すなわち、ＡＴＭ等の手前に使用者Ｕ３が来た時に、ＡＴＭ等が、使用者Ｕ３を感知し、ジェスチャ認識を開始し、さらに、ジェスチャに応じて各種のサービスを提供するようジェスチャ入力システムＳＹＳ４を構成することも可能である。
【０１６８】
（変形例）
以上では、エアーコンディショナ７Ｃが、カメラ５および電波感知センサ３１を備える構成であったが、これに限られない。エアーコンディショナ７Ｃは、カメラ５および人感センサ３Ｃと接続するためのインターフェースを備える構成であってもよく、当該インターフェースを介して、カメラ５および人感センサ３Ｃと接続されてもよい。
〔実施形態５〕
図１３を用いて、本発明の別の実施形態に係るジェスチャ入力システムＳＹＳ５について説明すると以下のとおりである。なお、説明の便宜上、これまで説明した実施形態にて説明した図面と同じ機能を有する部材については、同じ符号を付記し、その説明を省略する。
【０１６９】
（システム概要）
まず、図１３を用いて、ジェスチャ入力システムＳＹＳ５の概要について説明する。図１３に示すジェスチャ入力システムＳＹＳ５は、複数の制御対象機器を統合的に操作するためのものである。
【０１７０】
図１３に例示する入力システムＳＹＳ５は、制御対象機器として、図５に示したテレビジョン受像機７Ａと、図８示した照明７Ｂと、図１１に示したエアーコンディショナ７Ｃ
と、を含む。以下に説明するジェスチャ入力システムＳＹＳ５では、ジェスチャ主体Ｕの位置に応じてこれらの制御対象機器を操作することができる。
【０１７１】
（システム構成）
ジェスチャ入力システムＳＹＳ５は、ジェスチャ入力装置１、カメラ５、テレビジョン受像機７Ａ、照明７Ｂ、およびエアーコンディショナ７Ｃを備える構成である。ジェスチャ入力システムＳＹＳ５は、室内に設置されているテレビジョン受像機７Ａ、照明７Ｂ、およびエアーコンディショナ７Ｃを制御対象機器７とする。
【０１７２】
なお、ジェスチャ入力装置１、カメラ５、テレビジョン受像機７Ａ、照明７Ｂ、およびエアーコンディショナ７Ｃの各部の構成については、既に説明したとおりであるので、ここではその説明を省略する。
【０１７３】
ただし、以下の説明では、次のとおり、これらを構成変更するものとする。まず、テレビジョン受像機７Ａおよびエアーコンディショナ７Ｃが内部に備えていたジェスチャ入力装置１およびカメラ５については、それぞれ図１３に示すジェスチャ入力装置１およびカメラ５に統合する。カメラ５の撮影範囲Ｒ２１は、室内を概ねカバーしている。
【０１７４】
また、ジェスチャ主体Ｕを感知するためのセンサは、エアーコンディショナ７Ｃの人感センサ３Ｃを用いる。すなわち、人感センサ３Ｃは、ジェスチャ入力装置１と接続されておりセンサデータをジェスチャ入力装置１に出力する。
【０１７５】
また、人感センサ３Ｃのセンサデータに基づいて、室内のいずれの区画にジェスチャ主体Ｕが存在するかを検知可能とする。すなわち、センサ感知部２２は、テレビジョン受像機７Ａの手前の区画Ａ１１、照明７Ｂの手前の区画Ａ１２、およびエアーコンディショナ７Ｃの手前の区画Ａ１３のいずれの区画にジェスチャ主体Ｕが存在するかをセンサデータから判定できるものとする。センサ感知部２２の区画判定の手法には任意の技術を用いることができる。例えば、ジェスチャ主体Ｕとの距離をセンサによって計測し、計測した距離に基づいて判定する手法が挙げられる。
【０１７６】
また、機器制御指示部２５は、例示的に、ジェスチャ主体Ｕがいる区画に対応付けられている機器に制御信号を出力するものとする。以下では、テレビジョン受像機７Ａ、照明７Ｂ、およびエアーコンディショナ７Ｃを、それぞれ、区画Ａ１１、手前の区画Ａ１２、および区画Ａ１３に対応付ける。すなわち、それぞれの機器は、自機器の手前の区画と対応付けられる。
【０１７７】
（実施例）
次に、図１３を参照しながら、ジェスチャ入力装置１を含むジェスチャ入力システムＳＹＳ５の実施例について説明する。
【０１７８】
人感センサ３Ｃが区画Ａ１２にいるジェスチャ主体Ｕを感知すると、センサ感知部２２が、人感センサ３Ｃが出力するデータに基づいて、ジェスチャ主体Ｕが感知されたこと、および、ジェスチャ主体Ｕが区画Ａ１２に存在することを検知する。
【０１７９】
これに応じて、ジェスチャ認識処理部２４が、カメラ５から出力される画像データに基づいて、ジェスチャ認識処理を行う。ここで、ジェスチャ主体Ｕの行ったジェスチャが、例えば、エアーコンディショナ７Ｃの電源をＯＮにするジェスチャ（図６に示すジェスチャパターンＧ１）であったとする。
【０１８０】
次に、機器制御指示部２５は、ジェスチャ主体Ｕがいる区画Ａ１２に対応している照明
７Ｂに対して制御信号ＳＩＧ００１を出力する。これにより、照明７Ｂが点灯する。
【０１８１】
その後、ジェスチャ認識処理部２４が、ジェスチャ認識を終了し、ジェスチャ入力処理が終了する。
【０１８２】
（変形例）
以上では、ジェスチャ主体Ｕの位置に応じて制御対象機器に制御信号を出力する構成について説明したが、これに限られない。ジェスチャ主体Ｕの位置に関係なく、制御対象機器がジェスチャ入力により操作される順番が予め定義された構成であっても構わない。
【０１８３】
例えば、室内における１番目のジェスチャ認識が、照明７Ｂに対応づけられており、２番目のジェスチャ認識が、エアーコンディショナ７Ｃに対応づけられており、３番目のジェスチャ認識が、テレビジョン受像機７Ａに対応付けられていてもよい。
【０１８４】
上記構成によれば、まず、室内に入室してきたジェスチャ主体Ｕの最初のジェスチャ認識により、照明７Ｂが点灯される。以下、２番目および３番目のジェスチャ認識により、それぞれ、エアーコンディショナ７Ｃおよびテレビジョン受像機７Ａの電源がＯＮにされる。
【０１８５】
このため、予め制御対象機器が操作される順序が決まっている場合における便宜を図ることができる。
〔付記事項〕
ジェスチャ入力装置１の各ブロック、特に制御部２０は、ハードウェアロジックによって構成してもよいし、次のようにＣＰＵを用いてソフトウェアによって実現してもよい。
【０１８６】
すなわち、ジェスチャ入力装置１は、各機能を実現する制御プログラムの命令を実行するＣＰＵ（central processing unit）、上記プログラムを格納したＲＯＭ（read only memory）、上記プログラムを展開するＲＡＭ（random access memory）、上記プログラム
および各種データを格納するメモリ等の記憶装置（記録媒体）などを備えている。そして、本発明の目的は、上述した機能を実現するソフトウェアであるジェスチャ入力装置１の制御プログラムのプログラムコード（実行形式プログラム、中間コードプログラム、ソースプログラム）をコンピュータで読み取り可能に記録した記録媒体を、上記ジェスチャ入力装置１に供給し、そのコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に記録されているプログラムコードを読み出し実行することによっても、達成可能である。
【０１８７】
上記記録媒体としては、例えば、磁気テープやカセットテープ等のテープ系、フロッピー（登録商標）ディスク／ハードディスク等の磁気ディスクやＣＤ−ＲＯＭ／ＭＯ／ＭＤ／ＤＶＤ／ＣＤ−Ｒ等の光ディスクを含むディスク系、ＩＣカード（メモリカードを含む）／光カード等のカード系、あるいはマスクＲＯＭ／ＥＰＲＯＭ／ＥＥＰＲＯＭ／フラッシュＲＯＭ等の半導体メモリ系などを用いることができる。
【０１８８】
また、ジェスチャ入力装置１を通信ネットワークと接続可能に構成し、上記プログラムコードを通信ネットワークを介して供給してもよい。この通信ネットワークとしては、特に限定されず、例えば、インターネット、イントラネット、エキストラネット、ＬＡＮ、ＩＳＤＮ、ＶＡＮ、ＣＡＴＶ通信網、仮想専用網（virtual private network）、電話回
線網、移動体通信網、衛星通信網等が利用可能である。また、通信ネットワークを構成する伝送媒体としては、特に限定されず、例えば、ＩＥＥＥ１３９４、ＵＳＢ、電力線搬送、ケーブルＴＶ回線、電話線、ＡＤＳＬ回線等の有線でも、ＩｒＤＡやリモコンのような赤外線、Ｂｌｕｅｔｏｏｔｈ（登録商標）、８０２．１１無線、ＨＤＲ、携帯電話網、衛星回線、地上波デジタル網等の無線でも利用可能である。なお、本発明は、上記プログラ
ムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。
【０１８９】
本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
【産業上の利用可能性】
【０１９０】
本発明は、ジェスチャ認識により操作入力を行うためのジェスチャ入力装置に利用することができる。
【符号の説明】
【０１９１】
１      ジェスチャ入力装置
１０    記憶部
１１    センサ判定基準データ
１２    ジェスチャ認識データ
１３    制御信号テーブル
２０    制御部
２１    センサ情報取得部
２２    センサ感知部（センサ検知手段）
２３    カメラ映像取得部
２４    ジェスチャ認識処理部（ジェスチャ認識手段）
２５    機器制御指示部
３      センサ
３１    電波感知センサ
３２    開閉センサ
３４    開閉センサ
３Ａ    近距離無線装置
３Ｂ    自動ドア
３Ｃ    人感センサ
３Ｄ    開き戸
５    カメラ
７    制御対象機器
７１    動作制御部
７２    制御内容テーブル
７Ａ    テレビジョン受像機（電子機器）
７Ｂ    照明
７Ｃ    エアーコンディショナ（電子機器）
８    電源部
９    接続部
１００    携帯電話機（携帯通信端末）
１０１    電波発信部
ＳＹＳ１、ＳＹＳ２、ＳＹＳ３、ＳＹＳ３Ａ、ＳＹＳ４、ＳＹＳ５    ジェスチャ入力システム
【図１】
2013196047.tif 000003
【図２】
2013196047.tif 000004
【図３】
2013196047.tif 000005
【図４】
2013196047.tif 000006
【図５】
2013196047.tif 000007
【図６】
2013196047.tif 000008
【図７】
2013196047.tif 000009
【図８】
2013196047.tif 000010
【図９】
2013196047.tif 000011
【図１０】
2013196047.tif 000012
【図１１】
2013196047.tif 000013
【図１２】
2013196047.tif 000014
【図１３】
2013196047.tif 000015