(57)【要約】  ジェスチャ入力操作処理装置は、操作者による接触位置を検出するタッチパネルと、操作者の身体形状に係る画像データを取り込む身体形状入力部と、画像データから操作者の非接触ジェスチャによる入力操作を認識し、タッチパネルに対する操作者によるジェスチャ入力を認識し、身体形状入力部からのデータとタッチパネルからのデータを関連付ける制御部と、制御部が行った関連付けとジェスチャの種類を記憶する記憶部とを備える。
2013136776.tif 000002
【特許請求の範囲】
【請求項１】
画像を表示する画像表示部に重ねて設けられ、操作者が接触した位置を検出するためのタッチパネルと、
操作者がジェスチャ入力操作を行う際の当該操作者の身体形状を画像データとして取り込む身体形状入力部と、
前記身体形状入力部が取り込んだ画像データから操作者の非接触ジェスチャによる入力操作を認識し、前記タッチパネルに対する操作者によるジェスチャ入力を認識し、前記身体形状入力部からの入力データと前記タッチパネルからの入力データを関連付ける制御部と、
前記制御部によって行われた前記身体形状入力部からの入力データと前記タッチパネルからの入力データの関連付けを記憶し、ジェスチャの種類を記憶する記憶部と、
を備えたジェスチャ入力操作処理装置。
【請求項２】
請求項１に記載のジェスチャ入力操作処理装置であって、
前記制御部は、前記操作者の特定の身体形状を特定のジェスチャ入力と関連付けて、非接触ジェスチャ開始条件として前記記憶部に格納するジェスチャ入力操作処理装置。
【請求項３】
請求項１又は２に記載のジェスチャ入力操作処理装置であって、
前記身体形状入力部が、前記タッチパネル、前記制御部及び前記記憶部の少なくともいずれか一つと一体に構成されたジェスチャ入力操作処理装置。
【請求項４】
請求項１又は２に記載のジェスチャ入力操作処理装置であって、
前記身体形状入力部が、前記タッチパネル、前記制御部及び前記記憶部の少なくともいずれか一つと別体に構成されたジェスチャ入力操作処理装置。
【請求項５】
請求項２に記載のジェスチャ入力操作処理装置であって、
前記非接触ジェスチャ開始条件は、操作者の身体形状が示す指の数を含むジェスチャ入力操作処理装置。
【請求項６】
請求項５に記載のジェスチャ入力操作処理装置であって、
前記非接触ジェスチャ開始条件は、操作者の手の形状を含むジェスチャ入力操作処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ジェスチャ入力操作処理装置に関する。
【背景技術】
【０００２】
近年の自動車には、画面上に道路地図と共に現在地を表示して、現在地から目的地までの経路の案内を行うナビゲーション装置が搭載されている。ナビゲーション装置には、例えば特許文献１で開示されているように、画像表示部に重ねてタッチパネルが入力手段として設けられている。また、特許文献２に記載された装置は、カメラの撮影画像からパターンマッチングにより操作者の手形状を取得し、手形状であることを認識したうえで操作者の操作を許可した後、操作者の手形状や手の位置の時間変化パターンであるジェスチャを検出することで操作者の入力を解釈する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】日本国特開２００６−２８５５９８号公報
【特許文献２】日本国特開２０００−６６８７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
車載装置の場合、画像表示部（ディスプレイ）は運転席から見やすい位置に設けられる。特に最近では、運転中の視線移動を軽減するなどの目的のために、例えばインストルメントパネル上の運転席と助手席との中間にディスプレイが設けられ、車載装置が運転席から遠方に配置される傾向がある。このため、ディスプレイに重ねられたタッチパネルを操作するには、大きく手を伸ばしたり、上体を斜め前方に傾けたりする必要がある。この状況は、特にタッチパネルによるジェスチャ入力操作時に操作者の負担が大きい。【０００５】
また、特許文献２に記載された装置において操作者がジェスチャ入力操作を行うためには、操作者の手をカメラで撮影し、撮影した手の形状又はジェスチャをパターンマッチングによって検知する必要がある。このため、手の形状又はジェスチャのデータなどをあらかじめ記憶しておく必要があった。また、手の形状又はジェスチャに操作者の癖があらわれる場合には、記憶されたデータに合致しない。この場合、操作者のジェスチャを認識できない。【０００６】
本発明の目的は、操作者の手形状又は動作に操作者特有の特徴又は癖があってもジェスチャ入力操作を確実に認識可能なジェスチャ入力操作処理装置を提供することである。
【課題を解決するための手段】
【０００７】
本発明のジェスチャ入力操作処理装置は、画像を表示する画像表示部に重ねて設けられ、操作者が接触した位置を検出するためのタッチパネルと、操作者がジェスチャ入力操作を行う際の当該操作者の身体形状を画像データとして取り込む身体形状入力部と、前記身体形状入力部が取り込んだ画像データから操作者の非接触ジェスチャによる入力操作を認識し、前記タッチパネルに対する操作者によるジェスチャ入力を認識し、前記身体形状入力部からの入力データと前記タッチパネルからの入力データを関連付ける制御部と、前記制御部によって行われた前記身体形状入力部からの入力データと前記タッチパネルからの入力データの関連付けを記憶し、ジェスチャの種類を記憶する記憶部と、を備えた構成を有する。
【発明の効果】
【０００８】
本発明によれば、操作者の手形状又は動作に操作者特有の特徴又は癖があってもジェスチャ入力操作を確実に認識できる。
【図面の簡単な説明】
【０００９】
【図１】本発明の一実施の形態におけるジェスチャ入力操作が可能な車載装置のブロック図
【図２】車載装置１０の車内における設置例を示す図
【図３】車輛の運転席から操作者が手を伸ばし、車載装置１０のタッチパネル１８に５本の指でジェスチャ入力をしているときの状況を示す図
【図４】操作者によるタッチパネル１８に対するジェスチャ入力の一例を示す図
【図５】操作者が肘掛５０に腕を置いた状態で、車載装置１０の身体形状入力部４０に対して非接触ジェスチャ入力をしているときの状況を示す図
【図６】操作者による身体形状入力部４０に対する非接触ジェスチャ入力の一例を示す図
【図７】車載装置１０がどこからの入力状態に設定されるか説明するためのフローチャート
【図８】タッチパネル１８からの入力が可能な状態での車載装置１０の動作を説明するためのフローチャート
【図９】身体形状入力部４０からの入力が可能な状態での車載装置１０の動作を説明するためのフローチャート
【発明を実施するための形態】
【００１０】
以下、本発明の実施の形態におけるジェスチャ入力操作が可能な車載装置について、図面を用いて説明する。ただし、以下の説明では、ジェスチャ入力操作が可能な車載装置として、車載用のナビゲーション装置を例示する。以下、このナビゲーション装置を単に「車載装置」と呼ぶ。
【００１１】
図１は、本発明の一実施の形態におけるジェスチャ入力操作が可能な車載装置のブロック図である。本実施の形態における車載装置１０は、経路案内などを行うナビゲーション機能、及び、例えばＤＶＤ（Digital Versatile Disc）などの記録媒体に記録された音響映像の再生を行うオーディオビジュアル再生機能などを備える。
【００１２】
図１に示すように、車載装置１０は、記憶部１１と、外部入力部１２と、スピーカ１３と、画像表示部１７と、タッチパネル１８と、制御部２０と、ＤＶＤ／ＣＤドライブ２２と、ＧＰＳ受信機２３と、車速センサ２４と、ジャイロスコープ（以下、単に「ジャイロ」という）２５と、身体形状入力部４０とを備える。ただし、ＤＶＤ／ＣＤドライブ２２、ＧＰＳ受信機２３、車速センサ２４、ジャイロ２５、スピーカ１３及び身体形状入力部４０は、車載装置１０の内部に一体に設けられている必要はなく、車載装置１０から電気的に脱着可能な構成としても良い。また、画像表示部１７とタッチパネル１８は、一体構造であっても良い。
【００１３】
図２は、車載装置１０の車内における設置例を示す図である。車載装置１０は、車内のセンターコンソールに取り付けられ、操作者がタッチパネル１８を介した入力操作を行う場合、操作者は腕を伸ばして入力操作を行う。
【００１４】
以下、車載装置１０の各構成要素について説明する。
【００１５】
記憶部１１は、ハードディスクドライブ（ＨＤＤ）、メモリカード、又は車載装置１０内部の図示しないプリント基板上に実装されたフラッシュメモリなどである。記憶部１１は、単一種類の媒体による構成でも、複数種類の媒体を併用した構成であっても良い。
【００１６】
記憶部１１には、画像表示部１７に表示するアイコンに係るデータ（アイコンの大きさ、表示領域又はレイアウト）、車載装置１０の動作を制御するために必要な基本プログラム、画像表示の制御のためのプログラム、ナビゲーション機能の実行若しくはオーディオビジュアル再生機能の実行に用いられるアプリケーションソフトのプログラム、ナビゲーション機能で利用する地図のデータベース、又は電話番号などのデータベースなどの各種データが格納される。また、記憶部１１には、身体形状入力部４０から入力された手の形状又は指の本数などのデータ、又はタッチパネル１８からの入力データと身体形状入力部４０からの入力データとが関連付けされたデータが格納される。さらに、記憶部１１には、一般的な記憶部と同様に、各種プログラム又は各種データ等を展開する領域及び画像が展開される領域などが設けられている。
【００１７】
外部入力部１２は、車載装置１０に接続可能な外部機器から出力された信号を入力するために設けられている。外部機器から出力された信号は、例えば、ＤＶＤ又はＣＤなどのメディアを再生して得られる映像信号及び／又は音声信号であったり、デジタルテレビなどからの映像信号及び音声信号である。
【００１８】
スピーカ１３は、車載装置１０で処理された音声を出力する。当該音声は、例えば、車載装置１０への操作を車載装置１０が受け付けたことを操作者へ伝えるための効果音、外部機器から外部入力部１２に入力された音声若しくは音楽、又はＤＶＤ／ＣＤドライブ２２で再生された音声若しくは音楽などである。
【００１９】
画像表示部１７は、映像又は画像を表示する一般的な液晶ディスプレイである。画像表示部１７に表示される映像又は画像は、例えば、記憶部１１が記憶するオープニング画面若しくはメニュー画面、又は外部機器から外部入力部１２に入力された映像若しくは静止画などである。
【００２０】
画像表示部１７は、偏光フィルタ、液晶、ガラス基板及びカラーフィルタなどを含む液晶パネルと、冷陰極管又はＬＥＤ及び導光板などの液晶パネルの光源に用いられるバックライトユニットと、画像表示のための各種信号を処理するＩＣなどの電気部品と、液晶パネル、バックライトユニット又は電子部品を駆動するための電源ユニットとを有する。なお、電源ユニットは、画像表示部１７と別体に構成されていても良い。
【００２１】
タッチパネル１８は、画像表示部１７の内部又は表面に設けられた、導電層を有する透過性のパネルである。タッチパネル１８に対する入力操作は、操作者が画像表示部１７に表示されたアイコンなどの該当箇所を手又は指で触れることによって行われる。該当箇所に対する接触操作によって、タッチパネル１８では静電容量の変化が生じ、その信号が制御部２０へ出力される。なお、画像表示部１７に表示された該当箇所とは、アイコン又は地図上の任意の位置である。また、接触操作には、タッチパネル１８に触れたまま指を所定の速さで動かしたり、タッチパネル１８に手又は指を近接する行為も含まれる。
【００２２】
制御部２０は、マイクロプロセッサとマイクロプロセッサを動作させるための電気回路とを含む。制御部２０は、記憶部１１が記憶する制御プログラムを実行して、各種処理を行う。また、制御部２０は、制御部２０が処理して得られた映像又は画像を画像表示部１７に表示する。また、制御部２０は、タッチパネル１８からの信号に基づいて、操作者の手又は指が接触した位置を算出する。制御部２０は、算出した位置に対応する情報を記憶部１１が記憶する情報と照合し、アイコン、メニュー若しくはスイッチなどに定義されている機能又はジェスチャに定義されている機能を実行する。また、制御部２０は、身体形状入力部４０からの入力データに基づいて身体形状を抽出したり、抽出したデータと記憶部１１が記憶するデータ又はタッチパネル１８からの入力データとを関連付ける。なお、制御部２０が含むマイクロプロセッサは一つでも良いし、ＤＶＤ再生やオーディオ再生などの機能ごとに複数のマイクロプロセッサを含んでも良い。
【００２３】
ＤＶＤ／ＣＤドライブ２２は、音声ソース（又は音声データ）及び／又は映像ソース（又は映像データ）が保存されたディスクを再生する。
【００２４】
ＧＰＳ受信機２３は、ＧＰＳ衛星からの信号を受信する。
【００２５】
車速センサ２４は、車載装置１０が搭載された車輌の走行速度を検出する。
【００２６】
ジャイロ２５は、車輌の回転、上下方向の変化量又は加速度を検出する。
【００２７】
身体形状入力部４０は、操作者がジェスチャ入力操作を行う際の当該操作者の手又は指などの身体形状を撮像するためのカメラである。身体形状入力部４０は、操作者が例えば図２に示す肘掛５０に腕を置いた状態、すなわち操作者の負担の少ない状態で、この操作者の手又は指を撮像する。身体形状入力部４０として用いられるカメラは、可視光カメラ、近赤外カメラ、赤外線カメラ又は超音波カメラである。身体形状入力部４０によって撮像された画像のデータは制御部２０に入力される。
【００２８】
なお、身体形状入力部４０は、車載装置１０と電気的に接続されていれば別体として構成されても良い。別体とした場合、身体形状入力部４０を例えばステアリングと窓の間に設置するなど、運転席と助手席の間の肘掛５０に腕を置いた状態以外の楽な姿勢での撮像が可能である。
【００２９】
以下、車載装置１０における入力操作について説明する。タッチパネル１８を介した入力操作は、押下入力操作又はジェスチャ入力操作によって行われる。押下入力操作とは、画像表示部１７に表示された釦やアイコンを操作者が指で触れたりドラッグする操作である。押下入力操作が行われると、制御部２０は、タッチパネル１８への接触位置に応じた入力操作を決定する。ジェスチャ入力操作とは、画像表示部１７に表示された画面とは直接関係はなく、操作者がタッチパネル１８に複数の指で触れて横に動かしたり回転スイッチを回すような動きといったジェスチャによる操作である。
【００３０】
なお、本実施形態において、「ジェスチャ」とは、複数の指を上下左右など一方向に動かす行為、又は複数の指を時計回り若しくは反時計回りに動かす行為といった簡単な動作である。また、「ジェスチャ入力」とは、操作者のジェスチャによる入力の動作自体を意味する。「ジェスチャコマンド」とは、ジェスチャ入力により特定された機能を実行するためのコマンドを意味する。
【００３１】
押下入力操作の場合、操作者は画像表示部１７に表示された釦やアイコンの位置を押下するだけである。一方、ジェスチャ入力操作の場合、操作者はタッチパネル１８に向けて大きく手を伸ばす必要があるため、操作者の負担になる。ジェスチャ入力操作では、タッチパネル１８への接触位置は重要ではなく、タッチパネル１８に接触した指の本数と動きが重要である。
【００３２】
本実施形態では、タッチパネル１８に操作者が複数の指で触れると、制御部２０は、複数の指で行われる特定のジェスチャ入力が開始されることを認識する。このとき、制御部２０は、身体形状入力部４０から入力されたデータより抽出した手形状（又は指形状）と指の本数を、タッチパネル１８を介した入力によって特定されたジェスチャ入力に関連付ける。また、制御部２０は、身体形状入力部４０が抽出した複数の指の動作のデータを、記憶部１１が記憶する特定のジェスチャ入力操作ためのジェスチャコマンドと関連付けて、記憶部１１に格納する。
【００３３】
図３は、車輌の運転席から操作者が手を伸ばし、車載装置１０のタッチパネル１８に５本の指でジェスチャ入力をしているときの状況を示す図である。また、図４は、操作者によるタッチパネル１８に対するジェスチャ入力の一例を示す図である。図４には、５本の指がタッチパネル１８に触れた場所７０と、これら５本の指によるジェスチャ入力７１が矢印で示されている。
【００３４】
図５は、操作者が肘掛５０に腕を置いた状態で、車載装置１０の身体形状入力部４０に対して非接触ジェスチャ入力をしているときの状況を示す図である。また、図６は、操作者による身体形状入力部４０に対する非接触ジェスチャ入力の一例を示す図である。図６に示すように、制御部２０は、身体形状入力部４０から入力された画像４１より、５本の指の位置８０を含む操作者の手の形状６１と５本の指を検出する。このとき操作者が肘掛５０に腕を置いた状態であれば、身体形状入力部４０からの入力データは一定時間連続して安定する。制御部２０が操作者の手の形状６１と５本の指を検出して、当該検出結果が非接触ジェスチャ開始条件に一致すると、制御部２０は、操作者の各指の位置の時間変移８１を検出する。
【００３５】
上記示したタッチパネル１８に対するジェスチャ入力と、非接触ジェスチャ開始条件と、身体形状入力部４０に対する非接触ジェスチャ入力時の時間変移８１とは関連付けられている。なお、図５に示すように、身体形状入力部４０は、操作者の手を指先側から撮像する位置に設けられている。このため、タッチパネル１８に対するジェスチャ入力の方向と、身体形状入力部４０に対する非接触ジェスチャ入力の方向は、上下左右が反転する。
【００３６】
なお、身体形状入力部４０は必ずしも上記説明した位置に設置されるとは限らない。このため、制御部２０は、身体形状入力部４０から入力されたデータに対して視点変換処理を行っても良い。視点変換処理を行った場合、あたかも身体形状入力部４０が上記説明した位置にあるようなデータに変換されるため、制御部２０は、操作者の手形状や指の本数の抽出が容易になり、ジェスチャ入力エラーが低減される。
【００３７】
また、上記説明した非接触ジェスチャ開始条件は、身体形状入力部４０からの入力データより抽出した手形状と指の数（単数又は複数）としてもよい。非接触ジェスチャ開始条件を身体形状入力部４０からの入力データから抽出した手形状と指の数とした場合、指の数が同じあれば手形状の異なる非接触ジェスチャを判別できる。このため、異なる複数本の指でのジェスチャ毎に非接触ジェスチャ開始条件を記憶できる。例えば、３本指のジェスチャと５本指のジェスチャとがそれぞれ異なる非接触ジェスチャに関連付けされる。その結果、操作者の操作性が向上する。
【００３８】
以下、車載装置１０の動作について、図７〜図９を参照して説明する。
【００３９】
操作者が初めて車載装置１０を操作する場合、又は操作者が入力していない状態、すなわちタッチパネル１８に何も接触していない状態かつ身体形状入力部４０から何も入力されていない状態を開始のタイミングとする。図７に示すように、制御部２０は、身体形状入力部４０からの入力が可能か否か判別する（ステップＳ１０）。このとき、制御部２０は、操作者が車載装置１０を初めて使用する場合、又は以前にタッチパネル１８による入力操作しか行っておらず、身体形状入力部４０による入力操作を行っていない場合、身体形状入力部４０から入力されたデータと記憶部１１が記憶するジェスチャコマンドとが関連付けられていないため、制御部２０は、身体形状入力部４０からの入力は可能ではないと判別する（ステップＳ１０：ＮＯ）。一方、身体形状入力部４０から入力されたデータと、記憶部１１が記憶するジェスチャコマンドとが関連付けられている場合、制御部２０は、身体形状入力部４０からの入力は可能と判別する（ステップＳ１０：ＹＥＳ）。
【００４０】
ステップＳ１０で身体形状入力部４０からの入力が可能ではないと制御部２０が判別した場合（ステップＳ１０：ＮＯ）、制御部２０は、車載装置１０をタッチパネル１８からの入力のみ可能な状態に設定する（ステップＳ１１）。ステップＳ１０で身体形状入力部４０からの入力が可能ではないと制御部２０が判別した場合（ステップＳ１０：ＹＥＳ）、制御部２０は、車載装置１０をタッチパネル１８からの入力と身体形状入力部４０からの入力との２通りの入力が可能な状態に設定する（ステップＳ１２）。
【００４１】
次に、タッチパネル１８からの入力が可能な状態での車載装置１０の動作について、図８を参照して説明する。なお、タッチパネル１８に何も接触しておらず、車載装置１０への入力が行われていない状態を開始のタイミングとする。
【００４２】
操作者がタッチパネル１８に接触することにより入力操作を行うと、制御部２０は、操作者のタッチパネル１８への接触による入力数を検出し、複数入力か単数入力かを判別する（ステップＳ２０）。操作者がタッチパネル１８に複数の指で接触した場合、制御部２０は、入力数は複数と判別し（ステップＳ２０：ＹＥＳ）、複数の指で特定されるジェスチャ入力が開始されたと認識する（ステップＳ２１）。
【００４３】
次に、制御部２０は、タッチパネル１８への入力が未検出になるか継続するかを判別する（ステップＳ２２）。例えば、操作者がタッチパネル１８に複数の指で接触した後、当該接触をやめ、指の形を保ったまま肘掛５０に腕を置いた状態など負担のかからない体勢で身体形状入力部４０への入力を行った場合、制御部２０はタッチパネル１８への入力が未検出と判別する（ステップＳ２２：ＹＥＳ）。
【００４４】
次に、制御部２０は、身体形状入力部４０から入力されたデータより手形状（又は指形状）と指の本数を抽出する（ステップＳ２３）。次に、制御部２０は、抽出したデータが安定しているかを判別する（ステップＳ２４）。例えば、操作者の腕が安定した状態の場合、身体形状入力部４０からの入力データより抽出した手形状（又は指形状）と指の本数は一定時間連続する。このとき、制御部２０は、身体形状入力部４０の入力データより抽出したデータは安定していると判別する（ステップＳ２４：ＹＥＳ）。一方、抽出したデータが安定していないと制御部２０が判別した際（ステップＳ２４：ＮＯ）には、ステップＳ２３に戻る。
【００４５】
ステップＳ２４でデータが安定と判別した後、制御部２０は、身体形状入力部４０からの入力が有効か無効かを判別する（ステップＳ２５）。例えば、身体形状入力部４０から入力されたデータより抽出した指の本数が複数の場合、制御部２０は、身体形状入力部４０からの入力は有効と判別する（ステップＳ２５：ＹＥＳ）。次に、制御部２０は、ステップＳ２３で抽出した手形状（又は指形状）と指の本数を、タッチパネル１８に対する特定のジェスチャ入力と関連付け、非接触ジェスチャ開始条件として記憶部１１に格納する（ステップＳ２６）。
【００４６】
次に、制御部２０は、身体形状入力部４０からの入力データより抽出した操作者の指の動き（時間変化）のデータと、タッチパネル１８に対する特定のジェスチャ入力により実行可能なジェスチャコマンドとを関連付け、非接触ジェスチャとして記憶部１１に格納し、ジェスチャコマンドを実行する（ステップＳ２７）。次に、制御部２０は、車載装置１０を、タッチパネル１８からの入力と身体形状入力部４０からの入力の２通りの入力が可能な状態に設定する（ステップＳ２８）。
【００４７】
一方、ステップＳ２０において、操作者がタッチパネル１８に接触することにより入力操作を行った際の入力数が単数であると制御部２０が判別した際（ステップＳ２０：ＮＯ）には、ステップＳ３０に進む。また、ステップＳ２２において、タッチパネル１８への入力が継続すると制御部２０が判別した際（ステップＳ２２：ＮＯ）も、ステップＳ３０に進む。ステップＳ３０では、制御部２０は、接触された場所に割り振られたジェスチャコマンドの実行など、一般的なタッチパネル１８に対する複数の指によるジェスチャ入力として処理する。ステップＳ３０の後はステップＳ２０に戻る。
【００４８】
また、ステップＳ２５において、身体形状入力部４０からの入力が無効と判別した際（ステップＳ２５：ＮＯ）には、ステップＳ３１に進む。ステップＳ３１では、制御部２０は、画像表示部に１８にエラーメッセージを表示する。ステップＳ３１の後はステップＳ２０に戻る。
【００４９】
次に、身体形状入力部４０からの入力が可能な状態での車載装置１０の動作について、図９を参照して説明する。なお、身体形状入力部４０から何も入力されていない状態を開始のタイミングとする。
【００５０】
制御部２０は、身体形状入力部４０から入力されたデータより手形状（又は指形状）と指の本数を抽出する（ステップＳ４０）。次に、制御部２０は、抽出したデータが安定しているかを判別する（ステップＳ４１）。例えば、操作者の腕が安定した状態の場合、身体形状入力部４０からの入力データより抽出した手形状（又は指形状）と指の本数は一定時間連続する。このとき、制御部２０は、身体形状入力部４０の入力データより抽出したデータは安定していると判別する（ステップＳ４１：ＹＥＳ）。一方、抽出したデータが安定していないと制御部２０が判別した際（ステップＳ４１：ＮＯ）には、ステップＳ４０に戻る。
【００５１】
ステップＳ４１でデータが安定と判別した後、制御部２０は、ステップＳ４０で抽出した手形状（又は指形状）と指の本数が、記憶部１１が記憶する非接触ジェスチャ開始条件に一致するか否かを判別する（ステップＳ４２）。抽出した手形状（又は指形状）と指の本数が非接触ジェスチャ開始条件に一致すると判別した場合（ステップＳ４２：ＹＥＳ）、制御部２０は、非接触ジェスチャ開始条件に関連付けられた特定のジェスチャ入力が開始されたと認識する（ステップＳ４３）。一方、抽出した手形状（又は指形状）と指の本数が非接触ジェスチャ開始条件に一致しないと判別した場合（ステップＳ４２：ＮＯ）には、ステップＳ４０に戻る。
【００５２】
ステップＳ４３の後、制御部２０は、身体形状入力部４０からの入力データより抽出した操作者の指の動き（時間変化）のデータと、非接触ジェスチャとして記憶部１１が記憶する操作者の指の動きの時間変化のデータとが一致するか否かを判別する（ステップＳ４４）。これらデータが一致すると判別した場合（ステップＳ４４：ＹＥＳ）、制御部２０は、非接触ジェスチャに関連付けられた特定のジェスチャ入力により実行可能なジェスチャコマンドを実行する（ステップＳ４５）。一方、上記データが一致しないと判別した場合（ステップＳ４４：ＮＯ）には、ステップＳ４０に戻る。ステップＳ４５でジェスチャコマンドを実行後、制御部２０は、車載装置１０を、タッチパネル１８からの入力と身体形状入力部４０からの入力の２通りの入力が可能な状態に設定する（ステップＳ４６）。
【００５３】
以上説明したように、本実施形態の車載装置１０は、操作者のジェスチャ入力操作に応じた身体形状入力部４０からの入力を、タッチパネル１８に対するジェスチャ入力に関連付けている。このため、操作者の手形状（又は指形状）又は動作などに操作者特有の特徴又は癖があっても、車載装置１０は、操作者によるジェスチャ入力操作を確実に認識することができる。また、本実施形態の車載装置１０は、操作者の様々な手形状（又は指形状）又は動作の特徴又は癖をそれぞれ考慮した多数のデータを有していなくても、操作者によるジェスチャ入力操作を確実に認識できる。さらに、本実施形態のジェスチャ入力操作は、操作者が大きく手を伸ばしたり上体をおおきく斜め前方に傾けたりする必要がない楽な状態で行うことができる。
【００５４】
本発明を詳細にまた特定の実施態様を参照して説明したが、本発明の精神と範囲を逸脱することなく様々な変更や修正を加えることができることは当業者にとって明らかである。
【００５５】
本出願は、2012年3月15日出願の日本特許出願（特願2012-059286）に基づくものであり、その内容はここに参照として取り込まれる。
【産業上の利用可能性】
【００５６】
本発明のジェスチャ入力操作処理装置は、操作者の手形状又は動作に操作者特有の特徴又は癖があってもジェスチャ入力操作ができるナビゲーション装置などの車載装置として有用である。
【符号の説明】
【００５７】
１０  車載装置
１１  記憶部
１２  外部入力部
１３  スピーカ
１７  画像表示部
１８  タッチパネル
２０  制御部
２２  ＤＶＤ／ＣＤドライブ
２３  ＧＰＳ受信機
２４  車速センサ
２５  ジャイロスコープ
４０  身体形状入力部
４１  身体形状入力部からの画像データ
５０  肘掛
６０  操作者の手
６１  身体形状入力部から抽出した操作者の手の形状
７０  指がタッチパネルに触れた場所
７１  ジェスチャ入力
８０  身体形状入力部より抽出した指の位置
８１  身体形状入力部より抽出した指の位置の時間変移
【図１】
2013136776.tif 000003
【図２】
2013136776.tif 000004
【図３】
2013136776.tif 000005
【図４】
2013136776.tif 000006
【図５】
2013136776.tif 000007
【図６】
2013136776.tif 000008
【図７】
2013136776.tif 000009
【図８】
2013136776.tif 000010
【図９】
2013136776.tif 000011
【国際調査報告】
2013136776.tif 000012
2013136776.tif 000013
2013136776.tif 000014
2013136776.tif 000015