(57)【要約】【課題】ユーザがキーに接触したことを確実に検知して、誤動作や誤入力を防止する仮想キー入力装置を提供する。【解決手段】本仮想キー入力装置は、キー表示手段２０と指定キー検出手段３０を有し、前面にキーイメージ４０が表示される投射面５０が配置される。指定キー検出手段３０は２次元画像センサを備えたステレオカメラを有している。このステレオカメラを用いて、ステレオカメラからキーイメージまでの距離と、ステレオカメラからユーザの指までの距離を求め、両者の距離が一致したことにより、キー入力を検知する。【選択図】図１
2014179032.tif 000002
【特許請求の範囲】
【請求項１】
表示されているキーイメージがユーザによって指定されたことを検出する指定キー検出手段を有し、前記指定キー検出手段で検出されたキーイメージに対応する情報を入力情報とする仮想キー入力装置において、
前記指定キー検出手段は、２次元画像センサを備えたステレオカメラを有し、前記ステレオカメラで前記キーイメージとキーを指定する物体を撮影して得られる画像により、前記ステレオカメラから前記キーイメージまでの距離と、前記ステレオカメラからキーを指定する物体までの距離を求め、両者の距離を比較することにより情報の入力を検知することを特徴とする仮想キー入力装置。
【請求項２】
キーイメージを表示するキー表示手段を更に有することを特徴とする請求項１に記載の仮想キー入力装置。
【請求項３】
前記距離の比較に加えて、前記ステレオカメラで撮影して得られる画像により、前記キーを指定する物体の変形あるいはキーイメージが表示される対象物の変形を検知することで、情報の入力を検知することを特徴とする請求項１又は２に記載の仮想キー入力装置。
【請求項４】
前記ステレオカメラで撮影された前記ステレオカメラからキーイメージまでの距離と等しい距離にある物体は、キーを指定する物体とはみなさず、情報を入力しないことを特徴とする請求項１乃至３のいずれか１項に記載の仮想キー入力装置。
【請求項５】
前記指定キー検出手段によってキー入力が確認された場合、前記キー表示手段により確認前とは異なるキーイメージが表示されることを特徴とする請求項２乃至４のいずれか１項に記載の仮想キー入力装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は仮想キー入力装置に関する。
【背景技術】
【０００２】
文字や数字等を情報端末に入力する装置としてキーボードやテンキーなどがある。さらに情報端末装置の画面上にキーを表示してそれに指などが触れるとその接触を検知して入力を行うことができるタッチパネルという入力装置もある。
【０００３】
ところで近年、プロジェクタ等を用いてキーボードを平面上に投影して、平面上に投影されたキーボードに触れることで入力を行うことができる仮想キーボード（バーチャルキーボード）と言う入力装置が提案されている（例えば、特許文献１）。仮想キーボードは従来の入力装置に比べて物理的なキーを必要としないため、情報端末装置を小型化できるというメリットがあり、プロジェクタ等で投影した場所を即、入力装置とすることができる。
【０００４】
ここで、特許文献１に記載の仮想キーボードは、図１６に示すように、キーボードイメージを投影するための赤色半導体レーザモジュール３０１０及びその発光方向に設けられたホログラフィック光学素子３０２０、並びに、キーの検知を行う赤外（不可視）半導体レーザ投影モジュール３０３０、及びＣＭＯＳカメラモジュール３０４０で構成されている。
【０００５】
赤色半導体レーザモジュール３０１０から発せられた赤色レーザ光をホログラフィック光学素子３０２０に放射することによりレーザ光が回折されキーボードのイメージ３０５０を投影する。このユニットは単にキーボードのイメージ３０５０を投影するだけで、キーの検知には全く無関係である。
【０００６】
一方、外半導体レーザ投影モジュール３０３０は、人には見えない位置検知用赤外レーザを机などの投影面に平行して扇状に放射する。この赤外半導体レーザ投影モジュール３０３０で放射されるレーザの反射光（指に当たり反射した光）をＣＭＯＳカメラモジュール３０４０でとらえて、キーのイメージを接触した位置を検出する。
【発明の概要】
【発明が解決しようとする課題】
【０００７】
特許文献１に記載のような従来の仮想キー入力装置では、赤外レーザの反射光（指に当たり反射した光）をＣＭＯＳカメラでとらえて指が接触したキーを検出している。しかし、この方式では、指が確実にキーに接触したかしないか正確にわからないため、キーに接触しない場合でも、キーを検出したと見なされかねない問題がある。例えば、あるキーに近づけたが、間違いに気づいて離すような場合がある。このような場合にも、キー入力されてしまうことになる。
【０００８】
本発明は、ユーザが確実にキーに接触したことを検知し、誤動作、誤入力を防止する仮想キー入力装置を提供することにある。
【課題を解決するための手段】
【０００９】
本発明は、表示されているキーイメージがユーザによって指定されたことを検出する指定キー検出手段を有し、前記指定キー検出手段で検出されたキーイメージに対応する情報を入力情報とする仮想キー入力装置において、前記指定キー検出手段は、２次元画像センサを備えたステレオカメラを有し、前記ステレオカメラで前記キーイメージとキーを指定する物体を撮影して得られる画像により、前記ステレオカメラから前記キーイメージまでの距離と、前記ステレオカメラからキーを指定する物体までの距離を求め、両者の距離を比較することにより情報の入力を検知することを主要な特徴とする。
【発明の効果】
【００１０】
本発明の仮想キー入力装置によれば、ユーザがキーに接触したことを確実に検知することが可能であり、誤動作や誤入力を防止することができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の一実施形態に係る仮想キー入力装置の正面図である。
【図２】同仮想キー入力装置の側面図である。
【図３】本実施形態に係る仮想キー入力装置の制御系のブロック図である。
【図４】ステレオカメラの概略構成と視差検出原理を説明する図である。
【図５】ステレオカメラの具体的構成例を示す図である。
【図６】本実施形態に係る仮想キー入装置の動作を説明する図である。
【図７】ステレオカメラの輝度画像と距離画像の一例（指が接触していない場合）である。
【図８】ステレオカメラの輝度画像と距離画像の一例（指が接触している場合）である。
【図９】キーと指が映った輝度画像を示す図である。
【図１０】本実施形態に係る仮想キー入装置の処理フローチャート（その１）である。
【図１１】キー押し込みの検知を説明する図である。
【図１２】本実施形態に係る仮想キー入装置の処理フローチャート（その２）である。
【図１３】投射面に映った指の影を説明する図である。
【図１４】実際の指とその影を区別する方法を説明する図である。
【図１５】キー入力が確認された時の表示の変化を説明する図である。
【図１６】従来の仮想キーボードの一例を示す図である。
【発明を実施するための形態】
【００１２】
以下に図面を参照して、本発明に係る仮想キー入力装置の一実施形態について詳細に説明する。
【００１３】
図１は、本実施形態に係る仮想キー入力装置の正面図であり、図２は、該仮想キー入力装置の側面図である。図３は該仮想キー入力装置の制御系を示すブロック図である。
【００１４】
図１及び図２に示すように、本実施形態に係る仮想キー入力装置は、キー表示手段２０と指定キー検出手段３０を有し、その前面にキーイメージ４０が表示される投射面５０が配置される。ここで、投射面５０は任意形態でよく、例えばスクリーンや部屋の壁面やホワイトボードはもちろん、車のコンソール部、人体など、様々な対象物を投射面５０として利用することができる。この投射面５０は平面である必要はなく、曲面であっても構わない。この点は図１６に示した従来の仮想キーボードとは異なる点である。
【００１５】
キー表示手段２０はプロジェクタのような投射装置である。キー表示手段２０は、１つ以上のキーを投射面５０に表示させ、周囲の明るさに応じて投射する明るさを変えることができる。さらに、キー表示手段２０は、制御手段１０を通し、指定キー検出手段３０からの出力に応じてキーの表示を変化させることもできる。なお、キー表示手段２０は、当該仮想キー入力装置とは別構成とすることでもよい。
【００１６】
指定キー検出手段３０は、投射面５０に表示されたキーイメージ４０のうち、ユーザが指定したキーを検出する機能を有している。図３に示すように、指定キー検出手段３０によって、指定したキーが判別されると、制御手段１０によってキー表示手段２０が制御され、指定したキーの明るさが明るくなったり、点滅したり、表示する色が変わるなどして、ユーザがどのキーが指定したか瞬時にわかるようにすることができる。制御手段１０は、ＣＰＵやメモリなどからなり、該仮想キー入力装置の全体の制御を行うと共に、指定キー検出手段３０の一部として機能する。
【００１７】
指定キー検出手段３０は、２次元画像センサを備えたステレオカメラを有している。図４に、ステレオカメラの概略構成とステレオカメラによる距離計測の原理を示す。
【００１８】
ステレオカメラ１００は、複眼のカメラ１１０ａ，１１０ｂから構成され、カメラ１１０ａはレンズ１１１ａと撮像素子１１２ａを備え、カメラ１１０ｂはレンズ１１１ｂと撮像素子１１２ｂを備えている。これら複眼のカメラ（２次元画像センサ）を用いて所定の範囲を撮影する。撮影範囲は、少なくとも投射面５０に投射されるキーイメージ４０よりも広範囲を撮像できるように、レンズ１１１ａ，１１１ｂの画角が設計される。
【００１９】
ここで、ステレオカメラ１００が対象物までの距離を算出できる原理について説明する。ステレオカメラ１００から対象物１２０（ここではキーイメージ４０）までの距離をＬ、レンズ１１１ａ，１１１ｂの間隔（基線長）をＢ、レンズ１１１ａ，１１１ｂの焦点距離をｆとすると、視差Δは
Δ＝Ｂ×ｆ／Ｌ・・・（１）
と表される。
【００２０】
視差Δは対象物１２０が撮像素子１１２ａ，１１２ｂ上に写る位置１２１ａ，１２１ｂの差である。対象物１２０が近い場合はＬが小さくなるため、視差Δは大きくなり、対象物１２０が遠い場合はＬが大きくなるため、視差Δは小さくなる。したがって、視差Δを検出することで、ステレオカメラ１００から対象物１２０までの距離Ｌを算出することができる。
【００２１】
ここでステレオカメラ１００の構造の１例について詳細に説明する。図５は、ステレオカメラ１００の構造の一例を説明する図であり、図５（ａ）はステレオカメラ１００の概略断面図、図５（ｂ）は複数の撮像素子（本例では２つの撮像素子１１２ａ，１１２ｂ）が形成された撮像素子基板１１６の平面図である。
【００２２】
ステレオカメラ１００は、図５（ａ）に示すように、レンズアレイ１１３と、アパーチャアレイ１１５と、撮像素子基板１１６と、回路基板１１７と、筐体１１８とを備える。
【００２３】
筐体１１８は、その内部に撮像素子基板１１６および回路基板１１７を収容する。また、筐体１１８は、その前面側（図５（ａ）の上側）にて、レンズアレイ１１３およびアパーチャアレイ１１５を固定支持する。レンズアレイ１１３およびアパーチャアレイ１１５は、筐体１１８により、撮像素子基板１１６に対して位置決めされた状態で支持される。筐体１１８は、その前面側がキーイメージ４０に向くように配設される。
【００２４】
レンズアレイ１１３は、Ｙ方向に沿って配列される一対のレンズ１１１ａ，１１１ｂが一体形成されてなる。レンズアレイ１１３は、例えば、透明樹脂材を成形して作製される。レンズ１１１ａは、撮像範囲の画像を撮像素子１１２ａに結像させる光学部品である。レンズ１１１ｂは、撮像範囲の画像を撮像素子１１２ｂに結像させる光学部品である。
【００２５】
アパーチャアレイ１１５は、２つのアパーチャ１１４ａ，１１４ｂを有し、一方のアパーチャ１１４ａによりレンズ１１１ａの開口を規定し、もう一方のアパーチャ１１４ｂによりレンズ１１１ｂの開口を規定するように配置される。アパーチャアレイ１１５は、２つのアパーチャ１１４ａ，１１４ｂ以外の部分で光を反射もしくは吸収することで、レンズ１１１ａ，１１１ｂ以外の部分から筐体１１８内部に光が入射することを防止する。
【００２６】
撮像素子基板１１６には、２つの撮像素子１１２ａ，１１２ｂが所定の間隔で一体に形成されている。撮像素子１１２ａは、レンズアレイ１１３のレンズ１１１ａと対向し、撮像素子１１２ｂは、レンズアレイ１１３のレンズ１１１ｂと対向する。レンズアレイ１１３は、レンズ１１１ａが撮像素子１１２ａの中心と一致し、レンズ１１１ｂが撮像素子１１２ｂの中心と一致するように位置決めされている。撮像素子１１２ａの中心と撮像素子１１２ｂの中心との間の距離、つまりレンズアレイ１１３のレンズ１１１ａとレンズ１１１ｂとの光軸間の距離Ｂは基線長と呼ばれ、測距性能を決める重要なパラメータである。
【００２７】
回路基板１１７には、撮像素子１１２ａ，１１２ｂの出力信号を処理する信号処理回路が形成されている。例えば、撮像素子基板の背面（撮像素子１１２ａ，１１２ｂが形成された面とは逆の面）側に配置されている。本実施形態では、回路基板１１７に、温度センサおよび温度補正回路が設けられているものとする。温度補正回路は、温度センサの検出値を用いて、温度変化に起因する撮像素子１１２ａ，１１２ｂの出力誤差を補正する。この温度補正回路による補正処理により、温度変化によってレンズアレイ１１３が膨張または収縮し、基準長が変化したとしても、正しい出力が得られるようにしている。
【００２８】
次に、図６乃至図９により、本実施形態に係る仮想キー入力装置の第１の実施例の動作について説明する。この実施例は、ステレオカメラ１００でキーイメージ４０とキーを指定する物体（ここでは、ユーザの指とする）を撮影して得られる画像（輝度画像と距離画像）により、ステレオカメラ１００からキーイメージまでの距離と、ステレオカメラ１００からキーを指定する物体（指）までの距離を求め、両者の距離を比較することにより情報の入力を検知するものである。
【００２９】
図６において、キー表示手段２０によりキーイメージ４０が投射面５０に投射される。ここでは、キーイメージ４０は図１に示したような６つのキーとする。６つのキーのうち、ここではユーザの指６０が番号「５」のキーをタッチ（入力）する場合について説明する。
【００３０】
ステレオカメラ１００からは、２つのカメラのどちらか一方のカメラから得られる輝度画像（図７（ａ））と、２つのカメラを使って得られる距離画像（図７（ｂ））が出力される。まず、番号「５」のキーをタッチ（入力）しようとした場合、ここではユーザの指６０はまだ番号「５」には「接触」していない。これは距離画像（図７（ｂ））を見るとわかる。ここで、距離は色で区別するとする。図７（ｂ）において、番号「５」のキーは水色から青色に表示されている。これは番号「５」のキーがステレオカメラ１００から１４４ｍｍから１８０ｍｍ離れた距離にあることを示している（色と距離の関係は図７（ｂ）の右側のバーを参照）。一方、タッチしようとしている指は朱色から黄色で表示されている。これは指がステレオカメラ１００から９４．５ｍｍから１２１．５ｍｍ離れた距離にあることを示している。したがって、キーと指の距離は異なっているため、ユーザは番号「５」のキーには「接触」していないことがわかる。
【００３１】
次にユーザの指が番号「５」のキーに「接触」した場合について説明する。これは距離画像図８（ｂ）を見るとわかる。図８（ｂ）において、番号「５」のキーは水色から青色に表示されている。これは番号「５」のキーがステレオカメラ１００から１４４ｍｍから１８０ｍｍ離れた距離にあることを示している。一方、タッチしようとしている指先は水色から薄い青色で表示されている。これは指がステレオカメラ１００から１４４ｍｍから１６２ｍｍ離れた距離にあることを示している。したがって、キーと指の距離は一致しているため、ユーザは番号「５」のキーに「接触」していることがわかる。このようにキーと指が「接触」しているかいないかはステレオカメラ１００から得られる距離画像を用いることで判断することができる。
【００３２】
また、ユーザが１〜６のどの番号のキーを選んでいるかについては、輝度画像を用いて判断することができる。１〜６の各キーが画面上のどの領域に表示されるかはあらかじめわかっている。例えばステレオカメラ１００の２つのカメラのうちどちらか一方のカメラの輝度画像が６４０×４８０画素で、６つのキーが図９のように写っているとすれば、輝度画像のどの領域にそれぞれのキーが映っているかわかる。輝度画像内に指が現れて、指先が各キーのいずれの領域に入るかわかればユーザがどの番号のキーを選択したかわかる。
【００３３】
図１０に、この第１の実施例の処理フローチャートを示す。これは、例えば、図３の制御手段１０で実施する。
【００３４】
まず、キー表示手段２０とステレオカメラ１００をＯＮとする（ステップ１００１）。次に、ステレオカメラ１００から、２つのカメラのどちらか一方のカメラから得られた輝度画像と、２つのカメラを使って得られた距離画像を取得する（ステップ１００２）。そして、輝度画像を使ってユーザの指が検出されたか調べる（ステップ１００３）。ユーザの指が検出されたならば、距離画像を使って、ステレオカメラ１００からキーイメージまでの距離とステレオカメラ１００から指までの距離を比較し（ステップ１００４）、両者の距離が一致としたならば、キーに指が接触したと判断する（ステップ１００５）。そして、輝度画像を使って、ユーザが選択したキー情報を入力する（ステップ１００６）。
【００３５】
このように、ステレオカメラ１００から得られる輝度画像と距離画像を用いることで、ユーザがどのキーを選んで、タッチ（接触）したか、しないかを判断することができ、図１６のような従来の仮想キー入力装置で発生しやすい誤入力、誤動作を軽減することができる。
【００３６】
次に、本実施形態に係る仮想キー入力装置の第２の実施例の動作について説明する。この実施例は、先の第１の実施例のように単にキーと指の「接触」だけでキー入力を確定するのではなく、「接触」＋「押し込み」によってキー入力を確定するものである。「押し込み」の動作を認識するには、ステレオカメラ１００で得られる距離画像を用いて、キーを指定する物体としての指６０の変形やキーイメージが表示される対象物としての投射面５０の変形（形状変化）を検出すればよい。
【００３７】
図１１（ａ）〜（ｃ）を用いて、ユーザの「押し込み」の動作を認識する方法を説明する。
【００３８】
図１１（ａ）は指がキーに「接触」しているだけで、「押し込み」の動作を行っていない状態である。これは、先に述べたように、ステレオカメラ１００の輝度画像と距離画像を用いて指の位置と指の距離を検出し、所望のキーに指が「接触」している状態を示した図である。図１１（ｂ）と図１１（ｃ）は、指がキーに「接触」し、かつ「押し込み」の動作を行ったときの状態である。
【００３９】
図１１（ｂ）は、「押し込み」により、「接触」だけの場合に比べて指の形状が変化する様子を示している。押し込むときの圧力で、指の外形形状が変化する。また、押し込むときには指の第一関節が曲がるため、第一関節がより投射面５０に近づく。このように、指の形状の変化を３次元方向で検出することで「押し込み」の動作を行ったことを確認できる。特に指の第一関節が曲がることは、通常のカメラの２次元の輝度画像からでは認識しにくく、ステレオカメラ１００による距離画像を用いて３次元の検出を行うことで認識が容易になるものである。
【００４０】
図１１（ｃ）は、「押し込み」により、投射面５０の形状が変化する様子を示している。投射面５０がやわらかい素材（プラスティック、ゴム、ウレタン、織物、布地、皮革など）の場合、指で押し込むときの圧力で投射面５０の形状が変形する。投射面５０が変形すると、キー表示手段２０により投射されたキーイメージ４０のキーの外枠形状も変形する。図１１（ｃ）では、圧力のかかったキーの外枠（番号「５」の外枠）が歪んだ様子を示している。このような変形は、投射面５０が凹むことで生じるものである。投射面５０の凹みは、通常のカメラの輝度画像からでは認識しにくく、ステレオカメラ１００による３次元の検出を行うことで認識が容易になるものである。
【００４１】
このように、ステレオカメラ１００はＸＹ面内の輝度画像に加えてＺ面（奥行き）の距離画像も得られるため、従来の単眼カメラではできなかった指やパネルの変形を検出することができる。そのため単に「接触」しただけの場合と、「接触」＋「押し込み」の場合の違いを検知することができる。
【００４２】
図１２に、この第２の実施例の処理フローチャートを示す。図１２において、ステップ２００１〜２００５までは図１０のステップ１００１〜１００５と同じである。キーに指が接触したと判断したならば（ステップ２００５）、次に、距離画像を用いて、指あるいはキー外枠が変形されるのを待つ（ステップ２００６）。そして、指あるいはキー外枠の変形が検出されたならば、キーへの「押し込み」があったと判断する（ステップ２００７）。こうして、キーへの「接触」が検出され、且つ、キーへの「押し込み」が検出されたならば、輝度画像を使って、ユーザが選択したキー情報を入力する（ステップ２００８）。
【００４３】
第２の実施例によれば、単にキーへの接触だけでなく、「接触」＋「押し込み」によってキー入力を行うため、誤って接触したことによる誤入力、誤動作を確実に防止することができる。
【００４４】
例えば車の運転時には運転者は前方に注意を払っているためセンターコンソール部のパネルのスイッチ（ラジオ、ステレオ、ハザード、曇り止め、エアコン等）を注視することができない。スイッチがある付近に指を伸ばして、指でパネルに触りながら目的のスイッチを手探りで探して、確認したうえでスイッチをグッと押しているのが現状である。スイッチを手探りで探しているときに、所望でないスイッチに触れてしているケースは多い。一般のスイッチでは触れるだけではスイッチは動作しないため問題は無いが、現状の仮想キーボードでは触れただけでスイッチが反応してしまう。本実施例は、仮想キーボードでありながら、一般のスイッチ同様に「接触」＋「押し込み」によって入力するため、仮想キーボードで発生しやすい誤って接触したことによる誤入力、誤動作をなくすことができる。
【００４５】
次に、本実施形態に係る仮想キー入力装置の第３の実施例の動作について説明する。この第３の実施例は、ステレオカメラ１００からキーイメージまでの距離と等しい距離にある物体（指）は、指でなく影であると見做して、検出しないようにするものである。
【００４６】
図１６で説明した従来の仮想キーボードでは、キーボードが投射されている投射面に目では見えない位置検知用赤外レーザが投射されている。仮想キーボードに指が触れると位置検知用赤外レーザ光が指に当たって反射され、これをＣＭＯＳカメラでとらえて、指が接触した位置を検出している。この方式は外光が強い野外や車などでは赤外レーザの反射光を検出しにくくなり、誤作動の要因になる。
【００４７】
一方、本実施形態に係る仮想キー入力装置では赤外レーザを使っていないため、直接外光の影響を受けることは無い。ただし、外光の強度と向きによってはユーザの指の影がキーイメージの面上に写ることがあり、これが誤作動の要因になる場合がある。先の図７（ａ）を見てわかるように、外光によってユーザの指の影がキーイメージの面上に写っている。すなわち、番号「５」のキーイメージ面の上にある指の影が番号「２」のキーイメージ面に写っている。ここでは室内光であるためそれほど濃い影にはなっておらず、そのため、図７（ｂ）の距離画像には、指の影は画像として現れてはいない。しかし、外光が強い場合は影は濃くなる。影が濃くなると、ステレオカメラでマッチングされて距離画像に指の影の画像が生じる。図１３は、キー番号「２」の上に生じた影によって、距離画像ではあたかも指が番号「２」のキーに接触しているかのような状態になることをしめしたものである。
【００４８】
このような外光で生じる影による誤動作を無くすために、ステレオカメラ１００からキーイメージ４０までの距離と等しい距離にある指は、実物の指ではなく影であると見なすようにする。
【００４９】
図１４（ａ）は指と影の違いを示した図である。ステレオカメラ１００で得られる距離画像において、線１４０１はキーイメージ「２」の枠においてステレオカメラ１００からの距離がＬ１のところを結んだ線である。また、線１４０２はキーイメージ「５」の枠においてステレオカメラ１００からの距離がＬ２ところを結んだ線である。図１４（ｂ）は実物の指の場合であり、距離画像においてキーの枠と距離が等しい画素を結んだ線上に、その距離より短い（ステレオカメラに近い）距離に物体が有る場合は指である。図１４（ｃ）は影の場合で、距離画像においてキーの枠と距離が等しい画素を結んだ線上にその距離と等しい物体が有る場合は影である。
【００５０】
このように、キー表示手段２０で表示されたキーイメージ４０の枠を基準として、枠と同じ距離の物体は影であると見なすことで影と実体（指）との区別をつけることができる。これは指定キー検出手段３０のステレオカメラ１００を用いることで実現できるものである。ＴＯＦ方式やレーザパターンを照射して距離情報を得る方式ではキーイメージ４０が表示される投射面５０の形状はわかるが、投射面５０に投影されて描かれているキーイメージ４０の枠の位置まではわからない。
【００５１】
このように、第３の実施例によれば、ステレオカメラ１００を用いることで、外光に強く、指の位置を正確に捉えて、野外や車などでも誤作動が生じない仮想キー入力装置を実現できる。
【００５２】
次に、本実施形態に係る仮想キー入力装置の第４の実施例について説明する。この第４の実施例は、指定キー検出手段３０によってキー入力が確認された場合、キー表示手段２０にて確認前とは異なるキーイメージを表示するものである。
【００５３】
仮想キー入力装置を車のパネルのスイッチ（ラジオ、ステレオ、ハザード、曇り止め、エアコン等）やＦＡなどの加工装置／検査装置のスイッチなどに用いるためには、誤入力や誤作動を減らすと同時に、もし誤入力があった場合はそれにすぐに気が付くようにすることが重要である。
【００５４】
モニタ画面が無い場合でもすぐに気が付くようにするためには、入力したキーの表示が変わることが有効な手段である。具体的には図１５のように番号「５」のキーの入力が確認された場合は、番号「５」のキーの色を変える。他には、番号「５」の文字が大きくなったり、番号「５」が点滅したり、番号「５」を音で伝えたりすることでもよい。キー表示手段２０がプロジェクタであればいずれも可能である。
【符号の説明】
【００５５】
１０  制御手段
２０  キー表示手段
３０  指定キー検出手段
４０  キーイメージ
５０  投射面
１００  ステレオカメラ
【先行技術文献】
【特許文献】
【００５６】
【特許文献１】特表２００４−５２３０３１号公報
【図１】
2014179032.tif 000003
【図２】
2014179032.tif 000004
【図３】
2014179032.tif 000005
【図４】
2014179032.tif 000006
【図５】
2014179032.tif 000007
【図６】
2014179032.tif 000008
【図９】
2014179032.tif 000009
【図１０】
2014179032.tif 000010
【図１１】
2014179032.tif 000011
【図１２】
2014179032.tif 000012
【図１３】
2014179032.tif 000013
【図１４】
2014179032.tif 000014
【図１５】
2014179032.tif 000015
【図１６】
2014179032.tif 000016
【図７】
2014179032.tif 000017
【図８】
2014179032.tif 000018