(57)【要約】  本発明は、秘匿情報を漏洩させることなく、確実に入力することが可能な情報入力システムを提供する。該情報入力システムは、画像データに基づき画像を表示し、外界をシースルー可能な表示ユニットを有する頭部装着式映像表示装置と、被操作装置に情報を入力し、それぞれのキーに対応する情報を示す表示を有さない複数のキーを備えた情報入力手段と、情報入力手段のそれぞれのキーに対応する情報の割振りを設定するキー割振り設定部および該キー割振り設定部で割振られた情報のキー割振りを示す画像データを生成する画像データ生成部を有するキー情報割振り装置と、を備えた情報入力システムであって、頭部装着式映像表示装置は、画像データ生成部で生成された画像データに基づいたキー割振り画像を生成し、該キー割振り画像を表示ユニットを通して観察できるシースルー画像に重ね合わせて表示する。
2009130985.tif 000002
【特許請求の範囲】
【請求項１】
画像データに基づき画像を表示し、外界をシースルー可能な表示ユニットを有する頭部装着式映像表示装置と、
被操作装置に情報を入力し、それぞれのキーに対応する前記情報を示す表示を有さない複数のキーを備えた情報入力手段と、
前記情報入力手段のそれぞれのキーに対応する前記情報の割振りを設定するキー割振り設定部および該キー割振り設定部で割振られた前記情報のキー割振りを示す画像データを生成する画像データ生成部を有するキー情報割振り装置と、
を備えた情報入力システムであって、
前記頭部装着式映像表示装置は、前記画像データ生成部で生成された前記画像データに基づいたキー割振り画像を生成し、該キー割振り画像を前記表示ユニットを通して観察できるシースルー画像に重ね合わせて表示することを特徴とする情報入力システム。
【請求項２】
前記頭部装着式映像表示装置は、前記情報入力手段を含む外界を撮影する電子カメラを有し、
前記キー情報割振り装置は、前記電子カメラで撮影された画像における前記情報入力手段の位置を検出する位置検出部を有し、
前記頭部装着式映像表示装置は、前記位置検出部で検出された前記電子カメラの画像における前記情報入力手段の位置に対応する前記表示ユニットの画面の位置に前記キー割振り画像を表示することを特徴とする請求項１に記載の情報入力システム。
【請求項３】
前記キー割振り設定部は、前記情報入力手段により一連の情報が入力される度に、該情報入力手段のそれぞれのキーに対応する前記情報の割振りの設定を変更することを特徴とする請求項１または２に記載の情報入力システム。
【請求項４】
前記キー割振り設定部は、前記情報入力手段のそれぞれのキーに対応する前記情報の割振りをランダムに設定することを特徴とする請求項１から３の何れか１項に記載の情報入力システム。
【請求項５】
前記情報入力手段は、キーボードまたはタッチパネルであることを特徴とする請求項１から４の何れか１項に記載の情報入力システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報入力システムに関し、特に頭部装着式映像表示装置を備えた情報入力システムに関する。
【背景技術】
【０００２】
従来、観察者の頭部や顔面に着脱自在に装着され、小型のＣＲＴや液晶表示素子等の映像表示素子から得られる映像（以下、画像とも称する。）を、接眼光学系によって観察者の眼球に直接投影させることで、恰も該映像が空中に拡大投影されているかのような虚像の観察を可能にした頭部装着式映像表示装置、すなわちＨＭＤ（Ｈｅａｄ  Ｍｏｕｎｔ  Ｄｉｓｐｌａｙ）が知られている。【０００３】
ＨＭＤは、ＤＶＤやビデオ等のコンテンツ映像の観賞用や、産業機器若しくは医療機器等の遠隔操作用としての表示装置として利用され、また、近年では、セキュリティの確保を目的とした情報入力装置への応用が検討され、その用途は多岐に渡っている。【０００４】
セキュリティ用としては、例えば、ＨＭＤを装着した使用者が、ＨＭＤの画面に表示された仮想入力デバイスに対して入力操作することにより、入力情報の漏洩を防止する仮想入力装置が知られている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００２−３１８６５２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
ところで、特許文献１に開示されている仮想入力装置は、例えば、キーボードのような入力デバイスを示す仮想の入力デバイスの画像を画面に表示している為、該仮想入力デバイスに対する使用者の指による入力操作を検出する必要がある。すなわち、仮想空間において、仮想入力デバイスを表示し、その空間座標における指の座標を精度よく検出し、検出した座標に基づき使用者がどのような入力操作を行ったかを判断する必要がある。【０００７】
ここで、指の動きを検出する方法としては、以下の方法が用いられる。【０００８】
１．指先にセンサを装着し、センサの出力に基づき指の動きを検出する。【０００９】
２．電子カメラを用いて撮影された画像データに基づき指を検出し、その動きを検出する。【００１０】
しかしながら、前記１項の場合は、部品点数の増加による装置の複雑化と高価格化を招き、さらに、使用者は、指先にセンサを装着する必要がある為、軽便性が阻害されるといった問題がある。また、前記２項の場合は、画像データより指の動きを精度よく検出する必要がある為、誤検出の恐れがある。【００１１】
また、特許文献１に開示されている仮想入力装置においては、入力デバイスのキー割振りに関し記載されていないが、入力デバイスとしてキーボードを用いた場合、通常のキー割振りは、１０１、１０６等の規格により定まっている為、指の動きによりどのような入力操作を行ったかを読取られるといった問題がある。【００１２】
本発明は、上記課題を鑑みてなされたもので、装置の複雑化と高価格化を招くことなく、秘匿情報を漏洩させることなく、確実に入力することが可能な情報入力システムを提供することを目的とする。
【課題を解決するための手段】
【００１３】
上記目的は、下記の１から５の何れか１項に記載の発明によって達成される。【００１４】
１．画像データに基づき画像を表示し、外界をシースルー可能な表示ユニットを有する頭部装着式映像表示装置と、
被操作装置に情報を入力し、それぞれのキーに対応する前記情報を示す表示を有さない複数のキーを備えた情報入力手段と、
前記情報入力手段のそれぞれのキーに対応する前記情報の割振りを設定するキー割振り設定部および該キー割振り設定部で割振られた前記情報のキー割振りを示す画像データを生成する画像データ生成部を有するキー情報割振り装置と、
を備えた情報入力システムであって、
前記頭部装着式映像表示装置は、前記画像データ生成部で生成された前記画像データに基づいたキー割振り画像を生成し、該キー割振り画像を前記表示ユニットを通して観察できるシースルー画像に重ね合わせて表示することを特徴とする情報入力システム。【００１５】
２．前記頭部装着式映像表示装置は、前記情報入力手段を含む外界を撮影する電子カメラを有し、
前記キー情報割振り装置は、前記電子カメラで撮影された画像における前記情報入力手段の位置を検出する位置検出部を有し、
前記頭部装着式映像表示装置は、前記位置検出部で検出された前記電子カメラの画像における前記情報入力手段の位置に対応する前記表示ユニットの画面の位置に前記キー割振り画像を表示することを特徴とする前記第１項に記載の情報入力システム。【００１６】
３．前記キー割振り設定部は、前記情報入力手段により一連の情報が入力される度に、該情報入力手段のそれぞれのキーに対応する前記情報の割振りの設定を変更することを特徴とする前記第１項または第２項に記載の情報入力システム。【００１７】
４．前記キー割振り設定部は、前記情報入力手段のそれぞれのキーに対応する前記情報の割振りをランダムに設定することを特徴とする前記第１項から第３項の何れか１項に記載の情報入力システム。【００１８】
５．前記情報入力手段は、キーボードまたはタッチパネルであることを特徴とする前記第１項から第４項の何れか１項に記載の情報入力システム。
【発明の効果】
【００１９】
本発明によれば、ＨＭＤは、キー情報割振り装置の画像データ生成部で生成された情報表示のない情報入力手段のそれぞれのキーに対応する情報のキー割振りを示す画像データに基づいたキー割振り画像を生成し、該キー割振り画像を表示ユニットを通して観察できるシースルー画像に重ね合わせて表示する構成とした。【００２０】
すなわち、情報入力手段には、それぞれのキーに対応する情報を示す表示がなく、ＨＭＤを装着した使用者のみが、ＨＭＤの表示ユニットに表示されるキー割振り画像によりキー割振りを知ることができるので、入力情報の漏洩を防止することができる。また、被操作装置への情報の入力は、例えばキーボードやタッチパネル等の現実の情報入力手段を用いて行われるので、確実に情報を入力することができる。
【図面の簡単な説明】
【００２１】
【図１】本発明の実施形態に係る情報入力システムの全体構成を示す模式図である。
【図２】本発明の実施形態に係るＨＭＤの外観を示す斜視図である。
【図３】本発明の実施形態に係る表示ユニットの側断面図である。
【図４】本発明の実施形態に係る情報入力システムの概略構成を示すブロック図である。
【図５】本発明の実施形態に係る表示ユニットにおけるキー割振り表示の一例を示す模式図である。
【図６】本発明の実施形態に係る表示ユニットにおけるキー割振り表示の別例を示す模式図である。
【発明を実施するための形態】
【００２２】
以下図面に基づいて、本発明に係る情報入力システムの実施の形態を説明する。尚、本発明を図示の実施の形態に基づいて説明するが、本発明は該実施の形態に限られない。
【００２３】
最初に、情報入力システム１の構成を図１を用いて説明する。図１は、本発明の実施形態に係る情報入力システム１の全体構成の概要を示す模式図である。
【００２４】
情報入力システム１は、図１に示すように、本発明における頭部装着式映像表示装置に該当するＨＭＤ２、キー情報割振り装置５、及び本発明における被操作装置に該当するＡＴＭ装置７に設けられた本発明における情報入力手段として機能するキーボード７１等から構成され、それぞれの装置は、有線または無線で接続されている。尚、被操作装置としては、ＡＴＭ装置７に限定されることなくキーボード７１により情報が入力される装置であればよい。また、キーボード７１は、タイプフェースを押下するという入力操作を行うことにより、例えば暗証番号等の情報（文字、数字、記号等）を入力する入力デバイスであり、それぞれのキーに対応する情報を示す表示を有していない。また、情報入力手段としては、キーボード７１に限定されることなくタッチパネルや操作ボタン等の入力デバイスであってもよい。
【００２５】
このような構成の情報入力システム１は、ＨＭＤ２の後述の表示ユニット２５に、キー情報割振り装置５から提供された情報表示のないキーボード７１のそれぞれのキーに対応する情報の割振りを示すキー割振り画像を表示させ、ＨＭＤ２を装着した使用者が、かかるキー割振り画像を見ながら情報表示のないキーボード７１を操作してＡＴＭ装置７に例えば暗証番号等の情報を入力するものである。
【００２６】
次に、ＨＭＤ２の構成を図２を用いて説明する。図２は、本発明の実施形態に係るＨＭＤ２の外観を示す斜視図である。
【００２７】
ＨＭＤ２は、図２に示すように、テンプル２１Ｒ、２１Ｌ、ブリッジ２２、鼻当て２３Ｒ、２３Ｌ、透明基板２４Ｒ、２４Ｌ、表示ユニット２５（ＬＣＤ表示部２６、接眼光学系２７）、カメラユニット２８、イヤホン２９Ｒ、２９Ｌ、及び制御ユニット３１等を有している。
【００２８】
ＨＭＤ２は、カメラユニット２８で撮影された画像やキー情報割振り装置５から提供された画像を表示ユニット２５に設けられたＬＣＤ表示部２６に表示させ、該ＬＣＤ表示部２６から得られた画像を、接眼光学系２７によって装着者（以下、使用者とも称する。）の眼球に直接投影させることで、恰も該画像が空中に拡大投影されているかのような虚像の観察を可能にしている。
【００２９】
テンプル２１Ｒ、２１Ｌは、可撓性を有する弾性材等により構成された長尺状の部材であり、装着者の耳や側頭部に掛止され、ＨＭＤ２の装着者に対する頭部への保持及び装着位置の調整を行う為のものである。尚、テンプル２１Ｒ、２１Ｌは、回動部２１Ｒａ、２１Ｌａにおいて矢印Ｐ、Ｑ方向に回動可能に構成されており、ＨＭＤ２を使用しない場合には、テンプル２１Ｒ、２１Ｌを矢印Ｐ、Ｑ方向に回動させて透明基板２４Ｒ、２４Ｌに沿わせることにより、コンパクト化することができる。
【００３０】
ブリッジ２２は、ＨＭＤ２の装着者に対する顔面への保持を行う鼻当て２３Ｒ、２３Ｌを備え、透明基板２４Ｒ、２４Ｌの互いに対向する所定位置に架け渡された短尺の棒状部材であり、透明基板２４Ｒと透明基板２４Ｌとを一定の間隙を介した相対位置関係に保持するものである。
【００３１】
透明基板２４Ｒ、２４Ｌは、一方の眼球に対応した位置にＵ字型のスペース２４Ｒｓを形成する略平板状の透明体である。また、透明基板２４Ｒに囲まれて形成されるＵ字型のスペース２４Ｒｓには、接眼光学系２７が嵌め込まれている。
【００３２】
表示ユニット２５は、ＬＣＤ表示部２６、及び接眼光学系２７等を有し、カメラユニット２８で撮影された画像や制御ユニット３１に設けられた後述の通信部３６を介してキー情報割振り装置５から提供された情報表示のないキーボード７１のそれぞれのキーに対応する情報の割振りを示すキー割振り画像等を表示する。
【００３３】
カメラユニット２８は、本発明における電子カメラに該当し、図示しない後述のズームレンズ２８１、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）２８２、及び画像処理部２８３等を有し、装着者の周囲の外界情景を撮影するものである。カメラユニット２８は、ズームレンズ２８１によって結像された被写体光学像を、ＣＣＤ２８２によって光電変換して画像信号（映像信号）を生成し、生成された画像信号に画像処理部２８３等により所定の画像処理を施す。また、カメラユニット２８の光軸や画角は、装着者の視線や視野と略同一になるように設定されている。
【００３４】
イヤホン２９Ｒ、２９Ｌは、装着者の耳に挿入され、装着者に音声を提供する。
【００３５】
制御ユニット３１は、マイクロコンピュータからなり、電源スイッチ３５１、操作スイッチ３５２等を有し、これら各種操作スイッチからの信号、及びキー情報割振り装置５からの制御信号等を受けて、ＨＭＤ２で行われる表示動作や画像信号処理動作を統括的に制御するものである。
【００３６】
ここで、表示ユニット２５の構成を、図３を用いて説明する。図３は、本発明の実施形態に係るＨＭＤ２における表示ユニット２５の左側面からの側断面図であり、主に表示ユニット２５の内部構成を示している。
【００３７】
図３に示すように、表示ユニット２５は、筐体２６１、バックライト２６２、コリメータレンズ２６３、ＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）２６４からなるＬＣＤ表示部２６、及びプリズム２７１、ＨＯＥ（Ｈｏｌｏｇｒａｐｈｉｃ  Ｏｐｔｉｃａｌ  Ｅｌｅｍｅｎｔ）２７２からなる接眼光学系２７等から構成される。
【００３８】
ＬＣＤ表示部２６の筐体２６１の内部には、バックライト２６２、コリメータレンズ２６３、及びＬＣＤ２６４が内蔵された状態で、該筐体２６１が接眼光学系２７のプリズム２７１の上端部において上斜め前方（図３では右斜め上方向）に突出する態様で取り付けられている。
【００３９】
バックライト２６２は、所定波長色を含む白色発光ダイオード（ＬＥＤ）からなりＬＣＤ２６４を照明する点光源である。
【００４０】
コリメータレンズ２６３は、バックライト２６２のＬＥＤの光を略平行光にしてＬＣＤ２６４に投光するものである。
【００４１】
ＬＣＤ２６４は、カメラユニット２８で撮影され生成された画像信号（以下、画像データ、映像データとも称する。）に基づく画像やキー情報割振り装置５から提供された情報表示のないキーボード７１のそれぞれのキーに対応する情報の割振りを示す画像データに基づくキー割振り画像等を表示するものであり、例えば光透過型の液晶表示パネルである。
【００４２】
プリズム２７１は、ガラスや透明樹脂等からなる略板状の透明部材であり、ＬＣＤ２６４からの光を内部で複数回の反射を行わせるものである。プリズム２７１の上端部は、ＬＣＤ２６４からの光の大部分を内部に採光できるように、上方に向かってより肉厚となるように前面側（接眼面と反対側）が突き出るように楔形状に形成された肉厚部２７１ｂが形成されている。
【００４３】
また、プリズム２７１の下端部には、傾斜面２７１ａが形成されており、プリズム２７１は、透明基板２４Ｒに形成された傾斜面２４Ｒａに対しＨＯＥ２７２を介して接合（例えば接着）されている。また、プリズム２７１の表裏面は、透明基板２４Ｒの表裏面に対して面一とされている。これにより、プリズム２７１は、透明基板２４Ｒと一枚の板状に一体化されている。
【００４４】
ＨＯＥ２７２は、光学的に軸非対称な所謂自由曲面で構成されて正のパワーを有する体積位相型のホログラム光学素子であり、プリズム２７１の下端部において所定の傾斜角を有して支持されている。ＨＯＥ２７２は、プリズム２７１により導光された光が照射されることにより、光の干渉現象を用いてホログラム映像を眼球Ｅに提供する。
【００４５】
以上のような構成を有する表示ユニット２５においては、バックライト２６２のＬＥＤから射出された光は、コリメータレンズ２６３を通してＬＣＤ２６４を照明し、この照明によりＬＣＤ２６４で生成された像光は、プリズム２７１内で複数回の全反射を行った後、ＨＯＥ２７２により回折し虚像として装着者の眼球Ｅに導かれる。
【００４６】
さらに、プリズム２７１は、前方から入射する光を装着者の眼球Ｅに導くようになっている。これにより、装着者は、外界（前方の被写体）をシースルー可能となり、カメラユニット２８で撮影され生成された画像やキー情報割振り装置５から提供された情報表示のないキーボード７１のそれぞれのキーに対応する情報の割振りを示すキー割振り画像等を外界（前方の被写体）と重畳して視認することとなる。
【００４７】
次に、情報入力システム１のブロック構成を図４を用いて説明する。図４は、本発明の実施形態に係わる情報入力システム１の要部構成を示すブロック図である。尚、図４では、図１乃至図３に示した部材と同じ部材には同一の番号を付与した。
【００４８】
最初に、キー情報割振り装置５は、コンピュータからなり、画像データ生成部５１、キー割振り設定部５２、及び位置検出部５３等を有する。
【００４９】
キー割振り設定部５２は、情報表示のないキーボード７１のそれぞれのキーに対応する情報の割振りを設定する。また、キー割振り設定部５２は、キーボード７１により一連の情報（例えば、４桁の暗証番号として、「１２３４」）が入力される度に、キーボード７１のそれぞれのキーに対応する情報の割振りの設定をランダムに変更する。ランダムな割振り方法としては、例えば、熱雑音による乱数発生を利用する等、通常乱数発生で用いられるアルゴリズムを用いることにより、予測が困難なランダムな割振りを設定することができる。
【００５０】
画像データ生成部５１は、キー割振り設定部５２で割振られた情報のキー割振りを示す画像データを生成する。
【００５１】
位置検出部５３は、ＨＭＤ２のカメラユニット２８で撮影された画像におけるキーボード７１の位置（座標）を検出する。位置検出方法としては、予め登録しておいたキーボード７１の形状（テンプレート）が、画像の何処に位置するかを検出する周知のテンプレートマッチング等を用いることができる。
【００５２】
キー情報割振り装置５は、画像データ生成部５１で生成されたキー割振りを示す画像データ、及び位置検出部５３で検出されたキーボード７１の座標情報をＨＭＤ２に提供する。そして、これらの情報を取得したＨＭＤ２は、該情報に基づいたキー割振り画像を生成し、該キー割振り画像を表示ユニット２５を通して観察できるシースルー画像に重ね合わせて表示する。尚、ＨＭＤ２で行われるこれらの表示制御動作の詳細は後述する。
【００５３】
次に、ＨＭＤ２の要部は、表示ユニット２５、カメラユニット２８、及び制御ユニット３１等から構成される。
【００５４】
表示ユニット２５は、ＬＣＤ表示部２６、接眼光学系２７から構成され、各部位で行われる動作については前述したので説明は省略する。
【００５５】
カメラユニット２８は、ズームレンズ２８１、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）２８２、及び画像処理部２８３等を有する。
【００５６】
ＣＣＤ２８２は、Ｒ（赤）光、Ｇ（緑）光、Ｂ（青）光の各色透過フィルタをピクセル単位（画素単位）で市松模様状に配置させたカラーエリア撮像センサで、ズームレンズ２８１により結像された被写体光像を、Ｒ（赤）光、Ｇ（緑）光、Ｂ（青）光の各色成分の画像信号（各画素単位で受光された画素信号の信号列からなる信号）に光電変換するものである。
【００５７】
画像処理部２８３は、図示しない例えば、黒レベル補正部、画素補間部、ホワイトバランス制御部、ガンマ補正部、マトリックス演算部、シェーディング補正部、及び画像圧縮部等を有し、ＣＣＤ２８２より読み出された画像信号に周知の画像信号処理を施すものである。そして、これらの部位で所定の処理を施された画像信号は、後述の制御ユニット３１の画像メモリ３３に格納される。
【００５８】
制御ユニット３１は、制御部３２、画像メモリ３３、ＶＲＡＭ（Ｖｉｄｅｏ  Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）３４、操作部３５、及び通信部３６等から構成される。
【００５９】
制御部３２は、図示しない各制御プログラム等を記憶するＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、演算処理や制御処理等のデータを一時的に格納するＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、及び制御プログラム等をＲＯＭから読み出して実行するＣＰＵ（中央演算処理装置）等から構成される。制御部３２は、電源スイッチ３５１及び各種操作スイッチ３５２等からの信号、及びキー情報割振り装置５からの制御信号等を受けて、ＨＭＤ２で行われる表示動作や画像信号処理動作を統括的に制御するものである。また、制御部３２は、キー情報割振り装置５から提供された前述の情報に基づいたキー割振り画像を生成し、該キー割振り画像を表示ユニット２５を通して観察できるシースルー画像に重ね合わせて表示する。尚、制御部３２で行われるこれらの表示制御動作の詳細は後述する。
【００６０】
画像メモリ３３は、制御部３２により画像信号に対する各種処理を行う為の作業領域として用いられる一時メモリである。
【００６１】
ＶＲＡＭ３４は、ＬＣＤ表示部２６中のＬＣＤ２６４の画素数に対応した画像信号の記録容量を有し、ＬＣＤ２６４に再生表示される画像を構成する画像信号のバッファメモリである。
【００６２】
通信部３６は、キー情報割振り装置５との間で交信を行い、画像、音声、及び各種制御信号等の入出力を行う。
【００６３】
このような構成の情報入力システム１において、本発明は、ＨＭＤ２の表示ユニット２５に、キー情報割振り装置５から提供された情報表示のないキーボード７１のそれぞれのキーに対応する情報の割振りを示すキー割振り画像を表示させる。そして、ＨＭＤ２を装着した使用者が、かかるキー割振り画像を見ながらシースルーで観察できる情報表示のないキーボード７１を操作してＡＴＭ装置７に例えば暗証番号等の情報を入力するものである。以下、図５を用いてその詳細を説明する。図５（ａ）〜図５（ｃ）は、ＨＭＤ２で行われる表示制御動作の流れを説明する模式図である。
【００６４】
まず、図５（ａ）に示すように、ＨＭＤ２の表示ユニット２５の画面Ｄには、情報表示のない無地のキーボード７１のシースルー画像Ｓが表示されている。
【００６５】
次に、ＨＭＤ２の制御部３２は、図５（ｂ）に示すように、キー情報割振り装置５から提供された情報表示のないキーボード７１のそれぞれのキーに対応する情報の割振りを示す画像データに基づいたキー割振り画像Ｋを生成する。
【００６６】
そして、ＨＭＤ２の制御部３２は、キー情報割振り装置５から提供されたＨＭＤ２のカメラユニット２８で撮影された画像におけるキーボード７１の位置（座標）に対応する表示ユニットの画面Ｄの位置にキー割振り画像Ｋを表示する。すなわち、図５（ｃ）に示すように、キーボード７１のシースルー画像Ｓにキー割振り画像Ｋが重なって表示される。
【００６７】
これにより、使用者は、無地のキーボード７１のそれぞれのキーに恰も情報が表示されているかのように見え、容易に所望の情報を入力することができる。
【００６８】
尚、キーボード７１の形状や大きさ、また姿勢等の態様により、キーボード７１のシースルー画像Ｓにキー割振り画像Ｋを重ねて表示することが困難な場合は、図６に示すように、画面Ｄの例えば、片隅にキー割振り画像Ｋを表示するようにしてもよい。
【００６９】
このように本発明の実施形態に係わる情報入力システム１においては、ＨＭＤ２は、キー情報割振り装置５から提供された情報表示のないキーボード７１のそれぞれのキーに対応する情報のキー割振りを示す画像データに基づいたキー割振り画像Ｋを生成し、該キー割振り画像Ｋを表示ユニット２５を通して観察できるキーボード７１のシースルー画像Ｓに重ね合わせて表示する構成とした。
【００７０】
すなわち、現実のキーボード７１には、それぞれのキーに対応する情報を示す表示がなく、ＨＭＤ２を装着した使用者のみが、ＨＭＤ２の表示ユニット２５に表示されるキー割振り画像Ｋによりキー割振りを知ることができるので、入力情報の漏洩を防止することができる。また、被操作装置７への情報の入力は、現実のキーボード７１を用いて行われるので、確実に情報を入力することができる。
【符号の説明】
【００７１】
１  情報入力システム
２  頭部装着式映像表示装置（ＨＭＤ）
２１Ｒ、２１Ｌ  テンプル
２２  ブリッジ
２３Ｒ、２３Ｌ  鼻当て
２４Ｒ、２４Ｌ  透明基板
２５  表示ユニット
２６  ＬＣＤ表示部
２６１  筐体
２６２  バックライト
２６３  コリメータレンズ
２６４  ＬＣＤ
２７  接眼光学系
２７１  プリズム
２７２  ＨＯＥ
２８  カメラユニット
２８１  ズームレンズ
２８２  ＣＣＤ
２８３  画像処理部
２９Ｒ、２９Ｌ  イヤホン
３１  制御ユニット
３２  制御部
３３  画像メモリ
３４  ＶＲＡＭ
３５  操作部
３５１  電源スイッチ
３５２  操作スイッチ
３６  通信部
５  キー情報割振り装置
５１  画像データ生成部
５２  キー割振り設定部
５３  位置検出部
７  ＡＴＭ装置
７１  キーボード
Ｅ  目
【図１】
2009130985.tif 000003
【図２】
2009130985.tif 000004
【図３】
2009130985.tif 000005
【図４】
2009130985.tif 000006
【図５】
2009130985.tif 000007
【図６】
2009130985.tif 000008
【手続補正書】
【提出日】平成22年9月10日(2010.9.10)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像データに基づき情報を表示し、外界をシースルー観察可能な表示ユニットを有する頭部装着式映像表示装置と、
複数のキーに対応する位置を指定することにより各キーに対応する情報を入力する入力手段であって、上記各キーに対応する位置に上記入力される情報を示す表示を有していない情報入力手段と、
前記情報入力手段の各キーに対応する位置のそれぞれに対して前記情報の割振りを設定するキー割振り設定部および該キー割振り設定部で割振られた前記情報の割振りを示す画像データを生成する画像データ生成部を有するキー情報割振り装置と、
を備え、
前記頭部装着式映像表示装置は、前記画像データ生成部で生成された前記画像データに基づくキー割振り画像を生成するとともに、該キー割振り画像を前記シースルー観察できる外界とともに視認可能であるように前記表示ユニットにより表示し、
前記キー割振り設定部は、前記情報入力手段の前記各キーに対応する位置それぞれに対して前記情報の割振りをランダムに設定することを特徴とする情報入力システム。
【請求項２】
前記キー割振り設定部は、前記情報の割振りが設定された前記情報入力手段により一連の情報が入力されると、前記情報の割振りを変更すべくランダムに設定することを特徴とする請求項１に記載の情報入力システム。
【請求項３】
前記頭部装着式映像表示装置は、シースルー観察される前記情報入力手段における各キーに対応する位置に上記キー割振り画像が重ね合わさって観察可能であるよう、前記キー割振り画像を表示することを特徴とする請求項１または２に記載の情報入力システム。
【請求項４】
前記頭部装着式映像表示装置は、前記情報入力手段を含む外界を撮影する電子カメラを更に備え、
前記キー情報割振り装置は、前記電子カメラで撮影された画像における前記情報入力手段の位置を検出する位置検出部を更に備えたことを特徴とする請求項３に記載の情報入力システム。
【請求項５】
前記情報入力手段は、キーボードまたはタッチパネルであることを特徴とする請求項１から４の何れか１項に記載の情報入力システム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正の内容】
【００１４】
１．画像データに基づき情報を表示し、外界をシースルー観察可能な表示ユニットを有する頭部装着式映像表示装置と、
複数のキーに対応する位置を指定することにより各キーに対応する情報を入力する入力手段であって、上記各キーに対応する位置に上記入力される情報を示す表示を有していない情報入力手段と、
前記情報入力手段の各キーに対応する位置のそれぞれに対して前記情報の割振りを設定するキー割振り設定部および該キー割振り設定部で割振られた前記情報の割振りを示す画像データを生成する画像データ生成部を有するキー情報割振り装置と、
を備え、
前記頭部装着式映像表示装置は、前記画像データ生成部で生成された前記画像データに基づくキー割振り画像を生成するとともに、該キー割振り画像を前記シースルー観察できる外界とともに視認可能であるように前記表示ユニットにより表示し、
前記キー割振り設定部は、前記情報入力手段の前記各キーに対応する位置それぞれに対して前記情報の割振りをランダムに設定することを特徴とする情報入力システム。
２．前記キー割振り設定部は、前記情報の割振りが設定された前記情報入力手段により一連の情報が入力されると、前記情報の割振りを変更すべくランダムに設定することを特徴とする前記第１項に記載の情報入力システム。
３．前記頭部装着式映像表示装置は、シースルー観察される前記情報入力手段における各キーに対応する位置に上記キー割振り画像が重ね合わさって観察可能であるよう、前記キー割振り画像を表示することを特徴とする前記第１項または第２項に記載の情報入力システム。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
４．前記頭部装着式映像表示装置は、前記情報入力手段を含む外界を撮影する電子カメラを更に備え、
前記キー情報割振り装置は、前記電子カメラで撮影された画像における前記情報入力手段の位置を検出する位置検出部を更に備えたことを特徴とする前記第３項に記載の情報入力システム。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】削除
【補正の内容】
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】削除
【補正の内容】
【国際調査報告】
2009130985.tif 000009
2009130985.tif 000010
2009130985.tif 000011
2009130985.tif 000012