(57)【要約】  画像表示システムは、操作装置と画像表示装置とを備える。操作装置は、操作装置の受付部に対するユーザの第１の指の第１の相対位置を示す第１の位置情報、及び、受付部に入力される操作を示す操作情報を、画像表示装置に送信する。画像表示装置は、操作装置から、第１の位置情報及び操作情報を取得し、特定範囲内の撮影画像を表わす撮影画像データと、第１の位置情報が示す第１の相対位置と、に基づいて、表示用画像を表わす表示用画像データを生成する。表示用画像では、特定範囲内における受付部の位置に対応する範囲にパネル画像が配置されており、かつ、第１の相対位置に対応する第１の範囲内におけるパネル画像の視認性が、第１の範囲外におけるパネル画像の視認性よりも低い。画像表示装置は、表示用画像を表示している状態で、特定の操作の入力が受け付けられることを示す特定の操作情報が取得される場合に、特定処理を実行する。
2018179069.tif 000002
【特許請求の範囲】
【請求項１】
操作装置と、前記操作装置と通信可能に接続されている画像表示装置と、を備える画像表示システムであって、
前記操作装置は、
本体と、
前記本体の表面に露出しており、ユーザの指による操作の入力を受け付ける受付部と、
前記受付部に対する前記ユーザの第１の指の第１の相対位置を検出する検出部と、
前記検出部が検出する前記第１の相対位置を示す第１の位置情報、及び、前記受付部に入力される前記操作を示す操作情報を、前記画像表示装置に送信する操作側制御部と、を備え、
前記画像表示装置は、
前記ユーザの頭部に装着可能なフレームと、
前記フレームに備えられ、前記フレームを装着した前記ユーザの眼に対向する位置に配置される表示部と、
前記ユーザの視界範囲に対応する特定範囲を撮影するカメラと、
表示側制御部と、
を備え、
前記表示側制御部は、
前記操作装置から、前記第１の位置情報及び前記操作情報を取得する取得部と、
前記特定範囲内の撮影画像を表わす撮影画像データと、取得された前記第１の位置情報が示す前記第１の相対位置と、に基づいて、特定の操作を入力するための操作パネルを示すパネル画像を含む表示用画像を表わす表示用画像データを生成する生成部であって、前記表示用画像では、前記特定範囲内における前記受付部の位置に対応する範囲に前記パネル画像が配置されており、かつ、前記第１の指の前記第１の相対位置に対応する第１の範囲内における前記パネル画像の視認性が、前記第１の範囲外における前記パネル画像の視認性よりも低い、前記生成部と、
前記表示用画像データによって表わされる前記表示用画像を前記表示部に表示させる表示制御部と、
前記表示用画像が表示されている状態で、前記受付部において前記特定の操作の入力が受け付けられることを示す特定の操作情報が取得される場合に、前記特定の操作に応じた特定処理を実行する特定処理実行部と、
を備える、画像表示システム。
【請求項２】
前記検出部は、さらに、前記受付部に対する前記ユーザの第２の指の第２の相対位置を検出し、
前記操作側制御部は、さらに、前記検出部が検出する前記第２の相対位置を示す第２の位置情報を前記画像表示装置に送信し、
前記取得部は、前記操作装置から、さらに、前記第２の位置情報を取得し、
前記生成部は、前記撮影画像データと、前記第１の相対位置と、取得された前記第２の位置情報が示す前記第２の相対位置と、に基づいて、前記表示用画像データを生成し、
前記表示用画像では、前記第１の範囲内と、前記第２の指の前記第２の相対位置に対応する第２の範囲内と、における前記パネル画像の視認性が、前記第１の範囲及び前記第２の範囲の双方の範囲外における前記パネル画像の視認性よりも低い、請求項１に記載の画像表示システム。
【請求項３】
前記検出部は、さらに、前記受付部に対する前記ユーザの第２の指の第２の相対位置を検出し、
前記操作側制御部は、さらに、前記検出部が検出する前記第２の相対位置を示す第２の位置情報を前記画像表示装置に送信し、
前記取得部は、前記操作装置から、さらに、前記第２の位置情報を取得し、
前記表示側制御部は、さらに、
前記第１の位置情報及び前記第２の位置情報に基づいて、前記第１の指及び前記第２の指のうち、操作に利用される可能性がより高い前記第１の指を特定する指特定部を備え、
前記表示用画像では、前記特定されない前記第２の指の前記第２の相対位置に対応する第２の範囲内における前記パネル画像の視認性が、前記第１の範囲及び前記第２の範囲の双方の範囲外における前記パネル画像の視認性に等しい、請求項１に記載の画像表示システム。
【請求項４】
前記表示部は、透光性の部材からなり、
前記生成部は、
（ａ）前記第１の範囲内における前記パネル画像の明度が前記第１の範囲外における前記パネル画像の明度よりも低い、
（ｂ）前記第１の範囲内における前記パネル画像の表示色が黒色単色である、
（ｃ）前記第１の範囲内における前記パネル画像の彩度が前記第１の範囲外における前記パネル画像の彩度よりも低い、
（ｄ）前記第１の範囲内における前記パネル画像がトリミングされている、
のうちの少なくとも１個の条件を満たす前記表示用画像データを生成する、請求項１から３のいずれか一項に記載の画像表示システム。
【請求項５】
前記パネル画像は、前記操作パネルに関係する１個以上の文字画像を含み、
前記表示用画像では、前記１個以上の文字画像は、前記第１の範囲内に配置されているか否かに関わらず、視認可能な態様で表示される、請求項１から４のいずれか一項に記載の画像表示システム。
【請求項６】
前記操作パネルは、隣接して配置される複数個のボタンを含み、
前記パネル画像は、前記複数個のボタンに対応する複数個のボタン画像を含む、請求項１から５のいずれか一項に記載の画像表示システム。
【請求項７】
前記表示用画像では、前記複数個のボタンのうち前記第１の相対位置に配置される特定ボタンを示す画像の視認性が、前記特定ボタンに隣接するボタンを示す画像の視認性よりも低い、請求項６に記載の画像表示システム。
【請求項８】
前記特定の操作は、前記複数個のボタンのうちの特定ボタンを選択するための操作を含み、
前記生成部は、前記表示用画像が表示されている状態で、前記特定の操作情報が取得される場合に、前記表示用画像データを変更して、変更後の表示用画像を表わす変更後の表示用画像データを生成し、
前記変更後の表示画像では、前記特定ボタンを示す画像の表示態様が変更されている、請求項６又は７に記載の画像表示システム。
【請求項９】
前記操作装置は、さらに、
前記本体と前記受付部の少なくとも一方の表面に設けられるマーカを備え、
前記表示側制御部は、さらに、
前記撮影画像がマーカを示すマーカ画像を含む場合に、前記撮影画像中の前記マーカ画像の位置及び姿勢に基づいて、前記特定範囲内における前記受付部の位置及び姿勢を特定する位置特定部を備え、
前記生成部は、前記撮影画像が前記マーカ画像を含む場合に、前記撮影画像データと、前記第１の相対位置と、特定された前記受付部の位置及び姿勢に基づいて、前記表示用画像データを生成する、請求項１から８のいずれか一項に記載の画像表示システム。
【請求項１０】
前記特定処理実行部は、前記表示用画像が表示されている状態で前記特定の操作情報が取得される場合であっても、前記撮影画像が前記マーカ画像を含まない場合には、前記特定処理を実行しない、請求項９に記載の画像表示システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本明細書によって開示される技術は、操作パネルを示すパネル画像を表示するための画像表示システムに関する。
【背景技術】
【０００２】
例えば、特許第４５７４３２３号公報には、タッチパネルを含む現実空間の画像の上に、メニューを表わす仮想空間の画像を重畳して表示する複合現実感提示システムが開示されている。ここで、現実空間画像が、タッチパネルを操作するユーザの指等の肌色の領域を含む場合に、当該領域には仮想空間の画像が重畳されない。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
上記の技術では、上記の領域を色に基づいて検出するので、誤検出を防止するために、システムに設計上の制約が生じる。具体的には、例えば、タッチパネルの色は、ユーザの指等の色（即ち肌色）とは大きく異なる色に制限される。また、例えば、ユーザが手袋を着用する等して、指の見かけ上の色が肌色とは異なる色である場合に、上記の領域を検出することができない可能性がある。そのため、手袋の着用が必要な作業について上記のシステムを適用することは困難である。【０００４】
本明細書では、ユーザの指の位置に対応する範囲の視認性が低下している画像を表示する画像表示システムにおいて、画像表示システムの設計上の制約を軽減する技術を開示する。【０００５】
本明細書によって開示される画像表示システムは、操作装置と、前記操作装置と通信可能に接続されている画像表示装置と、を備えていてもよい。前記操作装置は、本体と、前記本体の表面に露出しており、ユーザの指による操作の入力を受け付ける受付部と、前記受付部に対する前記ユーザの第１の指の第１の相対位置を検出する検出部と、前記検出部が検出する前記第１の相対位置を示す第１の位置情報、及び、前記受付部に入力される前記操作を示す操作情報を、前記画像表示装置に送信する操作側制御部と、を備えていてもよい。前記画像表示装置は、前記ユーザの頭部に装着可能なフレームと、前記フレームに備えられ、前記フレームを装着した前記ユーザの眼に対向する位置に配置される表示部と、前記ユーザの視界範囲に対応する特定範囲を撮影するカメラと、表示側制御部と、を備えていてもよい。前記表示側制御部は、前記操作装置から、前記第１の位置情報及び前記操作情報を取得する取得部と、前記特定範囲内の撮影画像を表わす撮影画像データと、取得された前記第１の位置情報が示す前記第１の相対位置と、に基づいて、特定の操作を入力するための操作パネルを示すパネル画像を含む表示用画像を表わす表示用画像データを生成する生成部であって、前記表示用画像では、前記特定範囲内における前記受付部の位置に対応する範囲に前記パネル画像が配置されており、かつ、前記第１の指の前記第１の相対位置に対応する第１の範囲内における前記パネル画像の視認性が、前記第１の範囲外における前記パネル画像の視認性よりも低い、前記生成部と、前記表示用画像データによって表わされる前記表示用画像を前記表示部に表示させる表示制御部と、前記表示用画像が表示されている状態で、前記受付部において前記特定の操作の入力が受け付けられることを示す特定の操作情報が取得される場合に、前記特定の操作に応じた特定処理を実行する特定処理実行部と、を備えていてもよい。【０００６】
上記の構成によると、画像表示装置は、撮影画像データと、操作装置によって検出される第１の指の第１の相対位置と、に基づいて、表示用画像を表示する。表示用画像では、第１の相対位置に対応する第１の範囲内におけるパネル画像の視認性が、第１の範囲外におけるパネル画像の視認性よりも低い。視認性が低い部分では、ユーザは、当該部分越しに自身の第１の指を視認可能である。ユーザは、パネル画像を見ながら、自身の第１の指の位置を把握することができる。第１の指の第１の相対位置は、第１の指の色に基づかずに、操作装置の検出部によって検出されるので、操作装置の受付部の色は制限されない。また、第１の指の見かけ上の色は、どのような色であってもよいので、例えば手袋の着用が必要な作業について本願の画像表示システムを採用することもできる。即ち、ユーザの指の位置に対応する範囲の視認性が低下している画像を表示する画像表示システムにおいて、画像表示システムの設計上の制約を軽減することができる。【０００７】
前記検出部は、さらに、前記受付部に対する前記ユーザの第２の指の第２の相対位置を検出してもよい。前記操作側制御部は、さらに、前記検出部が検出する前記第２の相対位置を示す第２の位置情報を前記画像表示装置に送信してもよい。前記取得部は、前記操作装置から、さらに、前記第２の位置情報を取得してもよい。前記生成部は、前記撮影画像データと、前記第１の相対位置と、取得された前記第２の位置情報が示す前記第２の相対位置と、に基づいて、前記表示用画像データを生成してもよい。前記表示用画像では、前記第１の範囲内と、前記第２の指の前記第２の相対位置に対応する第２の範囲内と、における前記パネル画像の視認性が、前記第１の範囲及び前記第２の範囲の双方の範囲外における前記パネル画像の視認性よりも低くてもよい。【０００８】
この構成によると、表示用画像を見たユーザは、表示用画像内における第１の指及び第２の指の位置をイメージしやすくなる。ユーザは、複数本の指のそれぞれの位置を把握しながら操作を行い得る。そのため、ユーザが特定の操作を受付部に実行する際の操作性が向上する。【０００９】
前記検出部は、さらに、前記受付部に対する前記ユーザの第２の指の第２の相対位置を検出してもよい。前記操作側制御部は、さらに、前記検出部が検出する前記第２の相対位置を示す第２の位置情報を前記画像表示装置に送信してもよい。前記取得部は、前記操作装置から、さらに、前記第２の位置情報を取得してもよい。前記表示側制御部は、さらに、前記第１の位置情報及び前記第２の位置情報に基づいて、前記第１の指及び前記第２の指のうち、操作に利用される可能性がより高い前記第１の指を特定する指特定部を備えていてもよい。前記表示用画像では、前記特定されない前記第２の指の前記第２の相対位置に対応する第２の範囲内における前記パネル画像の視認性が、前記第１の範囲及び前記第２の範囲の双方の範囲外における前記パネル画像の視認性に等しくてもよい。【００１０】
この構成によると、表示用画像では、操作に利用される可能性が高い第１の指に対応する第１の範囲の視認性が低くされ、第２の指に対応する第２の範囲の視認性は低くされない。そのため、ユーザは、ユーザの各指の操作装置に対する位置関係に関わらず、パネル画像のうち、操作に利用される可能性が高い第１の指に対応する第１の範囲以外の範囲を視認しながら操作を行うことができる。そのため、ユーザの各指によってパネル画像の視認性が過度に低下することが抑制され、ユーザの操作性が向上する。【００１１】
前記表示部は、透光性の部材からなっていてもよい。前記生成部は、（ａ）前記第１の範囲内における前記パネル画像の明度が前記第１の範囲外における前記パネル画像の明度よりも低い、（ｂ）前記第１の範囲内における前記パネル画像の表示色が黒色単色である、（ｃ）前記第１の範囲内における前記パネル画像の彩度が前記第１の範囲外における前記パネル画像の彩度よりも低い、（ｄ）前記第１の範囲内における前記パネル画像がトリミングされている、のうちの少なくとも１個の条件を満たす前記表示用画像データを生成してもよい。【００１２】
前記パネル画像は、前記操作パネルに関係する１個以上の文字画像を含んでいてもよい。前記表示用画像では、前記１個以上の文字画像は、前記第１の範囲内に配置されているか否かに関わらず、視認可能な態様で表示されてもよい。【００１３】
この構成によると、表示用画像を見たユーザは、第１の指の位置に関わらず、パネル画像内の１個以上の文字画像を視認することができるので、操作性が向上する。【００１４】
ここで、「文字画像」内の文字は、平仮名、片仮名、漢字、アルファベット、数字、記号等の他に絵文字（例えばピクトグラム）等も含む。【００１５】
前記操作パネルは、隣接して配置される複数個のボタンを含んでいてもよい。前記パネル画像は、前記複数個のボタンに対応する複数個のボタン画像を含んでいてもよい。【００１６】
前記表示用画像では、前記複数個のボタンのうち前記第１の相対位置に配置される特定ボタンを示す画像の視認性が、前記特定ボタンに隣接するボタンを示す画像の視認性よりも低くてもよい。【００１７】
この構成によると、表示用画像を見たユーザは、各ボタンを示す画像の視認性の差に基づいて、表示用画像内における第１の指の位置をイメージしやすくなるので、ユーザの操作性が向上する。【００１８】
前記特定の操作は、前記複数個のボタンのうちの特定ボタンを選択するための操作を含んでいてもよい。前記生成部は、前記表示用画像が表示されている状態で、前記特定の操作情報が取得される場合に、前記表示用画像データを変更して、変更後の表示用画像を表わす変更後の表示用画像データを生成してもよい。前記変更後の表示画像では、前記特定ボタンを示す画像の表示態様が変更されていてもよい。【００１９】
この構成によると、ユーザは、複数個のボタンのうちのどのボタンを操作したのかを認識しやすくなる。【００２０】
ここで、「画像の表示態様」は、画像の色、画像に含まれる文字のサイズ、形状等を含む。【００２１】
前記操作装置は、さらに、前記本体と前記受付部の少なくとも一方の表面に設けられるマーカを備えていてもよい。前記表示側制御部は、さらに、前記撮影画像がマーカを示すマーカ画像を含む場合に、前記撮影画像中の前記マーカ画像の位置及び姿勢に基づいて、前記特定範囲内における前記受付部の位置及び姿勢を特定する位置特定部を備えていてもよい。前記生成部は、前記撮影画像が前記マーカ画像を含む場合に、前記撮影画像データと、前記第１の相対位置と、特定された前記受付部の位置及び姿勢に基づいて、前記表示用画像データを生成してもよい。【００２２】
この構成によると、画像表示システムは、操作装置の受付部の位置及び姿勢に適合する態様でパネル画像を配置して表示することができる。【００２３】
前記特定処理実行部は、前記表示用画像が表示されている状態で前記特定の操作情報が取得される場合であっても、前記撮影画像が前記マーカ画像を含まない場合には、前記特定処理を実行しなくてもよい。【００２４】
撮影画像がマーカ画像を含まない場合には、マーカ画像の位置及び姿勢に基づいて受付部の位置及び姿勢を特定することができないため、操作装置の受付部の位置に対応する範囲にパネル画像を適切に配置することができない可能性がある。即ち、受付部に対してパネル画像がずれて配置される可能性がある。この構成によると、撮影画像がマーカ画像を含まない場合に、特定の操作の入力が無効になるため、誤操作を抑制することができる。【００２５】
上記の画像表示システムを実現するための制御方法、コンピュータプログラム、及び、当該コンピュータプログラムを格納するコンピュータ読取可能媒体も、新規で有用である。
【図面の簡単な説明】
【００２６】
【図１】画像表示システムの概要を示す。
【図２】操作装置のブロック図を示す。
【図３】画像表示装置のブロック図を示す。
【図４】操作装置の制御部が実行する処理のフローチャートを示す。
【図５】２本の指の相対位置が検出される場合の図を示す。
【図６】図５に対応する上面図を示す。
【図７】画像表示装置の制御部が実行する表示処理のフローチャートを示す。
【図８】撮影画像の一例を示す。
【図９】表示用画像の一例を示す。
【図１０】図９の拡大図を示す。
【図１１】１本の指が検出される場合の表示用画面を示す。
【図１２】図１１に対応する１本の指を示す。
【図１３】２本の指が検出される場合の表示用画像を示す。
【図１４】３本の指が検出される場合の表示用画像を示す。
【図１５】図１４に対応する３本の指を示す。
【図１６】画像表示装置の操作時処理のフローチャートを示す。
【図１７】操作されたボタンの色が変更される様子を示す。
【図１８】スライダーを示すパネル画像を示す。
【図１９】スライダーを操作する場合のパネル画像を示す。
【００２７】
（第１実施例）
（画像表示システム２の構成；図１）
図１に示す画像表示システム２は、ユーザが操作を入力するための操作パネルを示すパネル画像を表示するためのシステムである。画像表示システム２は、操作装置１０と、画像表示装置１００とを備える。操作装置１０と画像表示装置１００とは、無線接続されており、相互に無線通信を実行可能である。【００２８】
（操作装置１０の構成；図１、図２）
操作装置１０は、ユーザが操作を入力するための板形状を有する装置である。操作装置１０は、本体１１と、タッチパッド１２と、通信インターフェース２０と、制御部３０と、メモリ３２と、４個のマーカ４０とを備えている。以下では、インターフェースのことを「Ｉ／Ｆ」と記載する。【００２９】
タッチパッド１２は、本体１１の表面に露出しており、操作の入力を受け付ける。タッチパッド１２は、静電容量式又は電界式のセンサを備えている。タッチパッド１２は、ユーザの指がタッチパッド１２に接近又は接触した場合に、センサを利用して、タッチパッド１２に対する指の相対位置（具体的には、タッチパッド１２の表面における縦方向及び横方向の座標と、タッチパッド１２の表面からの高さ方向の座標）を検出し、相対位置を制御部３０に供給する。【００３０】
通信Ｉ／Ｆ２０は、無線通信を画像表示装置１００と実行するためのＩ／Ｆである。無線通信は、例えば、Ｗｉ−Ｆｉ方式に従った通信であってもよいし、Ｂｌｕｅｔｏｏｔｈ（登録商標）方式に従った通信であってもよい。変形例では、通信Ｉ／Ｆ２０は、有線ケーブルを介した有線通信を画像表示装置１００と実行するためのＩ／Ｆであってもよい。【００３１】
制御部３０は、メモリ３２に記憶されているプログラムに従って、後述の処理（図４参照）を含む様々な処理を実行する。また、制御部３０は、タッチパッド１２と、通信Ｉ／Ｆ２０、及び、メモリ３２と電気的に接続されており、これらの各要素の動作を制御することができる。【００３２】
メモリ３２は、様々なプログラムを記憶している。また、メモリ３２には、後述の図４の処理の実行過程で取得される各種情報を一時的に記憶するための記憶領域が設けられている。【００３３】
４個のマーカ４０は、本体１１とタッチパッド１２との一方の表面に設けられている。４個のマーカ４０は、本体１１の四隅に設けられている。各マーカ４０は、黒塗りの四角形である。なお、変形例では、各マーカ４０は、例えば、黒塗りの四角形と白抜きの四角形との組み合わせであってもよいし、円であってもよいし、三角形であってもよいし、二次元コードであってもよいし、ドットパターンであってもよい。また、各マーカ４０は、所定の形状を有する発光体であってもよい。また、４個のマーカ４０は、本体１１の四隅よりも本体１１の中央部分に近い位置に設けられていてもよい。また、マーカ４０の個数は、３個以下であってもよいし、５個以上であってもよい。例えば、本体１１の外周に沿って１個の環状のマーカ４０が設けられていてもよい。【００３４】
（画像表示装置１００の構成；図１、図３）
画像表示装置１００は、ユーザの頭部に装着して用いられる画像表示装置（いわゆるヘッドマウントディスプレイ）である。図１に示すように、画像表示装置１００は、フレーム１１２と、右表示部１１４Ｒと、左表示部１１４Ｌと、右投影部１１５Ｒと、左投影部１１５Ｌと、右カメラ１１６Ｒと、左カメラ１１６Ｌと、コントロールボックス１１８とを備えている。【００３５】
フレーム１１２は、眼鏡フレーム状の部材である。ユーザは、眼鏡を装着するようにフレーム１１２を装着することによって、画像表示装置１００を頭部に装着することができる。【００３６】
右表示部１１４Ｒ及び左表示部１１４Ｌは、フレーム１１２に備えられている。右表示部１１４Ｒ及び左表示部１１４Ｌは、透光性の表示部材からなる。ユーザが画像表示装置１００を頭部に装着すると、ユーザの右眼に対向する位置に右表示部１１４Ｒが配置され、左眼に対向する位置に左表示部１１４Ｌが配置される。右表示部１１４Ｒ、左表示部１１４Ｌは例えばハーフミラー構造を有しており、右投影部１１５Ｒ、左投影部１１５Ｌから投影される光（即ち画像を構成する光）を反射してユーザの眼に投影し、ユーザの眼に画像を視認させることができる。以下、右表示部１１４Ｒ、左表示部１１４Ｌを総称して「表示部１１４」と呼ぶ場合がある。【００３７】
右投影部１１５Ｒ、左投影部１１５Ｌは、それぞれ、右表示部１１４Ｒ、左表示部１１４Ｌに画像を表わす光を投影する部材である。右投影部１１５Ｒ、左投影部１１５Ｌは、それぞれ、右表示部１１４Ｒ、左表示部１１４Ｌの側部に設けられている。以下、右投影部１１５Ｒ、左投影部１１５Ｌを総称して「投影部１１５」と呼ぶ場合がある。本実施例では、投影部１１５は、制御部１３０の指示に従って、所定の仮想画像（以下では「表示用画像」と呼ぶ）を側方から表示部１１４に投影する。表示部１１４は、投影部１１５から投影された光を反射してユーザの眼に投影する。これにより、ユーザは、表示部１１４越しにユーザが視認可能な現実世界の対象物（例えばタッチパッド１２）又は／及び空間の所定の位置に、上記表示用画像が重畳されたかの様に、現実世界の対象物又は／及び空間と表示用画像とを見ることができる。以下、本明細書では、制御部１３０が、投影部１１５に画像の投影を指示することによって、表示部１１４に所望の画像が表示されているようにユーザに視認させることを説明する場合に、投影部１１５の動作の説明を省略し、単に「制御部１３０が表示部１１４に所望の画像を表示させる」などと表現する場合がある。【００３８】
右カメラ１１６Ｒは、フレーム１１２のうち、右表示部１１４Ｒの上方位置（即ち、ユーザの右眼の上方に対応する位置）に配置されているカメラである。一方、左カメラ１１６Ｌは、フレーム１１２のうち、左表示部１１４Ｌの上方位置（即ち、ユーザの左眼の上方に対応する位置）に配置されているカメラである。右カメラ１１６Ｒと左カメラ１１６Ｌのそれぞれによって、画像表示装置１００を装着するユーザの視界範囲に対応する範囲（以下では「特定範囲」と呼ぶ場合がある）を異なる角度から撮影することができる。即ち、右カメラ１１６Ｒはユーザの右眼の視界範囲を撮影し、左カメラ１１６Ｌはユーザの左眼の視界範囲を撮影すると言うこともできる。また、以下、右カメラ１１６Ｒと左カメラ１１６Ｌを総称して「カメラ１１６」と呼ぶ場合がある。【００３９】
コントロールボックス１１８は、フレーム１１２の一部に内蔵されている制御装置である。コントロールボックス１１８には、画像表示装置１００の制御系統を司る各要素が収容されている。具体的に言うと、図３に示すように、コントロールボックス１１８には、通信Ｉ／Ｆ１２０と、制御部１３０と、メモリ１３２と、が収納されている。他の例では、コントロールボックス１１８は、フレーム１１２とは別個に備えられていてもよい。その場合、コントロールボックス１１８内の各構成要素（通信Ｉ／Ｆ１２０、制御部１３０、メモリ１３２）と、フレーム１１２に備え付けられた各構成要素（投影部１１５、カメラ１１６等）とがケーブル等によって電気的に接続されていればよい。【００４０】
通信Ｉ／Ｆ１２０は、通信Ｉ／Ｆ２０と同様である。制御部１３０は、メモリ１３２に記憶されているプログラムに従って、後述の表示処理（図７参照）及び操作時処理（図１６参照）を含む様々な処理を実行する。また、制御部１３０は、投影部１１５、カメラ１１６、通信Ｉ／Ｆ１２０、及び、メモリ１３２と電気的に接続されており、これらの各要素の動作を制御することができる。【００４１】
メモリ１３２は、様々なプログラムを記憶している。また、メモリ１３２には、後述の表示処理及び操作時処理の実行過程で取得される各種情報を一時的に記憶するための記憶領域が設けられている。【００４２】
（操作装置１０の処理；図４）
操作装置１０の制御部３０が実行する処理を説明する。操作装置１０の電源がオンされると、制御部３０は図４の処理を開始する。Ｓ１０では、制御部３０は、タッチパッド１２に対する指の相対位置を検出することを監視する。ユーザの指がタッチパッド１２の検出可能範囲内に入ると（図５、図６参照）、タッチパッド１２は、タッチパッド１２に対する指の相対位置を検出する。タッチパッド１２は、検出された相対位置を示す情報を制御部３０に供給する。制御部３０は、タッチパッド１２から、検出された指の相対位置を示す情報を取得した場合に、相対位置を検出したと判断し（Ｓ１０でＹＥＳ）、Ｓ２０に進む。【００４３】
Ｓ２０では、制御部３０は、ユーザの指による操作の入力をタッチパッド１２を介して受け付けたか否かを判断する。具体的には、制御部３０は、取得された相対位置に基づいて、指とタッチパッド１２との距離が所定距離よりも短いか否かを判断する。制御部３０は、指とタッチパッド１２との距離が所定距離よりも短い場合に、操作の入力を受け付けたと判断し（Ｓ２０でＹＥＳ）、Ｓ３０に進む。一方、制御部３０は、指とタッチパッド１２との距離が所定距離以上である場合に、操作の入力を受け付けなかったと判断し（Ｓ２０でＮＯ）、Ｓ４０に進む。【００４４】
Ｓ３０では、制御部３０は、複数個のボタンのうちの１個のボタンを選択されたことを示す操作情報を通信Ｉ／Ｆ２０を介して画像表示装置１００に送信する。操作情報は、検出された相対位置を含む。制御部３０は、Ｓ３０を終了すると、Ｓ１０に戻る。【００４５】
Ｓ４０では、制御部３０は、検出された相対位置を示す指位置情報を通信Ｉ／Ｆ２０を介して画像表示装置１００に送信する。Ｓ４０を終えると、制御部３０は、Ｓ１０の監視に戻る。図５、図６には、Ｓ４０が実行される場合の一例が示されている。図５、図６の例では、Ｓ４０において人差し指の相対位置Ｐ１を示す指位置情報が送信された後に、Ｓ１０、Ｓ２０で再びＹＥＳと判断され、その後のＳ４０において親指の位置Ｐ２を示す指位置情報が送信される。制御部３０は、Ｓ４０を終了すると、Ｓ１０に戻る。【００４６】
（画像表示装置１００の表示処理；図７）
続いて、画像表示装置１００の制御部１３０が実行する表示処理について説明する。画像表示装置１００の電源がオンされると、制御部１３０は図７の処理を開始する。Ｓ１１０では、制御部１３０は、カメラ１１６から撮影画像データを取得することを監視する。制御部１３０は、撮影画像データを取得した場合（Ｓ１１０でＹＥＳ）に、Ｓ１２０に進む。【００４７】
Ｓ１２０では、制御部１３０は、取得された撮影画像データによって示される撮影画像が、４個のマーカ４０を示す４個のマーカ画像のうちの少なくとも１個のマーカ画像を含むのか否かを判断する。制御部１３０は、撮影画像が、少なくとも１個のマーカ画像を含むと判断する場合（Ｓ１２０でＹＥＳ）に、Ｓ１３０に進む。一方、制御部１３０は、撮影画像が、いずれのマーカ画像も含まないと判断する場合（Ｓ１２０でＮＯ）に、Ｓ１１０に戻る。なお、変形例では、制御部１３０は、撮影画像が少なくとも２個のマーカ画像を含むことを条件に、Ｓ１２０でＹＥＳと判断してもよいし、撮影画像が少なくとも３個のマーカ画像を含むことを条件に、Ｓ１２０でＹＥＳと判断してもよいし、撮影画像が４個のマーカ画像を含むことを条件に、Ｓ１２０でＹＥＳと判断してもよい。【００４８】
Ｓ１３０では、制御部１３０は、撮影画像中のマーカ画像の位置及び姿勢に基づいて、特定範囲（即ち撮影範囲）内におけるタッチパッド１２の位置及び姿勢を特定する。図８には、撮影画像Ｉ１及びマーカ画像Ｉ２の一例が示されている。【００４９】
Ｓ１４０では、制御部１３０は、ユーザが操作を入力するためのキーボードを示すパネル画像を含む表示用画面を表わす表示用画像データを、撮影画像データと、特定されたタッチパッド１２の位置及び姿勢と、に基づいて生成する。表示用画像では、特定範囲内におけるタッチパッド１２の位置に対応する範囲にパネル画像が配置されている。図９には、パネル画像Ｉ３を含む表示用画像Ｉ４の一例が示されている。なお、パネル画像Ｉ３は、文字画像を含むが、図９では、文字画像を図示省略している。図１０には、パネル画像Ｉ３の一部の拡大図が示されている。パネル画像Ｉ３によって示される操作パネルは、隣接して配置される複数個のボタンを含む。パネル画像Ｉ３は、複数個のボタンに対応する複数個のボタン画像を含む。文字キーに対応する各ボタン画像は、１個の文字画像（例えば「Ｇ」等）を含む。ここで、文字画像内の文字は、「Ｇ」等のアルファベットの他に、平仮名、片仮名、漢字、アルファベット、数字、記号、絵文字等であってもよい。なお、ハッチングにより示される部分は、明度が比較的に高い部分であり、それ以外の部分（例えば文字「Ｇ」の周囲の部分）は、明度が比較的に低い部分である。明度が比較的に高い部分は、ユーザによる視認性が高い（即ち表示用画像が明るくはっきりと視認され易い）部分であり、明度が比較的に低い部分は、ユーザによる視認性が低い（即ち表示用画像が視認されにくい）部分であると言い換えることができる。【００５０】
Ｓ１５０では、制御部１３０は、所定期間内に、通信Ｉ／Ｆ１２０を介して、操作装置１０から指位置情報（図４のＳ４０参照）を取得したのか否かを判断する。制御部１３０は、所定期間内に、操作装置１０から指位置情報を取得した場合（Ｓ１５０でＹＥＳ）に、Ｓ１６０に進み、所定期間内に、操作装置１０から指位置情報を取得しなかった場合（Ｓ１５０でＮＯ）に、Ｓ１７０に進む。【００５１】
Ｓ１６０では、制御部１３０は、取得された指位置情報に基づいて、表示用画像データを修正する。具体的には、制御部１３０は、指位置情報によって示される相対位置に対応する範囲（以下では「指範囲」と呼ぶ）内におけるパネル画像の明度を、指範囲外におけるパネル画像の明度よりも低くする。これにより、指範囲内におけるパネル画像の視認性が、指範囲外におけるパネル画像の視認性よりも低くなる。【００５２】
Ｓ１７０では、制御部１３０は、表示用画像データによって表わされる表示用画像を表示部１１４に表示させる。なお、Ｓ１６０において表示用画像データが修正されている場合では、Ｓ１７０において、修正後の表示用画像データによって表わされる修正後の表示用画像が表示される。図１１には、修正後の表示用画像の一例が示され、図１２には、図１１に対応する人指し指の相対位置Ｐ３が示されている。図１１では、相対位置Ｐ３に対応する指範囲では、文字「Ｇ」を除いた部分の明度が周囲の明度よりも低くなっている。これにより、ボタン「Ｇ」を示す画像の視認性が、ボタン「Ｇ」に隣接するボタンを示す画像の視認性よりも低くなっている。視認性が低い部分では、ユーザは、当該部分越しに自分の指を視認可能である。反対に視認性が高い部分では、ユーザは当該領域越しに自身の指等を視認することはできない。即ち、図１１の例では、ユーザは、ボタン「Ｇ」の中心の視認性が低い部分越しに、自身の人差し指（図１２参照）の指先部分を視認することができる。そして、その他の部分越しに自身の指等（例えば手の甲等）を視認することはできない。ただし、図１１の例では、ボタン「Ｇ」を示す画像において、文字「Ｇ」の部分は、指範囲内に配置されていても、明度が維持されているので、視認可能である。即ち、ユーザは、指によって隠されることなく文字「Ｇ」の部分を視認可能である。ユーザの指によって、ボタンに描かれる文字が覆われないため、ユーザの操作性が阻害されることもない。また、ボタン「Ｇ」を示す画像と、当該画像に隣接するボタンの画像とは、その周辺の画像よりも大きく表示されている。そのため、ユーザは、自身が人差し指で操作しようとしているボタンが「Ｇ」に対応するボタンであることを容易に把握することができ、ボタン「Ｇ」を示す画像が小さく表示されている場合に比べてボタン「Ｇ」を示す画像を操作しやすくなる。なお、変形例では、指を示すマークが、表示用画像内の相対位置Ｐ３に表示されてもよい。また、別の変形例では、ボタン「Ｇ」を示す画像を中心にして、当該画像に隣接するボタンの画像が放射状に拡散されて表示されてもよい。そして、相対位置Ｐ３が、ボタン「Ｇ」を示す画像から離れた場合に、当該隣接するボタンの画像が拡散前の位置に戻って表示されてもよい。Ｓ１７０を終えると、制御部３０は、Ｓ１１０の監視に戻る。【００５３】
図１３には、２本の指の位置が検出される場合の表示用画像の一例が示されている。図１３の相対位置Ｐ１，Ｐ２は、それぞれ、図５の人差し指、親指の相対位置Ｐ１，Ｐ２に対応する。図１３では、相対位置Ｐ１，Ｐ２に対応する指範囲では、文字「Ｇ」、「Ｖ」を除いた部分の明度が周囲の明度よりも低くなっている。これにより、ボタン「Ｇ」、「Ｖ」を示す画像の視認性が、それぞれ、ボタン「Ｇ」、「Ｖ」に隣接するボタンを示す画像の視認性よりも低くなっている。さらに、相対位置Ｐ１，Ｐ２に対応する指範囲の間の範囲でも、明度が周囲の明度よりも低くなっており、視認性が周囲の視認性よりも低くなっている。また、ボタン「Ｇ」、「Ｖ」を示す画像は、ボタン「Ｇ」、「Ｖ」に隣接するボタンを示す画像よりも大きい。【００５４】
図１４には、３本の指の位置が検出される場合の表示用画像の一例が示され、図１５には、図１４に対応する人指し指、中指、親指の相対位置Ｐ４〜Ｐ６が示されている。図１５の指の姿勢は、ユーザが表示用画像内のオブジェクトを拡大又は縮小表示させるための操作（いわゆるピンチアウト、ピンチイン）を実行する際の姿勢である。図１４では、相対位置Ｐ４〜Ｐ６に対応する指範囲では、パネル画像の明度が周囲の明度よりも低くなっている。また、相対位置Ｐ４〜Ｐ６をつなぐ範囲でも、明度が周囲の明度よりも低くなっており、視認性が周囲の視認性よりも低くなっている。【００５５】
（画像表示装置１００の操作時処理；図１６）
続いて、画像表示装置１００の制御部１３０が実行する操作時処理について説明する。Ｓ２１０では、制御部１３０は、通信Ｉ／Ｆ１２０を介して、操作装置１０から操作情報（図４のＳ３０参照）を受信することを監視する。制御部１３０は、通信Ｉ／Ｆ１２０を介して、操作装置１０から操作情報を受信すると判断する場合（Ｓ２１０）に、Ｓ２２０に進む。Ｓ２２０は、図７のＳ１２０と同様である。【００５６】
Ｓ２３０では、制御部１３０は、表示用画像データを変更して、変更後の表示用画像を表わす変更後の表示用画像データを生成する。具体的には、制御部１３０は、操作情報に含まれる相対位置に基づいて、表示用画像内で操作されたボタン（以下「対象ボタン」と呼ぶ）を特定し、特定された対象ボタンを示す画像の色が変更されている表示用画像を表わす表示用画像データを生成する。【００５７】
Ｓ２３５では、制御部１３０は、変更後の表示用画像を表示部１１４に表示させる。図１７には、対象ボタン「Ｇ」を示す画像の色が変更されている様子が示されている。Ｓ２３０では、制御部１３０は、対象ボタンに入力された操作に応じた処理を実行する。制御部１３０は、Ｓ２４０を終了すると、図１６の処理を終了する。【００５８】
（作用効果）
撮影画像に基づいてユーザの指の領域を検出する比較例の画像表示システムが想定される。比較例の画像表示システムでは、画像表示装置は、撮影画像に含まれる指の色（例えば黄色人種の場合は薄いオレンジ色）の領域を指の領域として抽出し、指の色の領域の視認性がその他の領域の視認性よりも低い表示用画像をタッチパッド１２に重畳して表示する。比較例では、仮にタッチパッド１２が指の色に近い色である場合に、タッチパッド１２の領域が誤検出され、タッチパッド１２に対応する領域の視認性が低くなる可能性がある。そのため、タッチパッド１２の色が制限される。また、例えばユーザが手袋を着用する等したことにより、指の見かけ上の色が所定の指の色とは異なる場合に、指の領域を検出することができない可能性がある。そのため、手袋の着用が必要な作業について上記の画像システムを適用することが困難である。【００５９】
一方、本実施例の画像表示装置１００は、撮影画像データと、操作装置１０によって検出される指の相対位置と、に基づいて、表示用画像を表示する（図７のＳ１７０）。表示用画像では、相対位置に対応する範囲内におけるパネル画像の視認性が、当該範囲外におけるパネル画像の視認性よりも低い（図１１等）。上記の通り、視認性が低い部分では、ユーザは、当該部分越しに自分の指を視認可能である。反対に、視認性が高い領域では、ユーザは当該部分越しに自身の指を視認することはできない。ユーザは、パネル画像を見ながら、自身がタッチパッド１２に近づけている指（図１２の人差し指等）の位置を把握することができる。タッチパッド１２に対する指の相対位置は、指の色に基づかずに、操作装置１０によって検出されるので、タッチパッド１２の色は制限されない。また、指の見かけ上の色は、どのような色であってもよいので、例えば手袋の着用が必要な作業について本実施例の画像表示システム２を採用することもできる。即ち、画像表示システム２の設計上の制約を軽減することができる。【００６０】
また、本実施例では、図１３に示されるように、２本の指の相対位置Ｐ１、Ｐ２が検出される場合に、表示用画像では、２本の指の相対位置Ｐ１，Ｐ２に対応する範囲内におけるパネル画像の視認性が、範囲外におけるパネル画像の視認性よりも低くなる。表示用画像を見たユーザは、視認性の低い部分越しに自分の２本の指を視認可能である。そのため、表示用画像を見たユーザは、表示用画像内における２本の指の位置をイメージしやすくなる。ユーザは、２本の指のそれぞれの位置を把握しながら操作を行うことができる。そのため、ユーザが操作をタッチパッド１２に実行する際の操作性が向上する。【００６１】
また、本実施例では、図１１等に示されるように、各文字画像は、指の相対位置Ｐ３に対応する範囲内に配置されているか否かに関わらず、視認可能である。そのため、ユーザは、指によって隠されることなく文字画像を視認可能である。ユーザの指によって、文字画像が隠されることがないため、ユーザの操作性が阻害されることもない。【００６２】
また、本実施例では、図１７に示されるように、操作されたボタン「Ｇ」を示す画像の色が変更される。これにより、ユーザは、複数個のボタンのうちのどのボタンを操作したのかを認識しやすくなる。【００６３】
また、本実施例では、画像表示システム２は、タッチパッド１２の位置及び姿勢を利用して、表示用画像を表わす表示用画像データを生成し（図７のＳ１４０）、タッチパッド１２の位置及び姿勢に適合する態様で表示用画像を表示する（Ｓ１７０）。これにより、ユーザは、タッチパッド１２の見え方に応じたパネル画像を見ることができる。【００６４】
また、撮影画像がマーカ画像を含まない場合（図７のＳ１２０でＮＯ）には、マーカ画像の位置及び姿勢に基づいてタッチパッド１２の位置及び姿勢を特定することができないため、タッチパッド１２の位置に対応する範囲にパネル画像を適切に配置することができない可能性がある。即ち、タッチパッド１２に対してパネル画像がずれて配置される可能性がある。画像表示装置１００は、操作情報が取得されても（図１６のＳ２１０でＹＥＳ）、撮影画像がマーカ画像を含まない場合（Ｓ２２０でＮＯ）に、操作を実行しないので、誤操作を抑制することができる。【００６５】
本実施例と請求の範囲の対応関係を説明しておく。図５の人差し指、親指が、それぞれ、「第１の指」、「第２の指」の一例である。図１１のボタン「Ｇ」が、「特定ボタン」の一例である。【００６６】
（第２実施例）
第１実施例とは異なる点を説明する。本実施例では、図７のＳ１５５において、制御部１３０は、Ｓ１５０において複数本の指に対応する複数の指位置情報が取得された場合に、複数本の指のうち、操作に利用される可能性が最も高い指を特定する。具体的には、制御部１３０は、複数本の指のうち、指位置情報によって示される高さ方向の座標が最も小さい（即ち、タッチパッド１２に最も近い）指を特定する。図５の例では、親指及び人差し指のうち、タッチパッド１２により近い人差し指が特定される。なお、制御部１３０は、Ｓ１５０において１本の指に対応する指位置情報のみが取得された場合には、当該１本の指を特定する。【００６７】
Ｓ１６０では、制御部１３０は、Ｓ１５５において特定された指に対応する指位置情報に基づいて、表示用画像データを修正する。具体的には、制御部１３０は、特定された指位置情報によって示される相対位置に対応する指範囲内におけるパネル画像の明度を、指範囲外におけるパネル画像の明度よりも低くする。これにより、操作に利用される可能性が最も高い指に対応する第１の指範囲内におけるパネル画像の視認性が、第１の指範囲外におけるパネル画像の視認性よりも低くなる。そして、操作に利用される可能性が低い指に対応する第２の指範囲内におけるパネル画像の視認性が、第１の指範囲及び第２の指範囲の双方の範囲外におけるパネル画像の視認性に等しくなる。例えば、図５の指の姿勢に応じて、図１１の表示用画像が表示される。視認性が低い第１の指範囲内（図１１の例では相対位置Ｐ１の周辺）におけるパネル画像では、ユーザは、パネル画像越しに自分の指を視認可能である。反対に視認性が高い第１の指範囲外におけるパネル画像では、ユーザはパネル画像越しに自身の指等を視認することはできない。そのため、ユーザは、ユーザの各指のタッチパッド１２に対する位置関係に関わらず、パネル画像のうち、操作に利用される可能性が最も高い指に対応する第１の範囲以外の範囲を視認しながら操作を行うことができる。そのため、ユーザの各指によってパネル画像の視認性が過度に低下することが抑制され、ユーザの操作性が向上する。【００６８】
（第２実施例の効果）
本実施例でも、第１実施例と同様に、画像表示システム２の設計上の制約を軽減することができる。また、本実施例では、複数本の指について、操作に利用される可能性に応じてパネル画像の視認性が変わるので、表示用画像を見たユーザは、タッチパッド１２に対する指の位置をイメージしやすくなり、ユーザの操作性が向上する。また、操作に利用される可能性が低い指に対応する範囲内におけるパネル画像の視認性が低くならないので、パネル画像が見やすくなる。【００６９】
（第３実施例）
第１実施例とは異なる点を説明する。本実施例では、制御部１３０は、図７のＳ１６０において、指範囲内におけるパネル画像を黒色単色に変更することによって表示用画像データを修正し、Ｓ１７０において、修正後の表示用画像データによって表わされる表示用画像を表示部１１４に表示させる。これにより、指範囲内におけるパネル画像の視認性が、指範囲外におけるパネル画像の視認性よりも低くなる。ユーザは、黒色単色で表示される部分越しに自分の指を視認することができる。本実施例でも、画像表示システム２の設計上の制約を軽減することができる。【００７０】
（第４実施例）
第１実施例とは異なる点を説明する。本実施例では、制御部１３０は、図７のＳ１６０において、指範囲内におけるパネル画像の彩度を、指範囲外におけるパネル画像の彩度よりも低くすることによって表示用画像データを修正し、Ｓ１７０において、修正後の表示用画像データによって表わされる表示用画像を表示部１１４に表示させる。これにより、指範囲内におけるパネル画像の視認性が、指範囲外におけるパネル画像の視認性よりも低くなる。ユーザは、彩度が低い部分越しに自分の指を視認することができる。本実施例でも、画像表示システム２の設計上の制約を軽減することができる。【００７１】
（第５実施例）
第１実施例とは異なる点を説明する。本実施例では、制御部１３０は、図７のＳ１６０において、指範囲内におけるパネル画像をトリミングすることによって表示用画像データを修正し、Ｓ１７０において、修正後の表示用画像データによって表わされる表示用画像を表示部１１４に表示させる。これにより、指範囲内におけるパネル画像の視認性が、指範囲外におけるパネル画像の視認性よりも低くなる。ユーザは、トリミングされた部分越しに自分の指を視認することができる。本実施例でも、画像表示システム２の設計上の制約を軽減することができる。【００７２】
以上、実施例を詳細に説明したが、これらは例示に過ぎず、請求の範囲を限定するものではない。請求の範囲に記載の技術には、以上に例示した具体例を様々に変形、変更したものが含まれる。例えば、以下の変形例を採用してもよい。【００７３】
（変形例１）上記の各実施例では、画像表示装置１００の表示部１１４は、透光性のディスプレイである。これに限られず、画像表示装置１００の表示部１１４は遮光性のディスプレイであって、ユーザが画像表示装置１００を装着した際にユーザの視界を遮るものであってもよい。その場合、制御部１３０は、カメラ１１６で撮影されるカメラ画像（即ち、ユーザの視界範囲に対応する画像）を表示部に表示させてもよい。また、表示処理（図７参照）では、制御部１３０は、表示部１１４に表示されるカメラ画像に表示用画像を重畳させて表示させるようにしてもよい。【００７４】
（変形例２）上記の各実施例では、パネル画像は、キーボードを示す画像であるが、変形例では、図１８に示されるように、画像の明度等を調節するためのスライダーを示す画像であってもよい。図１９では、指の相対位置Ｐ７がスライダーを示すパネル画像に含まれており、指の相対位置Ｐ７に対応する指範囲内におけるパネル画像の視認性が、指範囲外におけるパネル画像の視認性よりも低くなっている。また、パネル画像の形状が変化している。即ち、「操作パネル」は、キーボードのみならず、スライダー等を含む。また、「パネル画像」は、文字画像を含まなくてもよい。また、「操作パネル」は、隣接して配置される複数個のボタンを含まなくてもよい。【００７５】
（変形例３）上記の各実施例では、操作されたボタンを示す画像の色が変更されるが、変形例では、例えば、操作されたボタンのみを周辺のボタンよりも大きくしてもよいし、形状を変更させてもよいし、操作されたボタンに影を付けてもよいし、操作されたボタンを示す画像に隣接するボタンを示す画像が周囲に拡散してもよい。即ち、「表示態様」とは、大きさ、形状、強調等の態様を含む。【００７６】
（変形例４）変形例では、操作装置１０は、マーカ４０を備えていなくてもよく、画像表示装置１００は、図７のＳ１２０を省略して、Ｓ１３０において、例えば、撮影画像内の操作装置１０を示す画像の輪郭に基づいて、タッチパッド１２の位置及び姿勢を特定してもよい。即ち、「操作装置」は、マーカを備えていなくてもよい。【００７７】
（変形例５）画像表示装置１００は、図１６のＳ２２０を省略してＳ２２０に進んでもよい。即ち、「特定処理実行部」は、表示用画像が表示されている状態で特定の操作情報が取得される場合に、撮影画像がマーカ画像を含まなくても、特定処理を実行してもよい。【００７８】
（変形例６）上記の各実施例では、画像表示装置１００は、略眼鏡状のフレームを有しており、眼鏡を装着するようにユーザの頭部に装着可能なものである。これに限られず、画像表示装置は、ユーザの頭部に装着可能であれば、帽子状、ヘルメット状等、任意の支持枠を有していてもよい。【００７９】
（変形例７）画像表示装置は、視力矯正、目の保護等の用途のために一般的に使用されているアイウェア（眼鏡、サングラス等）に、カメラ及びコントロールボックス等を装着することによって形成されてもよい。その場合、アイウェアのレンズ部分が表示部として利用されてもよい。【００８０】
（変形例８）上記の実施例では、画像表示装置１００は、右カメラ１１６と左カメラ１１６の２個のカメラを有するが、カメラの数は１個であってもよい。また、画像表示装置１００は、右表示部１１４Ｒと左表示部１１４Ｌとのうちの一方のみを有していてもよい。【００８１】
また、本明細書または図面に説明した技術要素は、単独であるいは各種の組合せによって技術的有用性を発揮するものであり、出願時請求項記載の組合せに限定されるものではない。また、本明細書または図面に例示した技術は複数目的を同時に達成するものであり、そのうちの一つの目的を達成すること自体で技術的有用性を持つものである。
【図１】
2018179069.tif 000003
【図２】
2018179069.tif 000004
【図３】
2018179069.tif 000005
【図４】
2018179069.tif 000006
【図５】
2018179069.tif 000007
【図６】
2018179069.tif 000008
【図７】
2018179069.tif 000009
【図８】
2018179069.tif 000010
【図９】
2018179069.tif 000011
【図１０】
2018179069.tif 000012
【図１１】
2018179069.tif 000013
【図１２】
2018179069.tif 000014
【図１３】
2018179069.tif 000015
【図１４】
2018179069.tif 000016
【図１５】
2018179069.tif 000017
【図１６】
2018179069.tif 000018
【図１７】
2018179069.tif 000019
【図１８】
2018179069.tif 000020
【図１９】
2018179069.tif 000021
【国際調査報告】
2018179069.tif 000022
2018179069.tif 000023
2018179069.tif 000024
2018179069.tif 000025