(57)【要約】【課題】情報呈示装置の使用状況に応じてユーザインターフェイスを自動的に切り換えること。【解決手段】対象物の像とともに当該対象物と関連する情報を操作者に呈示する情報呈示装置１０を、上記操作者が操作を行う操作部１３または当該操作者に対して情報を呈示する表示部（情報表示部１２及び透明反射板１１）を含むユーザインターフェイス部１４と、上記操作部または上記表示部の姿勢を検出または推定し、当該検出または推定された姿勢に基づいて上記ユーザインターフェイス部の動作または機能を切り換えるユーザインターフェイス制御部２１と、により構成する。【選択図】    図１
2006146700.tif 000002
【特許請求の範囲】
【請求項１】
対象物の像とともに当該対象物と関連する情報を操作者に呈示する情報呈示装置であって、
上記操作者が操作を行う操作部または当該操作者に対して情報を呈示する表示部を含むユーザインターフェイス部と、
上記操作部または上記表示部の姿勢を検出または推定し、当該検出または推定された姿勢に基づいて上記ユーザインターフェイス部の動作または機能を切り換えるユーザインターフェイス切り換え部と、
を具備することを特徴とする情報呈示装置。
【請求項２】
上記表示部は、上記対象物の実像と所定の情報を表す所定の画像とを重畳して、上記操作者に表示することを特徴とする請求項１に記載の情報呈示装置。
【請求項３】
上記所定の画像として、入力された画像に関連する情報または画像を生成する画像情報生成部を更に具備することを特徴とする請求項２に記載の情報呈示装置。
【請求項４】
上記操作者に装着または保持される形態を複数有することを特徴とする請求項１に記載の情報呈示装置。
【請求項５】
上記複数の形態において、上記表示部と上記操作部の実質的な相対的位置関係は同じであることを特徴とする請求項４に記載の情報呈示装置。
【請求項６】
上記複数の形態において、上記表示部に表示される画像の向きが異なることを特徴とする請求項４に記載の情報呈示装置。
【請求項７】
上記複数の形態において、上記表示部は上記操作者の側部に装着または保持されることを特徴とする請求項４に記載の情報呈示装置。
【請求項８】
上記ユーザインターフェイス制御部は、
上記ユーザインターフェイス部の姿勢を推定または検出する姿勢推定／検出部と、
上記姿勢推定／検出部の推定または検出結果に基づいて、上記操作部に割り付けられた機能を切り換える操作指示判定部と、
上記姿勢推定／検出部の推定または検出結果に基づいて、上記表示部に表示する画像を変換する表示変換部と、
を有することを特徴とする請求項１に記載の情報呈示装置。
【請求項９】
上記姿勢推定／検出部は、上記ユーザインターフェイス部の相対的な上または下方向を検出することを特徴とする請求項８に記載の情報呈示装置。
【請求項１０】
上記姿勢推定／検出部は、重力方向を検出する重力センサを含むことを特徴とする請求項８に記載の情報呈示装置。
【請求項１１】
上記姿勢推定／検出部は、相対的に上または下側の上記操作部の操作を促す表示が上記表示部にされた後の上記操作者の操作に基づいて、上記ユーザインターフェイス部の姿勢を推定することを特徴とする請求項８に記載の情報呈示装置。
【請求項１２】
上記姿勢推定／検出部は、実世界中の絶対座標系における位置姿勢及び光学的特徴が既知であるマーカをカメラで撮影した画像を利用して、当該マーカの撮影時における当該カメラの姿勢を推定する位置姿勢判定部を含むことを特徴とする請求項８に記載の情報呈示装置。
【請求項１３】
上記位置姿勢判定部の出力は、上記表示部に表示する画像を生成する際に利用されることを特徴とする請求項１２に記載の情報呈示装置。
【請求項１４】
上記表示変換部は、上記姿勢推定／検出部の出力に基づいて、上記表示部の動作を切り換えることを特徴とする請求項８に記載の情報呈示装置。
【請求項１５】
上記表示変換部によって切り換えられる上記表示部の動作は、当該報表示部に表示される画像の向きであることを特徴とする請求項１４に記載の情報呈示装置。
【請求項１６】
上記操作指示判定部は、上記姿勢推定／検出部の出力に基づいて、上記操作部に割り付けられる機能を切り換えることを特徴とする請求項８に記載の情報呈示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、対象物の像とともに当該対象物と関連する情報を操作者に呈示する情報呈示装置に関する。
【背景技術】
【０００２】
携帯型の情報呈示装置として、例えば、特許文献１や特許文献２に開示されているようなオプティカシースルー型情報呈示装置が知られている。これは、操作者の視線上にハーフミラー等が配置されるように情報呈示装置を操作者の側頭部に保持させ、そのハーフミラーを透過して観察される観察対象の実像上に、情報表示部により所定の画像を重畳表示することで情報提示を行うというものである。
【０００３】
また、特許文献３には、表示部と操作部を有した折り畳み式の携帯情報端末において、その開閉姿勢に応じて表示部の表示の向きを適切に変換して表示する技術が開示されている。
【特許文献１】特開平５−３２３２２９号公報
【特許文献２】特開平５−３０３０５４号公報
【特許文献３】特開２００３−１７４４９５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
上記特許文献１や特許文献２に開示されているような携帯型の情報呈示装置では、操作者やその使用する状況により、当該情報呈示装置を見るのに使用する眼（右眼か左眼）及び装置を保持する手（右手か左手）が異なる。従って、情報呈示装置の使用状況に応じて、ユーザインターフェイス、つまり表示する画像の向きや操作部のボタンの役割を切り換える必要がある。しかしながら、従来は、その切り換えを操作者が操作する切り換えスイッチによって行っていたため、煩雑であった。
【０００５】
ここで、表示の向きの切り換えについては、上記特許文献３に開示されているような技術があるが、その技術は表示を見るのに使用する眼とは無関係であり、その技術を上記のような情報呈示装置にそのまま適用することはできない。
【０００６】
本発明は、上記の点に鑑みてなされたもので、使用状況に応じてユーザインターフェイスを自動的に切り換えることの可能な情報呈示装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の情報呈示装置の一態様は、対象物の像とともに当該対象物と関連する情報を操作者に呈示する情報呈示装置であって、
上記操作者が操作を行う操作部または当該操作者に対して情報を呈示する表示部を含むユーザインターフェイス部と、
上記操作部または上記表示部の姿勢を検出または推定し、当該検出または推定された姿勢に基づいて上記ユーザインターフェイス部の動作または機能を切り換えるユーザインターフェイス切り換え部と、
を具備することを特徴とする。
【発明の効果】
【０００８】
本発明によれば、使用状況に応じてユーザインターフェイスを自動的に切り換えることの可能な情報呈示装置を提供することができる。
【発明を実施するための最良の形態】
【０００９】
以下、本発明を実施するための最良の形態を図面を参照して説明する。
【００１０】
［第１実施形態］
図１（Ａ）は、本発明の第１実施形態に係る情報呈示装置１０の外観を示す斜視図であり、図１（Ｂ）はその情報呈示装置１０のブロック構成図である。
【００１１】
この情報呈示装置１０は、操作者前方の所定の位置の画面上に所定の情報を表す所定の画像（文字、記号または画像等で構成された情報）を表示する表示部を有しているもので、この表示部は、ハーフミラーである透明反射板１１と液晶ディスプレイ等の情報表示部１２とを含む。透明反射板１１は透過機能を有しているので、図２（Ａ）に示すように、操作者１００が自身の右手１０１で情報呈示装置１０を保持し、操作者頭部１０２にその情報呈示装置１０を当てて右眼１０３で覗いたとき、該透明反射板１１を透過して観察対象の実像を観察することができる。さらに、この透明反射板１１の反射機能により、図２（Ｂ）に示すように、上記情報表示部１２に表示した上記所定の画像の投影像がその反射面で右眼球１０３Ａに向けて反射され、上記所定の画像も上記観察対象の実像に重畳させて操作者１００に観察させることができる。即ち、透明反射板１１を表示画面とすることができる。
【００１２】
また、情報呈示装置１０は、操作者１００が操作を行う複数個の操作ボタンを含む操作部１３を有している。この操作部１３は、図３（Ａ）に示すように、操作者１００が右眼１０３で観察を行う保持または装着の形態において上側となる情報呈示装置１０の側面に配された複数個の操作ボタン（例えば、Ａボタン１３Ａ及びＢボタン１３Ｂ）と、図３（Ｂ）に示すように、操作者１００が左眼１０４で観察を行う保持または装着の形態において上側となる情報呈示装置１０の側面に配された複数個の操作ボタン（例えば、Ｃボタン１３Ｃ及びＤボタン１３Ｄ）とを含む。このように、操作ボタンを情報呈示装置１０の両側に配置することで、操作者１００の利き目、利き腕により使用形態の自由度を増やすことが可能となっている。
【００１３】
上記情報表示部１２（及び透明反射板１１）と操作部１３とは、ユーザインターフェイス部１４を構成する。
【００１４】
また、情報呈示装置１０は、操作者１００が透明反射板１１を介して観察している観察対象を含む画像を撮影するためのカメラである画像入力部１５と、上記情報表示部１２に表示して観察対象の実像に重畳表示させるべき情報または画像を、上記画像入力部１５から入力された画像を基に検索する表示情報検索部１６とを有している。即ち、これら画像入力部１５と表示情報検索部１６とは、上記表示部に表示する所定の画像としての、入力画像に関連する情報または画像を生成する画像生成部１７を構成する。
【００１５】
なお、情報呈示装置１０の保持または装着の形態として、上記表示部と上記操作部１３の実質的な相対的位置関係は同じであっても、操作者１００が情報呈示装置１０を、図３（Ａ）に示すように右眼１０３で観察を行うように保持または装着した場合と、図３（Ｂ）に示すように左眼１０４で観察を行うように保持または装着した場合とでは、情報呈示装置１０の上下関係が反転するため、情報表示部１２に表示する画像の向きを変更することが必要である。また、例えば、操作者１００にとってそれぞれ左側、右側への画像のスクロールを代表するようなアイコンを表示し、それに従って操作者１００が画像スクロールを行う場合、図３（Ａ）に示すように操作者頭部１０２右側に情報呈示装置１０を保持したときには、右手で情報呈示装置１０を保持するため、その右手の第１指（親指）から第５指（小指）のうち、右スクロールを指示するためのボタンとしては第３指（中指）で操作する方が第４指（薬指）で操作するよりも直感的に扱い易く、同様に、左スクロールを指示するためのボタンとしては右手第４指（薬指）で操作する方が自然である。よって、そのような右スクロールを指示する操作部１３のボタンとしては上記Ａボタン１３Ａ、左スクロールを指示する操作部１３のボタンとしては上記Ｂボタン１３Ｂが割り当てられることが望ましい。一方、図３（Ｂ）に示すように操作者頭部１０２左側に情報呈示装置１０を保持したときには、左手で情報呈示装置１０を保持するため、その左手の第１指（親指）から第５指（小指）のうち、右スクロールを指示するためのボタンとしては第４指（薬指）で操作する方が第３指（中指）で操作するよりも直感的に扱い易く、同様に、左スクロールを指示するためのボタンとしては左手第３指（中指）で操作する方が自然である。よって、そのような右スクロールを指示する操作部１３のボタンとしては上記Ｃボタン１３Ｃ、左スクロールを指示する操作部１３のボタンとしては上記Ｄボタン１３Ｄが割り当てられることが望ましい。つまり、情報呈示装置１０の保持または装着の形態に応じて、操作部１３のボタンの割り当ても変更する必要がある。
【００１６】
そこで、そのような情報呈示装置１０の保持または装着の形態に応じた表示の方向及び操作ボタン割り当ての変更を行うために、本実施形態では、情報呈示装置１０は、上記ユーザインターフェイス部１４の姿勢、つまり上記ユーザインターフェイス部１４の相対的な上または下方向を推定または検出する姿勢推定／検出部１８と、この姿勢推定／検出部１８の推定または検出結果に基づいて、上記操作部１３に割り付けられた機能を切り換える操作指示判定部１９と、上記姿勢推定／検出部１８の推定または検出結果に基づいて、上記情報表示部１２に表示する画像を変換する表示変換部２０と、からなるユーザインターフェイス制御部２１を備えている。
【００１７】
このユーザインターフェイス制御部２１の動作を、図３（Ｃ）のフローチャートを参照して説明する。まず、情報表示部１２に、例えば「上側の操作部を操作して下さい」というような、相対的に上または下側の上記操作部１３の操作を促す表示を上記情報表示部１２に行う（ステップＳ１）。これは、情報呈示装置１０が図３（Ａ）及び（Ｂ）のどちらの保持または装着形態であっても操作者１００が理解できるように、上向きにも下向きにも表示する。そして、姿勢推定／検出部１８は、上記の操作部１３の操作を促す表示に応じた上記操作者１００の操作を検出し（ステップＳ２）、その検出結果により、上記ユーザインターフェイス部１４の姿勢（上下方向）を推定する（ステップＳ３）。即ち、操作部１３上記Ａボタン１３ＡまたはＢボタン１３Ｂが操作された場合には、図３（Ａ）に示す保持または装着形態であり、それらＡボタン１３Ａ及びＢボタン１３Ｂが配置された側が上方向であると推定する。また、操作部１３上記Ｃボタン１３ＣまたはＤボタン１３Ｄが操作された場合には、図３（Ｂ）に示す保持または装着形態であり、それらＣボタン１３Ｃ及びＤボタン１３Ｄが配置された側が上方向であると推定する。
【００１８】
そして、この推定に従って、操作指示判定部１９は操作部１３の機能割り付けを変更し、表示変換部２０は、情報表示部１２の表示の向きの変更を行う（ステップＳ４）。なお、本実施形態においては、情報呈示装置１０は、図３（Ａ）に示す保持または装着形態をデフォルトとしている。従って、実際には、このステップＳ４の動作は、図３（Ａ）に示すようにＡボタン１３Ａ及びＢボタン１３Ｂが配置された側が上方向であると推定された場合には、何も行わない。即ち、図３（Ｂ）に示すようにＣボタン１３Ｃ及びＤボタン１３Ｄが配置された側が上方向であると推定された場合にのみ、このステップＳ４の動作が行われる。この場合、操作指示判定部１９は、例えば、上記Ｃボタン１３Ｃには表示画像の右スクロールを指示する機能を、上記Ｄボタン１３Ｄには左スクロールを指示する機能を割り付け、上記Ａボタン１３Ａ及びＢボタン１３Ｂには別の機能を割り付ける。そして、操作部１３の何れかのボタンが操作されると、その割り付けた機能に従った操作指示内容を上記画像生成部１７の表示情報検索部１６に与えて、新たな検索を行うなどして画像を生成させる。また、表示変換部２０は、上記表示情報検索部１６で生成した画像の向きを変更して、情報表示部１２に表示させる。
【００１９】
なお、上記ユーザインターフェイス制御部２１による上下判定ができるまでは、画像生成部１７において、観察対象の実像に重畳表示させるべき入力画像に関連する情報または画像の生成は行わない。そして、上記上下判定が行われた後、画像生成部１７で生成した情報または画像の上下の向きを、上記表示変換部２０で変換して、情報表示部１２に表示する。
【００２０】
また、情報呈示装置１０の実際の使用に際しては、上記上下判定によるユーザインターフェイス部１４の切り換えだけでなく、詳細説明は省略するが、実際の観察対象の観察を開始する前に、所定のキャリブレーション対象の像を観察して、その実像に対して所定位置に上記画像生成部１７で生成された情報または画像が重畳表示されるよう、視線キャリブレーションの操作及び処理を実行することが必要なことは言うまでもない。
【００２１】
以上のように、本発明の第１実施形態によれば、相対的に上または下側の操作部１３の操作を促す表示が情報表示部１２にされた後の操作者１００の操作に基づいてユーザインターフェイス部１４の姿勢を推定することで、使用状況に応じてユーザインターフェイス部１４を自動的に切り換えることの可能な情報呈示装置１０を提供することができる。
【００２２】
［第２実施形態］
図４は、本発明の第２実施形態に係る情報呈示装置１０のブロック構成図である。
【００２３】
上記第１実施形態では、姿勢推定／検出部１８は、相対的に上または下側の操作部１３の操作を促す表示が情報表示部１２にされた後の操作者１００の操作に基づいてユーザインターフェイス部１４の姿勢を推定するようにしていた。
【００２４】
これに対して、本第２実施形態では、姿勢推定／検出部１８は、重力方向を検出する重力センサを含むものとして構成している。従って、上記第１実施形態のように操作者１００の操作を待つことなく、該姿勢推定／検出部１８だけで、ユーザインターフェイス部１４の姿勢を推定できる。
【００２５】
このように、本発明の第２実施形態によれば、重力センサを用いることで、容易にユーザインターフェイス部１４の姿勢を推定でき、使用状況に応じてユーザインターフェイス部１４を自動的に切り換えることの可能な情報呈示装置１０を提供することができる。
【００２６】
［第３実施形態］
図５は、本発明の第３実施形態に係る情報呈示装置１０のブロック構成図であり、画像生成部１７は、画像入力部１５及び表示情報検索部１６に加えて姿勢推定／検出部１８とを含む。また、ユーザインターフェイス制御部２１は、姿勢推定／検出部１８、操作指示判定部１９及び表示変換部２０に加えて、画像入力部１５を含む。即ち、画像入力部１５及び姿勢推定／検出部１８は、画像生成部１７の一部として利用されると共にユーザインターフェイス制御部２１の一部としても利用される。なお、姿勢推定／検出部１８は、本実施形態では、位置姿勢判定部を含むものとして構成されている。
【００２７】
即ち、本実施形態においては、図６に示すように、机面２００等の基準面上に、対象物２０１に加えて基準面判定用マーカ２０２を配し、位置姿勢判定部は、この基準面判定用マーカ２０２の見え方で、ユーザインターフェイス部１４の上下方向を判定する。即ち、この位置姿勢判定部は、実世界中の絶対座標系における位置姿勢及び光学的特徴が既知である基準面判定用マーカ２０２を画像入力部（カメラ）１５で撮影した画像を利用して、当該基準面判定用マーカ２０２の撮影時における当該画像入力部（カメラ）１５の姿勢を推定するものである。その推定は、例えば「ＶＲインターフェイスのための単眼による長方形マーカー位置・姿勢の高精度実時間推定法」（3D Image Conference'96 予稿集 pp.167-172 高橋章、石井郁夫、牧野秀夫、中静真 1996）に開示されている基準マーク位置から画像入力手段の位置姿勢を求める方法を用いることで容易に実現できるものであり、よって、その詳細説明は省略する。
【００２８】
また、画像生成部１７の表示情報検索部１６は、上記姿勢推定／検出部の出力を用いて表示情報を検索する。即ち、上記のような撮影した基準面判定用マーカ２０２についての関連情報をまたは画像を検索する。
【００２９】
さらに、本実施形態においては、ユーザインターフェイス制御部２１の表示変換部２０は、上記第１及び第２実施形態のような上下の向きを変換するだけでなく、上記位置姿勢判定部を含む姿勢推定／検出部１８で推定したユーザインターフェイス部１４の位置及び姿勢に基づいて、上記表示情報検索部で検索された関連情報または画像の位置及び姿勢を変更して情報表示部１２に表示させることで、対象物２０１の位置姿勢に対応する位置姿勢で、それら関連情報または画像を操作者１００に観察させることができる。なお、このような撮影した基準面判定用マーカ２０２についての関連情報を重畳表示する手法は、例えば特開２００１−１２６０５１号公報に開示されている画像入力手段の視点に応じて関連情報を表示する手法を用いることで容易に実現できるものであり、よって、その詳細説明は省略する。
【００３０】
なお、本実施形態に係る情報呈示装置１０の使用上のシーケンスとして、基準面判定用マーカ２０２を認識するまでは情報を重畳して呈示しないということは言うまでもない。
【００３１】
以上のように、本第３実施形態によれば、容易にユーザインターフェイス部１４の姿勢を推定でき、使用状況に応じてユーザインターフェイス部１４を自動的に切り換えることの可能な情報呈示装置１０を提供することができる。またさらに、重畳表示するべき画像も、その上下方向の向きだけでなく、ユーザインターフェイス部１４の位置及び姿勢に応じた位置及び姿勢で呈示することが可能となる。
【００３２】
以上実施形態に基づいて本発明を説明したが、本発明は上述した実施形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。
【００３３】
例えば、情報呈示装置１０は片手で保持されるものとして説明したが、手ではなくて、何らかの保持具で操作者頭部１０２に保持ないしは装着し、操作部１３の操作のみを手で行うものであっても構わない。また、表示部と操作部１３の相対的位置姿勢が実質的に変わらなければ、操作部１３を含む部位を表示部とは別体として、例えば表示部は操作者頭部１０２に保持ないしは装着され、操作部１３を含む部位は操作者１００の腰部分の側部、ベルト等に装着されるような形態を採るようにしても良い。
【００３４】
（付記）
前記の具体的実施形態から、以下のような構成の発明を抽出することができる。
【００３５】
（１）  対象物の像とともに当該対象物と関連する情報を操作者に呈示する情報呈示装置であって、
上記操作者が操作を行う操作部または当該操作者に対して情報を呈示する表示部を含むユーザインターフェイス部と、
上記操作部または上記表示部の姿勢を検出または推定し、当該検出または推定された姿勢に基づいて上記ユーザインターフェイス部の動作または機能を切り換えるユーザインターフェイス切り換え部と、
を具備することを特徴とする情報呈示装置。
【００３６】
（対応する実施形態）
この（１）に記載の情報呈示装置に関する実施形態は、第１乃至第３実施形態が対応する。
【００３７】
（作用効果）
この（１）に記載の情報呈示装置は、検出または推定された鉛直方向に基づいてユーザインターフェイス部の動作を切り換える。
【００３８】
従って、この（１）に記載の情報呈示装置によれば、使用状況に応じてユーザインターフェイス部を自動的に切り換えることが可能となる。
【００３９】
（２）  上記表示部は、上記対象物の実像と所定の情報を表す所定の画像とを重畳して、上記操作者に表示することを特徴とする（１）に記載の情報呈示装置。
【００４０】
（対応する実施形態）
この（２）に記載の情報呈示装置に関する実施形態は、第１乃至第３実施形態が対応する。
【００４１】
（作用効果）
この（２）に記載の情報呈示装置は、表示部は対象物の実像と生成された画像を重畳して操作者に呈示する。
【００４２】
従って、この（２）に記載の情報呈示装置によれば、観察対象物の実像と画像とを操作者に観察させることができる。
【００４３】
（３）  上記所定の画像として、入力された画像に関連する情報または画像を生成する画像情報生成部を更に具備することを特徴とする（２）に記載の情報呈示装置。
【００４４】
（対応する実施形態）
この（３）に記載の情報呈示装置に関する実施形態は、第１乃至第３実施形態が対応する。
【００４５】
（作用効果）
この（３）に記載の情報呈示装置は、入力された画像に関連する情報または画像を生成する画像情報生成部を更に有する。
【００４６】
従って、この（３）に記載の情報呈示装置によれば、入力された画像に関連する情報または画像を合わせて呈示できる。
【００４７】
（４）  上記操作者に装着または保持される形態（装着または保持され方）を複数有することを特徴とする（１）に記載の情報呈示装置。
【００４８】
（対応する実施形態）
この（４）に記載の情報呈示装置に関する実施形態は、第１乃至第３実施形態が対応する。
【００４９】
（作用効果）
この（４）に記載の情報呈示装置は、複数の装着または保持される形態（保持または装着のされ方）を持つ。
【００５０】
従って、この（４）に記載の情報呈示装置によれば、複数の保持または装着のされ方が可能となる。
【００５１】
（５）  上記複数の形態において、上記表示部と上記操作部の実質的な相対的位置関係は同じであることを特徴とする（４）に記載の情報呈示装置。
【００５２】
（対応する実施形態）
この（５）に記載の情報呈示装置に関する実施形態は、第１乃至第３実施形態が対応する。
【００５３】
（作用効果）
この（５）に記載の情報呈示装置は、複数の装着または保持される形態においては、表示部と操作部との「相対的位置姿勢」は同じである。
【００５４】
従って、この（５）に記載の情報呈示装置によれば、操作者もその保持または装着の形態を迷うことなく、また、機器自体の処理も保持または装着の形態に応じて大きく変更する必要がなくなる。
【００５５】
（６）  上記複数の形態において、上記表示部に表示される画像の向きが異なることを特徴とする（４）に記載の情報呈示装置。
【００５６】
（対応する実施形態）
この（６）に記載の情報呈示装置に関する実施形態は、第１乃至第３実施形態が対応する。
【００５７】
（作用効果）
この（６）に記載の情報呈示装置は、複数の「形態」においては、表示部上に表示される画像の向きが異なる。
【００５８】
従って、この（６）に記載の情報呈示装置によれば、複数の装着または保持される形態によらず操作者に常に正しい向きで画像を呈示できる。
【００５９】
（７）  上記複数の形態において、上記表示部は上記操作者の側部に装着または保持されることを特徴とする（４）に記載の情報呈示装置。
【００６０】
（対応する実施形態）
この（７）に記載の情報呈示装置に関する実施形態は、第１乃至第３実施形態が対応する。
【００６１】
（作用効果）
この（７）に記載の情報呈示装置は、操作部は操作者の側部に装着または保持される。
【００６２】
従って、この（７）に記載の情報呈示装置によれば、操作部を含む部位を別体とできるので、使用形態が多彩になる。
【００６３】
（８）  上記ユーザインターフェイス制御部は、
上記ユーザインターフェイス部の姿勢を推定または検出する姿勢推定／検出部と、
上記姿勢推定／検出部の推定または検出結果に基づいて、上記操作部に割り付けられた機能を切り換える操作指示判定部と、
上記姿勢推定／検出部の推定または検出結果に基づいて、上記表示部に表示する画像を変換する表示変換部と、
を有することを特徴とする（１）に記載の情報呈示装置。
【００６４】
（対応する実施形態）
この（８）に記載の情報呈示装置に関する実施形態は、第１乃至第３実施形態が対応する。
【００６５】
（作用効果）
この（８）に記載の情報呈示装置は、ユーザインターフェイス部の姿勢を推定または検出し、その結果に基づいて、上記操作部に割り付けられた機能を切り換えると共に、上記表示部に表示する画像を変換する。
【００６６】
従って、この（８）に記載の情報呈示装置によれば、ユーザインターフェイス部の姿勢に応じて操作部または表示部を自動的に切り換えることが可能となる。
【００６７】
（９）  上記姿勢推定／検出部は、上記ユーザインターフェイス部の相対的な上または下方向を検出することを特徴とする（８）に記載の情報呈示装置。
【００６８】
（対応する実施形態）
この（９）に記載の情報呈示装置に関する実施形態は、第１及び第２実施形態が対応する。
【００６９】
（作用効果）
この（９）に記載の情報呈示装置は、ユーザインターフェイス部の相対的な上または下方向を検出する。
【００７０】
従って、この（９）に記載の情報呈示装置によれば、ユーザインターフェイス部の相対的な上または下方向に応じて操作部または表示部を自動的に切り換えることが可能となる。
【００７１】
（１０）  上記姿勢推定／検出部は、重力方向を検出する重力センサを含むことを特徴とする（８）に記載の情報呈示装置。
【００７２】
（対応する実施形態）
この（１０）に記載の情報呈示装置に関する実施形態は、第２実施形態が対応する。
【００７３】
（作用効果）
この（１０）に記載の情報呈示装置は、重力センサで重力方向を検出することで、ユーザインターフェイス部の姿勢を推定または検出する。
【００７４】
従って、この（１０）に記載の情報呈示装置によれば、操作者の手を煩わせることなく容易にユーザインターフェイス部の姿勢を推定または検出できる。
【００７５】
（１１）  上記姿勢推定／検出部は、相対的に上または下側の上記操作部の操作を促す表示が上記表示部にされた後の上記操作者の操作に基づいて、上記ユーザインターフェイス部の姿勢を推定することを特徴とする（８）に記載の情報呈示装置。
【００７６】
（対応する実施形態）
この（１１）に記載の情報呈示装置に関する実施形態は、第１実施形態が対応する。
【００７７】
（作用効果）
この（１１）に記載の情報呈示装置は、上または下方向の操作部の操作を要求する表示が表示された後の操作に基づいてユーザインターフェイス部の姿勢を推定または検出する。
【００７８】
従って、この（１１）に記載の情報呈示装置によれば、特別な検出機構を設けることなく、ユーザインターフェイス部の姿勢を推定または検出できる。
【００７９】
（１２）  上記姿勢推定／検出部は、実世界中の絶対座標系における位置姿勢及び光学的特徴が既知であるマーカをカメラで撮影した画像を利用して、当該マーカの撮影時における当該カメラの姿勢を推定する位置姿勢判定部を含むことを特徴とする（８）に記載の情報呈示装置。
【００８０】
（対応する実施形態）
この（１２）に記載の情報呈示装置に関する実施形態は、第３実施形態が対応する。
【００８１】
（作用効果）
この（１２）に記載の情報呈示装置は、マーカ画像に基づいてユーザインターフェイス部の姿勢を推定または検出できる。
【００８２】
従って、この（１２）に記載の情報呈示装置によれば、単純なユーザインターフェイス部の上下方向だけではなく、傾きや向きなどを含めた位置及び姿勢を推定または検出できる。
【００８３】
（１３）  上記位置姿勢判定部の出力は、上記表示部に表示する画像を生成する際に利用されることを特徴とする（１２）に記載の情報呈示装置。
【００８４】
（対応する実施形態）
この（１３）に記載の情報呈示装置に関する実施形態は、第３実施形態が対応する。
【００８５】
（作用効果）
この（１３）に記載の情報呈示装置は、推定または検出した位置姿勢を利用して表示する画像を生成できる。
【００８６】
従って、この（１３）に記載の情報呈示装置によれば、推定または検出した位置姿勢に従った位置及び姿勢で画像を呈示することが可能となる。
【００８７】
（１４）  上記表示変換部は、上記姿勢推定／検出部の出力に基づいて、上記表示部の動作を切り換えることを特徴とする（８）に記載の情報呈示装置。
【００８８】
（対応する実施形態）
この（１４）に記載の情報呈示装置に関する実施形態は、第１乃至第３実施形態が対応する。
【００８９】
（作用効果）
この（１４）に記載の情報呈示装置は、表示変換部は、姿勢推定／検出の出力に基づいて、表示部の動作を切り換える。
【００９０】
従って、この（１４）に記載の情報呈示装置によれば、推定または検出した位置姿勢に従って表示部の動作を切り換えることができる。
【００９１】
（１５）  上記表示変換部によって切り換えられる上記表示部の動作は、当該報表示部に表示される画像の向きであることを特徴とする（１４）に記載の情報呈示装置。
【００９２】
（対応する実施形態）
この（１５）に記載の情報呈示装置に関する実施形態は、第１乃至第３実施形態が対応する。
【００９３】
（作用効果）
この（１５）に記載の情報呈示装置は、推定または検出した位置姿勢に従って、表示部に表示される画像の向きを切り換える。
【００９４】
従って、この（１５）に記載の情報呈示装置によれば、表示部の姿勢によらずに、表示部に正しい向きに画像が呈示されるようになる。
【００９５】
（１６）  上記操作指示判定部は、上記姿勢推定／検出部の出力に基づいて、上記操作部に割り付けられる機能を切り換えることを特徴とする（８）に記載の情報呈示装置。
【００９６】
（対応する実施形態）
この（１６）に記載の情報呈示装置に関する実施形態は、第１乃至第３実施形態が対応する。
【００９７】
（作用効果）
この（１６）に記載の情報呈示装置は、推定または検出した位置姿勢に従って操作部に割り付けられた機能を切り換える。
【００９８】
従って、この（１６）に記載の情報呈示装置によれば、操作部の姿勢によらずに、操作し易い操作部を提供できる。
【図面の簡単な説明】
【００９９】
【図１】図１（Ａ）は本発明の第１実施形態に係る情報呈示装置の外観を示す斜視図であり、図１（Ｂ）はその情報呈示装置のブロック構成図である。
【図２】図２（Ａ）は情報呈示装置の使用状態を示す斜視図であり、図２（Ｂ）は表示部の構成を説明するための模式図である。
【図３】図３（Ａ）は情報呈示装置の右手保持状態を説明するための図、図３（Ｂ）は情報呈示装置の表示情報左手保持状態を説明するための図であり、図３（Ｃ）はユーザインターフェイス制御部の動作フローチャートを示す図である。
【図４】図４は本発明の第２実施形態に係る情報呈示装置のブロック構成図である。
【図５】図５は本発明の第３実施形態に係る情報呈示装置のブロック構成図である。
【図６】図６は第３実施形態に係る情報呈示装置の使用状態を示す斜視図である。
【符号の説明】
【０１００】
１０…情報呈示装置、  １１…透明反射板、  １２…情報表示部、  １３…操作部、  １３Ａ…Ａボタン、  １３Ｂ…Ｂボタン、  １３Ｃ…Ｃボタン、  １３Ｄ…Ｄボタン、  １４…ユーザインターフェイス部、  １５…画像入力部、  １６…表示情報検索部、  １７…画像生成部、  １８…姿勢推定／検出部、  １９…操作指示判定部、  ２０…表示変換部、  ２１…ユーザインターフェイス制御部、  １００…操作者、  １０１…右手、  １０２…操作者頭部、  １０３…右眼、  １０３Ａ…右眼球、  １０４…左眼、  ２００…机面、  ２０１…対象物、  ２０２…基準面判定用マーカ。
【図１】
2006146700.tif 000003
【図２】
2006146700.tif 000004
【図３】
2006146700.tif 000005
【図４】
2006146700.tif 000006
【図５】
2006146700.tif 000007
【図６】
2006146700.tif 000008