(57)【要約】【課題】ユーザーが自らの周囲の状況を容易にかつ確実に確認することができ使い勝手を高める上で有利な画像表示装置を提供する。【解決手段】画像表示装置１０は、装着部１２、表示ユニット１４、複数のカメラ２０、ヘッドホン２１、コントローラ２２などを備えている。装着部１２がユーザーの頭部に装着された状態で表示ユニット１４のスクリーン１５がユーザーの視野内に配置され、スクリーン１５に画像が表示される。カメラ２０は第１乃至第７カメラから構成され、ユーザーの周囲のほぼ全域を撮像できるように配設されており、撮像して得られた各映像信号がユーザーの周囲の状況を示す周囲映像信号としてコントローラ２２に供給されるように構成されている。【選択図】        図１
2005172851.tif 000002
【特許請求の範囲】
【請求項１】
ユーザーの頭部または顔面に装着される装着部と、
前記装着部に支持され前記装着部が前記ユーザーに装着された状態で前記ユーザーの視野内に配置されるスクリーンと、
入力映像信号に基づいて前記スクリーンに画像を表示する画像表示手段とを有する画像表示装置であって、
前記装着部またはスクリーンに支持され前記装着部が前記ユーザーに装着された状態で前記ユーザーの周囲の一部またはほぼ全域を撮像し前記ユーザーの周囲の状況を表す周囲映像信号を生成する撮像手段と、
前記画像表示装置の外部から供給される外部供給映像信号と、前記撮像手段から供給される前記周囲映像信号との双方に基づいて前記入力映像信号を生成して前記画像表示手段に供給することによって、前記外部供給映像信号による第１の画像と、前記周囲映像信号信号による第２の画像とを前記スクリーンに表示させる制御手段と、
を備えることを特徴とする画像表示装置。
【請求項２】
前記制御手段による前記第１の画像および第２の画像の表示は、前記第１の画像および第２の画像の何れか一方を選択して前記画像表示手段に表示させることでなされることを特徴とする請求項１記載の画像表示装置。
【請求項３】
前記制御手段による前記第１の画像および第２の画像の表示は、前記第１の画像および第２の画像の双方を同時に前記画像表示手段に表示させることでなされることを特徴とする請求項１記載の画像表示装置。
【請求項４】
前記スクリーンは、その全域にわたって延在するシャッター手段を含んで構成され、前記シャッター手段は光の少なくとも一部を透過する透過状態と、光を透過しない非透過状態とに切り替え可能に構成されていることを特徴とする請求項１記載の画像表示装置。
【請求項５】
前記撮像手段は複数個のカメラを有し、前記撮像手段によるユーザーの周囲のほぼ全域の撮像は、前記複数のカメラを互いに指向方向が異なるように配置することでなされることを特徴とする請求項１記載の画像表示装置。
【請求項６】
前記撮像手段は互いに指向方向が同一となるように配置された少なくとも２つのカメラを有することを特徴とする請求項１記載の画像表示装置。
【請求項７】
前記撮像手段は単一のカメラと前記ユーザーの周囲のほぼ全域に臨むように設けられた反射鏡を有し、前記撮像手段によるユーザーの周囲のほぼ全域の撮像は、前記カメラが前記反射鏡を介して撮影することでなされることを特徴とする請求項１記載の画像表示装置。
【請求項８】
前記撮像手段は撮影倍率が調整可能に構成されていることを特徴とする請求項１記載の画像表示装置。
【請求項９】
前記撮像手段は撮影方向が調整可能に構成されていることを特徴とする請求項１記載の画像表示装置。
【請求項１０】
前記撮像手段は、前記周囲映像信号を外部の記録装置に接続可能な形態で出力するように構成されていることを特徴とする請求項１記載の画像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は頭部または顔面に装着される画像表示装置に関する。
【背景技術】
【０００２】
従来からヘッドマウントディスプレイと称される画像表示装置が使用されている。
このような画像表示装置は、ユーザーの頭部または顔面に装着される装着部と、装着部に支持され装着部がユーザーに装着された状態でユーザーの視野内に配置されるスクリーンと、入力映像信号に基づいてスクリーンに画像を表示する画像表示手段とを備えており、前記スクリーンとして液晶パネルを用いたもの（例えば特許文献１参照）やホログラフィックオプティカルエレメントを用いたもの（例えば特許文献２参照）が提案されている。
このような画像表示装置は、例えばビデオプレーヤ、ＤＶＤプレーヤ、テレビジョン放送を受信するチューナー、あるいはゲーム機器などから供給される映像信号を入力して前記スクリーンに画像を表示させるように構成されている。
【特許文献１】特開平６−７８２４８号公報
【特許文献２】特開平１０−３０１０５５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
ところで、このような画像表示装置を装着して画像を見ている場合に、ユーザーが自らの周囲の状況を確認する必要が生じると、例えばスクリーンを構成する液晶パネルなどを含む光学系を透過状態（シースルー状態）に切り替え、該光学系を介して外界の画像を視認するようにしている。
しかしながら、このような光学系を介した場合には光が減少するため外界の画像が暗くなるため外界をはっきり視認する上で不利であった。また、周囲の状況を確認するためには頭を動かして自らの回りを観察する必要があり、入力映像信号に基づいてスクリーンに表示されている画像を観察しながら外界の画像を見て周囲の状況を確認することも困難であり、使い勝手がよいものとはいえなかった。
本発明はこのような事情に鑑みなされたものであり、本発明の目的はユーザーが頭を動かすことなく自らの周囲の状況を容易にかつ確実に確認することができ、また、スクリーンに表示される画像を視認しつつ自らの周囲の状況を確認することができるなど、使い勝手を高める上で有利な画像表示装置を提供することにある。
【課題を解決するための手段】
【０００４】
上述の目的を達成するため、本発明の撮像装置は、ユーザーの頭部または顔面に装着される装着部と、前記装着部に支持され前記装着部が前記ユーザーに装着された状態で前記ユーザーの視野内に配置されるスクリーンと、入力映像信号に基づいて前記スクリーンに画像を表示する画像表示手段とを有する画像表示装置であって、前記装着部またはスクリーンに支持され前記装着部が前記ユーザーに装着された状態で前記ユーザーの周囲の一部またはほぼ全域を撮像し前記ユーザーの周囲の状況を表す周囲映像信号を生成する撮像手段と、前記画像表示装置の外部から供給される外部供給映像信号と、前記撮像手段から供給される前記周囲映像信号との双方に基づいて前記入力映像信号を生成して前記画像表示手段に供給することによって、前記外部供給映像信号による第１の画像と、前記周囲映像信号信号による第２の画像とを前記スクリーンに表示させる制御手段とを備えることを特徴とする。
【発明の効果】
【０００５】
そのため、本発明によれば、画像表示装置の外部から供給される外部供給映像信号と、撮影手段から供給される周囲映像信号との双方に基づいて入力映像信号を生成して画像表示手段に供給することによって、前記外部供給映像信号による第１の画像と、前記周囲映像信号信号による第２の画像とをスクリーンに表示させるようにしたので、ユーザーは、自らの周囲の状況を確認する必要が生じた場合に、スクリーンに第２の画像を表示させれば周囲の状況を頭を動かすこと無く、かつ、確実に周囲の状況を視認することができる。また、スクリーンに第１の画像を表示しつつ第２の画像を表示すれば、ユーザーは第１の画像を見ながら周囲の状況を確認することができ、使い勝手を高めることができる。
【発明を実施するための最良の形態】
【０００６】
ユーザーが自らの周囲の状況を容易にかつ確実に確認できるようにするという目的を、ユーザーの周囲の状況を表す周囲映像信号を生成する撮像手段と、外部供給映像信号による第１の画像と、周囲映像信号信号による第２の画像とをスクリーンに表示させる制御手段とを設けることで実現した。
【実施例１】
【０００７】
次に本発明の実施例１について図面を参照して説明する。
図１は実施例１の画像表示装置の構成を示す斜視図、図２は実施例１の画像表示装置が装着された状態を示す説明図、図３は実施例１の画像表示装置における撮像手段の配置を示す説明図、図４は実施例１の画像表示装置の構成を示すブロック図、図５は実施例１の画像表示装置の構成を示す説明図、図６は実施例１の画像表示装置の光学系の構成図である。
図１、図２に示すように、画像表示装置１０は、装着部１２、表示ユニット１４、複数のカメラ２０、ヘッドホン２１、コントローラ２２などを備えている。
装着部１２は、帯板状の前板１２０２と、該前板１２０２の長手方向両端にそれぞれ屈曲可能に連結された帯板状の２つの側板１２０４と、２つの側板１２０４の先端を接続する伸縮可能なベルト１２０６とによって環状に構成されている。そして、図２に示すように、装着部１２の内側にユーザーＵの頭部を位置させ、前板１２０２、２つの側板１２０４、ベルト１２０６のそれぞれを前頭部、左右の側頭部、後頭部に当て付けた状態でベルト１２０６を伸縮調整することにより装着部１２が頭部に装着される。
【０００８】
表示ユニット１４はゴーグル状に形成された支持体１４０２を有し、支持体１４０２の上部中央が連結部１４０４を介して装着部１２の前板１２０２前部中央に連結されている。
図５、図６に示すように、支持体１４０２には、バックライト１４０６、左右目用液晶表示パネルであるＬＣＤ１４０８、スクリーンとしての左右目用ハーフミラー１４１０、左右目用凹面ハーフミラー１４１２、液晶シャッター１４１３、レンズ１４１４が設けられている。
バックライト１４０６は、左右目用のＬＣＤ１４０８の上方から照明する構成となっており、後述するコントローラ２２からの入力映像信号に基づいて、左目用のＬＣＤ１４０８には左目用の映像が表示され、右目用のＬＣＤ１４０８には右目用の映像が表示されるようになっている。すなわち、バックライト１４０６およびＬＣＤ１４０８によって画像表示手段が構成されている。
液晶シャッター１４１３はシャッター手段を構成するものであり、凹面ハーフミラー１４１２の前方で凹面ハーフミラー１４１２の全域を覆うように配置され、少なくとも光を透過する透過状態と、光を透過しない不透過状態（遮蔽状態）とに切り替え可能に構成されている。また、シャッター手段としてメカニカルシャッターを使用することもできる。また、液晶シャッター１４１３の前方を覆うように光を透過可能な材料で構成された保護カバーを設けることは任意である。
装着部１２がユーザーＵの頭部に装着され、液晶シャッター１４１３が不透過状態で、ＬＣＤ１４０８、１４０８に表示された映像はハーフミラー１４１０、１４１０により反射され、更に凹面ハーフミラー１４１２、１４１２で拡大されて反射され、再びハーフミラー１４１０、１４１０を通りレンズ１４１４を介して利用者の目に結像されるように構成されている。すなわち、ハーフミラー１４１０および凹面ハーフミラー１４１２によってスクリーン１５が構成されており、このスクリーン１５は装着部１２がユーザーＵに装着された状態でユーザーＵの視野内に配置されることになる。
本実施例では、スクリーン１５を介して利用者の目で結像される映像は虚像となる。
このようにして利用者の目で見る画面の大きさは、ＬＣＤ１４０８での映像が目に入射するときの視野角と、目で見ている全視野角の比であらわすことができる。例えば、視野角を３０度に設定していると、２メートルの虚像距離に換算でき、これは５２型の大画面を見ていることに相当する。
また、凹面ハーフミラー１４１２は、光を透過するシースルー機能を備えているため、液晶シャッター１４１３が透過状態になると、ＬＣＤ１４０８からの映像を見ながら、同時に通常の目で見える外界の様子を凹面ハーフミラー１４１２と液晶シャッター１４１３を介して見ることができるようになっている。
【０００９】
図１、図２に示すように、カメラ２０は第１乃至第７カメラ２００２、２００４、２００６、２００８、２０１０、２０１２、２０１４の合計７個のカメラから構成され、撮像手段を構成している。各カメラ２０は、いずれも不図示の撮影光学系と、この撮影光学系で結像された像を撮像するＣＣＤあるいはＣＭＯＳセンサなどの撮像素子と、該撮像素子から出力される撮像信号に基づいて映像信号を生成する信号処理回路などを備えている。
各カメラ２０は、装着部１２がユーザーＵに装着された状態で以下のように配設されている。
第１カメラ２００２は、支持体１４０２の前部左端部に設けられその光軸が前方を指向している。
第２カメラ２００４は、支持体１４０２の前部右端部に設けられその光軸が前方を指向している。
第３カメラ２００６は、連結部１４０４の前部に設けられその光軸が前方を指向している。
第４カメラ２００８は、左側の側板１２０４の前方寄り箇所に設けられその光軸が左側方を指向している。
第５カメラ２０１０は、右側の側板１２０４の前方寄り箇所に設けられその光軸が右側方を指向している。
第６カメラ２０１２は、左側の側板１２０４の後方寄り箇所に設けられその光軸が後方を指向している。
第７カメラ２０１４は、右側の側板１２０４の後方寄り箇所に設けられその光軸が後方を指向している。
本実施例では、図３に示すように、各カメラ２０の撮影光学系の画角（視野角）は次のように設定されている。なお、図３では、符号Ｆが前方、符号Ｌが左方、符号Ｒが右方、符号Ｂが後方、符号Ｗが広角、符号Ｓが標準、符号Ｚが望遠を示す。
第１カメラ２００２（ＦＷ）：広角
第２カメラ２００４（ＦＺ）：望遠
第３カメラ２００６（ＦＳ）：標準
第４カメラ２００８（ＬＷ）：広角
第５カメラ２０１０（ＲＷ）：広角
第６カメラ２０１２（ＢＷ）：広角
第７カメラ２０１４（ＢＺ）：望遠
なお、複数のカメラ２０の一部あるいは全部を撮影倍率（レンズ倍率）が調整可能なズーム式の撮影光学系で構成してもよい。倍率調整（ズーム調整）は手動で行なってもよいし、カメラ２０にモータなどの駆動源を有するズーム調整機構を設けるとともに、このズーム調整機構を中央制御部２２０２コントローラ２２から制御することで行なってもよい。
また、複数のカメラ２０の一部あるいは全部に雲台を設けて指向方向（撮影方向）を可変できるように構成してもよい。指向方向の変更は手動で行なってもよいし、雲台にモータなどの駆動源を有する方向調整機構を設けるとともに、この方向調整機構をコントローラ２２から制御することで行なってもよい。
また、カメラ２０として、鉛直方向上方を指向するものを設ければ、ユーザーＵの上方の状況を撮像することができる他、例えば頭部を９０度近く傾けたときに頭部が向いている方向の状況を前記カメラ２０によって撮像することができ、広い範囲の状況を撮像する上で有利となる。
これら７個のカメラ２０は、ユーザーＵの周囲のほぼ全域を撮像できるように配設されており、撮像して得られた各映像信号がユーザーＵの周囲の状況を示す周囲映像信号としてコントローラ２２に供給されるように構成されている。
【００１０】
ヘッドホン２１は、左右の側板１２０４の下部からユーザーＵの左右の耳にそれぞれ装着可能に構成されており、コントローラ２２から供給される音声信号を再生するように構成されている。
【００１１】
次に、図４を参照してコントローラ２２の構成について説明する。
コントローラ２２は、中央制御部２２０２（特許請求の範囲の制御手段に相当）、ＲＡＭ２２０４、インターフェース部２２０６、音声処理部２２０８、操作部２２０９、ＧＰＳセンサ２２１０、歩行センサ２２１２、イーサーネット用インターフェース２２１４などを備えている。
インターフェース部２２０６は、外部機器（テレビチューナー、ＤＶＤプレーヤー、ビデオプレーヤーなど）３０から供給される外部供給映像信号および外部供給音声信号を入力する入力機能と、カメラ２０からの周囲映像信号やマイク３３からの音声信号を記録装置（レコーダー）３２に出力する出力機能とを備える。
音声処理部２２０８は、外部機器３０からインターフェース部２２０６を介して供給される音声信号を増幅してヘッドホン２１に供給したり、外部端子３４を介してスピーカーに供給したり、ＬＩＮＥ端子３６を介して外部機器に出力する出力機能と、マイク３８を介して音声信号を入力しインターフェース部２２０６を介して記録装置３２に出力する出力機能とを有している。
操作部２２０９は、中央制御部２２０２に対して動作を指示するためのスイッチなどから構成されている。
ＧＰＳセンサ部２２１０は、ＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｇ  Ｓｙｓｔｅｍ）における衛星からの電波を受信することにより画像表示装置１０が存在している地球上の位置を測位し、その測位データ（位置情報）を生成する機能を有している。
歩行センサ２２１２は、ユーザーＵの身体に取着され、ユーザーＵが歩行状態にあるか静止状態にあるかを検知する機能を有している。
このような歩行センサ２２１２として、例えば、鉛直方向（ｖｅｒｌｔｉｃａｌ）の加速度を検知する第１の加速度センサと進行方向（ｈｏｒｉｓｚｏｎｔａｌ）の加速度を検知する第２の加速度センサとを備えるものがある。
具体的には、図７に示すように、鉛直・進行方向の加速度が検出された際に、鉛直方向の加速度に加えて進行方向への加速度に着目し、鉛直方向の加速度のピーク検出によって推測される歩行動作の開始時刻から半サイクル分の期間における進行方向への加速度を積分し、この値が一定値以上であれば歩行動作があったものとして検出する（例えば、信学技報告第１２回複合現実感研究会，ＰＲＭＵ２００２−１８０，ｐｐ．６７−７２（２００３））。
イーサーネット用インターフェース２２１４は、中央制御部２２０２と外部の情報処理装置との間でデータ通信を司るものである。
中央制御部２２０２は、マイクロコンピュータおよび映像信号の処理回路などを含んでいる。
中央制御部２２０２は、各カメラ２０から供給される周囲映像信号を入力し画像処理を行なう機能、操作部２２０９の操作に基づいてＬＣＤ１４０８に映像信号を供給する機能、音声処理部２２０８を制御する機能、ＧＰＳセンサ２２１０および歩行センサ２２１２からの検知信号を処理する機能、イーサーネット用インターフェース２２１４を介して外部の情報処理装置との間でデータ通信を行なう機能などを有している。
更に詳しく説明すると、中央制御部２２０２は、外部機器３０から供給される外部供給映像信号と、各カメラ２０から供給される周囲映像信号との双方に基づいて入力映像信号を生成してＬＣＤ１４０８に供給することによって、前記外部供給映像信号による第１の画像と、前記周囲映像信号信号による第２の画像とをスクリーン１５に表示させる制御手段を構成している。
また、中央制御部２２０２は、操作部２２０９の操作に基づいて各カメラ２０から供給される周囲映像信号を選択してＬＣＤ１４０８に供給するように構成されている。
ＲＡＭ２２０４は、中央制御部２２０２がデータ処理や画像処理処理を行なう際に必要となるワーキングエリアを構成するものである。
【００１２】
次に、上述のように構成された画像表示装置１０の動作について説明する。
まず、コンテンツ（画像や音声）を視聴するコンテンツ視聴時の動作について説明する。
ユーザーＵは、コンテンツを再生するＤＶＤプレーヤーなどの外部機器３０をインターフェース部２２０６に接続し、画像表示装置１０の装着部１２を頭部に装着し、スクリーン１５を自らの視野内に配置する。また、ヘッドホン２１を耳に装着する。
次いで、ユーザーＵが外部機器３０から供給される外部供給映像信号を選択する操作を操作部２２０９に対して行なうと、中央制御部２２０２は、外部機器３０から供給される外部供給映像信号に基づいて入力映像信号を生成してＬＣＤ１４０８に供給することによって、前記外部供給映像信号による第１の画像をスクリーン１５に表示させるとともに、外部機器３０から供給される外部供給音声信号を音声処理部２２０８を介してヘッドホン２１に供給する。なお、液晶シャッター１４１３は不透過状態となっている。
これにより、ユーザーＵはスクリーン１５に表示される第１の画像を観るとともに、ヘッドホン２１から出力される音声を聴く。
ここで、ユーザーＵが周囲の状況を確認する必要が生じた場合、ユーザーＵが各カメラ２０から供給される周囲映像信号を選択する操作を操作部２２０９に対して行なうと、中央制御部２２０２は、カメラ２０から供給される周囲映像信号に基づいて入力映像信号を生成してＬＣＤ１４０８に供給することによって、前記周囲映像信号による第２の画像をスクリーン１５に表示させる。
第２の画像のスクリーン１５への表示は次のように行なうことができる。
（１）各カメラ２０から供給される７系統の周囲映像信号の中から選択された１系統の周囲映像信号による画像のみをスクリーン１５に表示させる。
（２）各カメラ２０から供給される７系統の周囲映像信号の中から選択された複数の周囲映像信号による画像のそれぞれを同時にスクリーン１５に表示させる。
また、前記（１）、（２）のそれぞれの場合に、第２の画像と第１の画像を同時にスクリーン１５に表示させるようにしてもよい。
また、スクリーン１５に表示する第１、第２の画像の倍率は任意に設定すればよく、拡大表示あるいは縮小表示することができる。
また、中央制御部２２０２は、歩行センサ２２１２によってユーザーＵが歩行状態にあるか静止状態にあるかを常時監視しており、ユーザーＵが静止状態から歩行状態に移行したと判断した場合には、前記静止状態で第１の画像をスクリーン１５に表示させていたとしても、強制的に第２の画像をスクリーン１５に表示させる。
【００１３】
以上説明したように本実施例によれば、画像表示装置１０の外部から供給される外部供給映像信号と、カメラ２０から供給される周囲映像信号との双方に基づいて入力映像信号を生成してＬＣＤ１４０８に供給することによって、前記外部供給映像信号による第１の画像と、前記周囲映像信号信号による第２の画像とをスクリーン１５に表示させるようにしたので、ユーザーＵは、自らの周囲の状況を確認する必要が生じた場合に、スクリーン１５に第２の画像を表示させれば、頭を動かすこと無く、かつ、周囲の状況を直ちに確実に視認することができる。
また、ユーザーＵが自らの周囲の状況を確認する必要が生じた場合に、液晶シャッター１４１３を透過状態にしてもユーザーＵは前方の状況を視認することはできる。しかしながら、この場合には、凹面ハーフミラー１４１２と液晶シャッター１４１３からなる光学系を介して外界の様子を見るので、充分な視界を確保することが難しく、また、光学系によって透過する光が低減するため視認できる外界が暗くなり、視認性を確保する上で不利となる。これに対して本実施例では、スクリーン１５に表示される第２の画像によってユーザーＵの周囲を全周にわたって視認することができるので、視界を確保する上でも、外界の画像の明るさを確保する上でも有利となる。
また、スクリーン１５に第１の画像を表示しつつ第２の画像を表示するようにした場合には、ユーザーは第１の画像を見ながら周囲の状況を確認することができ、使い勝手を高める上で有利となる。
また、歩行センサ２２１２によってユーザーＵが静止状態から歩行状態に移行したと判断した場合に、前記静止状態で第１の画像をスクリーン１５に表示させていたとしても、強制的に第２の画像をスクリーン１５に表示させるように構成した場合には、ユーザーＵが特別な操作を行なうことなく、周囲の状況を視認することができ、使い勝手を高める上でさらに有利である。
【００１４】
また、カメラ２０の撮影倍率を、ユーザーＵの肉眼よりも大きく、すなわち、凹面ハーフミラー１４１２と液晶シャッター１４１３を介して外界の様子を見る場合よりも望遠側へ設定することで、視線方向の観察したい対象物を肉眼よりも拡大して詳細に観察することが可能である。
また、カメラ２０の撮影倍率を、ユーザーＵの肉眼よりも小さく、すなわち、凹面ハーフミラー１４１２と液晶シャッター１４１３を介して外界の様子を見る場合よりも広角側へ設定することで、視線方向の観察したい視野範囲を肉眼よりも広角に観察することが可能である。
また、カメラ２０の撮影倍率を、ユーザーＵの肉眼と同等に、すなわち、凹面ハーフミラー１４１２と液晶シャッター１４１３を介して外界の様子を見る場合と同等の大きさに設定することで、凹面ハーフミラー１４１２と液晶シャッター１４１３を通して前方を視認する場合に光量が低下してしまうという不具合を解消することができる。
さらに、カメラ２０に赤外線暗視カメラ機能を持たせれば、夜間における周辺景色の視認性をも向上できる。
また、複数のカメラ２０をユーザーＵの周囲の全域、すなわち３６０度にわたって隙間なく撮像できるように配設すれば、ユーザーＵの周囲を連続的に観察可能となることは勿論である。
また、ユーザーＵの周囲全天球を撮影できるように水平方向を指向するカメラ２０に加えて、水平方向に対して上下に傾斜した方向、あるいは、鉛直方向上方および鉛直方向下方を指向するカメラ２０を設けてもよい。
また、複数のカメラ２０のうち、光軸がほぼ平行で光軸と直交する方向に間隔をおいて配置される２つのカメラ、例えば正面方向に向けられた第１、第２のカメラ２００２、２００４を等しい撮影倍率に設定して撮影すれば、これら２つのカメラで得られた画像に基づいて３Ｄ画像を表示させることが可能である。
また、画像表示装置１０に対してビデオカメラなどの別の撮像装置を接続し、該撮像装置から供給される映像信号をカメラ２０からの周囲映像信号と同様にスクリーン１５に表示させることもできる。
なお、上述した実施例において、カメラ２０の個数は７個に限定されるものではなく、各カメラ２０の撮像範囲や画角に応じてカメラ２０の個数を増減することができる。
また、歩行センサ２２１２によってユーザーＵが静止状態から歩行状態に移行したと判断された場合には、第１の画像および第２の画像の双方の画像の表示を停止するようにしてもよい。
また、本実施例では撮影手段を構成する複数のカメラ２０がユーザーＵのほぼ全域を撮像できるように構成したが、ユーザーＵの周囲の状況を撮像することができればよいのであり、撮影手段がユーザーＵの周囲の一部を撮像するように構成されていてもよいことは勿論である。
【実施例２】
【００１５】
次に本発明の実施例２について図面を参照して説明する。
実施例２が実施例１と異なるのは、撮像手段が単一のカメラ２０Ａと反射鏡２０１６で構成されている点である。
図８は実施例２の画像表示装置の構成を示す斜視図であり、以下では実施例１と同一または同様の部分には同一の符号を付して説明する。
図８に示すように、カメラ２０Ａは、装着部１２の前板１２０２の中央から斜め上後方に延在する支持部１２１６の先端に固定されている。より詳細には、装着部１２を頭部に装着した状態でカメラ２０Ａはその撮影光学系の光軸を鉛直方向の上方に向くように支持部１２１６を介して配設されている。
カメラ２０Ａの撮影光学系の光軸上に反射鏡２０１６が設けられており、カメラ２０Ａはこの反射鏡２０１６で反射された像を撮像するように構成されている。
反射鏡２０１６は、前記光軸と一致する中心軸を有し断面が二次曲線を描く円錐状に形成され、前記中心軸を中心に３６０度にわたって延在している。言い換えれば、反射鏡２０１６は、ユーザーＵの周囲のほぼ全周に臨むように形成されている。前記中心軸を中心にして３６０度の範囲の状況をカメラ２０Ａの撮影光学系に導くように構成されている。
カメラ２０Ａで撮像された画像は円環状に湾曲した画像となる。したがって、中央制御部２２０２によって前記撮像された画像に対して所定の画像処理を行ない。パノラマ状（横長の矩形状）に延在する視覚的に自然な画像に変換する。
中央制御部２２０２は、所定の画像処理によって得られた視覚的に自然な画像を、実施例１の場合と同様に前記第２の画像として扱い、スクリーン１５に表示させる。
ただし、第２の画像が前記中心軸を中心として３６０度にわたって延在する矩形状の画像となるため、そのまま第２の画像をスクリーン１５に表示すると視覚的に不自然となる。したがって、前記第２の画像を、前記中心軸を中心として例えば９０度毎に分割して前方、左右の側方、後方の画像の４つに分割し、適宜切り替えて表示すれば視覚的にも自然となり好ましい。
なお、このような反射鏡２０１６を用いたカメラ２０Ａ、および、このようなカメラ２０Ａで撮像した画像に対して前記所定の画像処理を行なって視覚的に自然な画像を得る技術は従来公知である。
このような実施例２によれば、実施例１の作用効果に加えてカメラ２０Ａの数が１個で済むため、小型化を図るとともにコストを削減する上で有利となる。
また、カメラ２０として１８０度程度の視野角を有する魚眼レンズが組み込まれた撮影光学系を備えたカメラを用いることもできる。この場合には、２つのカメラのうち一方のカメラをその光軸が前方を指向し、他方のカメラをその光軸が後方を指向するように配設し、これら２つのカメラで撮像した画像を画像処理することによって視覚的に自然な画像を生成し、実施例２と同様に取り扱えばよい。この場合には、実施例１の作用効果に加えてカメラ２０Ａの数が２個で済むため、小型化を図るとともにコストを削減する上で有利となる。
【実施例３】
【００１６】
次に本発明の実施例３について説明する。
実施例３は、ユーザーＵが周囲の状況を確認する必要が生じた場合に、図３に示す液晶シャッター１４１３および凹面ハーフミラー１４１２を介して外界の様子を視認すると同時にスクリーン１５に表示された縮小画像をも視認できるようにしている。
実施例３の液晶シャッター１４１３は、中央制御部２２０２の制御により、その濃淡、すなわち光の透過率を変えることができるように構成されている。そのため、透過率を変えることで、液晶シャッター１４１３を透過する外部の像と、スクリーン１５による画像とのコントラスト比を変えることができる。また、この液晶シャッター１４１３は、その全域にわたって均一に光の透過率を変えるのではなく、複数に分割した領域の透過率の制御を各領域毎に独立して行なえるように構成されている。
次に、実施例３の画像表示装置１０の作用効果について説明する。
図９（Ａ）は液晶シャッター１４１３が透過状態あるいは半透過状態でスクリーン１５に前記外部供給映像信号による第１の画像が表示されている様子を示す。この場合には、液晶シャッター１４１３および凹面ハーフミラー１４１２を介して外界画像１０２が視認され、該外界画像１０２の中央箇所（視界中央）に第１の画像１０４が重ね合わされた状態で表示されている。
このような表示状態では、外界画像１０２および第１の画像１０４の様子を細部まで同時に観察することは甚だ困難であり、一般に二重に表示された映像の一方を意識的に集中して観察した場合には、他方の映像の認識力は著しく低下することが知られている。
したがって、外界画像１０２を細部まで観察する必要が生じた際には、図９（Ｂ）に示すようにスクリーン１５による第１の画像１０４の表示を一時的に停止することで外界画像１０２のみを視認できるようにすることができる。
また、図９（Ｃ）に示すように、第１の画像１０４をユーザーＵの視野の端に縮小表示するように構成すれば、外界画像１０２の観察に支障が生じないようにするとともに、視線を縮小表示した第１の画像１０４へ移動することでその画像の概容を認識することができる。なお、ユーザーＵの視野については次に詳述する。
縮小表示する第１の画像１０４は、その背景に外界画像１０２が透過したシースルー状態で表示されてもよいが、液晶シャッター１４１３により縮小表示する第１の画像１０４の領域を部分的に不透過とするか、あるいは、透過率を低下させることで第１の画像１０４を見やすくすることができる。
また、これとは逆に、バックライト１４０６およびＬＣＤ１４０８を制御することによって縮小表示する第１の画像１０４の輝度を下げることにより、背景の外界画像１０２を見やすくすることもできる。
図９（Ｂ）、（Ｃ）に示すように、ユーザーＵが外界画像１０２を容易に視認できるようにすれば、ユーザーＵが周囲の状況を容易に確認する上で有利であり、また、ユーザーＵが画像表示装置１０を頭部に装着したままで外界画像１０２の観察に支障なく歩行することが可能となる。
【００１７】
次に、ユーザーＵの視野について説明する。
図１０は標準的な人間の垂直方向の視野特性を示し、この図によれば通常の視野は水平方向Ｈより１０°〜１５°下方に向いている（図示、立っているときの通常の視線から座っているときの通常の視線までの範囲）ことがわかる。
図１１は標準的な人間の水平方向の視野特性を示し、この図によれば、文字を認識できる視野は約２０°（図示、文字認識限界の範囲）であることがわかる。
そこで本実施例では、第１の画像１０４をユーザーＵの視野の端に縮小表示するにあたり、図１２に示すように、通常の視線（水平方向より１０°下方とする）を中心Ｃとして立体角２０°以内には第１の画像１０４を表示しないようにする。言い換えれば、立体角２０°の範囲を除く範囲に第１の画像１０４が縮小表示されるようにしている（図９（Ｃ））。
こうすることにより、図９（Ｃ）に示すように通常の視線方向では表示像に妨げられることなく外界画像１０２を見ることができ、第１の画像１０４を見たい場合には視線を第１の画像１０４へ移動させることにより、第１の画像１０４と外界画像１０２とを融合して見ることができる。
第１の画像１０４を表示しない範囲は前述の立体角２０°の範囲を最低限とし、それ以上に表示しない範囲を広げればユーザーＵの視野を広く確保できるのでユーザーＵが歩行することができる。
また、図９（Ｂ）に示すように第１の画像１０４を全く表示せず、外界画像１０２のみを表示できるようにすれば、ユーザーＵは外界画像１０２を視認しつつ歩行することができる。
また、上述したように、第１の画像１０４が縮小されることなく通常の大きさでユーザーＵの視野に表示される通常表示状態と、第１の画像１０４がユーザーＵの視野の端に縮小表示される状態、または、第１の画像１０４が非表示となる縮小または非表示状態との切り替え動作は、操作部２２０９に設けた映像切替スイッチを手動操作することで行なってもよいし、歩行センサ２２１２によるユーザーＵの歩行検出によって行なってもよい。
前記映像切替スイッチと歩行センサ２２１２を併用する場合には、歩行時にユーザーＵが前記映像切替スイッチを操作しても歩行センサ２２１２の歩行検知による前記切替動作を優先として前記通常表示状態に遷移できないようにするとともに、歩行センサ２２１２による歩行停止を認識した後に前記映像切替スイッチの操作が可能となるようにすれば、ユーザーＵは外界画像１０２を歩行時には確実に視認することができる。
【実施例４】
【００１８】
次に本発明の実施例４について説明する。
実施例４は、ユーザーＵの視線検出を用いて前記通常表示状態と前記縮小または非表示状態との切り替え動作を行なうようにしている。
図１３は実施例４における画像表示装置１０の構成を簡素化して示す構成図である。
図１３に示すように、ユーザーＵに臨むハーフミラー１４１０の箇所に視線検出センサ１４１６が設けられており、該視線検出センサ１４１６はユーザーＵの視線がハーフミラー１４１０のどの領域を指向しているか、言い換えればユーザーＵがどの領域を注視しているかを検出し、検出している領域を示す注視領域データをコントローラ２２（中央制御部２２０２）に供給するように構成されている。このような視線検出の方法は、カメラシステムのファインダーを覗いた際にファインダー内のどこを注視しているかを認識する方法として従来公知である。
また、液晶シャッターからなる液晶シャッター１４１３の外面に明るさセンサ１４１８（例えば光センサ、フォトダイオード）が設けられており、該明るさセンサ１４１８は外界の明るさを検出し明るさを示す明るさ検出信号を中央制御部２２０２に供給するように構成されている。
また、液晶シャッタードライバ１４１３Ａは、中央制御部２２０２の指令により液晶液晶シャッター１４１３の透過率及び該液晶シャッター１４１３の動作範囲（透過率を調整する範囲）を調節するように構成されている。
中央制御部２２０２が液晶シャッター１４１３の動作範囲を調整することにより、縮小表示する第１の画像１０４の部分にだけシャッターをかける（透過率を低下させる）ことで第１の画像１０４の視認性を上げることができるように構成されている。
また、中央制御部２２０２が明るさセンサ１４１８で検知した明るさに応じて液晶シャッタードライバ１４１３Ａを介して液晶シャッター１４１３の透過率を自動的に調節することにより、ユーザーＵが外界画像１０２と第１の画像１０４とを融合して見られるようにこれらの明るさの比率を適当な範囲に保つことができるように構成されている。
また、図１５に示すように、前記縮小または非表示状態では、スクリーン１５のうちユーザーＵの視野の端に、再表示操作領域１０６を示すアイコン１０８が表示されるように構成されており、中央制御部２２０２は、視線検出センサ１４１６によってユーザーＵが非歩行時にアイコン１０８、すなわち再表示操作領域１０６を所定時間注視したことが検知されると、スクリーン１５を、前記縮小または非表示状態から前記通常表示状態に切り替えるように、言い換えると第１の画像１０４を拡大表示するように構成されている。
【００１９】
次に、図１４のフローチャートを参照して実施例４の動作について説明する。
中央制御部２２０２は、歩行センサ２２１２の検知信号に基づいてユーザーＵが歩行しているか否かを監視している（ステップＳ１０）。
歩行が検知されなければ、視線検出センサ１４１６によってユーザーＵがアイコン１０８、すなわち再表示操作領域１０６を所定時間注視したか否か、すなわち画像拡大要求の有無を判定する（ステップＳ１２）。画像拡大要求が無ければステップＳ１０に戻り、画像拡大要求が有れば前記通常表示状態であるか否か、すなわち第１の画像１０４が拡大表示中であるか否かを判定する（ステップＳ１４）。拡大表示中であればステップＳ１０に戻り、拡大表示中でなければ、第１の画像１０４をスクリーン１５に拡大表示する（ステップＳ１６）。
また、ステップＳ１０で歩行が検知された場合には、第１の画像１０４が拡大表示中であるか否かを判定し（ステップＳ１８）、拡大表示中であればスクリーン１５を前記縮小または非表示状態にし（ステップＳ２０）、拡大表示中でなければステップＳ１０に戻る。
したがって、実施例４によれば、ユーザーＵの視線検出を用いて前記通常表示状態と前記縮小または非表示状態との切り替え動作を行なうので、ユーザーＵがスイッチを操作すること無く切り替え動作を行なうことができ操作性を向上させる上で有利となる。
さらに、ユーザーＵが歩行中の場合には第１の画像１０４の拡大表示を停止し、拡大要求も受け付けないので、ユーザーＵの歩行時には外界画像１０２の視認性を確保することができる。
なお、再表示操作領域１０６をアイコン１０８で示す代りに縮小表示されている第１の画像１０４で示すようにしてもよい。
【実施例５】
【００２０】
次に本発明の実施例５について説明する。
実施例５は、第１の画像と第２の画像の双方を同時にスクリーン１５に表示させるようにしている。
図１６に示すように、液晶シャッター１４１３が透過状態とされることで、該液晶シャッター１４１３および凹面ハーフミラー１４１２を介して外界画像１０２が視認されている。そして、外界画像１０２の中央箇所（視界中央）に外部供給映像信号による第１の画像１０４が重ね合わされた状態で表示され、さらに、外界画像１０２の端（ユーザーＵの視野の端）に第２の映像１１０が表示されている。第２の画像１１０は、前記外界画像１０２のほぼ全域に相当するものであり、例えばカメラ２０のうち、正面を指向している広角に設定されている第１カメラ２００２（ＦＷ）から供給される周囲映像信号によるものであり、スクリーン１５に表示されるように縮小して表示されている。
したがって、本実施例によれば、外界画像１０２に相当する第２の画像１１０を縮小してスクリーン１５の端に表示するので、第１の画像１０４によって外界画像１０２の一部または全部が隠されていても、視線を第２の画像１１０に移すことによって周囲の状況を確認することができ、ユーザーＵが特別な操作を行なうことなく、周囲の状況を視認することができ、使い勝手を高める上で有利である。
また、スクリーン１５の端に表示する第２の画像１１０としては、前述のように外界画像１０２のほぼ全域に相当する画像を縮小表示したものに限らず、第１の画像１０４によって隠された外界画像１０２の部分に相当する画像のみを縮小表示あるいは外界画像１０２と同倍率で表示するようにしても上述と同様の作用効果を得ることができる。
【実施例６】
【００２１】
次に本発明の実施例６について説明する。
実施例６は、外界画像１０２に第２の画像１１０を重ね合わせて表示させるようにしている。
図１７（Ａ）に示すように、液晶シャッター１４１３が透過状態とされることで、該液晶シャッター１４１３および凹面ハーフミラー１４１２を介して外界画像１０２が視認されている。この際ユーザーＵは静止しているものとする。
ここで、ユーザーＵが操作部２２０９に設けられた映像切替用のスイッチを操作することにより、図１７（Ｂ）に示すように、例えば正面を指向する望遠に設定されている第２カメラ２００４（ＦＺ）の周囲映像信号による第２の画像１１０がスクリーン１５の中央に外界画像１０２に重ね合わされた状態で表示される。
そして、ユーザーＵが静止した状態から歩き始めると歩行センサ２２１２によって歩行が検知され、これにより中央制御部２２０２は、図１７（Ｃ）に示すように、第２の画像１１０をスクリーン１５の端（ユーザーＵの視野の端）に縮小表示させる。
したがって、本実施例によれば、ユーザーＵが観察したい対象物を肉眼よりも第２の画像１１０として拡大表示させ、詳しく見ることができる。また、ユーザーＵの歩行時には、面倒な操作をすることなく、第２の画像１１０を視野の端に縮小表示させることで視野を確保することができる。
【００２２】
なお、第２の画像１１０を表示させるにあたり次のような構成とすることができる。
（１）カメラ２０を撮影倍率が調整可能なズーム式とし、その撮影倍率を中央制御部２２０２によって調整できるように構成する。視線検出センサ１４１６によってユーザーＵの視線が所定の時間一定の方向を向いていれば、ユーザーＵがその方向にある物体を注視していると判断し、カメラ２０ズームによる拡大を自動的に行う。
このように構成すればユーザーＵは面倒な操作をすることなく物体の画像を拡大して視認することができる。
（２）カメラ２０に撮像方向を任意の方向に可変できる所謂パンティルター機能を設け、中央制御部２２０２の制御によって任意の方向の映像をスクリーン１５に表示させるように構成する。パンティルターの方向制御は、例えば操作部２２０９に設けたジョイスティックや十字キー等を操作することによって行なうこともできるし、音声認識装置等を設けユーザーＵの音声指示によって行なうこともできる。あるいは、前述の視線検出センサ１４１６を用い、第２の画像１１０で表示される画像の中心とユーザーＵの視線方向とが一致するようにパンティルターの方向制御を行なうようにしてもよい。
（３）また指定した対象物を画像認識などの手法によって認識し、カメラ２０が該対象物の方向を自動的に向く、所謂自動追尾を行なうように構成してもよい。
（４）カメラ２０は、前述したように撮影倍率が異なっていてもよい。例えば、同じ方向に向けた撮影倍率の異なるカメラ２０からの周囲映像信号を選択してスクリーン１５に表示すれば同じ映像の表示倍率を切り替えて観察することができる。
【００２３】
（５）スクリーン１５に表示する第２の画像１１０は、１つのカメラ２０の画像に限らず複数のカメラ２０の画像であってもよい。
例えば、図１８に示すように、第１カメラ２００２（ＦＷ）、第２カメラ２００４（ＦＺ）、第３カメラ２００６（ＦＳ）、第４カメラ２００８（ＬＷ）、第５カメラ２０１０（ＲＷ）、第６カメラ２０１２（ＢＷ）、第７カメラ２０１４（ＢＺ）のそれぞれによる７種類の第２の画像１１０を同時にスクリーン１５に表示させる。
そして、選択された第２カメラ２００４（ＦＺ）による第２の画像１１０がスクリーン１５の中央に拡大表示され、残り６個のカメラ２０の名称（ＦＷ、ＦＳ、ＬＷ、ＲＷ、ＢＷ、ＢＺ）の各アイコン１１０Ａが、これら各カメラ２０による第２の画像１１０に代えてスクリーン１５の端（視野の端）に表示される。なお、各アイコン１１０Ａに代えて各カメラ２０による第２の画像１１０を縮小表示してもよいことは勿論である。
縮小表示された複数のカメラ２０による第２の画像１１０のうち、どのカメラ２０の第２の画像１１０を中央へ拡大表示させるかの選択は、操作部２２０９に設けたスイッチの選択操作あるいは音声認識システム等による選択でもよいが、前述した視線検出センサ１４１６を利用してもよい。すなわち、ユーザーＵが拡大して表示したいアイコン１１０Ａまたは縮小された第２の画像１１０を所定時間注視した場合に、そのアイコン１１０Ａまたは縮小された第２の画像１１０に対応するカメラ２０の第２の画像１１０を拡大表示するようにすればよい。このような構成によれば、複数のカメラ２０の選択操作が容易に行なえ、操作性を向上する上で有利となる。
【００２４】
（６）図１９に示すように、スクリーン１５には、１つの第２の画像１１０を拡大表示し、かつ、１つの第２の画像１１０のみを縮小表示するようにしておき、縮小表示する第２の画像１１０を操作部２２０９のスイッチや音声認識システム等で選択するように構成する。そして、選択された縮小表示された第２の画像１１０の拡大表示の実行、非実行を前述した視線検出センサ１４１６を利用して行なうようにしてもよい。すなわち、ユーザーＵが拡大して表示したい縮小表示されている第２の画像１１０を所定時間注視した場合に、その縮小表示された第２の画像１１０に対応するカメラ２０の第２の画像１１０を拡大表示するようにすればよい。
このような構成によれば、図１８に比較して縮小表示される第２の画像１１０の数を減らすことができるので、縮小表示された第２の画像１１０で隠される外界画像１０２の部分を少なくでき、視認できる外界画像１０２の面積を確保する上で有利となる。
【００２５】
（７）図１８、図１９に示す第２の画像１１０の縮小表示を行なうことなく、スクリーン１５に拡大表示される第２の画像１１０を、操作部２２０９の切替スイッチや音声認識による指示で選択されたカメラ２０による第２の画像１１０に切り替えるようにすれば、縮小表示された第２の画像１１０で隠される外界画像１０２の部分がなくなるので、視認できる外界画像１０２の面積を確保する上でさらに有利となる。
これらユーザーＵの周囲を撮影する複数のカメラ２０による第２の画像１１０のうち、どのカメラ２０による第２の画像１１０をスクリーン１５に拡大表示させるかの選択は、例えば操作部２２０９に設けたジョイスティックや十字キー等の操作や音声認識装置等を用いたユーザーＵによる左右方向への指示で可能である。あるいは、前述の視線検出センサ１４１６を用い、ユーザーＵの視線方向と同じ方向を指向するカメラ２０による第２の画像１１０を選択するようにしてもよい。この場合、スクリーン１５に表示される各カメラ２０による第２の画像１１０のうち、互いにオーバーラップする画像エリアは画像処理によって連続表示されることが望ましい。
上述した（１）乃至（７）の構成の何れにおいても、ユーザーＵの歩行が検知された場合には、少なくとも通常の視野中心範囲への画像の表示を停止するようにすることが外界画像１０２の視認を確実に行なう上で好ましい。
【実施例７】
【００２６】
次に実施例７について説明する。
実施例７は、カメラ２０で撮像した画像を記録装置に記録するようにしている。
図４に示すように、本実施例では、コントローラ２２のインターフェース部２２０６に記録装置３２が接続され、カメラ２０からの周囲映像信号およびマイク３３からの音声信号が記録装置３２に出力され、記録装置３２によって映像と音声の記録が可能となるように構成されている。
記録装置３２はビデオカメラに使用される磁気記録装置・光ディスク記録装置・半導体メモリー記録装置等のいずれであってもよい。
記録装置３２は画像表示装置１０のコントローラ２２に一体化されたものでも、接続ケーブルや無線にてコントローラ２２に接続される形態でもよく、ユーザーＵが携行するものでもよい。
複数のカメラ２０の周囲映像信号を記録装置３２に記録するには、記録装置３２の記録レートの範囲内にて、複数のカメラ２０からの周囲映像信号及びマイク３３からの音声信号を、同時にもしくは時分割に記録するものとし、再生時には記録されている各カメラ２０の周囲映像信号を選択的に再生可能なものとする。
また、記録装置３２へは複数のカメラ２０からの周囲映像信号をすべて記録するものでも、選択された一部を記録するものでもよく、記録装置３２は一台に限らず複数台用いてもよい。
【００２７】
次に操作について説明する。
まず、液晶シャッター１４１３の透過率を調節することにより、凹面ハーフミラー１４１２とハーフミラー１４１０を介して外界画像１０２が視認できるようにする。
この状態で、操作部を操作してカメラ２０からの周囲映像信号およびマイク３３からの音声信号を記録装置３２に出力するとともに、記録装置３２によって映像と音声の記録を開始させる。
すると、ユーザーＵの移動に伴ってユーザーＵの外部の状況を示す周囲映像信号と周囲音声信号とが記録装置３２に記録される。
このような構成によれば、ユーザーＵの移動に伴ってユーザーＵの外部の状況を示す周囲映像信号と周囲音声信号とが記録装置３２に記録されるので、記録装置３２に記録された周囲映像信号と周囲音声信号を再生することによりユーザーＵの視覚的および聴覚的な体験を再現することができる。
また、実施例３、４、５、６で説明したように、ユーザーＵは、録画したい対象を肉眼で観察しながら、必要に応じてカメラ２０による第２の画像１１０の概容をスクリーン１５によって縮小画面で確認したり、瞬時に拡大表示して記録画面の詳細を確認することができる。
これにより「ビデオ撮影に気を取られて撮影対象を観察することができない」といったストレスを感じること無くビデオ撮影と撮影対象の観察を同時に行うことができる。
実施例７においても、実施例１乃至実施例６で説明した画像表示装置１０の構成が適用可能であり、これら各実施例におけるカメラ２０によって生成される周囲映像信号、すなわち第２の画像を記録することができる。
【００２８】
また、本実施例の画像表示装置
１０は、ユーザーＵの周囲の状況を記録するビデオカメラとしてだけでなく、ユーザーＵの行動履歴の記録装置として活用することが可能である。
ユーザーＵが外部の景色を観察し通常に行動しながら、記録装置３２にてカメラ２０からの周囲映像信号を記録しユーザーＵの体験した内容を意識することなく自然に記録することができる。
例えば、ユーザーＵの正面方向を撮影する広角に設定された第１カメラ２００２（ＦＷ）について説明すると、第１カメラ２００２によって記録される周囲映像信号はユーザーＵの顔の正面方向となるので概ねユーザーＵの視線と合致し、マイクによる音声情報と同時にユーザーＵの観察した映像情報を、ビデオカメラの操作を意識すること無く記録することができる。
しかし、通常ユーザーＵの観察する映像情報はユーザーＵの顔の正面方向だけに限らず、視線の移動により顔の正面方向から上下及び左右方向へ移動させることが可能である。
このため、第１カメラ２００２にてユーザーＵの視線移動による映像情報を逃さずに記録する為には、該第１カメラ２００２の画角は、ユーザーＵの視線の上限〜視線の下限、及び右目の可視範囲〜左眼の可視範囲を含むように設定されていることが望ましい。
さらに視線検出センサ１４１６を利用してユーザーＵの視線方向を検出し、記録装置３２へユーザーＵの視線情報を同時に記録することで、再生時にユーザーＵの視線方向を示す情報（ユーザーＵの視線位置）を第２の画像１１０に重畳して表示すれば記録時のユーザーＵの視点、すなわちユーザーＵが何を注視していたのかが再生された第２の画像１１０の中から認識可能となる。
【００２９】
また、前述した歩行センサ２２１２を構成する第１の加速度センサ、第２の加速度センサを用いてユーザーＵの行動による撮像装置の揺れを認識し撮像画像がぶれないように所謂手ぶれ補正機能を有することが可能である。
この手ぶれ補正はカメラ２０による画像を記録する際に補正を行ってもよいが、補正を行わずに画像と共に前記加速度センサーの出力情報を記録し、再生時にブレ補正を行うか否かの選択を行えるようにしてもよい。
これにより、記録時のブレ補正での消費電力を低減させると共に、再生時に補正選択を行なわない、あるいは補正量を低減する等の選択によって、ユーザーＵの動きに応じた臨場感の有る画像を再生することも可能となる。
この様な複数のカメラ２０により、ユーザーＵの周囲すべての方向を同時に記録可能にしていればユーザーＵの行動時の周辺状況を洩れなく記録することが可能となりより利便性が向上する。
再生時に複数の周囲映像信号のどれを選択表示するかは鑑賞者による任意の選択が可能であるが、記録されたユーザーＵの視線情報から視線方向の画像を選択すればユーザーＵの体験映像を再現できる。
ユーザーＵの行動履歴として、前述した周囲の映像情報、音声情報、ユーザーＵの視線情報に加えて、さらに以下の情報を記録できるようにすればより詳細な情報が保存可能となる。
（１）ＧＰＳセンサ２２１０で生成された測位データを記録装置３２に記録すれば、ユーザーＵの移動状況や行動した場所情報を記録できる。
（２）２軸以上の加速度センサーにより、歩行の開始／停止、歩行速度、階段の昇降、頭部の変動等の行動様式を判定し記録すると共に、画像ブレの補正データーとして利用する。
（３）体温、心拍数、呼吸数、発汗量等を検出する種々のセンサをさらに設け、これらのセンサから得られる身体状況のデーターを記録して、運動状況や体調・感情の変化を判断する。
【００３０】
なお、上述した各実施例において、画像表示装置１０は、ユーザーＵの両目に対して画像を表示するように構成されているが、片目に対して画像を表示する構成であってもよい。
また、スクリーン１５は、図６に示すようにハーフミラーを用いることでスクリーン１５を透過して外界画像１０２を視認する所謂シースルー機能を有する構成に限定されるものではなく、ホログラム素子を使用して構成されたシースルー機能を有するものでもよい。また、カメラ２０の周囲映像信号に基づいて外界画像１０２に相当する視野を確保できる場合には、シースルー機能を有さない所謂フリーシェイプドプリズムタイプのものであってもよい。
また、画像表示装置１０の装着部１２の構成は図１に示す構成に限定されるものではなく、眼鏡のようにユーザーＵの両耳と鼻梁の部分で支持される構成であってもよいし、ヘルメットのように頭部に被ることで支持される構成であってもよい。
【図面の簡単な説明】
【００３１】
【図１】実施例１の画像表示装置の構成を示す斜視図である。
【図２】実施例１の画像表示装置が装着された状態を示す説明図である。
【図３】実施例１の画像表示装置における撮像手段の配置を示す説明図である。
【図４】実施例１の画像表示装置の構成を示すブロック図である。
【図５】実施例１の画像表示装置の構成を示す説明図である。
【図６】実施例１の画像表示装置の光学系の構成図である。
【図７】歩行センサの原理説明図である。
【図８】実施例２の画像表示装置の構成を示す斜視図である。
【図９】スクリーン１５に表示される画像の説明図である。
【図１０】標準的な人間の垂直方向の視野特性を示す説明図である。
【図１１】標準的な人間の水平方向の視野特性を示す説明図である。
【図１２】標準的な人間の視野特性を示す説明図である。
【図１３】実施例４における画像表示装置１０の構成を簡素化して示す構成図
【図１４】実施例４における動作フローチャートである。
【図１５】実施例４におけるスクリーン１５に表示される画像の説明図である。
【図１６】実施例５におけるスクリーン１５に表示される画像の説明図である。
【図１７】実施例６におけるスクリーン１５に表示される画像の説明図である。
【図１８】実施例６におけるスクリーン１５に表示される画像の説明図である。
【図１９】実施例６におけるスクリーン１５に表示される画像の説明図である。
【符号の説明】
【００３２】
１０……画像表示装置、１２……装着部、１４……表示ユニット、１４０６……バックライト、１４０８……ＬＣＤ、１４１０……ハーフミラー、１４１２……凹面ハーフミラー、１４１３……液晶シャッター、１５……スクリーン、２０……カメラ、２２……コントローラ。
【図１】
2005172851.tif 000003
【図２】
2005172851.tif 000004
【図３】
2005172851.tif 000005
【図４】
2005172851.tif 000006
【図５】
2005172851.tif 000007
【図６】
2005172851.tif 000008
【図７】
2005172851.tif 000009
【図８】
2005172851.tif 000010
【図９】
2005172851.tif 000011
【図１０】
2005172851.tif 000012
【図１１】
2005172851.tif 000013
【図１２】
2005172851.tif 000014
【図１３】
2005172851.tif 000015
【図１４】
2005172851.tif 000016
【図１５】
2005172851.tif 000017
【図１６】
2005172851.tif 000018
【図１７】
2005172851.tif 000019
【図１８】
2005172851.tif 000020
【図１９】
2005172851.tif 000021