(57)【要約】【課題】ユーザの自己位置情報と引き換えに取得した情報をユーザの自己位置からの視界に沿う実風景と関連付けて表示することが可能な情報表示装置を提供する。【解決手段】ユーザの位置情報に基づいて取得される情報をユーザの位置と関連付けて表示する情報表示装置において、ユーザの現在位置を検出するための現在位置検出手段と、ユーザの視線方向を検知するための視線方向検知手段と、この視線方向検知手段により検知した視線に沿った実風景を撮像する撮像手段と、この撮像手段により撮像された実風景中のオブジェクトを識別するための識別手段と、取得した情報をユーザの視線に相当する実風景とオーバーレイさせて表示する眼鏡タイプの表示手段とを有し、前記現在位置検出手段により検出されたユーザの位置に基づいて取得された情報を、前記識別手段により識別された実風景中のオブジェクトと関連付けて、前記表示手段に表示する、ことを特徴とする情報表示装置。  【選択図】  図１
2009192448.tif 000002
【特許請求の範囲】
【請求項１】
ユーザの位置情報に基づいて取得される情報をユーザの位置と関連付けて表示する情報表示装置において、
ユーザの現在位置を検出するための現在位置検出手段と、
ユーザの視線方向を検知するための視線方向検知手段と、
この視線方向検知手段により検知した視線に沿った実風景を撮像する撮像手段と、
この撮像手段により撮像された実風景中のオブジェクトを識別するための識別手段と、
取得した情報をユーザの視線に相当する実風景とオーバーレイさせて表示する眼鏡タイプの表示手段とを有し、
前記現在位置検出手段により検出されたユーザの位置に基づいて取得された情報を、前記識別手段により識別された実風景中のオブジェクトと関連付けて、前記表示手段に表示する、
ことを特徴とする情報表示装置。
【請求項２】
前記表示手段は、透明または半透明の有機ＥＬディスプレイであり、前記表示手段を介してユーザが視認可能な実風景に、取得した情報をオーバーレイさせて表示させる請求項１に記載の情報表示装置。
【請求項３】
前記撮像手段により撮像した実風景画像を前記表示手段に表示し、この実風景画像に、取得した情報をオーバーレイさせて表示させる請求項１に記載の情報表示装置。
【請求項４】
ユーザの位置情報に基づいて取得される情報は、音楽情報であり、
実風景中のオブジェクトが音楽情報の情報源である場合に、音楽情報のタイトル情報を前記オブジェクトと関連付けて、前記表示手段に表示する、請求項１に記載の情報表示装置。
【請求項５】
前記情報表示装置は、二輪車向けナビゲーション装置の表示ディスプレイであり、この表示ディスプレイは、二輪車運転者が着用するヘルメットのバイザーを構成し、
ユーザの位置情報に基づいて取得される情報は、ナビゲーション地図情報であり、
実風景中のオブジェクトが二輪車走行中の実風景中の道路である場合に、ナビゲーション情報を前記オブジェクトと関連付けて、前記表示手段に図形表示する、請求項１に記載の情報表示装置。
【請求項６】
ユーザの位置情報に基づいて取得される情報は、前記撮像手段により撮像され、圧縮され、一旦外部記憶装置に記憶された実風景に関連するサムネイル画像情報であり、
前記サムネイル画像情報を実風景と関連付けて、前記表示手段に図形表示する、請求項１に記載の情報表示装置。
【請求項７】
前記サムネイル画像情報を図形表示するに際し、ユーザの現在位置と撮像位置との距離に応じて、図形の大きさを変化するように、前記サムネイル画像情報を実風景と関連付ける、請求項６に記載の情報表示装置。
【請求項８】
ユーザが所望する情報を表示する少なくとも１つの情報表示装置と、該情報を取得して前記情報表示装置に提供する情報提供装置と、を有する情報提供システムにおいて、
前記情報表示装置は、
ユーザの現在位置を算出する現在位置算出手段と、
該現在位置算出手段により算出した現在位置情報と、前記情報提供装置の識別情報とを、前記情報提供装置に、通信回線を通じて送信する第１送信手段と、
前記情報提供装置から送信されてきた所望の情報を受信する第１受信手段と、
ユーザの視線方向を検出するための視線方向検出手段と、
該視線方向検出手段により検出した視線に沿った実風景を撮像する撮像手段と、
該撮像手段により撮像された実風景中のオブジェクトを識別するための識別手段と、
該第１受信手段により受信した所望の情報を表示する表示手段とを有し、該表示手段は、取得した情報をユーザの視線に相当する実風景とオーバーレイさせて表示する眼鏡タイプであり、
それにより、前記位置検出手段により検出されたユーザあるいは移動体の現在位置に基づいて取得された所望の情報を、前記識別手段により識別された実風景中のオブジェクトと関連付けて、前記表示手段に表示し、
前記情報提供装置は、
所望の情報を取得する情報取得手段と、
該情報取得手段により取得した所望の情報を記憶する情報記憶手段と、
前記第１送信手段から送信された、現在位置情報と、識別情報とを受信する第2受信手段と、
前記第2受信手段により受信した現在位置情報によって特定される位置から所定範囲内にある所望の情報を前記情報記憶手段から検索する情報検索手段と、
前記情報検索手段によって検索した所望の情報を、前記第2受信手段により受信した識別情報によって特定される情報表示装置に対して、通信回線を通じて送信する第２送信手段とを、
有することを特徴とする情報提供システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報表示装置及び情報提供システムに関し、より詳細には、自己の位置情報と引き換えに取得した情報を実風景と関連付けて表示することが可能な情報表示装置及び情報提供システムに関する。
【背景技術】
【０００２】
従来から、ユーザの自己位置情報と引き換えに、自己位置情報と関連する情報を取得する技術が用いられている。
たとえば、ＧＰＳ機能を有する携帯電話の場合、ユーザの自己位置情報をＧＰＳ機能により検出した後、検出した自己位置情報を基地局に送信し、ネットワークを介して各種サーバから自己位置情報に関連した情報を取得し、基地局から携帯電話に送信し、携帯電話の画面に表示させるようにしている。
この自己位置情報に関連した情報には、たとえば、ユーザの現在位置を含む所定エリア内にある店舗情報、安売り情報、ナビゲーション情報等様々な情報が含まれる。
【０００３】
しかしながら、このような携帯電話の場合、以下のような技術的課題が存する。
すなわち、自己位置情報に関連した情報を取得した際、取得した情報をユーザに表示する仕方に問題が存する。より詳細には、携帯電話の画面上にたとえば、付近の地図を表示し、取得した情報、たとえばナビゲーション情報がこの地図上で自己の現在位置と関連付けて表示されるものの、ユーザの現在位置からの視界に沿う実風景と取得した情報との関連性が不明であり、画面上に表示された、たとえば交差点や信号、特定の施設などの目印を頼りに、ユーザが実際の風景の中でこれらの目印を視認して道順を確認する必要がある。
そのため、たとえば、目的の店舗が実際はすぐ眼の前にありながら、画面上に表示された情報と実際の実風景とがマッチせず、せっかく取得した情報をタイムリーに活用する場面を失することも多い。
特に、携帯電話のような携帯タイプのナビゲーション装置とは異なり、車両搭載タイプのナビゲーション装置の場合、それも特に、二輪車用のナビゲーション装置の場合、走行中に進路から視線を離さずに運転をする必要が高いことから、取得した情報が瞬時に理解可能なように、実際に見ている風景（道路）上にナビゲーション情報が表示されることが強く望まれる。
【０００４】
一方、自己位置情報と引き換えに取得する、自己位置情報と関連する情報の種別によっては、その表示の仕方に問題が存する。
たとえば、取得する情報が音楽情報、あるいは静画あるいは動画情報である場合には、
それらの情報にアクセスして必要な情報の取捨選択をする際、音楽情報そのものを聴覚情報として直接取得したり、情報量の大きな画像情報そのものに視覚情報として直接アクセスしたのでは、効率的な情報の取捨選択は困難である。この場合、これらの情報について、情報の取捨選択と情報そのものへのアクセスとを切り離し、情報の取捨選択の便宜に資するために、自己の位置情報と引き換えに取得する情報をいったん別の態様で実風景と関連付けて表示することが望まれる。
【発明の開示】
【発明が解決しようとする課題】
【０００５】
以上の技術的問題に鑑み、本発明の目的は、ユーザの自己位置情報と引き換えに取得した情報をユーザの自己位置からの視界に沿う実風景と関連付けて表示することが可能な情報表示装置及びかかる情報表示装置を備えた情報提供システムを提供することにある。
【課題を解決するための手段】
【０００６】
上記目的を達成するために、本発明に係る情報表示装置は、
ユーザの位置情報に基づいて取得される情報をユーザの位置と関連付けて表示する情報表示装置において、
ユーザの現在位置を検出するための現在位置検出手段と、
ユーザの視線方向を検知するための視線方向検知手段と、
この視線方向検知手段により検知した視線に沿った実風景を撮像する撮像手段と、
この撮像手段により撮像された実風景中のオブジェクトを識別するための識別手段と、
取得した情報をユーザの視線に相当する実風景とオーバレイさせて表示する眼鏡タイプの表示手段とを有し、
前記現在位置検出手段により検出されたユーザの位置に基づいて取得された情報を、前記識別手段により識別された実風景中のオブジェクトと関連付けて、前記表示手段に表示する、構成としている。
【０００７】
以上の構成を有する本発明の情報表示装置およびかかる情報表示装置を備えた情報提供システムによれば、位置検出手段によりユーザの位置を検出するとともに、視線検知手段によりユーザの視線を検知し、撮像手段によりこの検知したユーザの視線に沿って実風景を撮像し、識別手段によりこの撮像された実風景中のオブジェクトを識別し、眼鏡タイプの表示手段により、検出されたユーザの位置に基づいて取得された情報をユーザの視線に沿う実風景とオーバレイさせて表示することにより、取得された情報を識別された実風景中のオブジェクトと関連付けて表示することが可能である。
また、前記表示手段は、透明または半透明の有機ＥＬディスプレイであり、前記表示手段を介してユーザが視認可能な実風景に、取得した情報をオーバレイさせて表示させるのがよい。
あるいは、前記撮像手段により撮像した実風景画像を前記表示手段に表示し、この実風景画像に、取得した情報をオーバレイさせて表示させるのでもよい。
さらにまた、ユーザの位置情報に基づいて取得される情報は、音楽情報であり、
実風景中のオブジェクトが音楽情報の情報源である場合に、音楽情報のタイトル情報を前記オブジェクトと関連付けて、前記表示手段に表示する、のがよい。
加えて、前記情報表示装置は、二輪車向けナビゲーション装置の表示ディスプレイであり、この表示ディスプレイは、二輪車運転者が着用するヘルメットのバイザーを構成し、
ユーザの位置情報に基づいて取得される情報は、ナビゲーション地図情報であり、
実風景中のオブジェクトが二輪車走行中の実風景中の道路である場合に、ナビゲーション情報を前記オブジェクトと関連付けて、前記表示手段に図形表示するのがよい。
さらに、ユーザの位置情報に基づいて取得される情報は、前記撮像手段により撮像され、圧縮され、一旦外部記憶装置に記憶された実風景に関連するサムネイル画像情報であり、
前記サムネイル画像情報を実風景と関連付けて、前記表示手段に図形表示するのでもよい。
さらにまた、前記サムネイル画像情報を図形表示するに際し、ユーザの現在位置と撮像位置との距離に応じて、図形の大きさを変化するように、前記サムネイル画像情報を実風景と関連付けるのがよい。
上記目的を達成するために、本発明に係る情報提供システムは、
ユーザが所望する情報を表示する少なくとも１つの情報表示装置と、該情報を取得して前記情報表示装置に提供する情報提供装置と、を有する情報提供システムにおいて、
前記情報表示装置は、
ユーザの現在位置を算出する現在位置算出手段と、
該現在位置算出手段により算出した現在位置情報と、前記情報提供装置の識別情報とを、前記情報提供装置に、通信回線を通じて送信する第１送信手段と、
前記情報提供装置から送信されてきた所望の情報を受信する第１受信手段と、
ユーザの視線方向を検出するための視線方向検出手段と、
該視線方向検出手段により検出した視線に沿った実風景を撮像する撮像手段と、
該撮像手段により撮像された実風景中のオブジェクトを識別するための識別手段と、
該第１受信手段により受信した所望の情報を表示する表示手段とを有し、該表示手段は、取得した情報をユーザの視線に相当する実風景とオーバレイさせて表示する眼鏡タイプであり、
それにより、前記位置検出手段により検出されたユーザあるいは移動体の現在位置に基づいて取得された所望の情報を、前記識別手段により識別された実風景中のオブジェクトと関連付けて、前記表示手段に表示し、
前記情報提供装置は、
所望の情報を取得する情報取得手段と、
該情報取得手段により取得した所望の情報を記憶する情報記憶手段と、
前記第１送信手段から送信された、現在位置情報と、識別情報とを受信する第2受信手段と、
前記第2受信手段により受信した現在位置情報によって特定される位置から所定範囲内にある所望の情報を前記情報記憶手段から検索する情報検索手段と、
前記情報検索手段によって検索した所望の情報を、前記第2受信手段により受信した識別情報によって特定される情報表示装置に対して、通信回線を通じて送信する第２送信手段とを、有する構成としている。
【発明を実施するための最良の形態】
【０００８】
（第１の実施形態）
以下に、本発明の第１の実施形態について、図面を参照しながら詳細に説明する。
図１に示すように、本実施形態の情報提供システム１０は、二輪車のドライバーであるユーザが所望するナビゲーション情報を表示する情報表示装置１２と、ナビゲーション情報に関連する情報を取得して情報表示装置１２に提供する情報提供装置１４とを有し、情報表示装置１２と情報提供装置１４とは、移動体通信等の通信回線１６を介して接続されている。
【０００９】
情報表示装置１２は、移動体の現在地（自車位置）や目的地、あるいは現在地から目的地までの誘導経路をディスプレイ２８（図２）に表示して、ユーザに知らせ、また、情報提供装置１４に対して、ユーザが所望する情報を提供するように要求するとともに、情報提供装置１４から提供された情報をディスプレイ２８に表示して、ユーザに知らせる。
情報提供装置１４は、インターネット等のネットワークを介して接続された複数種のサーバから各種情報を取得するとともに、情報表示装置１２から送られてきたユーザの要求に合致する情報を情報表示装置１２に送るようにしている。
【００１０】
図２に示すように、本実施形態の情報表示装置１２であるナビゲーション装置は、特に二輪車向けのナビゲーション装置として、二輪車に乗車する際に着用するヘルメット１８に設けられ、ユーザがネットワークを介して情報提供装置１４であるサーバと接続された装置本体部２０と、装置本体部２０に接続され、使用の際、ユーザが着用する眼鏡タイプの情報表示部２２とを有する。
装置本体部２０は、通信機能を備えたパーソナルコンピュータと同等の機能を再現し得るハードウェア構成を備える。ただし、可搬し得る程度の外形筐体であることが好ましい。このほか、本実施形態においては、ヘルメット１８に、これらパーソナルコンピュータと同等の機能構成を内蔵する態様でもよい。
眼鏡タイプの情報表示部２２は、ヘルメット本体２４と、ヘルメット本体２４に固定された視線方向検出センサ２６と、ヘルメット１８のバイザーを構成する透視型表示ディスプレイ２８と、ヘルメット本体２４に固定された撮像手段３０とを有する。
視線方向検出センサ２６は、既知の方位センサや地磁気センサが用いられ、ユーザの視線方向を検出して、検出した視線方向にかかる信号を、後に説明する装置本体の演算処理部３２へ送信するようにしている。
【００１１】
透視型表示ディスプレイ２８は、透明あるいは半透明の有機EL製であり、ユーザがディスプレイ２８を通してユーザの視線に沿った実際の風景を視認することが可能であり、後に説明するように、ユーザの自己位置情報と引き換えに情報提供装置１４から取得したナビゲーション情報をディスプレイ２８上で、実際の風景、特に走行中の道路とオーバレイさせて表示するようにしている。これにより、ユーザは、走行中に、進行方向から目線を離すことなく、安全に且つ瞬時にナビゲーション情報を取得し、理解することが可能である。
透視型表示ディスプレイ２８は、特に柔軟かつ薄型のものが好ましく、バイザーの表面に貼り付けるものでもよい。そのようなタイプの有機EL材料としては、たとえば有機薄膜トランジスタを採用したタイプのものとして、プラスチック基板材料として、PES（ポリエーテルスルホン）、一方有機トランジスタ材料として、ペンタセン（C22H14）が挙げられる。有機薄膜トランジスタを採用することにより、有機薄膜トランジスタをプラスチックフィルム上に形成し、その上に有機ELの発光素子を積層させて、その上にプラスチックフィルムを積層させることが可能であり、これにより薄膜トランジスタの絶縁膜として、硬質な無機絶縁材料を撤廃し、有機絶縁材料のみを採用することで、薄く、軽く、曲げられる表示ディスプレイ２８を実現することが可能である。
【００１２】
撮像手段３０は、ビデオカメラあるいはスチルカメラ等であり、視線方向検出センサ２６によって検出された視線に沿ってユーザが、バイザーを通じて視認する実際の風景を撮像することが可能となる位置に配され、ヘルメット１８のフレームに固定される。
【００１３】
次に、装置本体部２０について説明する。
図２に示すように、装置本体部２０は、システムバスを介して互いに接続された、演算処理部３２、表示制御部３４、外部インタフェイス３６、入力部３８、記憶部４０、通信部４２、撮像処理部５２およびI/O４４から概略構成されている。
演算処理部３２は、ナビゲーション装置全体の制御とナビゲーションに必要な情報処理を行うCPUであり、各構成部からの信号を受信して、ユーザの自己位置情報に基づいてナビゲーション情報を透視型表示ディスプレイ２８上に実際の実風景とオーバレイさせて表示するために、表示制御部３４に制御信号を送信するようにしている。演算処理部３２には、記憶部４０が接続され、CPUによって実行されるプログラムあるいはデータを格納するROMと、CPUに情報処理にとって必要な記憶部４０を構成するRAM等が設けられている。
入力部３８は、ユーザからの指示を受付ける操作キー等で構成され、受け付けた指示情報を演算処理部３２に転送するようにしている。
表示制御部３４は、演算処理部３２から送られたデータをディスプレイ２８上で表示される画像データに変換処理する。
外部インタフェイス３６は、外部システムとのインタフェイスを担い、外部システムとしては、携帯電話、モバイル端末、無線LAN端末等が接続可能である。
通信部４２は、本実施形態のナビゲーション装置とともに全体としてナビゲーションシステムを構成するサーバと、不図示の無線通信回線を介して接続され、サーバから受信した情報をI/O４４を通じて演算処理部３２に送信するようにしている。
I/O４４は、周辺機器の入出力データの変換あるいは制御を行い、通信部４２と、ＧＰＳ受信部４８と、視線検出処理部５０とが接続されている。
ＧＰＳ受信部４８は、いわゆるGPS衛星からの電波信号を受信し、その信号から現在位置を特定する位置情報を演算し、それをI/O４４を通じて演算処理部３２に送信するようにしている。より詳細には、ＧＰＳ受信部４８は、３つ以上のＧＰＳ衛星からの信号を受信して、ＧＰＳ衛星各々及び移動体（ライダー）間の距離と、この距離の変化率を測定することにより、移動体の現在地、進行方向および進行方角を算出するようにしている。
【００１４】
視線検出処理部５０は、表示装置の視線方向検出センサ２６から送信された検出信号をI/O４４を通じて演算処理部３２に送信するようにしている。
撮像画像処理部５２は、撮像手段３０により取り込んだ、ユーザの視認方向にある実風景の画像（撮像オブジェクトともいう）を解析するとともに、情報提供装置１４から、ユーザの自己位置情報と引き換えに取得した、現在位置及び方向における３Dグラフィック・ベクターデータ（以下、単に「３Dデータ」ともいう）を取得保持し、後述のマッチング処理のために、これらの情報を、I/O４４を通じて演算処理部３２に送信するようにしている。
演算処理部３２は、前述のように、情報表示装置１２の各構成ユニットを統括的に制御するようにしている。より詳細には、演算処理部３２は、情報表示装置１２が行う処理であるナビゲーション処理と、情報表示処理の２つの処理を行う中心的なユニットである。
図３は、演算処理部３２のナビゲーション処理の実行に係る部分の機能構成図である。
図３に示すように、この演算処理部３２の機能構成について、現在位置算出部６０と、経路計算部６２と、経路誘導部６４と、マッチング処理部６６と、テクスチャ・アイコン情報生成部６８と、オブジェクト識別部７０と、グラフィック処理部７２とから構成されている。
現在位置算出部６０は、ＧＰＳ受信部４８より得られた位置データに基づいて、現在位置を算出する。
経路計算部６２は、情報提供装置１４側の地図記憶部４０に記憶された地図データから、指定された２つの地点（現在地と目的地）間を結ぶ経路を検索することにより、この２地点間の誘導経路を決定する。
経路誘導部６４は、経路計算部６２で求められた誘導経路のリンク情報と、現在位置算出部６０で求められる現在位置情報とを比較することにより、たとえば交差点を通過する前に直進すべきか、右左折すべきかを決定し、これに基づき、ディスプレイ２８上に進行すべき方向をテクスチャやアイコンの形式で描画することにより、ユーザを案内するようにしている。
テクスチャ・アイコン情報生成部６８は、経路誘導部６４により決定された誘導データに基づいて、ナビゲーション情報をテクスチャまたはアイコン情報に変換する。
【００１５】
マッチング処理部６６は、経路誘導部６４により決定された地図データ中の誘導データにより導かれる現在位置と、視線方向検出センサ２６の検出結果とに基づき、撮像処理部５２を参照し、現在位置及び視線方向の画像オブジェクトと、これに対応する３Dデータとのマッチングを行う。
オブジェクト識別部７０は、マッチング結果に基づいて、撮像オブジェクト上にオーバレイするテクスチャの位置関係を特定する。たとえばオーバレイする撮像オブジェクトの対象が道路である場合には、マッチング処理部６６の処理結果によって、撮像オブジェクトの道路の配置がベクトル値として特定され、このベクトル値と等しいグラフィックレイアウトの位置に、テクスチャの配置関係が決定される。
次いで、この道路位置と対応付けられたグラフィックレイアウト位置情報がグラフィック処理部７２へ送られると、グラフィック処理部７２ではグラフィックレイアウト位置情報に基づいて、テクスチャ・アイコン情報生成部６８で生成されたイメージ情報を再生する。
次いで、表示制御部３４では、グラフィック処理部７２で再生されるテクスチャ等のイメージ情報を、ユーザが視認するバイザーである表示ディスプレイ２８の表示領域に、適当となる表示位置となるような描画データを生成する。ここで、撮像手段３０の撮像領域と表示ディスプレイ２８の表示領域とは予め対応付けられていることから（図５参照）、撮像処理部５２で解析された撮像オブジェクトの道路位置は特定されているので、再生したイメージ情報を表示ディスプレイ２８で表示することにより、あたかも、自己位置と引き換えに取得した情報と実風景とが関連付いているかのように、ディスプレイ２８に表示することができる。
本実施形態の例では、進行中の道路上に、進行方向を図示するカーペットがあたかも敷設されたような、視覚的効果を得ることができ、ユーザであるライダーは、このカーペットをなぞって走行しているかのような感覚を得ることとなる。
なお、上記実施形態においては、撮像した撮像オブジェクトの位置関係を解析し、その位置に対応するグラフィックのみを生成して、表示する例を示したが、撮像手段３０により取得した画像そのものに、テクスチャイメージをオーバレイして、ディスプレイ２８に表示することでも、同様な効果を得ることができる。
この場合は、撮像処理部５２で解析した撮像オブジェクトをオブジェクト識別部７０に送るようにし、このオブエジェクトにおける道路位置をベクトル値として特定した後、道路位置のベクトル値を含む撮像オブジェクトをグラフィック処理部７２に引き渡して、このオブジェクトにテクスチャイメージをオーバレイするにようにすればよい。
【００１６】
次に、情報提供装置１４について説明すれば、図４に示すように、情報提供装置１４は、地図情報取得部８０、地図領域設定部８２、データ読み込み処理部８４、地図情報記憶部８６、提供側通信部８８と、及び提供側通信部８８の制御を行う制御部９０から概略構成され、ネットワークを介して接続された種々のサーバが提供する地図情報を取得する提供情報処理と、情報提供の要求を出した情報表示装置１２に、取得した情報を提供する情報提供処理の２つの処理を実行するようにしている。
【００１７】
地図領域設定部８２は、算出された現在位置に基づいて、予め定められたアルゴリズムに従って、検索すべき地図領域を設定する。
データ読み込み処理部８４は、設定された地図領域に対応する地図データを情報提供装置１４側の地図記憶部４０から読み出す。
地図記憶部４０は、撮像手段３０により撮像した撮像画像中のオブジェクトとマッチング処理を行うとともに、道路位置にレイアウトするテクスチャの位置を特定するための３Dベクターデータを保持しており、演算処理部３２の指令に従って、記憶媒体から必要なデータを読み出すようにしている。
特に、この３Dベクターデータは、地球座標の絶対位置に存在する人工物、構造物等の構造を構成する各頂点の、３次元座標の点列データ、および座標点列の接続関係を示すデータを含み、所定の座標基点からのベクトル位置の座標群データによりなる。また、その人工物、構造物等に付与されている属性のほか、道路のリンク、交差点をノードとする道路の構造化データを含むものである。
【００１８】
以上の構成を有する情報表示装置１２について、図面を参照しながら、その作用を以下に説明する。
ユーザである二輪車のドライバーが、情報表示装置１２がバイザーに設けられたヘルメット１８を着用して、二輪車を運転する際、以下のようにして、自己位置情報と引き換えに、ナビゲーション情報を取得し、それをバイザーを通じて視認する実風景と関連付けて表示させる。
まず、ＧＰＳ受信部４８及び視線方向検出センサ２６により現在位置、進行方向に関する情報およびユーザの視線方向を検出する。
次いで、検出したユーザの視線方向に沿った実風景をカメラにより撮像する。
次いで、現在位置、進行方向に関する情報は、I/O４４を介して、撮像手段３０により取り込んだ撮像画像データは、撮像処理部５２を介して、それぞれ演算処理部３２に送信される。
次いで、現在位置算出部６０が、現在位置、進行方向に関する情報に基づいて、現在位置を算出する。ここで、適宜、視線方向検出センサ２６が検出する方位情報を参照する構成を採用することで、進行方向の検出の精度を高めることもできる。
次いで、算出した現在位置を情報提供装置１４に通信部４２を介して送信する。
次いで、情報提供装置１４では、通信部４２を介して現在位置を受信する。
次いで、受信した現在位置に基づいて、地図領域設定部８２は、予め定められたアルゴリズム（例えば、進行（走行）速度に対する移動予測距離を半径とする前方領域と、それより短い距離を半径とする後方領域、さらに、走行中の道路属性（一般道路、有料道路、高速道路等）に応じた側方領域を特定する演算処理）に従って、検索すべき地図領域を設定する。
次いで、設定される地図領域に基づいて、データ読み込み処理部８４が、対応する地図データ（３Dデータ）を地図記憶領域から検索し、現在位置に関連付けられた地図情報を読み出す。
次いで、読み出した地図情報を通信部４２を介して情報表示装置１２に送信する。
【００１９】
ここで、ユーザの自己位置情報と引き換えに、情報提供装置１４から地図情報を取得して、この地図情報に基づいて、後述するように、ナビゲーション情報をテクスチャないしアイコン表示するディスプレイ２８上の表示座標位置と関連付けたうえで、ナビゲーション情報を透視型ディスプレイ２８を通じてユーザが視認する実風景中の道路と関連付けて表示させるようにしている。
次いで、情報表示装置１２は、通信部４２を介して地図情報を受信する。
次いで、経路計算部６２が、現在位置、目標位置、および地図情報に基づいて、現在位置から目標位置までの経路を計算する。
次いで、経路誘導部６４が、計算された経路に基づいて、ユーザの現在位置との関係で誘導表示すべき経路を特定する。
次いで、テクスチャ・アイコン情報生成部６８が、誘導された経路に基づいて、テクスチャまたはアイコン情報（たとえば、道路に沿って表示する矢印やカーペット）を生成する一方、マッチング処理部６６が、撮像画像である撮像オブジェクトデータと、これに対応する３Dデータとのマッチングを行なう。
なお、マッチング処理部６６は、視線方向検出センサ２６の方向検出結果を参照しており、この検出結果に基づく仰角範囲の３Dデータを特定する。すなわち、ユーザであるライダーが、進行方向より視線を側方へそらすなどした場合、当該方向の撮像オブジェクトとマッチング処理するようにしてもよい。
次いで、オブジェクト識別部７０が、テクスチャ等のレイアウト位置を特定する。
次いで、グラフィックス処理部７２が、生成されたテクスチャアイコン情報をイメージ情報として再生する。
なお、これらの処理において、撮像データにテクスチャアイコン情報をオーバレイする処理を採用してもよい。
次いで、グラフィック処理が行われた再生データが、表示制御部３４に送られ、撮像手段３０の撮像領域に対応した座標位置に基づいて、透視型ディスプレイ２８上でユーザが視認する道路の位置に、テクスチャアイコン情報が表示されるように制御する。
次いで、透視型ディスプレイ２８上で、ナビゲーション情報がテクスチャアイコン表示の形式で、道路上に表示される。これにより、二輪車のドライバーは、走行中に進行方向から目を離すことなく、ナビゲーション情報を得ることが可能であり、安全な走行を実現することができる。また、実際の実風景と関連付けてナビゲーション情報を得ることができるので、瞬時にナビゲーション情報を理解することが可能である。
【００２０】
この場合、ナビゲーション情報は、道路に表示される誘導用の矢印に限らず、ユーザの自己位置情報に基づき、ユーザが視認する建物、道路、信号、交差点等のオブジェクトに関連付けられた広義の情報である。たとえば、非常に目立つ建物が行き先に存在する場合に、このような建物を識別の対象としたうえで、この建物を指示する矢印を表示するために、マッチング処理６６で特定した建物オブジェクトをオブジェクト識別部７０により表示位置の座標関係を特定したうえで、表示制御部３４を介して、透明型ディスプレイ２８上に実風景中の建物とオーバレイさせて、表示するようにしてもよい。なお、ナビゲーション情報には直接関連しないが、ユーザの嗜好に沿った各種情報（たとえば、現在のユーザの位置に周辺のレストラン、娯楽情報、交通情報）を、所定の位置に達したとき、あるいは所定の時刻となったときに、表示制御部３４を介して表示ディスプレイ２８上にたとえば、実風景中のレストランとオーバレイさせる形態で表示してもよい。この場合、このような情報は、サーバのデータベースに格納され、ナビゲーション装置からの要求に応じて検索した情報を送信するようにしてもよいが、ナビゲーション情報とは異なり、情報表示装置１２のRAM等の記憶部４０に格納しておいてもよい。
【００２１】
以上、本実施形態によれば、二輪車向けのナビゲーション装置として、ドライバーの自己位置情報と引き換えに、たとえば、道路上に誘導を図形表示するための情報を取得することにより、ヘルメット１８のバイザーを構成する透視型ディスプレイ２８上に、ドライバーがディスプレイ２８を介して視認する実風景中の道路と、このような図形表示に関する情報を、あたかもオーバレイさせて表示することが可能となる。したがって、走行中に、進行方向から目線を全く離すことなく、表示されたアイコン情報を瞬時に理解することにより、安全な運転を実現することができる。特に、たとえばオートバイ数台でツーリングを行う際、現在の位置情報と引き換えに、ツーリング相手方のナビゲーション情報（たとえば、現在走行中の道路の先の進路）を互いに取得し合い、それぞれのディスプレイに図形表示することにより、ツーリング目的地までの経路について、携帯電話あるいはマイク等で会話をすることなしに、走行中に確認することも可能となる。この場合には、自分のテクスチャアイコン表示は、たとえば赤色の矢印、ツーリング相手方のそれは青色の矢印等色、あるいはアイコン図形の形を区別することにより、それぞれの進路を瞬時に理解することが可能である。
【００２２】
（第２の実施形態）
以下に、本発明の第２の実施形態について、図面を参照しながら詳細に説明する。本実施形態において、第１の実施形態と同様な構成には、同様な参照番号を付することによりその説明は省略し、以下では、本実施形態の特徴部分について詳細に説明する。
本実施形態の特徴は、情報表示装置１２として、ユーザの自己位置情報と引き換えに取得する情報が自己位置に関連付けられた音楽情報であり、特に音楽情報を聴覚情報として取得するのではなく、一旦音楽のタイトル情報として、視覚情報の形態で、そのタイトル情報の情報源である実風景中の建物等と関連付けて透視型ディスプレイ２８上にオーバレイさせて表示するようにした点にある。これにより、音楽情報の効率的な取捨選択が可能となるとともに、たとえば現在この地域で流行している音楽情報を視覚を通じて瞬時に把握したり、自分の好みの音楽がすぐ近くのコンサートホールで行われることをタイムリーに知り、実際に音楽を聴くことも可能となる。
【００２３】
本実施形態の情報表示装置１２は、第１実施形態のようにヘルメット１８のバイザーを構成するものでなく、いわゆる眼鏡タイプであり、たとえばユーザが外出する際に、気軽に着用するのに適したものとしている。なお、第１実施形態と同様に、ユーザ自身が普段使用する眼鏡のレンズ表面に薄型有機ELのディスプレイ２８を貼り付けるものでもよい。
一方、本実施形態の情報提供装置１４は、第１実施形態とは異なり、ユーザの自己位置情報と引き換えに取得する情報が自己位置に関連付けられた音楽情報であり、このような音楽情報は、その情報が多岐に亘ることから、かかる音楽情報を取得するのに種々のサーバにアクセスする必要がある点において、以下のように異なる。
【００２４】
情報提供装置１４について説明すれば、図６に示すように、情報提供装置１４は、音楽情報取得部１０２、音楽情報記憶部１０４、提供側通信部１０６と、制御部１０８とから概略構成され、ネットワークを介して接続された種々のサーバが提供する音楽情報を取得する提供情報処理と、情報提供の要求を出した情報表示装置１２に、取得した情報を提供する情報提供処理の２つの処理を実行するようにしている。
音楽情報取得部１０２は、インターネット等のネットワークに接続され、このネットワークを介して、同様にネットワークに接続された種々のサーバから送られてくる音楽情報を取得するようにしている。
音楽情報記憶部１０４は、音楽情報取得部１０２が取得した種々の音楽情報を記憶する。
提供側通信部１０６は、移動体通信等の通信回線１６を介して、情報表示装置１２とデータのやり取りを行う。
制御部１０８は、情報提供装置１４の各構成ユニットを統括的に制御する。より詳細には、上述の提供情報処理および情報提供処理を行う中心的なユニットである。
【００２５】
図７に、制御部１０８の機能構成を示す。
図７において、制御部１０８は、個別音楽情報受信部１１０と、個別音楽情報更新部１１２と、音楽情報保持部１１４と、検索対象設定部１１６と、個別音楽情報要求部１１８と、ユーザ要求解析部１２０と、音楽情報検索部１２２とから概略構成されている。
個別音楽情報受信部１１０は、音楽情報取得部１０２が取得した音楽情報の提供元を解析する。音楽情報の提供元としては、たとえばコンサートが行われる場所、CDあるいはDVD販売店、音楽が店内に流れるレストラン等が該当する。
個別音楽情報更新部１１２は、個別音楽情報受信部１１０によって解析された情報の提供元に基づいて、音楽情報記憶部１０４に記憶されている提供元の音楽情報を、個別音楽情報受信部１１０で提供元が解析された音楽情報に更新し、これにより、音楽情報記憶部１０４には常に最新な音楽情報を記憶することが可能となり、たとえば、コンサートが行われる場所に出向いたが、実際は行われていなかった等の不具合を事前に回避することができる。
音楽情報保持部１１４は、各々のサーバが提供する音楽情報のアドレスや、音楽情報へのアクセス方法等に関する情報を保持する。
検索対象設定部１１６は、ネットワークに接続された種々のサーバから定期的に音楽情報を取得するために、アクセスするサーバのリストを設定する。設定したリストに沿って、音楽情報を取得すべきサーバにアクセスするための情報を音楽情報保持部１１４から読み出す。ここで、検索対象設定部１１６は、情報表示装置１２から情報の提供の要求があった場合にのみ、この要求に含まれる検索条件に基づいて、アクセスするサーバのリストを設定するようにしてもよい。たとえば、情報表示装置１２を装着するユーザの現在地から所定範囲内にある音楽情報にのみアクセスするようにリストを設定してもよい。このようにすることで、音楽情報が必要なときにアクセスするサーバを必要最小限度にすることができるため、ネットワークの負荷を低減することが可能となる。
【００２６】
個別音楽情報要求部１１８は、検索対象設定部１１６によって音楽情報保持部１１４から読み出された音楽情報のアドレスやアクセス方法等に関する情報に基づいて、検索対象設定部１１６で設定したリストにあるサーバにアクセスして音楽情報の提供を要求するようにしている。
このような本実施形態の情報提供装置１４は、たとえばモデム等の通信機能を搭載したパーソナルコンピュータ等のコンピュータシステムを採用することで実現可能である。
【００２７】
次に、情報提供処理について説明する。
ユーザが、眼鏡タイプの情報表示装置１２を装着して、外出するとする。
まず、ユーザ要求解析部１２０は、提供側通信部１０６を介して情報表示装置１２からデータが送信されるのを待つ。
次いで、ユーザがある地域内に立ち入ったとき、この地域と関連する音楽情報を知りたいと望み、第１実施形態の場合と同様に、ユーザの現在位置情報とともに、知りたい音楽情報に関する検索条件を、情報表示装置１２より情報提供装置１４側へ送信する。
次いで、ユーザ要求解析部１２０は、送信されてきたデータを解析し、このデータに含まれるユーザの識別情報と、検索条件に関する情報を検出する。
次いで、音楽情報検索部１２２は、ユーザ要求解析部１２０で解析された検索条件に従って、音楽情報記憶部１０４に記憶された音楽情報を検索することにより、この検索条件に合致する音楽情報を検出する。たとえば、ユーザ要求解析部１２０で解析された検索条件が、ユーザの現在位置である場合、現在位置から所定範囲内にある音楽情報を音楽情報記憶部１０４から検索する。
なお、音楽情報検索部１２２は、種々のサーバの属性をあらかじめ階層的に分類しておき、ユーザ要求解析部１２０で解析された検索条件のサーバの属性に応じて検索範囲を設定し、検索することにより、検索条件に合致する情報を迅速に検出することが可能となる。たとえば、現在地から所定範囲内にある音楽情報について、音楽ジャンル、ボーカルあるいはインストルメンタル、ボーカルなら歌手名、インストルメンタルなら楽器の種類、作曲者、作詞者等の１つあるいは複数を選択して検索条件を設定することが可能である。
検索された音楽情報は、通信部４２を通じて、識別された情報表示装置１２側に送信され、ユーザの透視型ディスプレイ２８上に情報源である実風景中の建物とオーバレイさせて表示される。
その例を図８に示す。図８は、たとえば、ユーザの現在の位置情報と、現在の位置から半径５００ｍ以内、ジャンルがジャズである点を検索条件として取得した音楽情報を実風景と関連付けて表示させている画面の例であり、建物Aでは、表示されたタイトルのジャズ音楽が店内で演奏され、建物Ｂでは、ジャズの名盤が安売りされていることが示されている。
【００２８】
このように、本実施形態によれば、タイムリーに音楽情報にアクセスすることが可能である。ユーザは、たとえばその音楽の演奏を聴くために、その建物に立ち入ることも可能であり、その音楽のCDあるいはDVDを入手することも可能となる。このように、自己位置情報と引き換えにユーザが所望する情報を取得した後は、第１実施形態の場合と同様であり、ユーザの自己位置情報と引き換えに取得した音楽情報を一旦音楽タイトル情報の形態で、ユーザの自己位置からの視界に沿う実風景と関連付けて表示することにより、ユーザの所望する音楽情報にタイムリー且つ効率的にアクセスすることが可能となる。
【００２９】
（第３の実施形態）
以下に、本発明の第３の実施形態について、図面を参照しながら詳細に説明する。本実施形態の特徴部分は、自己位置情報と引き換えに取得する情報が、情報量が大きな静画あるいは動画の画像情報であり、その場合に、一旦画像情報を圧縮して、いわゆるサムネイル情報として生成し、これらサムネイル化された情報群を、実風景と関連付けて表示することにより、サムネイル情報のレベルで取捨選択を行って、個別画像情報へのアクセスが行われるようにした点にある。
なお、通常の技術常識で用いられる「サムネイル」とは、カメラで撮影した映像群を一覧できるように、個々の画像を縮小した画像を、一のシートなどに行列に配列したものをいうが、本実施形態においては、単に行列に配列した映像群をいうのではなく、後述のように、自己位置情報に関連する撮像情報のすべてについての圧縮又は縮小画像群を示す点で相違する。また、説明の都合上、以下においては、いわゆるサムネイル化した情報群を単にサムネイル情報と呼ぶこととする。
【００３０】
図９に示すように、本実施形態において、情報表示システム２００は、ユーザが覗き込む形態で使用するルーペ型情報表示ディバイス２０２と、このルーペ型情報表示ディバイス２０２をユーザの動作（モーション）により制御するモーションコントローラ２０４とを有する情報表示装置２０６と、この情報表示装置２０６とネットワークを介して接続された情報提供装置２０８とから概略構成され、情報提供装置２０８からネットワークを通して提供された情報を情報表示装置２０６に表示する際、情報表示装置２０６から自己位置情報を情報提供装置２０８に送信し、それと引き換えに情報提供装置２０８から情報を取得し、取得した情報を情報表示装置２０６において、自己位置と関連させて表示するようにしている。
ルーペ型情報表示ディバイス２０２は、透視型ディスプレイ２１２がユーザの目線に近い側に位置決めされる内筐体２１４と、遠い側に位置決めされる外筐体２１６とに挟まれた形態のハードウェア構成を有する。内筐体２１４および外筐体２１６はともに、リング状で中空部には、透明板２１８が嵌め込まれ、ユーザは内筐体２１４の透明板２１８、透視型ディスプレイ２１２および外筐体２１６の透明板２１８を通じて、実風景を視認できるようになっている。リングの大きさは、ユーザが覗き込むような形態でルーペ型情報表示ディバイス２０２を使用するような大きさであるのが好ましい。外筐体２１６の外周部には、スチルカメラ等のカメラが設置され、カメラにより撮像した画像情報は、撮像処理部２２６により処理されるようにしている。透視型ディスプレイ２１２は、いわゆる透明あるいは半透明の有機EL製であり、フィルム基材のものが特に好ましく、表示制御部２２２により制御されるようにしている。このような透視型ディスプレイ２１２を採用することにより、ユーザは、透視型ディスプレイ２１２を通じて実風景を視認しつつ、ディスプレイ２１２上に表示される画像を、あたかも実風景とオーバレイしたかのような態様で視認することが可能である。
【００３１】
ルーペ型情報表示ディバイス２０２は、さらに、制御部２２４と、撮像処理部２２６と、表示制御部２２２と、モーションコントローラ２０４との間で通信を行うための通信部２２８と、端末識別情報保持部２３０と、地磁気センサ、方位センサ等からなる姿勢検出部２３２と、位置情報取得部２３４と、基地局との間で通信を行うための通信部２３６と、サムネイル情報保持部２３８と、実画像記録部２４０と、画像表示指示部２４２と、計時部２４４と、圧縮画像特定部２４６とを有する。
制御部２２４は、情報表示ディバイスの各構成ユニット部を統括的に制御するようにしている。より詳細には、制御部２２４は、情報表示ディバイスが行う処理である情報表示処理と、情報提供装置２０８との間、およびモーションコントローラ２０４との間における通信処理との２つの処理を行う中心的なユニットである。
撮像処理部２２６は、カメラで撮像した画像を情報表示装置２０６で処理できる情報へ変換する。
表示制御部２２２は、サムネイル情報保持部２３８に保持されたサムネイル情報や実画像記録部２４０に保持された実画像情報から表示画像を生成して、透視型ディスプレイ２１２に表示するように制御する。
端末識別情報保持部２３０は、ルーペ型情報表示ディバイス２０２の識別ID情報を記憶保持する。
姿勢検出部２３２は、磁気センサーないしは方位センサが検出する方位情報を利用して、ルーペ型情報表示ディバイス２０２の姿勢方向を検出する。
位置情報取得部２３４は、ユーザの自己位置を取得するものであり、既知のGPS機を用いたり、基地局との通知回線における時間遅延を計測した、いわゆる３点測位や、地理標準器との距離計算により得られる地点観測を用いた構成でもよい。
通信部２３６は、情報提供装置２０８と情報の送受信を行う機能を備え、撮像処理部２２６より得た撮像情報や、情報表示装置２０６の保持する情報を所定の搬送信号により基地局へ伝達したり、情報提供装置２０８の保持するサムネイル情報等を、所定の搬送信号により取得する。
サムネイル情報保持部２３８は、情報提供装置２０８側で生成され、情報表示装置２０６側に送信されたサムネイル情報を保持する。この保持は一時的なものでもよいし、永続的なものでもよい。
実画像記録部２４０は、情報提供装置２０８側で保持され、情報表示装置２０６側に送信された実画像を記録する。この保持は一時的なものでもよいし、永続的なものでもよい。
画像表示指示部２４２は、ユーザの操作に享受され、この操作に基づいて、画像表示指示情報を生成する。
計時部２４４は、年月日ないし時分秒に関する情報を計時するもので、本実施形態では特に、カメラにより撮像した撮像情報を定義する時刻情報を得るのに用いられる。
圧縮画像特定部２４６は、サムネイル情報保持部２３８に保持されたサムネイル情報のうち、ユーザの指示により特定された個々の画像を特定する。
【００３２】
図１０に示すように、一方、モーションコントローラ２０４は、既知の２軸または３軸の加速度センサを用いており、三次元方向の筐体の変位量を計測し、それに基づいて筐体の変位情報を取得するものであり、制御部３００と、加速度センサ部３０２と、キー操作定義部３０４と、リファレンス部３０６と、情報表示装置２０６との間で通信を行う通信部３０８とを有する。外形筐体は、ユーザが把持しやすい程度の大きさであり、主たる機能は、制御部３００を構成するCPUと、内蔵のソフトウェアプログラムとの協働により動作する。
制御部３００は、モーションコントローラ２０４の各構成ユニット部を統括的に制御するようにしている。より詳細には、制御部３００は、情報表示ディバイスに対してモーションコントローラ２０４のモーションに応じた指示を与える処理を行う中心的なユニットである。加速度センサ部３０２は、モーションコントローラ２０４の加速度を検出する。キー操作定義部３０４は、リファレンス部３０６と関連して、モーションコントローラ２０４のモーションと、情報表示装置２０６の機能動作指示との対応関係を定義する。リファレンス部３０６には、図１０に示すように、モーションコントローラ２０４のモーションに対応する指示操作がID番号とともに関連付けられている。たとえば、ID番号１は、モーションコントローラ２０４の横方向のモーションを示し、それにより電源ONの指示操作が行われることを示し、以下モーションに応じて、電源オフ、情報表示ディバイス２０２の通信部２３６からの送信、サムネイル情報の呼び出し、個々の画像情報の取捨、個々の画像情報の選択が指示操作されるようにしている。使用の際、ユーザ側から見てモーションコントローラ２０４を透視型ディスプレイ２１２上に表示される画像とリンクするよう位置に配し、ディスプレイ２１２上でモーションコントローラ２０４のモーションにより特定の画像を移動させるような機能を有するようにしている。
【００３３】
情報提供装置２０８について説明すれば、図９に示すように、情報提供装置２０８は、制御部４００と、ネットワークに接続された通信部４０２と、サムネイル情報生成部４０４と、撮像情報記録部４０６とから概略構成されている。
情報提供装置２０８は、ネットワークサーバによりなる。この情報提供装置２０８は、例えばＣＰＵ、メモリー（ＲＡＭ,ＲＯＭ等）、ＨＤ等の外部記憶装置、イーサネット（登録商標）等の外部通信部等を有するコンピュータ装置で構成することができる。情報提供装置２０８は、例えばハードウェアであるコンピュータに基本ソフトウェア（ＯＳ：Ｏｐｅｒａｔｉｎｇ  ｓｙｓｔｅｍ）、およびデータベースのサーバ機能や通信機能の所定のアプリケーションプログラムが組み込まれて実行されることにより、情報表示装置２０６からの要求に応じて所定の情報処理を実行したり、各機能を実現したりすることができる。この情報提供装置２０８は、１台のコンピュータ装置で構成してもいいし、複数のコンピュータ装置をネットワーク接続して協働して動作するように構成してもよい。
制御部４００は、情報提供装置２０８の各構成ユニット部を統括的に制御するようにしている。より詳細には、制御部４００は、情報表示装置２０６との間で通信を行うことにより、情報表示装置２０６側で撮像された画像情報を受信して記録するとともに、この画像情報に基づいてサムネイル情報を生成し、情報表示装置２０６に送信する処理を行う中心的なユニットである。
サムネイル情報生成部４０４は、撮像画像に基づいてサムネイル情報を生成する。
撮像情報記録部４０６は、情報表示装置２０６側で撮像された画像情報を記録する。
図１１に示すように、サムネイル情報生成部４０４は、制御部４００と、対象画像特定部４０８と、画像表示位置定義部４１０と、乱数生成部４１２と、サムネイル情報ファイル化部４１４と、画像圧縮処理部４１６と、距離演算部４１８と、マスキング処理部４２０とから概略構成されている。
制御部４００は、サムネイル情報生成部４０４の各構成ユニット部を統括的に制御するようにしている。
対象画像特定部４０８は、画像圧縮処理部４１６により圧縮処理を行う画像を特定する。
画像表示位置定義部４１０は、画像圧縮処理部４１６により圧縮処理を行った画像に対して、情報表示装置２０６の透視型ディスプレイ２１２上における表示位置の定義を行う。
乱数生成部４１２は、サムネイル情報を透視型ディスプレイ２１２上に表示するのに、サムネイル情報の画像情報の位置（高さ）に対して、乱数を生成して対応させる。
サムネイル情報ファイル化部４１４は、サムネイル化した情報群を一のファイルにファイル化（アーカイブ）する。
画像圧縮処理部４１６は、撮像した画像について、現在位置から所定半径に含まれるすべての画像を圧縮処理する。
距離演算部４１８は、撮像情報に関連付けられた撮像位置と現在位置との間の距離を演算する。
マスキング処理部４２０は、指定した画像に対してマスキングを行う。あるいは、指定した画像と代替するマスキング画像を特定する。
【００３４】
以上の構成を有する情報表示システム２００について、撮像記録する段階と、サムネイルを参照する段階と、個別画像を参照する段階とに分けて、図面を参照しながらその作用を以下に説明する。
具体的には、ユーザがある場所においてその場の風景、人物等を撮像して、それを情報提供装置２０８側に記録する段階が撮像記録段階に相当し、ユーザが後日その場所に再度出向いて、過去に撮像した情報にアクセスする際、サムネイルを利用して撮像情報を取得する段階がサムネイル参照段階に相当し、ユーザが参照したサムネイル情報に基づいて、個別画像を参照する段階が個別画像参照段階に相当する。
【００３５】
第１の撮像記録段階において、位置情報取得部２３４によって現在位置を取得する。次いで、カメラで撮影を行う。この場合、静止画、あるいは動画であってもかまわない。次いで、姿勢検出部２３２によって、撮像した方向情報を取得する。次いで、撮像処理部２２６によって、撮像した情報に、ファイル名称（通し番号等）を付与するとともに、（１）撮影日、（２）撮影時刻、（３）撮影方向、（４）撮影位置  に関する情報を付加する。次いで、ユーザがモーションコントローラ２０４によりモーションを与え、それによるキー操作情報を通信部２２８が受信する。次いで、通信部２２８によって、モーションコントローラ２０４のキー操作情報を取得し、制御部２２４が、取得した情報が『送信指示』であることを解析する。次いで、ファイル名称及び撮影に関する情報を付加した撮像情報に、端末識別情報保持部２３０によりID番号をさらに付加して、通信部２３６を介して情報提供装置２０８に撮像情報を送信する。次いで、情報提供装置２０８側において、通信部４０２が送信された撮像情報を受信し、撮像情報記録部４０６に受信した撮像情報を記録する。これにより、撮像情報を情報提供装置２０８側に記録することが可能となる。
【００３６】
図１２に、記録された撮像情報の例を示す。画像情報が、端末ID、撮像ID、撮像日、撮影時刻、撮像位置及び撮像方向と関連付けて、記録されている。撮像位置は、経緯度で特定し、撮像方向は、真北を０度として、時計回りの角度で方向を定めている。
次に、第２のサムネイル参照段階において、まず、ユーザがモーションコントローラ２０４によりモーションを与え、それによるキー操作情報を通信部２２８が受信する。次いで、制御部２２４が、受信した情報が『撮像ファイル一覧の呼び出し』であることを解析する。次いで、位置情報取得部２３４が、現在位置を取得する。次いで、制御部２２４が、端末識別情報保持部２３０による端末識別情報と、取得した現在位置情報とを通信部２３６を介して情報提供装置２０８に送信する。次いで、情報提供装置２０８側において、通信部４０２により受信した情報にしたがって、サムネイル生成部により画像サムネイル情報を生成する。次いで、通信部４０２が生成された画像サムネイル情報を情報表示装置２０６に送信する。次いで、情報表示装置２０６側において、通信部２３６が、画像サムネイル情報を受信する。次いで、受信した画像サムネイル情報をサムネイル情報保持部２３８に格納する。次いで、姿勢検出部２３２が、現在の方向を検出する。次いで、検出した現在の方向に基づいて、表示制御部２２２が、格納された画像サムネイル情報から表示画像を生成する。次いで、生成された表示画像を透視型ディスプレイ２１２に画像表示する。
【００３７】
ここで、情報提供装置２０８側におけるサムネイル情報の生成について、さらに詳細に説明する。まず、通信部４０２が、端末識別情報と、現在位置情報とを受信した後に、現在位置情報に基づいて、対象画像特定部４０８が、現在位置から所定範囲（たとえば、半径２００ｍ以内）の画像すべてを特定する。図１３に、特定された画像のリストを示す。端末IDおよび現在位置情報をそれぞれ、００１および特許庁正門前とした場合、画像ID、撮像日、撮像時刻、撮像位置及び撮像方向の各項目が特定され、特に撮像位置については、経緯度等数値化された位置に基づいて特定されている。たとえば、画像ID００２と画像ID００３とでは、撮像位置が同じ特許庁正門前であるが、撮像方向が前者では２７０度、後者では１８０度であることから、撮像されている被撮像物の画像は異なる。次いで、距離演算部４１８が、現在位置情報と、撮像情報に関連付けられた位置情報とに基づき、距離を演算処理する。より詳細には、現在位置と、図１２に示された撮像情報に関連付けられた撮像位置とを用いて、その距離を演算する。次いで、演算した距離に基づいて、対象画像特定部４０８により特定された対象画像について、画像圧縮処理部４１６が、所定のピクセルサイズ（原画像の３ないし５％）の画像圧縮処理を行う。次いで、画像圧縮処理部４１６は、図１４に示すように、さらに画像の圧縮を行う。なお、この圧縮処理は、現画像の圧縮と同時に行ってもよいし、あるいは後処理で行ってもよい。
【００３８】
より詳細には、図１４は、先に演算した対象画像と現在位置との距離、すなわち現在位置からの半径に応じて、圧縮後のファイルサイズのさらなる圧縮率を定めており、半径が大きくなるほど、圧縮率を上げてより小さくし、透視型ディスプレイ２１２に表示した際、遠近感を表現できるようにしている。この点、透視型ディスプレイ２１２に表示されるそれぞれのサムネイル情報が、被撮像物との距離に応じてその表示上の大きさが決められている点において、自己位置情報と引き換えに取得したサムネイル情報が、実風景中の被撮像物と関連付けられてディスプレイ２１２上に表示されていることになる。なお、図１４において、半径が５１ｍ以上の場合には、圧縮率1%とする代わりに、・（ドット）等の代替画像を用いるのでもよい。
【００３９】
次いで、画像表示位置特定部により、圧縮後の画像に対して、情報表示ディバイス２０２の透視型ディスプレイ２１２上での表示位置の定義を行う。表示位置の定義においては、現在の自己位置を基点とし、地球の地表面における相対的な位置関係を、図１５で特定される個々の画像の座標位置（x,y）で特定するとともに、個々の画像の空間方向、すなわち鉛直方向を、乱数生成部４１２により生成された乱数値（ｚ）により定義する。これにより、個々の画像の座標位置（x,y,z）が特定され、現在の自己位置を基点とした相対的な位置関係が把握される。また、空間方向の座標位置を乱数値により得ることとしたので、これら画像を透視型ディスプレイ２１２上において表示する際は、その位置関係をランダムにすることができ、あたかもサムネイルの個々の画像が、空間を浮遊しているかのような視覚状態を模擬できるようにしている。
次いで、マスキング処理部４２０が、端末識別情報に基づいて、圧縮後の画像に対して、端末識別情報で特定される以外の画像についてマスキング処理を行い、ないしは代替画像を定義する。これにより、他人の画像情報を取得した場合においても、透視型ディスプレイ２１２上に、画像の詳細を表示することを回避することが可能となり、プライバシーの保護をすることができる。
次いで、サムネイル情報ファイル化処理部により、以上の処理を終了したサムネイル画像群を１ファイルにまとめる。
次いで、１ファイル化したサムネイル画像群を情報表示装置２０６に送信する。
ここで、さらに、サムネイル情報を再生して画像表示する点について、さらに詳細に説明する。
まず、１ファイル化したサムネイル画像群を情報表示装置２０６のサムネイル情報保持部２３８に格納する。図１５に、格納されるサムネイル画像群のリストを示す。図１５において、サムネイル名：AAA、端末ID：００１、現在位置：特許庁正門のもとで、個々の圧縮画像が端末ID、画像ID、撮像日、撮影時刻、撮像位置、および表示位置と関連付けて表示されている。次いで、画像表示指示部、或いはモーションコントローラ２０４により取得した『画像表示指示』情報に基づいて、姿勢検出部２３２が現在の姿勢方向を検出する。次いで、圧縮画像特定部２４６が、サムネイル情報保持部２３８より、検出した姿勢方向の圧縮画像を読み出す。次いで、圧縮画像の表示位置に基づいて、圧縮画像特定部２４６により特定した画像群を表示制御部２２２によりマッピング処理を行って、透視型ディスプレイ２１２上に表示する。
ここで、サムネイル保持部２３８に保持されるサムネイルナム情報は、個々の画像について、撮像された位置情報（x”,y”,z”）を有する。さらに、情報表示装置２０６は、サムネイル保持部２３８より表示すべき画像群を特定する際、自己位置（X,Y,Z）と閲覧方位を参照するようにしている。
つまり、自己位置と閲覧方位に基づき、自己の視点からの仰角方向を特定し（X１,Y１,Z１）、この仰角方向の自己位置（視点）を基点とし、透視型ディスプレイ２１２の表示範囲（―Xa,+ Xa）におけるサムネイル画像のすべてを特定する（特定した画像の座標範囲は、[（X１―Xa≦x”≦X１＋Xa）, Y１±y”,(乱数値)]である）。
このようにして特定された画像群は、それぞれの座標位置に基づいて、透視型ディスプレイ２１２の表示領域の座標位置と対応した位置に配される。
なお、自己の視点からの軸方向については、サムネイル情報の大小により、適宜参照を省略することとしてもよい。
以上の処理において、ユーザが向きを変える場合に備えて、姿勢検出部２３２による計測は時々刻々行なわれており、この姿勢方向が変わるたびに、以上の処理を実行し、その時々の閲覧方位に対するサムネイル画像の特定・表示をする。
【００４０】
次に、第３の個別画像参照段階において、まず、ユーザがモーションコントローラ２０４によりモーションを与え、それによるキー操作情報を通信部２２８が受信する。次いで、制御部２２４が、受信した情報が『個別画像参照指示』であることを解析する。次いで、『個別画像参照指示』に基づいて、サムネイル情報保持部２３８に格納される撮像IDを特定し、特定した撮像IDを通信部２３６を介して情報提供装置２０８側に送信する。次いで、情報提供装置２０８側において、通信部４０２が撮像IDを受信し、取得した撮像IDに基づいて、撮像情報記録部４０６を検索し、撮像IDにより特定される実画像（静画、動画を含む）を取得する。次いで、取得した実画像情報を、通信部４０２を介して、情報表示装置２０６側に通信する。次いで、情報表示装置２０６側において、通信部２３６が実画像情報を受信した後、取得した実画像情報を実画像記録部２４０に格納する。次いで、格納した実画像情報に基づいて、表示制御部２２２が描画処理を行い、透視型ディスプレイ２１２に実画像を表示する。
【００４１】
ここで、個別画像の取捨選択段階について説明すれば、同様に、まず、ユーザがモーションコントローラ２０４によりモーションを与え、それによるキー操作情報を通信部２２８が受信する。図１６を参照してより詳細に説明する。図１６は、透視型ディスプレイ２１２上に表示されている複数のサムネイル情報を示す。個々のサムネイル情報は、丸みを帯びた閉曲線状であり、閉曲線内に、画像情報の一部（たとえば人の顔）が表示され、ユーザの取捨選択の便宜に資するために、どのような内容の画像情報かが把握できるようにしている。また、個々のサムネイル情報は、大きさ及び高さが異なり、透視型ディスプレイ２１２上で、複数のサムネイルが浮遊しているような印象を付与している。なお、図面上斜線が付与されているのは、マスキング処理されたサムネイル情報である。図１６に示すように、マスキング処理されたサムネイル情報Aを取捨する場合には、透視型ディスプレイ２１２の背後（外筐体２１６の外側）にモーションコントローラ２０４をもっていき、ユーザから見て、ディスプレイ２１２上でモーションコントローラ２０４の先端で、サムネイル情報Aを横にはじくモーションを行うことにより、
サムネイル情報Aがディスプレイ２１２上から消えるように画像処理することができる。一方、図１７は、サムネイル情報Bを選択する場合を示す図１６と同様な図である。この場合、透視型ディスプレイ２１２の背後（外筐体２１６の外側）にモーションコントローラ２０４をもっていき、ディスプレイ２１２上でモーションコントローラ２０４の先端で、サムネイル情報Bを手前にはじくモーションを行うことにより、
サムネイル情報Bだけを選択し、ディスプレイ２１２上に表示するように画像処理することができる。
【００４２】
以上、本実施形態によれば、位置情報と関連した静画あるいは動画の画像情報を取得するのに、一旦サムネイル情報を実際の風景に関連づけて透視型ディスプレイ２１２上に表示する。その際、表示するサムネイル情報を実際の風景とリンクさせて図形表示するのに、ディスプレイ２１２上でサムネイル情報ごとに、大小あるいは高さを与えて表示するとともに、ルーペ型の情報表示ディバイス２０２を用いて覗き込むような使い方を採用することにより、風景中にサムネイル情報が浮遊しているような臨場感を付与することが可能である。また、浮遊するサムネイル情報をモーションコントローラ２０４の動きにより、あたかもディスプレイ２１２上に浮遊する風船を指ではじいて情報を取捨選択する嗜好性を付与し、遊び感覚を具備した情報表示ディバイス２０２を提供することが可能である。
【００４３】
本発明の実施形態について、詳細に説明したが、当業者なら本発明の範囲を逸脱することなく、種々の修正あるいは変更が可能である。たとえば、本実施形態においては、表示ディスプレイ２１２として、透明または半透明の有機ELディスプレイ２１２を採用することにより、ディスプレイ２１２を介してユーザが視認可能な実風景中に、自己の現在位置情報と引き換えに取得した情報をオーバレイさせる形態で表示したが、それに限定されることなく、たとえば、カメラにより撮像した実風景画像をディスプレイ２１２上に表示し、この実風景画像に取得した情報をオーバレイさせて表示してもよい。
【図面の簡単な説明】
【００４４】
【図１】本発明の第１実施形態に係る情報提供システムの概略図である。
【図２】本発明の第１実施形態に係る情報表示装置の概略図である。
【図３】図２の演算処理部の詳細を示す概略図である。
【図４】本発明の第１実施形態に係る情報提供装置の概略図である。
【図５】本発明の第１実施形態に係る表示ディスプレイに表示される画像の例である。
【図６】本発明の第２実施形態に係る情報提供装置を示す概略図である。
【図７】本発明の第２実施形態に係る情報提供装置の制御部の詳細を示す概略図である。
【図８】本発明の第２実施形態に係る表示ディスプレイに表示される画像の例である。
【図９】本発明の第３実施形態に係る情報提供システムの概略図である。
【図１０】本発明の第３実施形態に係るモーションコントローラの機能図である。
【図１１】本発明の第３実施形態に係る情報提供装置のサムネイル生成部の機能図である。
【図１２】本発明の第３実施形態において、記録された撮像情報の例を示す表である。
【図１３】本発明の第３実施形態において、対象画像特定部が特定した画像のリストを示す。
【図１４】本発明の第３実施形態において、現在位置からの半径に応じて変える画像圧縮率のリストを示す。
【図１５】本発明の第３実施形態において、サムネイル情報保持部に格納されるサムネイル画像群のリストを示す。
【図１６】本発明の第３実施形態に係る表示ディスプレイに表示される画像の例である。
【図１７】本発明の第３実施形態に係る表示ディスプレイに表示される画像の例である。
【符号の説明】
【００４５】
情報提供システム１０
演算処理部３２
入力部３８
地磁気センサ５１
ＧＰＳ受信部４８
表示側通信部
外部インタフェイス３６
撮像処理部２２６
視線検出部
表示制御部３４
現在位置算出部６０
経路計算部６２
経路誘導部６４
マッチング処理部６６
グラフィック処理部
オブジェクト識別部７０
テクスチャ・アイコン情報生成部６８
地図領域設定部８２
データ読み込み処理部８４
個別音楽情報要求部１１８
個別音楽情報受信部１１０
個別音楽情報更新部１１２
ユーザ要求解析部  １２０
音楽情報検索部  １２２
情報表示システム２００
ルーペ型情報表示ディバイス  １０
モーションコントローラ２０４  
情報表示装置２０６
情報提供装置２０８
透視型ディスプレイ２１２
内筐体  ２１４
外筐体  ２１６
透明板２１８
制御部２２４
撮像処理部２２６
表示制御部２２４
通信部２２８
端末識別情報保持部２３０  
姿勢検出部２３２
位置情報取得部２３４  
通信部２３６
サムネイル情報保持部２３８
実画像記録部２４０
画像表示指示部２４２
計時部２４４
圧縮画像特定部２４６
制御部３００
加速度センサ部３０２
キー操作定義部３０４
リファレンス部３０６
通信部３０８
制御部４００
通信部４０２
サムネイル情報生成部４０４
撮像情報記録部４０６
対象画像特定部４０８
画像表示位置定義部４１０
乱数生成部４１２
サムネイル情報ファイル化部４１４
圧縮画像処理部  
距離演算部４１８
マスキング処理部４２０
【図１】
2009192448.tif 000003
【図２】
2009192448.tif 000004
【図３】
2009192448.tif 000005
【図４】
2009192448.tif 000006
【図５】
2009192448.tif 000007
【図６】
2009192448.tif 000008
【図７】
2009192448.tif 000009
【図８】
2009192448.tif 000010
【図９】
2009192448.tif 000011
【図１０】
2009192448.tif 000012
【図１１】
2009192448.tif 000013
【図１２】
2009192448.tif 000014
【図１３】
2009192448.tif 000015
【図１４】
2009192448.tif 000016
【図１５】
2009192448.tif 000017
【図１６】
2009192448.tif 000018
【図１７】
2009192448.tif 000019