(57)【特許請求の範囲】
【請求項１】
移動体に備えられた表示装置へ画像情報を配信する配信装置において、
位置情報と、位置情報に対応する画像情報を収集する収集部と、
上記収集部が収集した画像情報を位置情報と対応づけて格納する情報格納部と、
ある交差点から次の交差点までの間を緯度と経度とを座標とするベクトルを複数記憶する経路格納部と、
移動体の現在位置から移動体の目的地までの画像情報を要求する画像要求位置情報を入力し、移動体の現在位置に最も近いベクトルＶ０を上記経路格納部を検索して取得し、
取得したベクトルＶ０に上記表示装置の位置から垂線を引き、垂線とベクトルＶ０との交点を交点Ｒ０とし、交点Ｒ０とベクトルＶ０が有する２つの端点とのうち、上記移動体の目的地に最も近い点を取得し、取得した点を始点とするベクトルを上記経路格納部を検索して複数取得し、取得した複数のベクトルの中から、各ベクトルの上記移動体の目的地に近い端点が、移動体の目的地に最も近いベクトルをベクトルＶ１として取得する第１のベクトル取得処理を行い、
取得したベクトルＶ１の上記移動体の目的地に近い端点を始点とするベクトルを上記経路格納部を検索して複数取得して、取得した複数のベクトルの中から、各ベクトルの有する上記移動体の目的地に近い端点が、移動体の目的地に最も近いベクトルをベクトルＶ２として取得する第２のベクトル取得処理を行い、
取得したベクトルの上記移動体の目的地に近い端点が、上記移動体の目的地に到達するまで上記第２のベクトル取得処理を繰り返し行いベクトルＶＮ（ＮはＮ≧２の整数）を取得し、上記ベクトルＶ１から上記ベクトルＶＮまでのベクトル群を、上記表示装置の位置から移動体の目的地までの経路データとして出力する経路判断部と、
上記経路判断部が出力した経路データに基づいて、各ベクトルの始点と終点とのいずれかの座標値から所定の距離以内の位置を示す位置情報に対応づけられた画像情報を上記情報格納部から選択する情報選択部と、
上記情報選択部が選択した画像情報を上記表示装置へ送信する情報送信部と
を備えることを特徴とする配信装置。
【請求項２】
上記情報格納部は、画像情報として、静止画と動画とライブ画像情報との少なくともいずれか一つを保管し、
上記ライブ画像情報は、ライブ画像の保管先へ接続する接続先を特定する接続情報であることを特徴とする請求項１記載の配信装置。
【請求項３】
上記配信装置は、さらに、上記情報選択部が選択した画像情報の重要度を判断する重要度判断部を備えることを特徴とする請求項１または２に記載の配信装置。
【請求項４】
移動体に備えられた表示装置へ画像情報を配信する配信方法において、
位置情報と、位置情報に対応する画像情報を収集し、
上記収集した画像情報を位置情報と対応づけて情報格納部へ格納し、
ある交差点から次の交差点までの間を緯度と経度とを座標とするベクトルを経路格納部に複数記憶し、
移動体の現在位置から移動体の目的地までの画像情報を要求する画像要求位置情報を入力し、移動体の現在位置に最も近いベクトルＶ０を上記経路格納部を検索して取得し、
取得したベクトルＶ０に上記表示装置の位置から垂線を引き、垂線とベクトルＶ０との交点を交点Ｒ０とし、交点Ｒ０とベクトルＶ０が有する２つの端点とのうち、上記移動体の目的地に最も近い点を取得し、取得した点を始点とするベクトルを上記経路格納部を検索して複数取得し、取得した複数のベクトルの中から、各ベクトルの上記移動体の目的地に近い端点が、移動体の目的地に最も近いベクトルをベクトルＶ１として取得する第１のベクトル取得処理を行い、
取得したベクトルＶ１の上記移動体の目的地に近い端点を始点とするベクトルを上記経路格納部を検索して複数取得して、取得した複数のベクトルの中から、各ベクトルの有する上記移動体の目的地に近い端点が、移動体の目的地に最も近いベクトルをベクトルＶ２として取得する第２のベクトル取得処理を行い、
取得したベクトルの上記移動体の目的地に近い端点が、上記移動体の目的地に到達するまで上記第２のベクトル取得処理を繰り返し行いベクトルＶＮ（ＮはＮ≧２の整数）を取得し、上記ベクトルＶ１から上記ベクトルＶＮまでのベクトル群を、上記表示装置の位置から移動体の目的地までの経路データとして出力し、
上記出力した経路データに基づいて、各ベクトルの始点と終点とのいずれかの座標値から所定の距離以内の位置を示す位置情報に対応づけられた画像情報を上記情報格納部から選択し、
上記選択した画像情報を上記表示装置へ送信する
ことを特徴とする配信方法。
【請求項５】
配信装置から送信される情報を移動体に備えられた表示装置に表示する情報配信・表示方式において、
上記配信装置は、
位置情報と、位置情報に対応する画像情報を収集する収集部と、
上記収集部が収集した画像情報を位置情報と対応づけて格納する情報格納部と、
ある交差点から次の交差点までの間を緯度と経度とを座標とするベクトルを複数記憶する経路格納部と、
移動体の現在位置から移動体の目的地までの画像情報を要求する画像要求位置情報を入力し、移動体の現在位置に最も近いベクトルＶ０を上記経路格納部を検索して取得し、
取得したベクトルＶ０に上記表示装置の位置から垂線を引き、垂線とベクトルＶ０との交点を交点Ｒ０とし、交点Ｒ０とベクトルＶ０が有する２つの端点とのうち、上記移動体の目的地に最も近い点を取得し、取得した点を始点とするベクトルを上記経路格納部を検索して複数取得し、取得した複数のベクトルの中から、各ベクトルの上記移動体の目的地に近い端点が、移動体の目的地に最も近いベクトルをベクトルＶ１として取得する第１のベクトル取得処理を行い、
取得したベクトルＶ１の上記移動体の目的地に近い端点を始点とするベクトルを上記経路格納部を検索して複数取得して、取得した複数のベクトルの中から、各ベクトルの有する上記移動体の目的地に近い端点が、移動体の目的地に最も近いベクトルをベクトルＶ２として取得する第２のベクトル取得処理を行い、
取得したベクトル上記移動体の目的地に近い端点が、上記移動体の目的地に到達するまで上記第２のベクトル取得処理を繰り返し行いベクトルＶＮ（ＮはＮ≧２の整数）を取得し、上記ベクトルＶ１から上記ベクトルＶＮまでのベクトル群を、上記表示装置の位置から移動体の目的地までの経路データとして出力する経路判断部と、
上記経路判断部が出力した経路データに基づいて、各ベクトルの始点と終点とのいずれかの座標値から所定の距離以内の位置を示す位置情報に対応づけられた画像情報を上記情報格納部から選択する情報選択部と、
上記情報選択部が選択した画像情報を上記表示装置へ送信する情報送信部と
を備え、
上記表示装置は、
地図情報を格納する地図情報格納部と、
上記表示装置の位置を示す位置情報を取得する位置取得部と、
上記位置取得部が取得した表示装置の位置情報と上記表示装置を備えた移動体の目的地とに対応する画像情報を要求する画像要求位置情報を生成し、生成した画像要求位置情報を上記配信装置へ送信する要求部と、
上記画像要求位置情報に対応する画像情報を受信する画像情報受信部と、
上記表示装置の位置情報と対応する地図情報を、上記地図情報保管部から抽出し、抽出した地図情報と、上記画像情報受信部が受信した画像情報とを対応付けて表示する地図合成表示部と
を備えることを特徴とする情報配信・表示方式。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、車両の走行や、歩行において、移動先の混雑度合いや、路面状況を動画または画像を用いて詳細に知りえる目的で使用する表示装置、及び、表示装置に動画や画像を送る配信装置及び配信方法、情報配信・表示方式についての発明である。
【０００２】
【従来の技術】
移動する車両に搭載する一般的なカーナビゲーション装置の例では、車載装置に経度緯度といった位置に対応付けた音声や画像のデータを蓄積している。車載装置に、ＧＰＳ等の自位置を測定する装置を接続し、蓄積されているデータに対応付いた経度緯度に近づくと、蓄積されている音声を出力したり、地図上に蓄積されている画像を表示する。
また、一般的なインターネット接続機能付きカーナビゲーション装置の例では、携帯電話等を介してインターネットに接続したサーバに接続し、蓄積されているデータを取り出す。
車載装置に、ＧＰＳ等の自位置を測定する装置を接続し、蓄積されているデータに対応付けた経度緯度に近づくと、サーバに蓄積されている音声や文字を車載のナビゲーション装置へ伝送し、ナビゲーション装置にて表示する。
【０００３】
特開平１１−２２４２９０の例では、経路上で撮影した映像を撮影位置の情報と共に保存しておく。車両を走行させ、自車の位置や進行方向に近い映像を選択して表示する。
電子情報通信学会の信学技報ＰＲＭＵ９８−１６９「実写ライブ動画映像を用いた移動体ナビゲーションの試み」では、映像中に写った建物について、その建物の名称といった情報を重ねて表示する。
走行する車両が撮影する映像と合わせて、被写体の情報を重ねて表示するナビゲーションの試みである。
【０００４】
【発明が解決しようとする課題】
従来のカーナビゲーション装置の例では、現在地付近の情報を提供するものであり、これから通過するであろう経路上の情報を提供しない。
【０００５】
従来のカーナビゲーション装置の例では、自車の位置や方向に基づいて情報を提供するので、混雑している交差点や、橋の下の川の増水している橋といった、現在発生中の危険な状況を起因として選択した情報を知らせることができない。
【０００６】
従来のカーナビゲーション装置の例では、既に蓄積されている映像を対象としているので、走行している車両にこれから通過するであろう地点の現在の状況をリアルタイムに知らせることはできない。
従来のカーナビゲーション装置の例では、移動する車両に設置した表示画面上に現在位置と、近くの特定位置の店や名所といった情報を表示する。
移動しながら撮影した映像を伝送する車両から送られた映像を情報として表示できなかった。
定点にて撮影した現場の情報しか得られなかった。
【０００７】
電子情報通信学会の信学技報ＰＲＭＵ９８−１６９「実写ライブ動画映像を用いた移動体ナビゲーションの試み」の例では、自走する車両にカメラを取り付けて自車の視点で見た映像の情報を貼り付けている。
自車におけるナビゲーション装置に、例えば走行している道路の１ｋｍ遠方の交差点を客観的に撮影した動画を情報として表示する場合を考える。
交差点の動画のうち、どの方向から自車が走行してくるかがわからないと、交差点のいろいろな方向の込み具合を読み取っても、自車が走行するナビゲーションとしては利用する価値がない。
【０００８】
特開平１１−２２４２９０の例では、進行方向を想定し、想定した方向を車両が通過したときに、案内として、走行する方向と一致した道路の画像を表示するが、リアルタイムに撮影した画像ではないので、交通状況がわからず、かつ、わき道から交差点へ進入する場合のように進行方向が想定外である場合には、適切な方向案内として道路の画像を表示することができない。
【０００９】
この発明は、次のような課題を目的とする。
サーバやＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｃ）、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ  Ｄｉｓｃ  Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）に蓄積してあるデータではなく、リアルタイムに撮影している動画、または画像を走行する車両へ提供することを目的とする。
【００１０】
また、固定点にて撮影している動画や画像の情報を利用するだけではなく、移動しながら撮影している動画または画像をリアルタイムに走行する車両へ提供することを目的とする。
【００１１】
また、車両の移動経路に合わせて走行するであろう位置の動画または映像を配信して利用することを目的とする。
【００１２】
また、交差点や橋を客観的に撮影した動画または画像を走行中の車両に配信したときに、走行中の車両が動画または画像中のどの方向から出現するかを表示することを目的とする。
【００１３】
さらに、川の増水や、道路の渋滞が発生したときに、この情報を伝えるための動画または画像を優先的に走行する車両へ伝送して表示することを目的とする。
【００１４】
【課題を解決するための手段】
この発明に係る配信装置は、表示装置へ画像情報を配信する配信装置において、
位置情報と、位置情報に対応する画像情報を収集する収集部と、
上記収集部が収集した画像情報を位置情報と対応づけて格納する情報格納部と、
指定する位置情報に対応する画像情報を要求する画像要求位置情報を上記表示装置から入力し、入力した画像要求位置情報に対応づけられた画像情報を上記情報格納部から選択する情報選択部と、
上記情報選択部が選択した画像情報を上記表示装置へ送信する情報送信部と
を備えることを特徴とする。
【００１５】
上記情報格納部は、画像情報として、静止画と動画とライブ画像情報との少なくともいずれか一つを保管し、
上記ライブ画像情報は、ライブ画像の保管先へ接続する接続先を特定する接続情報であることを特徴とする。
【００１６】
上記配信装置は、さらに、上記画像要求位置情報に基づいて、上記表示装置が移動する行き先を判断する経路判断部を備え、
上記情報選択部は、上記経路判断部が判断した行き先に基づいて画像情報を選択することを特徴とする。
【００１７】
上記配信装置は、さらに、上記情報選択部が選択した画像情報の重要度を判断する重要度判断部を備えることを特徴とする。
【００１８】
この発明に係る表示装置は、移動体に設置され、配信装置から画像情報を取得する表示装置において、
地図情報を格納する地図情報格納部と、
位置を示す位置情報を取得する位置取得部と、
上記位置取得部が取得した位置情報に対応する画像情報を要求する画像要求位置情報を生成し、生成した画像要求位置情報を上記配信装置へ送信する要求部と、
上記画像要求位置情報に対応する画像情報を受信する画像情報受信部と、
上記位置情報と対応する地図情報を上記地図情報保管部から抽出し、抽出した地図情報と、上記画像情報受信部が受信した画像情報とを対応付けて表示する地図合成表示部と
を備えることを特徴とする。
【００１９】
上記表示装置は、さらに、上記地図合成表示部が表示した情報へ、上記表示装置が移動する方向を示す針路を合成して表示する針路合成部を備えることを特徴とする。
【００２０】
この発明に係る配信方法は、表示装置へ画像情報を配信する配信方法において、
位置情報と、位置情報に対応する画像情報を収集し、
上記収集した画像情報を位置情報と対応づけて情報格納部へ格納し、
指定する位置情報に対応する画像情報を要求する画像要求位置情報を上記表示装置から入力し、
入力した画像要求位置情報に対応づけられた画像情報を上記情報格納部から選択し、
上記選択した画像情報を上記表示装置へ送信する
ことを特徴とする。
【００２１】
この発明に係る情報配信・表示方式は、配信装置から送信される情報を表示装置する情報配信・表示方式において、
上記配信装置は、
位置情報と、位置情報に対応する画像情報を収集する収集部と、
上記収集部が収集した画像情報を位置情報と対応づけて格納する情報格納部と、
指定する位置情報に対応する画像情報を要求する画像要求位置情報を上記表示装置から入力し、入力した画像要求位置情報に対応づけられた画像情報を上記情報格納部から選択する情報選択部と、
上記情報選択部が選択した画像情報を上記表示装置へ送信する情報送信部と
を備え、
上記表示装置は、
地図情報を格納する地図情報格納部と、
位置を示す位置情報を取得する位置取得部と、
上記位置取得部が取得した位置情報に対応する画像情報を要求する画像要求位置情報を生成し、生成した画像要求位置情報を上記配信装置へ送信する要求部と、
上記画像要求位置情報に対応する画像情報を受信する画像情報受信部と、
上記位置情報と対応する地図情報を上記地図情報保管部から抽出し、抽出した地図情報と、上記画像情報受信部が受信した画像情報とを対応付けて表示する地図合成表示部と
を備えることを特徴とする。
【００２２】
【発明の実施の形態】
実施の形態１．
図１は実施の形態１の配信装置と表示装置の例を示す構成図である。
表示装置は、車両に設置する車載型か、人が持ち運べる携帯型であり、地図を表示し、この装置の位置を表示し、この装置を操作する操作員がおもむく予定の目的地までの間にある固定カメラまたは移動カメラの動画または画像を表示する。
配信装置は、表示装置の位置と目的地に応じて、動画または画像を伝送するために用いられ、配信装置に蓄積した動画や画像、ネットワークによって接続されたＷＷＷサーバに蓄積してある動画や画像を表示装置から見ることができる。
なお以下の説明において、画像情報は、静止画、動画、ライブ映像との少なくともいずれか一つを含むものである。
【００２３】
図１において、まず、ＷＷＷサーバ１０（１０Ａ、１０Ｂ）（ＷＷＷ：Ｗｏｒｌｄ  Ｗｉｄｅ  Ｗｅｂ、以下、ＷＷＷサーバ、又はＷｏｒｌｄ  Ｗｉｄｅ  Ｗｅｂサーバと記す）の構成について説明する。
ＧＰＳ（方位センサ）１１０は、ＧＬＯＢＡＬ  ＰＯＳＩＴＩＯＮＩＮＧ  ＳＹＳＴＥＭであり、地磁気から方位を読みとる方位センサを備えていてもよい。カメラ１１２の位置および撮影方向、または自車の位置および移動方向または、表示装置を持った操作員の位置および移動方向を取得する。
位置取得部１１１は、ＧＰＳまたはＧＰＳと方位センサから送られるの経度緯度の情報と、方位のデータを受け取る。
カメラ１１２は、動画または画像を撮像する。
ＷＷＷサーバソフトウェア１１３は、Ｗｏｒｌｄ  Ｗｉｄｅ  Ｗｅｂサーバのプログラムである。
【００２４】
動画または画像の電子ファイルと、その動画または画像を撮影した少なくとも位置と方向を記録した電子データである。動画・画像データおよび撮影位置情報１１４は、記憶領域又は記憶装置に格納されている。
動画・画像送信部１０３は、カメラ１１２において撮影した動画または画像を、ネットワークを介して端末からリアルタイムで見ることができるようにする送信手段である。この送信手段には、ＵＲＬとよばれるＷｏｒｌｄ  Ｗｉｄｅ  Ｗｅｂサーバ特有の接続アドレスを用いることにより、接続できる。具体例を挙げれば、Ｗｏｒｌｄ  Ｗｉｄｅ  Ｗｅｂサーバ上で動作する一般的な動画配信ソフトウェアである。
【００２５】
次に、図１において、動画・画像配信装置２０（「配信装置」ともいう）の構成について説明する。
動画画像選択部（情報選択部）１０１は、位置に応じた動画または画像を選択する。
収集部１０２は、インターネットに接続したＷｏｒｌｄ  Ｗｉｄｅ  Ｗｅｂサーバから動画または画像とその撮影位置および撮影方向を取得して、動画または画像を動画・画像データ１０５として記憶領域（情報格納部）に蓄積し、蓄積した動画または画像を動画・画像データ１０５から取り出すためのファイル名と撮影位置と撮影方向を対にして位置ＵＲＬデータベース１０４へ蓄積する。
もしくは、収集部１０２は、インターネットに接続したＷｏｒｌｄ  ＷｉｄｅＷｅｂサーバから動画または画像を見るための接続先ＵＲＬとそのＵＲＬで見ることのできる動画または画像の撮影位置および撮影方向を取得して位置ＵＲＬデータベース１０４へ撮影位置および撮影方向とＵＲＬを対にして蓄積する。
【００２６】
動画画像送信部（情報送信部）１０３は、ＷＷＷサーバの送信と同様であり、配信装置と外部との間で情報を送受信する。
位置／ＵＲＬデータベース１０４は、収集部１０２が収集した動画・画像データ１０５を取り出すためのＵＲＬ、動画・画像データ１０５を撮影した位置の経度緯度、撮影方向として、北を基準とした時計回りの方角を１組とした文字情報を蓄積している。または、収集部１０２が収集したＷｏｒｌｄ  Ｗｉｄｅ  Ｗｅｂサーバの接続先を指定するためのＵＲＬ、そのＵＲＬのＷｏｒｌｄ  ＷｉｄｅＷｅｂサーバで見ることのできる動画または画像の撮影情報である撮影位置の経度緯度、撮影方向として、北を基準とした時計回りの方角を１組とした文字情報を蓄積している。
動画・画像データ１０５は、収集部１０２が収集してきた動画または画像の電子データである。
【００２７】
次に、表示装置３０の構成について説明する。
表示装置は、車両に搭載してもよく、車両に搭載するカーナビでもよい。また、人が持って歩く携帯電話やノートパソコン、携帯情報端末の形状をしていもよい。上記以外のものであっても、配信装置２０から配信される情報を受信し、表示できるものであればよい。
動画・画像受信部１０６は、一般的なＷＷＷサーバを用いた動画配信ソフトによって配信した動画または画像を受け取ってリアルタイムで再生表示する動画再生ソフトウェアである。
要求部１０７は、自位置と目的地を動画・画像配信装置へ送る。
地図合成表示部１０８は、地図上に自位置や移動方向、表示している動画または画像の撮影位置、撮影方向を重ねて表示する。
地図データ１０９は、道路や地形をベクトルまたは画像で表現している電子データである。具体的には、ＣＤ−ＲＯＭまたはＤＶＤまたはハードディスク等、記憶領域（地図情報格納部）に格納してある。
ＧＰＳ１１０はＷＷＷサーバの構成にて説明したＧＰＳと同様である。
位置取得部１１１はＷＷＷサーバの構成にて説明した位置取得部と同じである。
【００２８】
次に動作について図１、図２、図３を用いて説明する。図２は、表示装置３０の画面例を示す図である。図３は、図２に対応づけられる画面の一例を表す図である。
第一に、表示装置３０における動作を説明する。
表示装置３０は、ノートパソコンやＰＤＡ、携帯電話の形態で歩行者が携行してもよい。しかしながら、実施の形態１にける説明においては、車両に設置してあることとして説明する。
ＧＰＳ１１０はＧＰＳ衛星からの電波を受信してＧＰＳ１１０のある経度緯度を毎秒１回計算し、経度緯度を数値で示すデータとして位置取得部１１１へ送る。このとき、ＧＰＳ１１０の装置に地磁気から方位を知りうる方位センサも備えてある装置の場合は、表示装置を設置している車両の進行方向を北の方角を０度としたときの時計回りの角度で表現した方位を、数値で示すデータとして毎秒１回位置取得部１１１へ送る。
位置取得部１１１は、経度位置および方位のデータを要求部１０７および地図合成表示部１０８へ数値データとして、毎秒送る。
【００２９】
地図合成表示部１０８は、位置取得部１１１から送られた現在位置付近の地図を地図データ１０９から、取得して画面上に表示する。地図データ１０９の地図はラスターデータでもベクトルデータでもよい。地図上で、表示している図は（地図１枚で表示できる、ある一定の東西南北の範囲でかこまれた部分）の範囲から位置取得部１１１から送られた現在位置がはずれた場合は、現在位置の範囲が入っている図葉の地図を読み込んで表示する。
地図合成表示部１０８は、表示した地図上で、位置取得部１１１から送られた現在位置に対応する部分に三角印のマークを毎秒表示する。このとき、位置取得部１１１から送られた方位に対応した方角に三角形の頂点を表示する。表示例は、図２、図３における車両（人）現在位置走行方向を地図上に表示している部分である。
【００３０】
図２は、動画を除いた画像情報を示している。しかしながら、表示装置においては、表示画面左側に地図（図２）を表示し、表示画面右側に動画（図３）を並べて表示する。
また、図２の地図の動画領域へ図３の動画を挿入して表示してもよい。また、この他の方法でもよい。地図（図２）と動画（図３）との組み合わせが表示装置に表示さていればよい。
【００３１】
操作員は、地図合成表示部１０８が表示している地図上で目的地を入力する。具体的には、地図上の目的地部分をマウスで押す。地図合成表示部１０８は、地図上で指定した点の位置を経度緯度に変換する。地図合成表示部１０８は、変換した目的地の経度と緯度の情報を数値データとして、要求部１０７へ送る。変換の機能は、一般の地図を表示するソフトウェアであれば有している機能である。または、操作員が経度、緯度をキーボードから入力することにより、要求部１０７に目的地の経度緯度を与える。
【００３２】
または、要求部１０７に表示機能があり、目的地の地名を画面上に複数表示し、その中から目的地をマウスを用いて選択すると、この目的地に対応した経度緯度が要求部１０７に入力される。この場合、複数の目的地の地名と、その経度緯度を対にした文字情報を予め記憶部に記憶しておき、要求部１０７は、これを読み込んで地名をプルダウンメニュー形式で表示する。操作員がプルダウンメニューの中から必要な地名を選択して、マウスで押すと、要求部１０７は、これと対になった経度緯度の値を読み出す。
要求部１０７は、現在位置の経度緯度と、目的地の経度緯度を数値データとして、動画・画像配信装置にある動画・画像選択部１０１へ送る。現在位置は毎秒送ることとし、目的地は変更があれば送ることとする。
【００３３】
第二に、動画・画像配信装置における動作について説明する。
また、ＷＷＷサーバ１０における動作についても説明する。
動画・画像配信装置２０においては、収集部１０２が常に動作している。
収集部１０２は、事前に動画・画像配信装置の管理者が設定した時間間隔毎に、インターネットに接続したＷｏｒｌｄ  Ｗｉｄｅ  Ｗｅｂサーバから動画または画像とその撮影位置および撮影方向を取得する。収集部１０２は、取得した撮影位置および撮影方向を、動画または画像を見るために必要なＵＲＬと共に位置／ＵＲＬデータベース１０４に記録する。
【００３４】
収集部１０２が、そもそもどのＷＷＷサーバ１０を見るかは、事前に動画・画像配信装置の管理者が、接続先の複数のＵＲＬを指定しておく。また、ＷＷＷサーバにおける撮影位置、撮影方向の記録は、例えばＸＭＬ（ＥＸＣＨＡＮＧＥＡＢＬＥ  ＭＡＲＫＵＰ  ＬＡＮＧＵＡＧＥ）という記述言語によって、予め決められた位置および方向を示すタグで囲まれた記述を読むことによって行う。例えば＜撮影位置経度＞Ｅ１３３．４５２５０３＜／撮影位置経度＞と記述があった場合には、東経１３３度４５分２５秒０３であるとして、撮影位置の経度緯度、撮影方向の方角を記していることとする。これと同時に、ＸＭＬ記述では表示しにくい動画または画像のデータをどのＵＲＬから取り出せばよいかというＵＲＬの情報も同時にＸＭＬで記述しておいてもよい。この場合のＵＲＬは、ＷＷＷサーバにある動画・画像送信部１０３へ接続するためのＵＲＬとする。
【００３５】
またＷＷＷサーバに、動画・画像送信部１０３を持たない場合は、動画・画像配信装置の収集部１０２が画像または動画の電子ファイルを動画・画像配信装置の記憶部にコピーし、動画・画像配信装置に備えている動画・画像送信部１０３に特定のＵＲＬで接続するとこれを見ることができるように設定し、このＵＲＬを撮影位置や撮影方向と共に位置／ＵＲＬデータベース１０４に記録する。
【００３６】
また、ＷＷＷサーバ自体が移動中であることも想定している。この場合、ＷＷＷサーバ自体に表示装置と同様に位置を取得するＧＰＳセンサ１１０および位置取得部１１１を備えておき、方位をＷＷＷサーバソフトウェアから取り出せるようにＸＭＬ言語によって記述するようにしてもよい。この場合も１秒に１回程度方位情報は更新される。カメラで撮影した動画または画像を、動画・画像送信部１０３を用いて常に配信できるようにしている。更に、移動するＷＷＷサーバに設置するＧＰＳ１１０には、表示装置に設置しているのと同じような方位センサをつけてあってもよく、この場合、方位をＷＷＷサーバソフトウェア１１３にて表示できる。移動するＷＷＷサーバにおける撮影位置および撮影方向は時間によって変化があってもよく、例えば１秒に１回撮影位置と撮影方位を更新してもよい。
【００３７】
次に表示装置から表示装置３０の位置や目的地が送られてきたときの処理について記す。
動画・画像選択部１０１は、表示装置３０の要求部１０７から送られた表示装置の現在位置の経度緯度と、目的位置の経度緯度の間に存在する情報を取り出す。実施の形態１において、便宜上東をＸ軸正方向、北をＹ軸正方向とした座標軸上において、現在位置の経度をＸ０，緯度をＹ０、目的地の経度をＸ１、緯度をＹ１として表現することとする。
【００３８】
動画・画像選択部１０１は、位置に基づく情報検索、方向に基づく情報検索、経路に基づく情報検索、を行うが、実施の形態１では、位置に基づく情報検索と方向に基づく情報検索について説明する。
先ず動画・画像選択部１０１における位置に基づく情報検索を説明する。動画・画像選択部１０１は、位置／ＵＲＬデータベース１０４の中の撮影位置情報を参照し、点Ｘ０，Ｙ０および点Ｘ１，Ｙ１から半径距離１００ｍ以内にある情報の撮影位置と、撮影方向および、ＵＲＬの組み合わせを文字データとして取り出す。１００ｍという基準となる距離は予め、動画画像配信装置の管理者が設定しておくことにより変更できる。撮影位置と、撮影方向および、ＵＲＬの組み合わせは、一度に複数取り出してもよい。動画・画像選択部１０１が取り出したＵＲＬが、動画・画像配信装置自身のＵＲＬである場合もありえる。
【００３９】
次に動画・画像選択部１０１における方向に基づく情報検索を説明する。
動画・画像選択部１０１は、点Ｘ０，Ｙ０から点Ｘ１，Ｙ１までの線分Ｌ１として、Ｌ１に並行でかつＬ１の両側１００ｍに線分Ｌ２、Ｌ３があるものとして、線分Ｌ２、Ｌ３の両端を結んでできる矩形領域の中に撮影位置のある情報の撮影位置と、撮影方向および、ＵＲＬの組み合わせを文字データとして、位置／ＵＲＬデータベース１０４から取り出す。Ｌ１の両側１００ｍという距離設定は予め動画画像配信装置の管理者が設定しておいた距離であれば違う値でもよい。
【００４０】
また、方向に基づく情報検索では、Ｌ２，Ｌ３の矩形領域に入るという判断ではなく、点Ｘ０，Ｙ０から点Ｘ１，Ｙ１へベクトルＶ１を引き、点Ｘ０，Ｙ０を原点として、Ｖ１の左右３０度にＶ１と同じ長さのベクトルＶ２、Ｖ３を引き、点Ｘ０，Ｙ０とＶ２の点Ｘ０，Ｙ０と反対の点、および、点Ｘ１，Ｙ１、Ｖ３の点Ｘ０，Ｙ０と反対の点を繋いで表現できる領域内に撮影位置のある情報の撮影位置と、撮影方向および、ＵＲＬの組み合わせを文字データとして、位置／ＵＲＬデータベース１０４から取り出してもよい。この場合は、Ｖ１の左右両側のＶ２、Ｖ３の角度も予め動画画像配信装置の管理者が設定しておいた角度であれば違う値でもよい。
撮影位置と、撮影方向および、ＵＲＬの組み合わせは、一度に複数取り出してもよい。動画・画像選択部１０１が取り出したＵＲＬが、動画・画像配信装置自身のＵＲＬである場合もありえる。
【００４１】
次に、動画・画像選択部１０１が、位置に基づく情報検索または方向に基づく情報検索を行った後の処理について述べる。
動画・画像選択部１０１は、撮影位置と、撮影方向および、ＵＲＬの組み合わせを、文字データとして、問い合わせのあった表示装置の地図合成表示部１０８と動画・画像受信部１０６へ送る。
【００４２】
第三に再び表示装置における動作について説明する。
動画・画像受信部１０６は、動画・画像配信装置から受け取ったＵＲＬのＷＷＷサーバに接続し、動画・画像送信部１０３から動画または画像を受け取る。
動画の場合、動画・画像受信部１０６は、リアルタイムで受け取り、１秒に３０枚の画像からなる動画の場合は、３０分の１秒に一度画像を地図合成表示部１０８へ送る。画像の場合、動画・画像受信部１０６は、受け取った画像を地図合成表示部１０８へ送る。このとき、動画・画像受信部１０６は、画像または動画を取得した先のＷＷＷサーバのＵＲＬも合わせて地図合成表示部１０８へ送る。
【００４３】
地図合成表示部１０８は、図２，図３に示す画面例のように、画像または動画の中の１枚の画像を撮影位置に対応した場所に表示する。図３は、動画として表示する画像の一例を示す。撮影位置に対応した場所とは、動画・画像配信装置の動画画像選択部１０１から送られている撮影位置の経度緯度の文字列データを用いて判断する。図２に示した例では、動画１から動画５が結果として画面上に表示してある。
【００４４】
地図合成表示部１０８は、経度緯度を指定すると、表示中の地図上のどの位置がその経度緯度にあたるかを判断する。次にこの位置の横に動画・画像受信部１０６から送られてきた画像を表示する。
更に、撮影位置に撮影方向に向かって図３のように矢印を表示する。
【００４５】
地図合成表示部１０８において、どの画像をどの撮影位置の横に表示するかは、撮影位置と撮影方向とＵＲＬを１対として送られてきたデータと、画像とＵＲＬと一対にして送られてきたデータにおいて、ＵＲＬの一致する撮影位置と画像が対応していると判断する。
【００４６】
地図合成表示部１０８は、動画または画像の表示の下に、撮影位置と表示装置の自位置との距離を表示する。これは、経度緯度の差異から計算して求める。
【００４７】
動画画像配信装置における動画画像選択部１０１から送られる撮影位置、撮影方位、ＵＲＬのうち、ＵＲＬが一定であるにもかかわらず、撮影位置または撮影方位が変化する場合は、撮影位置に表示する矢印も図２のように三角印にして表示し、時々刻々変化する位置に応じて表示位置を変更する。この場合は、表示する動画または画像の地図上の表示位置も変化する撮影位置に応じて変更する。
画像または動画の地図上の表示位置が変化する場合、これに追従して撮影位置と表示装置の自位置との距離の表示位置も変化する。
【００４８】
画像は、新たに動画・画像受信部１０６から同じＵＲＬの画像が送られてきたときに更新して表示する。
このように表示することによって、動画・画像受信部１０６が受信した画像が、撮影時には動画であったならば、その動画が１秒に３０コマの画像で構成されている場合、同じように１秒に３０コマの画像を１０６動画・画像受信部が受信し、地図合成表示部１０８は、これを同じく１秒に３０コマ地図上の撮影位置の横に表示すると、地図上にあたかも動画が表示してあるように見ることができる。
【００４９】
地図合成表示部１０８が画像または撮影位置および撮影方向または動画または画像を地図上に表示しようとしたときに、撮影位置が現在表示中の地図の範囲外の場合は、地図を縮小して表示することによって対応位置を表示するか、地図の表示は変更せずに撮影位置が範囲外の画像または動画は表示しないこととする。地図合成表示部１０８において、操作員が画面上の撮影位置において表示してある動画をマウスを用いて指示すると、図３の動画１、動画２の例のように、地図と別の表示領域に拡大して表示する。
【００５０】
以上のように、動画・画像配信装置２０は、
複数の定点または移動している点において撮影した画像または動画像の発信元の中から、要求者である表示装置を持つ車両または歩行で移動中の要求者の位置および目的地に対応して必要な動画または画像の発信元を選び出し、要求者が見ることができるように、発信元へ接続するための情報であるＵＲＬを提供することができる。
これにより、動画または画像の要求者は、画像または動画像の発信元のＷＷＷサーバのＵＲＬを一切知らなくても、動画・画像配信装置一つの接続先を知っているだけで、必要な位置の画像または動画像をリアルタイムで見ることができる。
【００５１】
更に、以上のように表示装置では、動画・画像配信装置２０から必要な位置の画像または動画を発信しているＷＷＷサーバ１０のＵＲＬを取得することにより、地図を表示して、自位置と、近くの道路や土地や町の景観といった画像または動画の情報を撮影した位置と撮影方向を合わせて地図上に表示し、更に自位置と画像または動画の情報を撮影した位置との距離を表示することにより、現在のリアルタイムの道路や土地や町の景観を位置関係と合わせて視覚的に瞬時に知りえることができる。また、移動しながら映像を収集している車両の写している映像についても、走行している車両の現在の位置と撮影している映像を同時に見ることができる。
【００５２】
従来は、動画の利用者は車両管理の事務所にいて、走行中の車両の動体管理を行い、車両から送られる動画を受けとって見る等の仕組みが必要であり、車両においても、動体管理をされるための仕組みが必要であったが、本特許の方式によれば、走行中の車両または歩行中の操作員は、表示装置上で自ら目的地を指定するだけで、現在位置および、目的地、およびその途中にあるカメラの映像を、そのカメラが定点に設置してあるかまたは移動する車両に付いているかを全く気にせずに見ることができる。
映像を見る側が、特別な動体管理を行う必要はない。また、映像を提供する側も動体管理システムとして特別に管理事務所とのやりとりの仕組みが必要なわけではなく、一般的な映像配信のためのソフトウェアと、撮影位置や撮影方向を記述するＷＷＷサーバの機能があればよい。
【００５３】
以上のように、この実施の形態のサーバ装置は、位置情報と合わせて動画や画像を収集するか、位置情報と合わせたライブ動画、ライブ画像の保管先の接続情報を収集する収集部１０２と、クライアントである表示装置からの要求により、表示対象位置の範囲を定めて動画や画像を取り出すために必要な接続先の情報を取り出す動画・画像選択部１０１と、動画または画像を送信する動画・画像送信部１０３を備えることを特徴とする。
また、この実施の形態のクライアント装置は、自位置を取得する位置取得部１１１と、自位置をネットワークを介して配信装置へ伝える要求部１０７と、動画または画像を受信する動画画像受信部１０６と、動画または画像を地図と合わせて表示する地図合成表示部１０８とを備えることを特徴とする。
【００５４】
実施の形態２．
図４は実施の形態２の配信装置、表示装置の一例を示す構成図である。
図４における動画・画像配信装置２０において、動画・画像選択部１０１、動画・画像送信部１０３、動画・画像データ１０５、収集部１０２、位置／ＵＲＬデータベース１０４は実施の形態１と同じである。
図４におけるＷＷＷサ−バにおいて、ＷＷＷサーバソフトウェア１１３、動画・画像データおよび位置情報１１４、ＧＰＳ（方位センサを含んでもよい）１１０、カメラ１１２、位置取得部１１１、動画画像送信部１０３は実施の形態１と同じである。
図２における表示装置において、ＧＰＳ（方位センサを含んでもよい）１１０、位置取得部１１１、動画画像受信部１０４、要求部１０７、地図合成表示部１０８、地図データ１０９は、実施の形態１と同じである。
【００５５】
図２における動画・画像配信装置において、経路データ２０２は、道路または歩行するための通路の位置と接続関係をデータ化しているものである。経路データ２０２は、記憶領域（経路格納部）に格納されている。例えば、実際の道路である国道１号を例にあげると、国道１号の交差点から次の交差点までの間を経度と緯度を座標とするベクトルとして表現し、国道１号の始点から終点までの数多くのベクトル群で表す形態である。国道、県道および歩行者へのガイドが必要な場合は地下街や歩行者通路といった通行可能な場所について交差点から交差点までの区間を表現するベクトルの集合のデータである。
経路判断部２０１は、表示装置の現在位置と目的地の間にある道路の経路を判断し、その経路上の動画または画像を１０１動画・画像選択部に要求する。
【００５６】
次に動作について説明する。
実施の形態１で第一に説明した表示装置における動作は、実施の形態１において説明した動作と同じである。但し、表示装置の要求部１０７は、動画・画像配信装置へ自位置、目的地の経度緯度の文字データを送るときに、動画・画像配信装置の動画・画像選択部１０１ではなく、経路判断部２０１へ送ることとする。
【００５７】
動画・画像配信装置における動作について説明する。
ＷＷＷサーバにおける動作および、動画・画像配信装置における１０２収集部の動作は実施の形態１と同じである。
【００５８】
次に配信装置から表示装置の位置や目的地が送られてきたときの処理について記す。
実施の形態２において便宜上、東をＸ軸正方向、北をＹ軸正方向とした座標軸上において、現在位置の経度をＸ０，緯度をＹ０、目的地の経度をＸ１、緯度をＹ１として表現することとする。
【００５９】
経路判断部２０１は、経路データ２０２のベクトルの中から、現在位置に最も近いベクトルＶ０を取り出す。
この現在位置からＶ０へおろした垂線とＶ０の交点を道路情報の始点Ｒ０とする。Ｒ０からＶ０の２端点のうち、目的地に近い点と接続しているベクトルの中から、ベクトルのもう１方の端点が目的地に最も近い物を選びこのベクトルをＶ１とする。Ｖ１のもう一方の端点に接続しているベクトルの中から、ベクトルのもう１方の端点が目的地に最も近い物を選びこのベクトルをＶ２とする。これを繰り返すことにより、ＶＮ（Ｎは整数）の端点が目的地に到達し、Ｖ０〜ＶＮのベクトル群が経路となる。
【００６０】
また、このような経路探索を行ったとしても、ＶＭ（Ｍは整数）の端点が行き止まりになって目的地に到達できない場合は、ＶＭ−１の端点にてＶＭと異なるベクトルが接続している場合、このベクトルを新たにＶＭとして、ＶＭのもう一方の端点に接続しているベクトルの中から、ベクトルのもう１方の端点が目的地に最も近い物を選びこのベクトルをＶＭ＋１として、目的地に到達するベクトルの接続を求める。。これにおいて目的地に到達できなかった場合は、ＶＭ−２の端点にて、ＶＭ−１と異なるベクトルが接続している場合、このベクトルを新たにＶＭ−１として、同様の経路探索を行う。
【００６１】
経路判断部２０１によって、Ｖ０〜ＶＮのベクトルによって、現在位置から目的地までが表現できたとする。このベクトル群をＧ１とする。
経路判断部２０１は、１本の経路だけではなく、他の複数の経路も探索する。経路判断部２０１は、ＶＫ−１（Ｋは整数でＮより小さいとする）の端点にてＶＫと異なるベクトルが接続している場合、このベクトルを新たにＶＫとして、ＶＫのもう一方の端点に接続しているベクトルの中から、ベクトルのもう１方の端点が目的地に最も近い物を選びこのベクトルをＶＫ＋１として、目的地に到達する。ベクトルを求める。また、現在位置付近において、複数の経路の可能性を考えるという意味では、上記ＶＫにおけるＫの値はなるべく小さい値を用いる。上記探索によって、Ｇ１と異なる経路が求まった場合これをＧ２、Ｇ３、・・・と昇番で表す。
経路判断部２０１は、経路探索の結果、ある整数Ｐにおいて、ＶＰが既に探査済のＧ１、Ｇ２、・・・に含まれるベクトルの端点に到達した場合は、その点から目的地までの経路は既に他の探索済のベクトル群に含まれるのでその点以降の探索は行わない。
【００６２】
経路判断部２０１における探索処理において、ベクトルの端点に接続するベクトルを選ぶときに、端点に接続しているベクトルのもう１方の端点が必ずしも目的地に近くない場合もあるが、この場合でも探索を続ける。
経路判断部２０１におけるベクトルの探査の終了条件としては、第一に目的地に到達すること、第二に予め設定しておいたベクトル数を超えてしまった場合、第三に予め設定しておいたベクトル数の探索を行った時点で、現在位置から目的地に近づいていない場合である。
経路判断部２０１は、探索した全てのベクトル群Ｇ１、Ｇ２、・・・ＧＭ（Ｍは整数）に含まれる全てのベクトルＶ０〜ＶＮ（Ｎは整数）の各ベクトルの始点および終点の座標である経度緯度を、１０１動画・画像選択部１０１へ文字データとして送る。
【００６３】
実施の形態２における動画・画像選択部１０１は、ベクトルＶ０〜ＶＮとの撮影位置との距離が１００ｍ以内の撮影位置と、撮影方向および、ＵＲＬの組み合わせを文字データとして、位置／ＵＲＬデータベース１０４から取り出す。
１００ｍという距離設定は予め動画画像配信装置の管理者が設定しておいた距離であれば違う値でもよい。
撮影位置と、撮影方向および、ＵＲＬの組み合わせは、一度に複数取り出してもよい。動画・画像選択部１０１が取り出したＵＲＬが、動画・画像配信装置自身のＵＲＬである場合もありえる。
【００６４】
次に、動画・画像選択部１０１が、位置に基づく情報検索または方向に基づく情報検索を行った後の処理について述べる。
動画・画像選択部１０１は、撮影位置と、撮影方向および、ＵＲＬの組み合わせを、文字データとして、問い合わせのあった表示装置の地図合成表示部１０８と動画・画像受信部１０６へ送る。
【００６５】
表示装置における地図合成表示部１０８と動画・画像受信部１０６が、撮影位置と、撮影方向および、ＵＲＬの組み合わせを、文字データとして受け取った後の処理は、実施の形態１と同じである。
【００６６】
以上のように、実施の形態２の動画・画像配信装置では、表示装置の操作員が設定した目的地と時々刻々と変わる表示装置の現在位置に対応して、現在位置と目的地の間にある複数の経路上の地点の画像または動画を提供することができる。
これにより、図２、図３おける表示装置の表示例のように、表示装置を設置した車両または歩行者が、交差点Ａに差し掛かる前の時点で、例えば画面右上方向に目的地があるとすると、動画１〜動画５といった経路上の道路の画像や動画を見ることができる。
更に表示装置を設置した車両または歩行者が、交差点Ａを通過して、図５の動画２を撮影している点に向かって進むとした場合、図５の現在地から目的地である画面右上の方向に向かう経路上の道路の画像や動画である動画２、動画３、動画６を見ることができる。図６に動画２、動画３の一例を表している。
【００６７】
表示装置を設置した車両または歩行者の現在位置が変化すると、経路判断部２０１が２０２経路データから選ぶベクトル群の内容が変化し、このベクトル群に対応した動画または画像の検索を行う１０１動画・画像選択部の選択結果にも反映する。
つまりは、図５のように、現在位置から目的地の間の経路からはずれる動画１、動画４、動画５（図２における現在位置では表示していたもの）は見えなくなる。
また、地図表示範囲に動画６の撮影位置が入ってくるので、新たに動画６を表示する。
このように、現在位置から、目的位置へ向かう複数の経路上の動画、画像を見ることができる。
【００６８】
以上のように、この実施の形態のサーバ装置は、車両が走行するであろう経路を予測して配信する動画・画像を選択する経路判断部２０１を備えることを特徴とする。
【００６９】
実施の形態３．
図６は実施の形態３の配信装置・表示装置の一例を示す構成図である。
図６における動画・画像配信装置において、動画・画像選択部１０１、動画・画像送信部１０３、動画・画像データ１０５、収集部１０２、位置／ＵＲＬデータベース１０４は実施の形態１と同じである。
図６におけるＷＷＷサ−バにおいて、ＷＷＷサーバソフトウェア１１３、動画・画像データおよび位置情報１１４、ＧＰＳ１１０（方位センサを含んでもよい）、カメラ１１２、位置取得部１１１、動画画像送信部１０３は実施の形態１と同じである。
図６における表示装置において、ＧＰＳ１１０（方位センサを含んでもよい）、位置取得部１１１、動画画像受信部１０４、要求部１０７、地図合成表示部１０８、地図データ１０９は、実施の形態１と同じである。
【００７０】
図６における表示装置において、自位置方向合成部（針路合成部）３０１は、表示する画像または動画像の中に、表示装置を搭載した車両またはこれを携帯した歩行者が近づく方向を、重ねて表示する。
【００７１】
次に動作について説明する。
実施の形態１で第一に説明した表示装置における動作は、実施の形態１において説明した動作と同じであるが、位置取得部１１１は、経度位置および方位のデータを、要求部１０７および地図合成表示部１０８および自位置方向合成部３０１へ数値データとして、毎秒送る。
実施の形態１で第ニに説明した動画・画像配信装置における動作は、実施の形態１において説明した動作と同じであるが、動画・画像選択部１０１は、撮影位置と、撮影方向および、ＵＲＬの組み合わせを、文字データとして、問い合わせのあった表示装置の自位置方向合成部３０１と動画・画像受信部１０６へ送る。
【００７２】
次に、動画・画像配信装置から撮影位置と、撮影方向および、ＵＲＬを、自位置方向合成部３０１と動画・画像受信部１０６へ送られた後の表示装置の動作について説明する。
動画・画像受信部１０６は、動画・画像配信装置から受け取ったＵＲＬのＷＷＷサーバに接続し、動画・画像送信部１０３から動画または画像を受け取る。
動画の場合、動画・画像受信部１０６は、リアルタイムで受け取り、１秒に３０枚の画像からなる動画の場合は、（１／３０秒）に一度画像を自位置方向合成部３０１へ送る。
即ち、時間順に、１秒に３０枚の画像を動画・画像受信部１０６から自位置方向合成部３０１へ送る。動画データを送るのではなく、画像データに変換して送る。また、完全な動画ではなく、デジタルカメラを用いる場合のように、１秒に２枚といった連続撮影ができる物があり、これを用いたときには、１秒に２枚の画像を時間順に送ることとする。もちろん、利用するカメラ設備によって、１秒にＮ枚の場合も可能である。
【００７３】
画像の場合、動画・画像受信部１０６は、受け取った画像を自位置方向合成部３０１へ送る。
このとき、動画・画像受信部１０６は、画像または動画を取得した先のＷＷＷサーバのＵＲＬも合わせて自位置方向合成部３０１へ送る。
自位置方向合成部３０１では、既に位置取得部１１１から送られている自位置と方位を動画・画像受信部１０６から送られた画像に合成してから地図合成表示部１０８へ送る。合成の方式については後述する。
【００７４】
地図合成表示部１０８は、自位置方向合成部３０１から、画像と撮影位置、撮影方向をＵＲＬをキーとして受け取る。その後の処理は、実施の形態１における処理は全く同じである。
地図合成表示部１０８は、図２に示す画面例のように、画像または動画の中の１枚の画像を撮影位置に対応した場所に表示する。撮影位置に対応した場所とは、動画・画像配信装置の動画画像選択部１０１から自位置方向合成部３０１を経由して送られている撮影位置の経度緯度の文字列データを用いて判断する。図２に示した例では、動画１から動画５が結果として画面上に表示してある。
【００７５】
地図合成表示部１０８は、経度緯度を指定すると、表示中の地図上のどの位置がその経度緯度にあたるかを判断する。次にこの位置の横に自位置方向合成部３０１から送られてきた画像を表示する。
更に、撮影位置に撮影方向に向かって図３のように矢印を表示する。
地図合成表示部１０８において、どの画像をどの撮影位置の横に表示するかは、撮影位置と撮影方向とＵＲＬを１対として送られてきたデータと、画像とＵＲＬと一対にして送られてきたデータにおいて、ＵＲＬの一致する撮影位置と画像が対応していると判断する。
【００７６】
地図合成表示部１０８は、動画または画像の表示の下に、撮影位置と表示装置の自位置との距離を表示する。これは、経度緯度の差異から計算して求める。
動画画像配信装置における動画画像選択部１０１から自位置方向合成部３０１を経由して送られる撮影位置、撮影方位、ＵＲＬのうち、ＵＲＬが一定であるにもかかわらず、撮影位置または撮影方位が変化する場合は、撮影位置に表示する矢印も図２のように三角印にして表示し、時々刻々変化する位置に応じて表示位置を変更する。この場合は、表示する動画または画像の地図上の表示位置も変化する撮影位置に応じて変更する。
画像または動画の地図上の表示位置が変化する場合、これに追従して撮影位置と表示装置の自位置との距離の表示位置も変化する。
【００７７】
画像は、新たに自位置方向合成部３０１から同じＵＲＬの画像が送られてきたときに更新して表示する。
このように表示することによって、動画・画像受信部１０６が受信した画像が、撮影時には動画であったならば、その動画が１秒に３０コマの画像で構成されている場合、同じように１秒に３０コマの画像を１０６動画・画像受信部が受信し自位置方向合成部３０１を経由してた後、地図合成表示部１０８は、これを同じく１秒に３０コマ地図上の撮影位置の横に表示すると、地図上にあたかも動画が表示してあるように見ることができる。
【００７８】
地図合成表示部１０８が画像または撮影位置および撮影方向または動画または画像を地図上に表示しようとしたときに、撮影位置が現在表示中の地図の範囲外の場合は、地図を縮小して表示することによって対応位置を表示するか、地図の表示は変更せずに撮影位置が範囲外の画像または動画は表示しないこととする。地図合成表示部１０８において、操作員が画面上の撮影位置において表示してある動画をマウスを用いて指示すると、図３の動画１、動画２の例のように、地図と別の表示領域に拡大して表示する。この場合、自位置方向合成部３０１において合成処理を行った動画を表示する。
【００７９】
最後に、表示装置における自位置方向合成部３０１の処理を記す。
自位置方向合成部３０１への入力は、表示装置の位置取得部１１１から送られる自位置および表示装置の向いている方位、動画・画像受信部１０６から送られる画像または動画の一フレームである画像およびその画像の取得元のＵＲＬ、さらに、動画・画像配信装置の動画・画像選択部１０１から送られる画像または動画の撮影位置および撮影方位およびその動画または画像の取得元のＵＲＬである。
同じＵＲＬで示される撮影位置、撮影方向、画像に対する処理を記す。
【００８０】
実施の形態３において便宜上、東をＸ軸正方向、北をＹ軸正方向とした座標軸上において、現在位置の経度をＸ０，緯度をＹ０、目的地の経度をＸ１、緯度をＹ１として表現することとする。
更に、撮影位置の座標から、撮影方位に向かう方向がＹ軸の正方向になるように座標系を回転することとする。図８の自位置方向合成部３０１において、左上の図のように、撮影位置から撮影方向は真上に向かうとする。
撮影位置から撮影方向に向かう線の延長と、自位置の座標から、自分が移動している方向へ直線を引き、交わる点をＫとする。
自位置の座標から、自分が移動している方向へ直線を引くのではなく、自位置の座標から、撮影位置から撮影方向へ１０Ｍ向かった点に直線を引いて交わる点をＫとしてもよい。
【００８１】
次に、撮影位置座標とＫを結ぶ直線上で実空間上での長さ１０Ｍの矢１を描き、Ｋに矢の先端が接していることとする。更に自位置座標とＫを結ぶ直線上で実空間上での長さ１０Ｍの矢２を描き、Ｋに矢の先端が接していることとする。矢１から時計回りに矢２までの角度をＡとする。
次に、動画・画像受信部１０６から送られる画像の縦横比と同じく、画像と同じ大きさの画像枠矩形の中に基準となる楕円を予め設定しておき、この中心に矢の頭がつくように楕円下端から楕円の中心に向かう矢１と、時計周りに角度Ａになるように楕円の端から楕円中心へ向かう矢印２を描く。
次に、動画・画像受信部１０６から送られる画像に、画像枠矩形の矢印２に対応する位置に、矢印を合成する。
【００８２】
以上のように、道路や景観を客観的な位置で撮影した動画または画像中に、表示装置を設置した車両や表示装置を持っている人が移動してその画像に入ってくるであろう方向を合成して表示することができるので、定点や移動しながら撮影したライブ画像を見ても、その相対的な方向を容易に知りうることができる。
【００８３】
以上のように、この実施の形態のクライアント装置の地図合成表示部１０８は、動画または画像の画面の中に、表示装置を備えた車両が移動して通過するであろう針路を合成して表示する自位置方向合成部を備えることを特徴とする。
【００８４】
実施の形態４．
図９は実施の形態４の配信装置・表示装置の一例を示す構成図である。
図９における動画・画像配信装置において、動画・画像選択部１０１、動画・画像送信部１０３、動画・画像データ１０５、収集部１０２、位置／ＵＲＬデータベース１０４は実施の形態１と同じである。
図９におけるＷＷＷサ−バにおいて、ＷＷＷサーバソフトウェア１１３、動画・画像データおよび位置情報１１４、ＧＰＳ１１０（方位センサを含んでもよい）、カメラ１１２、位置取得部１１１、動画画像送信部１０３は実施の形態１と同じである。
【００８５】
図９の左上のＷＷＷサーバ１０Ｃには、ＷＷＷサーバソフトウェア１１３があり、このＷＷＷサーバソフトウェア上に観測情報が随時更新されて表示してある。このＷＷＷサーバには、観測情報を取得するセンサが付いていてもよい。このＷＷＷサーバ１０Ｃには、操作員が観測情報または危険の有無の情報を記録してある。例えば、ＸＭＬ記述言語によって、予め決められた観測位置および観測内容を示すタグで囲まれた記述を読むことによって行う。例えば＜観測位置経度＞Ｅ１３３．４５２５０３＜／観測位置経度＞と記述があった場合には、東経１３３度４５分２５秒０３であるとする。これと合わせて、＜観測情報突風＞有り＜／観測情報突風＞と記述してある場合は、観測位置において、突風が吹いていることを示す。ＸＭＬ記述によって、降雨量といった数値や突風やがけ崩れによると思われる振動の有る無しといった観測情報を提供する。降雨量の場合は、例えば＜観測降雨量＞２５０ＭＭ＜／観測降雨量＞といった記述になる。
【００８６】
図９における表示装置において、ＧＰＳ１１０（方位センサを含んでもよい）、位置取得部１１１、動画画像受信部１０４、要求部１０７、地図合成表示部１０８、地図データ１０９は、実施の形態１と同じである。
【００８７】
図９における動画・画像配信装置において、重要度データ４０２は、危険を確認するために重要なデータであり、経度緯度の位置と状態を合わせて記してある。重要度データ４０２は、記憶領域（重要格納部）に格納されている。状態については、例えば降雨量の数値データであったり、霧の濃度の数値データであったり、事故が有る無しといった１または０で表現できる内容であったり、振動センサーが土砂崩れらしい振動を検知したかしないかといった１または０で表現できる内容である。
図９における動画・画像配信装置において、重要度判断部４０１は、ＷＷＷサーバから取得した４０２重要度データを元に、走行中の表示装置を設置した車両または歩行中の表示装置を持った人へ直ちに情報を知らせた方がよいかどうかを判断して、知らせる必要があればこれを知らせる。
【００８８】
次に動作について説明する。
実施の形態１で第一に説明した表示装置における動作は、実施の形態１において説明した動作と同じである。但し、表示装置の要求部１０７は、動画・画像配信装置へ自位置、目的地の経度緯度の文字データを送るときに、動画・画像配信装置の動画・画像選択部１０１ではなく、重要度判断部４０１へ送ることとする。
【００８９】
動画・画像配信装置における動作について説明する。
ＷＷＷサーバにおける動作は、実施の形態１と同じである。
しかしながら、ＷＷＷサーバにおいてセンサーの観測情報を提供することもあるので、これについて説明する。図４の左上のＷＷＷサーバには、ＷＷＷサーバソフトウェア１１３があり、このＷＷＷサーバソフトウェア上に観測情報が随時更新されて表示してある。
【００９０】
動画・画像配信装置における収集部１０２の動作は、実施の形態１の動作以外に、以下のような動作をすることとする。
収集部１０２は、ＷＷＷサーバから観測情報を取り出し、観測位置と観測内容を１対として重要度データ４０２に記録する。データの取り出しは、一定時間間隔で行うこととし、データの取り出し先であるＷＷＷサーバの接続情報であるＵＲＬは予め設定しておく。ＵＲＬは複数設定してあってもよい。
【００９１】
次に、重要度判断部４０１の動作を説明する。
重要度判断部４０１は、表示装置の要求部１０７から、要求元の車両または歩行者の自位置と、目的地の経度緯度を得る。重要度判断部４０１は、重要度データ４０２を読み込み、現在位置または目的地から半径１ｋｍ以内にある観測位置と観測内容を読み出す。１ｋｍという値は、他の値でもよく、動画・画像配信装置の管理者が予め設定する。
また、現在位置または目的地からの距離ではなく、現在位置と目的位置を結ぶ直線と並行な左右１ｋｍにある直線からなる矩形領域にある観測位置と観測内容を読み出してもよい。
【００９２】
１ｋｍという値は、他の値でもよく、動画・画像配信装置の管理者が予め設定する。
または、重要度判断部４０１において、実施の形態２における経路判断部２０１と同等の機能を用いていて、実施の形態２における経路データ２０２も合わせて読み込める場合もありえる。この場合、重要度判断部４０１は、実施の形態２における経路判断部２０１が出力するのと同等の現在位置から目的位置までの位置を繋ぐベクトル群を複数経路においてまずは、メモリ上におく。次に、これらの一つ一つのベクトルについて、ベクトルと並行な左右２００ｍにある直線からなる矩形領域にある観測位置と観測内容を読み出してもよい。２００ｍという値は、他の値でもよく、動画・画像配信装置の管理者が予め設定する。
重要度判断部４０１は、上記いずれかの部によって読み出した観測位置と観測内容のうち、観測内容を評価し、重要であると評価した観測位置と観測内容を１対にして、動画・画像選択部へ送る。
【００９３】
次に、評価の手法について述べる。観測内容毎に予め動画・画像配信装置の管理者が設置した基準を越えている場合は、重要であると判断する。突風やがけ崩れによる振動の検知の場合、有ると判断した場合は、重要であるとし、降雨量の場合は、例えば１時間に１００ｍｍといった特定の基準を満たしている場合は、重要であると判断する。また、判断基準は地域別に設定できることとする。地域の指定は、経度および緯度を指定した矩形領域で区切られる範囲を一つの地域とし、地域毎に降雨量等といった重要であるかどうかの基準値を別々に設定できることとする。
【００９４】
次に、動画・画像選択部について説明する。
動画・画像選択部１０１への入力は、表示装置の要求部１０７から重要度判断部４０１を介して送られた表示装置の現在位置と目的地、および重要度判断部４０１が重要と判断した観測位置と観測内容を１対となったデータであり、観測位置と観測内容を１対となったデータは、複数組あってもよい。
動画・画像選択部１０１は、表示装置の要求部１０７から重要度判断部４０１を介して送られた表示装置の現在位置と目的地のデータについては、実施の形態１と同じ処理をする。
【００９５】
動画・画像選択部１０１は、重要度判断部４０１が重要と判断した観測位置と観測内容を１対となったデータについては全て、観測位置と観測内容を１対にして地図合成表示部１０８へ送る。
更に、動画・画像選択部１０１は、受け取った観測位置からの２００ｍ以内にある映像または画像の接続先ＵＲＬと画像の撮影位置および撮影方向を実施の形態１と同じ手順によって位置／ＵＲＬデータベース１０４から取り出して表示装置の地図合成表示部１０８および動画・画像受信部１０６へ送る。２００ｍという値は、他の値でもよく、動画・画像配信装置の管理者が予め設定する。
【００９６】
次に、表示装置における動作を説明する。
動画・画像配信装置の動画・画像選択部１０１から、動画・画像受信部１０６および１０８地図合成表示部へ送られた画像の接続先ＵＲＬと画像の撮影位置および撮影方向については、実施の形態１と同じ処理を行う。
動画・画像配信装置の動画・画像選択部１０１から、地図合成表示部１０８へ送られた観測位置と観測内容を１対にしては以下のように処理する。
地図合成表示部１０８では、観測位置の経度緯度に対応した地図上に、観測内容を文字にて表示する。観測内容の表示は、＜観測情報突風＞＜観測降雨量＞といった観測情報を記録してあるＷＷＷサーバにおける記述を用いる。観測内容の表示例では、例えば、「観測降雨量＝２５０ｍｍ」、「観測情報突風＝有り」と表示する。
【００９７】
以上のように、重要度判断部４０１が、収集部１０２が定期的に取り出した観測情報から、集中豪雨やがけ崩れといった危険を起因として発生した可能性の高い観測情報を取得し、この観測情報を表示装置の地図上に表示し、更にこの危険を起因として発生した可能性の高い観測情報の得られた位置付近の動画または画像および、この現場を通る経路上の動画または画像を表示装置で表示する。
これにより、移動する車両または歩行者は、自分が移動している現在位置や、移動目的地またはその経路における危険または危険と推測できる気象の変化や振動といった重要な情報を知りうることができる。
【００９８】
また、動画・画像配信装置の管理者が、現在位置、目的地、その経路上にある動画や画像を選択するための設定値（例えば現在位置から１００ｍ以内といった設定値）を小さい値で設定し、実際に車両または歩行者が通行する範囲の動画または画像を配信するように設定している場合がある。このような場合でも、動画・画像配信装置の管理者が、表示装置の自位置または目的地から１ｋｍ以内の観測位置に対して、重要かどうかを判断するように設定することができる。このような場合、自位置から目的地へ移動する経路上の景観や道路の画像や動画を見ることができるだけではなく、
危険が発生したときに、目的地や経路上はもとより、更に広い範囲で危険である状況や危険な状況の付近の景観や道路の画像または動画を見ることができる。
【００９９】
以上のように、この実施の形態のサーバ側装置は、配信する動画または画像の重要度を判断する重要度判断部４０１を備えることを特徴とする。
【０１００】
実施の形態５．
この実施の形態では、実施の形態１〜実施の形態４の配信装置・表示装置の利用について説明する。従来のカーナビゲーションシステムまたは歩行者用ナビゲーションシステムでは、車両に設置した装置（本特許における表示装置に相当）にＤＶＤ等の記憶媒体を取り付けることにより、この中に位置に関連した文字または画像といった情報を蓄積していて、走行する車両の位置や目的地に応じてこれらの情報を表示していた。また、カーナビゲーション装置にインターネット通信機能がついているものもあるが、この場合車両からインターネットに接続し、上記ＤＶＤ等の記憶媒体に相当するデータベースに接続するものである。ＤＶＤ等の記録媒体に蓄積したデータを利用する場合でも、インターネットを介してデータベースに接続する場合でも、どちらもリアルタイムに提供される動画や画像を利用することはできなかった。
【０１０１】
この発明の好適な実施の形態における表示装置では、ＷＷＷサーバを介して公開される複数の画像または動画の提供資源を、リアルタイムにかつ必要な位置の動画または画像だけを取り出して見ることができる。
【０１０２】
また、ＷＷＷサーバに位置と動画を合わせて公開するようなサーバを固定位置または移動体へ設置する設備として構築して提供する事業を行い、動画の画面の中に常に広告のための文字を入れ、広告主から収益を得ることができる。但し、この場合、実施の形態１の内容に合わせて、各ＷＷＷサーバの撮影画面中に広告文字を合成する機能が必要である。これは市販のスーパーインポーズ機能のあるビデオ編集装置等を用いて実現できる。
【０１０３】
動画・画像配信装置を設置して自由に利用させる事業を行い、各表示装置へ撮影位置を送るときに、撮影位置と合わせて広告の文字情報を送り、表示装置における地図上の撮影位置の矢印マークの横に広告の文字情報を表示することにより、広告主から広告を配付した数に応じた広告量を得ることもできるようになる。但し、この場合、実施の形態１の内容に合わせて、動画・画像配信装置の管理者が、動画・画像選択部に対して広告の文字データを読み込ませ、動画・画像選択部がこれを各表示装置の１０８地図合成表示部へ送ることと、各表示装置の１０８地図合成表示部において、広告のデータが送られたときに、このデータを地図上の撮影位置の横に合わせて表示することが必要である。
【０１０４】
下記は一例であり、これ以外でも、利用の可能性がある。
【０１０５】
【発明の効果】
この発明の好適な実施の形態の配信装置、配信方法、情報配信・表示方式によれば、現在（リアルタイム）の景観や道路状況等を入手し、表示装置へ配信することができる。
【０１０６】
また、通信を用いて、現在の画像情報を入手するため、特別な管理体制を整えることなく、現在の画像情報を提供することが可能となる。
【０１０７】
また、配信装置の経路判断部によって、現在位置と目的地との経路情報地点の画像情報を提供することができる。また、利用者は、配信装置に対応する表示装置によって、現在位置と目的地を指定することによって、予測される経路の画像情報を入手することができる。
【０１０８】
配信装置の自位置方向合成部（針路合成部）によって、表示装置が移動している場合に、進行方向を示すことができる。また、利用者は、配信装置に対応する表示装置によって、表示される画像情報の相対的な方向を容易に知ることができる。
【０１０９】
配信装置の重要度判断部によって、表示する情報の重要度の重みづけができ、利用者に必要な情報を優先順位をつけて情報を提供することができる。また、利用者は、配信装置に対応する表示装置によって、災害情報等、重要な、あるいは、緊急度の高い情報を優先的に入手することができる。
【０１１０】
この発明の好適な実施の形態の表示装置、表示方法、情報配信・表示方式によれば、現在（リアルタイム）の景観や道路状況等を配信装置から受信し、表示することができる。従って、利用者は、現在の状況に対応した動作を行うことが可能となる。
【０１１１】
また、利用者は、現在位置や目的地を指定することによって、現在の景観や道路状況を入手できるとともに、予測された経路の画像情報を見ることができる。
【図面の簡単な説明】
【図１】  実施の形態１の配信装置と表示装置との一例構成を示すブロック図。
【図２】  実施の形態１の表示装置の画面例を示す図。
【図３】  図２の表示例に対応して画面に表示する画像の一例を示した図。
【図４】  実施の形態２の配信装置と表示装置との一例構成を示すブロック図。
【図５】  実施の形態２の表示装置の画面例を示す図。
【図６】  図５の表示例に対応して画面に表示する画像の一例を示した図。
【図７】  実施の形態３の配信装置と表示装置との一例構成を示すブロック図。
【図８】  実施の形態３の自位置方向合成部を説明する図。
【図９】  実施の形態４の配信装置と表示装置との一例構成を示すブロック図。
【符号の説明】
１０Ａ，１０Ｂ，１０Ｃ  ＷＷＷサーバ、２０  動画・画像配信装置、３０  表示装置、１０１  画像情報を選択する情報選択部の一例であり、表示装置の位置と目的地に応じた画像または動画を見るためのＵＲＬ情報を取得する動画・画像選択部、１０２  定期的にＷＷＷサーバから、動画または画像を撮影位置撮影方向と共に取得またはその接続先ＵＲＬを取得する収集部、１０３  情報送信部の一例であり、」ＵＲＬを指定することにより接続し、動画や画像を配信することができる動画・画像送信部、１０４  情報格納部の一例であり、撮影した画像または動画の撮影位置、撮影方向、および、これを見るために他のコンピュータへ接続するために必要なＵＲＬを対にして記録してある位置／ＵＲＬデータベース、１０５  動画、または画像のデータ、１０６  ＵＲＬを指定することにより他のコンピュータから動画や画像をダウンロードしながらリアルタイムで見ることができる動画・画像受信部、１０７  動画・画像配信部へ、表示装置の位置や目的地を画像要求情報として伝える要求部、１０８  表示装置の現在位置近くの地図を表示し、動画・画像配信装置から送られてくる動画または画像を撮影位置と合わせて地図上に表示する地図合成表示部、１０９  地図のデータ、１１０  衛星からの電波を受信することにより、自位置の経度緯度を取得するＧＰＳ装置。また、地磁気からその装置自身の向いている方位を取得する方位センサの機能を合わせ備えていることも想定している、１１１  ＧＰＳが取得した位置情報、方位情報を経度緯度や角度の文字データに変換する位置取得部、１１２  カメラ、１１３  情報を蓄積しておくことができ、外部のコンピュータからＵＲＬという接続先の指定を行うことにより情報を取り出すことができるＷＷＷサーバソフトウェア、１１４  ＷＷＷサーバを介して開示されている動画・画像データおよびそれらの撮影位置情報、２０１  表示装置の現在位置、目的地から、その間の経路を求める経路判断部、２０２  道路の接続関係を示す経路データ、３０１  画像情報へ針路を合成する針路合成部の一例であり、客観的に撮影された交差点等の景観画像に、対して、表示装置が進んで視界に入るであろう方向を合成して表示する自位置方向合成部、４０１  重要度データの中から重要なデータを選別する重要度判断部、４０２  ＷＷＷサーバが公開する観測情報を観測位置と共にして蓄積した重要度データ。
【図１】
0004004798.tif 000002
【図２】
0004004798.tif 000003
【図３】
0004004798.tif 000004
【図４】
0004004798.tif 000005
【図５】
0004004798.tif 000006
【図６】
0004004798.tif 000007
【図７】
0004004798.tif 000008
【図８】
0004004798.tif 000009
【図９】
0004004798.tif 000010