(57)【要約】【課題】ある地点における画像や地図が異なる場合に、撮影された画像を地図上に時系列で連続的に表示する。【解決手段】本発明は、時刻情報と位置情報が付与された画像データを画像データ記憶手段に格納し、ユーザから指定された指定時刻情報と指定位置情報を含む表示要求を取得すると、該指定時刻情報と該指定位置情報に基づいて、画像データ記憶手段と地図データ記憶手段から画像データと地図データを取得し、画像データを地図データに重畳させた画像を表示装置に表示する。また、ユーザが画像内に表示されたスライドバーを操作すると、過去の地図データも格納した地図データ記憶手段と画像データ記憶手段を検索し、画像データと地図データが重畳された画像を時間軸に沿って連続して表示する。【選択図】図１
2010152549.tif 000002
【特許請求の範囲】
【請求項１】
撮影された画像データ、または、読み込まれた画像データ、または、テキストデータのいずれかのコンテンツデータと、地図データとを重畳させて表示する映像表示制御方法であって、
データ格納手段が、時刻情報と位置情報が付与されたコンテンツデータを取得して、コンテンツデータ記憶手段に格納するコンテンツツデータ蓄積ステップと、
検索手段が、ユーザから指定された指定時刻情報と指定位置情報を含む表示要求を取得すると、該指定時刻情報と該指定位置情報に基づいて、前記コンテンツデータ記憶手段と地図データを格納した地図データ記憶手段からコンテンツデータと地図データを取得する検索ステップと、
表示制御手段が、前記検索ステップで取得した前記コンテンツデータを前記地図データに重畳させた画像を表示装置に表示させる表示制御ステップと、
を行うことを特徴とする映像表示制御方法。
【請求項２】
前記表示制御ステップにおいて、
前記コンテンツデータを前記地図データに重畳させた画像内に時刻情報を連続して指定可能なスライドバーを表示し、
前記検索ステップにおいて、
ユーザが前記スライドバーを操作することにより指定された時系列に沿った指定時刻情報及び前記指定位置情報に基づいて、過去の地図データを格納した前記地図データ記憶手段と前記コンテンツデータ記憶手段を時系列的に検索し、時間軸沿ったコンテンツデータと地図データを取得し、
前記表示制御ステップにおいて、
検索された前記コンテンツデータを前記地図データに重畳させて連続して表示させる
請求項１記載の映像表示制御方法。
【請求項３】
前記検索ステップにおいて、
前記時刻情報に基づいて前記コンテンツデータ記憶手段及び前記地図データ記憶手段を検索した際に、時刻が一致しない場合には、該時刻情報に最も近い時刻データを持つコンテンツデータ及び地図データを抽出する
請求項１また２記載の映像表示制御方法。
【請求項４】
撮影された画像データ、または、読み込まれた画像データ、または、テキストデータのいずれかのコンテンツデータと、地図データとを重畳させて表示する映像表示制御装置であって、
地図データを格納した地図データ記憶手段と、
時刻情報と位置情報が付与されたコンテンツツデータを取得して、コンテンツツデータ記憶手段に格納するコンテンツツデータ格納手段と、
ユーザから指定された指定時刻情報と指定位置情報を含む表示要求を取得すると、該指定時刻情報と該指定位置情報に基づいて、前記コンテンツツデータ記憶手段と前記地図データ記憶手段からコンテンツツデータと地図データを取得する検索手段と、
前記検索手段で取得した前記コンテンツツデータを前記地図データに重畳させた画像を表示装置に表示させる表示制御手段と、
を有することを特徴とする映像表示制御装置。
【請求項５】
前記地図データ記憶手段は、
過去から最新までの地図データを格納し、
前記表示制御手段は、
前記コンテンツツデータを前記地図データに重畳させた画像内に時刻情報を連続して指定可能なスライドバーを表示する手段と、
前記検索手段で検索されたコンテンツツデータを地図データに重畳させて時系列に連続して表示させる手段と、
を含み、
前記検索手段は、
ユーザが前記スライドバーを操作することにより指定された時系列に沿った指定時刻情報及び前記指定位置情報に基づいて、前記地図データ記憶手段と前記コンテンツツデータ記憶手段を時系列的に検索し、時間軸沿ったコンテンツツデータと地図データを取得し、前記表示制御手段に渡す手段を含む
請求項４記載の映像表示制御装置。
【請求項６】
前記検索手段は、
前記時刻情報に基づいて前記コンテンツツデータ記憶手段及び前記地図データ記憶手段を検索した際に、時刻が一致しない場合には、該時刻情報に最も近い時刻データを持つコンテンツツデータ及び地図データを抽出する手段を含む
請求項４また５記載の映像表示制御装置。
【請求項７】
請求項４乃至６のいずれかに記載の映像表示制御装置を構成する各手段としてコンピュータを機能させるための映像表示制御プログラム。
【請求項８】
請求項７記載の映像表示制御プログラムを格納したことを特徴とするコンピュータ読取可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像表示制御方法及び装置及びプログラム及びコンピュータ読取可能な記録媒体に係り、特に、携帯電話のカメラやディジタルカメラで撮影した画像やスキャナで取り込んだ画像に、時刻と位置情報のメタデータを付加し、地図上に時系列表示するための映像表示制御方法及び装置及びプログラム及びコンピュータ読取可能な記録媒体に関する。
【背景技術】
【０００２】
地図上に、通過した地点をマーキングし、各地点で撮影された画像を地図とは別に表示するシステムがある（例えば、特許文献1参照）。
【０００３】
また、位置情報と時刻を３次元空間に表示する技術がある。この技術は、画像データが撮影された撮影場所の領域データから経度、緯度、撮影時間からなる３次元の時空間を作成し、当該３次元の時空間内に、撮影位置情報および撮影時刻情報に基づいて、画像データのサムネイル画像を配置するものである（例えば、特許文献２参照）。
【特許文献１】特許第３８２４１３７号公報
【特許文献２】特開２００１−３４４５９１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、ある地点における画像や地図が時刻で異なる際、画像をその時刻における地図上に表示し、それらを時系列に繋げて連続的に重畳表示する方法がなかった。
【０００５】
本発明は、上記の点に鑑みなされたもので、撮影された画像を地図上に時系列で連続的に表示することが可能な映像表示制御方法及び装置及びプログラム及びコンピュータ読取可能な記録媒体を提供することを目的とする。
【課題を解決するための手段】
【０００６】
図１は、本発明の原理を説明するための図である。
【０００７】
本発明（請求項１）は、撮影された画像データ、または、読み込まれた画像データ、または、テキストデータのいずれかのコンテンツデータと、地図データとを重畳させて表示する映像表示制御方法であって、
コンテンツツデータ格納手段が、時刻情報と位置情報が付与されたコンテンツツデータを取得して、コンテンツツデータ記憶手段に格納するコンテンツツデータ蓄積ステップ（ステップ１）と、
検索手段が、ユーザから指定された指定時刻情報と指定位置情報を含む表示要求を取得する（ステップ２）と、該指定時刻情報と該指定位置情報に基づいて、コンテンツツデータ記憶手段と地図データを格納した地図データ記憶手段からコンテンツツデータと地図データを取得する（ステップ３）検索ステップと、
表示制御手段が、検索ステップで取得したコンテンツツデータを地図データに重畳させた画像を表示装置に表示させる表示制御ステップ（ステップ４）と、を行う。
【０００８】
また、本発明（請求項２）において、表示制御ステップでは、コンテンツツデータを地図データに重畳させた画像内に時刻情報を連続して指定可能なスライドバーを表示し、
検索ステップでは、ユーザがスライドバーを操作することにより指定された時系列に沿った指定時刻情報及び指定位置情報に基づいて、過去の地図データを格納した地図データ記憶手段とコンテンツツデータ記憶手段を時系列的に検索し、時間軸沿ったコンテンツツデータと地図データを取得し、
表示制御ステップでは、検索されたコンテンツツデータを地図データに重畳させて連続して表示させる。
【０００９】
また、本発明（請求項３）は、検索ステップでは、時刻情報に基づいてコンテンツツデータ記憶手段及び地図データ記憶手段を検索した際に、時刻が一致しない場合には、該時刻情報に最も近い時刻データを持つコンテンツツデータ及び地図データを抽出する。
【００１０】
図２は、本発明の原理構成図である。
【００１１】
本発明（請求項４）は、撮影された画像データ、または、読み込まれた画像データ、または、テキストデータのいずれかのコンテンツデータと、地図データを重畳させて表示する映像表示制御装置であって、
地図データを格納した地図データ記憶手段２３０と、
時刻情報と位置情報が付与されたコンテンツツデータを取得して、コンテンツツデータ記憶手段２２０に格納するコンテンツツデータ格納手段２１０と、
ユーザから指定された指定時刻情報と指定位置情報を含む表示要求を取得すると、該指定時刻情報と該指定位置情報に基づいて、コンテンツツデータ記憶手段２２０と地図データ記憶手段２３０からコンテンツツデータと地図データを取得する検索手段２４０と、
検索手段２４０で取得したコンテンツツデータを地図データに重畳させた画像を表示装置に表示させる表示制御手段２５０と、を有する。
【００１２】
また、本発明（請求項５）において、地図データ記憶手段２３０は、
過去から最新までの地図データを格納し、
表示制御手段２５０は、
コンテンツツデータを地図データに重畳させた画像内に時刻情報を連続して指定可能なスライドバーを表示する手段と、
検索手段２４０で検索されたコンテンツツデータを地図データに重畳させて時系列に連続して表示させる手段と、
を含み、
検索手段２４０は、
ユーザがスライドバーを操作することにより指定された時系列に沿った指定時刻情報及び指定位置情報に基づいて、地図データ記憶手段とコンテンツツデータ記憶手段を時系列的に検索し、時間軸沿ったコンテンツツデータと地図データを取得し、表示制御手段２５０に渡す手段を含む。
【００１３】
また、本発明（請求項６）において、検索手段２４０は、
時刻情報に基づいてコンテンツツデータ記憶手段２２０及び地図データ記憶手段２３０を検索した際に、時刻が一致しない場合には、該時刻情報に最も近い時刻データを持つコンテンツツデータ及び地図データを抽出する手段を含む。
【００１４】
本発明（請求項７）は、請求項４乃至６のいずれかに記載の映像表示制御装置を構成する各手段としてコンピュータを機能させるための映像表示制御プログラムである。
【００１５】
本発明（請求項８）は、上記請求項７記載の映像表示制御プログラムを格納したコンピュータ読取可能な記録媒体である。
【発明の効果】
【００１６】
上記のように、本発明によれば、全ての時刻に合わせて、画像データ（コンテンツデータ）と地図データをマッピングすることにより、地図や画像を連続的に変化させることができ、動画のように表示することができる。
【００１７】
また、ユーザが過去の画像を追加登録し、システム側が過去の地図を装備することにより、さらに滑らかな動画を得ることができる。
【発明を実施するための最良の形態】
【００１８】
以下に、図面と共に本発明の実施の形態を説明する。
【００１９】
図３は、本発明の一実施の形態におけるシステム構成図である。
【００２０】
同図に示すシステムは、カメラ・ＧＰＳ機能付き携帯端末１００、ディジタルカメラ１０、スキャナ２０のいずれか、または、全て、メタデータ付与装置３０、映像表示制御装置２００、表示装置４０、入力装置５０から構成される。
【００２１】
カメラ・ＧＰＳ機能付き携帯端末１００は、カメラ機能により撮影した画像に、時刻と位置情報のメタデータを付与して映像表示制御装置２００にアップロードする。
【００２２】
ディジタルカメラ１０は、撮影した画像をメタデータ付与装置３０に出力し、メタデータ付与装置３０は、現時点の時刻と指定された位置情報を画像に付与して映像表示制御装置２００にアップロードする。
【００２３】
スキャナ２０は、スキャニングにより取り込んだ画像をメタデータ付与装置３０に出力し、メタデータ付与装置３０において現時点の時刻と指定された位置情報を画像に付与して映像表示制御装置２００にアップロードする。
【００２４】
なお、本実施の形態では、映像表示制御装置２００にアップロードするデータを画像データとしているが、この例に限定されることなく、ファイルから読み込まれた、または、入力装置５０から入力されたテキストデータを採用してもよい。
【００２５】
撮影映像表示装置２００は、アップロードされた時刻と位置情報が付与された画像データを取得して、データベースに格納し、携帯端末１００または、入力装置５０から指定された時刻及び位置情報から画像を検索して時系列に連続的に地図上に表示できるように編集し、携帯端末１００の表示画面または、表示装置４０に表示させる。
【００２６】
以下では、画像を入力及び、表示要求を行う装置として携帯端末１００を用いた例を説明するが、図３に示すディジタルカメラ１０、スキャナ２０のいずれから画像データを取得してもよい。
【００２７】
図４は、本発明の一実施の形態における携帯端末と映像表示制御装置からなるシステムを示す。
【００２８】
同図に示すシステムは、携帯端末１００と映像表示制御装置２００から構成され、これらはネットワークを介して接続されている。
【００２９】
携帯端末１００は、カメラ１１０、メタデータ付与部１２０、入力部１３０、通信部１４０、表示部１５０から構成され、ある時刻、ある地点においてカメラ１１０で撮影された画像に、メタデータ付与部１２０においてＧＰＳ機能部１６０から位置情報、内部時計１７０から時刻を取得して付与して、通信部１４０を介して撮影映像表示装置２００に送信される。また、携帯端末１００では、ユーザが入力部１３０からある範囲における時刻を指定すると、通信部１４０を介して映像表示制御装置２００に送られ、映像表示制御部２００で検索された画像を取得して表示部１５０に表示される。表示部１５０に表示される画面には、時刻のスライドバーを付加することで、ユーザが自由に時刻を変化させることができ、それに伴って映像表示制御装置２００はある地点における画像や地図を時系列に連続的に表示させる。
【００３０】
映像表示制御装置２００は、送受信部２１０、画像データ記憶部２２０、地図データ記憶部２３０、検索部２４０、表示制御部２５０から構成され、携帯端末１００から送信されたメタデータが付与された画像データを受信すると、画像データ記憶部２２０に蓄積する。また、当該映像表示制御装置２００に接続されたネットワークを介して、または、何らかの方法により取得した地図データを地図データ記憶部２３０に格納しておく。
【００３１】
画像データ記憶部２２０には、少なくとも画像ＩＤ毎に、時刻、位置座標（緯度、経度）、画像データが格納される。なお、画像ＩＤは、携帯端末１００から画像データを受信した時点で画像データ毎に一意に識別可能なＩＤを自動的に付与するものとする。また、画像データは所定の閾値内で縮小・拡大が可能であるものとする。
【００３２】
地図データ記憶部２３０には、予め歴史地図ＤＢ等を読み込んで各年代の地図データが格納されている。なお、当該地図データは、階層（レイヤ）毎にベクトル形式で格納されているものとし、検索部２４０から時刻情報（年代）と位置情報（座標）に基づいて検索される。
【００３３】
検索部２４０は、送受信部２１０を介して携帯端末１００からある時刻を取得すると、画像データ記憶部２２０から当該時刻に該当する画像を検索する。指定された時刻に合致する画像がない場合は、指定された時刻に近い画像を取得する。指定された時刻と当該画像に対応する位置座標に基づいて地図データ記憶部２３０を検索し、合致した地図データを取得する。ユーザが表示部１３０に表示されているスライドバーをスライドさせると、検索部２４０は、スライドされた時刻に近い画像と地図を選択する。
【００３４】
表示制御部２５０は、検索部２４０で取得した地図データに画像データを重畳表示する。ユーザがスライドバーをスライドさせている場合は、検索部２４０より連続的に選択された画像と地図を重畳させ、それらを繋ぎ合わせる、または、モーフィング技術等を利用することにより時系列に連続的に表示する。
【００３５】
図５は、本発明の一実施の形態における動作を説明するための図である。
【００３６】
ステップ１０１）  ユーザがある地点において、ある時刻に携帯電話１００のカメラ１１０で画像を撮影する。
【００３７】
ステップ１０２）  メタデータ付与部１２０において、内部時計１７０から現時点の時刻を取得し、ＧＰＳ機能部１６０から位置情報を取得し、ステップ１０１で撮影された映像にこれらのメタデータを付与する。なお、ステップ１０１においてディジタルカメラ１０で撮影された場合は、メタデータ付与装置３０において時刻及び位置情報（緯度・経度）を撮影された画像データに付与する。また、スキャナ２０でスキャニングされた場合は、メタデータ付与装置３０においてスキャニングされた画像にメタデータを付与する。なお、メタデータ付与装置３０で地名や場所が入力された場合には、既存の地域や場所を座標点に変換する技術を用いて位置情報を取得するものとする。
【００３８】
ステップ１０３）  メタデータが付与されたデータを映像表示制御装置２００に送信する。
【００３９】
ステップ１０４）  映像表示制御装置２００は、送受信部２１０を介してメタデータが付与された画像データに画像ＩＤを付与し、て、画像データ記憶部２２０に格納する。
【００４０】
ステップ１０５）  ユーザが携帯端末１００または、入力装置５０を介して場所の範囲及び時刻ｔを指定する。
【００４１】
ステップ１０６）  指定されたある場所の範囲及び時刻ｔを表示要求として映像表示制御装置２００に送信する。
【００４２】
ステップ１０７）  映像表示制御装置２００の検索部２４０は、指定された場所の範囲を座標（緯度・経度）に変換し、当該座標と時刻ｔをキーとして画像データ記憶部２２０と地図データ記憶部２３０を検索し、画像データと地図データを抽出し、それらを重畳させる。このとき、画像データは地図データ上のある地点を指し示すような編集を行い、予め設定されたサイズに調整する。
【００４３】
ステップ１０８）  送受信部２１０は、画像データと地図データを重畳させたデータを携帯端末１００または、表示装置４０に送信する。
【００４４】
ステップ１０９）  携帯端末１００の表示部１５０または、表示装置４０は、受信したデータを表示する。
【００４５】
以下に具体例を用いて説明する。
【００４６】
図６は、本発明の一実施の形態におけるユーザ画面の構成例を示す。
【００４７】
同図は、上記のステップ１０９において、携帯端末１００の表示部１５０または、表示装置４０に表示された例である。同図上部に時刻を示すスライドバー３０１があり、地図データと指定されている時刻（同図では、２０００年）における画像データ３０２，３０３が重畳表示されている。なお、テキストデータが画像データ記憶部２２０に格納されている場合は、テキストデータと地図データが重畳表示される。
【００４８】
図６のスライドバー３０１において、１９００年を指定した際の画面構成例が図７である。同図では、表示される地図データと画像データが１９００年に近いデータになっている。なお、同図の地図データは、地図データ記憶部２３０に古い歴史地図を予め格納しておき、ユーザがスライドバー３０１を１９００年に合わせた状況において、検索部２４０が検索した結果である。
【００４９】
図８には、スライドバー３０１を１９００年から２０００年にスライドさせた際の表示の変化を示している。１９００年から２０００年の間に、ｎ枚の画像データＩ１〜Ｉｎがあり、そのメタデータの時刻がｔ１〜ｔｎとする。検索部２３０は、時刻ｔにおける画像が、│ｔ−ｔｋ│が最も小さくなる時刻ｔｋを持つ画像Ｉｋを検索する。地図データも同様に時刻ｔjを持つ地図データＭｊを検索する。このように画像データを画像データ記憶部２２０か、地図データを地図データ記憶部２３０から抽出し、表示制御部２５０は、地図データに画像データを重畳された画像をスライドバー３０１の動きに合わせて表示する。また、連続的に画像を表示する場合は、画像データＩ１〜Ｉｎと地図データＭ１〜Ｍｍを時刻ｔの変化に合わせて細かく並べ表示する、または、画像データＩｋ〜画像データＩｋ＋１間と、地図データＭj〜地図データＭｊ＋１間にモーフィング技術を利用し、表示する。
【００５０】
上記のように、ユーザから指定された時刻と位置情報をキーとして画像データ、地図データを検索し、地図データ上に画像データを時系列で連続的に表示することが可能となる。
【００５１】
また、上記の映像表示制御装置の構成要素の動作をプログラムとして構築し、映像表示制御装置として利用されるコンピュータにインストールして、ＣＰＵに実行させる、または、ネットワークを介して流通させることが可能である。
【００５２】
また、構築されたプログラムをハードディスクや、フレキシブルディスク・ＣＤ−ＲＯＭ等の可搬記憶媒体に格納し、コンピュータにインストールする、または、配布することが可能である。
【００５３】
なお、本発明は、上記の実施の形態に限定されることなく、特許請求の範囲内において種々変更・応用が可能である。
【産業上の利用可能性】
【００５４】
本発明は、地図上に所望の画像データをマッピングする技術に適用可能であり、特に、ある場所について年代毎の変遷を可視化するための技術に適用可能である。
【図面の簡単な説明】
【００５５】
【図１】本発明の原理を説明するための図である。
【図２】本発明の原理構成図である。
【図３】本発明の一実施の形態におけるシステム構成図である。
【図４】本発明の一実施の形態における携帯端末と映像表示制御装置からなるシステム構成図である。
【図５】本発明の一実施の形態における動作を説明するための図である。
【図６】本発明の一実施の形態におけるユーザ画面の構成例である。
【図７】本発明の一実施の形態におけるスライドバーをスライドさせた場合の表示例である。
【図８】本発明の一実施の形態におけるスライドバーをスライドさせ時系列連続的に表示した例である。
【符号の説明】
【００５６】
１０  ディジタルカメラ
２０  スキャナ
３０  メタデータ付与装置
４０  表示装置
５０  入力装置
１００  カメラ・ＧＰＳ機能付き携帯電話
１１０  カメラ
１２０  メタデータ付与部
１３０  入力部
１４０  通信部
１５０  表示部
１６０  ＧＰＳ機能部
１７０  時計
２００  映像表示制御装置
２１０  コンテンツデータ格納手段、送受信部
２２０  コンテンツデータ記憶手段、画像データ記憶部
２３０  地図データ記憶手段、地図データ記憶部
２４０  検索手段、検索部
２５０  表示制御手段、表示制御部
【図１】
2010152549.tif 000003
【図２】
2010152549.tif 000004
【図３】
2010152549.tif 000005
【図４】
2010152549.tif 000006
【図５】
2010152549.tif 000007
【図６】
2010152549.tif 000008
【図７】
2010152549.tif 000009
【図８】
2010152549.tif 000010