(57)【要約】      （修正有）【課題】撮影時の状況を容易に理解できる指標表示装置、方法、プログラム及びシステムを提供する。【解決手段】指標表示装置は、表示部に表示した地図上に行動履歴データのＧＰＳデータに基づいてユーザーの移動経路１００１を描画し、移動経路上に静止画ファイル、動画ファイル、音声ファイルが記録された地点Ａ〜Ｎを表示する。また各地点Ａ〜Ｎの近傍に、そこで記録された画像等の撮影モードに対応するアイコン画像（指標）をそれらの記録時の情報として表示する。【選択図】図８
2018007235.tif 000002
【特許請求の範囲】
【請求項１】
画像の撮影に関する位置情報を取得する位置情報取得手段と、
画像の撮影に関する所定情報を取得する撮影情報取得手段と、
前記撮影情報取得手段によって取得された前記所定情報に基づいて指標画像を生成する生成手段と、
前記位置情報取得手段によって取得された位置情報により示される位置に前記生成手段によって生成された指標画像を表示する表示手段と
を備えることを特徴とする指標表示装置。
【請求項２】
前記画像を撮影した撮像装置を携行する者の、行動に関する情報を取得する行動情報取得手段を更に備え、
前記表示手段は更に、前記行動情報取得手段によって取得された前記行動に関する情報を前記所定情報と対応付けて表示する
ことを特徴とする請求項１に記載の指標表示装置。
【請求項３】
前記行動に関する情報は、前記携行する者の複数種の移動態様を含み、
前記表示手段は、前記行動に関する情報として前記複数種の移動態様を夫々識別可能に表示することを特徴とする請求項２に記載の指標表示装置。
【請求項４】
前記画像を撮影した撮像装置の外部環境に関する情報を取得する外部環境情報取得手段を更に備え、
前記表示手段は更に、前記外部環境情報取得手段によって取得された前記外部環境に関する情報を表示することを特徴とする請求項１乃至３の何れか１項に記載の指標表示装置。
【請求項５】
前記表示手段によって表示された前記所定情報に対する指示を検出する指示検出手段と、
前記指示検出手段によって指示が検出された前記所定情報に対応する画像を前記表示手段に表示させるよう制御する表示制御手段と
を更に備えることを特徴とする請求項１乃至３の何れか１項に記載の指標表示装置。
【請求項６】
前記表示手段に表示される画像と前記行動に関する情報とを対応付けるよう制御する第１の制御手段を更に備え、
前記表示制御手段は、前記表示手段に画像を表示する場合、前記第１の制御手段によって対応付けられた前記行動に関する情報に基づく表示態様で、当該画像を表示するよう制御することを特徴とする請求項５記載の指標表示装置。
【請求項７】
前記表示手段に表示される画像と外部環境に関する情報とを対応付けるよう制御する第２の制御手段を更に備え、
前記表示制御手段は、前記表示手段に画像を表示する場合、前記第２の制御手段によって対応付けられた前記外部環境に関する情報に基づく表示態様で、当該画像を表示するよう制御することを特徴とする請求項５又は６に記載の指標表示装置。
【請求項８】
前記表示制御手段は、表示対象なる画像に対し所定の加工若しくは他の画像を合成するよう制御することを特徴とする請求項６又は７に記載の指標表示装置。
【請求項９】
外部機器と通信する通信手段を更に備え、
前記画像、前記位置情報、前記所定情報の少なくとも一つは、前記通信手段により受信されたものであることを特徴とする請求項１乃至８の何れか１項に記載の指標表示装置。
【請求項１０】
前記所定情報とは、前記画像の撮影に使用された撮影モードであることを特徴とする請求項１乃至９のいずれか１項に記載の指標表示装置。
【請求項１１】
前記画像には、所定の条件を満たしたことを契機として撮影されたものが含まれることを特徴とする請求項１乃至１０のいずれか１項に記載の指標表示装置。
【請求項１２】
画像の撮影に関する位置情報を取得する位置情報取得ステップと、
画像の撮影に関する所定情報を取得する撮影情報取得ステップと、
前記撮影情報取得ステップにて取得された前記所定情報に基づいて指標画像を生成する生成ステップと、
前記位置情報取得ステップにて取得された位置情報により示される位置に前記生成ステップにて生成された指標画像を表示させる表示ステップと
を含むことを特徴とする指標表示方法。
【請求項１３】
コンピュータを、
画像の撮影に関する位置情報を取得する位置情報取得手段、
画像の撮影に関する所定情報を取得する撮影情報取得手段、
前記撮影情報取得手段によって取得された前記所定情報に基づいて指標画像を生成する生成手段、
前記位置情報取得手段によって取得された位置情報により示される位置に前記生成手段によって生成された指標画像を表示させる表示手段
として機能させることを特徴とするプログラム。
【請求項１４】
表示装置と、携行者の移動中における位置情報を逐次記録する位置情報記録装置と、当該携行者が携行する撮像装置と、を含む指標表示システムであって、
前記表示装置は、
前記位置情報を前記位置情報記録装置から取得する位置情報取得手段と、
前記撮像装置に記録された画像の撮影に関する所定情報を前記撮像装置から取得する撮影情報取得手段と、
前記撮影情報取得手段によって取得された前記所定情報に基づいて指標画像を生成する生成手段と、
前記位置情報取得手段によって取得された位置情報により示される位置に前記生成手段によって生成された指標画像を表示するよう制御する表示制御手段と
を備えたことを特徴とする指標表示システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像された際の状況を把握するための技術に関するものである。
【背景技術】
【０００２】
従来より、ＧＰＳ（Global Positioning System）等を活用することで撮影時における自己の位置情報を取得し、その撮影画像を再生させる際、撮影時の位置情報を含む周辺地図を表示させ、その地図上の撮影地点に撮影したことを表示する技術が考えられている（例えば下記特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−２７９２６６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、この技術では、ユーザーに対して地図上に過去の移動経路と、撮影地点とを同時に示すことがことはできるものの、各々の撮影地点における撮影時の状況までは教えることができないと言う問題があった。
【０００５】
本願発明は上記の問題点に鑑みてなされたものであり、撮影地点での撮影時の状況を容易に理解できるようにすることを目的とする。
【課題を解決するための手段】
【０００６】
前記課題を解決するため、本発明の指標表示装置においては、画像の撮影に関する位置情報を取得する位置情報取得手段と、画像の撮影に関する所定情報を取得する撮影情報取得手段と、前記撮影情報取得手段によって取得された前記所定情報に基づいて指標画像を生成する生成手段と、前記位置情報取得手段によって取得された位置情報により示される位置に前記生成手段によって生成された指標画像を表示する表示手段とを備えることを特徴とする。
【０００７】
また、本発明の指標表示方法においては、画像の撮影に関する位置情報を取得する位置情報取得ステップと、画像の撮影に関する所定情報を取得する撮影情報取得ステップと、前記撮影情報取得ステップにて取得された前記所定情報に基づいて指標画像を生成する生成ステップと、前記位置情報取得ステップにて取得された位置情報により示される位置に前記生成ステップにて生成された指標画像を表示させる表示ステップとを含むことを特徴とする。
【０００８】
また、本発明のプログラムにおいては、コンピュータを、画像の撮影に関する位置情報を取得する位置情報取得手段、画像の撮影に関する所定情報を取得する撮影情報取得手段、前記撮影情報取得手段によって取得された前記所定情報に基づいて指標画像を生成する生成手段、前記位置情報取得手段によって取得された位置情報により示される位置に前記生成手段によって生成された指標画像を表示させる表示手段として機能させることを特徴とする。
【０００９】
また、本発明の指標表示システムにおいては、表示装置と、携行者の移動中における位置情報を逐次記録する位置情報記録装置と、当該携行者が携行する撮像装置と、を含む指標表示システムであって、前記表示装置は、前記位置情報を前記位置情報記録装置から取得する位置情報取得手段と、前記撮像装置に記録された画像の撮影に関する所定情報を前記撮像装置から取得する撮影情報取得手段と、前記撮影情報取得手段によって取得された前記所定情報に基づいて指標画像を生成する生成手段と、前記位置情報取得手段によって取得された位置情報により示される位置に前記生成手段によって生成された指標画像を表示するよう制御する表示制御手段とを備えたことを特徴とする。
【発明の効果】
【００１０】
本発明によれば、過去の移動途中における撮影地点での撮影時の状況を容易に理解することが可能となる。
【図面の簡単な説明】
【００１１】
【図１】本発明の第１の実施形態に係る指標表示装置を含む指標表示システムの構成を示すブロック図である。
【図２】ユーザー移動中のセンサー装置とカメラ装置の動作を示すフローチャートで    ある。
【図３】センサー装置のトリガー出力条件とカメラ装置の撮影モードの関係を示す説    明図である。
【図４】画像処理プログラムが起動されたときの指標表示装置の動作と、それに対応    するカメラ装置の動作を示すフローチャートである。
【図５】図４に続くフローチャートである。
【図６】図４に対応するセンサー装置の動作を示すフローチャートである。
【図７】画像処理プログラムの起動中に記憶部に記憶されるログテーブルを説明する概念図である。
【図８】指標表示装置におけるユーザーの行動履歴と画像等の記録情報の表示形態を    示す図である。
【図９】第２の実施の形態における加工処理条件テーブルの内容を示す図である。
【図１０】第２の実施の形態における、記憶部に記憶されるログテーブルを説明する概念図である。
【図１１】第２の実施の形態における画像処理プログラムが起動されたときの指標表示装置の動作を示すフローチャートである。
【図１２】図１１に続くフローチャートの一部である。
【図１３】第２の実施の形態における指標表示装置における表紙データの表示形態を    示す図である。
【図１４】第２の実施の形態における指標表示装置におけるユーザーの行動履歴と画像等の記録情報の表示形態を示す図である。
【発明を実施するための形態】
【００１２】
（第１の実施の形態）
以下、本発明の第１の実施の形態ついて説明する。図１は、本発明の第１の実施形態に係る指標表示装置１００を含む指標表示システムの構成を示すブロック図である。この指標表示システムは、相互に通信可能な指標表示装置１００とカメラ装置２００とセンサー装置３００とから構成されている。
【００１３】
まず、カメラ装置２００について説明する。カメラ装置２００は、ユーザーが身体等に装着した状態で静止画撮影や動画撮影、及び音声記録が可能な小型のデジタルカメラであって、装置全体の動作を制御する制御部２０１と、撮像部２０３、記録部２０４、音声入力部２０５、無線通信部２０６、入力部２０７を備えている。
【００１４】
制御部２０１は、ＣＰＵ（Central Processing Unit）、及びその周辺回路等や、ＲＡＭ（Random Access memory）等の作業用メモリ、プログラムメモリ等から構成され、ＣＰＵがプログラムメモリに記憶されているプログラムに従い動作することによりカメラ装置２００の各部を制御する。なお、制御部２０１には、撮影日時を取得するためのカレンダー機能を有する計時手段が含まれる。
【００１５】
撮像部２０３は、図示しない撮影光学系を介して被写体を撮像するＣＭＯＳ（Complementary Meta1 0xide Semiconductor）やＣＣＤ（Charge Coupled Device）等の撮像素子と、その駆動回路と、撮像素子から出力されるアナログ信号をデジタル形式の画像データに変換する信号処理回路等から構成され、この画像データを制御部２０１へ供給する。なお、カメラ装置２００の撮影光学系は、周囲３６０゜の全天周が撮影可能な１又は複数の広角レンズにより構成される。
【００１６】
制御部２０１へ供給された画像データは、制御部２０１において各種の画像処理を施された後、圧縮され、撮影日時やサムネイル画像等の種々の付加情報を付加されて所定のフォーマットの静止画ファイルや動画ファイルとして記録部２０４に記録される。記録部２０４は、例えばカメラ装置２００に内蔵されたフラッシュメモリ等の書き換え可能な不揮発性メモリや、装置本体に着脱自在な各種のメモリカードにより構成される。
【００１７】
ここで、カメラ装置２００には、静止画撮影モードの下位のモードとして、人物撮影、風景撮影、連続して所定回数の撮影を行う連続撮影、周囲３６０゜の範囲を撮影対象とする全天周撮影、等を含む複数種の撮影モードが用意されている。また、動画撮影モードには、通常の動画撮影と、短時間（例えば１０秒間）のみ撮影、等を含む複数種の動画撮影モードが用意されている。そして、画像データが静止画ファイルや動画ファイルとして記録部２０４に記憶される際、これらのファイルには画像データと共に、撮影時に使用された撮影モードや撮影日時等の他の付加情報が付加され記憶される。
【００１８】
音声入力部２０５は、装置本体に内蔵されたマイクと、アンプ、Ａ／Ｄ変換器から構成され、マイクに入力した周囲の音声等を音声データに変換し、制御部２０１へ供給する。制御部２０１へ供給された音声データは制御部２０１において符号化された後、動画撮影時には動画データに付加されて動画ファイルとして記録される。
【００１９】
カメラ装置２００には、動作モードとして音声のみを記録する録音モードが用意されており、録音モードにおいては、音声入力部２０５において符号化された音声データが録音日時等の付加情報を付加され単独の音声ファイルとして記録部２０４に記録される。なお、動画撮影時における符号化された音声データの記録方式は、動画ファイルとは別に当該動画ファイルと関係付けて記録する方式であっても構わない。
【００２０】
無線通信部２０６は、指標表示装置１００やセンサー装置３００との間で無線通信を行う。特に無線通信部２０６は、記録部２０４に記録されている静止画ファイル、動画ファイル、及び、音声ファイルを必要に応じて指標表示装置１００へ送信する。無線通信部２０６に採用される無線通信技術は、例えば国際標準規格ＩＥＥＥ  ８０２．１１シリーズを適用するＷｉ−Ｆｉ（登録商標）、或いはＢｌｕｅｔｏｏｔｈ（登録商標）（Ｂｌｕｅｔｏｏｔｈ  Ｌｏｗ  Ｅｎｅｒｇｙ含）に準拠した技術である。なお、無線通信部２０６は、指標表示装置１００及びセンサー装置３００との間の通信が可能であれば、有線、無線に限らず他の通信技術を採用した通信手段に変更することができる。
【００２１】
入力部２０７は、撮影モードの設定スイッチやシャッターボタン等からなり、ユーザーによる操作情報を制御部１０１へ供給する。
【００２２】
次に、センサー装置３００について説明する。センサー装置３００は、ユーザーの肩や腕、腰等の身体に装着された状態で使用され、ユーザーの行動履歴に関する後述する各種データを逐次取得して、それらを記録する所謂データロガーである。
【００２３】
図に示したようにセンサー装置３００は、装置全体の動作を制御する制御部３０１と、位置情報取得部３０２、モーションセンサー部３０３、外部環境取得部３０４、行動履歴記憶部３０５、無線通信部３０６の各部を備えている。
【００２４】
制御部３０１は、ＣＰＵ、及びその周辺回路等や、ＲＡＭ等の作業用メモリ、プログラムメモリ等から構成され、ＣＰＵがプログラムメモリに記憶されているプログラムに従い動作することによりセンサー装置３００の各部を制御する。
【００２５】
位置情報取得部３０２は、公知のＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  Ｓｙｓｔｅｍ）を利用して現在位置を計測し、計測結果つまり緯度及び経度、高度からなるＧＰＳデータを制御部３０１へ供給する。
【００２６】
モーションセンサー部３０３は、３軸方向の加速度を検出する加速度センサー、３軸方向の角速度を検出するジャイロセンサー及びその検出信号を増幅するアンプやＡ／Ｄ変換器から構成され、センサー装置３００における３軸方向の加速度情報、角速度情報を制御部３０１へ供給する。
【００２７】
外部環境取得部３０４は、センサー装置３００の周囲の温度、気圧、湿度をそれぞれ検出する温度センサー、気圧センサー、湿度センサーと、各センサーの検出信号を増幅するアンプやＡ／Ｄ変換器から構成され、検出した温度、気圧、湿度の各データ（以下、外部環境データという）を制御部３０１へ供給する。
【００２８】
行動履歴記憶部３０５は、センサー装置３００に内蔵されたフラッシュメモリ等の書き換え可能な不揮発性メモリにより構成され、制御部３０１へ供給されたＧＰＳデータや外部環境データからなる行動履歴データが記憶される。なお、行動履歴データには、モーションセンサー部３０３によって取得される加速度情報、角速度情報に基づいて制御部３０１によりカウントされるユーザーの歩数データも含まれる。
【００２９】
無線通信部３０６は、指標表示装置１００やカメラ装置２００との間で無線通信を行う。特に無線通信部３０６は、行動履歴記憶部３０５に記憶されている行動履歴データ（ＧＰＳデータや外部環境データ）を指標表示装置１００へ送信する。無線通信部３０６に採用される無線通信技術も、例えば国際標準規格ＩＥＥＥ  ８０２．１１シリーズを適用するＷｉ−Ｆｉ（登録商標）、或いはＢｌｕｅｔｏｏｔｈ  （登録商標）（Ｂｌｕｅｔｏｏｔｈ  Ｌｏｗ  Ｅｎｅｒｇｙ含）（登録商標）を準拠した技術である。また、無線通信部３０６についても、指標表示装置１００及びカメラ装置２００との間の通信が可能であれば、有線、無線に限らず他の通信技術を採用した通信手段に変更することができる。
【００３０】
次に、指標表示装置１００について説明する。指標表示装置１００は、センサー装置３００から取得したＧＰＳデータに基づいて、ユーザーの移動経路が重畳された地図やカメラ装置２００から取得した静止画ファイルに基づく静止画の表示、及び、動画ファイルに基づく動画を再生表示する機能を備えた装置である。
【００３１】
図に示したように指標表示装置１００は、装置の各部を制御する制御部１０１と、第１の無線通信部１０２、第２の無線通信部１０３、記憶部１０４、音声出力部１０５、表示部１０６、入力部１０７の各部を備えている。
【００３２】
制御部１０１は、ＣＰＵ、及びその周辺回路等や、ＲＡＭ等の作業用メモリ等から構成され、ＣＰＵが記憶部１０４に記憶されているプログラムに従い動作することにより指標表示装置１００の各部を制御する。
【００３３】
第１の無線通信部１０２は、カメラ装置２００やセンサー装置３００との間で無線通信を行う。特に第１の無線通信部１０２は、センサー装置３００から前述した行動履歴データを、カメラ装置２００から前述した静止画ファイル、動画ファイル、または音声ファイルを夫々受信する。第１の無線通信部１０２に採用される無線通信技術も、例えば国際標準規格ＩＥＥＥ  ８０２．１１シリーズを適用するＷi−Ｆi（登録商標）、或いはＢｌｕｅｔｏｏｔｈ  （登録商標）（Ｂｌｕｅｔｏｏｔｈ  Ｌｏｗ  Ｅｎｅｒｇｙ含）を準拠した技術である。また、第１の無線通信部１０２についても、カメラ装置２００やセンサー装置３００との間の通信が可能であれば、有線、無線に限らず他の通信技術を採用した通信手段に変更することができる。
【００３４】
第２の無線通信部１０３は、地図データベース４０１を有する外部の地図サーバー４００との間でＴＣＰ／ＩＰ（Transmission Control Protocol/Internet Protocol）に基づく通信を行い、インターネット５００を介して地図データベース４０１に記憶されている所定の地域の地図データを受信する。なお、第２の無線通信部１０３におけるインターネット５００への接続は、例えば商用の通信回線網（携帯電話回線等）や公衆ＬＡＮ等の無線基地局を介して行われる。
【００３５】
記憶部１０４は、指標表示装置１００に内蔵されたフラッシュメモリ等の書き換え可能な不揮発性メモリにより構成され、指標表示装置１００の動作制御に必要な基本プログラムや各種のアプリケーションプログラムを記憶する。各種のアプリケーションプログラムには、カメラ装置２００とセンサー装置３００を装着していたユーザーの移動経路と、カメラ装置２００に記録されている静止画ファイル、動画ファイルを処理するための画像処理プログラムと、運動解析プログラムとが含まれる。
【００３６】
また、記憶部１０４には、センサー装置３００やカメラ装置２００から受信した各種データが一時的に記憶されるとともに、制御部１０１によって後述する各種データが記憶される。また、後述のログテーブル１０４１も記憶される。
【００３７】
音声出力部１０５は、音声ファイルに含まれる音声データをアナログ音声信号に変換するＤ／Ａ（digital-to-analog conversion）コンバータ、アンプ、スピーカ等からなり、カメラ装置２００から受信した音声データを再生する。
【００３８】
表示部１０６は、液晶パネル、及びその駆動回路からなり、指標表示装置１００の操作に供する操作画面や、後述する周辺地図、カメラ装置２００から受信された静止画や動画等を表示する。
【００３９】
入力部１０７は、ユーザーが指標表示装置１００を操作するための操作ボタンと、表示部１０６の液晶パネルの表面に一体的に設けられたタッチパネルとから構成され、ユーザーによる操作情報を制御部１０１へ供給する。
【００４０】
なお、指標表示装置１００は、例えばスマートフォンやタブレット型の携帯可能な情報機器により実現することができ、その場合、指標表示装置１００には、上記の構成に加え、音声通信やデータ通信を行うための周知の回路、すなわち入力された音声を変調して送信する音声入力回路、送信回路、及び受信した音声信号を受信して復号再生する受信回路、再生回路やデータ送受信回路等が含まれることとなる。
【００４１】
以上の構成からなる指標表示システムにおいては、例えばユーザーが登山やハイキングでの移動中に、カメラ装置２００とセンサー装置３００とを装着し、各々を動作させて、かつ所定の操作によって互いに通信可能な状態とすると、カメラ装置２００とセンサー装置３００とが後述するように動作する。なお、ここでは、カメラ装置２００に、一定時間後のインターバル撮影を行うとともに、その間にセンサー装置３００からの要求に応じた自動撮影又は自動録音を行う所定の動作モード（以下、連動モード）が設けられており、係るモードが設定されることにより、センサー装置３００との通信が確立されるものとする。
【００４２】
図２は、連動モードが設定されているときの制御部２０１の処理に基づくカメラ装置２００側の動作と、制御部３０１の処理に基づくセンサー装置３００側の動作を示すフローチャートである。
【００４３】
まず、センサー装置３００の動作について説明する。センサー装置３００は、電源投入を検出することにより動作を開始し、まず、位置情報取得部３０２、モーションセンサー部３０３、外部環境取得部３０４によってＧＰＳデータ等の各種情報を取得し（ステップＳＡ１）、取得した各種情報を行動履歴データとして記録する（ステップＳＡ２）。また、上記電源投入の検出時に、バックグラウンド処理としてセンサー装置３００とカメラ装置２００との通信を確立するようにしてもよい。
【００４４】
また、センサー装置３００は、取得した各種情報のうちで加速度情報が所定の閾値を超え、角速度情報が一定の条件を満たしていると（ステップＳＡ３：ＹＥＳ）、この超えた加速度情報を一歩として加算して記録する（ステップＳＡ４）。なお、加算後に生成された歩数データは、直前のステップＳＡ２の処理で記録された他の行動履歴データと共に１レコードとして記録される。
【００４５】
一方、センサー装置３００は、現在の処理タイミングにおける状況が、予め決められているトリガー出力条件（撮影制御条件）に該当するか否かを逐次判断する（ステップＳＡ５）。ここで、予め決められているトリガー出力条件は、歩数や、モーションセンサー部３０３によって取得された加速度情報、角速度情報、及び、ＧＰＳデータにより判断されるものであって、図３に示した４種類である。
【００４６】
すなわち、ＧＰＳデータにより示される現在位置に変化がなく、かつその状態が一定時間継続していたこと（図で「一定時間停止」）、歩数が設定値に達したこと（図で「歩数が設定値」）、加速度の値が直近の一定時間の変化の範囲を超えて変化し、かつその変化量が、ユーザーに急激な動きがあったと判断できる閾値を超えること（図で「急激な動きがあり」）、そして、ＧＰＳデータにより示される現在位置の高度が設定値に達したこと（図で「高度が設定値」）の４種類である。
【００４７】
ここで、センサー装置３００は、現在の処理タイミングにおける状況が、予め決められているトリガー出力条件に該当していなければ（ステップＳＡ５：ＮＯ）、直ちにステップＳＡ１の処理へ戻り、それ以降の処理を繰り返す。
【００４８】
これに対し、現在の処理タイミングにおける状況が、予め決められているトリガー出力条件に該当する場合（ステップＳＡ５：ＹＥＳ）、センサー装置３００は、カメラ装置２００に対し無線によって撮影を要求する所定のトリガー信号を出力する（ステップＳＡ６）。この所定のトリガー信号は、そのとき該当すると判断したトリガー出力条件を示すトリガーＩＤ（「０１」、「０２」、「０３」、「０４」のいずれか）を含めた信号である。しかる後、センサー装置３００はステップＳＡ１の処理へ戻り、それ以降の処理を繰り返す。
【００４９】
つまりセンサー装置３００は、ＧＰＳデータ等の各種情報を逐次取得し、かつ歩数をカウントとして、それらを記録する処理を繰り返す一方、その間には、予め決められているトリガー出力条件に該当する状況が到来する毎にカメラ装置２００へトリガー信号を出力する。
【００５０】
一方、カメラ装置２００においては、連動モードが設定されて動作を開始した後には、インターバル撮影に要する撮影タイミングを取得するためのインターバル時間を計測する動作を繰り返し行っており（図示せず）、インターバル撮影の撮影タイミングが到来する毎に（ステップＳＢ１：ＹＥＳ）、自動的に静止画の撮影を行い、静止画ファイルを記録部２０４に記録する（ステップＳＢ３）。このとき、静止画ファイルには、その記録動作の種類（ここではインターバル撮影）を示す情報が、撮影時に使用された撮影モードや撮影日時等の他の付加情報と共に付加される。
【００５１】
また、カメラ装置２００は、撮影タイミングが到来する以前であっても（ステップＳＢ１：ＮＯ）、ユーザーの撮影指示を検出すると（ステップＳＢ２：ＹＥＳ）、撮影を行い静止画ファイルや動画ファイルを記録する（ステップＳＢ３）。なお、ユーザーの撮影指示に応じた撮影は、予めユーザーに設定された任意の撮影モードによる静止画撮影又は動画撮影である。また、このとき静止画ファイルや動画ファイルには、記録動作の種類（ここでは手動撮影）を示す情報が撮影時に使用された撮影モードや撮影日時等の他の付加情報と共に付加される。
【００５２】
さらに、カメラ装置２００は、センサー装置３００から先に説明したトリガー信号を受信すると（ステップＳＢ４：ＹＥＳ）、トリガーＩＤにより示されるトリガーの種類、及び予め決められている撮影モード等の条件に応じた撮影処理や録音処理を行う（ステップＳＢ５）。
【００５３】
具体的には、図３に示したように、トリガーＩＤが「０１」のときには、全天周モードによる静止画撮影を行い、トリガーＩＤが「０２」のときには、人物撮影モードによる静止画撮影処理を行い、トリガーＩＤが「０４」のときには、風景撮影モードによる静止画撮影処理を行う。
【００５４】
さらに、トリガーＩＤが「０３」のときには、その時点のモード条件に応じた記録動作を行う。すなわち、その時点の明るさが閾値以上で、かつ画角内に移動体がない場合には、ショートムービーによる動画撮影処理を行う。また、その時点の明るさが閾値以上で、かつ画角内に移動体がある場合には、連写モードによる静止画撮影処理を行う。また、その時点の明るさが閾値未満である場合には、録音処理を行う。なお、ステップＳＢ５の処理に際して、その時点の明るさは、撮像部２０３によって得られる画像から検出され、画角内における移動体の有無も、撮像部２０３によって得られる複数フレームの画像によって判断される。
【００５５】
そして、カメラ装置２００は、ステップＳＢ５の撮影処理や録音処理で取得した静止画ファイル、動画ファイル、及び、音声ファイルを記録部２０４に記録する（ステップＳＢ６）。このとき、静止画ファイル、動画ファイルには、記録動作の種類（ここではトリガー信号に応じた自動撮影）を示す情報が、撮影時に使用された撮影モードや撮影日時等の他の付加情報と共に付加される。また、音声ファイルにも上記記録動作の種類（ここではトリガー信号に応じた自動録音）を示す情報が、録音日時等の他の付加情報と共に付加される。以後、カメラ装置２００はステップＳＢ１の処理へ戻り、以降の処理を繰り返す。
【００５６】
次に、指標表示装置１００の動作について説明する。指標表示装置１００においては、ユーザーが画像処理プログラムを利用することにより、カメラ装置２００とセンサー装置３００を装着していたユーザーの移動経路と、カメラ装置２００に記録されている任意の撮影画像等を確認することができる。
【００５７】
図４〜図６は、ユーザーにより画像処理プログラムが起動されたときの指標表示装置１００の動作、及びそれに対応するカメラ装置２００とセンサー装置３００の動作とを示したフローチャートである。より具体的には、指標表示装置１００とカメラ装置２００とセンサー装置３００とにおける各々の制御部１０１，２０１，３０１の処理を示した図である。
【００５８】
図４に示したように、指標表示装置１００は、画像処理プログラムを起動させると、まず、カメラ装置２００へ、静止画ファイル、動画ファイル、音声ファイルの記録時の情報の送信を要求する、問い合わせ信号を送信する（ステップＳＣ１０１）。一方、カメラ装置２００は、この問い合わせ信号を受信すると（ステップＳＢ１０１：ＹＥＳ）、記録部２０４に記憶されている静止画ファイル、動画ファイル、音声ファイルの記録時の情報を指標表示装置１００に一斉に送信する（ステップＳＢ１０２）。送信される記録時の情報とは、静止画ファイル、動画ファイルについてはファイル名、撮影日時、撮影モード、記録動作の種類であり、音声ファイルについてはファイル名、録音日時、記録動作の種類（自動又は手動）である。
【００５９】
次に、指標表示装置１００は、カメラ装置２００から記録時の情報を受信し記憶した後（ステップＳＣ１０２）、各々の画像等について記録動作の種類を確認し、それらの中にセンサー装置３００から送信されたトリガー信号を受信したことによって記録されたものがあるか否かを確認する（ステップＳＣ１０３）。
【００６０】
ここで該当する画像等があると（ステップＳＣ１０３：ＹＥＳ）、指標表示装置１００は、直近の行動履歴が記憶済みか否かを確認し、記憶済みでなければ（ステップＳＣ４：ＮＯ）、運動解析プログラムを起動する（ステップＳＣ１０５）。運動解析プログラムは、センサー装置３００に記録されている行動履歴データ（ＧＰＳデータ、外部環境データ、歩数データ）を取得し、取得した行動履歴データに基づき、センサー装置３００を身に付けていたときのユーザーの運動を解析するプログラムである。
【００６１】
そして、指標表示装置１００は、この運動解析プログラムに従った制御部１０１の処理により実現される機能の一部によって、ＧＰＳデータを含む行動履歴データの送信を要求する問い合わせ信号をセンサー装置３００へ送信する（ステップＳＣ１０６）。ここで、センサー装置３００へ送信を要求する行動履歴データは、トリガー信号によって記録された画像等に対応する１又は複数の特定のレコードのデータ、すなわち画像等の記録時に記録されていたデータである。但し、行動履歴データとして全てのレコードのデータを取得しても構わない。
【００６２】
その際、図６に示したようにセンサー装置３００は、この問い合わせ信号を受信すると（ステップＳＡ１０１：ＹＥＳ）、行動履歴記憶部３０５に記憶されている行動履歴データ（要求されたレコードのデータ）を指標表示装置１００に送信する（ステップＳＡ１０２）。
【００６３】
そして、指標表示装置１００は、センサー装置３００から行動履歴データを受信した後（ステップＳＣ１０７）、受信した行動履歴データの内で、トリガー信号によって記録された静止画ファイル、動画ファイル、音声ファイルの記録時の情報（撮影日時、録音日時）と同じ日時に測位されたＧＰＳデータとを対応付けて記憶部１０４のログテーブル１０４１に記憶する（ステップＳＣ１０８）。
【００６４】
さらに、図５に示したように、指標表示装置１００は、静止画ファイル、動画ファイル、音声ファイルの記録時の情報に関係付けてアイコン画像と合成文字とを記憶部１０４に記憶する（ステップＳＣ１０９）。ここで、アイコン画像は、画像処理プログラムに予め用意されている画像であり、画像等の記録時におけるカメラ装置２００の撮影モードに対応する画像である。具体的には、静止画ファイル、動画ファイルについては記録時の撮影モード毎に用意されている画像であり、音声ファイルについては録音動作を示す画像である。尚、これらのアイコン画像については、予め用意されたものでなく、静止画ファイルや動画ファイル、音声ファイルのプロファイルデータから撮影モードを把握し、最適なアイコン画像を生成するようにしても良い。また、合成文字は、トリガー信号によって記録された各々の画像等における撮影モードや行動履歴データに含まれるトリガーＩＤにより示されるトリガー出力条件（図３参照）に基づいて生成される文字である。
【００６５】
図７は、以上の処理により記憶部１０４内にあるログテーブル１０４１の記憶内容を示す図である。同図においては、互いに関係付けて記憶される各々の画像等の情報（リンクされている静止画ファイル、動画ファイル、音声ファイルのファイル名）、ＧＰＳデータ、アイコン画像（ファイル名）、合成文字の例を、アイコン画像の決定に使用される撮影モード、及び撮影モードと共に合成文字の決定に使用されるトリガーＩＤと、画像等の記録時におけるセンサー値（歩数を含む）と共に便宜的に示した図である。なお、同図においてＧＰＳデータは便宜的に示したものであり、ここでは特定の地点「Ａ」〜「Ｎ」の各地点を示すデータである。
【００６６】
ここで、ステップＳＣ１０９の処理で記憶部１０４に記憶される合成文字の内容について説明すると、トリガーＩＤが「０１」に対応するレコードのデータには、ＧＰＳデータの地点「Ｂ」において、センサー値において加速度が閾値未満であって、ＧＰＳデータを受信したその場所でユーザーが立ち止まっている可能性が高いので「停止！」という合成文字が記憶される。
【００６７】
また、画像等に対応するトリガーＩＤが「０２」に対応するレコードのデータには、ＧＰＳデータの地点「Ｃ」において、歩数データが１０００歩をカウントしたので、「１０００歩！」という合成文字が記憶される。
【００６８】
また、画像等に対応するトリガーＩＤが「０３」に対応するレコードのデータには、ＧＰＳデータの地点「Ｋ」において、加速度データが閾値以上になっているので、ユーザーが何かを見回している状態と判断し、「Ｖｉｅｗ！」という合成文字が記憶される。
【００６９】
また、画像等に対応するトリガーＩＤが「０４」に対応するレコードのデータには、ＧＰＳデータの地点「Ｌ」において、センサー装置３００から送信されたセンサー値（高度データ）において高度４００ｍが記録されているので、「４００Ｍ！」という合成文字が記憶される。
【００７０】
引き続き、指標表示装置１００は、外部の地図サーバー４００に接続し、ステップＳＣ１０７の処理で取得した行動履歴データに含まれる複数のＧＰＳデータに対応する測位場所を含んだ範囲の地図データを地図サーバー４００から取得する（ステップＳＣ１１０）。
【００７１】
次に、指標表示装置１００は、地図サーバー４００から取得した地図データに基づく地図であって、各々の静止画ファイル、動画ファイル、音声ファイルが記録された記録地点（撮影地点や録音地点）を含む範囲の地図を表示部１０６に表示し、その地図上にユーザーの行動履歴（移動経路）を表示するとともに、図７に登録された内容で指標化して表示する（ステップＳＣ１１１）。
【００７２】
図８は、図７に例示した静止画ファイル、動画ファイル、音声ファイルのファイル名、アイコン画像（ファイル名）、合成文字が、ＧＰＳデータと対応付けられて表示部１０６に表示されている場合の例を示した図である。
【００７３】
具体的に説明すると、ステップＳＣ１１０の処理に際して指標表示装置１００は、図８に示したように、表示部１０６に表示した地図上に、ステップＳＣ１０７の処理で取得した行動履歴データのＧＰＳデータに基づいてユーザーの移動経路１００１を描画し、その移動経路１００１上に各々の静止画ファイル、動画ファイル、音声ファイルが記録された各地点Ａ〜Ｎ（図で黒丸）を表示する。
【００７４】
また、指標表示装置１００は、各地点Ａ〜Ｎの近傍に、そこで記録された画像等の撮影モードに対応するアイコン画像（指標）をそれらの記録時の情報としてそれぞれ表示する。すなわち撮影画像（静止画ファイル、動画ファイル）については撮影モード（インターバル撮影を含む）に対応するアイコン画像を表示し、音声（音声ファイル）については録音モードに対応するアイコン画像を表示する。さらに、指標表示装置１００は、トリガー信号により画像等が記録されていた地点Ｂ，Ｃ，Ｋ〜Ｎの近傍には、アイコン画像と共に合成文字（「停止！」等）をそれぞれ表示する。
【００７５】
そして、指標表示装置１００は、図８に示したような内容を表示している間に、ユーザーによって、いずれかの指標（アイコン画像）が指示（タッチ）されたことを検出すると（ステップＳＣ１１２）、指示された指標に対応する画像等の静止画ファイル、動画ファイル、又は音声ファイルの送信を指示する送信指示信号をカメラ装置２００へ送信する（ステップＳＣ１１５）。
【００７６】
このとき、図３に示したようにカメラ装置２００は、この送信指示信号を受信すると（ステップＳＢ１０３：ＹＥＳ）、送信指示された止画ファイル、動画ファイル、又は音声ファイルを記録部２０４から読み出して指標表示装置１００に送信する（ステップＳＢ１０４）。
【００７７】
そして、指標表示装置１００は、カメラ装置２００からこれらのファイルを受信した後（ステップＳＣ１１６）、受信したこれらのファイルに含まれる静止画像、動画、音声を再生する（ステップＳＣ１１７）。
【００７８】
以後、指標表示装置１００は、ユーザーによる確認対象の変更指示の有無、及び画像処理プログラムの終了指示の有無をそれぞれ確認する（ステップＳＣ１１８、ＳＣ１１９）。その間、ユーザーによる確認対象の変更指示を検出すると（ステップＳＣ１１８：ＹＥＳ）、指標表示装置１００は、図４のステップＳＣ１０３の処理に戻り、表示部１０６に地図及び行動履歴等を表示し、それ以降の処理を繰り返す。なお、図では省略したが、確認対象の変更指示を検出した時点で撮影画像を表示しているときには、その撮影画像の表示は終了する。
【００７９】
そして、指標表示装置１００は、ユーザーに画像処理プログラムの終了が指示された時点で（ステップＳＣ１１９：ＹＥＳ）、画像処理プログラムに係る全ての処理を終了する。
【００８０】
一方、上述した処理とは異なり、指標表示装置１００においては、図４のステップＳＣ１０３での確認結果がＹＥＳであって、カメラ装置２００から記録時の情報の中にセンサー装置３００から送信されたトリガー信号を受信したことによって記録されたものがなければ、以下の処理を行う。
【００８１】
すなわち図５に示したように指標表示装置１００は、各画像等について記録情報を指標（アイコン画像）にして表示部１０６の画面上に一覧表示する（ステップＳＣ１１３）。
すなわち各画像等の撮影モードに対応するアイコン画像を一覧表示する。但し、音声ファイルについては撮影モードという概念は無いのでアイコン画像のみを表示する。
【００８２】
その後、指標表示装置１００は、ユーザーによって画面上のいずれかの指標（アイコン画像）が指示（タッチ）されたことを検出すると（ステップＳＣ１１４：ＹＥＳ）、指示された指標に対応する静止画ファイル、動画ファイル、又は、音声ファイルの送信を指示する送信指示信号をカメラ装置２００へ送信する（ステップＳＣ１１５）。
【００８３】
このときも、図３に示したように、カメラ装置２００は、この送信指示信号を受信すると（ステップＳＢ１０３：ＹＥＳ）、指示された静止画ファイル、動画ファイル、又は、音声ファイルを記録部２０４から読み出して指標表示装置１００に送信する（ステップＳＢ１０４）。
【００８４】
そして、指標表示装置１００は、カメラ装置２００から静止画ファイル、動画ファイル、又は、音声ファイルを受信した後（ステップＳＣ１１６）、受信したこれらのファイルに含まれる静止画、動画、音声を再生する（ステップＳＣ１１７）。その後の処理は既説したとおりである。すなわち指標表示装置１００は、ユーザーによる確認対象の変更指示を検出すると（ステップＳＣ１１８：ＹＥＳ）、図４のステップＳＣ１０３の処理に戻り、それ以降の処理を繰り返す。その際も、確認対象の変更指示を検出した時点で撮影された静止画、動画を表示しているときには、それら表示を終了する。
【００８５】
しかる後、指標表示装置１００は、各記録時の情報を指標化し表示部１０６の画面上に再び一覧表示した後（ステップＳＣ１１３）、ユーザーに画像処理プログラムの終了が指示された時点で（ステップＳＣ１１９：ＹＥＳ）、画像処理プログラムに係る全ての処理を終了する。
【００８６】
以上のように指標表示装置１００においては、ユーザーの移動経路を示した地図に、単に撮影地点や録音地点を示すのではなく、撮影地点の近傍には撮影時の撮影モードを示すアイコン画像を表示する。したがって、ユーザーに対して、移動経路上の各々の撮影地点で使用された撮影モードから、各々の撮影地点における撮影の契機（撮影が行われた理由）や撮影目的といった撮影時の状況を容易に理解させることができる。特に、撮影日から日数が経過している場合や、手動ではなく自動撮影が行われた撮影地点における撮影時の状況を確認する際には係る効果が大である。
【００８７】
したがって、例えば撮影画像（撮影地点）が多い場合や、撮影日から日数が経過している場合等であっても、特定の状況下で自動的に撮影された撮影画像を容易に知ることができる。
【００８８】
また、各々の撮影地点に表示されたアイコン画像が指示されると、それに対応する撮影画像（本画像）を表示することができるため、特定の状況下で自動的に撮影された撮影画像だけを容易に再生して内容を確認することができる。
【００８９】
また、自動撮影が行われていた撮影地点については、アイコン画像と共に合成文字を地図上に表示させることにより、撮影時点におけるユーザーの行動内容（予め決められている行動内容）も確認することができる。したがって、各々の撮影地点における撮影時の状況をより一層容易に理解させることができる。
【００９０】
また、指標表示装置１００においては、カメラ装置２００から撮影画像の撮影時における撮影モードを無線によって取得し、かつ各々の撮影画像の撮影地点のＧＳＰデータを無線によって取得する。したがって、指標表示装置１００のユーザーは、移動途中の各々の撮影地点における撮影時の状況を容易に確認することができる。
【００９１】
また、指標表示装置１００のユーザーとは異なる他のユーザーがカメラ装置２００及びセンサー装置３００を使用していた場合には、指標表示装置１００のユーザーは、他人の撮影時の状況を容易に確認することもできる。
【００９２】
なお、本実施形態において、主として指標表示装置１００とカメラ装置２００とセンサー装置３００とからなる指標表示システムについて説明したが、指標表示装置１００は、カメラ装置２００とセンサー装置３００の双方、又はいずれか一方の機能を備えていても構わない。また、カメラ装置２００とセンサー装置３００とは単一の電子機器により構成されていても良い。
【００９３】
（第２の実施の形態）
次に本発明の実施形態の第２の実施の形態ついて説明する。尚、上述の第１の実施の形態と説明や動作が同じ箇所については同じ図面及び同一の符号を用いることで説明を省略する。また、第２の実施の形態においては、指標表示装置１００は、図４のステップＳＣ１０６において、センサー装置３００に対し全ての行動履歴データの送信を要求するものとする。
【００９４】
第２の実施の形態においては、指標表示装置１００は記憶部１０４内に図９に示すような加工処理条件テーブル１０４２を備える。この加工処理条件テーブルには、行動履歴データに含まれる外部環境データ（高度、気温、気圧）や、ユーザーの歩数データに基づいて算出された消費カロリーデータが、所定の閾値を超えたことを条件に、その条件を満たした時を記録日時とする静止画ファイル、動画ファイル、音声ファイルを、加工処理内容に設定された内容で加工処理することを定義したテーブルである。図９の場合、例えば、条件が「気温が５度以下でＡＷＢ（オートホワイトバランス）の判定で「曇」、「日陰」判定された撮影画像については、加工条件として、水滴のイメージを合成し、ソフトフォーカス処理を施すことで、霧や靄に近い気象条件であることを強調した画像にする。また、例えば、条件が「消費カロリーが予め設定した所定値を超えた時に撮影された撮影画像については、加工条件としてメダルや勲章のイメージや所定のフレームを合成する。
【００９５】
また、指標表示装置１００は、図４のステップＳＣ１０８において、センサー装置３００から行動履歴データを受信した後（ステップＳＣ１０７）、受信した行動履歴データの内で、トリガー信号によって記録された静止画ファイル、動画ファイル、音声ファイルの記録時の情報（撮影日時、録音日時）と同じ日時に測位されたＧＰＳデータとを対応付けて記憶部１０４のログテーブル１０４３に図１０に図示するように記憶する。本実施の形態においては、ログテーブル１０４３は更に、その他の外部環境、加速度、角速度の値の集合データＳ１〜Ｓ１４を全て受信・取得し、ログテーブル１０４３で静止画ファイル、動画ファイル、音声ファイルとＧＰＳデータや取得日時で対応付けする。
【００９６】
図１１は第２の実施の形態における画像処理プログラムが起動されたときの指標表示装置の動作を示すフローチャートであり、図５に示した第１の実施の形態の同フローチャートから改良したものある。
指標表示装置１００の制御部１１０は、図５のステップＳＣ１１０からの流れで行動履歴データに含まれる複数のＧＰＳデータに対応する測位場所を含んだ範囲の地図データを地図サーバー４００から取得すると、これらのＧＰＳデータや行動履歴データから行程データを生成する（ステップＳＣ２０１）。そして、取得した静止画ファイルから代表画像となるものを選択して読み出し、表紙データを生成する（ステップＳＣ２０２）。
【００９７】
図１３はこの時に生成される表紙データを図示したものである。同図においては、画面は上下に分割され、上の表示領域には、ＧＰＳデータや行動履歴データ等から得られたデータとして以下の情報が表示されている。
・現在時刻「９：３４」
・ＧＰＳデータに含まれる高度データや外部環境データとして得られた高度（気圧）データから演算された到達地点の標高「標高５００ｍ」
・スタート地点から計時された経過時間「経過：１時間２１分」
・外部環境データとして得られた気温（温度）データから演算された到達地点の気温「気温：１４℃」
・経過時間と測位による移動距離から演算された速度「速度：３．６ｋｍ／ｈ」
・移動中に得られた加速度センサー、角速度センサー、及び、ＧＰＳデータの各値から、所定時間以上、これらの値に変化が無かった期間を休憩時間と推定した回数「休憩：２回」
・移動中に得られた加速度センサー、角速度センサーから歩数を計数し、その計数値から得られた消費カロリー「消費：２５６ｋｃａｌ」
【００９８】
また、下の領域には、この行程で記録された複数の静止画ファイル、または動画ファイルから選択されて読み出されたものが代表画像として表示されている。尚、この代表画像の選択方法については様々考えられる。例えば、代表画像は参加メンバー全員が含まれている画像であっても良いし、ゴール地点の風景画像であっても良い。
【００９９】
また、表示データが生成され表示されると、ユーザーによる外部操作により行程データへの切り換え指示を検出したか否かを判断する（ステップＳＣ２０３）。切り替え指示を検出しなかった場合は（ステップＳ２０３：ＮＯ）、繰り返しこの指示の検出を待つ一方、切り替え指示を検出した場合は（ステップＳ２０３：ＹＥＳ）、地図サーバー４００から取得した地図データに基づく地図であって、各々の静止画ファイル、動画ファイル、音声ファイルが記録されたことを示す記録情報（撮影地点や録音地点）を指標化し、更に図１０に記録されたユーザーの行動履歴（移動経路）を付加したものを、トップビュー１０６３として表示する（ステップＳＣ２０４）。
【０１００】
具体的に説明すると、ステップＳＣ２０４の処理に際して指標表示装置１００は、図１４（ａ）に示したようにトップビュー１０６３に表示した地図上に、ステップＳＣ１０７の処理で取得した行動履歴データのＧＰＳデータに基づいてユーザーの移動経路１００１を描画し、その移動経路１００１上に各々の静止画ファイル、動画ファイル、音声ファイルが記録された各地点Ａ〜Ｅ（図で黒丸）を表示する。
【０１０１】
また、指標表示装置１００は、各地点Ａ〜Ｅの近傍に、そこで記録された画像等の撮影モードに対応するアイコン画像（指標）をそれらの記録時の情報としてそれぞれ表示する。すなわち撮影画像（静止画ファイル、動画ファイル）については撮影モード（インターバル撮影を含む）に対応するアイコン画像を表示し、音声（音声ファイル）については録音モードに対応するアイコン画像を表示する。さらに、指標表示装置１００は、トリガー信号により画像等が記録されていた地点Ａ〜Ｃの近傍には、アイコン画像と共に合成文字（「停止！」等）をそれぞれ表示する。またこの移動経路１００１には、他の経路とは表示色が異なる区間１０６９〜１０７１が表示する。この区間１０６９〜１０７１は、夫々、区間の計測時間、移動距離、加速度センサーや角速度センサーの値に基づいて、その区間の移動速度を算出し、ユーザーが歩行で移動したのか、或いは走ったのか、他の移動手段（自転車や車）を用いたのかを差別化して表示したものである。
【０１０２】
更に同図においては、ユーザーが指標１０６４を指示すると、制御部１１０はこの移動経路１００１で規則された静止画ファイル、動画ファイルを再生するよう制御する。また「バード」、「トップ」、「サイド」の表示がある１０６５は、移動経路１００１の表示態様を表現したものであり、ユーザーの外部操作検出によって、「バード（バードビューの略表記）」、「トップ（トップビューの略表記）」、「サイド（サイドビューの略表記）」の各表示態様が切り替わる。また、トップビューの下には、ＧＰＳデータ、加速度センサー、角速度センサー、外部環境データを適宜用いて算出した、当該移動行程の所要時間１０６６、移動距離１０６７、高低差１０６８が表示される。尚、所要時間１０６６、移動距離１０６７、高低差１０６８は「バード」、「トップ」、「サイド」の各表示態様においては共通して表示されるものとする。
【０１０３】
制御部１０１はユーザーによる外部操作で１０６５における何れか他の表示（この場合は「バード」、「サイド」の何れか）への切り換えが指示されたか否かを判断する（ステップＳＣ２０５）。切り換えの指示を検出しなかった場合は（ステップＳＣ２０５：ＮＯ）、図５のステップＳＣ１１２へ移行する。一方、表示の切り換えの指示を検出した場合は（ステップＳＣ２０５：ＹＥＳ）、その切り換えが「バード」への表示の切り換え指示か、或いは、「サイド」への表示の切り換え指示かを判断する（ステップＳＣ２０６）。
【０１０４】
制御部１０１は「バード」への切り換え指示を検出すると、トップビュー１０６３から各々の静止画ファイル、動画ファイル、音声ファイルが記録されたことを示す記録情報（撮影地点や録音地点）を指標化し、更に図１０に記録されたユーザーの行動履歴（移動経路）を付加したものを、俯瞰視による３Ｄ（立体）表示であるバードビュー１０７２として表示する（ステップＳＣ２０７）。この時、指標表示装置１００は、図１４（ｂ）に示したようにバードビュー１０７２に表示した地図上に、ステップＳＣ１０７の処理で取得した行動履歴データのＧＰＳデータに基づいてユーザーの移動経路１００１を描画し、その移動経路１００１上に各々の静止画ファイル、動画ファイル、音声ファイルが記録された各地点Ａ〜Ｇ（図で黒丸）を表示する。尚、この表示においては、すなわち撮影画像（静止画ファイル、動画ファイル）については撮影モード（インターバル撮影を含む）に対応するアイコン画像は表示しないが、これらの画像を表示させてよい。
【０１０５】
制御部１０１はユーザーによる外部操作で１０６５における何れか他の表示への切り換えが指示されたか否かを判断する（ステップＳＣ２０８）。またステップＳＣ２０８で切り換え指示が検出されない場合（ステップＳＣ２０８：ＮＯ）、当該アプリ（アプリケーションソフトウェア）の終了指示を検出したか否かを判断する（ステップＳ２０９）。ステップＳＣ２０９でアプリの終了指示を検出すると（ステップＳＣ２０９：ＹＥＳ）、当該処理を終了する。一方、ステップＳＣ２０９でアプリの終了指示を検出しない場合（ステップＳＣ２０９：ＮＯ）、ステップＳＣ２０６の処理に戻る。また、ステップＳＣ２０８において、切り換え指示が検出された場合（ステップＳ２０８：ＹＥＳ）、更に、切り換え指示された表示が、「サイド」、「トップ」の何れなのかを判断する（ステップＳＣ２１０）。
【０１０６】
ここで「トップ」への切り換え指示を検出した場合はステップＳＣ２０４に移行する。一方、「サイド」への切り換え指示を検出した場合は、地図を表示することなく、各々の静止画ファイル、動画ファイル、音声ファイルが記録されたことを示す記録情報（撮影地点や録音地点）を指標化し、更に図１０に記録されたユーザーの行動履歴のうち高度データや加速度センサー、角速度センサー等の計測データ（主に傾斜角度）から得た行程データを付加したものを、サイドビュー１０７３として表示する（ステップＳＣ２１１）。
【０１０７】
具体的に説明すると、ステップＳＣ２１１の処理に際して指標表示装置１００は、図１４（ｃ）に示したように移動経路の高低を簡略的に表示したものに、各々の静止画ファイル、動画ファイル、音声ファイルが記録された各地点Ａ〜Ｇ（図で黒丸）を表示する。尚、この表示においては、すなわち撮影画像（静止画ファイル、動画ファイル）については撮影モード（インターバル撮影を含む）に対応するアイコン画像は表示しないが、これらの画像を表示させてよい。
【０１０８】
制御部１０１はユーザーによる外部操作で１０６５における何れか他の表示への切り換えが指示されたか否かを判断する（ステップＳＣ２１２）。またステップＳＣ２１２で切り換え指示が検出されない場合（ステップＳＣ２１２：ＮＯ）、当該アプリ（アプリケーションソフトウェア）の終了指示を検出したか否かを判断する（ステップＳ２１３）。ステップＳＣ２１３でアプリの終了指示を検出すると（ステップＳＣ２１３：ＹＥＳ）、当該処理を終了する。一方、ステップＳＣ２１３でアプリの終了指示を検出しない場合（ステップＳＣ２１３：ＮＯ）、ステップＳＣ２１１の処理に戻る。また、ステップＳＣ２１２において、切り換え指示が検出された場合（ステップＳ２１２：ＹＥＳ）、更に、切り換え指示された表示が、「トップ」、「バード」の何れなのかを判断する（ステップＳＣ２１４）。ここで「トップ」への切り換え指示を検出した場合はステップＳＣ２０４に移行する。一方、「バード」への切り換え指示を検出した場合は、ステップＳＣ２０７に移行する。
【０１０９】
また、指標表示装置１００は、図１２に図示するように、カメラ装置２００から静止画ファイル、動画ファイル、又は、音声ファイルを受信した後（ステップＳＣ１１６）、これらのファイルの取得（記録・撮像）時における外部環境データや加速度センサー、角速度センサーから算出された歩数データ、及び、この歩数データから求められる消費カロリーデータを取得し、これら取得されたデータが、図９の加工処理条件テーブルに設定された条件を満たし、その結果、対応する静止画ファイル、動画ファイル、又は、音声ファイルが加工処理対象になるか否かを判断する（ステップＳＣ１２０）。加工対象になっていると判断された場合は（ステップＳＣ１２０：ＹＥＳ）、対象となる静止画ファイル、動画ファイル、又は、音声ファイルが加工処理し（ステップＳＣ１２１）、加工処理された静止画、動画、音声を再生する（ステップＳＣ１２２）。尚、この加工処理の概要については、図９の説明にて記載したので省略する。一方、加工対象になっていないと判断された場合は（ステップＳＣ１２０：ＮＯ）、受信したこれらのファイルに含まれる静止画、動画、音声を再生する。
【０１１０】
以上のように第２の実施の形態の指標表示装置１００においては、移動経路を複数種で表現することができる。このため、どのような地形を移動したのか等の理解が容易になる。また、外部環境や行動履歴と加工処理条件とを紐付けすることで、受信した静止画ファイル、動画ファイル、又は、音声ファイルを、特定の目標を達成した記念として再生出力することができる。
【０１１１】
なお、本実施形態において、主として指標表示装置１００とカメラ装置２００とセンサー装置３００とからなる指標表示システムについて説明したが、指標表示装置１００は、カメラ装置２００とセンサー装置３００の双方、又はいずれか一方の機能を備えていても構わない。また、カメラ装置２００とセンサー装置３００とは単一の電子機器により構成されていても良い。
【０１１２】
以上、本発明の実施形態、及びその変形例について説明したが、これらは本発明の作用
効果が得られる範囲内であれば適宜変更が可能であり、変更後の実施形態も特許請求の範
囲に記載された発明、及びその発明と均等の発明の範囲に含まれる。以下に、本出願の当
初の特許請求の範囲に記載された発明を付記する。
（付記１）
画像の撮影に関する位置情報を取得する位置情報取得手段と、
画像の撮影に関する所定情報を取得する撮影情報取得手段と、
前記撮影情報取得手段によって取得された前記所定情報に基づいて指標画像を生成する生成手段と、
前記位置情報取得手段によって取得された位置情報により示される位置に前記生成手段によって生成された指標画像を表示する表示手段と
を備えることを特徴とする指標表示装置。
（付記２）
前記画像を撮影した撮像装置を携行する者の、行動に関する情報を取得する行動情報取得手段を更に備え、
前記表示手段は更に、前記行動情報取得手段によって取得された前記行動に関する情報を前記所定情報と対応付けて表示する
ことを特徴とする請求項１に記載の指標表示装置。
（付記３）
前記行動に関する情報は、前記携行する者の複数種の移動態様を含み、
前記表示手段は、前記行動に関する情報として前記複数種の移動態様を夫々識別可能に表示することを特徴とする請求項２に記載の指標表示装置。
（付記４）
前記画像を撮影した撮像装置の外部環境に関する情報を取得する外部環境情報取得手段を更に備え、
前記表示手段は更に、前記外部環境情報取得手段によって取得された前記外部環境に関する情報を表示することを特徴とする請求項１乃至３の何れか１項に記載の指標表示装置。
（付記５）
前記表示手段によって表示された前記所定情報に対する指示を検出する指示検出手段と、
前記指示検出手段によって指示が検出された前記所定情報に対応する画像を前記表示手段に表示させるよう制御する表示制御手段と
を更に備えることを特徴とする請求項１乃至３の何れか１項に記載の指標表示装置。
（付記６）
前記表示手段に表示される画像と前記行動に関する情報とを対応付けるよう制御する第１の制御手段を更に備え、
前記表示制御手段は、前記表示手段に画像を表示する場合、前記第１の制御手段によって対応付けられた前記行動に関する情報に基づく表示態様で、当該画像を表示するよう制御することを特徴とする請求項５記載の指標表示装置。
（付記７）
前記表示手段に表示される画像と外部環境に関する情報とを対応付けるよう制御する第２の制御手段を更に備え、
前記表示制御手段は、前記表示手段に画像を表示する場合、前記第２の制御手段によって対応付けられた前記外部環境に関する情報に基づく表示態様で、当該画像を表示するよう制御することを特徴とする請求項５又は６に記載の指標表示装置。
（付記８）
前記表示制御手段は、表示対象なる画像に対し所定の加工若しくは他の画像を合成するよう制御することを特徴とする請求項６又は７に記載の指標表示装置。
（付記９）
外部機器と通信する通信手段を更に備え、
前記画像、前記位置情報、前記所定情報の少なくとも一つは、前記通信手段により受信されたものであることを特徴とする請求項１乃至８の何れか１項に記載の指標表示装置。
（付記１０）
前記所定情報とは、前記画像の撮影に使用された撮影モードであることを特徴とする請求項１乃至９のいずれか１項に記載の指標表示装置。
（付記１１）
前記画像には、所定の条件を満たしたことを契機として撮影されたものが含まれることを特徴とする請求項１乃至１０のいずれか１項に記載の指標表示装置。
（付記１２）
画像の撮影に関する位置情報を取得する位置情報取得ステップと、
画像の撮影に関する所定情報を取得する撮影情報取得ステップと、
前記撮影情報取得ステップにて取得された前記所定情報に基づいて指標画像を生成する生成ステップと、
前記位置情報取得ステップにて取得された位置情報により示される位置に前記生成ステップにて生成された指標画像を表示させる表示ステップと
を含むことを特徴とする指標表示方法。
（付記１３）
コンピュータを、
画像の撮影に関する位置情報を取得する位置情報取得手段、
画像の撮影に関する所定情報を取得する撮影情報取得手段、
前記撮影情報取得手段によって取得された前記所定情報に基づいて指標画像を生成する生成手段、
前記位置情報取得手段によって取得された位置情報により示される位置に前記生成手段によって生成された指標画像を表示させる表示手段
として機能させることを特徴とするプログラム。
（付記１４）
表示装置と、携行者の移動中における位置情報を逐次記録する位置情報記録装置と、当該携行者が携行する撮像装置と、を含む指標表示システムであって、
前記表示装置は、
前記位置情報を前記位置情報記録装置から取得する位置情報取得手段と、
前記撮像装置に記録された画像の撮影に関する所定情報を前記撮像装置から取得する撮影情報取得手段と、
前記撮影情報取得手段によって取得された前記所定情報に基づいて指標画像を生成する生成手段と、
前記位置情報取得手段によって取得された位置情報により示される位置に前記生成手段によって生成された指標画像を表示するよう制御する表示制御手段と
を備えたことを特徴とする指標表示システム。
【符号の説明】
【０１１３】
１００    指標表示装置
１０１    制御部
１０２    第１の無線通信部
１０３    第２の無線通信部
１０４    記憶部
１０５    音声出力部
１０６    表示部
１０７    入力部
２００    カメラ装置
２０１    制御部
２０３    撮像部
３０３    モーションセンサー部
２０４    記録部
２０５    音声入力部
２０６    無線通信部
２０７    入力部
３００    センサー装置
３０１    制御部
３０２    位置情報取得部
３０４    外部環境取得部
３０５    行動履歴記憶部
３０６    無線通信部
４００    地図サーバー
４０１    地図データベース
５００    インターネット
１００１    移動経路
【図１】
2018007235.tif 000003
【図２】
2018007235.tif 000004
【図３】
2018007235.tif 000005
【図４】
2018007235.tif 000006
【図５】
2018007235.tif 000007
【図６】
2018007235.tif 000008
【図７】
2018007235.tif 000009
【図８】
2018007235.tif 000010
【図９】
2018007235.tif 000011
【図１０】
2018007235.tif 000012
【図１１】
2018007235.tif 000013
【図１２】
2018007235.tif 000014
【図１３】
2018007235.tif 000015
【図１４】
2018007235.tif 000016