(57)【要約】【課題】人の体験に応じた体験画像を効果的に表示することができる表示システム、表示方法、及び移動体を提供する。【解決手段】本発明にかかる表示システムは、人移動体に搭乗したユーザの体験に応じた体験情報を表示する表示システムであって、ユーザの体験に応じた体験画像を取得するライフログ用カメラ４２が設置された複数の移動体１と、体験画像を取得したときの移動体の位置情報を測定する測位手段４７と、カメラによって取得された体験画像と、位置情報とを対応付けて記憶する体験情報記憶部７３と、地図情報を記憶する地図情報記憶部７５と、地図情報に基づいて地図を表示するとともに、位置情報に応じて前記地図上に複数の前記体験画像を表示する表示部７１と、を備えるものである。【選択図】図３
2010039256.tif 000002
【特許請求の範囲】
【請求項１】
移動体に搭乗したユーザの体験に応じた体験画像を表示する表示システムであって、
ユーザの体験に応じた体験画像を取得するカメラが設置された複数の移動体と、
前記体験画像を取得したときの前記移動体の位置情報を測定する測位手段と、
前記カメラによって取得された体験画像と、前記位置情報とを対応付けて記憶する体験情報記憶部と、
地図情報を記憶する地図情報記憶部と、
前記地図情報に基づいて地図を表示するとともに、前記位置情報に応じて前記地図上に複数の前記体験画像を表示する表示部と、を備える表示システム。
【請求項２】
一連の体験における前記体験画像を含むログの検索条件を入力する入力部をさらに備え、
前記検索条件に合致するログに含まれる体験画像を抽出して、前記表示部に表示する請求項１に記載の表示システム。
【請求項３】
前記検索条件として、ユーザの属性が入力され、
前記ユーザの属性が合致するログに含まれる体験画像を抽出して、前記表示部に表示する請求項２に記載の表示システム。
【請求項４】
前記表示部に同時に表示されている前記複数の体験画像には、異なる移動体のカメラによって取得された体験画像が含まれていることを特徴とする請求項１乃至３のいずれか１項に記載の表示システム。
【請求項５】
前記表示部に表示されている地図上で特定の地点を指定することで、前記特定の地点に関する説明が表示されることを特徴とする請求項１乃至４のいずれか１項に記載の表示システム。
【請求項６】
前記地図が俯瞰的に表示され、
前記表示部の表示画面における上下方向を時間軸として、前記表示画面における前記体験画像の位置が決定されていることを特徴とする請求項１乃至５のいずれか１項に記載の表示システム。
【請求項７】
移動体に搭乗したユーザの体験に応じた体験画像を表示する表示方法であって、
複数の移動体に搭載したカメラで前記ユーザの体験に応じた体験画像を取得するステップと、
前記体験画像を取得したときの前記移動体の位置情報を測定するステップと、
地図情報に基づいて地図を表示するとともに、前記位置情報に応じて前記地図上に複数の前記体験画像を表示するステップと、を備える表示方法。
【請求項８】
一連の体験における前記体験画像を含むログの検索条件を入力するステップをさらに備え、
前記検索条件に合致するログに含まれる体験画像を抽出して、表示する請求項７に記載の表示方法。
【請求項９】
前記検索条件として、ユーザの属性を入力して、
前記ユーザの属性が合致するログに含まれる体験画像を抽出して、表示する請求項８に記載の表示方法。
【請求項１０】
同時に表示されている前記複数の体験画像には、異なる移動体のカメラによって取得された体験画像が含まれていることを特徴とする請求項７乃至９のいずれか１項に記載の表示方法。
【請求項１１】
表示されている地図上で特定の地点を指定することで、前記特定の地点に関する説明が表示されることを特徴とする請求項７乃至１０のいずれか１項に記載の表示方法。
【請求項１２】
前記地図が俯瞰的に表示され、
前記表示部の表示画面における上下方向を時間軸として、前記表示画面における前記体験画像の位置が決定されていることを特徴とする請求項７乃至１１のいずれか１項に記載の表示方法。
【請求項１３】
ユーザの体験に応じた体験画像を取得するカメラと、
前記体験画像を取得したときの前記移動体の位置情報を測定する測位手段と、
前記カメラによって取得された体験画像と、前記位置情報とを対応付けて記憶する体験情報記憶部と、
地図情報を記憶する地図情報記憶部と、
前記地図情報に基づいて地図を表示するとともに、前記位置情報に応じて前記地図上に複数の前記体験画像を表示する表示部と、を備える移動体。
【請求項１４】
一連の体験における前記体験画像を含むログの検索条件を入力する入力部をさらに備え、
前記検索条件に合致するログに含まれる体験画像を抽出して、前記表示部に表示する請求項１３に記載の移動体。
【請求項１５】
前記体験情報記憶部には、他の移動体に搭載されたカメラで取得された体験画像が記憶され、
前記他の移動体のカメラで取得した体験画像を、前記位置情報に応じて前記地図上に表示する請求項１３、又は１４に記載の移動体。
【請求項１６】
前記移動体のカメラで取得した主観的な体験画像と、他の移動体のカメラで取得した客観的な体験画像を同時に前記地図上に表示する請求項１３乃至１５のいずれか１項に記載の移動体。
【請求項１７】
前記表示部に表示されている地図上で特定の地点を指定することで、前記特定の地点に関する説明が表示されることを特徴とする請求項１３乃至１６のいずれか１項に記載の移動体。
【請求項１８】
前記地図が俯瞰的に表示され、
前記表示部の表示画面における上下方向を時間軸として、前記表示画面における前記体験画像の位置が決定されていることを特徴とする請求項１３乃至１７のいずれか１項に記載の移動体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示システム、表示方法，及び移動体に関し、特に詳しくは人の体験に応じた体験画像を表示するための表示システム、表示方法，及び移動体に関する。
【背景技術】
【０００２】
近年、人の体験を記憶、利用する体験メディアを構築する技術が開発されている（非特許文献１）。例えば、人の体験をデジタル化するため、体験に応じた画像を取得している。このようにすることによって、体験を通じた知識を共有化することができる。
【０００３】
このような体験の記録（ログ）は、ライフログと呼ばれている（非特許文献２）。ライフログとは、体験の記録、共有をコンセプトに、映像情報に音声情報、位置情報、生体情報などを関連付けて、体験をデジタル化し、記録・共有することを目指す新しいメディアである。非特許文献２では、例えば、ウェアラブルシステム、車載カメラを用いて、ライフログが取得されている。
【０００４】
【特許文献１】特表２００６−５０２４５３号公報
【非特許文献１】角康之、河村竜幸、"体験メディアの構築に向けて：体験の記録・利用の技術動向"、２００６年６月９日、Ｔｈｅ  ２０ｔｈ  Ａｎｎｕａｌ  Ｃｏｎｄｅｒｅｎｃｅ  ｏｆ  ＪＳＡＩ，２００６、［ＯＮＬＩＮＥ］、平成２０年４月１５日検索、インターネット〈URL:http://www.jaist.ac.jp/jsai2006/program/pdf/100151.pdf〉
【非特許文献２】相澤清晴"ライフログの取得と処理  −ウエアラブル，ユビキタス，車−"、２００５年６月１７日  Ｔｈｅ  １９ｔｈ  Ａｎｎｕａｌ  Ｃｏｎｄｅｒｅｎｃｅ  ｏｆ  ＪＳＡＩ，２００５、［ＯＮＬＩＮＥ］、平成２０年４月１５日検索、インターネット〈URL:hthttp://www-kasm.nii.ac.jp/jsai2005/schedule/pdf/000141.pdf〉
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ライフログの体験画像を有効利用するためには、体験画像を効果的に表示することが望まれている。しかしながら、このようなライフログの体験画像を効果的に表示することは提案されていない。
【０００６】
また、レースの体験画像を表示するシステムが特許文献１に開示されている。特許文献１のシステムでは、ビデオ（画像）、オーディオ（音声）、及びテレメトリ（位置）データが収集されている。例えば、乗員の顔や車両の前後の画像がカメラによって取得される。また、エンジン音や排気音のようなオーディオデータを収集している（段落００２３）。ビーコンセンサを用いて、トラック上の車両の現在地を特定している（段落００２５）。
そして、表示画面中に、トラック位置と、ユーザ視点の画像が画面上に表示される。
【０００７】
しかしながら、特許文献１では、トラック上の位置を示すインジケータ・マークを表示して、そのインジケータマークの位置における画像を表示するのみである。すなわち、現在位置における画像を表示するのみであるため、移動先の情報については、視認することができない。従って、ある位置で既に取得した体験画像を他の位置では、参照することができない。さらには、他の車両のカメラで取得された画像を表示することができない。
【０００８】
上記のように、人の体験に応じた体験画像を有効利用するために、効果的に表示することができないという問題点がある。
【０００９】
本発明は、人の体験に応じた体験画像を効果的に表示することができる表示システム、表示方法、及び移動体を提供することを目的とする。
【課題を解決するための手段】
【００１０】
本発明の第１の態様にかかる表示システムは、移動体に搭乗したユーザの体験に応じた体験情報を表示する表示システムであって、ユーザの体験に応じた体験画像を取得するカメラが設置された複数の移動体と、前記体験画像を取得したときの前記移動体の位置情報を測定する測位手段と、前記カメラによって取得された体験画像と、前記位置情報とを対応付けて記憶する体験情報記憶部と、地図情報を記憶する地図情報記憶部と、前記地図情報に基づいて地図を表示するとともに、前記位置情報に応じて前記地図上に複数の前記体験画像を表示する表示部と、を備えるものである。これにより、地図上に複数の体験画像を表示することができるため、体験画像を効果的に表示することができる。
【００１１】
本発明の第２の態様にかかる表示システムは、上記の表示システムであって、一連の体験における前記体験画像を含むログの検索条件を入力する入力部をさらに備え、前記検索条件に合致するログに含まれる体験画像を抽出して、前記表示部に表示するものである。これにより、所望のログに含まれる体験画像を表示することができるため、体験画像を有効利用することができる。
【００１２】
本発明の第３の態様にかかる表示システムは、上記の表示システムであって、前記検索条件として、ユーザの属性が入力され、前記ユーザの属性が合致するログに含まれる体験画像を抽出して、前記表示部に表示するものである。所望のユーザが取得した体験画像を表示することができるため、体験画像を有効利用することができる。
【００１３】
本発明の第４の態様にかかる表示システムは、上記の表示システムであって、前記表示部に同時に表示されている前記複数の体験画像には、異なる移動体のカメラによって取得された体験画像が含まれていることを特徴とするものである。これにより、主観的な画像だけでなく、客観的な画像を表示することができるため、体験画像を効果的に表示することができる。
【００１４】
本発明の第５の態様にかかる表示システムは、上記の表示システムであって、前記表示部に表示されている地図上で特定の地点を指定することで、前記特定の地点に関する説明が表示されることを特徴とするものである。これにより、体験情報以外の情報が表示されるため、効果的な表示が可能になる。
【００１５】
本発明の第６の態様にかかる表示システムは、上記の表示システムであって、前記地図が俯瞰的に表示され、前記表示部の表示画面における上下方向を時間軸として、前記表示画面における前記体験画像の位置が決定されていることを特徴とするものである。これにより、体験画像の取得位置だけでなく、取得時間についても即座に把握できるようになる。よって、より効果的な表示が可能になる。
【００１６】
本発明の第７の態様にかかる表示方法は、移動体に搭乗したユーザの体験に応じた体験情報を表示する表示方法であって、複数の移動体に搭載したカメラで前記ユーザの体験に応じた体験画像を撮影するステップと、前記体験画像を取得したときの前記移動体の位置情報を測定するステップと、地図情報に基づいて地図を表示するとともに、前記位置情報に応じて前記地図上に複数の前記体験画像を表示するステップと、を備えるものである。これにより、地図上に複数の体験画像を表示することができるため、体験画像を効果的に表示することができる。
【００１７】
本発明の第８の態様にかかる表示方法は、上記の表示方法であって、一連の体験における前記体験画像を含むログの検索条件を入力するステップをさらに備え、前記検索条件に合致するログに含まれる体験画像を抽出して、表示するものである。これにより、所望のログに含まれる体験画像を表示することができるため、体験画像を有効利用することができる。
【００１８】
本発明の第９の態様にかかる表示方法は、上記の表示方法であって、前記検索条件として、ユーザの属性を入力して、前記ユーザの属性が合致するログに含まれる体験画像を抽出して、表示するものである。所望のユーザが取得した体験画像を表示することができるため、体験画像を有効利用することができる。
【００１９】
本発明の第１０の態様にかかる表示方法は、上記の表示方法であって、同時に表示されている前記複数の体験画像には、異なる移動体のカメラによって取得された体験画像が含まれていることを特徴とするものである。
【００２０】
本発明の第１１の態様にかかる表示方法は、上記の表示方法であって、表示されている地図上で特定の地点を指定することで、前記特定の地点に関する説明が表示されることを特徴とするものである。これにより、体験情報以外の情報が表示されるため、効果的な表示が可能になる。
【００２１】
本発明の第１２の態様にかかる表示方法は、上記の表示方法であって、前記地図が俯瞰的に表示され、前記表示部の表示画面における上下方向を時間軸として、前記表示画面における前記体験画像の位置が決定されていることを特徴とするものである。これにより、体験画像の取得位置だけでなく、取得時間についても即座に把握できるようになる。よって、より効果的な表示が可能になる。
【００２２】
本発明の第１３の態様にかかる移動体は、ユーザの体験に応じた体験画像を取得するカメラと、前記体験画像を取得したときの前記移動体の位置情報を測定する測位手段と、前記カメラによって取得された体験画像と、前記位置情報とを対応付けて記憶する体験情報記憶部と、地図情報を記憶する地図情報記憶部と、前記地図情報に基づいて地図を表示するとともに、前記位置情報に応じて前記地図上に複数の前記体験画像を表示する表示部と、を備えるものである。これにより、地図上に複数の体験画像を表示することができるため、体験画像を効果的に表示することができる。
【００２３】
本発明の第１４の態様にかかる移動体は、上記の移動体であって、一連の体験における前記体験画像を含むログの検索条件を入力する入力部をさらに備え、前記検索条件に合致するログに含まれる体験画像を抽出して、前記表示部に表示するものである。これにより、所望のログに含まれる体験画像を表示することができるため、体験画像を有効利用することができる。
【００２４】
本発明の第１５の態様にかかる移動体は、上記の移動体であって、前記体験情報記憶部には、他の移動体に搭載されたカメラで取得された体験画像が記憶され、前記他の移動体のカメラで取得した体験画像を、その位置情報に応じて前記地図上に表示するものである。所望のユーザが取得した体験画像を表示することができるため、体験画像を有効利用することができる。
【００２５】
本発明の第１６の態様にかかる移動体は、上記の移動体であって、前記移動体のカメラで取得した主観的な体験画像と、他の移動体のカメラで取得した客観的な体験画像を同時に前記地図上に表示するものである。これにより、客観的な体験画像を表示できるため、より効果的に表示することができる。
【００２６】
本発明の第１７の態様にかかる移動体は、上記の移動体であって、前記表示部に表示されている地図上で特定の地点を指定することで、前記特定の地点に関する説明が表示されることを特徴とするものである。これにより、体験情報以外の情報が表示されるため、効果的な表示が可能になる。
【００２７】
本発明の第１８の態様にかかる移動体は、上記の移動体であって、前記地図が俯瞰的に表示され、前記表示部の表示画面における上下方向を時間軸として、前記表示画面における前記体験画像の位置が決定されていることを特徴とするものである。これにより、体験画像の取得位置だけでなく、取得時間についても即座に把握できるようになる。よって、より効果的な表示が可能になる。
【発明の効果】
【００２８】
本発明によれば、人の体験に応じた体験画像を効果的に表示することができる表示システム、表示方法、及び移動体を提供することができる。
【発明を実施するための最良の形態】
【００２９】
本実施の形態にかかる表示システムについて図１を用いて説明する。図１は、本実施の形態にかかる表示システム１００の構成を模式的に示す図である。表示システム１００は、ユーザが体験した画像や音などの体験情報を出力するためのシステムである。表示システム１００は、移動体１とサーバ装置２を有している。図１では、３台の移動体１が示されているが、移動体１の数は特に限定されるものではない。すなわち、１台以上の移動体１が設けられていればよい。また、複数ユーザ間における体験情報の共有化という観点から、移動体１を複数設けることが好ましい。もちろん、１台の移動体１に異なるユーザが搭乗して、体験情報を共有化してもよい。移動体１は、ライフログを作成するための体験情報を取得する。ライフログとは、体験の記録、共有をコンセプトに、映像情報に音声情報、位置情報、生体情報などを関連付けて、体験をデジタル化し、記録・共有することを目指す新しいメディアである。
【００３０】
移動体１は、ユーザが搭乗可能な移動手段である。移動体１としては、例えば、パーソナルモビリティ、自動車を用いることができる。移動体１は、一人乗りのパーソナルモビリティであることが好ましい。パーソナルモビリティとしては、例えば、トヨタ自動車株式会社製のＰＭ、ｉ―ＲＥＡＬ、ｉ―ｓｗｉｎｇ、ｉ―ｕｎｉｔ、ｉ−ｆｏｏｔが挙げられる。もちろん、移動体１の構成に付いては特に限定されるものではなく、上記以外の移動体であってもよい。移動体１は、搭乗者であるユーザの体験に応じた体験情報を取得する。移動体１には、カメラやマイクが設けられており、移動体１周辺における風景と音が記録される。これらの画像や音のデータを収集することで、ライフログを作成することができる。すなわち、ライフログ用のコンテンツとして、画像データや音データが取得される。
【００３１】
移動体１はサーバー装置２と通信する。無線通信によって、移動体１で取得した体験情報などの必要なデータがサーバ装置に送信される。そして、サーバ装置２は、移動体１からの体験情報のデータを記憶する。サーバ装置２は、複数の移動体１からの体験情報のデータを時系列に沿って蓄積していく。さらに、サーバ装置２は、移動体１に搭乗しているユーザからの求めに応じて、蓄積したデータを、移動体１に送信する。このように、サーバ装置２と移動体１の間で、データの送受信が行われる。また、サーバー装置２と移動体１とがインターネットなどの通信網を介して接続されていてもよい。すなわち、既存のネットワークを介して、データの送受信を行ってもよい。
【００３２】
さらに、移動体１はお互いの画像を取得することができる。すなわち、移動体１が他の移動体１の近傍を移動している場合、移動体１が他の移動体１の画像を取得する。これにより、他の移動体１の客観的な体験情報が取得される。
【００３３】
本実施の形態にかかる移動体１について、図２、及び図３を用いて説明する。図２は、移動体１の構成を模式的に示す図である。図３は、図２に示す移動体１を側方から見た様子を示す図である。図３では、左側が移動体１の前方になっている。移動体１は、移動領域である地面上を、搭乗者を載置した状態で、該搭乗者の操作により移動制御可能な倒立振子型移動体である。
【００３４】
図２に示すように、移動体１は、搭乗者６０を載置する搭乗席１１と第１駆動輪３１と第２駆動輪３２と制御ボックス２０とを備え、これらが移動体本体１０を構成する。後述するように、移動体本体１０には、ライフログ用の画像を取得するためのライフログ用カメラ４２と表示デバイス４１が取り付けられている。移動体１０のライフログ用カメラ４２及び表示デバイス４１を除いた構成を移動体本体１０とする。搭乗席１１は座席の形状を有している。そして、この搭乗席１１の上に、搭乗者６０が座る。
【００３５】
第１駆動輪３１、及び第２駆動輪３２は、同軸上に配置された１対の対向する回転体である。第１駆動輪３１、及び第２駆動輪３２は制御ボックス２０に対して回転可能に保持されている。第１駆動輪３１、及び第２駆動輪３２は制御ボックス２０内に設けられている駆動モータ２１によって、回転する。駆動モータ２１はサーボモータなどである。第１駆動輪３１、及び第２駆動輪３２が回転することによって、第１駆動輪３１、及び第２駆動輪３２が回転する。これにより、移動体１が前進、又は後退する。また、制御ボックス２０には、第１駆動輪３１、及び第２駆動輪３２に対してそれぞれ、駆動モータ２１が設けられている。第１駆動輪３１、及び第２駆動輪３２は独立に回転する。第１駆動輪３１、及び第２駆動輪３２を独立して制御することで、左折、右折、その場旋回などを行うことができる。
【００３６】
例えば、搭乗者６０が図示しない操作レバーなどの操作手段を操作することによって、移動体１が移動する。例えば、駆動モータ２１に設けられているエンコーダによって、第１駆動輪３１、及び第２駆動輪３２の回転速度を検出する。そして、第１駆動輪３１、及び第２駆動輪３２の回転速度が搭乗者６０の操作に応じた指令値になるように、フィードバック制御する。また、ジャイロセンサ等からのセンサ信号に応じて、移動体本体１０が倒立するようにフィードバック制御している。こうすることで、搭乗者６０の操作にしたがって、倒立を維持したまま、移動体１が移動する。
【００３７】
制御ボックス２０の中には駆動モータ２１、及び制御部５０が配設されている。また、制御ボックス２０には、駆動モータ２１などの電源を供給するバッテリ（図示せず）などが設けられている。制御ボックス２０は、搭乗席１１の直下に配置されている。そして、制御ボックス２０に取り付けられている支持部材等を介して搭乗席１１が支持される。
【００３８】
制御部５０は、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、通信用のインターフェースなどを有する演算処理装置であり、駆動モータ２１の動作を制御するための処理を行う。また、制御部５０は、着脱可能なＨＤＤ、光ディスク、光磁気ディスク等を有し、各種プログラムや制御パラメータなどを記憶し、そのプログラムやデータを必要に応じてメモリ（不図示）等に供給する。また、制御部５０には、ライフログを取得するためのプログラムが格納されている。
【００３９】
さらに、移動体本体１０には、ライフログ用カメラ４２が設置されている。ライフログ用カメラ４２は、例えば、ＣＣＤカメラなどのデジタルカメラである。そして、ライフログ用カメラ４２で取得された画像は、制御部５０に設けられた記憶装置に保存される。ライフログ用カメラ４２は、人の体験に応じた体験画像を取得する体験用カメラである。ライフログ用カメラ４２で取得された風景画像などが時系列にしたがって格納されていく。
【００４０】
ライフログ用カメラ４２としては、パノラマカメラを用いることが好ましい。具体的には、１２００×４００画素以上で、１２０°以上の視野角を有する高精細パノラマ画像を取得するパノラマカメラを用いることができる。これにより、臨場感の高い画像を取得することができる。
【００４１】
ライフログ用カメラ４２は、搭乗者６０の体験に応じた景色を撮像するためのカメラである。ライフログ用カメラ４２は、前方を向いており、搭乗者６０の視線方向の景色を撮像する。ライフログ用カメラ４２は、例えば、搭乗席１１の上部に取り付けられている。従って、ライフログ用カメラ４２は、搭乗者の顔位置の近くに設置される。ライフログ用カメラ４２は静止画を取得する。すなわち、制御部５０には、デフォルトの撮影条件が設定されている。このデフォルトの撮影条件で、搭乗者６０が見ている景色をライフログ用カメラ４２が連続撮影する。例えば、ライフログ用カメラ４２は、一定の時間間隔で静止画を撮像する。なお、ライフログ用カメラ４２の撮影条件を、搭乗者の動作や操作に応じて変更するようにしてもよい。さらに、ライフログ用カメラ４２の向きを搭乗者の動作や操作に応じて、変えてもよい。制御部５０がライフログ用カメラ４２を制御する。
【００４２】
ライフログ用カメラ４２は、搭乗者６０の視線方向を撮像する。すなわち、視線方向の風景、人、物等の画像を取得する。これにより、搭乗者の主観的な体験画像を取得することができる。さらに、ライフログ用カメラ４２は、近傍に存在する他の移動体１を撮像する。例えば、移動体１が他の移動体１の位置情報を取得して、他の移動体１が移動体１の近傍を移動しているか判定する。すなわち、自己の位置情報と、他の移動体１の位置情報を比較して、移動体１の近傍を他の移動体１が移動しているかを判定する。そして、他の移動体１が移動体１の近傍を移動している場合、移動中の他の移動体１が撮像される。移動体１をライフログ用カメラ４２の撮像範囲に収めるために、無線通信によって他の移動体１の方向を特定する。具体的には、他の移動体１の位置情報を受信して、他の移動体１の方向を特定する。そして、その方向にライフログ用カメラ４２を向けて撮像する。あるいは画像認識を行って、他の移動体１を撮像してもよい。すなわち、画像認識によって、ライフログ用カメラ４２の撮影範囲内に他の移動体１があると判定された場合、ライフログ用カメラ４２が撮像する。これにより、他の移動体１の画像を取得することができる。
【００４３】
ライフログ用カメラ４２には、マイク４８が搭載されている。すなわち、ライフログ用カメラ４２はマイク内蔵カメラである。このマイク４８が周囲の音を集音する。このように、移動体１が移動中に、移動体１の周辺で発生した音が集音される。マイク４８によって、搭乗者の体験に応じた音データを取得する。これにより、ライフログ用のコンテンツとなる、音データを取得することができる。なお、音データは、画像データを取得したタイミングで必ず録音されなくてもよい。例えば、周囲の音が大きくなった場合のみ、音データを取得してもよい。
【００４４】
さらに、移動体本体１０には、表示デバイス４１が搭載されている。表示デバイス４１は、搭乗者６０の顔の前方に配置されている。もちろん、表示デバイス４１は、運転に支障のない位置に配置されている。搭乗者６０が運転中に、表示デバイス４１に表示されている画面を視認することができる。例えば、表示デバイス４１としては、タッチパネル型の液晶ディスプレイを用いることができる。表示デバイス４１は、体験画像や地図を表示する端末となる。表示デバイス４１は、体験情報を掲示するビュワーディスプレイとなる。表示デバイス４１は、搭乗者６０が視認しやすい位置に設置されていることが好ましい。
【００４５】
測位手段４７は、カーナビゲーションシステムや携帯電話に搭載されているＧＰＳ受信機などを有し、現在位置を取得する。すなわち、測位手段４７は、人工衛星から送信されるＧＰＳ信号に基づいて、位置を測定する。これにより、移動体１の位置が定期的に測定される。例えば、測位手段４７は、移動体１の緯度と経度を測定する。すなわち、測位手段４７で測定した位置情報は、緯度、及び経度の形で表される。もちろん、ＧＰＳ以外の測位手段を用いてもよい。例えば、オドメトリを測位手段として用いてもよく、これらを組み合わせてもよい。
【００４６】
通信手段４９は、アンテナなどを有しており、サーバ装置２に対してデータの送受信を行う。さらに、移動体１同士で通信することも可能である。例えば、通信手段４９は、サーバ装置２に対して体験情報などのデータを送信する。さらに、通信手段４９は、サーバ装置２から送られたデータを受信する。なお、サーバ装置２からは、表示デバイス４１、及びスピーカ４３での表示、音声出力に必要なデータが送信される。
【００４７】
搭乗者６０が移動体１に搭乗すると、表示デバイス４１、ライフログ用カメラ４２などの動作が自動的に開始する。あるいは、搭乗者６０の操作によって、これらの動作が開始してもよい。そして、搭乗者６０が移動体１に搭乗している間、ライフログ用カメラ４２は、ライフログのコンテンツとなる体験画像を取得する。さらに、ライフログ用カメラ４２に搭載されたマイク４８がそのときに発生した音を集音する。これにより、一連の体験における体験情報が、蓄積されていく。また、表示デバイス４１は、移動している空間の地図を表示する。
【００４８】
次にサーバ装置２について図４を用いて説明する。図４は、サーバ装置２の構成を模式的に示すブロック図である。サーバ装置２は、例えば、コンピュータ等の情報処理装置である。すなわち、サーバ装置２は、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、通信用のインターフェースなどを有する演算処理装置であり、移動体１から収集した各種データを記憶して、それに対する演算処理を行う。また、サーバ装置２は、着脱可能なＨＤＤ、光ディスク、光磁気ディスク等を有し、各種プログラムや制御パラメータなどを記憶し、そのプログラムやデータを必要に応じてメモリ（不図示）等に供給する。また、サーバ装置には、ライフログ用のデータを取得、管理、処理するためのプログラムが格納されている。
【００４９】
サーバ装置２は、体験情報記憶部５１、ユーザ情報記憶部５２、地図情報記憶部５３、演算処理部５４、通信部５５、入出力部５６を有している。なお、これらの各部は、物理的に単一な構成となっていなくもよい。さらには、各部が共通する構成となっていてもよい。また、一部をソフトウェアによって構成しても良い。
【００５０】
入出力部５６は、入力機器、及び出力機器を有している。入力機器としては、例えば、マウス、入力ボタン、ポインティングデバイス、キーボードがある。また、出力機器としては、モニタなどがある。そして、サーバ装置２は、モニタの表示画面上に演算処理結果などを出力する。通信部５５は、移動体１と通信を行うための、アンテナなどを有している。この通信部５５によって、データの送受信が行われる。なお、インターネットなどを介してデータの送受信を行う場合、通信部５５が、ネットワークインタフェースとなる。演算処理部５４は、プロセッサなどを用いて、通信や入出力に必要な各種演算処理を行う。すなわち、演算処理部５４は、体験情報記憶部５１、ユーザ情報記憶部５２、地図情報記憶部５３、通信部５５、入出力部５６における各処理を制御する。
【００５１】
地図情報記憶部５３は、移動体１が移動する空間の地図情報を記憶する。例えば、道路や建物などの位置（緯度、経度）、大きさなどが格納されている。具体的には、ナビゲーションシステムなどに用いられる地図情報と同様のものを用いることが可能である。たとえば、道路や建物などに関するデータが含まれている。
【００５２】
体験情報記憶部５１は、記憶媒体などを有し、移動体１が収集した体験情報を記憶する。すなわち、通信部５５によって受信した移動体１からの体験情報が体験情報記憶部５１に書き込まれる。従って、体験情報記憶部５１には、移動体１が移動中に取得した画像データや音データが記憶されている。体験情報記憶部５１は、例えば、体験情報を時系列に沿ったデータベースとして記憶する。体験情報記憶部５１に記憶されるデータの一例を図５に示す。体験情報は、図５に示すような表形式になっている。図５に示すように、体験情報には、画像、位置、領域、音声、時間、ＩＤ、ログＮｏ．などの項目が存在している。図５では、横一列に並んだ項目が対応づけられている。そして、体験情報には、画像、位置、領域、音声、時間、ＩＤ、ログＮｏ．などの項目が対応付けられて、図５に示すような表形式で保存されている。
【００５３】
画像の項目は、ライフログ用カメラ４２によって取得した画像データに対応するものである。画像の項目には、例えば、画像データのファイル名が格納されている。この画像の項目を参照することで、画像データのファイルを特定することができる。画像データ毎に異なる番号や文字列が付される。位置の項目は、その画像データを所得した時の移動体１の位置を示すものである。すなわち、測位手段４７によって取得された位置情報が、格納されている。この位置の項目を参照することで、データの取得位置を特定することができる。具体的には、移動体１の緯度、及び経度が位置情報として記憶される。例えば、図５の表では、ファイル名が「ｉｍｇ０００１」の画像データは、「ｐｏｓ．０００１」の位置で取得されたことになる。
【００５４】
領域の項目は、移動体１が移動している領域を示すものである。例えば、大学、公園、遊園地、美術館、博物館、商業施設などの中を移動体１が移動している場合、その場所を示す領域名が格納される。この領域の項目を参照することで、移動体１が移動していた領域を特定することができる。移動体１がＡＡ大学内を移動している場合、領域の項目には、ＡＡ大学と示される。これらの領域を示す領域情報は、後述する地図情報に対応している。地図情報記憶部５３に記憶されている地図上において、各領域の範囲を設定しておく。例えば、各領域に含まれる緯度、及び経度の範囲を指定しておく。移動体１の位置情報に基づいて、移動体１がいずれの領域を移動しているかを判別することができる。このようにすることで、移動体１の移動に応じて、領域が自動的に切り替わる。なお、領域の項目を、移動体１が判別してもよいし、サーバ装置２が判別してもよい。あるいは、領域の項目を、搭乗者６０が入力するようにしてもよい。
【００５５】
音声の項目は、マイク４８によって集音した音データに対応するものである。音声の項目には、例えば、画像データを取得したときに、集音した音データのファイル名が格納されている。音データ毎に異なる番号や文字列が付される。音データのファイル名を参照することで、音データのファイルを特定することができる。なお、音データには、人の発声した音声に限らず、移動中に周囲で発生した音が含まれているものとする。移動体１が移動中に取得した、所定時間の音データが記憶されている。
【００５６】
時間の項目は、画像データ、及び音データを取得した時間に対応するものである。時間の項目には、データを取得した日付と時間が格納されている。ＩＤの項目は、ユーザを識別する識別子に対応するものである。ＩＤの項目には、搭乗者６０を識別するための番号や文字列が格納されている。ＩＤを参照することで、搭乗者６０を特定することができる。搭乗者６０毎に異なるＩＤが付される。
【００５７】
ログＮｏ．の項目は、ライフログの番号を示すものである。このログＮｏ．は、搭乗者６０の体験した履歴に応じて決まる。すなわち、ある搭乗者６０の一連の体験を同じログＮｏとする。例えば、２００８年７月７日に搭乗者６０が移動体１に搭乗して、自宅からＡＡ大学に移動したときを考える。自宅からＡＡ大学まで移動したときの体験を一連の体験とみなして、これらのデータのログＮｏ．をＬｏｇ．０００１とする。また、次の日に搭乗者６０が自宅からＢＢ公園まで移動したときの体験を一連の体験とみなして、これらのデータのログＮｏ．をＬｏｇ０００２とする。同様に、別の搭乗者６０による体験情報についても異なるログＮｏを付加する。このように、一連の体験には同じログＮｏ．を付加する。従って、ログＮｏ．が同じである場合、それらの体験情報は、一連の体験で取得したものとみなすことができる。１つのライフログには、複数の体験画像が含まれることになる。このように、ライフログを管理するために、体験情報にログＮｏ．の項目を設けている。なお、いずれの体験を一連の体験とみなすかは特に限定されるものではない。例えば、自宅からＡＡ大学までの移動の前半を一連の体験とみなし、後半を別の一連の体験とみなしてもよい。また、自宅からＡＡ大学までの往復を一連の体験とみなして、同じログＮｏ．としてもよい。搭乗者６０が移動体１に搭乗している間を一連と体験とし、搭乗者６０が移動体１から降車したときに一連の体験が終了したとしてもよい。すなわち、搭乗者６０が搭乗したときから降車するまでの間に取得した体験画像を同じログＮｏ，としてもよい。
【００５８】
例えば、「ｕｓｅｒ０００１」のＩＤを有する搭乗者６０が搭乗する移動体１は、「ｔｉｍｅ０００１」の時間に、「ｐｏｓ．０００１」の位置を走行していたことになる。さらに、「ｔｉｍｅ０００１」の時間で、「ｉｍｇ０００１」の画像データと、「ｓｏｕｎｄ０００１」の音データを取得したことになる。換言すると、「ｐｏｓ．０００１」の位置において、「ｉｍｇ０００１」の画像データと「ｓｏｕｎｄ０００１」の音データを取得したことになる。そして、「ｔｉｍｅ０００１」の前後のデータには、同じログＮｏ．が付加される。
【００５９】
そして、移動体１で取得された画像データ、及び音データ等が、サーバ装置２に送信される。そして、サーバ装置２は、各移動体１から送信されたデータを順次記録していく。画像データ、及び音データには、上記のように、位置、領域、時間、ＩＤ、ログＮｏ．が付加されている。すなわち、サーバ装置２は、画像データ、及び音データに、位置、領域、時間、ＩＤ、ログＮｏ．が対応づけられたデータを受信する。受信したデータを時系列に従ったデータベースとして記憶する。このように、複数の移動体１からの体験情報がサーバ装置２に記録されていく。サーバ装置２は、ライフログ用のコンテンツに必要な画像データ、及び音データを取得時間、及び取得位置等に対応付けて、記憶する。なお、位置、領域、時間、ＩＤ、ログＮｏ．の付加情報は、サーバ装置２において付加されてもよく、移動体１において付加されてもよい。移動体１からの体験情報を受信すると、体験情報記憶部５１は逐次更新されていく。
【００６０】
図４に示すように、サーバ装置２には、ユーザ情報記憶部５２が設けられている。ユーザ情報記憶部５２は、移動体１に搭乗する搭乗者６０の情報を記憶する。ユーザ情報記憶部５２に記憶されているユーザ情報について、図６を用いて説明する。図６は、ユーザ情報記憶部５２に記憶されているユーザ情報を示す表である。
【００６１】
ユーザ情報記憶部５２は、各ユーザのＩＤ、名前、年齢、性別、所属、趣味嗜好などが対応付けられて、記憶している。すなわち、ＩＤに対して、名前、年齢、性別、所属、趣味嗜好がひも付けられている。これらが、各ユーザの属性となる。ＩＤは図５で示されたＩＤと同じものであり、搭乗者６０ごとに異なっている。そして、そのＩＤのユーザの名前、年齢、性別が入力されている。また、名前の代わりに。あるいは名前とともにハンドルネームなどを用いてもよい。所属は、ユーザが所属する会社、学校、団体などを示すものである。たとえば、ユーザがＡＡ大学の学生である場合は、ＡＡ大学と入力されている。趣味嗜好や、ユーザの趣味や嗜好を示すものである。各ユーザに関する情報が、データベースとして、ユーザ情報記憶部５２に記憶されている。なお、ユーザ情報の入力は、サーバ装置２において行われる。あるいは、移動体１でユーザ情報を入力して、サーバ装置２に送信するようにしてもよい。また、異なるコンピュータによって、ユーザ情報を入力してもよい。搭乗者６０、あるいはシステムの管理者等が、予めユーザ登録を行っておく。
【００６２】
次に、移動体１に設けられた表示デバイス４１について、図７を用いて説明する。図７は、表示デバイス４１の構成を示すブロック図である。表示デバイス４１は、表示部７１、入力部７２、体験情報記憶部７３、演算処理部７４、地図情報記憶部７５、設定記憶部７６、音声出力部７７を有している。
【００６３】
表示部７１は、液晶ディスプレイなどを有し、移動体１に搭乗している搭乗者６０に対して、体験情報を掲示する。さらに、移動体１が移動している空間の地図などを表示する。入力部７２は、搭乗者６０が操作可能な、タッチパネルやポインティングデバイスやキーボードを有している。搭乗者６０が入力部７２を操作して、体験情報を表示するために必要なデータを入力する。搭乗者６０による操作は、この入力部７２によって行われる。搭乗者６０が入力部を操作することで、例えば、表示画面上におけるクリックや、文字入力が行われる。
【００６４】
例えば、搭乗者６０は入力部７２を操作して、リアルタイムのライフログ、及び過去のライフログのいずれを表示するかを選択する。すると、選択したライフログが、表示部７１上に表示される。さらに、搭乗者６０が表示したいライフログを指定することができる。また、表示部７１上には、移動体１が移動している地点周辺やその他の地点周辺の地図が表示される。入力部７２によって、地図の縮尺などの表示設定を変更することができる。そして、表示画面の表示された地図には、体験画像が表示される。
【００６５】
体験情報記憶部７３は、ライフログ用カメラ４２で取得した画像データや、マイク４８で取得した音データを記憶する。これらの体験情報記憶部７３で記憶された体験情報のデータがサーバ装置２に送信される。さらに、体験情報記憶部７３は、サーバ装置２から送信された体験情報のデータを記憶する。サーバ装置２は、一部の体験情報のみを抽出して、移動体１に送信している。これにより、体験情報記憶部７３に記憶する体験情報のデータ量を少なくすることができる。
【００６６】
地図情報記憶部７５は、移動体１が移動する空間の地図情報を記憶する。例えば、道路や建物などの位置、大きさ、配置などに関する情報が格納されている。具体的には、カーナビゲーションシステムなどに用いられる地図情報と同様のものを用いることが可能である。たとえば、道路や建物などに関するデータが含まれている。また、地図情報記憶部７５に記憶されている情報は地図情報記憶部５３に記憶されている情報と同じものであってもよい。この地図情報記憶部７５に記憶されている地図情報に基づいて、表示部７１に地図が表示される。すなわち、移動体１が移動している地点周辺の地図が表示される。あるいは、搭乗者６０が指定した地点周辺の地図が表示される。さらには、地図情報記憶部７５には、標識となる建物などが登録されている。さらに、標識となる建物に関する情報が登録されている。例えば、博物館、美術館などが標識となる建物として登録されている。
【００６７】
音声出力部７７は、スピーカ４３を用いて、音声出力に必要な処理を行う。音声出力部７７は、体験情報に含まれる音データを出力する。さらに、音声出力部７７は、入力部７２の操作音などを出力する。設定記憶部７６は、表示部７１、入力部７２、音声出力部７７の各種設定を記憶する。たとえば、スピーカの音量、表示部７１に表示される地図の縮尺などを記憶する。さらには、地図の表示形式に関する設定などを記憶する。なお、これらの設定は、入力部７２を操作することで、変更可能になっている。このように、設定記憶部７６は、表示や音声出力に関する設定を記憶する。
【００６８】
演算処理部７４は、プロセッサ等を用いて、表示部７１、入力部７２、体験情報記憶部７３、地図情報記憶部７５、設定記憶部７６、音声出力部７７における各処理を制御する。たとえば、入力部７２の入力に応じた演算処理を行う。そして、その演算処理結果が、表示部７１に表示されたり、音声出力部７７から出力されたりする。具体的には、搭乗者６０による入力操作に応じて、体験情報記憶部７３に記憶されている体験情報が表示される。表示部７１、入力部７２、体験情報記憶部７３、演算処理部７４、地図情報記憶部７５、設定記憶部７６、音声出力部７７における各処理は、予め記憶されているプログラムによって、実行される。すなわち、ライフログのビューワーを構成するプログラムによって、体験の共有化を図っている。
【００６９】
体験情報の表示方法について、図８乃至図１１を用いて説明する。図８は、体験情報の表示方法を示すフローチャートである。図９乃至図１１は、表示デバイス４１の表示部７１の表示画面を示す図である。ここでは、既に取得された体験情報を参照して表示が行われる。すなわち、予め体験情報を取得しておき、体験情報に含まれる体験画像と画像取得位置などに基づいて、ライフログを表示する。予め体験画像を取得して、その体験画像に取得位置を対応付けて記憶しておく。
【００７０】
まず、搭乗者６０がリアルタイムのライフログ、及び過去のライフログの一方を選択する（Ｓ１０１）。すなわち、搭乗者６０が入力部７２を操作することによって、表示画面の表示するライフログを現在のものとするか、過去のものとするかを選択する。
【００７１】
そして、ライフログの絞込み項目を入力する（ステップＳ１０２）。すなわち、ライフログを抽出するための、絞り込み項目を入力する。絞り込み項目としては、撮影場所、撮影時間、ユーザ属性などがある。搭乗者６０が例えば、絞り込み項目の一つである撮影場所を選択する。具体的には、ＡＡ大学などの領域の名称や、住所や、自己の現在位置付近などを入力する。なお、円の半径は、搭乗者６０によって設定されていてもよい。
【００７２】
また、複数の搭乗者６０からライフログを収集している場合、ライフログを取得したユーザの属性などを選択する。すなわち、検索条件として、ユーザの属性を入力する。例えば、ユーザの年齢、性別、趣味嗜好、所属などを入力する。あるいは、他のユーザの名前などを入力してもよい。ＳＮＳでライフログを共有する場合は、仲間のハンドルネームなどを入力しても良い。あるいは同じ所属や趣味嗜好を有する他の搭乗者６０がライフログを観ることが可能になる。搭乗者６０本人の名前を絞り込み項目にすることで、自己が取得したライフログのみを抽出することができる。ユーザの属性が合致するライフログを抽出する。そして、抽出されたライフログの体験画像を同様の表示する。
【００７３】
また、過去のライフログを選択した場合、撮影時間を入力してもよい。例えば、撮影開始日時、撮影終了時間、撮影した年、撮影した月、撮影した日、撮影した時間帯などを入力する。すなわち、検索条件として撮影時間を入力する。そして、撮影時間が合致したライフログに含まれる体験画像を抽出して、表示する。
【００７４】
なお、これらの入力は、ウィザード形式で行うようにしてもよい。すなわち、表示部７１の表示画面上にウィザード画面を表示させる。そして、そのウィザード画面に従って、搭乗者６０が入力を行っていく。ウィザード画面に従ってライフログの検索条件が決定する。
【００７５】
ここまでに入力された内容は、移動体１からサーバ装置２に送信される。そして、入力された内容に基づいて、サーバ装置２が、体験情報記憶部５１からライフログを抽出する。そして、抽出されたライフログの体験情報が、サーバ装置２から移動体１に送信される。このように、サーバ装置２は、入力された情報に基づいて、ライフログを検索する。サーバ装置２は、入力された検索条件に合致するライフログを、移動体１に送信する。
【００７６】
例えば、現在位置を中心とした半径５００ｍの円内を指定した場合、その円内において取得した体験画像を含むライフログが抽出される。ログＮｏ．がＬｏｇ０００１に含まれる体験画像のうちの１つが、円内で撮影された場合、ログＮｏ．がＬｏｇ０００１のライフログが抽出される。一方、全ての体験画像が円外で撮影されている場合、そのライフログは抽出されない。住所や撮影場所を入力した場合も、その住所や撮影場所で取得した体験画像を含むライフログが抽出される。撮影時間を入力した場合、その撮影時間に撮影された体験画像を含むライフログが抽出される。全条件に合致する体験画像を含む１以上のライフログを抽出する。一つのライフログも抽出されない場合は、絞り込み項目への入力を変更する。
【００７７】
そして、表示デバイス４１が検索結果を表示する（ステップＳ１０３）。すなわち、検索結果に合致したライフログが、移動体１に送信される。そして、抽出されたライフログが、表示画面上に表示される。このときの表示画面８０は，図９に示すようになる。ここでは、検索条件に合致した５つのライフログ８１が、サムネイルとして表示されている。５つのライフログが重なって表示されている。なお、図９では、絞り込み項目として、撮影開始日時が２００８年５月２５日９：００、撮影場所がＡＡ大学、撮影者属性が男性、学生、及び２０代となっている。これにより、複数のライフログから一部のライフログを抽出することができる。
【００７８】
そして、ライフログを選択して、表示させる（ステップＳ１０４）。例えば、図９に示す表示画面８０において、奥から３つめのライフログをクリックする。これにより、ライフログが選択され、そのライフログ８１が全画面表示される。これにより、俯瞰的体験ビューモードとなり、図１０に示す表示画面８０となる。図１０では、ウィンドウ全体に地図が表示されている。すなわち、所定形状の道路や建物が配置され、全体として地図となっている。この地図は、地図情報記憶部７５に基づいて作成、表示される。また、俯瞰的体験ビューモードでは、地図が俯瞰図として示されている。例えば、移動体１を中心とする地図を表示する。また、この地図上に、移動体１の現在位置を表示してもよい。さらに、カーナビゲーションシステムのように、移動体１の移動に応じて地図を移動させてもよい。すなわち、移動体１が常時、表示画面中の中心になるように、地図がスクロールしてもよい。さらに、ユーザが任意の位置に表示画面をスクロールさせてもよい。このような地図の表示については、既存のナビゲーションシステムと同様の方法を用いることができる。
【００７９】
さらに、地図上には、取得した体験情報の体験画像８２がサムネイルとして表示されている。すなわち、選択したライフログに含まれる複数の体験画像８２が地図に重ね合わされている。体験画像８２は、その取得位置に配置されている。すなわち、体験画像８２は、表示画面１０に表示されている地図上における画像取得位置に配置されている。従って、地図上の移動経路に沿って複数の体験画像８２が配列されている。体験情報に含まれる位置情報を参照することで、表示されている地図上での表示位置が特定される。複数の体験画像８２を地図上に重ね合わせて表示する。体験画像８２は、画像取得位置において、縮小して配置されている。体験画像８２が多い場合は、体験画像８２の一部を間引いて、表示してもよい。体験画像８２を間引く場合の設定は、設定記憶部７６に記憶されている。図１０では、選択したライフログに含まれる複数の体験画像８２が道路に沿って表示されている。俯瞰的体験ビューモードでは、三次元空間に表示スケール及び記録コンテンツの種類に応じて整理して、一連の体験情報の流れが可視化された状態で掲示される。
【００８０】
このように、体験情報記憶部５１の中から検索条件に合致するライフログが抽出される。そして、１つのライフログが選択される。検索条件に合致するライフログに含まれる体験画像が抽出される。すなわち、抽出された体験画像がサーバ装置２から移動体１に送信される。移動体１の表示デバイス４１が、抽出された体験画像を表示する。なお、２以上のライフログを選択してもよい。この場合、２以上のライフログの体験画像が同じ地図上に表示される。なお、検索条件に合致するライフログに関する体験情報のみを送信することで、送信するデータ量を低減することができる。
【００８１】
それぞれの体験画像８２は、アイコンとなっている。そして、地図上に表示されている体験画像８２のうち、１つを選択すると、その体験画像８２が拡大表示される。この選択した体験画像を選択体験画像８３とする。例えば、入力部７２を用いて、一枚の体験画像８２をクリックして、選択する。すると、選択体験画像８３が、ウィンドウ中の左側に、拡大して表示される。ここでは、表示画面８０の左側に枠が表れ、その枠内に選択体験画像８３が表示されている。さらに枠内には、選択体験画像８３に対応する位置情報、時間情報等が表示されている。すなわち、選択体験画像８３とともに、選択体験画像８３の取得位置、及び取得時間が表示されている。選択体験画像８３は、地図上の体験画像８２よりも大きく表示される。さらに、体験画像８２を選択したときに、選択体験画像８３に対応する音データを再生してもよい。
【００８２】
さらに、選択体験画像８３の下には、オートヘディングアイコン８５と、画像送りアイコン８６が表示されている。オートヘディングアイコン８５をクリックすることで、選択体験画像８３が自動的に切り替わっていく。オートヘディングが行われる。すなわち、経路を自動的にトラッキングして、経路上の体験画像８２をスタート地点から順番に表示することができる。よって、古い体験画像８２から新しい体験画像８２が順番に選択されて、選択体験画像８３となって表示されていく。例えば、経路「ｒｏｕｔｅ０００１」の体験画像が取得時間順に一定時間間隔で表示されていく。すなわち、静止画像が移動順に表示されることで、動画的に表示されるようになる。換言すると、体験画像８２のスライドショーが表示される。
【００８３】
また、画像送りアイコン８６をクリックすると、一枚前、又は一枚後の体験画像を表示することができる。例えば、右三角をクリックすると、一枚後の体験画像が選択体験画像８３として表示され、左三角をクリックすると一枚前の体験画像８２が選択体験画像８３として表示される。なお、一枚後の体験画像８２とは、選択体験画像８３の直後に取得した体験画像８２のことであり、一枚前の体験画像８２とは、選択体験画像８３の直前に取得した体験画像８２のことである。よって、右三角を連続してクリックすると、取得した順番に画像が表示されることとなる。すなわち、オートヘディングと同様に選択体験画像８３が切り替わっていく。画像送りアイコン８６をクリックすることで、コマ送りのように選択体験画像８３を切換えることができる。すなわち、移動経路に従って、順番に体験画像８２が選択されていく。
【００８４】
表示画面８０の左端には、縮尺を変更するための縮尺アイコン８７が表示されている。また、縮尺アイコン８７をクリックすると、地図の縮尺が変更する。ここでは、２つの縮尺アイコン８７が表示されている。「ＷＩＤＥ」が、縮尺を大きくするための縮尺アイコン８７である。「ＮＡＲＲＯＷ」が、縮尺を小さくするための縮尺アイコン８７である。これにより、表示画面８０に表示される地図の縮尺を変更することができる。なお、縮尺を変えた場合、表示する体験画像８２を間引くようにしてもよい。例えば、縮尺を大きくした場合、地図中に含まれる体験画像８２の数が多くなる。従って、体験画像８２を間引いて、表示する体験画像を少なくする。あるいは、縮尺に応じて、体験画像のアイコンのサイズを変更してもよい。また、表示画面８０中に表示される体験画像８２の数に応じて、間引くようにしてもよい。あるいは、搭乗者６０の操作によって、体験画像８２を間引くようにしてもよい。体験画像８２の数が多い場合、例えば、３つおきに体験画像８２を表示するなどと入力する。
【００８５】
表示画面８０の左上には、経路表示アイコン８８が示されている。経路表示アイコン８８をクリックすると、撮影時間の順番に、体験画像８２が矢印で結ばれていく。例えば、ある体験画像８２から一枚後の体験画像８２への矢印が地図上に表示される。これにより、ライフログを取得した時に移動体１が移動した経路が矢印で表示される。
【００８６】
枠内の選択体験画像８３をクリックすることで、選択体験画像８３を全画面表示することができる。例えば、図１１に示すように、表示画面８０全体に選択体験画像８３が拡大して表示される。すなわち、俯瞰的体験ビューモードから詳細体験ビューモードに切り替わる。詳細体験ビューモードでは、選択体験画像８３が全画面表示される。このようにすることで、選択体験画像８３をより詳細に観ることができる。そして、所定の操作を行うと、詳細体験ビューモードから俯瞰的体験ビューモードに戻る。
【００８７】
表示画面８０上の地図で標識となる建物８９をクリックすることで、その建物の情報を表示するようにしてもよい。例えば、入力部７２を操作して、表示画面８０上である場所を指定する。すると、図１２に示すように、その場所にある建物に関する情報が表示される。具体的には、ＡＡ大学のＣＣ研究室の建物をクリックした場合、ＣＣ研究室の研究内容が表示画面８０の左側に配置された枠内に表示される。ＣＣ研究室の写真、研究内容の説明などが掲示される。このように、標識を指定することで、その標識に関する情報が表示画面８０内に掲示される。もちろん、建物以外の場所に関する情報を表示するようにしてもよい。具体的には、大学、美術館、博物館、公園、駅、空港、港などを標識となる場所として設定することができる。このような、標識となる場所の地点、及びその情報を地図情報として予め登録しておく。特定の場所には、その場所に関する説明を関連付けて、地図に登録しておく。表示部７１に表示されている地図上において、特定の場所を指定することで、特定の場所に関する説明が表示される。これらの説明としては、スライドやテキスト情報が含まれていてもよい。
【００８８】
さらに、特定キーの入力で、体験画像の表示モードを変更してもよい。例えば、搭乗者６０が入力部７２によって所定の入力を行うことで、体験画像８２の表示モードを切換える。表示モードを切換えると、高さ方向（上下方向）に時間軸を取り、撮影時間が遅いものほど、高い位置に表示される。この表示モードの切換えについて、図１３を用いて説明する。図１３は、表示画面８０の一部を模式的に示す図である。なお、図１３では、俯瞰的に表示されている地図の一部が示されている。Ｌ字型の道路９１が俯瞰的に表示されているとする。この道路９１において、３枚の体験画像８２が取得されており、それぞれの体験画像を体験画像８２ａ、体験画像８２ｂ、体験画像８２ｃとする。体験画像８２ａ、体験画像８２ｂ、体験画像８２ｃの順番で撮影されたとする。すなわち、移動体１が右側から道路９１に沿って下側に移動したときに体験画像８２ａ〜体験画像８２ｃが取得されたとする。
【００８９】
このとき、撮影時間に応じて体験画像８２の配置を変えている。すなわち、撮影時間が遅い体験画像８２ｃを高い位置で表示している。すなわち、高さ方向（上下方向）を時間軸として、新しい体験画像ほど、上側（高い位置）になるように表示している。従って、体験画像８２ｃの引き出し線９２が最も長くなっており、体験画像８２ａの引き出し線９２が最も短くなっている。引き出し線９２の長さは、表示画面上における体験画像８２の位置と画像取得位置に応じて決定すればよい。さらに、画像取得位置を示す引き出し線９２を設けている。画像取得位置から体験画像をつなぐ引き出し線９２がそれぞれ表示されている。位置情報に応じて地図上に複数の体験画像８２を表示する。このように表示することで、視角的に撮影履歴が分かる。すなわち、一見しただけで、どの体験画像が新しいものであるかを把握することができる。これにより、効果的に表示することができ、ライフログを有効利用することができる。もちろん、特定キーの入力で、表示モードを元に戻してもよい。すなわち、表示モードを切換える入力を予め登録しておく。
【００９０】
例えば、画像取得時間に応じて、表示画面における上下方向の位置が決定する。取得時間に応じて地図上に複数の体験画像を表示する。そして、同程度の高さの体験画像が重ならないように、左右方向に分散して体験画像８２を配置する。このようにして体験画像８２の位置を決定して、各体験画像と画像取得位置を引き出し線９２で結ぶ。これにより、複数の体験画像８２がある場合でも、体験画像が重なって表示されるのを防ぐことができる。地図を俯瞰的に表示して、表示部７１の表示画面における上下方向を時間軸として、体験画像の位置が決定する。そして、体験画像８２と画像取得位置の間に引き出し線９２を設けることで、時空間におけるライフログの表示が可能となる。例えば、矢印や直線などを引き出し線９２として、画像取得位置から体験画像までに引き出し線９２を設ける。これにより、画像取得位置、及び画像取得時間を即座に把握することができる。
【００９１】
このように、表示画面８０中の地図において、体験画像がその取得位置に配置される。すなわち、表示部７１が地図情報に基づいて地図を表示するとともに、位置情報に応じて地図上に体験画像を表示する。すなわち、位置情報に応じて、体験画像の表示位置を決定する。こうすることで、体験画像を効果的に表示することができ、体験画像を有効利用することが可能になる。一連の体験情報が可視化された形で、表示画面上に掲示される。すなわち、移動体１が移動した経路に沿って、体験画像が表示されているため、体験情報を有効利用することができる。例えば、現在、移動している搭乗者６０が既に取得された体験画像を参照して、目的地を決定したり、移動ルートを変更したりすることが可能になる。よって、より利便性を向上することができる。
【００９２】
他の移動体１によって取得された客観的な体験画像をライフログに含めるようにしてもよい。すなわち、移動体１が他の移動体１を撮影した場合、その撮影画像を客観的体験画像として、サーバ装置２に送信する。サーバ装置２は、撮影した移動体１のライフログではなく、撮影された移動体１のライフログのログＮｏ．を付加する。例えば、撮影された移動体１のユーザのＩＤに基づいて、ログＮｏ．を決定することができる。これにより、俯瞰的体験ビューにおいて、客観的な体験画像を表示することができる。表示部７１に同時に表示されている複数の体験画像には、異なる移動体１のライフログ用カメラ４２によって取得された体験画像が含まれている。換言すると、２台以上の移動体１で１つのライフログを作成することになる。また、俯瞰的体験ビューにおいて、客観的な体験画像を主観的な体験画像から識別できるように表示してもよい。
【００９３】
さらに、複数のユーザの体験情報を共有化することで、コンテンツを充実化することができる。すなわち、ユーザが訪れたことがない場所であっても、他のユーザのライフログに含まれる体験画像を参照することができる。このように、体験情報を共有することで、体験情報を有効に利用することができる。また、体験情報を逐次、更新して、移動体１に送信することで、最新の体験情報を閲覧することができる。
【００９４】
このように、パーソナルモビリティロボットである移動体１と体験記録データベースをネットワークで結ぶことで、現在記録されている体験情報を即座にビュワーで表示することができる。さらに、遠隔地で取得された体験情報を利用することができるため、遠隔コミュニケーションなどのアプリケーションを構築することができる。また、パーソナルモビリティロボットに限らす、各種モビリティにライフログ用カメラ４２、及び表示デバイス４１などを搭載することで、それぞれのモビリティに行動範囲に応じたコンテンツを記録、再生することが可能となる。
【００９５】
個人の行動に密接に関わるモビリティが高臨場感の空間記録機能と持つことになる。さらに、複数の移動体１によって構成されるネットワークと結びつくことで、リアルタイムに主観的体験情報を記録、掲示することが実現される。また、複数の移動体１が協調動作、もしくは自律動作することで、個人の客観的な視点からの体験記録を行うことが可能となる。例えば、ある移動体１を他の移動体１が撮影することで、客観的な体験を記録することができる。一連の主観的体験情報を表示するだけでなく、時空間に渡るコンテンツを編集・再生することができる。
【００９６】
従来のロボットなどでは、カメラ画像は、空間センシングのツールとしてしか利用されていなかったが、本実施の形態では、体験画像を共有化しているため、より広い用途に利用することができる。また、移動体１にライフログ用カメラ４２を設けることで、ウェアラブルコンピュータや携帯端末に搭載されたカメラを用いる必要がなくなる。よって、個人の主観的な体験画像を容易に取得することができるようになる。ライフログ用カメラ４２が定期的に画像を取得するため、搭乗者６０がライフログ用カメラ４２を操作することなく、体験画像を取得することができる。さらに、測位手段４７で測定された位置情報と対応付けて送信されるため、体験情報を容易に蓄積することができる。蓄積された体験情報を時空間に整理して、可視化することができる。また、リアルタイムでの処理が可能であり、より、利便性を向上することができる。音データを取得することで、体験記録の充実化を図ることができる。
【００９７】
なお、ステップＳ１０１でリアルタイムのライフログを指定した場合でも、体験情報の表示を随時更新する。ユーザがリアルタイムで取得している体験画像を地図上に表示させることが可能になる。この場合、体験画像の取得が逐次行われていくことで、体験情報が増えていく。すなわち、体験情報が蓄積されていき、逐次、表示が更新されていく。よって、地図上に表示されている体験画像が徐々に増加していくことになる。
【００９８】
なお、ステップＳ１０１でリアルタイムのライフログを指定した場合でも、ユーザの属性を指定することができる。すなわち、他のユーザがリアルタイムで取得している体験画像を地図上に表示させることも可能である。絞り込み項目で、他のユーザを指定し、そのユーザ周辺の地図を表示する。移動体１とサーバ装置２間でのデータ送受信が行われ、他のユーザが取得した体験画像が、地図上で徐々に増えていくことになる。これにより、他のユーザが現在どのような場所を移動しているかを、ユーザが把握できる。
【００９９】
なお、表示デバイス４１は、移動体１に搭載されているものに限られない。表示デバイス４１を例えば、パーソナルコンピュータなどで構成し、屋内などでライフログを表示するようにしてもよい。
【図面の簡単な説明】
【０１００】
【図１】本発明の実施の形態にかかる表示システムの全体構成を示す図である。
【図２】本発明の実施の形態にかかる移動体の構成を模式的に示す斜視図である。
【図３】本発明の実施の形態にかかる移動体に搭乗者が登場した状態を模式的に示す側面図である。
【図４】本実施の形態にかかる表示システムに用いられるサーバ装置の構成を示すブロック図である。
【図５】サーバ装置に記憶される体験情報を示す図である。
【図６】サーバ装置に記憶されるユーザ情報を示す図である。
【図７】本実施の形態にかかる移動体に用いられる表示デバイスの構成を示すブロック図である。
【図８】本実施の形態にかかる表示方法を示すフローチャートである。
【図９】表示デバイスの表示画面を示す図である。
【図１０】表示デバイスの表示画面を示す図である。
【図１１】表示デバイスの表示画面を示す図である。
【図１２】表示デバイスの表示画面を示す図である。
【図１３】表示デバイスの表示画面を示す図である。
【符号の説明】
【０１０１】
１  移動体
２  サーバ装置
１０  移動体本体
１１  搭乗席
２０  制御ボックス
２１  モータ
３１  第１駆動輪
３２  第２駆動輪
４１  表示デバイス
４２  ライフログ用カメラ
４３  スピーカ
４７  測位手段
４８  マイク
４９  通信手段
５０  制御部
５１  体験情報記憶部
５２  ユーザ情報記憶部
５３  地図情報記憶部
５４  演算処理部
５５  通信部
５６  入出力部
６０  搭乗者
７１  表示部
７２  入力部
７３  体験情報記憶部
７４  演算処理部
７５  地図情報記憶部
７６  設定記憶部
７７  音声出力部
８０  表示画面
８１  ライフログ
８２  体験画像
８３  選択体験画像
８５  オートへディングアイコン
８６  画像送りアイコン
８７  縮尺アイコン
８８  経路表示アイコン
９１  道路
９２  引き出し線
【図１】
2010039256.tif 000003
【図２】
2010039256.tif 000004
【図３】
2010039256.tif 000005
【図４】
2010039256.tif 000006
【図５】
2010039256.tif 000007
【図６】
2010039256.tif 000008
【図７】
2010039256.tif 000009
【図８】
2010039256.tif 000010
【図９】
2010039256.tif 000011
【図１０】
2010039256.tif 000012
【図１１】
2010039256.tif 000013
【図１２】
2010039256.tif 000014
【図１３】
2010039256.tif 000015