(57)【要約】【課題】情報データ及び特定の素材情報を編集して被験者の自分史を作成すること。【解決手段】被験者の状態を表す生体情報５ａを記録した生体情報データ５ａと、その被験者が感じ取りうる映像及び音声に関する情報データを記録した情報データと、その情報データを記録した時刻に関する記録時刻情報を取得した時刻情報取得データと、生体情報５ａに基づいて被験者の状態が規定の状態であると判断した場合、素材情報群のうち、その記録時刻情報に基づく情報データの記録時刻に関して生成された特定の素材情報を取得する素材情報取得手段と、その情報データ及びその特定の素材情報を編集する情報編集手段とを有する。【選択図】図５
2008252356.tif 000002
【特許請求の範囲】
【請求項１】
素材として採用しうる素材情報群を、各前記素材情報の生成時刻を表す素材時刻情報に関連づけて管理し、前記素材時刻情報に関連づけて前記素材情報を提供可能な素材情報提供手段と、
被験者の状態を表す生体情報に基づいて前記被験者の状態が規定の状態であると判断した場合、前記素材情報群のうち、前記被験者が感じ取りうる情報を記録した情報データの記録時刻に関して生成された特定の素材情報を取得する素材情報取得手段と、
前記情報データ及び前記特定の素材情報を編集する情報編集手段と
を有することを特徴とする情報編集装置。
【請求項２】
請求項１記載の情報編集装置において、
前記素材情報提供手段は、前記素材情報として、被験者としての他人が感じ取りうる情報を記録した他人の情報データを提供し、
前記素材情報取得手段は、
前記記録時刻情報に基づく前記情報データの取得時刻に、前記他人の情報データのうち、前記記録時刻情報に基づいて特定される時刻帯の部分を取得することを特徴とする情報編集装置。
【請求項３】
請求項１又は請求項２記載の情報編集装置において、
前記素材情報は映像データであり、
前記情報検索手段は、
前記映像データのうち前記被験者の顔が映り込んでいるか否かを画像処理によって検出する顔検出手段と、
前記顔検出手段によって前記被験者の顔が検出された場合、前記映像データから前記自己の顔が含まれている時間帯の部分を取得する映像取得手段と
を備えることを特徴とする情報編集装置。
【請求項４】
請求項１乃至請求項３のいずれか記載の情報編集装置において、
前記素材情報は音声データであり、
前記情報検索手段は、
前記音声データのうち前記被験者の音声が含まれるか否かを検出する音声検出手段と、
前記音声検出手段によって検出された場合、前記音声データから前記被験者の音声が含まれる時間帯の部分を音声認識処理により取得する音声取得手段と
を備えることを特徴とする情報編集装置。
【請求項５】
請求項１乃至請求項４のいずれか記載の情報編集装置において、
前記情報編集手段によって編集された前記被験者の体験に基づく電子自分史を出力する自分史出力手段を備えることを特徴とする情報編集装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、人間がある体験を通じて感じ取りうる映像や音声などをライフログとして残すとともに、これらを編集して自分史を作成することができる情報編集装置に関する。
【背景技術】
【０００２】
近年、映像や音声（以下「映像等」という）を取り扱う技術の発達が目覚ましく、いわゆるデジタルビデオカメラといった撮影装置について性能の向上に関する技術開発が盛んに行われている。近年、このような技術を応用して映像や音声を自動的に記録するシステムが考案されている（特許文献１及び特許文献２参照）。このシステムを応用して、人間がその五感のうち少なくとも１つの感覚によって感じ取りうる映像や音などのライフログを恒常的に採取するアイデアが提案されている。
【０００３】
このようなアイデアは、利用者が意識することなく自らの体験などを残すことができる点において、ある意味、自らの自分史を残すことに応用することができる。このように利用者のライフログを恒常的に採取するには、例えば利用者が生活に支障なく装着可能なデジタルビデオカメラなどを装着しておき、日常的にライフログを採取し続ける手法を採用することができる。そして利用者は、日常的に採取した自らのライフログを編集して所望の自分史を作成することができる。
【特許文献１】特開２００５−１１７５４１号公報（段落番号０１４１〜０１５２、図１１）
【特許文献２】特開２００２−２０４４１９号公報（段落番号０００６〜０００７、図１）
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながらこの公知技術では、このように利用者の自分史を作成するにあたり、自らが採取したライフログから作成すると、自分史を構成する素材としての映像等に自らが登場していないという問題点がある。これでは、利用者が満足するような自分史を作成することが困難であった。
【０００５】
本発明が解決しようとする課題には、上記した問題が一例として挙げられる。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、請求項１記載の発明は、素材として採用しうる素材情報群を、各前記素材情報の生成時刻を表す素材時刻情報に関連づけて管理し、前記素材時刻情報に関連づけて前記素材情報を提供可能な素材情報提供手段と、被験者の状態を表す生体情報に基づいて前記被験者の状態が規定の状態であると判断した場合、前記素材情報群のうち、前記被験者が感じ取りうる情報を記録した情報データの記録時刻に関して生成された特定の素材情報を取得する素材情報取得手段と、前記情報データ及び前記特定の素材情報を編集する情報編集手段とを有する。
【発明を実施するための最良の形態】
【０００７】
以下、本発明の一実施の形態を図面を参照しつつ説明する。
＜第１実施形態＞
図１は、本発明の第１実施形態としての自分史作成システム１００の構成例を示すシステム構成図である。
自分史作成システム１００は、利用者自らの体験に基づく映像や音などのみならず、その他の素材（素材情報）を利用して編集することで、利用者の体験に基づく歴史（以下「自分史」という）を作成するシステムである。
【０００８】
この自分史作成システム１００は複数のライフログ記録装置１を含んでいる。これら複数のライフログ記録装置１は互いに同一の構成及び機能である。各ライフログ記録装置１は、利用者としての自分や他人が各々利用する端末装置である。このライフログ記録装置１は、利用者が日常的に少なくとも１つの感覚によって感じ取りうる情報（情報データ）を記録する機能を有する。
【０００９】
各ライフログ記録装置１は、カメラ２（自己情報記録手段）、マイクロフォン３（自己情報記録手段）、生体情報取得部５（生体情報取得手段）、インターフェース部４、バッファ６（情報記憶装置）、通信部７（素材情報取得手段）、測位部８、計時部１１、表示部９９（自分史出力手段）、スピーカー１２（自分史出力手段）、取得出力制御部９（素材情報取得手段）及び制御部１０（情報編集手段）を備えている。
【００１０】
カメラ２及びマイクロフォン３は、例えば利用者が装着可能な眼鏡形状の部材に設けられている。カメラ２は、その眼鏡形状の部材における利用者の目の近傍に配置されており、利用者の視点からその周囲を撮影する機能を有する。このカメラ２が撮影した映像は、カメラ２から映像データ２ａとして出力される。この映像は、例えば色、形、温度及び動き（速さ）のいずれか又はこれらいずれかの組み合わせを表すものである。
【００１１】
マイクロフォン３は、その眼鏡形状の部材における例えば利用者の耳の近傍に配置され、利用者の周囲の音を採取する機能を有する。このマイクロフォン３が採取した音は、マイクロフォン３から音データ３ａ（例えば音声データ）として出力される。この音としては、例えば環境音、人の話し声及び自分の発言のいずれか又はこれらいずれかの組み合わせを挙げることができる。
【００１２】
本実施形態では、これら映像データ２ａ及び音データ３ａのように利用者の体験を表す情報を「ライフログ」と総称している。なおライフログとしては、映像データ２ａ及び音データ３ａの両方のみならず、一方のみ或いはその他のデータ（例えば匂い、位置、味、温度、湿度、気圧のいずれか又はそれらいずれかの組み合わせに関するデータ）を採用してもよい。
【００１３】
生体情報取得部５は、利用者がライフログ記録装置１を装着した際に、その利用者の生体情報を取得する機能を有する。ここで生体情報とは、利用者の生体に関する情報の総称であり、例えば心拍数（脈拍）、血圧、発汗量及び涙量の少なくとも１つ又はこれらの組み合わせに関する情報を含んでいる。この生体情報としては、その利用者に関するその他の情報（体温等）であってもよい。
【００１４】
インターフェース部４は、カメラ２、マイクロフォン３及び生体情報取得部５が接続されているとともに、バッファ６が接続されている。このインターフェース部４は、カメラ２、マイクロフォン３及び生体情報取得部５とバッファ６とのインターフェース機能を有する。
【００１５】
バッファ６は、インターフェース部４を経由して入力された映像データ２ａ、音データ３ａ及び生体情報５ａを各々記憶可能な情報記録媒体（情報記憶装置）である。この生体情報５ａとしては、例えば心拍数、発汗量、握力、体温、瞬き、血圧、筋電図、匂い及び涙量のいずれか又はこれらいずれかの組み合わせを挙げることができる。測位部８は、例えばＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  Ｓｙｓｔｅｍ）を用いて、ライフログ記録装置１の現在地を測位して位置情報を取得する測位装置である。
【００１６】
計時部１１は、それら映像データ２ａ及び音データ３ａの記録と同期して時刻を計測する計時機能を有している。この計時部１１は、映像データ２ａ及び音データ３ａを記録した時刻を計時して時刻情報を取得する機能を有する（時刻情報取得手段）。
【００１７】
制御部１０は、取得した時刻情報に同期させつつ、さらに、取得した位置情報に関連づけつつ、バッファ６への映像データ２ａ及び音データ３ａの記録を制御している。このバッファ６には、利用者のライフログデータとして映像データ２ａ及び音データ３ａが恒常的に記録されている（以下「ライフログ恒常記録機能」という）。
【００１８】
取得出力制御部９は、制御部１０の制御によって、他人のライフログとして他人の映像データ２ａ及び音データ３ａを、他人の利用するライフログ記録装置１から取得する機能を有する（他人ライフログ取得機能）。具体的には制御部１０は、生体情報５ａに基づいて利用者の状態が上記規定の状態に移行したと判明した時に、他人ライフログ取得機能を作動させる。本実施形態では、上記規定の状態として、例えばライフログ記録装置１の利用者が「嬉しい」と感じている状態を挙げて説明するが、この規定の状態は目的に応じて様々な感情の状態を採用してもよい。
【００１９】
制御部１０は、通信部７を制御し、他人が利用するライフログ記録装置１に記録済みの他人の映像データ２ａ及び他人の音データ３ａを取得する。通信部７は、制御部１０の制御によって、他人のライフログ記録装置１から他人の映像データ２ａ及び他人の音データ３ａを無線或いは有線によってデータ通信を行う機能を有する。
【００２０】
さらに取得出力制御部９は、表示部９９に映像を表示させたり音出力部１２に音を出力させる機能を有する。表示部９９は、例えば液晶ディスプレイのような表示装置である。音出力部１２は、例えばスピーカーのような音出力装置である。
【００２１】
図２は、図１に示すバッファ６及び取得出力制御部９の構成例を示すブロック図である。
さらに図２に示す取得出力制御部９は、上記他人ライフログ取得機能の作動により取得したライフログ（映像データ２ａ及び音データ３ａ）を編集する機能を有する（ライフログ編集機能）。
【００２２】
取得出力制御部９は、指定部２１（素材情報取得手段）、検索部２２（素材情報取得手段）、取得部２３（素材情報取得手段）、自分史データ作成部２４（情報編集手段）及び出力制御部２５を有する。バッファ６には、上記ライフログ恒常記録機能によって、利用者が自らのライフログ記録装置１で取得した映像データ２ａ及び音データ３ａ（図示の例では「自分ライフログデータ２８」に相当）がライフログとして記録されている。
【００２３】
指定部２１は、主指定部２１ａ、従指定部２１ｂ及び見方指定部２１ｃを有する。
主指定部２１ａは、自分史を作成するにあたり素材として用いたい自己のライフログデータ２８（以下「自己ライフログデータ」という）を指定する機能を有する（自己ライフログ指定機能）。
【００２４】
従指定部２１ｂは、自分史を作成するにあたり素材として用いたい他人ライフログデータ２７（以下「他人ライフログデータ」という）の検索条件を指定する機能を有する。この他人ライフログデータ２７としては、例えば、このライフログデータ２８に付随する記録時刻情報に基づいて特定した時刻（自己ライフログデータ２８を記録した時刻）に、指定済みのライフログデータ２８に付随する記録位置情報に基づいて特定した位置の近傍（自己のライフログ記録装置１の近傍）に配置していた、他人のライフログ記録装置１によって取得されたライフログデータを例示することができる。
【００２５】
見方指定部２１ｃは、最終的に編集すべき自分史（電子自分史）の見せ方に応じて、例えばある映画監督風（△○監督風）又はドキュメンタリ風というように、自分史の見せ方を指定する機能を有する。なおこれらの各指定は、例えば音声入力による指定を採用することもできるし、又は、例えばＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔ）タイプの入力装置を用いた手入力による指定を採用することもできる。
【００２６】
検索部２２は、指定部２１によって指定された検索条件に従って、他人ライフログデータ２７を検索し、利用者が望む素材を探し出す機能を有する。取得部２３は、検索部２２によって検索した際にヒットしたレコードが存在する場合、他人ライフログデータ２７（他人の映像データ２ａ及び他人の音データ３ａ）を他人のライフログ記録装置１から取得する。取得部２３は、取得した他人ライフログデータ２７をバッファ６に記録させる。
【００２７】
このように他人のライフログを取得するのは、自己のライフログ記録装置１では自己周辺の音データ３ａを記録することができるものの、自己の映像データ２ａを自ら記録することができないためである。このようにすると、利用者による自分史の作成にあたって他人のライフログから自分の映像や音などを素材として調達することができる。
【００２８】
自分史データ作成部２４は、このように取得した他人ライフログデータ２７及び自分ライフログデータ２８を編集して、自分の体験に関する電子データ（以下「自分史データ」という）を作成する機能を有する。具体的には、自分史データ作成部２４は、自分史データとして、例えば自分史として視覚に訴える表示を実現するための表示用データを作成したり、例えば自分史として聴覚に訴える音を出力するための音出力用データを作成する。
【００２９】
出力制御部２５は、このように作成された表示用データに基づいて上記表示部９９に自分史を映像として表示させたり、このように作成された音出力用データに基づいて音出力部１２に自分史を音として出力させる。
【００３０】
図３は、本実施形態において用いるデータの一例を示すイメージ図である。なお、図３において図示した「ＤＢ」の文字は「データベース」を表している。
【００３１】
自己ライフログデータベース２８ａは、少なくとも１つの自己ライフログデータ２８を有する。他人ライフログデータベース２７ａは、少なくとも１つの他人ライフログデータ２７を有する。生体情報データベース５ｂは、例えば少なくとも１つの生体情報５ａを有する。ここでいう生体情報５ａは、例えば利用者が心地よさを感じた場合に脳波として出力される「α波」などを挙げることができる。
【００３２】
また本実施形態では、上記制御部１０は、予め定められたアルゴリズムを用いて、この生体情報データベース５ｂから感情データベース３０を生成している。この感情データベース３０は、生体情報データベース５ｂに含まれる生体情報５ａから生成された感情データ３１の集合体である。
【００３３】
この感情データ３１は、少なくとも１つの生体情報５ａによって特定される利用者の感情状態（例えば嬉しい状態、楽しい状態、悲しい状態）を表している。つまり利用者がある感情状態に移行している場合には、利用者に関する１つの生体情報５ａ或いは複数の生体情報５ａの組み合わせによって、その感情状態を特定することができる。本実施形態では、このように利用者の特定の感情状態を表す感情データ３１の雛形（パターン）を「特定感情パターン」と呼ぶ。
【００３４】
このような感情データ３１（特定感情パターン）を感情データベース３０に登録しておけば、利用者の生体情報５ａからある感情データが割り出された際に、この感情データを感情データベース３０の特定感情パターンと比較して、利用者が現在どのような感情状態に遷移しているのかについて判断することができる。
【００３５】
具体的な判断方法としては、例えば利用者の生体情報５ａによって特定された感情データが、感情データベース３０の特定感情パターンにおおよそ一致するか否かを判断する。すなわち、この判断方法では、一定時間内における感情データと特定感情パターンとの一致ポイント数を計測し、そのポイント数が一定数以上（例えば１０個）である場合、利用者がその特定感情パターンが示す感情状態（例えば嬉しい状態、楽しい状態又は悲しい状態）に遷移しているものと推定する。
【００３６】
自分史作成システム１００は各々以上のような構成であり、次に図１〜図３を参照しつつ自分史作成システム１００の動作例を説明する。
図４は、自分史作成処理の手順の一例を示すフローチャートである。
本実施形態では、他人が視覚や聴覚により感じ取った体験に関する情報（他人ライフログデータ２７）を素材（素材情報）として用いつつ、自己が視覚や聴覚により感じ取った体験に関する情報（自己ライフログデータ２８）を編集して、（電子）自分史を作成する。
【００３７】
まず概略を説明すると、ステップＳ１０では、後述する感情データベース（感情ＤＢ）生成処理を実行する。次にステップＳ２０では、後述するライフログ検索処理を実行する。次にステップＳ４０では、バッファ６に記憶済みの他人ライフログデータ２７及び自己ライフログデータ２８に基づいて自分史の編集処理を実行する。以下、各処理について具体的に説明する。
【００３８】
＜感情データベース生成処理＞
図５は、図４に示す感情データベース３１の生成処理の一例を示すフローチャートである。
ライフログ記録装置１では、カメラ２が利用者の周囲の映像を撮影して得た映像データ２ａを恒常的にバッファ６に記録している。またライフログ記録装置１では、マイクロフォン３が利用者の周囲の音を採取して得た音データ３ａを恒常的にバッファ６に記録している。これら映像データ２ａ及び音データ３ａは、互いに同期が取られた状態でバッファ６に記録されている。これら映像データ２ａ及び音データ３ａは、各々映像及び音の取得時刻を特定可能なタイムコードが付されている。
【００３９】
これらと同期して、生体情報取得部５が、利用者の生体に関する情報を取得して得た生体情報５ａを恒常的にバッファ６に記録している。以下の説明では、このようにバッファ６に記憶済みの映像データ２ａ及び音データ３ａをライフログデータ２８と呼んでおり、このライフログデータ２８の集合体をライフログデータベースと呼んでいる。
【００４０】
ステップＳ１１では、制御部１０が、バッファ６に記憶済みの生体情報データベース５ｂから規定の少なくとも１つの生体情報５ａを取得する。ここで生体情報５ａの選択方法としては、例えば嬉しかった体験に基づく自分史を生成する場合、嬉しい場合に特徴的に現れる少なくとも１つの生体情報５ａを選択することを挙げることができる。例えば嬉しい場合、生体情報としてα波などを選択することができるため、制御部１０は、生体情報５ａによって利用者の「α波」などを採取する。
【００４１】
ステップＳ１２では、感情データベースアルゴリズム処理を実行する。この感情データベースアルゴリズム処理では、少なくとも１つの生体情報５ａ（又は複数の生体情報５ａの組み合わせ）によって利用者の感情を特定できることを利用している。つまり、例えば生体情報５ａとしての「α波」などが規定の閾値以上である場合には、利用者が「嬉しさ」を感じているものと推測することができる。
【００４２】
次にステップＳ１３では、これら「α波」などという生体情報５ａの組み合わせ（のグラフ特性）を感情データ３１（特定感情パターン）として感情データベース３０に格納する。このようにすると、制御部１０は、図３に示すように生体情報データベース５ｂ（１次データベース：１次ＤＢ）から感情データベース３０（２次データベース：２次ＤＢ）を予め生成しておくことができる。
【００４３】
図６は、感情データベース３０に存在する感情データの一例を示す特性図である。なお、図示の感情データの特性例においては、その縦軸が感情データの強度Ｎを示しており、その横軸が時間ｔ［ｓｅｃ］を示している。横軸は左から右に進むにつれて時間が経過するように図示している。
【００４４】
図示の感情データは、最初のうち高い特性を示しているが、中盤に徐々に低下し、最後に一気に増加する特性を示している。比べる対象としての被比較感情データが、図６に示すような感情データの特性を示す場合、この被比較感情データは利用者が嬉しい状態にあると判断することができる。よって感情データベース３０には、例えば「嬉しい」という感情状態を表す特定感情パターンとして図示のような感情特性が時間の経過に応じて登録される。
【００４５】
図７は、感情データベース３０に存在する感情データの他の一例を示す特性図である。図７は、ある利用者の時刻ごとの感情の状態例を示している。なお、図７において縦軸は感情の種類の具体例を示しており、横軸は時刻ｔ［ｓｅｃ］を示している。横軸は左から右になるほど時間が経過するように表されている。縦軸には、上から「嬉しい状態（嬉）」、「楽しい状態（楽）」、「躁鬱状態（躁）」、「安心状態（安心）」、「不安状態（不安）」、「鬱状態（鬱）」、「哀愁状態（哀）」が例示されている。
【００４６】
各感情状態の横に配置された小さな丸印（○）は、各時刻における利用者の感情状態を示している。同時刻（図示の縦方向）において複数の感情状態に丸印が配列しているのは、利用者がこれら複数の感情状態に移行していることを示す。図７に示すように利用者の感情状態がマッピングされた場合においては、例えば利用者が連続的に丸印が配列している箇所の感情に該当していると考えられる。例えば時刻ｔ［ｓｅｃ］が早い時間帯においては、丸印が連続しており、利用者の感情が「嬉しい」状態であると判断することができる。上記感情データベース３０は、各時刻における利用者の感情の遷移がわかるように、時間経過に応じて感情データを管理している。
【００４７】
＜ライフログ検索処理＞
図８は、ライフログ検索取得処理の手順の一例を示すフローチャートである。
このライフログ検索取得処理では、例えば２つのライフログデータを取得している。１つは、利用者本人の自己ライフログデータ２８であり、もう１つは、その本人以外の人（他人）に関する他人ライフログデータ２７である。
【００４８】
本実施形態では、例えば「嬉しい」という感情に基づく利用者の自分史を作成する場合を例示して説明する。まずステップＳ２１では、取得出力制御部９が、利用者の望む感情（例えば嬉しい）を設定する。次にステップＳ２２では、取得出力制御部９が、この「嬉しい」という感情に関する特定感情パターンが感情データベース３０に登録されているか否かを確認する。取得出力制御部９は、この特定感情パターンが感情データベース３０に存在していない（登録されていない）場合、後述するステップＳ２８に進む。制御部１０は、この感情データパターンが感情データベース３０に存在している（登録されている）である場合、ステップＳ２３に進む。
【００４９】
利用者は、自らの自分史の作成にあたり素材として用いたいライフログデータを次のように特定する。まず表示部９９には、取得出力制御部９の制御によって、図９に示すようなライフログデータの種類などの指定画面が表示される。この指定画面は、主ライフログデータＩＤ入力エリア９９ａ、見方指定エリア９９ｃ、従ライフログデータＩＤ入力エリア９９ｂ、見方指定エリア９９ｄ及び決定ボタン９９ｄを含んでいる。
【００５０】
利用者は、主ライフログデータＩＤ入力エリア９９ａに所望の自己ライフログデータ２８の識別子（ＩＤｅｎｔｉｆｉｃａｔｉｏｎ）、例えばファイル名や配置場所を入力し、例えば見方指定エリア９９ｃに所望の見せ方として「○×監督風」と指定する。また利用者は、従ライフログデータＩＤ入力エリア９９ｂに所望の他人ライフログデータ２７のファイル名や配置場所を入力し、例えば見方指定エリア９９ｄに所望の見せ方として「△○監督風」と指定する。利用者は、入力内容が所望の入力内容であることを確認したら、決定ボタン９９ｄをクリックして入力内容を確定する。
【００５１】
決定ボタン９９ｄをクリックすると、図２に示す主指定部２１ａ、従指定部２１ｂ及び見方指定部２１ｃが次のように作動する。つまり主指定部２１ａは、図９に示す主ライフログデータＩＤ入力エリア９９ａの入力内容に基づいて、自己ライフログデータ２８の指定を行う。図２の従指定部２１ｂは、図９に示す従ライフログデータＩＤ入力エリア９９ｂの入力内容に基づいて、他人ライフログデータ２７の指定を行う。図２の見方指定部２１ｃは、図９に示す見方指定エリア９９ｄの指定内容に従って、自分ライフログデータ２８を「○×監督風」にアレンジするとともに他人ライフログデータ２７を「△○監督風」にアレンジして編集するように自分史の見せ方の指定を行う。
【００５２】
＜自己ライフログデータの取得＞
ここで利用者は、過去の嬉しかった体験に基づく電子自分史を作成しようとしているため、取得出力制御部９は、制御部１０の制御によって、利用者（自己）が望む感情状態として、例えば嬉しい状態を設定する。上述のように生体情報取得部５は恒常的に生体情報５ａを取得しており、この生体情報５ａの取得時刻とともに生体情報５ａをバッファ６に記憶している。
【００５３】
図８のステップＳ２１では、まず取得出力制御部９が、感情データベース３０において所望の感情状態（例えば嬉しい状態）を表す特定感情パターンを特定する。そして次にステップＳ２３では、取得出力制御部９が、この生体情報５ａ又はその組み合わせに基づく感情データに、この特定感情パターンと一致する部分があるか否かを判断する。このステップＳ２３では、一致する部分があると、取得出力制御部９は、その取得時刻をキーとして自己のライフログデータベース２８ａから、自己ライフログデータ２８（映像データ２ａ及び音データ３ａ）の同時刻の部分を電子自分史の素材として取得する。取得出力制御部９は、自己のライフログデータ２８から取得した部分をバッファ６に記憶させる。
【００５４】
＜他人ライフログデータの取得＞
図８のステップＳ２４では、取得出力制御部９が、記録時刻情報に基づく時刻（自己ライフログデータ２８を採取した時刻）に、記録位置情報に基づく位置（自己の近辺）に存在していた他人のライフログ記録装置１で記録されていた他人ライフログデータ２７を取得する。ここでいう他人ライフログデータ２７は、例えば他人の映像データ２ａ及び他人の音データ３ａの少なくとも一方を含んでいる。音は元々指向性が低いため、自己と他人が近接している場合、音データ３ａは自己及び他人で同一の音源を重複して記録できていることが多い。このため取得出力制御部９が映像データ２ａのみを取得するようにすると、取得出力制御部９が他人ライフログデータ２７を取得するデータ量を低減することができる。
【００５５】
ステップＳ２５では、取得出力制御部９（顔検出手段）が、パターンマッチング処理を実行する。具体的にはステップＳ２６では、取得出力制御部９が、画像処理によってパターンマッチングを行い、他人ライフログより取得した他人の映像データ２ａから自己がその映像データ２ａに基づく映像中に映り込んでいる時間帯の部分を特定する。自己が映り込んでいる（他人のライフログに自己の映像が存在している）場合にはステップＳ２７に進み、自己が映り込んでいない（他人のライフログに自己の映像が存在していない）場合には後述するステップＳ２８に進む。
【００５６】
またステップＳ２６では、取得出力制御部９（音声検出手段）が、他人ライフログから取得した他人の音データ３ａに基づく環境音中に、例えば自己の音データ３ａとしての自らの声が含まれているか否かを判断する。自己の声が含まれている（他人のライフログに自己の声が存在している）場合にはステップＳ２７に進み、自己の声が含まれていない（他人のライフログに自己の声が存在していない）場合には後述するステップＳ２８に進む。なお、自己が他人のライフログに映り込みしているかどうかや自己の声が他人のライフログに含まれているかどうかに至るまで細かく確認する必要がない場合、上述したステップＳ２５及びステップＳ２６を省略してもよい。
【００５７】
次にステップＳ２７では、取得出力制御部９が、自己ライフログデータ２８から素材として抽出した自己の映像データ２ａ及び自己の音データ３ａ並びに、他人ライフログデータ２７から素材として抽出した他人の映像データ２ａ及び他人の音データ３ａをバッファ６に残す。以上のようにして利用者は、取得出力制御部９の機能によって、自分史を作成するにあたり素材とすべき映像データ２ａ及び音データ３ａをバッファ６に揃えることができる。
【００５８】
＜図４のステップＳ４０に相当＞
自分史データ作成部２４は、以上のようにバッファ６に揃った映像データ２ａ及び音データ３ａを用いて、例えば自己の映像データ２ａ及び音データ３ａは全て自分史データの作成に用いるとともに、他人の映像データ２ａ及び他人の音データ３ａは少なくとも一部を自分史データの作成の素材として用いることができる。このように作成した自分史は、上記感情データベース３０の検索時に指定したように、自己が「嬉しい」と感じている状態における自己のライフログ及び他人のライフログに関する映像データ２ａ及び音データ３ａを用いて作成されるようになる。つまり利用者は、最も心地よく視聴することのできる自分史データを作成することができる。
【００５９】
上記実施形態における情報編集装置１００（自分史作成システム）においては、素材として採用しうる素材情報群を、各素材情報の生成時刻を表す素材時刻情報に関連づけて管理し、この素材時刻情報に関連づけて素材情報を提供可能な素材情報提供手段１（例えば他人のライフログ記録装置）と、被験者（利用者）の状態を表す生体情報５ａに基づいて前記被験者の状態が規定の状態（例えば心地よく感じる状態）であると判断した場合、上記素材情報群２７（他人のライフログデータ）のうち、上記被験者が感じ取りうる情報を記録した情報データ２８の記録時刻に関して生成された特定の素材情報を取得する素材情報取得手段２１，２２，２３（取得出力制御部の一部）と、この情報データ２８及び特定の素材情報２７を編集する情報編集手段２４（情報編集手段）とを有することを特徴とする。
【００６０】
被験者（利用者）は、情報編集装置１（自己のライフログ記録装置）を装着して情報データ２８を恒常的に記録していると、この情報データ２８を編集して電子自分史を作成することができる。しかも利用者は、この電子自分史に接することで過去の懐かしい記憶を蘇らせ、心理的な安堵感を感じることができる。
【００６１】
ここで、その記録済みの情報データ２８は、自らの視点に立って記録したものであり、この自己の情報データ２８に基づく映像には、自らの姿はほとんどないと考えられる。これでは、せっかく電子自分史を作成しても、利用者（自己）自身の楽しさが減ってしまうことも考えられる。
【００６２】
しかしながら、このような構成によれば、作成される電子自分史は、自己の情報データ２８（自己ライフログデータ）のよい時期（例えば人生において輝いていた時期）の部分のみならず、素材情報２７（他人ライフログデータ）をも素材として編集されたものとなる。従って、作成される電子自分史は、本来自分自身が取得できない自らの姿を含んだものとなり、これに接した利用者が自らの姿を電子自分史中に発見し、この自分史に深く感動をしつつ楽しむことができる。
【００６３】
本実施形態における情報編集装置１（自分史作成システム）は、上記構成に加えてさらに、素材情報提供手段は、その素材情報として、被験者としての他人が感じ取りうる情報を記録した他人の情報データ２７を記録した他人の情報データ２７を提供し、素材情報取得手段２１，２２，２３（取得出力制御部の一部）は、その記録時刻情報に基づくその情報データ２８の取得時刻に、上記他人の素材情報（他人ライフログデータ２７）のうち、その記録時刻情報に基づいて特定される時刻帯の部分を取得することを特徴とする。
【００６４】
このような構成によれば、作成される電子自分史は、自己の情報データ２８（自己ライフログデータ）及び、例えば他人端末１（他人のライフログ記録装置）が記録した他人の情報データ２７（他人ライフログデータ）を素材としたものである。従って他人の情報データ２７には、自己の様子が含まれていると考えられる。よって作成された電子自分史は、自らの様子を含んだものとなることから、これに接した利用者が自らの過去の様子に接して深く感銘を受け、利用者が心をリラックスさせることができる。
【００６５】
上記実施形態における情報編集装置１（自分史作成システム）は、上記構成に加えてさらに、上記素材情報は映像データであり、情報検索手段２１，２２，２３（指定部、検索部、取得部）は、映像データ２ａのうち被験者（利用者）の顔が映り込んでいるか否かを画像処理によって検出する顔検出手段と、この顔検出手段によって自己の顔が検出された場合、映像データ２ａからその被験者の顔が含まれている時間帯の部分を取得する映像取得手段とを備えることを特徴とする。
【００６６】
このような構成によれば、利用者は、自らの過去の顔が映り込んだ映像を含む電子自分史を視覚的に楽しむことができるため、利用者自らの姿を含む映像に触れてさらに懐かしさに浸ることができる。
【００６７】
上記実施形態における自分史作成システム１は、上記構成に加えてさらに、上記素材情報は音声データであり、情報検索手段２１，２２，２３（指定部、検索部、取得部）は、音声データ２ａのうち被験者（利用者）の音声が含まれるか否かを検出する音声検出手段と、この音声検出手段によって検出された場合、この音声データから被験者の音声が含まれる時間帯の部分を音声認識処理により取得する音声取得手段とを備えることを特徴とする。
【００６８】
このような構成によれば、利用者は、自らの顔のみならず自らの声を含む電子自分史を視覚のみならず聴覚でも楽しむことができるため、自らの声の変化を実感しつつ時間の経過を実感してさらに懐かしさに浸ることができる。
【００６９】
上記実施形態における情報編集装置１（自分史作成システム）は、上記構成に加えてさらに、情報編集手段２４（自分史データ作成部）によって編集されたその被験者（利用者）の体験に基づく電子自分史を出力する自分史出力手段１２，９９（音出力部、表示部）を有することを特徴とする。
【００７０】
このような構成によれば、利用者は、作成した電子自分史に接して楽しむことができるため、例えば記憶の片隅にあった懐かしい思い出に深く浸り、心をリラックスさせることができる。
【００７１】
＜第２実施形態＞
第２実施形態では、第１実施形態とほぼ同様の構成でありほぼ同様の動作であることから、同一の構成及び動作については第１実施形態における図１乃至図９と同一の符号を用いるとともに、その説明を省略し、以下の説明では異なる点を中心として説明する。
【００７２】
図１０は、第２実施形態としての自分史作成システム１００ａの構成例を示すブロック図であり、図１１は、図１０に示すバッファ６及び取得出力制御部９の構成例を示すブロック図である。図１０及び図１１に示す構成例は、各々第１実施形態における図１及び図２とほぼ同様の構成例である。
第２実施形態としての自分史作成システム１００ａは、第１実施形態における他人のライフログ記録装置１の代わりに、図１０に示すようにＷｅｂサーバ１０１（素材情報提供手段）が存在している点が異なっている。
【００７３】
つまりライフログ記録装置１ａ（情報編集装置）は、その利用者の自分史の作成にあたり他人ライフログデータ２７を利用する代わりに、予めＷｅｂサーバ１０１に用意されたコンテンツデータ（素材情報）を利用する点が異なっている。なお、自己のライフログ記録装置１ａは、その外部より他人ライフログデータ２７の代わりに、図１０及び図１１に示すようにコンテンツデータ（素材情報）を取得する点を除いてほぼ同様の動作を実行するため、以下では異なる点を中心として説明する。
【００７４】
Ｗｅｂサーバ１０１は、コンテンツ提供部６１及びコンテンツデータ６０を有している。このコンテンツデータ６０は、任意の対象を表す映像や音声に関するデータを含んでいる。このコンテンツデータ６０には、その対象物を採取した時刻（採取時刻）に関する時刻情報及び、その対象物を採取した際における位置情報が関連づけられている。コンテンツ提供部６１は、このコンテンツデータ６０を提供する機能を有する。
【００７５】
自己のライフログ記録装置１においては、取得出力制御部９が、自己ライフログデータ２８の位置情報及び時刻情報に基づいて、Ｗｅｂサーバ１０１から該当するコンテンツデータ６０を取得する。具体的には、このコンテンツデータの取得にあたり、取得出力制御部９が、第１実施形態と同様に位置情報及び時刻情報を検索キーとしているため、図１１に示すようにバッファ６に取り込んだコンテンツデータ６０に基づく素材に自己が映り込んでいたり自己の声が含まれている可能性が高い。
【００７６】
図１２は、コンテンツ検索取得処理の手順の一例を示すフローチャートである。なお、図１２のフローチャートは、取得出力制御部９が他人ライフログデータ２８の代わりにコンテンツデータ６０を取得することを除き、第１実施形態における図８のフローチャートとほぼ同様の手順を含んでいる。
【００７７】
すなわち、自己のライフログ記録装置１は、その取得出力制御部９が、第１実施形態と同様に位置情報及び時刻情報を検索キーとして、Ｗｅｂサーバ１０１に対してコンテンツデータ６０を要求する（ステップＳ２４）。Ｗｅｂサーバ１０１では、そのコンテンツデータ提供部６１が、これら指定された位置情報及び時刻情報に基づいて、該当するコンテンツデータ６０を、無線或いは有線によりライフログ記録装置１に提供する機能を有する。
【００７８】
コンテンツデータ６０は、上述した他人ライフログデータ２７ではなく、利用者（自己）に関係すると思われる素材であればいかなるデータであってもよい。コンテンツデータ６０としては、例えば時刻情報を関連づけた音楽データを挙げることができる。このようなコンテンツデータ６０を用意しておくと、自己のライフログ記録装置１は、その取得出力制御部９が音楽を伴う電子自分史を作成することができるため、利用者は懐かしい音楽を伴った電子自分史を楽しむことができる。
【００７９】
第２実施形態によれば、作成した電子自分史は、他人の情報データ２７（他人ライフログデータ）の代わりに素材情報６０（コンテンツデータ）を編集して作成されている。この場合、素材情報６０としてＷｅｂサーバ１０１に多くの情報を用意しておけば、自分史データ作成部２４が、様々な素材情報を用いて電子自分史に関する自分史データを作成することができる。このような莫大に調達しうるコンテンツデータ６０を用いて作成された（電子）自分史は、その内容を時代などに応じて様々な態様とすることができるため、利用者の興味をより引きつける内容とすることができる。
【００８０】
＜表示例１＞
図１３は、上記各実施形態により作成された自分史の表示例を示すイメージ図である。
図示の例では、表示部９９の表示領域が左右２つに分割された態様を表している。右側の表示領域９１には、例えば利用者の両親がくつろいでいる様子が表示されている。この右側の表示領域９１には、利用者の自己ライフログデータ２８に基づいて、利用者自らが過去に見ていた風景が表示されている。一方、左側の表示領域９２には、利用者に対して物理的に他人に相当する両親の他人ライフログデータ２７に基づいて、利用者本人の幼少時代の姿が表示されている。つまりこの左側の表示領域９２には、利用者の自己ライフログデータ２８を用いるのではなく、両親が過去に見ていた風景が表示されている。
【００８１】
このような表示態様を採用すると、利用者は、同時に２種類の自分史を並べて見ることができるため、同時により多くの映像によって過去の思い出に浸ることができる。
【００８２】
＜表示例２＞
図１４は、上記各実施形態により作成された自分史の表示例を示すイメージ図である。
図示の例では、表示部９９自体が２つに分割された態様を表している。右側の表示部９９３には、上記表示例１における右側の表示領域９１と同一の自分史が表示される。一方、左側の表示部９９４には、上記表示例１における左側の表示領域９２と同一の自分史が表示される。
【００８３】
このような表示態様を採用すると、例えば２つの画面の間が、利用者の歩く速度に応じて床面が移動する床構造となっている場合、利用者が歩む速度に合わせて、表示部９９３，９９４の映像が順行させたり逆行させたりすることで、あたかも自分史をたどる散歩のようなエンターテイメント的な利用の仕方もできる。また利用者は、同時に２種類の自分史を並べて見ることができるため、同時により多くの映像によって過去の思い出に浸ることができる。さらに利用者は、視認しやすい角度でこれら２種類の自分史を見ることができる。
【００８４】
＜表示例３＞
図１５は、上記各実施形態により作成された自分史の表示例を示すイメージ図である。
図示の例では、表示部９９の表示領域が左右及び縦横４つに分割された態様を表している。これらの表示態様は、自分史を、複数のライフログを利用して表示した様子を表している。これら複数のライフログとしては、例えば自分のライフログ、友人のライフログ、飼い犬のライフログを挙げることができる。右上側の表示領域９５には、飼い主が飼い犬とくつろいでいる様子が表示されている。この右上側の表示領域９５には、飼い主の自己ライフログデータ２８に基づいて表示されている。
【００８５】
右下側の表示領域９６には、例えば「？」疑問を意味する図形が表示されている。この右下側の表示領域９６には、利用者の自己ライフログデータ２８に基づいて利用者自らが過去に見ていた風景が表示されている。
【００８６】
また左上の表示領域９８には、利用者の友人が日常見た風景が表示されている。この右上の表示領域９８には、各々、利用者の友人の他人ライフログデータ２７に基づいてその友人が過去に見ていた風景が表示されている。
【００８７】
このような表示態様を採用すると、利用者は、同時に４種類の自分史を並べて見ることができるため、同時にさらに多くの映像によって過去の思い出に浸ることができる。そしてさらには左下側の表示領域９７に示すように、例えばその時の自分の感情（喜び）の動き（喜びの度合い）をグラフで表示して見るのも興味深く、利用者は自分の思い出に浸ることができる。
【００８８】
なお、本実施形態は、上記に限られず、種々の変形が可能である。以下、そのような変形例を順を追って説明する。
＜変形例１＞
上記各実施形態では、他人のライフログ記録装置１が１台であることを例示しているが、これに限られず、多数の他人のライフログ記録装置１が存在している形態を例示してもよい。つまり、図１及び図１０に各々示す取得出力制御部９が、１人の他人に関係する他人ライフログデータ２７を編集して電子自分史を作成することのみならず、複数の他人に各々関係する他人ライフログデータ２７を編集して電子自分史を作成するようにしてもよい。
【００８９】
＜変形例２＞
上記実施形態では、図１及び図１０に各々示すライフログ記録装置１は、作成した電子自分史に関する電子自分史データを、ライフログ記録装置１に対して着脱可能な記録メディア（情報記録媒体）に記憶させて持ち運べるようにしてもよい。このようにすると、利用者は、作成した電子自分史を第三者に配布することができる。
【００９０】
＜変形例３＞
上記実施形態では、図１及び図１０に各々示す自己のライフログ記録装置１において取得出力制御部９は、自己ライフログデータ２８と、他人ライフログデータ２７或いはコンテンツデータ６０との組み合わせを編集して、電子自分史を作成しているが、これに限られない。すなわち取得出力制御部９は、自己ライフログデータ２８はあくまでも電子自分史を作成するための素材の検索用データとして取り扱い、これを素材として採用せず、他人ライフログデータ２７及びコンテンツデータ６０の少なくとも一方を素材として電子自分史を作成するようにしてもよい。
【００９１】
＜変形例４＞
上記実施形態では、利用者の感情状態として「嬉しい状態」を例示して電子自分史を作成しているがこれに限られず、例えば悲しい状態やその他の感情状態における電子自分史を作成するようにしてもよい。
【００９２】
＜変形例５＞
上記実施形態では、作成する電子自分史の時間的な期間の定めがないが、例えば学生時代のみの電子自分史を作る場合、小学時代、中学時代、高校時代、大学時代にまず分けて、それらの各期間の中で、感情データベース３０の感情データパターンが、例えば嬉しい時間が最も長いものや嬉しさが飛び抜けて高いものを主として（例えば視聴時間中、長い時間を取るように）、電子自分史を編集するようにしてもよい。このようにすると、利用者は、小学時代、中学時代、高校時代及び大学時代のうち最も嬉しいと感じる電子自分史を作成することができ、嬉しかった時代を存分に振り返ることができる。
【００９３】
上記各実施形態においては、上記情報データとして、例えば映像、音声、気温、気圧など、被験者が五感のうち少なくとも１つの感覚で感じ取ることができる情報（特定情報）を取り扱っている。しかも、上記各実施形態においては、上記生体情報として、例えば心拍数、血圧、発汗量など、被験者の状態を表す生体情報（例えば生体情報データ）を取り扱っている。
【００９４】
また、上記各実施形態においては、上記ライフログとして、例えばこれら特定情報、生体情報、時刻データ（素材時刻情報など）、場所データ（位置情報）のいずれか又はこれらいずれかの組み合わせを含んでいる。上記各実施形態では、上記特定情報のみならず、このライフログが記録対象とされたり編集対象とされるようにすることができる。このライフログに関しては、上記特定情報のみならず、上記生体情報も記録対象としたり編集対象としている。上記実施形態では、このような記録対象及び編集対象の少なくとも一方として上記生体情報が含まれるようにしてもよい。
【図面の簡単な説明】
【００９５】
【図１】本発明の第１実施形態としての自分史作成システムの構成例を示すシステム構成図である。
【図２】図１に示すバッファ及び取得出力制御部の構成例を示すブロック図である。
【図３】本実施形態において用いるデータの一例を示すイメージ図である。
【図４】自分史作成処理の手順の一例を示すフローチャートである。
【図５】図４に示す感情データベースの生成処理の一例を示すフローチャートである。
【図６】感情データベースに存在する感情データの一例を示す特性図である。
【図７】感情データベースに存在する感情データの他の一例を示す特性図である。
【図８】ライフログ検索取得処理の手順の一例を示すフローチャートである。
【図９】自分史の素材として採用すべきライフログを選択する様子の一例を示す図である。
【図１０】第２実施形態としての自分史作成システムの構成例を示すブロック図である。
【図１１】図１０に示すバッファ及び取得出力制御部の構成例を示すブロック図である。
【図１２】コンテンツ検索取得処理の手順の一例を示すフローチャートである。
【図１３】上記各実施形態により作成された自分史の表示例を示すイメージ図である。
【図１４】上記各実施形態により作成された自分史の表示例を示すイメージ図である。
【図１５】上記各実施形態により作成された自分史の表示例を示すイメージ図である。
【符号の説明】
【００９６】
１                ライフログ記録装置（情報編集装置、素材情報提供手段）
１ａ              ライフログ記録装置（情報編集装置、素材情報提供手段）
２                カメラ
２ａ              映像データ（情報データの一部）
３                マイクロフォン
３ａ              音データ（情報データの一部）
５                生体情報取得部（生体情報取得手段）
５ａ              生体情報
６                バッファ（素材情報記録装置）
９                取得出力制御部（素材情報取得手段）
１１              計時部
１２              音出力部（自分史出力手段）
２１              指定部（素材情報取得手段）
２２              検索部（素材情報取得手段）
２３              取得部（素材情報取得手段）
２４              自分史データ作成部（情報編集手段）
２７              他人ライフログデータ（素材情報）
２８              自己ライフログデータ（情報データ）
６０              コンテンツ（素材情報）
９９              表示部（自分史出力手段）
１００            自分史作成システム
１０１            Ｗｅｂサーバ（素材情報提供手段）
【図１】
2008252356.tif 000003
【図２】
2008252356.tif 000004
【図３】
2008252356.tif 000005
【図４】
2008252356.tif 000006
【図５】
2008252356.tif 000007
【図６】
2008252356.tif 000008
【図７】
2008252356.tif 000009
【図８】
2008252356.tif 000010
【図９】
2008252356.tif 000011
【図１０】
2008252356.tif 000012
【図１１】
2008252356.tif 000013
【図１２】
2008252356.tif 000014
【図１３】
2008252356.tif 000015
【図１４】
2008252356.tif 000016
【図１５】
2008252356.tif 000017