(57)【特許請求の範囲】
【請求項１】
１または複数の環境センサおよび１または複数の生体センサを含み、
該環境センサにより測定された環境センサ情報パラメータ値および該生体センサにより測定された生体センサ情報パラメータ値を測定時刻とともに記録する記録手段と、
該生体センサ情報パラメータ値の分布関数グラフを作成する分布関数グラフ作成手段と、
該生体センサ情報パラメータ値の分布関数グラフを利用して環境センサ情報を検索する検索手段と、
該生体センサ情報パラメータ値の分布関数グラフにおいて、生体センサ情報パラメータに対して予め決定された閾値以下の出現頻度のパラメータ値が記録された時刻に対応する環境センサ情報を優先的に検索結果として、対応する生体センサ情報とともに提示する提示手段とを具備し、
ここに、該環境センサ情報パラメータ値は、光、音、臭い、味、気温、圧力、振動、位置座標、電磁気、各種ガスよりなる群から選択されるパラメータの測定値またはそれらの組合せであって、
ここに、該生体センサ情報パラメータ値は、体温、脳波、筋電位、皮膚表面電位、皮膚表面抵抗、脈拍、心電位、呼吸音よりなる群から選択されるパラメータの測定値またはそれらの組合せであることを特徴とする情報処理装置。
【請求項２】
１の生体センサにより測定された生体センサ情報パラメータ値から作成された１の分布関数グラフにおいて、その生体センサ情報パラメータに対して予め決定された閾値以下の出現頻度のパラメータ値が記録された時刻に対応する環境センサ情報を優先的に検索結果として提示する請求項１記載の情報処理装置。
【請求項３】
複数の生体センサにより測定された生体センサ情報パラメータ値から作成された複数の分布関数グラフの各々において、それら生体センサ情報パラメータの各々に対して予め決定された各閾値以下の出現頻度のパラメータ値が記録された時刻が一致した場合、その時刻に対応する環境センサ情報を優先的に検索結果として提示する請求項１記載の情報処理装置。
【請求項４】
複数の生体センサにより測定された生体センサ情報パラメータ値から作成された複数の分布関数グラフを統合して得られた新たな分布関数グラフにおいて、各生体センサ情報パラメータに対して予め決定された閾値を合計して算出された新たな閾値以下の出現頻度のパラメータ値が記録された時刻に対応する環境センサ情報を優先的に検索結果として提示する請求項１記載の情報処理装置。
【請求項５】
生体センサ情報パラメータ値のグラフを指定した時間間隔毎に算出することを特徴とする請求項１記載の情報処理装置。
【請求項６】
現時点も含む任意の時点の生体センサ情報パラメータ値に最も近い生体センサ情報パラメータ値を持つ別の時点の環境センサ情報を提示することを特徴とする請求項１記載の情報処理装置。
【請求項７】
環境センサと生体センサのいずれか一方または両方が装置本体と離れていることを特徴とする請求項１ないし６いずれか１記載の情報処理装置。
【請求項８】
該分布関数のグラフがヒストグラムまたは分布曲線である請求項１ないし７いずれか１記載の情報処理装置。
【請求項９】
請求項１ないし８いずれか１記載の情報処理装置において、環境センサ情報パラメータを測定し、生体情報パラメータを測定する測定ステップと、該環境センサにより測定された環境センサ情報パラメータ値および該生体センサにより測定された生体センサ情報パラメータ値を測定時刻とともに記録する記録ステップと、該生体センサ情報パラメータ値の分布関数グラフを作成する分布関数グラフ作成ステップと、該生体センサ情報パラメータ値の分布関数グラフを利用して環境センサ情報を検索する検索ステップと、環境センサ情報を対応する生体センサ情報とともに提示する提示ステップとをコンピュータに実行させる情報処理プログラム。
【請求項１０】
請求項９記載の情報処理プログラムが記録されたコンピュータ読取り可能な記録媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、ユーザが体験する環境関連情報（光、音、臭い、味、気温、圧力、振動、位置座標、電磁気、各種ガス、時刻等）と、ユーザ自身に関わる生体関連情報（体温、脳波、筋電位、皮膚表面電位、皮膚表面抵抗、脈拍、心電位、呼吸音等）とを統合的に記録し、検索し、再生するマルチメディア情報処理装置に関する。
【０００２】
【従来の技術】
近年、映像や音声などのマルチメディア情報を記録し、再生し、編集し、表示するパソコンやホームサーバーの開発が進められている。さらに情報機器の小型化に伴い、コンピュータを常時装着し、いつでもどこでもサービスを受けたり、生データを入力したりできるウェアラブルコンピュータの開発も行なわれている。このような機器が進化するとユーザが自身の人生体験を全て記録して好きな時に思い出したい時点の情報を再生できる「人生アルバム」というコンセプトの機器を実現できることも予想される。
【０００３】
インターネットの情報検索サービスのように、テキストベースの情報の場合は効率的な検索方法が多数存在するが、光、音、臭い等の環境情報に関しては検索用に予め何らかのイベント名称等のインデックスが必要である。さらに、これらの情報が公ではなく個人に関わる場合にはユーザ自身でインデックスを付与するという手間が生じる。しかしながら、遠い将来に人生を振り返る際には、具体的なイベント名称すら忘れていることも想定される。
【０００４】
現在、これらの情報が記録された日時に対応して自動的に作成できるタイムスタンプが多く用いられている。例えば、特開平１１−６９２６６には、タイムスタンプと組み合わせて映像の種類（静止画、動画）に応じてユーザヘの表示形態を改善する技術が開示されている。
このように、環境情報が記録された日時に対応して自動的に作成できるタイムスタンプが多く用いられているが、人間の記憶が曖昧である為に、日時すら思い出せないことも度々ある。
【０００５】
【発明が解決しようとする課題】
上記したごとく、光、音、臭い等の環境情報を検索するためには、ユーザー自身の正確な記憶に頼る以外の方法が存在しなかった。そこで、ユーザー自身の記憶が曖昧なものであっても、上記の環境情報を正確に検索し得る方法が求められる。
【０００６】
また、「ドキドキした時」、「ワクワクした時」、「ハラハラした時」等のように想い出の心理状態グループ別に環境情報を検索したいという潜在ニーズも想定される。
心理状態グループを分類する際の評価値として、特開平８−８７８７０には、体温、脈拍、脳波等の生体センサ情報パラメータ値を使うことが記載されている。しかしながら、生体センサ情報の場合は不安定で個人差が大きく、さらに長い年月の間に経時変化もするので、生体センサ情報パラメータ値の絶対値や変化量をそのままその時点における意味のある評価値として使用することは、分類や検索において精度上の課題がある。
【０００７】
【課題を解決するための手段】
上記課題を解決するために、本発明は、光、音、臭い等を検出する環境センサと、体温、脈拍、脳波等を検出する生体センサとを用いて得られた情報（実体験関連データ）を測定時刻とともに大容量メモリに記録し、検索したい時には、記録された生体センサ情報を利用して記録された環境センサ情報を検索し、検索結果の環境関連情報を対応する生体関連情報とともにユーザに提示できる情報処理装置を提供することを目的とする。
なお生体センサ情報を検索する際には、生体センサ情報パラメータ値の絶対値や変化量をそのまま利用するのではなく、生体センサ情報が記録された全期間のヒストグラムまたは分布曲線における生体センサ情報パラメータ値の意味合いを利用することにより、心理状態グループに近い感覚での精度の良い検索を実現する。さらに、複数の生体センサ情報パラメータ値のヒストグラムまたは分布曲線を用いて総合的に判断することにより、さらに検索精度を高めることができる。
【０００８】
すなわち、本発明は、１または複数の環境センサおよび１または複数の生体センサを含み、該環境センサにより測定された環境センサ情報パラメータ値および該生体センサにより測定された生体センサ情報パラメータ値を測定時刻とともに記録する記録手段と、該生体センサ情報パラメータ値の分布関数グラフを作成する分布関数グラフ作成手段と、該生体センサ情報パラメータ値の分布関数グラフを利用して環境センサ情報を検索する検索手段と、検索された環境センサ情報を対応する生体センサ情報とともに提示する提示手段とを具備する情報処理装置を提供する。ここに、該分布関数のグラフは、ヒストグラムまたは分布曲線のいずれであってもよい。
【０００９】
また、本発明の情報処理装置は、生体センサ情報パラメータ値の分布関数グラフにおいて、生体センサ情報パラメータに対して予め決定された閾値以下の出現頻度のパラメータ値が記録された時刻に対応する環境センサ情報を優先的に検索結果として提示することを特徴とする。
一つの局面において、本発明の情報処理装置は、１の生体センサから得られた生体センサ情報パラメータ値の１の分布関数グラフにおいて、その生体センサ情報パラメータに対して予め決定された閾値以下の出現頻度のパラメータ値が記録された時刻に対応する環境センサ情報を優先的に検索結果として提示する。
もう一つの局面において、本発明の情報処理装置は、複数の生体センサから得られた生体センサ情報パラメータ値の複数の分布関数グラフの各々において、それら生体センサ情報パラメータの各々に対して予め決定された各閾値以下の出現頻度のパラメータ値が記録された時刻が一致した場合、その時刻に対応する環境センサ情報を優先的に検索結果として提示する。
【００１０】
また、本発明の情報処理装置は、複数の生体センサから得られた生体センサ情報パラメータ値から作成された複数の分布関数グラフを統合して作成した新たな分布関数グラフにおいて、それら生体センサ情報パラメータの各々に対して予め決定された閾値を合計して算出された新たな閾値以下の出現頻度のパラメータ値が記録された時刻に対応する環境センサ情報を優先的に検索結果として提示することを特徴とする。
【００１１】
さらに、本発明の情報処理装置は、生体センサ情報パラメータ値の分布関数グラフを指定した時間間隔毎に算出することを特徴とする。
【００１２】
さらに、本発明の情報処理装置は、現時点も含む任意の時点の生体センサ情報パラメータ値に最も近い生体センサ情報パラメータ値を持つ別の時点の環境センサ情報を提示することを特徴とする。
【００１３】
さらに、本発明の情報処理装置は、環境センサと生体センサのいずれか一方または両方が装置本体と離れていて、装置本体と離れているセンサは装置本体無線通信によって接続されていることを特徴とする。
【００１４】
また、本発明は、コンピュータを上記の全手段として機能させる情報処理プログラムおよび該情報処理プログラムが記録されたコンピュータ読取り可能な記録媒体を提供する。
すなわち、本発明の情報処理プログラムは、環境センサに環境センサ情報パラメータを測定し、生体センサに生体情報パラメータを測定する測定ステップと、該環境センサにより測定された環境センサ情報パラメータ値および該生体センサにより測定された生体センサ情報パラメータ値を測定時刻とともに記録する記録ステップと、該生体センサ情報パラメータ値の分布関数グラフを作成する分布関数グラフ作成ステップと、該生体センサ情報パラメータ値の分布関数グラフを利用して環境センサ情報を検索する検索ステップと、環境センサ情報を対応する生体センサ情報とともに提示する提示ステップとをコンピュータに実行させることを特徴とする。
【００１５】
また、本発明の情報処理プログラムは、生体センサ情報パラメータ値の分布関数グラフにおいて、生体センサ情報パラメータに対して予め決定された閾値以下の出現頻度のパラメータ値が記録された時刻に対応する環境センサ情報を優先的に検索結果として提示手段に提示させることを特徴とする。
【００１６】
また、本発明の情報処理プログラムは、１の生体センサにより測定された生体センサ情報パラメータ値から作成された１の分布関数グラフにおいて、その生体センサ情報パラメータに対して予め決定された閾値以下の出現頻度のパラメータ値が記録された時刻に対応する環境センサ情報を優先的に検索結果として提示手段に提示させることを特徴とする。
あるいは、本発明の情報処理プログラムは、複数の生体センサにより測定された生体センサ情報パラメータ値から作成された複数の分布関数グラフの各々において、それら生体センサ情報パラメータの各々に対して予め決定された各閾値以下の出現頻度のパラメータ値が記録された時刻が一致した場合、その時刻に対応する環境センサ情報を優先的に検索結果として提示手段に提示させることを特徴とする。
【００１７】
さらに、本発明の情報処理プログラムは、複数の生体センサにより測定された生体センサ情報パラメータ値から作成された複数の分布関数グラフを統合して得られた新たな分布関数グラフにおいて、各生体センサ情報パラメータに対して予め決定された閾値を合計して算出された新たな閾値以下の出現頻度のパラメータ値が記録された時刻に対応する環境センサ情報を優先的に検索結果として提示手段に提示させることを特徴とする。
【００１８】
【発明の実施の態様】
本発明の第１の実施形態は、自身の人生を記録して、必要な時にマルチメディア情報で回想できる「人生アルバム」というコンセプトの情報処理装置の実現に関わる。
【００１９】
図１Ａは、本発明の第１の実施形態における使用シーンで、環境センサおよび生体センサの両方がユーザに装着されている。このとき、環境センサおよび生体センサの両方が情報処理装置本体と接続されていてもよいし、環境センサおよび生体センサのいずれか一方または両方が情報処理装置から離れていてもよい。センサが情報処理装置から離れている場合、そのセンサからの情報は無線通信により情報処理装置本体に送信される。
【００２０】
入力モード時には、カメラやマイクなどの環境センサは環境情報を入力し、環境センサメモリに蓄積すると同時に、脳波形や脈拍計、血圧計などの生体センサは生体情報を入力し、生体センサメモリに蓄積する。これらの情報入力と並行して、設定された複数の周期毎に各生体センサ情報パラメータのヒストグラムを作成し、生体センサ情報ヒストグラムメモリに蓄積する。
【００２１】
検索モード時において、情報入力部（ＨＩ部）経由で、ユーザからある特定の心理状態グループ（例えば、「好きなことに熱中している時」）を検索するように指示コマンドを受けた際には、制御部は心理状態−生体センサ情報対応表メモリに記憶された心理状態−生体センサ情報対応表を検索して、低頻度領域が指定された心理状態グループに対応する値を持つことを予め定義されている生体センサ情報を見つけ出し、その生体センサ情報のパラメータ値が低頻度領域にあった時刻の環境センサ情報を、制御部は環境センサ情報メモリから読み出して情報出力部へ出力してユーザに提示する。ここで、上記した心理状態−生体センサ情報対応表は予め多数の被験者を用いた実験により作成されている。
【００２２】
また、本発明の第２の実施形態は、お年寄りや幼児の生活を記録して、危険が迫った時にマルチメディア情報で離れた場所にいる家族に通知できる「生活エージェント」いうコンセプトの情報処理装置の実現に関わる。
【００２３】
図１Ｂは、本発明の第２の実施形態における使用シーンで、生体センサのみがユーザに装着されており、環境センサはユーザから離れた場所に配置されている。このとき、環境センサおよび生体センサのいずれか一方または両方が情報処理装置から離れていてもよい。センサが情報処理装置から離れている場合、そのセンサからの情報は無線通信により情報処理装置本体に送信される。
【００２４】
入力モード時には、カメラやマイクなどの環境センサは環境情報を入力し、環境センサメモリに蓄積すると同時に、脳波形や脈拍計、血圧計などの生体センサは生体情報を入力し、生体センサメモリに蓄積する。これらの情報入力と並行して、設定された複数の周期毎に各生体センサ情報パラメータのヒストグラムを作成し、生体センサ情報ヒストグラムメモリに蓄積する。
【００２５】
次いで、検索モードを実行する。好ましくは、入力モードと並行して検索モードを実行し、ＨＩ部経由で、予めユーザまたはユーザ以外からある特定の心理状態グループ（例えば、「ドキドキしている時」）を検索するように指示コマンドを受けていた際には、制御部は心理状態−生体センサ情報対応表メモリに記憶された心理状態−生体センサ情報対応表を検索して、低頻度領域が指定された心理状態グループに対応する値を持つことを予め定義されている生体センサ情報を見つけ出し、その生体センサ情報のパラメータ値が低頻度領域にあった時刻の環境センサ情報を、制御部は環境センサ情報メモリから読み出して情報出力部へ出力してユーザまたはユーザ以外に提示する。なおユーザ以外に提示する際に通信を用いて遠方に提示情報を送っても構わない。
【００２６】
以下、本発明の実施形態１および２を図面を参照して個別に説明する。
Ａ．第１の実施形態
図２は、本発明による第１の実施形態の情報処理装置のブロック図である。第１の実施形態は、生体センサおよび環境センサの両方を含む情報処装置本体をユーザーが携帯する場合の実施例に関するものである。
本発明の情報処理装置の動作モードは、大きくは入力モードと検索モードからなる。入力モード時において、少なくとも１つ以上の環境センサにより得られた情報Ｍ（ｔ）が時刻ｔとともに環境センサ情報メモリに記憶され、同時に少なくとも１つ以上の生体センサのうちｉ番目の生体センサにより得られた情報ｘｉ（ｔ）が時刻ｔとともに生体センサ情報メモリに記憶される。
【００２７】
ＨＩ部は本発明の情報処理装置に対するユーザの指示コマンド入力のためのインタフェース部であり、各生体センサ情報のヒストグラムを作成する際の周期（時間間隔）Ｈを設定することができる。例えば、「優勢脳波周波数」という生体センサ情報に対して「１分間隔」（Ｈ＝１分）という周期を設定すれば、制御部は環境センサ情報メモリから１分間分の優勢脳波周波数値を読出して優勢脳波周波数のヒストグラムを作成し、生体センサ情報ヒストグラムメモリに記憶する。
【００２８】
図３は、このようにして作成された生体センサ情報パラメータ値の分布関数を表示するグラフである。ここでは、分布曲線を用いて分布関数を表示している。例として、頻度の分布曲線が右下がり型、左下がり型および中央凹型を示しているが、生体センサの種類によってはこれら以外の型も存在する。
一般的に、ある生体センサ情報パラメータの値が低頻度領域にある場合は、ユーザの心理的状態が通常ではない心理状態グループにあることが想定される。例えば、体温という生体センサ情報パラメータの値が低頻度領域にある場合は、ユーザは高熱を出していたりするし、脈拍という生体センサ情報パラメータの値が低頻度領域にある場合は、ユーザは心臓がドキドキしていたりする。
【００２９】
図４は、生体センサ情報パラメータ値の分布関数の経時変化を示す概念図である。ここでｉ番目の生体センサ情報パラメータのｎ番目の時期Ｔｎ（Ｈ）（例えば、Ｔｎ（日））に作成されたヒストグラムＨｉ（Ｔｎ（Ｈ））から推定される分布曲線の横軸をｘｉ、縦軸を確率Ｐｉ（ｘｉ,Ｔｎ（Ｈ））とする。確率Ｐｉ（ｘｉ,Ｔｎ（Ｈ））が各生体センサ情報に対して決定された特定の値（閾値）以下の値をとるｘｉの範囲を低頻度領域と呼ぶことにする。
人生という長い期間で観測した際には、生体センサ情報パラメータ値の分布関数は徐々に変化していくのが普通である。すなわち、同じ生体センサ情報パラメータ値ｘｉであっても、時期Ｔｎ（Ｈ）の違いによって確率Ｐｉ（ｘｉ,Ｔｎ（Ｈ））は変化し、それに従って、低頻度領域も変化する。
【００３０】
図５は、生体センサ情報ヒストグラムメモリに記憶される各周期毎の生体センサ情報ヒストグラムの時系列の概念図である。本例では周期Ｈは一つであるが、複数の時間間隔のＨ毎に作成される生体センサ情報ヒストグラムの時系列を記憶しても構わない。
【００３１】
また本発明において、生体センサ情報パラメータ値の分布関数のグラフは分布曲線（確率密度曲線）に限定されるものではなく、ヒストグラムまたはヒストグラムを近似する関数であっても構わない。実際には、先ず、生体センサ情報パラメータ値からヒストグラムを作成する。観測データが多くなり、ヒストグラムの分解能（分割）を増大すれば、分布曲線で近似することが可能となる。
以下、本発明においては、「ヒストグラム」というときは、断りがない限り、分布曲線も意味するものとする。
【００３２】
（１）心理状態−生体センサ情報対応表
表１は、予め大勢の被験者から測定された各心理状態（心理状態グループ）と各生体センサ情報との関連を表した心理状態−生体センサ情報対応表である。この対応表は、ｉ番目の生体センサ情報の複数の時期Ｔｎ（Ｈ）における複数のヒストグラムＨｉ（Ｔｎ（Ｈ））と、そのヒストグラムにおける確率Ｐｉ（ｘｉ,Ｔｎ（Ｈ））がｊ番目の心理状態に対して意味を持つか否かを判断するための閾値Ａｉｊを格納し、心理状態−生体センサ情報対応表メモリの中に記憶されている。
【００３３】
【表１】
0003822796.tif 000002
【００３４】
検索モード時において、上記ＨＩ部経由で、ユーザからある特定の心理状態グループ（例えば、「ドキドキしている時」）を検索するように指示コマンドを受けた際には、制御部は心理状態−生体センサ情報対応表メモリの中の心理状態−生体センサ情報対応表を検索して、低頻度領域が指定された心理状態グループに対応する値を持つことを予め定義されている生体センサ情報を見つけ出し、その生体センサ情報のパラメータ値が低頻度領域にあった時刻の環境センサ情報を、制御部は環境センサ情報メモリから読み出して情報出力部へ出力してユーザに提示する。
【００３５】
（２）環境センサ情報検索モード
ａ．特定の心理状態グループによる検索
図６は、特定の心理状態グループを指定して環境センサ情報を検索するモード時のフローである。
ユーザがＨＩ部経由で検索したい心理状態グループの番号ｊを入力する（１０１）。
時刻変数ｔに本発明の装置が記録を開始した時点の時刻にわずかな時刻△ｔを加えた値を初期値としてセットする（１０２）。
時刻変数ｔをヒストグラムを作成する周期（時間間隔）Ｈで割った値の少数点以下を切り捨てた数に１を加えた数を期間の通し番号変数ｎにセットする（例えば、ｔ／Ｈ＝０．５の場合、ｎ＝０＋１＝１）。これにより、測定開始時刻が属する周期を第１周期として、時刻変数ｔを第ｎ周期に振り分ける（１０３）。
生体センサの番号変数ｉに１を、条件を満たした回数をカウントするための変数ｃｎｔに０をセットして初期化する（１０４）。
確率Ｐｉ（ｘｉ,Ｔｎ（Ｈ））の時刻ｔ−Ｈｔから時刻ｔ＋Ｈｔ（Ｈｔ：周期Ｈよりはずっと小さい正の定数）までの積分値を求め、閾値Ａｉｊより小さいか比較する（１０５）。
もし閾値Ａｉｊより小さければ変数ｃｎｔの値を1つ増やす（１０６）。
上記（１０５）から（１０６）までの処理を生体センサの番号変数ｉがＩ（ｉの最大値）になるまで繰り返し（１０７、１０９）、最終的なカウント値ｃｎｔが閾値Ｘｃｎｔより大きいか比較し、大きい場合には、制御部は、時刻ｔ前後における環境センサ情報Ｍ（ｔ）を環境センサ情報メモリから読み出して情報出力部へ出力してユーザに提示する（１１０）。
【００３６】
上記説明では生体センサ情報番号ｉ毎に、確率Ｐｉ（ｘｉ,Ｔｎ（Ｈ））の時刻ｔ−Ｈｔから時刻ｔ＋Ｈｔまでの積分値と閾値Ａｉｊとを比較してカウントしたが、複数の生体センサ情報パラメータｉ＝１、…Ｉに対する確率Ｐｉ（ｘｉ,Ｔｎ（Ｈ））の積分値の和と閾値Ａｉｊの和とを比較して、ユーザより指示された心理状態グループの番号ｊに対応する環境センサ情報を出力するか否かを判断しても構わない。
尚、複数の生体センサ情報パラメータに対する確率Ｐｉの積分値の和を算出するためには、生体センサ情報パラメータ値から作成された分布関数を規格化しておく必要がある。具体的には、観測したパラメータ値の最小値を０．０１とし、最大値を０．９９として横軸のスケールを正規化する。縦軸のスケールは、例えば％表示にすることにより、全ての生体パラメータ情報に対して統一することができる。
【００３７】
ｂ．任意時点の心理状態と同様な心理状態による検索
図７は、任意時点における心理状態と同様な心理状態における環境センサ情報を検索するモード時のフローである。
ユーザがＨＩ部経由で検索対象の時刻Ｔｂを入力する（２０１）。
時刻変数ｔに本発明の装置が記録を開始した時点の時刻にわずかな時刻△tを加えた値を初期値としてセットする。さらに時刻変数Ｔｂをヒストグラムを作成する周期（時間間隔）Ｈで割った値の少数点以下を切り捨てた数に１を加えた数を期間の通し番号変数ｎｂにセットする（２０２）。
時刻変数ｔをヒストグラムを作成する周期（時間間隔）Ｈで割った値の少数点以下を切り捨てた数に１を加えた数を期間の通し番号変数ｎにセットする（２０３）。
生体センサの番号変数ｉに１を、条件を満たした回数をカウントするための変数ｃｎｔに０をセットして初期化する（２０４）。
確率Ｐｉ（ｘｉ,Ｔｎ（Ｈ））の時刻ｔ−Ｈｔから時刻ｔ＋Ｈｔ（Ｈｔ:周期Ｈよりはずっと小さい正の定数）までの積分値と確率Ｐｉ（ｘｉ,Ｔｎｂ（Ｈ））の時刻Ｔｂ−Ｈｔから時刻Ｔｂ＋Ｈｔまでの積分値との差を求め、予め設定された閾値Ｂｉより小さいか比較する（２０５）。
もし閾値Ｂｉより小さければ変数ｃｎｔの値を１つ増やす（２０６）。
上記（２０５）から（２０６）までの処理を生体センサの番号変数ｉがＩ（ｉの最大値）になるまで繰り返し（２０７、２０９）、最終的なカウント値ｃｎｔが閾値Ｙｃｎｔより大きいか比較し、大きい場合には、制御部は、時刻ｔ前後における環境センサ情報Ｍ（ｔ）を環境センサ情報メモリから読み出して情報出力部へ出力してユーザに提示する（２１０）。
【００３８】
Ｂ．第２の実施形態
図８は、本発明による第２の実施形態の情報処理装置のブロック図である。第２の実施形態は、環境センサを含む情報処理装置本体がユーザとは離れた場所に設置されている場合の実施例に関するものである。生体センサが情報処理装置から離れて設置されていること以外は図２で示した第１の実施形態で使用するブロック図と同じである。
生体センサから入力された情報は信号送出部より無線で送信され、信号受信部で受信されて生体センサ情報メモリに記憶される。さらに、環境センサも情報処理装置本体と無線通信で接続されていても構わない。
第２の実施形態においても、第１の実施形態で説明したように、特定の心理状態グループによる検索および任意時点の心理状態と同様の心理状態による検索を行うことができる。
【００３９】
【実施例】
実施例１  心理状態−生体センサ情報相関図の作成
多数の被検者の脳波および脈拍を様々な環境（例えば、睡眠中、仕事中、好きなことに熱中しているとき等）において測定した。また、各測定につき、被検者に心理状態を確認し、心理状態と各生体センサ情報パラメータの頻度と対応させた。
【００４０】
脳波は、その周波数により分類することができ、ここでは、θ波、α波（Ｓｌｏｗ α波、Ｍｉｄ α波およびＦａｓｔ α波）およびβ波の５つの周波数帯に分類した。
α波は覚醒安静時の閉眼状態、すなわち、リラックスした時に優勢であり、その周波数により、さらに、Ｓｌｏｗ α波（７〜８Ｈｚ）、Ｍｉｄ α波（９〜１１Ｈｚ）およびＦａｓｔ α波（１２〜１４Ｈｚ）の３つに分類した。β波は開眼状態または精神的活動が高まったとき、例えば、緊張したときに優勢となり、ここでは１５Ｈｚ以上の脳波をβ波とした。また、θ波は睡眠時やその他の状態において見られ、６Ｈｚ以下の脳波をθ波と分類した。
【００４１】
この結果、緊張または睡眠時には、Ｍｉｄ α波の頻度が１０％以下であることが分った。そこで、緊張または睡眠時に対応するＭｉｄ α波の頻度について１０％を閾値とした。
また、この実験から、ドキドキした時、すなわち脈拍が通常よりも高い範囲にある頻度は５％以下であることが分った。これにより、心理状態「１．ドキドキした時」に対する生体センサ情報パラメータ「２．脈拍」の閾値Ａ２１を５％とした。
同様に、上記以外の心理状態についても各生体センサ情報パラメータの閾値を決定し心理状態−生体センサ情報対応表を作成した。
【００４２】
実施例２  ヒストグラムの作成
心理状態「寝起きで仕事（勉強）しているとき」を構築するために、被験者に３０分間の睡眠後９０分間仕事をしてもらい、その間中、被験者の脳波を測定した。このときの優勢脳波周波数の頻度を表２に示し、この結果をもとに作成したヒストグラムを図９に示す。
【００４３】
【表２】
0003822796.tif 000003
【００４４】
図９から明らかなように、上記の１２０分間（睡眠３０分間＋仕事９０分間）のヒストグラムにおいて、３種のα波の頻度がいずれも１０％以下と低く、β波およびθ波の頻度が高いことが分った。すなわち、睡眠または緊張している状態であることがヒストグラムに反映されていることが確認された。
【００４５】
実施例３  検索
「寝起きで仕事（勉強）しているとき」で検索したところ上記のヒストグラムを出力した。
【００４６】
【発明の効果】
本発明によれば、ユーザ自身が実際に体験し記録した情報に意図的にインデックスを付けなくても、環境関連情報と同時に入力された生体関連情報をインデックス代わりに用いて、心理状態グループ別に思い出したいシーンを再生することができる。生体関連情報をインデックスとして使用する際に、そのまま生体関連情報パラメータ値やその変化量を用いるのと比較して、任意の周期で求めた各生体関連情報のヒストグラムまたは分布曲線を用いることにより、検索対象の心理状態グループとよく対応した精度の高い実用的なインデックスを実現し、検索に利用することができる。
【図面の簡単な説明】
【図１】  本発明の使用シーンを示す概略図である。
【図２】  本発明の第１の実施形態のブロック図である。
【図３】  生体センサ情報パラメータのヒストグラムの概念図である。
【図４】  生体センサ情報パラメータのヒストグラムの経時変化の概念図である。
【図５】  各周期毎の生体センサ情報ヒストグラム時系列の概念図である。
【図６】  本発明による特定の心理状態グループによる検索のフロー図である。
【図７】  本発明による任意時刻の心理状態と同様の心理状態グループによる検索のフロー図である。
【図８】  本発明の第２の実施形態のブロック図である。
【図９】  優勢脳波周波数のヒストグラムである。
【図１】
0003822796.tif 000004
【図２】
0003822796.tif 000005
【図３】
0003822796.tif 000006
【図４】
0003822796.tif 000007
【図５】
0003822796.tif 000008
【図６】
0003822796.tif 000009
【図７】
0003822796.tif 000010
【図８】
0003822796.tif 000011
【図９】
0003822796.tif 000012