(57)【要約】【課題】  使用者の感情や気分などの状態を予測することにより、使用者の状態により適した音響を提示する。更に、使用者の状態に適した音響を提示することにより、リラックス効果だけでなく、癒しの効果を与える。【解決手段】  使用者の生体情報を計測する生体情報センサ２から取り込まれた情報に基づいて、使用者の情動を予測し、その情動に対応した音響を再生する。【選択図】      図１
2005040440.tif 000002
【特許請求の範囲】
【請求項１】
生体情報を計測する生体情報センサと、
音を再生するスピーカと、
前記生体情報センサからの計測情報を基に、使用者の情動を推定し、その情動に対応した効果音を選択し、音響データ再生回路によって再生する制御手段とを備えた
音響再生装置。
【請求項２】
請求項１記載の音響再生装置において、
前記生体情報センサと、前記スピーカと、前記制御手段とを内蔵し、
前記生体情報センサを、本体外縁部に配置したことを特徴とする
音響再生装置。
【請求項３】
請求項２記載の音響再生装置において、
前記生体情報センサと、前記スピーカと、前記制御手段とを枕の内部に配置したことを特徴とする
音響再生装置。
【請求項４】
使用者が睡眠中でないかを判定するステップと、
前記生体情報センサからの計測情報を基に使用者の情動を推定する情動推定ステップと、
推定した情動に対応した効果音を選択し、再生するステップとを有する
制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、リラクセーションを目的とした音響再生装置及びその制御方法に関し、特に使用者の感情や気分などの状態を予測して、使用者にリラックス効果や癒しの効果を与える技術に関する。
【背景技術】
【０００２】
従来、リラクセーションを目的とした音楽用コンパクトディスクや、安眠を目的として、脳波などに応じた音声を発生させるものなどがある。これらの手段では、使用者の状態に関係なく音を発生させていたが、この課題を解決するものとして、生体情報を基に音響を再生することで、相互作用的な音響提示を行うものが考案されている。
【０００３】
特許文献１には、上述した使用者の生体情報を音響にフィードバックさせることにより、相互作用的な音響提示手段を実現した音響再生装置について開示されている。
【特許文献１】特開平５−１７６９９９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかし、上述した従来の音響再生装置では、使用者の生体情報として体動などの情報を取り込み、単にその計測値に対応した効果音を決定し再生するため、使用者の感情や気分を反映し難いという問題があった。
【０００５】
本発明の目的は、使用者の感情や気分などの状態を予測することにより、使用者の状態により適した音響を提示することである。更に、使用者の状態に適した音響を提示することにより、リラックス効果だけでなく、癒しの効果を与えることである。
【課題を解決するための手段】
【０００６】
本発明は、使用者の生体情報を計測する生体情報センサから取り込まれた情報に基づいて、使用者の情動を予測して、その情動に対応した音響を再生する。
【０００７】
このようにしたことで、使用者に対してリラックス効果とともに癒しの効果を与えることができるようになる。
【発明の効果】
【０００８】
本発明によると、使用者の情動を推定して、それに対応する効果音を再生することにより、リラックス効果だけでなく、癒しの効果も期待できる。また、抱き枕などの移動可能な形状に構成することで、使用場所が限定されることなく、いつでもどこでも使用することができる。
【発明を実施するための最良の形態】
【０００９】
以下、本発明の一実施の形態を、音源を内蔵した抱き枕を例にして、図１〜図５を参照して説明する。
【００１０】
図１は、抱き枕本体の内部を示した説明図である。抱き枕１の本体は、使用者が抱きかかえることが可能な大きさであれば、形状は特に問わない。ただし、材質は適度な柔軟性があり、抱き心地のよいものが望ましい。抱き枕１の内部には、使用者の生体情報を計測するための生体情報センサ２と、音響を提示するスピーカ３と、生体情報センサ２からの計測値に基づいて使用者への音響提示内容を決定し、スピーカ３へ出力する制御装置４を備える。
【００１１】
生体情報センサ２は、圧力センサ、赤外線センサ、マイクなどであり、使用者の感情状態（情動）を判断できるものであればよい。これらのセンサは、より感度良くデータ取得できるよう、使用者に近接した抱き枕の本体外縁部に配置されている。更に、センサをマトリクス状に複数個取り付けることにより、使用者の姿勢によらずデータが取得可能であり、また使用者の姿勢そのものも推定可能なようにしておく。
【００１２】
図２に、制御装置４の構成例を示すブロック図を示す。制御装置４には、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１１が備えられ、本装置の各機器の制御を行う。生体情報センサ２としては、赤外線センサ２１や、圧力センサ２２や、マイク２３が抱き枕１の本体外縁部に配置されており、それらのセンサからの情報をＡ／Ｄ（アナログ／デジタル）変換器１２−１，１２−２，１２−３を介してＣＰＵ１１へ取り込む。音響データ再生回路１３は、ＣＰＵ１１からの指示に従って音響データＲＯＭ１４に記録されている音響データから所定のデータを取り出し、再生するように構成されている。音響データ再生回路１３によって再生された音響データは、Ｄ／Ａ（デジタル／アナログ）変換器１５によりデジタルからアナログに変換され、アンプ（増幅器）１６を介してスピーカ３から提供される。ＣＰＵ１１には、処理内容を記述したプログラムを保存するＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）１７と、プログラムの処理に必要なデータを保存するＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）１８が接続され、それらをもとに処理を行う。
【００１３】
次に、使用者の感情状態を推定する処理例について説明する。使用者は、抱き枕を抱えた状態で使用するため、抱き枕１の本体外縁部に配置された生体情報センサ２で計測された情報から、使用者の感情状態を推定することができる。
【００１４】
まず、圧力センサ２２により計測された情報から使用者の生体状態を推定する処理について図３を参照して説明する。計測された圧力センサの応答信号は、バンドパスフィルタ（ＢＰＦ）によって周波数成分に応じて帯域分割される。分割された成分のうち、ＤＣ成分は使用者の姿勢や体動を推定するために用いる。即ち、圧力の静的な分布と、数十秒単位の比較的長期の時間的な変化を検出することにより、使用者が抱き枕本体を抱える強度や使用者の姿勢の変化を推定する。静的な圧力が強い場合は、使用者が抱き枕を強く抱えていて、時間的な変化が大きい場合は、使用者が頻繁に動いていると考えられる。また、０．５Ｈｚ未満程度のなだらかな周期成分を用いて、使用者の呼吸の周期を推定できる。同様に、０．５〜２Ｈｚ程度の周期成分により、使用者の脈拍を推定できる。また、呼吸や脈拍の成分が強く現れる圧力センサの位置を特定することにより、胸部や腹部の位置を同定することができるため、その位置の変化を検出することで、使用者の姿勢の推定に用いることもできる。
【００１５】
マイク２３では、使用者の声を検出する他に、呼吸における息づかいを検出することができる。マイクで検出される使用者の音声について、音韻及び韻律の周波数パターンを解析することにより、使用者の気分の快、不快を推定することができる。また、マイク２３で検出された息づかいの情報と、圧力センサ２２で検出された呼吸の周期とを組み合わせることにより、呼吸の推定精度を向上させることができる。また、赤外線センサ２１は、使用者が抱き枕１を抱えているかの判断に用いられる。
【００１６】
次に、生体情報センサ２の計測値から推定された使用者の生体状態から、使用者の感情や気分などの状態（情動）を推定する処理例について説明する。本例では、使用者のある時刻Ｔにおける状態として、緊張度をＳｔ（Ｔ）、快感度をＳｆ（Ｔ）で表し、使用者の安静平時の状態を０とする数値で表す。緊張度Ｓｔ（Ｔ）は、呼吸周期及び脈拍周期が安静平時より長く、時間的な変化率が小さいときは弛緩（Ｓｔ（Ｔ）＜０）、安静平時より短く、時間的な変化が大きい時は緊張（Ｓｔ（Ｔ）＞０）のように推定する。快感度Ｓｆ（Ｔ）は、使用者の発生する声のトーンが低いときは不快（Ｓｆ（Ｔ）＜０）、高いときは快（Ｓｆ（Ｔ）＞０）のように推定する。また、笑い声が検出されれば（Ｓｆ（Ｔ）＞０）、ため息が検出されれば（Ｓｆ（Ｔ）＜０）と推定することもでき、これらを組み合わせて判断することもできる。
【００１７】
図４に緊張度、快感度から使用者の情動を推定するための一例を示す。緊張度と快感度にはそれぞれ閾値を設け、プラス側の閾値をＳｔ＋、Ｓｆ＋、マイナス側の閾値をＳｔ−、Ｓｆ−とする。ここで、緊張度Ｓｔ（Ｔ）がＳｔ＋より大きく、かつ快感度Ｓｆ（Ｔ）がＳｆ＋より大きい場合は、「喜び」の状態にあると推定する。同様に、緊張度Ｓｔ（Ｔ）がＳｔ−より小さく、かつ快感度Ｓｆ（Ｔ）がＳｆ＋より大きい場合は、「安らぎ」の状態、緊張度Ｓｔ（Ｔ）がＳｔ＋より大きく、かつ快感度Ｓｆ（Ｔ）がＳｆ−より小さい場合は、「怒り」の状態、緊張度Ｓｔ（Ｔ）がＳｔ−より小さく、かつ快感度Ｓｆ（Ｔ）がＳｆ−より小さい場合は、「悲しみ」の状態と推定する。
【００１８】
なお、本実施の形態では、図４のように各閾値の中間の領域（図４の斜線を施していない領域）は、特に情動状態の区分をしていない。この領域に含まれた場合は、安静平時の状態あるいは一時的な誤判定がなされたものとして特に使用者の情動を判定しないようにしている。もちろん、これに限らず、プラス側、マイナス側の閾値を図４の原点近くに設定して、常にいずれかの情動区分に分類されるようにしてもよい。
【００１９】
図５は、本実施の形態による制御装置４の主にＣＰＵ１１で行う処理に関するフローチャートである。図５を参照しながら、制御装置４の動作例について説明する。ここで、使用者が抱き枕本体を抱えた状態における、使用者の動きの強度をＭｖ（Ｔ）、動きの頻度をＭｉ（Ｔ）とし、それぞれの平時の値を０とする。これらは、圧力センサ２２の計測結果を基に数値化し、静的な圧力が強い場合はＭｖ（Ｔ）＞０、時間的な変化の頻度が多い場合はＭｉ（Ｔ）＞０のように推定する。
【００２０】
まず、本装置が起動されると、タイマ（Ｔ）を０クリアする（ステップ１０１）。そして、使用者が抱き枕本体を抱えているかを判定する（ステップ１０２）。本体を抱えているかどうかは、例えば赤外線センサ２１により、体温程度の温度を検出した場合は抱えているとか、圧力センサ２２により静的な圧力を一定値以上検出した場合は、抱えているなどの方法により判断できる。ステップ１０２により、使用者が本体を抱えている場合は、処理を行い、抱えていない場合は、処理を終了する。
【００２１】
次に、使用者が睡眠中かどうかを判定する。睡眠中か否かを判定する処理の一例として、使用者の体動により判定する場合について説明する。使用者の動きの強度Ｍｖ（Ｔ）と、動きの頻度Ｍｉ（Ｔ）を用いて、それぞれのプラス側の閾値をＭｖ＋、Ｍｉ＋とし、マイナス側の閾値をＭｖ−、Ｍｉ−とする。まず、使用者の動きの強度がＭｖ−より小さく、かつ頻度がＭｉ−より少ないかを判定し（ステップ１０３）、小さい場合は、睡眠中ではないが、静かにしていると判断する。ステップ１０３において、静かでないと判断された場合は、使用者の動きの強度がＭｖ＋より大きく、かつ頻度がＭｉ＋より多いかを判定し（ステップ１０４）、大きい場合は、起きてよく動いており、抱き枕に対して積極的な働きかけをしていると判断する。ステップ１０４において、動いていないと判断された場合は、睡眠中と判定し、タイマ（Ｔ）をカウントアップして（ステップ１０５）、再度処理を繰り返す。なお、ここでは、睡眠中か否かの判定を使用者の体動により判定する場合について説明したが、体動の他にマイク２３から検出される呼吸の状態により判定する方法や、体動と呼吸の状態を組み合わせて判定する方法などがある。
【００２２】
このように判定した結果、睡眠中は音によるフィードバックは行わないが、それ以外の場合は、使用者の情動を推定し、その情動に応じたフィードバックを行う。情動の推定は、前記図４にて説明した方法で行うものとする。ステップ１０３にて静かにしていると判断された場合は、まず、使用者が「悲しみ」の状態にあるかを判定する（ステップ１０６）。その結果、「悲しみ」の状態であると判定された場合は、「励まし」の効果音を音響データＲＯＭ１４から抽出し、音響データ再生回路１３にて再生する（ステップ１０７）。ステップ１０６にて「悲しみ」の状態でないと判定された場合は、使用者が「安らぎ」の状態であるかを判定し（ステップ１０８）、「安らぎ」の状態の場合は、「眠り」の効果音を再生する（ステップ１０９）。同様に、「安らぎ」の状態でない場合は、「怒り」の状態であるかを判定し（ステップ１１０）、「怒り」の状態の場合は、「なだめ」の効果音を再生する（ステップ１１１）。最後に、「喜び」の状態であるかを判定し（ステップ１１２）、「喜び」の状態の場合は、「喜び」の効果音を再生する（ステップ１１３）。
【００２３】
このように、使用者の情動に応じた効果音を再生した後、タイマ（Ｔ）をカウントアップし（ステップ１１４）、効果音の効果を判定する（ステップ１１５）。効果の判定は、例えば快感度で行い、現在時刻Ｔの快感度Ｓｆ（Ｔ）と、その直前の時刻の快感度Ｓｆ（Ｔ−１）とを比較し、快感度Ｓｆ（Ｔ）がＳｆ（Ｔ−１）より大きい場合は、効果ありと判定する。効果がある場合は、同じ効果音を再生して再度タイマをカウントアップし、効果の判定を繰り返す。ステップ１１５において、効果なしと判定された場合は、再度最初から処理を行う。なお、ステップ１１２にて「喜び」の状態でなかった場合は、使用者の情動が不定であるため、音によるフィードバックは行わず、タイマ（Ｔ）をカウントアップして（ステップ１０５）、再度処理を繰り返す。
【００２４】
以上説明したのと同様に、ステップ１０４においてよく動いていると判定された場合は、使用者が「喜び」の状態にあるかを判定する（ステップ１１６）。その結果、「喜び」の状態であると判定された場合は、アップテンポの音楽を音響データＲＯＭ１４から抽出し、音響データ再生回路１３にて再生する（ステップ１１７）。ステップ１１６にて「喜び」の状態でないと判定された場合は、使用者が「悲しみ」の状態であるかを判定し（ステップ１１８）、「悲しみ」の状態の場合は、スローテンポな音楽を再生する（ステップ１１９）。
【００２５】
このように、使用者の情動に応じた音楽を再生した後、タイマ（Ｔ）をカウントアップし（ステップ１２０）、その効果を判定する（ステップ１２１）。効果の判定は、ステップ１１５と同様に快感度で行い、現在時刻Ｔの快感度Ｓｆ（Ｔ）が、その直前の時刻の快感度Ｓｆ（Ｔ−１）より大きい場合は、効果ありと判定する。効果がある場合は、同じ効果音を再生して再度タイマをカウントアップし、効果の判定を繰り返す。ステップ１２１において、効果なしと判定された場合は、再度最初から処理を行う。なお、ステップ１１８にて「悲しみ」の状態でなかった場合は、音によるフィードバックは行わず、タイマ（Ｔ）をカウントアップして（ステップ１０５）、再度処理を繰り返す。
【００２６】
なお、ステップ１０４にてよく動いていると判定された場合の処理として、「喜び」と「悲しみ」の状態に対応する音楽の再生について説明したが、ステップ１０８と同様に「安らぎ」の状態かを判定し、それに対応する音楽を再生する処理と、ステップ１１０と同様に「怒り」の状態かを判定し、それに対応する音楽を再生する処理を追加してもよい。
【００２７】
ここでは、使用者の情動を「喜び」、「安らぎ」、「怒り」、「悲しみ」に分類して説明したが、使用者の情動の種類については、生体情報センサ２の計測値によって判定できるものであれば、これ以外でもよい。また、それぞれの状態に応じた効果音を「喜び」、「眠り」、「なだめ」、「励まし」やアップテンポの音楽、スローテンポの音楽として説明したが、例えば、「喜び」の状態に対して「なだめ」の効果音とし、「悲しみ」の状態に対して「悲しみ」の効果音としてもよい。更に、効果音は、音楽や人間の声、動物の鳴き声、波や風の音などの環境音でもよい。
【００２８】
また、上述した実施の形態では、抱き枕を例に説明したが、使用者が抱きかかえられる形状のものであれば、クッションやぬいぐるみなどでもよい。
【図面の簡単な説明】
【００２９】
【図１】本発明の一実施の形態による抱き枕の本体内部の例を示す説明図である。
【図２】本発明の一実施の形態による音響再生装置の構成例を示すブロック図である。
【図３】本発明の一実施の形態による圧力センサの応答信号の分離例を示す説明図である。
【図４】本発明の一実施の形態による情動の判定例を示すグラフである。
【図５】本発明の一実施の形態による音響再生装置の処理例を示すフローチャートである。
【符号の説明】
【００３０】
１…抱き枕、２…生体情報センサ、３…スピーカ、４…制御装置、１１…ＣＰＵ、１２−１，１２−２，１２−３…Ａ／Ｄ変換器、１３…音響データ再生回路、１４…音響データＲＯＭ、１５…Ｄ／Ａ変換器、１６…アンプ、１７…ＲＯＭ、１８…ＲＡＭ、２１…赤外線センサ、２２…圧力センサ、２３…マイク
【図１】
2005040440.tif 000003
【図２】
2005040440.tif 000004
【図３】
2005040440.tif 000005
【図４】
2005040440.tif 000006
【図５】
2005040440.tif 000007