(57)【特許請求の範囲】
【請求項１】
予め記録された新聞、雑誌または書籍の紙面上の情報を、読み取り者に読み取り可能に表示装置上に順次表示する電子ブック装置に用いられる情報出力装置であって、
視覚により認識可能な情報を出力する出力手段と、
前記情報の視聴者に励起すべき感情を示す信号に応じて特定され、当該感情の励起時に反応する視聴者の筋肉の部位を、当該感情を励起すべき前記情報の出力タイミングに同期して刺激する刺激手段と、を有し、
前記出力手段は、前記紙面上の情報を表示装置に順次表示し読み取り可能にし、
前記刺激手段は、予め記録された、前記紙面上の情報の所定部分で励起すべき感情を示す前記信号に応じて特定される前記読み取り者の顔面の表情筋を、前記出力手段から前記所定部分の情報が表示されるタイミングに合わせて刺激する
情報出力装置。
【請求項２】
前記刺激手段は、前記視聴者の顔面の異なる部位にそれぞれが付着され、前記信号に応じて特定される表情筋が弛緩または緊張するように電気パルスが印加される複数の電極を含む
請求項１に記載の情報出力装置。
【請求項３】
前記刺激手段は、前記情報に対応した喜び、悲しみ、驚き、嫌悪、恐れ、怒りのいずれかまたはそれらを組み合わせた感情を示す前記信号に応じて特定される前記視聴者の顔面の表情筋を刺激する
請求項１または２に記載の情報出力装置。
【請求項４】
予め記録された新聞、雑誌または書籍の紙面上の情報を、読み取り者に読み取り可能に順次表示する電子ブック装置に用いられる情報出力装置であって、
前記情報を順次表示し、読み取り可能にする表示装置と、
前記表示装置上に順次表示される情報の所定部分に対応した感情を示す信号に基づいて、前記所定部分の情報が表示されるタイミングに合わせて、感情を励起させる前記読み取り者の所定の筋肉を刺激する刺激手段と、
を有する情報出力装置。
【請求項５】
前記予め記録された新聞、雑誌若しくは書籍の紙面上の情報、および、前記情報の視聴者に励起すべき感情を示す信号は、記録媒体に記録された情報または信号である
請求項１〜４のいずれかに記載の情報出力装置。
【発明の詳細な説明】
【０００１】
【産業上の利用分野】
本発明は、たとえは、映画やビデオなどにより映像・音響データを映写あるいは再生するなどして、観覧者・視聴者に対して所定の情報・内容を出力する際に、鑑賞者・視聴者などの情報受信者に対して、所定の感情を励起させ、より効果的に前記情報・内容の出力が可能な情報出力装置に関する。
【０００２】
【従来の技術】
テレビやビデオあるいは映画などは、目や耳などの感覚器を通して画像や音楽などの情報を伝達し、ストーリー、状態などを把握させ、喜びや悲しみ、怒りなどの感情を生じさせ、人々を感動させる情報出力装置および方法と言える。
このような装置にあっては、出力する情報・内容により視聴者を感動させることが目標となり、それらの情報を視聴者の感情に訴えるように出力したいという要望がある。すなわち出力されている情報が、テレビやスクリーン上、あるいは、活字上での出来事ではなく、実際に自分が遭遇している、あるいは、当事者となっているように感じられるような現実味を帯びて出力されるのが望ましい。
【０００３】
そのために、より臨場感あふれる映像や音響を出力したり、映像や音響などの複数の媒体を有効に連係させて出力するなどして、迫力のある効果的な情報の出力を行う種々の工夫がなされている。近年、急速に進展しているマルチメディアシステムなども、そのような臨場感あふれる情報の伝達を行おうとしているシステムと考えることができる。
また、最近のバーチャルリアリティ（仮想現実感）といわれる技術においては、目や耳などの感覚器以外への刺激として足や手などに力を作用させ、映像や音響との連係で実際に歩いている感覚や手で持っている感覚を感じさせることができる。
また、腕などの所定の筋肉にその筋肉が収縮するような刺激を与えて、実際に物に触れた感覚を与え、たとえば操作者に対して操作感をフィードバックさせるようなテレイグジスタンス（tele-existence）装置も提案されている。
【０００４】
【発明が解決しようとする課題】
しかし、これまでのそのような情報出力装置においては、現実にその情報・状態に遭遇したのと同程度に、人々に何らかの感情を励起させ、人々を感動させるという点において、十分ではなかった。前述したバーチャルリアリティやテレイグジスタンスにおいても、これらは実世界での感覚を疑似的に与えることを目的としており、感情に作用するという点においてはそれほど有効ではなかった。
【０００５】
したがって、本発明の目的は、情報を出力する際に、感情を励起させ人々に感動を与えることが可能で、より効果的に情報を出力し伝達することの可能な情報出力装置を提供することにある。
【０００６】
【課題を解決するための手段】
一般に、表情と感情の関係は、まず目や耳などから映像や音楽などの刺激信号が入力され、それにより喜びや悲しみなどの感情を生じ、結果として笑いの表情や、泣き顔の表情が生じると思われている。しかし、刺激が知覚されるとまず骨格筋肉系へインパルスが発生され、顔面に特定の筋肉運動パターンが生みだされ、その変化によって生じた筋肉の自己受容性インパルスが脳の感情を生みだす部分を刺激して特定の感情が生じるという仕組みもある。表情フィードバックと言われる効果である。そして、表情が先か感情が先かという議論はあるものの、それらが相互作用をすることはほぼ確認されており、さらに、感情と相互作用する表情筋を刺激することにより、より効果的に感情を制御できるということは認められている。
本発明は、この効果を利用して積極的に感情を制御しエンターテイメントなどへの応用を可能にするものである。
【０００７】
したがって、本発明の情報出力装置は、予め記録された新聞、雑誌または書籍の紙面上の情報を、読み取り者に読み取り可能に表示装置上に順次表示する電子ブック装置に用いられる情報出力装置であって、視覚により認識可能な情報を出力する出力手段と、前記情報の視聴者に励起すべき感情を示す信号に応じて特定され、当該感情の励起時に反応する視聴者の筋肉の部位を、当該感情を励起すべき前記情報の出力タイミングに同期して刺激する刺激手段と、を有し、前記出力手段は、前記紙面上の情報を表示装置に順次表示し読み取り可能にし、前記刺激手段は、予め記録された、前記紙面上の情報の所定部分で励起すべき感情を示す前記信号に応じて特定される前記読み取り者の顔面の表情筋を、前記出力手段から前記所定部分の情報が表示されるタイミングに合わせて刺激する。
【０００８】
好適には、前記刺激手段は、前記視聴者の顔面の異なる部位にそれぞれが付着され、前記信号に応じて特定される表情筋が弛緩または緊張するように電気パルスが印加される複数の電極を含む。
【０００９】
また好適には、前記刺激手段は、前記情報に対応した喜び、悲しみ、驚き、嫌悪、恐れ、怒りのいずれかまたはそれらを組み合わせた感情を示す前記信号に応じて特定される前記視聴者の顔面の表情筋を刺激する。
【００１１】
本発明の他の情報出力装置は、予め記録された新聞、雑誌または書籍の紙面上の情報を、読み取り者に読み取り可能に順次表示する電子ブック装置に用いられる情報出力装置であって、前記情報を順次表示し、読み取り可能にする表示装置と、前記表示装置上に順次表示される情報の所定部分に対応した感情を示す信号に基づいて、前記所定部分の情報が表示されるタイミングに合わせて、感情を励起させる前記読み取り者の所定の筋肉を刺激する刺激手段と、を有する。
【００１３】
本発明では好適に、前記予め記録された新聞、雑誌若しくは書籍の紙面上の情報、および、前記情報の視聴者に励起すべき感情を示す信号は、記録媒体に記録された情報または信号である。
【００１４】
【作用】
本発明の情報出力装置によれば、新聞、雑誌または書籍の紙面上の情報が、表示装置に視覚により読み取り可能に順次表示される。そして、該情報の所定部分に対応した感情を示す信号に基づいて、刺激手段により、特定の感情をより強く励起させたい特定の場面などにおいて、その励起させたい感情が誘起されたときに反応する視聴者の所定の筋肉、例えば顔面の表情筋が刺激される。
【００１５】
【実施例】
本発明の情報出力装置の一実施例の情報出力装置について図１〜図６を参照して説明する。
図１は、本発明の一実施例の情報出力装置の構成を示すブロック図である。
情報出力装置１は、ビデオ信号復調器１０、ディスプレイ２０、スピーカ３０、表情筋制御信号復調器４０、および、複数の電極５０を有する。
本実施例の情報出力装置１は、ビデオテープ２００を再生することにより、映像および音響・音声をディスプレイおよびスピーカに出力する他に、さらに、鑑賞者の顔面の所定の位置を適宜電気パルスにより刺激し、鑑賞者に特定の感情を励起させながら、ビデオプログラムを鑑賞する装置である。
【００１６】
まず、顔の筋肉と表情、および、表情と感情の励起の因果関係について図５および図６を参照して説明する。
なお、図５は「オプィカルフロー抽出による表情筋の動作検出」（間瀬、電子情報通信学会、技術研究報告ＩＥ８９−１０１、Ｐ．１９）の図１を転載したものであり、図６は「アクティブ・マインド」（佐伯  胖、佐々木正人編  東京大学出版会、Ｐ．１１６）の図４−１に基づいて作成した図である。また、以下に示すの内容のうち、出展を明示していない内容は、前記「アクティブ・マインド」（佐伯  胖、佐々木正人編  東京大学出版会）より引用したものである。
解剖学などによって明らかになっているように、顔には主なものだけで２０種類以上の表情筋があって、それらの収縮・弛緩が複雑に組合わさって、表皮の変形を形成し、いろいろな表情を作る。図５にその表情筋の一部を例示する。
【００１７】
表情の解析については種々の研究がなされているが、客観的でかつ厳密な表情評定システムとして、表情筋１つ１つの動きにもとづいたＦＡＣＳ(Facial Action Coding System : P.Ekman and W.V.Friesen, Consulting Psycologysts Press, Inc) が知られている。このシステムでは、外見から識別可能な表情筋の動きの最小単位をアクション・ユニット（ＡＵ）とし、表情をこのＡＵの組み合わせで記述するものである。
【００１８】
喜び、驚き、恐れ、怒り、嫌悪、悲しみ、喜びといった基本的な表情が、どのようなＡＵの組み合わせであるかを、図６に模式的に示す。
図６は、表情筋と感情の関係を示す図であり、（Ａ）は喜びの感情と関係する表情筋を示す図、（Ｂ）は悲しみの感情と関係する表情筋を示す図、（Ｃ）は嫌悪の感情と関係する表情筋を示す図、（Ｄ）は怒りの感情と関係する表情筋を示す図、（Ｅ）は恐れの感情と関係する表情筋を示す図、（Ｆ）は驚きの感情と関係する表情筋を示す図である。
また、図６に示した表情筋と表情の関係を、表１に示す。
【００１９】
【表１】
0003929509.tif 000002
【００２０】
一方、表情と感情の相互作用も実験的手法を中心に徐々に明らかになっている。
特に、表情筋から神経中枢へのフィードバックが感情を規定する要因の１つとなるという感情の表情フィードバック現象が、「嫌な気分の時に笑うことは、その気分を和らげる」程度の影響力ではあるが、存在することがほぼ確かめられている。
さらに、顔の反応すなわち表情と情動の生起する方向は同じ方向であることもほぼ確かと思われている。すなわち、喜びの感情があれば喜びの表情が形成され、その喜びの表情によりさらに喜びの感情が高められるのである。
【００２１】
このように、表情と筋肉の動きの関係、および、表情が感情に対して及ぼす影響が規定されているのであれば、何らかの刺激を外部から与えて所定の表情を形成することにより、さらに、その表情に対応する感情を励起させることが可能である。
具体的には、たとえば、喜びの感情に対応する表情を作るには、ＡＵ６（眼輪筋）とＡＵ１２（大頬骨筋）に対応する位置の筋肉に何らかの刺激を与え、その表情筋を緊張させれば、喜びの表情が形成される。そして、この表情により喜びの感情が励起される。
本実施例は、この感情を励起させる現象を用いて、ビデオプログラム鑑賞時により効果的に感情に訴えかけ、感動させるように、情報を再生、出力するようにしたものである。
【００２２】
次に、この表情筋制御の信号について図４を参照して説明する。
本実施例においては、映像信号Ｖに表情筋制御の情報がのせられている。映像信号Ｖの１垂直期間に１回の感情励起のための表情筋制御信号が多重化されている。
表情筋制御信号Ｍは、刺激を与える表情筋を識別するデータ、すなわち、電極を指定するデータと、与える刺激の強さのデータからなる。そして、刺激の強さの情報は、図４に示すように各水平同期信号のカラーバースト信号と映像信号の始まりの間にのせられている表情筋制御信号Ｍの振幅により決定する。
【００２３】
図４は、この各水平同期信号のカラーバースト信号と映像信号の始まりの間の部分を拡大した波形図である。
図４に示すように、映像信号において水平同期信号の立ち下がりからカラーバースト信号の終了までで２８サイクル、すなわち、約7.82228 マイクロ秒でカラーバースト信号の期間は終了するが、映像信号は同じく水平同期信号の立ち下がりから9.4 マイクロ秒後に始まる。したがって、この間（図４の区間Ａ）に表情筋制御信号Ｍをのせる。本実施例では、簡単のためカラーバースト信号周期で水平同期信号の立ち下がりから、３０，３１，３２サイクル目の３周期分に同一の振幅情報をのせておくことにする。
なお、振幅情報は、白レベルを１００として正規化される。
【００２４】
また、電極の指定は、その表情筋制御信号をのせる水平同期信号の番号により決定する。本実施例においては、各１垂直期間内の２１ライン目以降の水平同期信号部分に、前記表情筋制御信号Ｍがのせられ、こののせられるライン番号が電極に対応する。すなわち、２１ライン目の水平同期信号部分の表情筋制御信号が電極１に対する制御信号、２２ライン目の水平同期信号部分の表情筋制御信号が電極２に対する制御信号、以下同様に（２１−１＋ｉ）ライン目の水平同期信号部分の表情筋制御信号が電極ｉに対する制御信号となる。
ＮＴＳＣ方式の場合、１垂直期間には（５２５／２）ラインの水平期間が含まれるので、この方法により約２４０個の電極の制御が可能となる。
【００２５】
次に、情報出力装置１の各部の構成および動作について、図１〜図４を参照して説明する。
ビデオ信号復調器１０は、ビデオデータの記録されたビデオテープ２００を生成し、映像信号Ｖと音響信号Ｓを検出し、映像信号Ｖはディスプレイ２０および表情筋制御信号復調器４０に、音響信号Ｓはスピーカ３０に出力される。
【００２６】
ディスプレイ２０は、ビデオ信号復調器１０から入力された映像信号Ｖを表示するためのディスプレイであり、任意のディスプレイ装置により構成される。
スピーカ３０は、ビデオ信号復調器１０から入力された音響信号Ｓを出力するためのスピーカである。
【００２７】
表情筋制御信号復調器４０は、ビデオ信号復調器１０から入力された映像信号Ｖから表情筋制御を示す情報を分離し、Ｎ個の各電極に対する制御情報を抽出して電極５０を制御する。
表情筋制御信号復調器４０の構成の詳細については後述する。
【００２８】
電極５０は、Ｎ個の電極からなり、表情筋制御信号復調器４０からケーブルを介して各電極ごとに印加される刺激信号により、前述したような利用者１００の顔面の各表情筋を刺激する。したがって、Ｎ個の電極は、前述したような各表情筋に対応した位置に付着する。
【００２９】
ここで、表情筋制御信号復調器４０の構成の詳細について、図２を参照して説明する。
図２は、表情筋制御信号復調器４０の構成を示すブロック図である。
表情筋制御信号復調器４０は、水平同期信号検出部４１、カウンタ４３、発振器４２、Ａ／Ｄ変換部４４、演算部４６、垂直同期信号検出部４５、および、電気パルス印加部４７を有する。
【００３０】
水平同期信号検出部４１は、入力された映像信号Ｖの水平同期信号の立ち下がりを検出する。
【００３１】
発振器４２は、映像信号Ｖのカラーバーストと同一の周期をもつ水晶発振器である。なお、発振器４２は、通常０．０００１程度の精度を持っており、これは１０マイクロ秒で１ナノ秒の誤差しか生じない精度である。図４に示した波形図の表情筋制御信号の部分である区間Ａはカラーバーストの３サイクル分、すなわち、２００ナノ秒以上の幅をもっている。したがって、映像信号ＶのカラーバーストとＰＬＬをかけなくとも表情筋制御信号Ｍをサンプリング可能である。
【００３２】
カウンタ４３は、発振器４２により発振される信号をカウントする。ただし、水平同期信号検出部４１で検出された水平同期信号の立ち下がりでリセットする。また、カウンタ４３は、内部に２つの比較器を有する。これらの比較器は、カウンタ４３の値が７および３１になるのを検出し、検出したらその旨の信号をＡ／Ｄ変換部４４、および、演算部４６に出力する。また、カウンタ４３は、値３１を検出すると次のリセット信号がくるまでホールドされる。
【００３３】
Ａ／Ｄ変換部４４は、カウンタ４３から入力された信号に同期して、映像信号ＶをＡ／Ｄ変換する。すなわち、カウンタ４３の値が７の時は、水平同期信号の振幅をＡ／Ｄ変換し、カウンタ４３の値が３１の時は、表情筋制御信号Ｍの振幅をＡ／Ｄ変換する。このＡ／Ｄ変換の量子化は、たとえは８ビットで十分である。Ａ／Ｄ変換された２つのデジタル値はＡ／Ｄ変換部４４内のレジスタに各々記憶され、演算部４６より読み込まれる。
【００３４】
垂直同期信号検出部４５は、入力された映像信号Ｖの垂直同期信号を検出し、インタラプト信号として、演算部４６に入力される。
【００３５】
演算部４６は、まず、カウンタ４３から入力された信号に基づいて、Ａ／Ｄ変換部４４によりＡ／Ｄ変換された結果を読み込む。すなわち、カウンタ４３からの入力された信号の、Ａ／Ｄ変換に要する時間経過後に、Ａ／Ｄ変換部４４のレジスタに記憶されている水平同期信号の振幅、および、表情筋制御信号Ｍの振幅を各々読み込む。水平同期信号の振幅は白レベル１００に対して−４０であるから、これで表情筋制御信号Ｍの大きさを正規化する。
【００３６】
また、演算部４６は、垂直同期信号検出部４５より入力されるインタラプト信号を基準として、カウンタ４３からのインタラプト信号を計数し、この計数値により、演算部４６はＡ／Ｄ変換部４４の出力の表情筋制御信号Ｍがどの水平同期信号のタイミングできたかを抽出する。そして、この抽出結果によりその表情筋制御信号Ｍが対象とする電極を検出する。前述したように、表情筋制御信号Ｍは２１ライン目から記録されているため、２１ライン目の表情筋制御信号Ｍ21により第１の電極５０-1を、２２ライン目表情筋制御信号Ｍ22により第２の電極５０-2を、（２２−１＋ｉ）ライン目の表情筋制御信号Ｍi により第ｉの電極５０-iを制御する。
【００３７】
この演算部４６の動作について図３に示すフローチャートを参照して説明する。
まず、ビデオの再生がスタートしたら（ステップＳ１）、初期化として種々のデータや基準値をセットし（ステップＳ２）、割り込み待ち状態になる（ステップＳ３）。
垂直同期信号検出部４５から割り込みが生じたら（ステップＳ１１）、水平期間を計数するカウンタをリセットし（ステップＳ１２）、割り込み処理を終了する（ステップＳ１３）。
【００３８】
カウンタ４２からの割り込みが生じたら（ステップＳ２１）、水平期間の計数値をカウントアップし（ステップＳ２２）、その水平期間が２１ライン目より前の場合には（ステップＳ２３）、そのまま割り込み処理を終了する（ステップＳ２９）。その水平期間が２１ライン目以降の場合には（ステップＳ２３）、Ａ／Ｄ変換部４４から水平同期信号の振幅のデジタル変換値と（ステップＳ２４）、表情筋制御信号の振幅のデジタル変換値（ステップＳ２５）をそれぞれ読み込む。そして、その水平期間に対応する電極を決定し（ステップＳ２６）、前記読み込んだ水平同期信号の振幅に基づいて表情筋制御信号の振幅を正規化して電極への電圧印加値を求める（ステップＳ２７）。そして、電気パルス印加部４７を介してその電極へ所定条件でその電圧を印加し刺激を与え（ステップＳ２８）、割り込み処理を終了する（ステップＳ２９）。
【００３９】
電気パルス印加部４７は、演算部４６から入力される電極および振幅の情報に基づいて、所定の電極に所定の振幅の電圧を予め定めた所定条件で印加する手段である。
【００４０】
なお、表１に示したように各感情を励起させるためには、複数の表情筋に同時に刺激を与える必要がある。たとえば、恐れの感情を励起させるためには、番号１，２，４，５，２０，２５，２６，２７の８個のＡＵに刺激を与えなければならない。
しかし、前述したような構成の表情筋制御信号復調器４０においては、各水平期間が所定の電極に対応しており、各水平期間の表情筋制御信号を検出するごとに各電極に刺激信号を出力するため、各表情筋に与える刺激は同時ではなく、水平期間の所定倍ごと離散して順次与えることになる。しかし、最大でも全ての刺激は１垂直期間、すなわち、ＮＴＳＣ方式であれば１／６０秒の間には与えられので、人間の感覚の鈍さ考えるとこれはほぼ同時であると言え、前述のような構成で問題ない。
【００４１】
次に、情報出力装置１の動作について説明する。
ビデオテープ２００をビデオ信号復調器１０で再生することによって、映像信号Ｖ、音響信号Ｓが出力される。映像信号Ｖはディスプレイ２０に入力されて映像が表示され、音響信号Ｓはスピーカ３０に入力されて音が出力され、利用者１００はそれを視覚および聴覚により楽しむ。
【００４２】
また、映像信号Ｖはまた表情筋制御信号復調器４０へ入力され、映像信号Ｖの一部に記録してあった表情筋制御信号Ｍを復調し、その表情筋制御信号Ｍに基づいて刺激を与える電極を決定し、その電極に刺激を与えるための電気信号を出力する。利用者１００の顔面の表情筋はこの電極から与えられる電気信号により刺激され筋肉を緊張、収縮される。これにより、利用者１００には所定の感情に対応する表情が形成され、この表情の作用により、映像信号Ｖおよび音響信号Ｓを楽しむことにより生起した感情がさらに助長される。
【００４３】
たとえば、ビデオテープ２００のビデオプログラムにおいて、楽しい場面のビデオデータが記録されている箇所には、感情「喜び」を示す表情筋制御信号Ｍが記録されていれば、ビデオテープ２００の再生にともなって、楽しい場面が映像信号Ｖおよび音響信号Ｓにより出力されるのと同時的に、利用者１００は復調された表情筋制御信号Ｍにより笑う表情を作ることになる。したがって、ディスプレイ２０およびスピーカ３０からの出力で楽しく感じていた感情が一層強められる。
【００４４】
同様に、ビデオプログラムに対応して「怒り」を示す表情筋制御信号Ｍが記録されていたとすると、ビデオテープ２００の再生にともなってその場面が出力されるのと同時に、復調された表情筋制御信号Ｍにより利用者１００は怒った表情を作ることになる。これにより、ディスプレイ２０はスピーカ３０からの出力で感じ始めていた怒りの感情が一層強められる。
【００４５】
このように、本実施例の情報出力装置１によれば、映像信号および音響信号の出力により形成される場面に対して、表情筋制御信号によりその場面に対応した表情が利用者に形成され、その場面に対して生起した感情が助長され、ビデオプログラムの作者の意図をより効果的に利用者に伝えることができる。
【００４６】
なお、本発明は本実施例に限られるものではなく種々の変形が可能である。
たとえば、本実施例は、本発明をビデオテープレコーダ（ＶＴＲ）装置に適用した例であるが、通常のＶＨＦ，ＵＨＦなどのテレビ放送システムや、ケーブルテレビシステムなどに適用することも可能である。また、テレビ信号の方式もＮＴＳＣ信号に限られず、ＳＥＣＡＭ方式、ＰＡＬ方式などでもよい。
【００４７】
また、表情筋制御信号の多重化の方法も任意の方法でよい。たとえば、本実施例においては表情筋制御信号を水平同期信号の後ろにいれたが、その他の信号部分に多重化してもよい。
さらに、表情筋制御信号は、映像信号や音響信号と同期して再生されるようになっていればよく、映像信号に多重化して記録しなければならないものではない。したがって、音響信号に多重化しても、あるいは、全く独立に記録してもよい。たとえば、ＣＤ−ＲＯＭのようなメディアに適用した場合には、表情筋制御信号は別のデータ部へ独立に書き込んでもよい。さらに、記録媒体も別個の記録媒体を用いるようにしてもよい。
【００４８】
また、本実施例においては、記録されている表情筋を制御する情報として、各筋肉に対応した表情筋制御信号を直接記録していたが、感情に対応した信号であればよく、任意の符合化されたデータでよい。たとえば、その感情を識別するデータなどでよい。そのようにすれば、記録データを少なくすることができる。なお、その際には、そのデータから各表情筋への制御信号に変換する処理が必要となる。
また、本実施例においては、感情と表情を形成する筋肉の関係は表１に示した関係を用いたが、これ以外の関係を用いてもよく、また、顔面以外の筋肉を用いるようにしてもよい。
【００４９】
また、本実施例では、映像信号と音響信号を有するビデオ信号に対応してさらに表情筋制御を行ったが、映像信号のみ、あるいは、音響信号のみの場合でも何ら問題なく適用可能である。
また、既存の映像信号あるいは音響信号からなるプログラムに対して表情筋制御を行うだけでなく、たとえば、シンセサイザーのような即興的な信号発生源や、ライブ中継などと組み合わせ、所定の規則に基づいてリアルタイムで表情筋制御を行うとも可能である。
【００５０】
さらに、本発明は、小説などの文字情報を順次表示する電子ブック装置などにも適用可能である。たとえば、悲しい場面が記述されているページが表示されている時には、そのように表情筋制御信号を発生し、恐ろしい場面が記述されているページが表示されている時は、そのような表情筋制御信号を発生するようにしてよい。
また、電子ゲーム機器に適用しても有効である。ゲームの進行状態に合わせて所定の表情筋制御を行うようにしておけば、より臨場感溢れるゲームができ、楽しむことができる。
【００５１】
さらに、本発明は、娯楽用途以外にも、神経や筋肉の障害による顔面の機能不全の治療や、そううつ病などの精神治療に用いることも可能である。
さらに、人間以外の、たとえば、犬や猫などの動物に対して用い、それらの娯楽としたり精神的な治療としてもよい。
【００５２】
【発明の効果】
本発明の情報出力装置を使用することにより、通常の視覚的な情報の出力に加えて、感情に直接訴えるような信号の出力を行うことができるので、視覚的な情報により生起した感情を一層強め、人々により強い感動を与えるように情報を出力することができる。
【図面の簡単な説明】
【図１】本発明の一実施例の情報出力装置の構成を示すブロック図である。
【図２】図１に示した情報出力装置の表情筋制御信号復調器の構成を示すブロック図である。
【図３】図２に示した表情筋制御信号復調器の演算部で行う処理を示すフローチャートである。
【図４】表情筋制御信号の映像信号への記録方法を説明する波形図である。
【図５】表情筋の例を示す図である。
【図６】表情筋と感情の関係を示す図であり、（Ａ）は喜びの感情と関係する表情筋を示す図、（Ｂ）は悲しみの感情と関係する表情筋を示す図、（Ｃ）は嫌悪の感情と関係する表情筋を示す図、（Ｄ）は怒りの感情と関係する表情筋を示す図、（Ｅ）は恐れの感情と関係する表情筋を示す図、（Ｆ）は驚きの感情と関係する表情筋を示す図である。
【符号の説明】
１…情報出力装置
１０…ビデオ信号復調器
２０…ディスプレイ
３０…スピーカ
４０…表情筋制御信号復調器
４１…水平同期信号検出部
４２…発振器
４３…カウンタ
４４…Ａ／Ｄ変換部
４５…垂直同期信号検出部
４６…演算部
４７…電気パルス印加部
５０…電極
１００…利用者
２００…ビデオテープ
【図１】
0003929509.tif 000003
【図２】
0003929509.tif 000004
【図３】
0003929509.tif 000005
【図４】
0003929509.tif 000006
【図５】
0003929509.tif 000007
【図６】
0003929509.tif 000008