(57)【要約】    【課題】      本気度情報の判定精度を向上させることができ、かつ、本気度判定結果の送受信を行うことができるようにすること。    【解決手段】  視聴端末装置１０１は、入力される入力音声信号に基づいて本気度を判定して本気度判定結果を生成する本気度判定部２０７と、前記本気度判定結果を表示する表示装置２０４と、前記本気度判定結果の送信指示信号を受けた時に送信する前記入力音声信号又は映像データに前記本気度判定結果を多重化して多重化信号を生成して送信する多重化部２１２及び送信部２１３と、受信される受信多重化信号から音声信号、映像データ及び本気度判定結果を分離して再生する再生部（２１４〜２１８、２０８、２０３、２０４、２０６）と、を具備する。  【選択図】      図２
2006106500.tif 000002
【特許請求の範囲】
【請求項１】
入力される入力音声信号に基づいて本気度を判定して本気度判定結果を生成する本気度判定手段と、
前記本気度判定手段からの前記本気度判定結果を表示する表示手段と、
前記本気度判定結果の送信指示信号を受けた時に送信する前記入力音声信号又は映像データに前記本気度判定結果を多重化して多重化信号を生成して送信する多重化送信手段と、
受信される受信多重化信号から音声信号、映像データ及び本気度判定結果を分離して再生する再生手段と、
を具備することを特徴とする視聴端末装置。
【請求項２】
入力される入力音声信号に基づいて本気度を判定して本気度判定結果を生成する本気度判定ステップと、
前記本気度判定ステップにおける前記本気度判定結果を表示する表示ステップと、
前記本気度判定結果の送信指示信号を受けた時に送信する前記入力音声信号又は映像データに前記本気度判定結果を多重化して多重化信号を生成して送信する多重化送信ステップと、
受信される受信多重化信号から音声信号、映像データ及び本気度判定結果を分離して再生する再生ステップと、
を具備することを特徴とする視聴情報通信方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、本気度情報（嘘度情報）等の視聴情報を通信する視聴端末装置及び視聴情報通信方法に関する。
【背景技術】
【０００２】
特許文献１に記載の情動状態検出装置は、受信された受信音声データのイントネーション情報を導出し、このイントネーション情報に基づいて前記受信音声データを発生した個人の情動情報（本気度情報、嘘度情報）を生成している。視聴端末装置として、この情動状態検出装置を具備し、本気度情報（嘘度情報）等の視聴情報を通信するものが考えられる。  
【特許文献１】特表２００２−５０９２６７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、前記視聴端末装置においては、前記情動状態検出装置が受信音声データのイントネーション情報に基づいて個人の情動情報（本気度情報、嘘度情報）を生成していたため、受信音声データに含まれる雑音等の影響を受けて情動情報（本気度情報、嘘度情報）の判定精度が劣化するという問題がある。
【０００４】
本発明は、本気度情報の判定精度を向上させることができ、かつ、本気度判定結果の送受信を行うことができる視聴端末装置及び視聴情報通信方法を提供することを目的とする。
【課題を解決するための手段】
【０００５】
第１の発明による視聴端末装置は、入力される入力音声信号に基づいて本気度を判定して本気度判定結果を生成する本気度判定手段と、前記本気度判定手段からの前記本気度判定結果を表示する表示手段と、前記本気度判定結果の送信指示信号を受けた時に送信する前記入力音声信号又は映像データに前記本気度判定結果を多重化して多重化信号を生成して送信する多重化送信手段と、受信される受信多重化信号から音声信号、映像データ及び本気度判定結果を分離して再生する再生手段と、を具備する構成を採る。
【０００６】
この構成によれば、送信する側の視聴端末装置に入力される入力音声信号に基づいて本気度を判定して本気度判定結果を生成するため、雑音等の影響を受け難いから、本気度判定精度を向上させることができ、かつ、本気度判定結果の送受信を行うことができる。また、この構成によれば、入力音声信号又は映像データに本気度判定結果を多重化して送信することができる。
【０００７】
第２の発明による視聴情報通信方法は、入力される入力音声信号に基づいて本気度を判定して本気度判定結果を生成する本気度判定ステップと、前記本気度判定ステップにおける前記本気度判定結果を表示する表示ステップと、前記本気度判定結果の送信指示信号を受けた時に送信する前記入力音声信号又は映像データに前記本気度判定結果を多重化して多重化信号を生成して送信する多重化送信ステップと、受信される受信多重化信号から音声信号、映像データ及び本気度判定結果を分離して再生する再生ステップと、を具備するようにした。
【０００８】
この方法によれば、送信する側の視聴端末装置に入力される入力音声信号に基づいて本気度を判定して本気度判定結果を生成するため、雑音等の影響を受け難いから、本気度判定精度を向上させることができ、かつ、本気度判定結果の送受信を行うことができる。また、この方法によれば、入力音声信号又は映像データに本気度判定結果を多重化して送信することができる。
【発明の効果】
【０００９】
以上説明したように、本発明によれば、本気度情報の判定精度を向上させることができ、かつ、本気度判定結果の送受信を行うことができる。
【発明を実施するための最良の形態】
【００１０】
次に、本発明の実施の形態について、図面を参照して詳細に説明する。
【００１１】
（実施の形態１）
図１は、本発明の実施の形態１に係る視聴端末装置を具備する通信システムの構成を示す図である。図２は、本発明の実施の形態１に係る視聴端末装置の構成を示すブロック図である。
【００１２】
図１に示すように、本発明の実施の形態１に係る通信システム１００は、複数の視聴端末装置１０１、複数の基地局１０２、複数の基地局制御装置１０３及び通信ネットワーク１０４を具備している。図１においては、２つの視聴端末装置１０１のみが図示されている。
【００１３】
複数の基地局制御装置１０３の各々は、複数の基地局１０２の各々を制御する。複数の基地局制御装置１０３は、通信ネットワーク１０４により接続されている。複数の視聴端末装置１０１の各々は、他の複数の視聴端末装置１０１の各々に対し、基地局１０２、通信ネットワーク１０４及び基地局制御装置１０３を介して信号及び情報を送受信することが可能である。
【００１４】
図２に示すように、複数の視聴端末装置１０１の各々は、操作入力部２０１、マイクロフォン２０２、カメラ２０３、表示装置２０４、ＡＤ変換部２０５、スピーカ２０６、本気度判定部２０７、制御部２０８、データ符号化部２０９、音声符号化部２１０、映像符号化部２１１、多重化部２１２、送信部２１３、受信部２１４、分離化部２１５、データ復号部２１６、音声復号部２１７及び映像復号部２１８を具備している。
【００１５】
制御部２０８は、操作入力部２０１からの操作信号等に基づいて、カメラ２０３、表示装置２０４、ＡＤ変換部２０５、スピーカ２０６、本気度判定部２０７、データ符号化部２０９、音声符号化部２１０、映像符号化部２１１、データ復号部２１６、音声復号部２１７及び映像復号部２１８を制御する。
【００１６】
操作入力部２０１は、ユーザが必要な操作信号を入力するためのものである。操作入力部２０１からの操作信号は、制御部２０８に入力される。操作入力部２０１は、例えば、本気度判定部２０７の本気度判定結果を送信を指示するための判定結果送信指示を制御部２０８に与える。マイクロフォン２０２は、ユーザの音声を受けてアナログの音声信号を生成してＡＤ変換部２０５に与える。
【００１７】
カメラ２０３は、対象物を撮像して撮像信号を生成して制御部２０８に与えるためのものである。表示装置２０４は、制御部２０８からの画像データを表示する。ＡＤ変換部２０５は、マイクロフォン２０２からのアナログの音声信号をデジタル変換してデジタルの音声データを生成して本気度判定部２０７及び制御部２０８に与える。
【００１８】
本気度判定部２０７は、ＡＤ変換部２０５からの音声データに基づいてユーザの本気度（嘘度、情動）を判定して本気度判定結果を生成する。本気度判定部２０７は、例えば、特表２００２−５０９２６７号公報に記載されているように、音声データのイントネーション情報を導出し、このイントネーション情報に基づいて前記音声データを発生した個人の本気度情報（情動情報、嘘度情報）を判定して本気度判定結果を生成している。本気度判定部２０７は、本気度判定結果を制御部２０８及びデータ符号化部２０９に与える。
【００１９】
データ符号化部２０９は、制御部２０８からの制御に基づいて本気度判定部２０７からの本気度判定結果を符号化して符号化本気度判定結果を生成して多重化部２１２に与える。音声符号化部２１０は、ＡＤ変換部２０５からの音声データを制御部２０８を介して受けて前記音声データをＭＰＥＧ等の方式で符号化し圧縮して符号化音声データを生成する。映像符号化部２１１は、カメラ２０３からの撮像信号を制御部２０８を介して受けて前記撮像信号をＭＰＥＧ等の方式で符号化し圧縮して符号化撮像信号を生成する。
【００２０】
多重化部２１２は、データ符号化部２０９からの符号化本気度判定結果、音声符号化部２１０からの符号化音声データ及び映像符号化部２１１からの符号化撮像信号を多重化して多重化信号を生成して送信部２１３に与える。送信部２１３は、他の視聴端末装置１０１に対し、基地局１０２、通信ネットワーク１０４及び基地局制御装置１０３を介して多重化信号を送信する。
【００２１】
一方、受信部２１４は、他の視聴端末装置１０１から基地局１０２、通信ネットワーク１０４及び基地局制御装置１０３を介して多重化信号又はその他の信号を受信して受信多重化信号を生成して分離化部２１５に与える。
【００２２】
分離化部２１５は、受信部２１４からの受信多重化信号を分離して符号化本気度判定結果、符号化音声データ及び符号化撮像信号を生成してデータ復号部２１６、音声復号部２１７及び映像復号部２１８に与える。
【００２３】
データ復号部２１６は、分離化部２１５からの符号化本気度判定結果を復号して復号本気度判定結果を生成して制御部２０８に与える。制御部２０８は、データ復号部２１６からの復号本気度判定結果を表示装置２０４に表示させる。
【００２４】
音声復号部２１７は、分離化部２１５からの符号化音声データを復号して復号音声データを生成して制御部２０８に与える。制御部２０８は、音声復号部２１７からの復号音声データをスピーカ２０６に与える。スピーカ２０６は、制御部２０８を介して受ける音声復号部２１７からの復号音声データに応じて音声を再生する。
【００２５】
映像復号部２１８は、分離化部２１５からの符号化撮像信号を復号して復号撮像信号を生成して制御部２０８に与える。制御部２０８は、映像復号部２１８からの復号撮像信号を表示装置２０４に表示させる。
【００２６】
次に、本発明の実施の形態１に係る視聴端末装置１０１の動作について、図１及び図２とともに図３を参照して詳細に説明する。図３は、本発明の実施の形態１に係る視聴端末装置１０１の動作を説明するためのフロー図である。
【００２７】
図３に示すように、ステップＳＴ１０１において制御部２０８は本気度判定の開始か否かを判定する。ステップＳＴ１０１において本気度判定の開始である時に、制御部２０８は、本気度判定を実行して本気度判定結果を生成し（ステップＳＴ１０２）、本気度判定結果の表示を実行する（ステップＳＴ１０３）。
【００２８】
次に、ステップＳＴ１０４において、制御部２０８は、本気度判定結果を送信するための判定結果送信指示を受けたかを判断する。ステップＳＴ１０４において判定結果送信指示を受けた時に、制御部２０８は、データ符号化部２０９に本気度判定部２０７からの本気度判定結果を符号化して符号化本気度判定結果を生成させる（ステップＳＴ１０５）。
【００２９】
次に、多重化部２１２は、符号化本気度判定結果、符号化音声データ及び符号化撮像信号を多重化して多重化信号を生成して送信部２１３に与える（ステップＳＴ１０６）。次に、送信部２１３は、他の視聴端末装置１０１に対し、基地局１０２、通信ネットワーク１０４及び基地局制御装置１０３を介して多重化信号を送信する（ステップＳＴ１０７）。前記ステップＳＴ１０４において判定結果送信指示を受けてない時に、動作はステップＳＴ１０７に行く。
【００３０】
このように、本発明の実施の形態１においては、送信する側の視聴端末装置１０１に入力される入力音声信号に基づいて本気度を判定して本気度判定結果を生成するため、雑音等の影響を受け難いから、本気度判定精度を向上させることができ、かつ、本気度判定結果の送受信を行うことができる。また、この本発明の実施の形態１においては、入力音声信号又は映像データに本気度判定結果を多重化して送信することができる。
【００３１】
（実施の形態２）
次に本発明の実施の形態２について、図面を参照して詳細に説明する。
【００３２】
図４は、本発明の実施の形態２に係る視聴端末装置の構成を示すブロック図である。図５は、本発明の実施の形態２に係る視聴端末装置の相性判定部の構成を示すブロック図である。本発明の実施の形態２においては、本発明の実施の形態１と同じ構成要素には同じ参照符号が付され、その説明が省略される。
【００３３】
図４に示すように、本発明の実施の形態２に係る通信システム４００は、本発明の実施の形態１に係る通信システム１００において視聴端末装置１０１の代わりに視聴端末装置４０１を具備している。また、本発明の実施の形態２に係る視聴端末装置４０１は、本発明の実施の形態１に係る視聴端末装置１０１において相性判定部４０２及び記憶部４０３を追加してなる。
【００３４】
次に、本発明の実施の形態１に係る視聴端末装置１０１と異なる本発明の実施の形態２に係る視聴端末装置４０１の構成及び動作について、図４及び図５を参照して説明する。
【００３５】
図５に示すように、相性判定部４０２は、姓名相性判定部４０２１、血液型相性判定部４０２２及び星座相性判定部４０２３を具備している。記憶部４０３には、予め姓名相性の判定を行うための情報、血液型相性の判定を行うための情報、及び、星座相性の判定を行うための情報が記憶されている。
【００３６】
姓名相性判定部４０２１は、相手の視聴端末装置１０１から受信される姓名と、入力される自分の姓名との相性を記憶部４０３の情報に基づいて判定して姓名の相性判定結果を生成する。血液型相性判定部４０２２は、相手の視聴端末装置１０１から受信される血液型と、入力される自分の血液型との相性を記憶部４０３の情報に基づいて判定して血液型の相性判定結果を生成する。星座相性判定部４０２３は、相手の視聴端末装置１０１から受信される星座と、入力される自分の星座との相性を記憶部４０３の情報に基づいて判定して星座との相性判定結果を生成する。
【００３７】
相性判定部４０２は、姓名相性判定部４０２１、血液型相性判定部４０２２及び星座相性判定部４０２３のいずれか１つによる相性判定をして相性判定結果を生成するようにしてもよい。
【００３８】
データ符号化部２０９は、制御部２０８からの制御に基づいて相性判定部４０２からの相性判定結果を符号化して符号化相性判定結果を生成して多重化部２１２に与える。
【００３９】
多重化部２１２は、データ符号化部２０９からの符号化相性判定結果、音声符号化部２１０からの符号化音声データ及び映像符号化部２１１からの符号化撮像信号を多重化して多重化信号を生成して送信部２１３に与える。送信部２１３は、他の視聴端末装置１０１に対し、基地局１０２、通信ネットワーク１０４及び基地局制御装置１０３を介して多重化信号を送信する。
【００４０】
一方、受信部２１４は、他の視聴端末装置１０１から基地局１０２、通信ネットワーク１０４及び基地局制御装置１０３を介して多重化信号又はその他の信号を受信して受信多重化信号を生成して分離化部２１５に与える。
【００４１】
分離化部２１５は、受信部２１４からの受信多重化信号を分離して符号化相性判定結果、符号化音声データ及び符号化撮像信号を生成してデータ復号部２１６、音声復号部２１７及び映像復号部２１８に与える。
【００４２】
データ復号部２１６は、分離化部２１５からの符号化相性判定結果を復号して復号相性判定結果を生成して制御部２０８に与える。制御部２０８は、データ復号部２１６からの復号相性判定結果を表示装置２０４に表示させる。
【００４３】
次に、本発明の実施の形態２に係る視聴端末装置４０１の動作について、図１、図４及び図５とともに図６を参照して詳細に説明する。図６は、本発明の実施の形態２に係る視聴端末装置４０１の動作を説明するためのフロー図である。図６のフロー図のステップにおいては、図３のフロー図と同じステップには同じ参照符号が付されその説明が省略される。
【００４４】
図６に示すように、本発明の実施の形態２に係る視聴端末装置４０１の動作は、前記ステップＳＴ１０１〜前記ステップＳＴ１０７及びステップＳＴ２０１〜ステップＳＴ２０７を有している。
【００４５】
まず、ステップＳＴ１０１において制御部２０８は本気度判定の開始か否かを判定する。ステップＳＴ１０１において本気度判定の開始である時に、前記ステップＳＴ１０２〜前記ステップＳＴ１０７が実行される。
【００４６】
ステップＳＴ１０１において本気度判定の開始でない時に、制御部２０８は相性判定の開始か否かを判定する（ステップＳＴ２０１）。ステップＳＴ２０１において相性判定の開始でない時に動作はステップＳＴ１０１へ戻る。
【００４７】
ステップＳＴ２０１において相性判定の開始である時に、制御部２０８は、相性判定を実行して相性判定結果を生成し（ステップＳＴ２０２）、相性判定結果の表示を実行する（ステップＳＴ２０３）。
【００４８】
次に、ステップＳＴ２０４において、制御部２０８は、相性判定結果を送信するための判定結果送信指示を受けたかを判断する。ステップＳＴ２０４において判定結果送信指示を受けた時に、制御部２０８は、データ符号化部２０９に相性判定部４０２からの相性判定結果を符号化して符号化相性判定結果を生成させる（ステップＳＴ２０５）。
【００４９】
次に、ステップＳＴ２０６において、多重化部２１２は、符号化相性判定結果、符号化音声データ及び符号化撮像信号を多重化して多重化信号を生成して送信部２１３に与える。次に、ステップＳＴ２０７において、送信部２１３は、他の視聴端末装置１０１に対し、基地局１０２、通信ネットワーク１０４及び基地局制御装置１０３を介して多重化信号を送信する。前記ステップＳＴ２０４において判定結果送信指示を受けてない時に、動作はステップＳＴ２０７に行く。
【００５０】
次に、本発明の実施の形態２に係る視聴端末装置４０１の動作の例について、図７〜図９に基づいて具体的に説明する。
【００５１】
図７（ａ）に示すように、視聴端末装置４０１の表示装置に情報が表示されている時に、ＹＥＳのキーをユーザが押した場合には、図７（ｂ）に示すように、視聴端末装置４０１の表示装置に情報が表示される。
【００５２】
図７（ｂ）に示すように、視聴端末装置４０１の表示装置に情報が表示されている時に、ＹＥＳのキーをユーザが押した場合には、図７（ｃ）に示すように、視聴端末装置４０１の表示装置に情報が表示される。
【００５３】
また、図８に示すように、図８（ａ）に示す視聴端末装置４０１と図８（ｂ）に示す視聴端末装置４０１とが相互に本気度判定結果を送信し、かつ、図８（ａ）に示す視聴端末装置４０１が図８（ｂ）に示す視聴端末装置４０１に相性判定結果（点数データ）を送信した場合の情報の表示の１例が示されている。
【００５４】
なお、図９に示すように、図９（ａ）に示す視聴端末装置４０１と図９（ｂ）に示す視聴端末装置４０１とが相互に本気度判定結果を送信し、かつ、図９（ａ）に示す視聴端末装置４０１が図９（ｂ）に示す視聴端末装置４０１に相性判定結果（画像データ）を送信した場合の情報の表示の１例が示されている。
【００５５】
このように、本発明の実施の形態２においては、送信する側の視聴端末装置４０１に入力される入力音声信号に基づいて本気度を判定して本気度判定結果を生成するため、雑音等の影響を受け難いから、本気度判定精度を向上させることができ、かつ、本気度判定結果の送受信を行うことができる。また、本発明の実施の形態２においては、入力音声信号又は映像データに本気度判定結果を多重化して送信することができる。さらに、本発明の実施の形態２においては、入力音声信号又は映像データに相性判定結果を多重化して送信することができる。
【００５６】
なお、本発明の実施の形態２において、本気度判定部２０７は、削除されてもよい。
【産業上の利用可能性】
【００５７】
本発明は、本気度情報の判定精度を向上させることができ、かつ、本気度判定結果の送受信を行うことができる効果を有し、視聴端末装置及び視聴情報通信方法に有用である。
【図面の簡単な説明】
【００５８】
【図１】本発明の実施の形態１に係る視聴端末装置を具備する通信システムの構成を示す図
【図２】本発明の実施の形態１に係る視聴端末装置の構成を示すブロック図
【図３】本発明の実施の形態１に係る視聴端末装置の動作を説明するためのフロー図
【図４】本発明の実施の形態２に係る視聴端末装置の構成を示すブロック図
【図５】本発明の実施の形態２に係る視聴端末装置の相性判定部の構成を示すブロック図
【図６】本発明の実施の形態２に係る視聴端末装置の動作を説明するためのフロー図
【図７】（ａ）本発明の実施の形態２に係る視聴端末装置に情報が表示されている１例を示す図、（ｂ）本発明の実施の形態２に係る視聴端末装置に情報が表示されている他の例を示す図、（ｃ）本発明の実施の形態２に係る視聴端末装置に情報が表示されている他の例を示す図
【図８】（ａ）本発明の実施の形態２に係る視聴端末装置に情報が表示されている１例を示す図、（ｂ）本発明の実施の形態２に係る視聴端末装置に情報が表示されている他の例を示す図
【図９】（ａ）本発明の実施の形態２に係る視聴端末装置に情報が表示されている１例を示す図、（ｂ）本発明の実施の形態２に係る視聴端末装置に情報が表示されている他の例を示す図
【符号の説明】
【００５９】
１００、４００  通信システム
１０１、４０１  視聴端末装置
１０２  基地局
１０３  基地局制御装置
１０４  通信ネットワーク
２０１  操作入力部
２０２  マイクロフォン
２０３  カメラ
２０４  表示装置
２０５  ＡＤ変換部
２０６  スピーカ
２０７  本気度判定部
２０８  制御部
２０９  データ符号化部
２１０  音声符号化部
２１１  映像符号化部
２１２  多重化部
２１３  送信部
２１４  受信部
２１５  分離化部
２１６  データ復号部
２１７  音声復号部
２１８  映像復号部
４０２  相性判定部
４０３  記憶部
【図１】
2006106500.tif 000003
【図２】
2006106500.tif 000004
【図３】
2006106500.tif 000005
【図４】
2006106500.tif 000006
【図５】
2006106500.tif 000007
【図６】
2006106500.tif 000008
【図７】
2006106500.tif 000009
【図８】
2006106500.tif 000010
【図９】
2006106500.tif 000011