(57)【要約】  少なくとも２つの端末１、２を有する通信システムにおいて、通信を適応させる方法であって、第一端末１において取得された音声信号の情報コンテンツの少なくとも一部の少なくとも一つの表現を伝え、かつ、音声を表現する信号が、第一端末１と第二端末２との間で通信され、前記音声信号の修正されたバージョンが、第二端末２において再現のために利用可能にされ、前記修正されたバージョンは、前記音声信号と比較して修正された情動性のレベルを有し、かつ端末１、２の少なくとも一つは、前記の表現された音声の少なくとも一つの韻律的特徴が、端末１、２の少なくとも一つにおいて提供される入力データ２２に依存して適応されるよう修正されたバージョンで、前記音声信号を再作成することによって、前記修正されたバージョンを生成し、入力データ２２は、前記音声信号の修正されたバージョンの所望の情動性レベルを示す、方法を提供する。
2012513147.tif 000002
【特許請求の範囲】
【請求項１】
少なくとも２つの端末を有する通信システムにおいて、通信を適応させる方法であって、
第一端末において取得された音声信号の情報コンテンツの少なくとも一部の少なくとも一つの表現を伝え、かつ、音声を表現する信号が、前記第一端末と第二端末との間で通信され、
前記音声信号の修正されたバージョンが、前記第二端末において再現のために利用可能にされ、前記修正されたバージョンは、前記音声信号と比較して修正された情動性のレベルを有し、かつ
前記端末の少なくとも一つは、
前記の表現された音声の少なくとも一つの韻律的特徴が、前記端末の少なくとも一つにおいて提供される入力データに依存して適応されるよう修正されたバージョンで、
前記音声信号を再作成することによって、
前記修正されたバージョンを生成し、
前記入力データは、前記音声信号の修正されたバージョンの所望の情動性レベルを示す、
方法。
【請求項２】
請求項１に記載の方法であって、
前記入力データは、前記端末の少なくとも一つへ提供されるユーザ入力を表すデータ
を有する、方法。
【請求項３】
請求項２による方法であって：
少なくとも基準の値の形式で前記ユーザ入力を取得する段階
を有する、方法。
【請求項４】
請求項２に記載の方法であって、
前記第二端末において前記ユーザ入力が提供され、かつ、
前記ユーザ入力を表す情報が前記第一端末へ通信され、該情報が前記第一端末においてユーザインターフェースを通じて出力として提供される
ことを特徴とする、方法。
【請求項５】
請求項１に記載の方法であって：
前記第一端末において取得された前記音声信号の少なくとも一部を分析する段階、及び
話者の感情の状態を特徴付けるための分析ルーチンの少なくとも一つに従って音声を表現する段階
を有する、方法。
【請求項６】
請求項５に記載の方法であって、
分析ルーチンの少なくとも一つは、ある基準において、前記話者の前記感情の状態の少なくとも一つの特徴を定量化するためのルーチン
を有する、方法。
【請求項７】
請求項５に記載の方法であって、
前記分析結果の少なくとも一部を表す情報に、前記第二端末においてユーザインターフェースを通じた出力として提供させる段階
を有する、方法。
【請求項８】
請求項１に記載の方法であって、
コンタクトデータベースが、前記端末の少なくとも一つにおいて保持され、かつ、
前記入力データの少なくとも一部は、前記取得された音声信号の情報コンテンツの少なくとも一部の少なくとも一つの表現を伝える信号を通信するためのアクティブな通信リンクが確立される端末間で、少なくとももう一つの前記端末と関連する識別の一つの端末による決定に基づいて読み出される
ことを特徴とする、方法。
【請求項９】
請求項１に記載の方法であって、
前記入力データの少なくとも一部は、前記端末の一つにおいて提供されるユーザインターフェースの少なくとも一つの入力装置におけるユーザの物理的な操作の、少なくとも一つの特徴を決定することによって、取得される
ことを特徴とする、方法。
【請求項１０】
請求項１に記載の方法であって：
話者の感情の状態を特徴づけるための少なくとも一つの分析ルーチンに従って前記音声信号の修正されたバージョンを分析することによって取得できるデータに従って、前記第一端末と前記第二端末との間で通信される情報のテキスト表現において、少なくとも一つの単語を置き換える段階
をさらに有する、方法。
【請求項１１】
少なくとも二つの端末間の通信を適応させるためのシステムであって、
前記システムは、第一端末において取得される音声信号の修正されたバージョンを作成するよう準備され、かつ、第二端末において再現のために利用可能な音声を表され、
前記修正されたバージョンは、前記音声信号と比較して修正された情動的レベルを有し、
前記システムは：
前記端末の少なくとも一つにおいて提供される入力データに依存して、
前記表現された音声の少なくとも一つの韻律的特徴が適応されるよう、修正されたバージョンで、
前記音声信号を再作成することにより前記修正されたバージョンを生成するよう構成される信号処理システムを有し、
前記入力データは前記音声信号の修正されたバージョンの所望の情動レベルを示す、信号処理システム
を有する、システム。
【請求項１２】
コンピュータプログラムであって、
機械で読み取り可能な媒体に組み込まれたとき、情報処理能力を有するシステムに請求項１ないし１０いずれか一項に記載の方法を実行させることのできる命令の組を有する
コンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、通信システムにおいて通信を適応させる方法、少なくとも２つの端末間で通信を適応させるためのシステムに関する。本発明は、また、コンピュータプログラムに関する。
【背景技術】
【０００２】
米国特許出願公開第２００４／０２２５６４０号明細書は、いかなる種類の通信のための目的設定（ｐｕｒｐｏｓｅ  ｓｅｔｔｉｎｇｓ）を提供することによって通信が改良される方法を開示する。さらに、送信者は、一般的な感情又はムードを示すことができる。通信は、通信の内容を分析することにより、又は、送信者の選択に基づいて、前記感情又はムードとともに、送信される。前記フレームワークのもとで、目的とする受取人は、前記目的設定を理解し、前記フレームワークは、分析によって予測されることができる。通信において提供されるサウンド、ビデオ及び画像コンテンツは、応答を決定するために分析される。サウンドコンテンツは、ボイスメール、サウンドクリップ又は他の音声添付ファイルを含み得る。サウンドコンテンツに対する、予想され、かつ、意図される応答は、例えば、サウンドのトーン、サウンドの音量又は他の意味を向上するためのサウンドの属性を調整することによって実行される。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】米国特許出願公開第２００４／０２２５６４０号明細書
【発明の概要】
【発明が解決しようとする課題】
【０００４】
周知の方法の問題点は、トーン及び音量のような全体的なサウンド設定は、理解された人の感情を制御することにはとても向いていないことである。
【０００５】
少なくとも一人の参加者が、離れた端末間で伝達される通信の感情的特徴を制御することができるような方法、システム、及びコンピュータプログラムを提供することは有用である。
【課題を解決するための手段】
【０００６】
このことは、少なくとも２つの端末を有する通信システムにおいて、通信を適応させる方法であって、第一端末において取得された音声信号の情報コンテンツの少なくとも一部の少なくとも一つの表現を伝え、かつ、音声を表す信号が、前記第一端末と第二端末との間で通信され、前記音声信号の修正されたバージョンが、前記第二端末において再現のために利用可能にされ、前記修正されたバージョンは、修正された情動性のレベルを前記音声信号と比較させ、かつ前記端末の少なくとも一つは、前記の表現された音声の少なくとも一つの韻律的特徴（ｐｒｏｓｏｄｉｃ  ａｓｐｅｃｔ）が、前記端末の少なくとも一つにおいて提供される入力データに依存して、適応されるよう修正されたバージョンで、前記音声信号を再作成することによって、前記修正されたバージョンを生成し、前記入力データは、前記音声信号の前記修正されたバージョンの所望の感情のレベルを示す、方法によって達成される。
【０００７】
前記方法は、主として発話によって伝達される情動性のレベルを決定する、言語音の音節長、音大きさ、ピッチ及びフォルマント周波数のバリエーションを含む、韻律的な洞察に基づく。音声信号を再作成させる、音声信号の韻律的特徴を適応させることによって、一方は前記情動性のレベルを修正することができる。前記端末の少なくとも一つにおいて又は前記端末の少なくとも一つによって利用できる入力データに依存してそのような修正をすることにより、前記端末の少なくとも一つは、他人又は複数の他人へ伝えられる発話において伝達される情動性のレベルに影響を与えることができる。このことは、前記端末の一つのユーザが激怒する傾向にあるか又は冷たいように受け取られているかを認識するときに役に立ち得る。また、別の端末のユーザの発話がトーンダウンするのにもまた役に立つ。前記方法は、これらの修正の種類は、従って、取得された音声信号に基づき離れた通信において役に立つ応用を発見する、驚くべき特徴に基づいている。前記方法は、端末へ又は端末から通信される音声の理解された情動性を適応させるため、少なくとも遠隔通信のための一つの従来型の端末によって実装されることができる。特に、前記方法を用いるユーザは、別の人が従来の端末（例えば、電話端末）を使っていても、別の人からの音声通信を“トーンダウン”することができ、彼又は彼女が、別の人によってどのように理解されるかを制御することができる。
【０００８】
一つの実施形態において、前記入力データは、前記端末の少なくとも一つへ提供されるユーザ入力を表すデータを有する。
【０００９】
この機能は、ユーザーに、端末によって又は端末へ伝達される音声のトーンを制御する能力を提供する。
【００１０】
この実施形態の変形は、少なくとも基準となる値の形式で前記ユーザ入力を取得することを含む。
【００１１】
したがって、修正されたバージョンにおいて前記音声信号を再作成することを目的とすべき目標値が提供される。ユーザは、例えば、実物かそれとも仮想の、ダイアル又はスライダの支援により所望の情動性のレベルを示す。前記ユーザ入力は、それぞれ情動性の異なる特徴のための、一つ以上の複数の目標値を設定するために用いられることができる。したがって、この実施形態は、情動性の多次元モデルを用いる方法を実装するシステムにおける使用にも適合する。
【００１２】
ひとつの実施形態において、前記ユーザ入力は、前記第二端末において提供され、前記ユーザ入力を代表する情報は、前記第一端末と通信され、かつ、前記第一端末のユーザインターフェースを通じて出力として提供される。
【００１３】
前記第一端末（例えば、話者）の人にフィードバックを与える効果がある。したがって、音声をトーンダウンするためのコマンドに対応するユーザ入力があったとき、この事実は話者に伝達される。彼又は彼女が話しかけている人が、例えば彼が怒っていることを評価することができないことに気がつく。しかし、他の人が、彼又は彼女がとても感情的になり過ぎているように理解する。
【００１４】
少なくとも二つの端末を有する通信システムにおいて通信を適応させる前記方法の一つの実施形態は、前記第一端末において取得された音声信号の少なくとも一部を分析すること、及び、話者の情動状態を特徴付けるための少なくとも一つの分析ルーチンに従って音声を表現することを有する。
【００１５】
効果は、前記システムが、前記音声信号の修正のための必要性、及び、前記音声信号の修正の及ぶ必要不可欠な範囲を決定するための方法を実行することを可能化することである。前記分析は、どの動作が取られ得るかに基づいて分類を行う。
【００１６】
一つの変形において、少なくとも一つの分析ルーチンは、ある基準において、話者の感情の状態の少なくとも一つの特徴を定量化するためのルーチンを有する。
【００１７】
効果は、目標値と比べることができ、かつ、制御されることができる変数を提供することである。
【００１８】
別の変形例は、分析結果の少なくとも一部を表す情報に、前記第二端末においてユーザインターフェースを通じた出力として提供させることを有する。
【００１９】
効果は、通信される音声から感情の通信を分離することである。したがって、音声信号で表現された会話は、より少ない怒りであるように聞こえるが、前記第二端末におけるメンバーは、彼の又は彼女の対話者はまだ怒っているという事実を意識させられる。ある会話の特徴に付属する意味は文化に左右される一方で、その分析の結果を有する情報は、あいまいでないため、この機能は、文化的な誤解を回避することを支援するために用いられることができる。
【００２０】
一つの実施形態において、コンタクトデータベースが、前記端末の少なくとも一つにおいて保持され、かつ、前記入力データの少なくとも一部は、
取得された音声信号の情報コンテンツの少なくとも一部の、少なくとも一つの表現を伝える信号を通信するためのアクティブな通信リンクが確立された端末間で、
少なくとももう一つの前記端末と関連する識別（ｉｄｅｎｔｉｔｙ）の一つの端末による決定に基づいて読み出される。
【００２１】
したがって、遠隔通信（電話番号又はネットワークアドレスのようなコンタクトリスト及び識別子を含む）のためのシステム及び端末の特徴は、目標のレベルに、音声通信の各条の特徴を適応させるために必要である、ユーザーの交流の量を減らすために用いられる。ユーザは、例えば彼又は彼女の潜在的な通信相手の認知に基づいて、一度だけ設定することができる。彼らのうち一人とセッションを確立するため、ユーザは、ただ連絡をとる必要があるだけである。
【００２２】
一つの実施形態において、入力データの少なくとも一部は、端末の一つにおいて提供されるユーザインターフェースの、少なくとも一つの入力装置におけるユーザの物理的な操作の、少なくとも一つの特徴を決定することによって、取得される。
【００２３】
したがって、ユーザ入力又はその一部を代表するデータは、ユーザがいくつかの他の入力を提供している間、暗黙的に取得される。当該方法の本実施形態を実装するために必要とされるユーザインターフェースは、単純化される。たとえば、入力装置の力強い及び／又は素早い操作は、情動性の高いレベルを示す。この入力に依存する適応は、より中立にするよう、音声信号のトーンダウンを行い得る。
【００２４】
当該方法の実施形態は、話者の感情の状態を特徴づけるための少なくとも一つの分析ルーチンに従い、前記音声信号の修正されたバージョンを分析することによって取得できるデータに従って、前記第一端末と前記第二端末との間で通信される情報のテキスト表現において、少なくとも一つの単語を置き換えることを有する。
【００２５】
効果は、前記第二端末で再現されたとき、通信されたものの情報コンテンツと、前記音声信号の修正されたバージョンの感情のコンテンツとの食い違いを避けることである。音声信号の修正されたバージョンは、実際にはこの実施形態を実装するために、分析される必要はない。音声信号の修正されたバージョンは、入力データに基づいて生成されるので、この入力情報は、単語の置換の充分な根拠となる。
【００２６】
別の態様によると、本発明による少なくとも二つの端末間の通信を適応させるためのシステムであって、前記システムは、第一端末において取得される音声信号の修正されたバージョンを作成するよう準備され、かつ、第二端末において再現のために利用可能な音声を表され、前記修正されたバージョンは、前記音声信号と比較して修正された情動的レベルを有し、前記システムは：前記端末の少なくとも一つにおいて提供される入力データに依存して、前記表現された音声の少なくとも一つの韻律的特徴が適応されるよう、修正されたバージョンで、前記音声信号を再作成することにより前記修正されたバージョンを生成するよう構成される信号処理システムを有し、前記入力データは前記音声信号の修正されたバージョンの所望の情動レベルを示す、信号処理システムを有する、システムが提供される。
【００２７】
そのようなシステムは、前記第一端末及び前記第二端末の一つ若しくは両方又は前記第一端末及び前記第二端末間の通信を中継する端末において提供されることができる。一つの実施形態に置いて、前期システムは、本発明による方法を実行するよう構成されることができる。
【００２８】
本発明の別の態様によると、機械で読み取り可能な媒体に組み込まれたとき、情報処理能力を有するシステムに本発明による方法を実行させることのできる命令の組を含むコンピュータプログラムが提供される。
【発明の効果】
【００２９】
本発明は、少なくとも一人の参加者が、離れた端末間で伝達される通信の感情的特徴を制御することができるような方法、システム、及びコンピュータプログラムを提供する。
【００３０】
本発明は、添付された図面への参照により更なる詳細について説明がなされる。
【図面の簡単な説明】
【００３１】
【図１】音声通信のためにネットワークリンクを確立することができる端末間における、二つの端末の概略図である
【図２】端末間の通信を適応させる方法の概要を示すフローチャートである。
【発明を実施するための形態】
【００３２】
図１において、第一端末１は詳細に示されており、一般に類似したビルドアップ（ｂｕｉｌｄ−ｕｐ）により第二端末２の概略が示されている。第一端末１及び第二端末２は、ネットワーク３を経て遠隔通信のために構成されている。例示される実施形態において、少なくとも音声及びデータ通信が可能である。ネットワーク３のいくつかの実装として、例えば、ＷＡＮ（Ｗｉｄｅ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）とともに大規模地域網（Ｖｅｒｙ  Ｌａｒｇｅ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、後者は、例えばＷｉＦｉネットワーク又はＷｉＭａｘネットワークであるようなネットワークの組み合わせを含む。ネットワーク３のいくつかの実装として、携帯電話ネットワークを含む。実際に、第一端末１及び第二端末２又はそれらの少なくとも一つは、携帯電話機として具体化されることができる。
【００３３】
第一端末１は、データ処理ユニット４及びメインメモリ５を有し、かつ、第一端末１が第二端末２とやりとりできるよう情報を適合可能にする命令を有するソフトウェアにおいて符号化された命令を実行するよう構成される。第一端末は、ネットワーク３とのインターフェース６、ディスプレイ７及びユーザ入力を取得するための少なくとも一つの入力装置８を有する。入力装置８は、一つ以上の物理キー又はボタンを有し、いくつかの変形においては、ユーザによる操作のため、スクロールホイール又はジョイスティックの形状も有する。さらなる入力装置は、タッチスクリーンを形成するように、ディスプレイ７に統合される。
【００３４】
音声信号は、マイク９及びＡ／Ｄコンバータ１０を用いて取得されることができる。音声情報は、音声出力段（ａｕｄｉｏ  ｏｕｔｐｕｔ  ｓｔａｇｅ）１１及び少なくとも一つのスピーカ１２を用いて可聴形式で表現されることができる。
【００３５】
同様に、第二端末２は、スクリーン１３、マイク１４、スピーカ１５、キーパッド１６及びスクロールホイール１７を有する。
【００３６】
次に、音声を表現する音声信号が、第一端末１においてどのように取得され、適応され、そして第二端末２によって再現されるために通信されるかについて、様々な変形を示す。もちろん、当該方法は、他の説明における通信にも有効である。これらの方法は、通信される機能的な情報を保っている間、端末１、２のユーザの少なくとも一人が、情動の、例えば感情のコンテンツの制御を可能にする。
【００３７】
この目的を達成するために、第一端末１で取得された音声信号の修正されたバージョンが、第二端末２において聞くことのできる再現のために利用可能とされる。少なくとも、端末１、２の一つは、表現された音声の少なくとも一つの韻律的な特徴が適応されるよう修正されたバージョンで音声信号を再作成することによって、修正されたバージョンを生成する。第一端末１が取得された音声信号の修正されたバージョンを生成するとき、この修正されたバージョンは、ネットワーク３を通じて第二端末２へと送信される。第二端末２が修正されたバージョンを生成するとき、第二端末は、第一端末１から取得された音声信号に対応する音声信号を受信する。どちらの変形においても、取得された音声信号の情報コンテンツの少なくとも一部の表現は、送信される。第二端末の動作が第一端末１によってなされた修正を上書き又は強化するように、両方の端末１、２が、前記修正ステップを実行することも可能である。
【００３８】
ただ一つの端末が修正を行うと仮定すると、音声信号の修正されたバージョンを生成する端末は、最初のステップ１８（図２）において取得されたオリジナルの音声信号を代表するデジタルデータを受信する。ちなみに、デジタルデータは、マイク９によって取得された音声信号のフィルタされたバージョンであることができる。
【００３９】
音声信号の修正されたバージョンを生成する、端末内の適応モジュールは、音声信号の感情のコンテンツを強め、又は、弱める。これを行うための技術は、シンプルな波形操作に基づく継続時間及び基本周波数の修正を含む。持続時間の修正は、本質的に、音声のリズム及びテンポを変える。基本周波数の修正は、イントネーションを変える。適切な方法は、人工音声合成の分野において知られている。一つの方法の例として、一般にアクロニムＰＳＯＬＡによって参照される、Ｋｏｒｔｅｋａａｓ，  Ｒ及びＫｏｈｌｒａｕｓｃｈらによるＪ．Ａｃ．  Ｓｏｃ．  Ａｍ．  ＪＡＳＡ，  １０１（４）に記載された“Ｐｓｙｃｈｏａｃｏｕｓｔｉｃａｌ  ｅｖａｌｕａｔｉｏｎ  ｏｆ  ｔｈｅ  ｐｉｔｃｈ−ｓｙｎｃｈｒｏｎｏｕｓ  ｏｖｅｒｌａｐ−ａｎｄ−ａｄｄ  ｓｐｅｅｃｈ−ｗａｖｅｆｏｒｍ  ｍａｎｉｐｕｌａｔｉｏｎ  ｔｅｃｈｎｉｑｕｅ  ｕｓｉｎｇ  ｓｉｎｇｌｅ−ｆｏｒｍａｎｔ  ｓｔｉｍｕｌｉ”の２２０２−２２１３ページに記載の方法がある。
【００４０】
適応モジュールは、例えば高速フーリエ変換を用いて、音声信号（ステップ１９）を分解する。情動性レベルを強める必要があるとき、基本波周波数成分（ステップ２０）へさらに変化が加えられる。次に（ステップ２１）、音声信号は、修正された成分及び修正されていない成分から再合成される。
【００４１】
そのような処理への入力データ２２は、音声信号の修正されたバージョンに含まれるよう、情動性の度合いのための基礎を提供する。
【００４２】
入力データ２２を集めるため、複数の方法が可能である。それらは組み合わされることができる。いくつかの実施形態においては、一つだけが用いられる。
【００４３】
一般に、入力データ２２は、望ましい情動性の度合い、及び、任意の、最初のステップ１８で受信された音声信号に由来する人、対象とされた人又は両方の、実際の情動性の度合いを有する。情動性の度合いは、例えばＲｕｓｓｅｌ，  Ｊ．Ａ．によるＪｏｕｒｎａｌ  ｏｆ  Ｐｅｒｓｏｎａｌｉｔｙ  ａｎｄ  Ｓｏｃｉａｌ  Ｐｓｙｃｈｏｌｏｇｙ  ３９（６）  １９８０に記載された“Ａ  ｃｉｒｃｕｍｐｌｅｘ  ｍｏｄｅｌ  ｏｆ  ａｆｆｅｃｔ”の１１６１−１１７８ページに記載されているような、ｖａｌｅｎｃｅ−ａｒｏｕｓａｌモデルに基づいて、多次元においてパラメータ化されることができる。
【００４４】
例示された実施形態において、音声信号が修正されたバージョンで再作成され、又は、分解ステップ１９とともに結合される、ステップ１９、２１に先行するステップ２３において、音声入力は、話者の実際の情動性レベルを決定するための少なくとも一つの分析ルーチンに従って分析される。
【００４５】
分解ステップ１９に従って、分析は、話者が経験している緊張を発見するために、音声信号の中に表現された音声の韻律の自動分析を含むことができる。音声信号に関して周波数変換、例えば高速フーリエ変換を用いて、話者の声のベース周波数が決定される。例えば標準偏差の形式で定量化されるベース周波数の変動は、経験されている感情の激しさの指標となる。変動を大きくすることは、感情の激しさを増加させることと関連付けられる。例えば、平均振幅、セグメンテーション又はポーズ時間（ｐａｕｓｅ  ｄｕｒａｔｉｏｎ）のような他の音声パラメータは、同様に感情のレベルを分析すために、決定され、用いられることができる。
【００４６】
任意の別のステップ２４において、ユーザの実際の情動性の度合いを表す入力データ２２の成分の少なくとも一部が、端末の一つにおいて提供されるユーザインターフェースの少なくとも一つの入力デバイスの、ユーザの物理的な操作の少なくとも一つの特徴を決定することにより、取得される。このステップは、第一端末１のユーザの情動性レベルを決定するため、入力装置８に含まれるキーボード上又はディスプレイ７に含まれるタッチスクリーン上でなされる、ストロークのタイミング、スピード及び強さのうち少なくとも一つの分析を含むことができる。第二端末２のキーパッド１６又はスクロールホイール１７による同様の分析が、実行されることができる。そのような分析は、音声信号の処理と同時に実行される必要はないが、一般に、ユーザの特定を明らかにするためにも用いられることができる。しかしながら、ムードの変動を考慮するために、そのような援助装置の入力は、第一端末１から第二端末２への音声信号の情報コンテンツの通信に先立つ所定の時間のインターバルを越えずに提供されるユーザ入力に基づいて、最も良く実行される。
【００４７】
さらなる分析の種類は、第一端末１及び第二端末２の間で通信されるデータの情報コンテンツの分析を含む。これは、テキスト情報を有するメッセージであることができ、かつ、取得された音声信号に加えて提供されることができる。その場合、分析は、（任意の）ステップ２４に含まれる。取得された音声信号の一部又は全ての音声−テキスト変換（ｓｐｅｅｃｈ−ｔｏ−ｔｅｘｔ  ｃｏｎｖｅｒｓｉｏｎ）によって取得されたテキスト情報であることもできる。その場合、分析は音声入力を分析するステップ２３の一部である。分析は、一般的に、感情を表す単語（‘感情辞書（ａｆｆｅｃｔ  ｄｉｃｔｉｏｎａｒｉｅｓ）’）のデータベース及び単語に関連する感情の大きさを用いる。詳細な実施形態において、データベースは、多数の感情次元（ｅｍｏｔｉｏｎ  ｄｉｍｅｎｓｉｏｎｓ）、例えば、Ｖａｌｅｎｃｅ、Ａｒｏｕｓａｌ、Ｐｏｗｅｒに対する感情を表す単語のマッピングを有する。
【００４８】
情動性レベルを制御し、かつ、好ましい情動レベルを示す入力データ２２の成分は、第一端末のユーザ、第二端末のユーザ又は両方の好みのデータ特性をさらに有する。したがって、このデータは、音声信号を適応させ音声信号を再構築するステップ２０、２１に先立って取得され（ステップ２５）、現在のユーザの好みのデータを取得するために繰り返し実行されることができる。
【００４９】
任意で、この入力成分は、取得された音声信号の情報コンテンツの、少なくとも一部分の、少なくとも一つの表現を搬送する信号をやりとりするためのアクティブな通信リンクが接続される端末の間で、他の端末の少なくとも一つと関連する識別の方法を実行する端末による決定に基づいて取得されるデータを有する。第一端末１及び第二端末２は、コンタクトする人のデータベースを保持する。前記データベースは、各コンタクト先のデフォルトの感情のコンテンツフィルタ設定を有するフィールドを有する。代わりに、又は追加で、各コンタクト先は一つ以上のグループに関連付けられることができる。かつ、それぞれのデフォルトの感情のコンテンツフィルタ設定は、それらのグループと関連付けられることができる。従って、端末１、端末２のうち一つのユーザが電話の発信又は電話の受信をするとき、他の電話の相手又は端末１、２の少なくとも一つの身元が決定され、デフォルトの感情のコンテンツフィルタ設定を読み出すよう用いられる。一般に、次のａかｂのうち少なくとも一つの目標の情動性レベルの形式がとられる。
ａ）他の端末（着信通信の適応）において取得された音声信号の修正されたバージョン
ｂ）同一端末（発信通信の適応）にいて取得された音声信号の修正されたバージョン
デフォルト設定は、通信セッション中又は通信セッションの前に提供されるユーザ入力によって上書きされることができる。
【００５０】
一般に、そのようなユーザ入力は、基準値の形をしている。特に、第一端末１のユーザ及び／又は第二端末２のユーザには、取得された音声信号の修正されたバージョンで、適切かつユーザフレンドリなインターフェースを用いて、手動で感情のコンテンツを制御するための手段が提供される。
【００５１】
したがって、ユーザ入力が第二端末２のユーザによって提供されるとき、スクロールホイール７は、基準となる情動性レベルを増加又は減少するために操作されることができる。そのような操作のデータ表現は、音声信号の修正されたバージョンを合成するステップ２０、２１を実行する端末へ提供される。したがって、ユーザは、表現される又は彼又は彼女の端末１、２へ入力される音声の感情のコンテンツの大きさ及び／又は感情の形式を制御することができる。適応方法のこの変形をより簡単に実装して使用するため、ユーザによって操作されるインターフェースの要素は、二つの機能を有することができる。例えば、スクロールホイール１７は、一つのモードではボリュームの制御機能を提供することができ、他のモードでは感情のコンテンツレベルを制御する機能を提供することができる。単純な実装において、スクロールホイール１７を押すこと、又は他の二成分の入力形式によりユーザがモード間を切り替えることができる。
【００５２】
ユーザインターフェース部品の別の種類は、ユーザが部分的又は全体的に全ての感情コンテンツを音声を表現する音声信号から取り除くことを可能にする。一つの変形において、このユーザインターフェース部品は、単一のボタンを有する。前記ボタンは、グラフィカルユーザインターフェースにおける仮想的なボタンであることができる。
【００５３】
ユーザ入力が、第一端末１から第二端末２へ表現されるために通信される音声の感情コンテンツを制御するために、第二端末２によって使用されるとき、第二端末２において提供されるユーザ入力を表現する情報は、第一端末１と通信されることができ、かつ、第一端末のユーザインターフェースを通じて出力として提供される。このことは、スピーカ１２を通じて可聴の出力であることができ、ディスプレイ７上で視覚的な出力であることができ、又は、その組み合わせであることができる。別の実施形態にいて、触覚のフィードバック信号が提供される。したがって、例えば、第二端末２のユーザが、第二端末２において表現される音声から全ての感情コンテンツを取り除くため、キーパッド１６上のボタンを押したとき、この事実は第一端末１へ通信される。第一端末のユーザは、彼のトーンを調整でき、あるいは、他の電話の相手へのいかなる言葉によらない合図も、他の電話の相手によって理解されないだろうという事実を考慮することができる。
【００５４】
当該方法の別の機能は、分析ステップ２３、２４において実行される分析の結果を表現する情報が、第二端末２においてユーザ端末を通じた出力として提供されることである。したがって、第一端末１が図２の方法を実行するとき、第一端末１における話者の情動性レベルを表現する情報は、第二端末２と通信される。前記情報は、例えばスクリーン１３上に適切な出力を提供する。第二端末２が、到着する音声信号において図２の方法を実行するとき、分析ステップ２３、２４の結果は、第二端末によって直接供給される。再構築ステップ２１への入力が、例えば、音声信号の修正されたバージョンから情動性の重要な部分取得された部分を欠かせるようなとき、この機能は一般に実装される。分析出力の供給は、第一端末１のユーザの感情の状態が、中立的な方法で表現されることを可能にする。このことは、ユーザに、話者の状態について潜在的に便利な情報を失うことなく、感情の制御を提供する。加えて、第二端末２のユーザが感情を認識することを支援する。なぜなら、特に文化的及び地域的差異がある場合に、感情は容易に誤って解釈（例えば、興奮の代わりに憤慨）され得るからである。代わりに又はさらに、感情解釈及び表示機能は、第一端末１上でも実装されることができ、ユーザは、したがって、提供されるフィードバックを用いて、彼又は彼女の感情を制御することを可能にする。
【００５５】
第二端末２において何が表現されたか、及び、どのようにそれが表現されたか、という機能的な情報コンテンツの間の不一致を避けるため、図２の方法は、話者の情動性レベルを決定するための少なくとも一つの分析ルーチンに従い修正された音声信号を、分析することによって得られるデータに従って、第一と第二端末２の間で通信された情報のテキスト表現の中の少なくとも一つの単語を置き換える任意のステップ２６を含む。この目的を達成するために、音声入力は、単語を識別可能にするようテキストに変換される。特に感情的な意味をもつそれらの単語は、置換され又は修正される。単語の置換及び単語の修正は、テキストを音声に変換する（ｔｅｘｔ−ｔｏ−ｓｐｅｅｃｈ）変換方法を用いて合成され、音声信号に挿入される。このステップ２６は、したがって、再構成ステップ２１の後にも実行されることができる。単語の置換のためには、単語を同じ機能的な意味をもつが、例えば、同一のＶａｌｅｎｃｅでＡｒｏｕｓａｌを表現する基準の値を増加又は減少させる単語に置き換えることを可能にする単語のデータベースが用いられる。修正のためには、感情的な単語に近い形容詞が置換される、又は、感情的な単語の意味を弱める又は強めるために形容詞が挿入される。
【００５６】
少なくとも図２の変形において、結果の情報コンテンツは、第二端末２において、第一端末１のユーザ及び第二端末２のユーザの少なくとも一人のユーザによって決定された、情動性レベルと一致する韻律的特徴とともに表現され、遠隔音声通信の非言語的な特徴の制御レベルを提供する。
【００５７】
注目すべきは、上で示された実施形態は、本発明をかえって制限するものではないことであり、かつ、当業者は、添付されたクレームの範囲を逸脱することなく多数の代わりの実施形態を設計することができるだろう。クレームにおいて、丸括弧間に付されたいかなる参照符号も、クレームを制限するよう解釈されてはならない。  “有する”の語は、クレームに記載されたもの以外の要素又はステップの存在を除外しない。要素の前の「ａ」又は「ａｎ」の語は、そのような要素の複数の存在を除外しない。いくつかの手段が互いに異なる従属クレームにおいて列挙されているという単なる事実は、それらの手段の組み合わせが利益を得るために用いることができないことを示すものではない。
【００５８】
モバイル通信端末は図１によって示唆されているが、既に要点を述べた当該方法は、例えばコールセンター又はビデオ会議システムにおける実装にもまた適合する。音声信号は、アナログ又はデジタル形式において通信されることができる。第一端末１と第二端末２との間のリンクは、ポイントツーポイントの接続である必要はなく、ブロードバンドのリンクであることができ、及び通信はパケットベースであることができる。後者の実施形態において、他の端末に関連する識別子は、パケットから取得されることができ、情動性レベルのデフォルト設定を読み出すよう用いられることができる。
【００５９】
情動性レベルへの参照が作成されるとき、例えば、話者の情動性を特徴付けるために多次元パラメータ空間が使用されるとき、それらは値の組み合わせであることができ、又は、それらが複数のパラメータのうち一つの値だけであることもできる。
【符号の説明】
【００６０】
１  第一端末
２  第二端末
３  ネットワーク
４  データ処理ユニット
５  メインメモリ
６  インターフェース
７  ディスプレイ
８  入力装置
９  マイク
１０  Ａ／Ｄコンバータ
１１  音声出力段
１２  スピーカ
１３  スクリーン
１４  マイク
１５  スピーカ
１６  キーパッド
１７  スクロールホイール
【図１】
2012513147.tif 000003
【図２】
2012513147.tif 000004
【国際調査報告】
2012513147.tif 000005
2012513147.tif 000006
2012513147.tif 000007