(57)【要約】【課題】より効果的に対話を進めることができる音声対話制御装置を得る。【解決手段】話者から入力された音声を音声認識部１１が認識し、性格情報のデータベース１６が話者の性格情報を格納し、性格情報管理部１５が話者の性格付けを行い、性格情報を管理する。また、感情情報のデータベース１８が話者毎の感情情報を格納し、感情情報管理部１７が話者の感情状態の推定を行い、感情情報を管理する。本構成において、次の応答内容を選定するにあたり、必要となる話者における性格情報や感情情報をそれぞれ性格情報管理部１５と感情情報管理部１７へ要求し、その値を使った計算結果と話者の音声認識結果とにより、対話制御部１２が応答内容を決定する。これにより、所定の話者と音声対話を行うに際して、対話をより個人にあった自然な内容にすることや、ある目的を達成するための手段として対話を使う場合に、より効果的に対話を進めることが可能となる。【選択図】　　　　図１
2004021121.tif 000002
【特許請求の範囲】
【請求項１】
所定の話者から入力された音声を認識する音声認識部と、
前記話者の性格情報を格納する性格情報のデータベースと、
前記話者の性格付けを行い該性格付けした性格情報を管理する性格情報管理部と、
前記音声対話での次の応答内容を選定するにあたり、必要となる前記話者の性格情報を前記性格情報管理部へ要求し、該要求に対して得た値を使った計算結果と前記話者の音声認識結果とにより応答内容を決定する対話制御部とを備えて構成され、
前記話者の感情に対応した音声対話を可能としたことを特徴とする音声対話制御装置。
【請求項２】
所定の話者から入力された音声を認識する音声認識部と、
前記話者の性格情報を格納する性格情報のデータベースと、
前記話者の性格付けを行い性格情報を管理する性格情報管理部と、
前記話者毎の感情情報を格納する感情情報のデータベースと、
前記話者の感情状態の推定を行い感情情報を管理する感情情報管理部と、
前記音声対話での次の応答内容を選定するにあたり、必要となる前記話者の性格情報や感情情報をそれぞれ前記性格情報管理部と前記感情情報管理部へ要求し、該要求に対して得た値を使った計算結果と前記話者の音声認識結果とにより応答内容を決定する対話制御部とを備えて構成され、
前記話者の感情に対応した音声対話を可能としたことを特徴とする音声対話制御装置。
【請求項３】
前記性格情報のデータベースは前記話者毎の性格の主要因子の値を格納し、前記性格情報管理部は前記対話制御部より要求される主要因子の値の参照を前記性格情報のデータベースへ行い、前記参照の結果の値を前記対話制御部に出力することを特徴とする請求項１または２記載の音声対話制御装置。
【請求項４】
前記性格情報のデータベースは、前記話者の性格付けを行うための検査テストを格納し、前記性格情報管理部は、前記検査テスト結果に基づき前記話者の性格付けを行い話者の性格情報を作成することを特徴とする請求項１または２記載の音声対話制御装置。
【請求項５】
前記感情情報のデータベースは、前記話者毎の感情の主要因子の値を格納し、前記感情情報管理部は、前記対話制御部より要求される主要因子の値の参照を前記感情情報のデータベースへ行い、前記参照の結果の値を前記対話制御部に出力することを特徴とする請求項２記載の音声対話制御装置。
【請求項６】
前記感情情報のデータベースは、前記話者の感情状態を推定するための韻律情報に応じた推定方法を格納し、前記感情情報管理部は、前記音声認識部にて抽出し入力された前記韻律情報に基づき前記話者の感情状態を推定し、該話者の感情情報を更新することを特徴とする請求項２記載の音声対話制御装置。
【請求項７】
前記感情情報のデータベースは、前記話者の感情状態を推定するための感情を表すキーワードに応じた推定方法を格納し、前記感情情報管理部は、前記音声認識部より入力された音声認識結果から感情を表すキーワードを抽出し、前記話者の感情状態を推定し、該話者の感情情報を更新することを特徴とする請求項２記載の音声対話制御装置。
【請求項８】
前記話者の表情を読みとる画像入力部をさらに備え、前記感情情報のデータベースは、前記話者の感情状態を推定するための表情に応じた推定方法を格納し、前記感情情報管理部は、前記画像入力部より入力された表情に基づき、前記話者の感情状態を推定し、該話者の感情情報を更新することを特徴とする請求項２記載の音声対話制御装置。
【請求項９】
前記話者の生理情報を感知する生理情報入力部をさらに備え、前記感情情報のデータベースは、前記話者の感情状態を推定するための生理情報に応じた推定方法を格納し、前記感情情報管理部は、前記画像入力部より入力された生理情報に基づき、前記話者の感情状態を推定し、該話者の感情情報を更新することを特徴とする請求項２記載の音声対話制御装置。
【請求項１０】
前記対話制御部は、次の応答内容を選定するにあたり、必要となる前記話者における性格情報や感情情報の主要因子値をそれぞれ前記性格情報管理部と前記感情情報管理部へ要求し、前記主要因子値を使った数式に基づき計算し、該計算結果と前記音声認識部より入力された話者の音声認識結果を使って応答内容を決定することを特徴とする請求項２記載の音声対話制御装置。
【請求項１１】
前記話者の発話された音声を入力する音声入力部をさらに備え、入力した音声を音声信号に変換し、該音声信号を前記音声認識部へ出力することを特徴とする請求項１または２記載の音声対話制御装置。
【請求項１２】
合成音の音声信号を生成する音声合成部と、音声をスピーカーから出力する音声出力部とをさらに備え、前記対話制御部より入力される対話の応答内容から合成音の音声信号を作成し、前記音声出力部から合成音声を出力することを特徴とする請求項１または２記載の音声対話制御装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、音声対話制御装置に関し、特に話者の性格と、話者の現在の感情状態に応じて対話内容を制御可能とした音声対話制御装置に関する。
【０００２】
【従来の技術】
従来、音声対話制御装置は、例えば、話者の発話の意味内容と話者の感情状態によって、バリエーションに富んだ対話を行うために用いられている。
【０００３】
本発明と技術分野の類似する先願発明例１として、特開２００１−２１５９９３号公報の「対話処理装置および対話処理方法、並びに記録媒体」がある。図４は、本先願発明例１の公報に記載されている対話システムの構成を示すブロック図である。
【０００４】
図４を参照すると、マイク（マイクロフォン）およびアンプ等で構成され、話者の音声を音声信号に変換する音声入力部２０と、この音声入力部２０からの音声信号を音響処理し話者の音声を認識するとともに、その音声の韻律情報を抽出する音声認識部２１と、音声認識部２１からの音声認識結果に含まれる語句の概念情報を抽出するとともに、話者の感情情報を考慮し話者へ出力する出力文の内容を生成する対話管理部２２と、対話管理部２２からの内容情報に対応する出力文を生成し、さらに、その出力文の合成音の音声信号を生成する文生成部２３と、文生成部２３からの音声信号をスピーカから出力する音声出力部２４と、例えば、レンズ、ＣＣＤ、Ａ／Ｄ変換器等で構成され話者の顔等を撮像して顔画像情報を出力する画像入力部２５と、例えば、脈拍計、発汗量や熱を測定するセンサ等で構成され話者の脈拍や発汗量、熱等の生理情報を出力する生理情報入力部２６と、この音声認識部２１からの音声の韻律情報や、対話管理部２２からの語句の概念情報や、上記画像入力部２５からの顔画像情報や、生理情報入力部２６からの生理情報に基づいて話者の感情状態を推定するユーザ感情情報更新部２７と、話者感情としての、例えば、喜びや怒り、驚き、悲しみ等の感情情報を保持するユーザ感情情報記録部２８を備えている。
【０００５】
続いて、特開２００１−２１５９９３号公報に記載されている対話システムの動作例について説明する。上記図４において、話者により発話が行われると、音声認識部２１では、話者からの音声が認識されるとともに、その音声の韻律情報が抽出される。対話管理部２２では、音声認識部２１による音声認識結果に含まれる語句の概念情報が抽出される。画像入力部２５では、話者の顔が撮像され、顔画像情報が出力される。生理情報入力部２６では、話者の脈拍数等の生理情報が感知される。ユーザ感情情報更新部２７は、上述の韻律情報や、概念情報、顔画像情報、生理情報に基づいて、話者の感情を推定し、上記対話管理部２２および文生成部２３では、その感情の推定結果に基づいて話者に出力する出力文が生成される。
【０００６】
【発明が解決しようとする課題】
しかしながら、前述した従来の対話制御装置では、例え話者が別人だったとしても、発話の意味内容が同じで、話者が同じような感情状態であれば、同じような応答内容が出力され、その結果、同じような対話が行われることになり、話者の性格に合ったより自然な対話や、より効果的な対話を行うことができないという問題点がある。その理由は、従来の対話制御装置では、対話の応答内容を決めるにあたり、発話の意味内容と話者の感情状態については考慮しているものの、話者の性格について何ら考慮されていないためである。
【０００７】
本発明の目的は、対話をより個人にあった自然な内容にすることや、ある目的を達成するための手段として対話を使う場合に、より効果的に対話を進めることができる音声対話制御装置を提供することにある。
【０００８】
【課題を解決するための手段】
かかる目的を達成するため、請求項１記載の発明の音声対話制御装置は、所定の話者から入力された音声を認識する音声認識部と、話者の性格情報を格納する性格情報のデータベースと、話者の性格付けを行い該性格付けした性格情報を管理する性格情報管理部と、音声対話での次の応答内容を選定するにあたり、必要となる話者の性格情報を性格情報管理部へ要求し、該要求に対して得た値を使った計算結果と話者の音声認識結果とにより応答内容を決定する対話制御部とを備えて構成され、話者の感情に対応した音声対話を可能としたことを特徴としている。
【０００９】
請求項２記載の発明の音声対話制御装置は、所定の話者から入力された音声を認識する音声認識部と、話者の性格情報を格納する性格情報のデータベースと、話者の性格付けを行い性格情報を管理する性格情報管理部と、話者毎の感情情報を格納する感情情報のデータベースと、話者の感情状態の推定を行い感情情報を管理する感情情報管理部と、音声対話での次の応答内容を選定するにあたり、必要となる話者の性格情報や感情情報をそれぞれ性格情報管理部と感情情報管理部へ要求し、該要求に対して得た値を使った計算結果と話者の音声認識結果とにより応答内容を決定する対話制御部とを備えて構成され、話者の感情に対応した音声対話を可能としたことを特徴としている。
【００１０】
請求項３記載の発明は、請求項１または２の音声対話制御装置において、性格情報のデータベースは話者毎の性格の主要因子の値を格納し、性格情報管理部は対話制御部より要求される主要因子の値の参照を性格情報のデータベースへ行い、結果の値を対話制御部に出力することを特徴とする。
【００１１】
請求項４記載の発明は、請求項１または２の音声対話制御装置において、性格情報のデータベースは、話者の性格付けを行うための検査テストを格納し、性格情報管理部は、検査テスト結果に基づき話者の性格付けを行い話者の性格情報を作成することを特徴とする。
【００１２】
請求項５記載の発明は、請求項２の音声対話制御装置において、感情情報のデータベースは、話者毎の感情の主要因子の値を格納し、感情情報管理部は、対話制御部より要求される主要因子の値の参照を感情情報のデータベースへ行い、結果の値を対話制御部に出力することを特徴とする。
【００１３】
請求項６記載の発明は、請求項２の音声対話制御装置において、感情情報のデータベースは、話者の感情状態を推定するための韻律情報に応じた推定方法を格納し、感情情報管理部は、音声認識部にて抽出し入力された韻律情報に基づき話者の感情状態を推定し、該話者の感情情報を更新することを特徴とする。
【００１４】
請求項７記載の発明は、請求項２の音声対話制御装置において、感情情報のデータベースは、話者の感情状態を推定するための感情を表すキーワードに応じた推定方法を格納し、感情情報管理部は、音声認識部より入力された音声認識結果から感情を表すキーワードを抽出し、話者の感情状態を推定し、該話者の感情情報を更新することを特徴とする。
【００１５】
請求項８記載の発明は、請求項２の音声対話制御装置において、話者の表情を読みとる画像入力部をさらに備え、感情情報のデータベースは、話者の感情状態を推定するための表情に応じた推定方法を格納し、感情情報管理部は、画像入力部より入力された表情に基づき、話者の感情状態を推定し、該話者の感情情報を更新することを特徴とする。
【００１６】
請求項９記載の発明は、請求項２の音声対話制御装置において、話者の生理情報を感知する生理情報入力部をさらに備え、感情情報のデータベースは、話者の感情状態を推定するための生理情報に応じた推定方法を格納し、感情情報管理部は、画像入力部より入力された生理情報に基づき、話者の感情状態を推定し、該話者の感情情報を更新することを特徴とする。
【００１７】
請求項１０記載の発明は、請求項２の音声対話制御装置において、対話制御部は、次の応答内容を選定するにあたり、必要となる話者における性格情報や感情情報の主要因子値をそれぞれ性格情報管理部と感情情報管理部へ要求し、主要因子値を使った数式に基づき計算し、該計算結果と音声認識部より入力された話者の音声認識結果を使って応答内容を決定することを特徴とする。
【００１８】
請求項１１記載の発明は、請求項１または２の音声対話制御装置において、話者の発話された音声を入力する音声入力部をさらに備え、入力した音声を音声信号に変換し、該音声信号を音声認識部へ出力することを特徴とする。
【００１９】
請求項１２記載の発明は、請求項１または２の音声対話制御装置において、合成音の音声信号を生成する音声合成部と、音声をスピーカーから出力する音声出力部とをさらに備え、対話制御部より入力される対話の応答内容から合成音の音声信号を作成し、音声出力部から合成音声を出力することを特徴とする。
【００２０】
【発明の実施の形態】
次に、添付図面を参照して本発明による音声対話制御装置の実施の形態を詳細に説明する。図１から図３を参照すると、本発明の音声対話制御装置の一実施形態が示されている。
【００２１】
次に、本発明の実施の形態について図面を参照して詳細に説明する。
図１において、本発明の実施形態の音声対話制御装置は、音声入力部１０、音声認識部１１、対話制御部１２、音声合成部１３、音声出力部１４、性格情報管理部１５、性格情報のデータベース１６、感情情報管理部１７、感情情報のデータベース１８、とを備えている。
【００２２】
音声入力部１０は、マイク（マイクロフォン）およびアンプ等で構成され、話者の音声を音声信号に変換する。
音声認識部１１は、音声入力部１０からの音声信号を音響処理し話者の音声を認識するとともに、その音声の韻律情報を抽出する。
感情情報のデータベース１８は、話者毎の感情情報を、例えば、話者毎の感情の主要因子における値として格納する。
【００２３】
感情情報管理部１７は、音声の韻律情報や認識結果中の感情を表すキーワードを抽出し、話者の感情状態の推定を行い感情情報を管理する。
性格情報のデータベース１６は、話者の性格情報を、例えば、話者毎の性格の主要因子における値として格納する。
性格情報管理部１５は、話者の性格付けを行い性格情報を管理する。
【００２４】
対話制御部１２は、音声認識部１１から出力された音声認識結果より、次の応答内容を選定するにあたり、必要となる話者における性格情報や感情情報の主要因子値を、それぞれ性格情報管理部１５と感情情報管理部１７へ要求し、その主要因子値を使った計算結果により、応答内容を決定する。
音声合成部１３は、対話制御部１２より入力される応答の内容の合成音声を生成する。
音声出力部１４は、音声合成部１３から入力される合成音声をスピーカー等から出力する。
【００２５】
次に、図１及び図２を参照して本実施形態の動作例について詳細に説明する。話者が発話をすると、マイク（マイクロフォン）の音声入力部１０は、発話された音声を音声信号に変換し、音声認識部１１へ出力する。
音声認識部１１では、入力された音声信号を音響処理し話者の音声を認識するとともに、その音声の韻律情報を抽出し、音声認識結果と韻律情報の抽出結果を感情情報管理部１７へ出力し、音声認識結果を対話制御部１２へ出力する（ステップ３０）。
【００２６】
ここで、例えば、韻律情報としては音声の高低、強弱、抑揚等を用いることができる。
感情情報管理部１７では、音声認識結果中に感情を表すキーワードがある場合、例えば、「とてもうれしい」や「ショック」等があげられるが、そのキーワードを抽出し（ステップ３１、ステップ３２）、韻律情報とキーワードの抽出結果より話者の感情状態の推定を行い、感情情報のデータベース１８の話者の感情情報を更新する（ステップ３３）。
【００２７】
対話制御部１２では、入力された音声認識結果をもとに、次の応答内容を選定するにあたり、必要となる話者の感情情報や性格情報の主要因子値をそれぞれ感情情報管理部１７と性格情報管理部１５へ要求する（ステップ３４、ステップ３５）。
ここで、例えば、感情情報の主要因子としては、喜び、悲しみ、驚き、嫌悪、怒り、恐れとした６因子を用いることができる。
【００２８】
また、性格情報の主要因子としては、ＢＩＧ５（Ｆｉｖｅ−Ｆａｃｔｏｒ　Ｍｏｄｅｌ）による外向性、協調性、勤勉性、情緒安定性、知性の５因子を用いることができ、予め検査テスト等の実施により、話者の主要因子値を設定しておくことができる。
【００２９】
次に、要求を受けた感情情報管理部１７は、感情情報のデータベース１８を参照し、必要となる話者の感情情報の主要因子値を対話制御部１２へ出力し、要求を受けた性格情報管理部１５は、性格情報のデータベース１６を参照し、必要となる話者の性格情報の主要因子値を対話制御部１２へ出力する。
【００３０】
次に、対話制御部１２では、入力した話者の性格情報と感情情報の主要因子値を使って計算を行い、その計算結果に基づき応答内容を決定し（ステップ３６）、応答内容を音声合成部１３へ出力する。
音声合成部１３では、入力された応答内容から合成音声を生成し（ステップ３７）、合成音声を出力するスピーカー等の音声出力部１４を介して応答内容の合成音声が出力される（ステップ３８）。
【００３１】
次に、具体的な実施例を用いて本実施形態の動作を説明する。
例えば、内向的で心配性だが勉強には精力的に取り組む性格の長男と、社交的で心配性ではないが勉強には精力的に取り組む方ではない性格の次男という、性格の異なる２人の兄弟が話者として識別されていて、ＢＩＧ５（Ｆｉｖｅ−Ｆａｃｔｏｒ　Ｍｏｄｅｌ）による事前の性格検査テストにより、音声対話制御装置における性格情報のデータベース１６が以下に掲げた表１に示されるように設定されており、また、感情情報のデータベース１８が表２に示されるように感情情報の主要因子として、喜び、悲しみ、驚き、嫌悪、怒り、恐れの６因子で設定されていたとする。
【００３２】
【表１】
2004021121.tif 000003
【００３３】
【表２】
2004021121.tif 000004
【００３４】
このような状況下で、本実施例の音声対話制御装置が「今日のテストの結果どうだった？」と長男に話しかけ、長男が「悪かった」と悲しげに発話すると、音声対話制御装置は、発話された音声を音声入力部１０を介して音声認識部１１へ出力する。
【００３５】
音声認識部１１では、入力された音声を「悪かった」と認識するとともに、その音声の韻律情報を抽出し、音声認識結果「悪かった」と韻律情報の抽出結果を感情情報管理部１７へ出力し、音声認識結果「悪かった」を対話制御部１２へ出力する。
【００３６】
感情情報管理部１７では、音声認識結果中に感情を表すキーワードは特にない。このため、韻律情報のみで話者の感情状態の推定を行い、感情情報のデータベース１８が以下に掲げた表３のように更新される。
【００３７】
【表３】
2004021121.tif 000005
【００３８】
対話制御部１２では、表４の「今日のテストの結果どうだった？」に対する対話内容の選択条件に基づき、音声認識結果が「悪かった」の場合に、次の応答内容を選定するための値を算出する数式に使用する話者の性格情報のＣ３（勤勉性）、Ｃ４（情緒安定性）の主要因子２つと、感情情報のＥ２（悲しみ）、Ｅ３（驚き）の主要因子２つをそれぞれ性格情報管理部１５と感情情報管理部１７とへ要求する。
【００３９】
【表４】
2004021121.tif 000006
【００４０】
次に、要求を受けた性格情報管理部１５は、性格情報のデータベース１６を参照し、主要因子値のＣ３（勤勉性）の値７、Ｃ４（情緒安定性）の値２を対話制御部１２へ出力し、要求を受けた感情情報管理部１７は、感情情報のデータベース１８を参照し、主要因子値のＥ２（悲しみ）の値７、Ｅ３（驚き）の値２を対話制御部１２へ出力する。
【００４１】
次に、対話制御部１２では、入力した話者の性格情報と感情情報の主要因子値を表４の数式に代入し計算すると５０．０５の値が算出され、その値範囲に該当する「残念だったね。元気だして」の応答内容が決定し、その合成音声が出力される。この対話内容は表５の対話例（Ａ）に示される。
【００４２】
【表５】
2004021121.tif 000007
【００４３】
一方、同じ状況下で、音声対話制御装置が「今日のテストの結果どうだった？」と次男に話しかけ、次男が「悪かった」と悲しげに発話し、長男と同じ感情状態と判定され、感情情報のデータベース１８が表３のように更新されたとしても、性格情報の主要因子値のＣ３（勤勉性）の値３、Ｃ４（情緒安定性）の値７により、表４の数式に代入し計算される結果は１９．５となり、その値範囲に該当する「もっと頑張らなきゃ駄目だよ」の長男とは別の応答内容が決定し、その合成音声が出力される。この対話内容は表５の対話例（Ｂ）に示される。
【００４４】
次に、同じ状況下で、音声対話制御装置が「今日のテストの結果どうだった？」と長男に話しかけ、長男が「良かった」とうれしそうに発話すると、音声対話制御装置は、発話された音声を音声入力部１０を介して音声認識部１１へ出力する。
【００４５】
音声認識部１１では、入力された音声を「良かった」と認識するとともに、その音声の韻律情報を抽出し、音声認識結果「良かった」と韻律情報の抽出結果を感情情報管理部１７へ出力し、音声認識結果「良かった」を対話制御部１２へ出力する。感情情報管理部１７では、音声認識結果中に感情を表すキーワードは特にないため、韻律情報のみで話者の感情状態の推定を行い、感情情報のデータベース１８が以下に掲げた表６のように更新される。
【００４６】
【表６】
2004021121.tif 000008
【００４７】
対話制御部１２では、表４の「今日のテストの結果どうだった？」に対する対話内容の選択条件に基づき、音声認識結果が「良かった」の場合に、次の応答内容を選定するための値を算出する数式に使用する話者の性格情報のＣ３（勤勉性）の主要因子１つと、感情情報のＥ１（喜び）、Ｅ３（驚き）の主要因子２つをそれぞれ性格情報管理部１５と感情情報管理部１７とへ要求する。
【００４８】
次に、要求を受けた性格情報管理部１５は、性格情報のデータベース１６を参照し、主要因子値のＣ３（勤勉性）の値７を対話制御部１２へ出力し、要求を受けた感情情報管理部１７は、感情情報のデータベース１８を参照し、主要因子値のＥ１（喜び）の値８、Ｅ３（驚き）の値４を対話制御部１２へ出力する。
【００４９】
次に、対話制御部１２では、入力した話者の性格情報と感情情報の主要因子値を表４の数式に代入し計算すると１９．２の値が算出され、その値範囲に該当する「よく頑張ったね」の応答内容が決定し、その合成音声が出力される。この対話内容は表５の対話例（Ｃ）に示される。
【００５０】
一方、同じ状況下で、音声対話制御装置が「今日のテストの結果どうだった？」と次男に話しかけ、次男が「良かった」とうれしそうに発話し、長男と同じ感情状態と判定され、感情情報のデータベース１８が表３のように更新されたとしても、性格情報の主要因子値のＣ３（勤勉性）の値３により、表４の数式に代入し計算される結果は４４．８となり、その値範囲に該当する「わーやったね」の長男とは別の応答内容が決定し、その合成音声が出力される。この対話内容は表５の対話例（Ｄ）に示される。
【００５１】
次に本実施の形態の効果について説明する。
本実施の形態では、話者の現在の感情状態と、話者の性格に応じて対話内容を変化させることにより、例えば、別の話者が同じような感情状態の時でも話者の性格に応じて対話内容を変えることができる。このため、対話をより個人にあった自然な内容にすることや、ある目的を達成するための手段として対話を使う場合に、より効果的に対話を進めることができる。
【００５２】
（他の実施例）
図３は、本発明の第２の実施の形態を示すブロック図である。本図３を参照すると、本発明の第２の実施の形態は、図１に示された第１の実施の形態の構成において、感情情報管理部１７で感情状態を推定するための入力手段として、画像入力部４０、生理情報入力部４１を追加した点で異なる。
【００５３】
画像入力部４０は、カメラ等の画像入力を有することで、話者の顔画像における表情を読みとり、また、生理情報入力部４１は、例えば、脈拍計や発汗量を測定機能を有することで、話者の生理的な情報を感知することにより、感情情報管理部１７で話者の感情状態をより精度が高く推定することができる効果がある。
【００５４】
（実施例の効果）
本発明を用いた場合には、対話をより個人にあった自然な内容にすることや、ある目的を達成するための手段として対話を使う場合に、より効果的に対話を進めることができる。その理由は、話者の現在の感情状態と、話者の性格に応じて対話内容を変化させることができるためである。
【００５５】
なお、上述の実施形態は本発明の好適な実施の一例である。ただし、これに限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変形実施が可能である。
【００５６】
【発明の効果】
以上の説明より明らかなように、本発明の音声対話制御装置は、話者と音声対話を行い入力された音声を認識し、話者の性格情報や感情情報をデータベースとして格納し、性格付けを行い性格情報を管理し、感情状態の推定を行い感情情報を管理し、応答内容を選定する。これにあたり、必要となる性格情報や感情情報を要求し、その値を使った計算結果と話者の音声認識結果とにより応答内容を決定している。このため、話者の感情状態をより精度が高く推定することができ、対話をより個人にあった自然な内容とし、より効果的に対話を進めることができる。
【図面の簡単な説明】
【図１】本発明の音声対話制御装置の第１の実施の形態の構成を示すブロック図である。
【図２】本発明の第１の実施の形態の動作を示す流れ図である。
【図３】本発明の第２の実施の形態の構成を示すブロック図である。
【図４】従来の対話制御装置の実施の形態の構成を示すブロック図である。
【符号の説明】
１０　音声入力部
１１　音声認識部
１２　対話制御部
１３　音声合成部
１４　音声出力部
１５　性格情報管理部
１６　性格情報のデータベース
１７　感情情報管理部
１８　感情情報のデータベース
２０　音声入力部
２１　音声認識部
２２　対話管理部
２３　文生成部
２４　音声出力部
２５　画像入力部
２６　生理情報入力部
２７　ユーザ感情情報更新部
２８　ユーザ感情情報記録部
４０　画像入力部
４１　生理情報入力部
【図１】
2004021121.tif 000009
【図２】
2004021121.tif 000010
【図３】
2004021121.tif 000011
【図４】
2004021121.tif 000012