(57)【要約】【課題】複数の人物各々の感情に応じて情報を提供する。【解決手段】情報提供装置（１、２）は、複数の人物各々の感情を認識すると共に、認識された感情に基づいて、複数の人物に夫々対応する複数の感情パラメータを取得する取得手段（１３２）と、複数の感情パラメータ相互間の関係、及び複数の感情パラメータに基づいて、出力すべき情報を決定すると共に情報を出力すべき対象者を決定する決定手段（１３３）と、を備える。【選択図】図１
2018116222.tif 000002
【特許請求の範囲】
【請求項１】
複数の人物各々の感情を認識すると共に、前記認識された感情に基づいて、前記複数の人物に夫々対応する複数の感情パラメータを取得する取得手段と、
前記複数の感情パラメータ相互間の関係、及び前記複数の感情パラメータに基づいて、出力すべき情報を決定すると共に前記情報を出力すべき対象者を決定する決定手段と、
を備えることを特徴とする情報提供装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報提供装置に関し、特に、人の感情に応じた情報を提供する情報提供装置の技術分野に関する。
【背景技術】
【０００２】
この種の装置として、例えば、音声入力器を介して入力された音声を分析して感情パラメータを算出し、感情パラメータに応じて予め定められた発話シナリオに基づいて音声を出力する会話ロボットが提案されている（特許文献１参照）。
【０００３】
尚、複数の人物が撮像された映像から、該複数の人物のうちの２人の人物の間の感情の度合いを感情情報として求める装置が提案されている。該感情情報には、肯定的関係を表す情報と否定的関係を表す情報とが含まれる（特許文献２参照）。ある人物による他の人物を対象とした評価又は感情が表現されたテキストに基づいて、人物間の関連性を評価するシステムが提案されている（特許文献３参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−１０７６７３号公報
【特許文献２】特開２０１５−０７５９０８号公報
【特許文献３】特開２００７−１２８１６３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
特許文献１に記載の技術は、例えば複数の人物が互いに会話をしている状況での使用は想定されていない。本発明は、該問題点に鑑みてなされたものであり、複数の人物各々の感情に応じて情報を提供することができる情報提供装置を提供することを課題とする。
【課題を解決するための手段】
【０００６】
本発明の情報提供装置は、上記課題を解決するために、複数の人物各々の感情を認識すると共に、前記認識された感情に基づいて、前記複数の人物に夫々対応する複数の感情パラメータを取得する取得手段と、前記複数の感情パラメータ相互間の関係、及び前記複数の感情パラメータに基づいて、出力すべき情報を決定すると共に前記情報を出力すべき対象者を決定する決定手段と、を備える。
【０００７】
当該情報提供装置によれば、複数の人物に夫々対応する複数の感情パラメータと、複数の感情パラメータ相互間の関係（言い換えれば、複数の人物間の関係）に基づいて、出力すべき情報及び該情報を出力すべき対象者が決定される。従って、当該情報提供装置によれば、複数の人物各々の感情に応じて情報を提供することができる。
【０００８】
本発明の作用及び他の利得は次に説明する実施するための形態から明らかにされる。
【図面の簡単な説明】
【０００９】
【図１】第１実施形態に係る情報提供装置の構成を示すブロック図である。
【図２】第１実施形態に係る情報提供処理を示すフローチャートである。
【図３】出力内容のテーブルの一例である。
【図４】第２実施形態に係る情報提供装置の構成を示すブロック図である。
【図５】第２実施形態に係る情報提供処理を示すフローチャートである。
【発明を実施するための形態】
【００１０】
本発明の情報提供装置に係る実施形態を図面に基づいて説明する。
【００１１】
＜第１実施形態＞
本発明の情報提供装置に係る第１実施形態について、図１乃至図３を参照して説明する。
【００１２】
（装置構成）
第１実施形態に係る情報提供装置の構成について、図１を参照して説明する。図１は、第１実施形態に係る情報提供装置の構成を示すブロック図である。
【００１３】
図１において、情報提供装置１は、入力デバイス１１、出力デバイス１２及び処理装置１３を備えて構成されている。入力デバイス１１は、典型的にはマイクであるが、マイクに加えて、例えばカメラ、生体センシングデバイス等を有してよい。尚、カメラは、可視光カメラに限らず、赤外線カメラであってよい。出力デバイス１２は、典型的にはスピーカであるが、スピーカに加えて、例えばディスプレイ等を有してよい。処理装置１３は、その内部に論理的に実現される処理ブロックとして又は物理的に実現される処理回路として、人数識別部１３１、感情認識部１３２及び処理部１３３を有する。
【００１４】
（情報提供処理）
上述の如く構成された情報提供装置１において実施される情報提供処理について、図２のフローチャートを参照して説明する。本実施形態では、情報提供装置１の認識範囲に、Ａ、Ｂ及びＣの３人が存在する場合を一例として挙げる。また、Ａ、Ｂ及びＣの３人は会話をしているものとする。
【００１５】
図２において、先ず、処理装置１３の人数識別部１３１は、入力デバイス１１を介して取得された音声を分析する（ステップＳ１０１）。続いて、人数識別部１３１は、音声の分析結果に基づいて、情報提供装置１の認識範囲内に存在する人数を認識する（ステップＳ１０２）。ステップＳ１０１の処理における音声の分析方法は、その分析結果に基づいて人数を認識可能なものであればよく、特定の分析方法に限定されない。
【００１６】
尚、入力デバイス１１がカメラを有する場合には、人数識別部１３１は、カメラにより撮像された画像に基づいて人数を認識してよい。或いは、当該情報提供装置１が車両に搭載されている場合には、人数識別部１３１は、車両の着座センサの出力に基づいて人数を認識してよい。
【００１７】
上記ステップＳ１０２の処理において、Ａ、Ｂ及びＣの３人が認識されたものとする。感情認識部１３２は、認識されたＡ、Ｂ及びＣ各々の感情パラメータを算出する（ステップＳ１０３、Ｓ１０４及びＳ１０５）。具体的には、感情認識部１３２は、入力デバイス１１を介して取得された音声の特徴（例えば周波数分布等）に基づいて、感情パラメータを算出する。
【００１８】
尚、入力デバイス１１がカメラを有する場合には、感情認識部１３２は、例えばカメラにより撮像された画像に基づいて検出された顔表情の特徴（例えば、両目、眉及び口各々の形状の特徴）から、感情パラメータを算出してよい。
【００１９】
ステップＳ１０３、Ｓ１０４及びＳ１０５各々の処理において算出される感情パラメータは、その成分として、複数の感情各々の度合いを示す数値を含む。例えば、「怒り」の度合いが“１”、「悲しみ」の度合いが“８”、「喜び」の度合いが“３”、「驚き」の度合いが“４”である場合、感情パラメータは、例えば（怒り：１，悲しみ：８，喜び：３，驚き：４）と表される。
【００２０】
次に、処理部１３３は、Ａ、Ｂ及びＣ各々の感情パラメータに基づいて、各人の機嫌の度合いを数値化する（ステップＳ１０６）。具体的には、感情パラメータの成分のうちの最大値と、該最大値に対応する感情に係る重み（即ち、機嫌への寄与度）とに基づいて、機嫌の度合いが数値化される。
【００２１】
感情に係る重みが、例えば「怒り」の場合“−１”、「悲しみ」の場合“−０．８”、「喜び」の場合“＋１”、「驚き」の場合“＋０．５”であるとする。感情パラメータが、例えば（怒り：−１，悲しみ：８，喜び：３，驚き：４）である場合、機嫌の度合いは、“８×（−０．８）＝−６．４”となる。
【００２２】
次に、処理部１３３は、ステップＳ１０６の処理の結果に基づいて、Ａ、Ｂ及びＣのうち最も機嫌が悪い人（即ち、機嫌の度合いを示す数値が最小である人）を、情報提供の対象者に決定する（ステップＳ１０７）。ステップＳ１０６の処理の結果、Ａ、Ｂ及びＣの機嫌の度合いが、夫々、“−６．４”、“８”及び“１”である場合、処理部１３３は、Ａを対象者に決定する。
【００２３】
次に、処理部１３３は、対象者に決定された人物の機嫌がポジティブかネガティブかを判別する（ステップＳ１０８）。処理部１３３は、機嫌の度合いを示す数値が“０”以上であればポジティブ、“０”未満であればネガティブと判別する。
【００２４】
次に、処理部１３３は、対象者に決定された人物の機嫌の度合いを示す数値と、他の人の機嫌の度合いを示す数値の平均値との差を検出する（ステップＳ１０９）。例えば、Ａ、Ｂ及びＣの機嫌の度合いが、夫々、“−６．４”、“８”及び“１”である場合、「他の人の機嫌の度合いを示す数値の平均値」は、“（８＋１）／２＝４．５”となる。この場合、ステップＳ１０９の処理において検出される差は、“｜（−６．４）−４．５｜＝１０．９”となる。
【００２５】
次に、処理部１３３は、ステップＳ１０９の処理において検出された差に基づいて、図３に示すテーブルを参照して、出力内容を選択する（ステップＳ１１０）。例えば、Ａ、Ｂ及びＣの機嫌の度合いが、夫々、“−６．４”、“８”及び“１”である場合、対象者であるＡの機嫌はネガティブであり、ステップＳ１０９の処理において検出された差は“１０．９”であるので、処理部１３３は「出力しない」を選択する。
【００２６】
次に、処理部１３３は、ステップＳ１１０の処理において、「同じ話題で出力」又は「話題を変えて出力」が選択された場合、出力デバイス１２を介して、音声を出力する（ステップＳ１１１）。
【００２７】
（技術的効果）
情報提供装置１によれば、上述の如く、複数人各々の感情パラメータに基づいて対象者が決定されると共に、複数人各々の感情パラメータ相互間の関係に基づいて出力内容が決定される。従って、当該情報提供装置１によれば、複数の人物各々の感情に応じて情報を提供することができる。
【００２８】
＜第２実施形態＞
本発明の情報提供装置に係る第２実施形態について、図４及び図５を参照して説明する。第２実施形態では、処理装置１３の構成の一部が異なる以外は、上述した第１実施形態と同様である。よって、第２実施形態について、第１実施形態と重複する説明を適宜省略すると共に、図面上における共通箇所には同一符号を付して示し、基本的に異なる点についてのみ図４及び図５を参照して説明する。
【００２９】
（装置構成）
第２実施形態に係る情報提供装置の構成について、図４を参照して説明する。図４は、第２実施形態に係る情報提供装置の構成を示すブロック図である。
【００３０】
図４において、情報提供装置２は、入力デバイス１１、出力デバイス１２及び処理装置１３を備えて構成されている。処理装置１３は、その内部に論理的に実現される処理ブロックとして又は物理的に実現される処理回路として、人数識別部１３１、感情認識部１３２、処理部１３３、個人識別部１３４及び人間関係データベース１３５を有する。人間関係データベース１３５には、ユーザ間の関係が予め登録されている。
【００３１】
（情報提供処理）
上述の如く構成された情報提供装置２において実施される情報提供処理について、図５のフローチャートを参照して説明する。本実施形態では、情報提供装置２の認識範囲に、ユーザとして、Ａ、Ｂ及びＣの３人が存在する場合を一例として挙げる。また、Ａ、Ｂ及びＣの３人は会話をしているものとする。
【００３２】
図５において、ステップＳ１０２の処理の後、個人識別部１３４は、例えば入力デバイス１１を介して取得された音声に基づく声紋認証により、個人（ユーザ）を識別する（ステップＳ２０１）。ここで、声紋は予め登録されているものとする。尚、声紋が登録されていない場合には、例えば「人物不明」として以降の処理が行われてもよいし、声紋登録を促すメッセージが出力されてもよい。
【００３３】
次に、処理部１３３は、ステップＳ２０１の処理の結果に基づいて、人間関係データベース１３５から、識別されたユーザ（ここでは、Ａ、Ｂ及びＣ）間の関係を取得する（ステップＳ２０２）。尚、人物間の関係（即ち、人間関係）には、例えば、夫婦、親子、兄弟、カップル、上司・部下、同僚、友人等が含まれる。
【００３４】
ここでは、Ａが夫、Ｂが妻、Ｃが子供であるとする。ＡとＢとの関係は「夫婦」であり、ＡとＣとの関係及びＢとＣとの関係は「親子」となる。人間関係データベース１３５には、人間関係に応じて、ある人の機嫌が他の人の機嫌に及ぼす影響の度合いを示す数値が記憶されている。本実施形態では「ある人の機嫌が他の人の機嫌に及ぼす影響の度合いを示す数値」を、「人間関係パラメータ」と称する。Ａが夫、Ｂが妻、Ｃが子供である場合、人間関係パラメータは、例えば、夫：０．５、妻：１．０、子供：１．４となる。
【００３５】
さて、ステップＳ１０６の処理の後、処理部１３３は、ステップＳ１０６の処理の結果と、Ａ、Ｂ及びＣ間の人間関係に基づく人間関係パラメータとに基づいて、各人の機嫌の度合いを補正する（ステップＳ２０３）。
【００３６】
ここで、ステップＳ１０６の処理の結果、Ａ、Ｂ及びＣの機嫌の度合いが、夫々、“−６．４”、“８”及び“１”であるとする。補正後のＡ、Ｂ及びＣ各々の機嫌の度合いは、夫々、“−６．４×０．５＝−３．２”、“８×１＝８”及び“１×１．４＝１．４”となる。
【００３７】
処理部１３３は、ステップＳ２０３の処理の結果に基づいて、ステップＳ１０７以降の処理を行う。
【００３８】
（技術的効果）
情報提供装置２によれば、上述の如く、複数人各々の感情パラメータに加えて、各人の他人への影響に基づいて対象者が決定されると共に、複数人各々の感情パラメータ相互間の関係に基づいて出力内容が決定される。従って、当該情報提供装置２によれば、複数の人物各々の感情及び複数の人物間の関係性に応じた情報を提供することができる。
【００３９】
本発明は、上述した実施形態に限られるものではなく、特許請求の範囲及び明細書全体から読み取れる発明の要旨或いは思想に反しない範囲で適宜変更可能であり、そのような変更を伴う情報提供装置もまた本発明の技術的範囲に含まれるものである。
【符号の説明】
【００４０】
１、２…情報提供装置、１１…入力デバイス、１２…出力デバイス、１３…処理装置、１３１…人数識別部、１３２…感情認識部、１３３…処理部、１３４…個人識別部、１３５…人間関係データベース
【図１】
2018116222.tif 000003
【図２】
2018116222.tif 000004
【図３】
2018116222.tif 000005
【図４】
2018116222.tif 000006
【図５】
2018116222.tif 000007