(57)【要約】【課題】人の感情をより正確に把握することができる。【解決手段】本発明に係る感情判断装置は、非文字情報と、前記非文字情報を取得した位置を示す取得位置情報、前記非文字情報を取得した時間を示す時間情報、及び前記非文字情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである非文字関連情報と、を取得する情報取得部と、前記非文字情報を前記非文字関連情報と関連付けて記憶する非文字情報記憶部と、前記非文字情報と前記非文字関連情報とに基づいて人の感情を判断する感情判断部と、を備える。【選択図】図１
2015169702.tif 000002
【特許請求の範囲】
【請求項１】
非文字情報と、前記非文字情報を取得した位置を示す取得位置情報、前記非文字情報を取得した時間を示す時間情報、及び前記非文字情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである非文字関連情報と、を取得する情報取得部と、
前記非文字情報を前記非文字関連情報と関連付けて記憶する非文字情報記憶部と、
前記非文字情報と前記非文字関連情報とに基づいて人の感情を判断する感情判断部と、
を備える感情判断装置。
【請求項２】
前記非文字情報に基づいて当該非文字情報に対応づけられる人の属性を決定する属性決定部をさらに備え、
前記感情判断部は、前記非文字情報及び決定された前記人の属性を示す決定属性情報にさらに基づいて前記人の感情を判断する、
請求項１に記載の感情判断装置。
【請求項３】
前記感情判断部により判断された前記人の感情を示す感情情報の提供先を特定する感情情報提供先特定部と、
特定された前記提供先に前記感情情報を提供する感情情報提供部と、をさらに備える、
請求項１又は２に記載の感情判断装置。
【請求項４】
前記感情情報提供先特定部は、前記感情情報を提供することを指示する第１ユーザ端末の位置を示す第１位置情報と、前記第１ユーザ端末とは異なる第２ユーザ端末の位置を示す第２位置情報と、に基づいて前記第１ユーザ端末と前記第２ユーザ端末との距離を測定し、測定した前記距離に基づいて前記第２ユーザ端末を前記提供先として特定するか否かを判断する、
請求項３に記載の感情判断装置。
【請求項５】
前記感情情報提供先特定部は、前記感情情報を提供することを指示する第１ユーザ端末の第１ユーザの属性を示す第１属性情報と、前記第１ユーザ端末とは異なる第２ユーザ端末の第２ユーザの属性を示す第２属性情報と、に基づいて前記第１ユーザと前記第２ユーザとの関連性を判断し、判断した前記関連性に基づいて前記第２ユーザ端末を前記提供先として特定するか否かを判断する、
請求項３に記載の感情判断装置。
【請求項６】
判断された前記人の感情を示す感情情報を、前記非文字関連情報と関連付けて記憶する感情情報記憶部をさらに含む、
請求項１〜５のいずれか一つに記載の感情判断装置。
【請求項７】
非文字情報と、前記非文字情報を取得した位置を示す取得位置情報、前記非文字情報を取得した時間を示す時間情報、及び前記非文字情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである非文字関連情報と、を取得し、
前記非文字情報を前記非文字関連情報と関連付けて記憶し、
前記非文字情報と前記非文字関連情報とに基づいて人の感情を判断する、
感情判断方法。
【請求項８】
コンピュータに、
非文字情報と、前記非文字情報を取得した位置を示す取得位置情報、前記非文字情報を取得した時間を示す時間情報、及び前記非文字情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである非文字関連情報と、を取得する機能と、
前記非文字情報を前記非文字関連情報と関連付けて記憶する機能と、
前記非文字情報と前記非文字関連情報とに基づいて人の感情を判断する機能と、
を実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、感情判断装置および感情判断方法に関する。
【背景技術】
【０００２】
従来、入力判断部１２１により、入力された言語情報が感情表現を示す言語情報であることが判断され、ユーザ協調性制御部１２３により、入力された言語情報が感情を表す言語情報であることを認識してユーザの感情を把握する技術が知られている。（特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−２２２３３１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、人の感情は言語以外の情報にも端的に反映される。特に、人の感情は人の表情や会話、行動などに、より強く反映される。
【０００５】
しかしながら、上述したようなユーザの感情を把握する技術では、入力された言語情報のみに基づいてユーザの感情を把握することはできるが、人の表情や会話、行動などが記録されている可能性のある、音声・画像・動画情報などの非言語情報に基づいて人の感情を判断できないため、人の感情をより正確に把握することができないという問題があった。
【０００６】
そこで、本発明のいくつかの態様はかかる事情に鑑みてなされたものであり、音声・画像・動画情報などの非文字情報に基づいて人の感情を判断することにより、人の感情をより正確に把握することを目的の一つとし得る。
【課題を解決するための手段】
【０００７】
上記課題を解決するために、本発明の一側面に係る感情判断装置は、非文字情報と、前記非文字情報を取得した位置を示す取得位置情報、前記非文字情報を取得した時間を示す時間情報、及び前記非文字情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである非文字関連情報と、を取得する情報取得部と、前記非文字情報を前記非文字関連情報と関連付けて記憶する非文字情報記憶部と、前記非文字情報と前記非文字関連情報とに基づいて人の感情を判断する感情判断部と、を備える。
【０００８】
また、本発明の一側面に係る感情判断方法は、非文字情報と、前記非文字情報を取得した位置を示す取得位置情報、前記非文字情報を取得した時間を示す時間情報、及び前記非文字情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである非文字関連情報と、を取得し、前記非文字情報を前記非文字関連情報と関連付けて記憶し、前記非文字情報と前記非文字関連情報とに基づいて人の感情を判断する。
【０００９】
また、本発明の一側面に係るプログラムは、コンピュータに、非文字情報と、前記非文字情報を取得した位置を示す取得位置情報、前記非文字情報を取得した時間を示す時間情報、及び前記非文字情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである非文字関連情報と、を取得する機能と、前記非文字情報を前記非文字関連情報と関連付けて記憶する機能と、前記非文字情報と前記非文字関連情報とに基づいて人の感情を判断する機能と、を実行させる。
【００１０】
なお、本発明において、「部」とは、単に物理的手段を意味するものではなく、その「部」が有する機能をソフトウェアによって実現する場合も含む。また、１つの「部」や装置が有する機能が２つ以上の物理的手段や装置により実現されても、２つ以上の「部」や装置の機能が１つの物理的手段や装置により実現されても良い。
【発明の効果】
【００１１】
本発明によれば、音声・画像・動画情報などの非文字情報に基づいて人の感情を判断するので、人の感情をより正確に把握することができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の第１実施形態に係る感情判断システムの一実施形態を示す概略構成図（システム構成図）である。
【図２】本発明の第１実施形態に係る感情判断サーバの一実施形態を示す機能的構成を示すブロック図である。
【図３】本発明の第１実施形態に係る感情情報の提供の一例を示す図である。
【図４】本発明の第１実施形態に係る感情情報の提供のフローの一例を示すフローチャートである。
【図５】本発明の第２実施形態に係る感情情報の提供の別のフローの一例を示すフローチャートである。
【図６】本発明の第３実施形態に係る感情情報の提供の別のフローの一例を示すフローチャートである。
【００１３】
以下、添付図面を参照しながら本発明の実施の形態について説明する。以下の実施の形態は、本発明を説明するための例示であり、本発明をその実施の形態のみに限定する趣旨ではない。また、本発明は、その要旨を逸脱しない限り、様々な変形が可能である。さらに、各図面において同一の構成要素に対しては可能な限り同一の符号を付し、重複する説明は省略する。
【００１４】
まず、図１を参照して本発明の実施形態に係るシステムの全体構成を説明する。
図１は、本発明の第１実施形態に係る感情判断システム１００の一実施形態を示す概略構成図（システム構成図）である。
【００１５】
図１に示すように、本発明の実施の形態に係る感情判断システム１００は、例示的に、感情判断サーバ１、ユーザ端末５ａ、５ｂ、５ｃ、５ｄ、５ｅ、及びネットワーク５０を含んで構成されている。また、ネットワーク５０は、例示的に、情報管理サーバ３ａ、３ｂ、３ｃを含んで構成されている。
【００１６】
感情判断サーバ１は、ネットワーク５０に接続されたサーバ用コンピュータであり、そのサーバ用コンピュータにおいて、図示しないＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ：中央処理装置）が本発明に係るサーバ用プログラムを実行することにより、本発明に係る感情判断装置を機能的に実現させ、本発明に係る感情判断方法を実施するものである。
【００１７】
ユーザ端末５ａ、５ｂ、５ｃ、５ｄ、５ｅは、ネットワーク５０に接続されたスマートフォンなどの携帯電話、タブレット端末、ラップトップ又はノートブック型コンピュータ等を含む、少なくとも情報を感情判断サーバ１との間で送受信する送受信機能を有する装置で構成されている。よって、ユーザ端末５ａ、５ｂ、５ｃ、５ｄ、５ｅは、デスクトップコンピュータなど事業所内に備え付けられている端末であってもよい。また、ユーザ端末５ａ、５ｂ、５ｃ、５ｄ、５ｅは、図３にて後述するが、ユーザ端末５ａ、５ｂ、５ｃ、５ｄ、５ｅが備えるディスプレイにマップＭを表示し、人の感情情報ＦＩをさらに表示する機能を有する装置で構成されている。
【００１８】
ネットワーク５０は、所定のワイドエリアネットワーク（ＷＡＮ：Ｗｉｄｅ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）であり、例えばインターネットである。ネットワーク５０の具体的な構成は、感情判断サーバ１及び情報管理サーバ３ａ、３ｂ、３ｃの間で任意の情報の送受信が可能なように含んでいれば特に制限されない。ネットワーク５０は、感情判断サーバ１に接続され、感情判断サーバ１がネットワーク５０内の情報管理サーバ３ａ、３ｂ、３ｃと相互に通信可能に接続されている。
【００１９】
情報管理サーバ３ａ、３ｂ、３ｃは、感情判断サーバ１と同様に、ネットワーク５０に接続されたサーバ用コンピュータであり、そのサーバ用コンピュータにおいて図示しないＣＰＵが所定のサーバ用プログラムを実行することにより、サーバ機能を発現するものである。
【００２０】
情報管理サーバ３ａ、３ｂ、３ｃは、ネットワーク５０に接続され、図示しない端末装置（例えば、スマートフォンなどの携帯電話、タブレット端末、ラップトップ又はノートブック型コンピュータ等）、監視カメラなどの屋外に設置されている情報処理装置（不図示）、又は屋内に設置されている情報処理装置（不図示）などからの情報を収集する情報管理手段の例示である。例えば、このような情報管理サーバ３ａ、３ｂ、３ｃは、個人のウェブページ、ブログ、ＳＮＳ（ソーシャルネットワークサービス）、インターネット掲示板などのサービスを提供する管理業者や企業、個人のサーバである。情報管理サーバ３ａ、３ｂ、３ｃは、不特定多数の人が、ウェブページ、ブログ、ＳＮＳ（ソーシャルネットワークサービス）、インターネット掲示板などのいわゆるＣＧＭ（Consumer Generated Media）上に記載したテキスト（文書）などの文字情報を取得し、記憶する。また、情報管理サーバ３ａ、３ｂ、３ｃは、ＣＧＭ上に存在する音声情報、画像情報、動画情報、人・端末装置の動作情報、生体情報などの非文字情報を取得し、記憶する。さらに、情報管理サーバ３ａ、３ｂ、３ｃは、情報管理サーバ３ａ、３ｂ、３ｃと通信可能な端末装置（不図示）が取得又は保有する、音声情報、画像情報、動画情報、人・端末装置の動作情報、生体情報などの非文字情報を取得し、記憶する。情報管理サーバ３ａ、３ｂ、３ｃは、これらの取得および記憶動作を、定期的にまたは不定期に繰り返して、ネットワーク５０に新規に提供された情報をタイムリーに取得し、記憶している。
【００２１】
音声情報は、例えば、発声速度、声の強弱、声質、声の平均ピッチ、声のピッチ範囲、声のピッチ変化、発声の明瞭性などの情報を含む。画像情報・動画情報は、端末装置に備え付けのカメラ、屋外に設置されているカメラ（例えば監視カメラ）などによって撮影された写真、動画などを含む。人・端末装置の動作情報は、端末装置を所持している人の動きに基づく情報を含む。人・端末装置の動作情報は、例えば、端末装置を所持している人が、手に持っていたり、端末装置を置いたり、元気に歩いたり、とぼとぼ歩いたり、ゆっくり走ったり、急速に走ったり、スキップしたり、するような動きを反映する情報を含む。生体情報は、体温、心拍数、呼吸数などの情報を含む。これらの情報は、各情報の絶対値である必要はなく、程度（大きい、小さい、高い、低いなど）を示すものであってもよい。
【００２２】
また、情報管理サーバ３ａ、３ｂ、３ｃは、非文字情報を取得した位置を示す取得位置情報、非文字情報を取得した時間を示す時間情報、及び非文字情報を取得した位置の環境を示す環境情報のうち少なくとも一つである非文字関連情報を取得し、記憶する。
【００２３】
取得位置情報は、例えば、ＧＰＳ（Global Positioning System）などの測位システムによる緯度経度の座標情報、住所や部屋番号などの地点情報などを含む。なお、取得位置情報は、非文字情報と独立して取得されるものであってもよいし、非文字情報である画像情報に埋め込まれている（記録されている）Ｅｘｉｆ（Exchangeable image file format）情報などの情報であってもよい。環境情報は、天気、気温、明るさ、室内であるか室外であるか、を示す情報などを含む。これらの情報は、絶対値である必要はなく、程度（明るい、暗い、高い、低いなど）を示すものであってもよい。
【００２４】
なお、感情判断サーバ１は、情報管理サーバ３ａ、３ｂ、３ｃから非文字情報及び非文字関連情報を受信する。また、情報管理サーバ３ａ、３ｂ、３ｃは、非文字情報及び非文字関連情報のみ取得、記憶、送信するわけでなく、文字情報及び文字情報を取得した位置を示す取得位置情報、文字情報を取得した時間を示す時間情報、及び文字情報を取得した位置の環境を示す環境情報などを含む文字関連情報を取得、記憶、送信することができるように構成されている。
【００２５】
このように、感情判断サーバ１と情報管理サーバ３ａ、３ｂ、３ｃのそれぞれとの間、感情判断サーバ１とユーザ端末５ａ、５ｂ、５ｃ、５ｄ、５ｅのそれぞれとの間において、互いに通信可能に設定されることにより、感情判断システム１００が構成される。
【００２６】
なお、感情判断サーバ１は、所定のネットワーク内に分散された複数のサーバにより、１つの感情判断サーバ１として機能するように構成されていてもよい。
【００２７】
図２は、本発明の第１実施形態に係る感情判断サーバ１の一実施形態を示す機能的構成を示すブロック図である。図２に示すように、感情判断サーバ１は、機能的に、情報処理部１０、非文字情報記憶部１２、及び感情情報記憶部１４を含んで構成されている。
【００２８】
感情判断サーバ１の上記構成は、記憶領域に格納されているソフトウェアプログラムを図示しないＣＰＵが実行することにより機能的に実現することができる。なお、感情判断サーバ１は、上記機能を持つものであれば、特に制限はなく、クラウド・コンピューティングなどで実現される場合も含む。
【００２９】
情報処理部１０は、非文字情報及び非文字関連情報以外の様々な情報を処理する機能ブロックであり、機能的に、情報取得部２０、属性決定部２２、感情判断部２４、感情情報提供先特定部２６、及び感情情報提供部２８を含んで構成されている。
【００３０】
情報取得部２０は、情報管理サーバ３ａ、３ｂ、３ｃから非文字情報及び非文字関連情報を取得する機能ブロックである。
【００３１】
非文字情報記憶部１２は、情報取得部２０が取得した非文字情報及び非文字関連情報について、非文字情報を非文字関連情報と関連付けて記憶する機能ブロックである。また、非文字情報記憶部１２は、非文字情報及び非文字関連情報を、短期的に又は長期的に保持・管理できるように、そして容易に検索・抽出・出力などができるように構成されている。
【００３２】
属性決定部２２は、非文字情報に基づいて非文字情報に対応づけられる人の属性を決定する機能ブロックである。具体的に、属性決定部２２は、情報取得部２０が取得し、又は非文字情報記憶部１２に記憶されている、非文字情報に含まれる声質に関する情報に基づいて、その声を発した人の属性を決定する。属性決定部２２は、例えば、情報取得部２０が取得し、又は非文字情報記憶部１２に記憶されている、動画から動画に映っている人の属性を決定可能に構成されていている。また、属性決定部２２は、非文字情報に基づいて非文字情報に対応づけられる人の属性を決定した際には、決定された人の属性を示す決定属性情報を生成する。なお、属性決定部２２は、非文字情報の情報元である端末装置、情報処理装置又はユーザ端末５にあらかじめ設定された、人の属性に基づく属性情報を取得することにより、属性を決定するように構成されていてもよい。
【００３３】
ここで、「属性」とは、物体の性質や特徴のことをいい、人の属性とは、人の年齢、生年月日、性別、国籍、身長、体重等に限られず、人の好み・趣味・趣向、家族構成、知人・友人・同僚関係などの人間関係、社会的ステータス等も広く含む。
【００３４】
感情判断部２４は、非文字情報と非文字関連情報とに基づいて人の感情を判断する機能ブロックである。感情判断部２４は、例えば、人の感情として「幸せ」、「喜び」、「楽しみ」、「嬉しい」、「怒り」、「悲しみ」、「驚き」、「怨み（恨み）」、「嫌悪」などを判断するように構成される。感情判断部２４は、例えば、非文字情報である笑顔の子供が写っている画像情報と、その子供が遊園地にいる場合の画像情報の取得位置情報と、に基づいてその子供の感情を判断する。この場合、感情判断部２４は、画像情報からは子供が笑顔であると判断でき、取得位置情報からは、その子供が遊園地にいる（遊園地で遊んでいる）と判断できる。よって、感情判断部２４は、その子供の感情は「楽しみ」、「喜び」、「嬉しさ」などのポジティブな感情を持っていることを判断することができる。これにより、感情判断部２４は、笑顔の子供が写っている画像情報のみに基づいて人の感情を判断する場合よりも、より正確に人の感情を判断することができる。
【００３５】
また、感情判断部２４は、人が複数の感情を持っている又は表現している場合は、同時に複数の感情を判断するように構成されていてもよい。さらに、感情判断部２４は、人の複数の感情を判断した場合は、その複数の感情のそれぞれの割合を判断するように構成されていてもよい。感情判断部２４は、例えば、人が「喜び」と「幸せ」の感情を持っている又は表現している場合、「喜び」については６０％、「幸せ」については４０％というように、感情の割合を判断するように構成される。
【００３６】
さらに、感情判断部２４は、属性決定部２２により非文字情報に基づいて非文字情報に対応づけられる人の属性を決定し、非文字情報及び決定された人の属性を示す決定属性情報にさらに基づいて人の感情を判断する機能ブロックである。具体的に、属性決定部２２により、人の声に関する情報（例えば発声速度）に基づいて、その人の声に関する情報に対応づけられる人の年齢（属性）が決定される。感情判断部２４は、人の発声速度だけではなく、決定されたその人の年齢にさらに基づいて、その人の感情を判断することにより、より正確に人の感情を判断することができる。
【００３７】
さらに、感情判断部２４は、人の感情を判断した際には、感情の判断結果に基づいて人の感情情報を生成する機能ブロックである。
【００３８】
感情情報記憶部１４は、感情判断部２４により生成された、人の感情を示す感情情報を非文字関連情報と関連付けて記憶する機能ブロックである。感情情報記憶部１４は、属性決定部２２により、決定属性情報が生成された場合、非文字情報と決定属性情報とを関連付けて記憶するように構成されていてもよい。また、感情情報記憶部１４は、非文字情報、非文字関連情報、及び属性情報などを、短期的に又は長期的に保持・管理できるように、そして容易に検索・抽出・出力などができるように構成されている。
【００３９】
感情情報提供先特定部２６は、感情判断部２４により判断された人の感情を示す感情情報の提供先を特定する機能ブロックである。感情情報提供先特定部２６は、複数のユーザ端末の間で感情情報を授受する場合に機能するオプショナルな機能ブロックである。例えば、感情情報提供先特定部２６は、図１に示すユーザ端末５ａ、５ｂ、５ｃ、５ｄ、５ｅのうち少なくとも一つからの指示に基づいて感情情報を提供する提供先を特定する。また、感情情報提供先特定部２６は、図１に不図示であるなんらかの事業者からの指示に基づいて感情情報の提供先を特定するように構成されていてもよい。
【００４０】
感情情報提供先特定部２６は、感情情報を提供することを指示するユーザ端末５ａ（第１ユーザ端末）の位置を示す第１位置情報と、ユーザ端末５ａとは異なるユーザ端末５ｂ（第２ユーザ端末）の位置を示す第２位置情報と、に基づいてユーザ端末５ａとユーザ端末５ｂとの距離を測定し、測定した距離に基づいてユーザ端末５ｂを感情情報の提供先として特定するか否かを判断する機能ブロックである。
【００４１】
具体的には、感情判断サーバ１は、各ユーザ端末５ａ、５ｂに対して各ユーザ端末５ａ、５ｂの位置情報を問い合わせて、各ユーザ端末５ａ、５ｂから、各ユーザ端末５ａ、５ｂの位置情報を受信できる問い合わせ情報受信部（不図示）を備えている。問い合わせ情報受信部が受信した各ユーザ端末５ａ、５ｂの位置情報に基づいて、感情情報提供先特定部２６は、ユーザ端末５ａとユーザ端末５ｂとの距離を測定し、測定した距離に基づいてユーザ端末５ｂを感情情報の提供先として特定するか否かを判断する。
【００４２】
感情情報提供先特定部２６は、例えば、ユーザ端末５ａとユーザ端末５ｂとの距離を測定し、両者の距離が近いと判断した場合、ユーザ端末５ｂを感情情報の提供先として特定しないと判断するように構成される。また、感情情報提供先特定部２６は、例えば、ユーザ端末５ａとユーザ端末５ｂとの距離を測定し、両者の距離が近いと判断した場合、ユーザ端末５ｂを感情情報の提供先として特定すると判断するように構成される。
【００４３】
また、感情情報提供先特定部２６は、例えば、ユーザ端末５ａとユーザ端末５ｂ及びユーザ端末５ｃそれぞれとの距離を測定し、ユーザ端末５ａにより近いユーザ端末５を選択し、選択されたユーザ端末５を感情情報の提供先として特定するように構成されていてもよい。
【００４４】
さらに、感情情報提供先特定部２６は、感情情報を提供することを指示するユーザ端末５ａ（第１ユーザ端末）の第１ユーザの属性を示す第１属性情報と、ユーザ端末５ａとは異なるユーザ端末５ｂの第２ユーザの属性を示す第２属性情報と、に基づいて第１ユーザと第２ユーザとの関連性を判断し、判断した関連性に基づいてユーザ端末５ｂを感情情報の提供先として特定するか否かを判断する機能ブロックである。
【００４５】
具体的には、感情判断サーバ１は、各ユーザ端末５ａ、５ｂに対して各ユーザ端末５ａ、５ｂのユーザの属性情報を問い合わせて、各ユーザ端末５ａ、５ｂから、各ユーザ端末５ａ、５ｂのユーザの属性情報を受信できる問い合わせ情報受信部（不図示）を備えている。問い合わせ情報受信部が受信した各ユーザ端末５ａ、５ｂのユーザの属性情報に基づいて、感情情報提供先特定部２６は、ユーザ端末５ａのユーザとユーザ端末５ｂのユーザとの関連性を判断し、判断した関連性に基づいてユーザ端末５ｂを感情情報の提供先として特定するか否かを判断する。
【００４６】
感情情報提供先特定部２６は、例えば、ユーザ端末５ａのユーザとユーザ端末５ｂのユーザとの関連性（趣味・趣向が合うか合わないか、知り合いであるかないか、親族であるかないか、同僚であるかないなどの親密度）を判断し、両者の関連性がない又は低い（趣味・趣向が合わない、知り合いでない、親族でない、同僚でないなど親密度が低い）と判断した場合、ユーザ端末５ｂを感情情報の提供先として特定しないと判断するように構成される。また、感情情報提供先特定部２６は、例えば、ユーザ端末５ａのユーザとユーザ端末５ｂのユーザとの関連性を判断し、両者の関連性が有る又は高い（趣味・趣向が合う、知り合いである、親族である、同僚であるなど親密度が高い）と判断した場合、ユーザ端末５ｂを感情情報の提供先として特定すると判断するように構成される。
【００４７】
また、感情情報提供先特定部２６は、例えば、ユーザ端末５ａのユーザとユーザ端末５ｄのユーザ及びユーザ端末５ｅのユーザそれぞれとの関連性を測定し、ユーザ端末ユーザ端末５ｄよりユーザ端末５ｅを選択し、選択されたユーザ端末５ｅを感情情報の提供先として特定するように構成されていてもよい。
【００４８】
なお、感情情報提供先特定部２６は、ユーザの指示により、感情情報の提供範囲又は提供先が予め設定されるように構成されていてもよい。例えば、感情情報提供先特定部２６は、感情情報の提供範囲又は提供先として、あらゆるユーザ端末５を特定しない、すなわち、どのユーザ端末５にも感情情報が提供されない（完全非公開）ように構成されていてもよい。また、感情情報提供先特定部２６は、感情情報の提供範囲又は提供先として、すべてのユーザ端末５を特定する、すなわち、すべてのユーザ端末５に感情情報が提供される（完全公開、全世界公開）ように構成されていてもよい。さらに、感情情報提供先特定部２６は、感情情報の提供範囲又は提供先として、一部のユーザ端末５を特定する、すなわち、一部のユーザ端末５に感情情報が提供される（例えば、友人まで公開、友人の友人まで公開、ある国のユーザまで公開など）ように構成されていてもよい。さらにまた、感情情報提供先特定部２６は、ユーザ端末５ａから遠くに存在するユーザ端末５ｄを、感情情報の提供先として特定してもよい。例えば、ユーザ端末５ａのユーザと他のユーザ端末５のユーザが友人関係である場合であって、ユーザ端末５ａのユーザが、ユーザ端末５のユーザに対して、今後両ユーザが向かう先の位置又は範囲の感情情報を予め提供・共有したい場合、感情情報提供先特定部２６は、ユーザ端末５ａの指示により、ユーザ端末５ａとユーザ端末５との距離が遠い場合であっても、感情情報の提供先として、ユーザ端末５を特定するように構成されていてもよい。
【００４９】
感情情報提供部２８は、感情情報提供先特定部２６により特定された感情情報の提供先に少なくとも感情情報を提供する機能ブロックである。また、感情情報提供部２８は、感情情報記憶部１４に記憶されている、少なくとも感情情報を取得し提供するように構成されている。
【００５０】
図３は、本発明の第１実施形態に係る感情情報の提供の一例を示す図である。図３に示すように、ユーザ端末５は表示部を備えており、当該表示部に地図Ｍ、エリアＡｒ、及び人の感情情報ＦＩを表示している。これにより、ユーザ端末５のユーザは、地図Ｍ上のどの位置でどのような感情を持つ人がいるのか、又は、いたのかを知ることができる。
【００５１】
具体的には、図２に示す、感情判断サーバ１の感情判断部２４により、複数の異なる位置で取得した複数の非文字情報（例えば、笑顔の人が写っている画像情報）とそれぞれの画像情報の取得位置情報とに基づいて人の感情を判断する。図３に示すように、感情情報ＦＩは、「笑顔」となっており、感情判断部２４では、人の感情は「楽しみ」、「喜び」、「嬉しさ」などのポジティブな感情であったと判断したことになる。なお、画像情報の取得位置情報として、画像情報に文字情報として記録された位置情報（Ｅｘｉｆ情報）を用いることも可能である。また、感情判断部２４は、ユーザ端末５、他の端末装置又は情報処理装置に位置情報を問い合わせることなく、ネットワーク上で公開しているすべての（位置情報が記録された）画像情報から、人の感情を判断できるように構成されていてもよい。
【００５２】
感情判断サーバ１の感情情報提供先特定部２６により、感情情報ＦＩの提供先としてユーザ端末５が特定され、感情判断サーバ１の感情情報提供部２８は、感情情報提供先特定部２６により特定されたユーザ端末５に複数の感情情報ＦＩ及び取得位置情報を提供する。
【００５３】
ユーザ端末５は、提供された複数の感情情報ＦＩに基づいて複数の笑顔画像（感情情報ＦＩ）を生成する。生成された複数の笑顔画像を、マップＭ上の取得位置情報に対応した複数の位置に表示する。また、ユーザ端末５は、複数の取得位置情報に基づいてある一定の範囲に感情情報ＦＩを表示する際は、図３に示すエリアＡｒのような表示を追加するように構成されていてもよい。これにより、ユーザ端末５のユーザは、どのエリアの感情情報ＦＩであるかを、より明確に認識することができる。
【００５４】
なお、ユーザ端末５が生成した笑顔画像（感情情報ＦＩ）は、感情判断サーバ１においてあらかじめ生成された上で、感情判断サーバ１から提供されるように構成されていてもよい。
【００５５】
また、感情情報提供部２８は、感情情報提供先特定部２６により特定された提供先に、複数人の感情情報をある一定量まとめて提供するように構成されていてもよい。さらに、感情情報提供部２８は、感情情報提供先特定部２６により特定された複数の提供先に同時に、感情情報を提供するように構成されていてもよい。
【００５６】
さらに、感情情報提供部２８は、感情情報記憶部１４に記憶されている少なくとも非文字情報から生成した提案情報などの追加情報を、感情情報提供先特定部２６により特定された提供先に提供するように構成されていてもよい。提案情報は、例えば、人の集客方法に関する情報が含まれる。また、その他の追加情報は、例えば、ある一定のエリアごとに、それらのエリアに居住している複数人がどのような感情を持っているのかなどを分析した情報などが含まれる。
【００５７】
図４は、本発明の第１実施形態に係る感情情報の提供のフローの一例を示すフローチャートである。図４のうち、ステップＳ５およびステップＳ６は、感情情報提供先特性部２６および感情情報提供部２８を機能させる場合に必要となるオプショナルなステップである。
【００５８】
図２に示す情報取得部２０は、音声・画像・動画情報などの非文字情報を取得する（図４に示すステップ１）。
【００５９】
図２に示す非文字情報記憶部１２は、非文字情報を非文字関連情報と関連づけて記憶する（図４に示すステップ２）。
【００６０】
図２に示す属性決定部２２は、非文字情報に対応づけられる人の属性を決定する（図４に示すステップ３）。
【００６１】
図２に示す感情判断部２４は、非文字情報と非文字関連情報とに基づいて人の感情を判断する。また、非文字情報及び属性決定部２２により決定された人の属性を示す決定属性情報にさらに基づいて人の感情を判断する（図４に示すステップ４）。
【００６２】
図２に示す感情情報提供先特定部２６は、感情判断部２４により判断された人の感情を示す感情情報の提供先を特定する（図４に示すステップ５）。
【００６３】
図２に示す感情情報提供部２８は、感情情報提供先特定部２６により特定された感情情報の提供先に感情情報を提供する（図４に示すステップ６）。
【００６４】
（第２実施形態）
第２実施形態では、複数のユーザ端末５の間で感情情報を授受する場合を想定しているのに対して、第１実施形態では、単一のユーザ端末５に感情情報を提供する場合を想定している点で相違する。
【００６５】
図５は、本発明の第２実施形態に係る感情情報の提供のフローの一例を示すフローチャートである。図５のうち、ステップＳ１５およびステップＳ１６は、感情情報提供先特性部２６および感情情報提供部２８を機能させる場合に必要となるオプショナルなステップである。
【００６６】
図１に示す感情判断サーバ１は、図１に示すネットワーク５０内の情報管理サーバ３ａ、３ｂ、３ｃが保有している非文字情報及び非文字関連情報を取得する（図５に示すステップ１０）。
【００６７】
図１に示すユーザ端末５ａ（第１ユーザ端末）は、図１に示す感情判断サーバ１に対して、感情情報を提供することを指示する（図５に示すステップ１１）。
【００６８】
感情判断サーバ１は、ユーザ端末５ａに対してユーザ端末５ａの位置情報を送信するよう問い合わせる（図５に示すステップ１２）。
【００６９】
ユーザ端末５ａは、感情判断サーバ１の問い合わせに基づいてユーザ端末５ａの位置情報を感情判断サーバ１に送信する（図５に示すステップ１３）。
【００７０】
感情判断サーバ１は、ユーザ端末５ｂに対してユーザ端末５ｂの位置情報を送信するよう問い合わせる（図５に示すステップ１４）。
【００７１】
ユーザ端末５ｂは、感情判断サーバ１の問い合わせに基づいてユーザ端末５ｂの位置情報を感情判断サーバ１に送信する（図５に示すステップ１５）。
【００７２】
図２に示す、感情判断サーバ１の感情情報提供先特定部２６は、ユーザ端末５ａの位置情報及びユーザ端末５ｂの位置情報に基づいてユーザ端末５ａとユーザ端末５ｂとの距離を測定し、測定した距離に基づいてユーザ端末５ｂを感情情報の提供先として特定するか否かを判断する。
【００７３】
感情情報提供先特定部２６は、ユーザ端末５ａとユーザ端末５ｂとの距離を測定し、両者の距離が近いと判断した場合、ユーザ端末５ｂを感情情報の提供先として特定しないと判断する。又は、感情情報提供先特定部２６は、ユーザ端末５ａとユーザ端末５ｂとの距離を測定し、両者の距離が近いと判断した場合、ユーザ端末５ｂを感情情報の提供先として特定すると判断する。
【００７４】
図２に示す、感情判断サーバ１の感情情報提供部２８は、感情情報提供先特定部２６がユーザ端末５ｂを感情情報の提供先として特定すると判断した場合は、感情情報をユーザ端末５ｂに送信する（図５に示すステップ１６）。一方で、感情判断サーバ１の感情情報提供部２８は、感情情報提供先特定部２６がユーザ端末５ｂを感情情報の提供先として特定しないと判断した場合は、感情情報をユーザ端末５ｂに送信しない。
【００７５】
（第３実施形態）
第３実施形態は、複数のユーザ端末５の間で感情情報を授受することを想定している点で第２実施形態と共通しているが、第２実施形態では提供先を特定するのに、取得位置情報を用いているのに対して、第３実施形態では提供先を特定するために、属性情報を用いている点が相違している。
【００７６】
図６は、本発明の第３実施形態に係る感情情報の提供のフローの一例を示すフローチャートである。図６のうち、ステップＳ２５およびステップＳ２６は、感情情報提供先特性部２６および感情情報提供部２８を機能させる場合に必要となるオプショナルなステップである。
【００７７】
図１に示す感情判断サーバ１は、図１に示すネットワーク５０内の情報管理サーバ３ａ、３ｂ、３ｃが保有している非文字情報及び非文字関連情報を取得する（図６に示すステップ２０）。
【００７８】
図１に示すユーザ端末５ａ（第１ユーザ端末）は、図１に示す感情判断サーバ１に対して、感情情報を提供することを指示する（図６に示すステップ２１）。
【００７９】
感情判断サーバ１は、ユーザ端末５ａに対してユーザ端末５ａの属性情報を送信するよう問い合わせる（図６に示すステップ２２）。
【００８０】
ユーザ端末５ａは、感情判断サーバ１の問い合わせに基づいてユーザ端末５ａの属性情報を感情判断サーバ１に送信する（図６に示すステップ２３）。
【００８１】
感情判断サーバ１は、ユーザ端末５ｂに対してユーザ端末５ｂの属性情報を送信するよう問い合わせる（図６に示すステップ２４）。
【００８２】
ユーザ端末５ｂは、感情判断サーバ１の問い合わせに基づいてユーザ端末５ｂの属性情報を感情判断サーバ１に送信する（図６に示すステップ２５）。
【００８３】
図２に示す、感情判断サーバ１の感情情報提供先特定部２６は、ユーザ端末５ａの属性情報及びユーザ端末５ｂの属性情報に基づいてユーザ端末５ａとユーザ端末５ｂとの関連性を判断し、判断した関連性に基づいてユーザ端末５ｂを感情情報の提供先として特定するか否かを判断する。
【００８４】
感情情報提供先特定部２６は、両者の関連性がない又は低いと判断した場合、ユーザ端末５ｂを感情情報の提供先として特定しないと判断する。又は、感情情報提供先特定部２６は、ユーザ端末５ａとユーザ端末５ｂとの関連性を判断し、両者の関連性が有る又は高いと判断した場合、ユーザ端末５ｂを感情情報の提供先として特定すると判断する。
【００８５】
図２に示す、感情判断サーバ１の感情情報提供部２８は、感情情報提供先特定部２６がユーザ端末５ｂを感情情報の提供先として特定すると判断した場合は、感情情報をユーザ端末５ｂに送信する（図６に示すステップ２６）。一方で、感情判断サーバ１の感情情報提供部２８は、感情情報提供先特定部２６がユーザ端末５ｂを感情情報の提供先として特定しないと判断した場合は、感情情報をユーザ端末５ｂに送信しない。
【００８６】
上記により、音声・画像・動画情報などの非文字情報に基づいて人の感情を判断することにより、人の感情をより正確に把握することができる。
【００８７】
（他の実施形態）
なお、本実施形態は、本発明の理解を容易にするためのものであり、本発明を限定して解釈するものではない。本発明はその趣旨を逸脱することなく、変更／改良され得るとともに、本発明にはその等価物も含まれる。
【００８８】
本実施形態では、感情判断サーバ１、ユーザ端末５ａ、５ｂ、５ｃ、５ｄ、５ｅ、及び情報管理サーバ３ａ、３ｂ、３ｃが処理する情報として、非文字情報及び非文字関連情報を例に挙げて説明をしているが、文字情報及び文字関連情報を排除しているわけでない。上記各構成は、文字情報及び文字関連情報についても、処理可能なように構成されていてもよい。
【００８９】
また、感情判断システム１００は、図１に示した構成要素を全て含むものではなく、その一部の構成要素により構成されるものであってもよい。例えば、図１には、情報管理サーバ３ａ、３ｂ、３ｃは三つ、ユーザ端末５ａ、５ｂ、５ｃ、５ｄ、５ｅは五つ、示されているが、数に制限はない。さらに、本実施形態では、感情判断部２４は、感情判断サーバ１に例示的に含まれているが、感情判断部２４は、ユーザ端末５ａ、５ｂ、５ｃ、５ｄ、５ｅに含まれるように構成されていてもよい。
【００９０】
さらに、図５及び図６に示すステップは必ずしもこのステップ通りに実行されなくてもよく、適宜変更されてよい。例えば、図５のＳ１２及びＳ１３が実行される前に、Ｓ１４及びＳ１５が実行されてもよいし、図６のＳ２２及びＳ２３が実行される前に、Ｓ２４及びＳ２５が実行されてもよい。
【符号の説明】
【００９１】
１：感情判断サーバ
３ａ、３ｂ、３ｃ：情報管理サーバ
５、５ａ、５ｂ、５ｃ、５ｄ、５ｅ：ユーザ端末
１０：情報処理部
１２：非文字情報記憶部
１４：感情情報記憶部
２０：情報取得部
２２：属性決定部
２４：感情判断部
２６：感情情報提供先特定部
２８：感情情報提供部
Ｍ：マップ
Ａｒ：エリア
ＦＩ：感情情報
５０：ネットワーク
１００：感情判断システム
【図１】
2015169702.tif 000003
【図２】
2015169702.tif 000004
【図３】
2015169702.tif 000005
【図４】
2015169702.tif 000006
【図５】
2015169702.tif 000007
【図６】
2015169702.tif 000008
【手続補正書】
【提出日】平成26年12月15日(2014.12.15)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像情報と、前記画像情報を取得した位置を示す取得位置情報、前記画像情報を取得した時間を示す時間情報、及び前記画像情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである画像関連情報と、を取得する情報取得部と、
前記画像情報を前記画像関連情報と関連付けて記憶する非文字情報記憶部と、
前記画像情報と前記画像関連情報とに基づいて人の感情を判断する感情判断部と、
を備える感情判断装置。
【請求項２】
前記画像情報に基づいて当該画像情報に対応づけられる人の属性を決定する属性決定部をさらに備え、
前記感情判断部は、前記画像情報及び決定された前記人の属性を示す決定属性情報にさらに基づいて前記人の感情を判断する、
請求項１に記載の感情判断装置。
【請求項３】
前記感情判断部により判断された前記人の感情を示す感情情報の提供先を特定する感情情報提供先特定部と、
特定された前記提供先に前記感情情報を提供する感情情報提供部と、をさらに備える、
請求項１又は２に記載の感情判断装置。
【請求項４】
前記感情情報提供先特定部は、前記感情情報を提供することを指示する第１ユーザ端末の位置を示す第１位置情報と、前記第１ユーザ端末とは異なる第２ユーザ端末の位置を示す第２位置情報と、に基づいて前記第１ユーザ端末と前記第２ユーザ端末との距離を測定し、測定した前記距離に基づいて前記第２ユーザ端末を前記提供先として特定するか否かを判断する、
請求項３に記載の感情判断装置。
【請求項５】
前記感情情報提供先特定部は、前記感情情報を提供することを指示する第１ユーザ端末の第１ユーザの属性を示す第１属性情報と、前記第１ユーザ端末とは異なる第２ユーザ端末の第２ユーザの属性を示す第２属性情報と、に基づいて前記第１ユーザと前記第２ユーザとの関連性を判断し、判断した前記関連性に基づいて前記第２ユーザ端末を前記提供先として特定するか否かを判断する、
請求項３に記載の感情判断装置。
【請求項６】
判断された前記人の感情を示す感情情報を、前記画像関連情報と関連付けて記憶する感情情報記憶部をさらに含む、
請求項１〜５のいずれか一つに記載の感情判断装置。
【請求項７】
画像情報と、前記画像情報を取得した位置を示す取得位置情報、前記画像情報を取得した時間を示す時間情報、及び前記画像情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである画像関連情報と、を取得し、
前記画像情報を前記画像関連情報と関連付けて記憶し、
前記画像情報と前記画像関連情報とに基づいて人の感情を判断する、
感情判断方法。
【請求項８】
コンピュータに、
画像情報と、前記画像情報を取得した位置を示す取得位置情報、前記画像情報を取得した時間を示す時間情報、及び前記画像情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである画像関連情報と、を取得する機能と、
前記画像情報を前記画像関連情報と関連付けて記憶する機能と、
前記画像情報と前記画像関連情報とに基づいて人の感情を判断する機能と、
を実行させるためのプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
そこで、本発明のいくつかの態様はかかる事情に鑑みてなされたものであり、画像情報に基づいて人の感情を判断することにより、人の感情をより正確に把握することを目的の一つとし得る。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
上記課題を解決するために、本発明の一側面に係る感情判断装置は、画像情報と、前記画像情報を取得した位置を示す取得位置情報、前記画像情報を取得した時間を示す時間情報、及び前記画像情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである画像関連情報と、を取得する情報取得部と、前記画像情報を前記画像関連情報と関連付けて記憶する非文字情報記憶部と、前記画像情報と前記画像関連情報とに基づいて人の感情を判断する感情判断部と、を備える。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
また、本発明の一側面に係る感情判断方法は、画像情報と、前記画像情報を取得した位置を示す取得位置情報、前記画像情報を取得した時間を示す時間情報、及び前記画像情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである画像関連情報と、を取得し、前記画像情報を前記画像関連情報と関連付けて記憶し、前記画像情報と前記画像関連情報とに基づいて人の感情を判断する。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
また、本発明の一側面に係るプログラムは、コンピュータに、画像情報と、前記画像情報を取得した位置を示す取得位置情報、前記画像情報を取得した時間を示す時間情報、及び前記画像情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである画像関連情報と、を取得する機能と、前記画像情報を前記画像関連情報と関連付けて記憶する機能と、前記画像情報と前記画像関連情報とに基づいて人の感情を判断する機能と、を実行させる。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
本発明によれば、画像情報に基づいて人の感情を判断するので、人の感情をより正確に把握することができる。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００４２
【補正方法】変更
【補正の内容】
【００４２】
感情情報提供先特定部２６は、例えば、ユーザ端末５ａとユーザ端末５ｂとの距離を測定し、両者の距離が遠いと判断した場合、ユーザ端末５ｂを感情情報の提供先として特定しないと判断するように構成される。また、感情情報提供先特定部２６は、例えば、ユーザ端末５ａとユーザ端末５ｂとの距離を測定し、両者の距離が近いと判断した場合、ユーザ端末５ｂを感情情報の提供先として特定すると判断するように構成される。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００７３
【補正方法】変更
【補正の内容】
【００７３】
感情情報提供先特定部２６は、ユーザ端末５ａとユーザ端末５ｂとの距離を測定し、両者の距離が遠いと判断した場合、ユーザ端末５ｂを感情情報の提供先として特定しないと判断する。又は、感情情報提供先特定部２６は、ユーザ端末５ａとユーザ端末５ｂとの距離を測定し、両者の距離が近いと判断した場合、ユーザ端末５ｂを感情情報の提供先として特定すると判断する。
【手続補正書】
【提出日】平成27年6月30日(2015.6.30)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像情報と、前記画像情報を取得した位置を示す取得位置情報、前記画像情報を取得した時間を示す時間情報、及び前記画像情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである画像関連情報と、を取得する情報取得部と、
前記画像情報を前記画像関連情報と関連付けて記憶する非文字情報記憶部と、
前記画像情報と、前記画像関連情報と、前記画像情報に基づいて決定される、前記画像情報に対応づけられる人の属性を示す決定属性情報と、に基づいて人の感情を判断する感情判断部と、
を備える感情判断装置。
【請求項２】
前記感情判断部により判断された前記人の感情を示す感情情報の提供先を特定する感情情報提供先特定部と、
特定された前記提供先に前記感情情報を提供する感情情報提供部と、をさらに備える、
請求項１に記載の感情判断装置。
【請求項３】
前記感情情報提供先特定部は、前記感情情報を提供することを指示する第１ユーザ端末の位置を示す第１位置情報と、前記第１ユーザ端末とは異なる第２ユーザ端末の位置を示す第２位置情報と、に基づいて前記第１ユーザ端末と前記第２ユーザ端末との距離を測定し、測定した前記距離に基づいて前記第２ユーザ端末を前記提供先として特定するか否かを判断する、
請求項２に記載の感情判断装置。
【請求項４】
前記感情情報提供先特定部は、前記感情情報を提供することを指示する第１ユーザ端末の第１ユーザの属性を示す第１属性情報と、前記第１ユーザ端末とは異なる第２ユーザ端末の第２ユーザの属性を示す第２属性情報と、に基づいて前記第１ユーザと前記第２ユーザとの関連性を判断し、判断した前記関連性に基づいて前記第２ユーザ端末を前記提供先として特定するか否かを判断する、
請求項２に記載の感情判断装置。
【請求項５】
判断された前記人の感情を示す感情情報を、前記画像関連情報と関連付けて記憶する感情情報記憶部をさらに含む、
請求項１〜４のいずれか一つに記載の感情判断装置。
【請求項６】
画像情報と、前記画像情報を取得した位置を示す取得位置情報、前記画像情報を取得した時間を示す時間情報、及び前記画像情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである画像関連情報と、を取得し、
前記画像情報を前記画像関連情報と関連付けて記憶し、
前記画像情報と、前記画像関連情報と、前記画像情報に基づいて決定される、前記画像情報に対応づけられる人の属性を示す決定属性情報と、に基づいて人の感情を判断する、
感情判断方法。
【請求項７】
コンピュータに、
画像情報と、前記画像情報を取得した位置を示す取得位置情報、前記画像情報を取得した時間を示す時間情報、及び前記画像情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである画像関連情報と、を取得する機能と、
前記画像情報を前記画像関連情報と関連付けて記憶する機能と、
前記画像情報と、前記画像関連情報と、前記画像情報に基づいて決定される、前記画像情報に対応づけられる人の属性を示す決定属性情報と、に基づいて人の感情を判断する機能と、
を実行させるためのプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
そこで、本発明のいくつかの態様はかかる事情に鑑みてなされたものであり、画像情報と、画像関連情報と、画像情報に基づいて決定される、画像情報に対応づけられる人の属性を示す決定属性情報と、に基づいて人の感情を判断することにより、人の感情をより正確に把握することを目的の一つとし得る。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
上記課題を解決するために、本発明の一側面に係る感情判断装置は、画像情報と、前記画像情報を取得した位置を示す取得位置情報、前記画像情報を取得した時間を示す時間情報、及び前記画像情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである画像関連情報と、を取得する情報取得部と、前記画像情報を前記画像関連情報と関連付けて記憶する非文字情報記憶部と、前記画像情報と、前記画像関連情報と、前記画像情報に基づいて決定される、前記画像情報に対応づけられる人の属性を示す決定属性情報と、に基づいて人の感情を判断する感情判断部と、を備える。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
また、本発明の一側面に係る感情判断方法は、画像情報と、前記画像情報を取得した位置を示す取得位置情報、前記画像情報を取得した時間を示す時間情報、及び前記画像情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである画像関連情報と、を取得し、前記画像情報を前記画像関連情報と関連付けて記憶し、前記画像情報と、前記画像関連情報と、前記画像情報に基づいて決定される、前記画像情報に対応づけられる人の属性を示す決定属性情報と、に基づいて人の感情を判断する。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
また、本発明の一側面に係るプログラムは、コンピュータに、画像情報と、前記画像情報を取得した位置を示す取得位置情報、前記画像情報を取得した時間を示す時間情報、及び前記画像情報を取得した前記位置の環境を示す環境情報のうち少なくとも一つである画像関連情報と、を取得する機能と、前記画像情報を前記画像関連情報と関連付けて記憶する機能と、前記画像情報と、前記画像関連情報と、前記画像情報に基づいて決定される、前記画像情報に対応づけられる人の属性を示す決定属性情報と、に基づいて人の感情を判断する機能と、を実行させる。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
本発明によれば、画像情報と、画像関連情報と、画像情報に基づいて決定される、画像情報に対応づけられる人の属性を示す決定属性情報と、に基づいて人の感情を判断するので、人の感情をより正確に把握することができる。