(57)【要約】      （修正有）【課題】ユーザが満足する紹介先を適切に提示する解析装置、解析プログラムおよび解析方法を提供する。【解決手段】第１ユーザ（例えば、医師）が第２ユーザ（例えば、患者）に紹介先を提示する際に、第１ユーザが提示する項目（話題）に対する第２ユーザの表情や仕草を撮影した画像情報や第２ユーザが発音した音声情報を取得し、第１ユーザが提示する項目と第２ユーザの画像情報や音声情報に基づいて判定された感情レベルとを対応付け、項目毎の第２ユーザの感情レベルの変化に基づいて、各々の項目に対する第２ユーザの満足度を解析（第２ユーザが満足している項目や不満に感じている項目を特定）し、満足度が高い紹介先の候補を抽出して第２ユーザに提示する。【選択図】図７
2018195164.tif 000002
【特許請求の範囲】
【請求項１】
第１ユーザが第２ユーザに紹介先を提示する解析装置であって、
前記解析装置又は当該解析装置と通信可能な装置に設けられた映像入力部及び／又は音声入力部から、前記第１ユーザが提示する項目に対する前記第２ユーザの反応を表す、前記第２ユーザの顔又は上半身の画像情報、及び／又は、前記第２ユーザの会話の音声情報を取得する情報取得部と、
前記第１ユーザが提示する項目と前記第２ユーザの画像情報及び／又は音声情報に基づいて判定された感情レベルとを対応付け、前記項目毎の前記感情レベルの変化に基づいて、各々の前記項目に対する前記第２ユーザの満足度を解析する解析部と、
前記第２ユーザの満足度に基づいて紹介先の候補を抽出して前記第２ユーザに提示する出力部と、を備える、
ことを特徴とする解析装置。
【請求項２】
前記情報取得部は、前記第１ユーザの音声情報を取得し、
前記解析部は、前記第１ユーザの音声情報を解析して前記項目を特定する、
ことを特徴とする請求項１に記載の解析装置。
【請求項３】
前記解析部は、前記第２ユーザの画像情報及び／又は音声情報を取得した時刻と当該画像情報及び／又は音声情報に基づいて判定された感情レベルとを関連付けると共に、前記第１ユーザが項目を提示した時刻と当該項目とを関連付け、前記時刻に基づいて、前記項目と前記感情レベルとを対応付ける、
ことを特徴とする請求項１又は２に記載の解析装置。
【請求項４】
前記情報取得部は、取得した前記第２ユーザの画像情報及び／又は音声情報を、感情レベル毎の画像情報及び／又は音声情報を記憶するデータベースを備える装置に送信し、
前記解析部は、前記装置から、前記第２ユーザの画像情報及び／又は音声情報と前記感情レベル毎の画像情報及び／又は音声情報とを比較することによって判定された前記感情レベルを受信する、
ことを特徴とする請求項１乃至３のいずれか一に記載の解析装置。
【請求項５】
前記解析部は、前記第２ユーザの画像情報及び／又は音声情報と予め記憶部に記憶した前記感情レベル毎の画像情報及び／又は音声情報とを比較して、又は、前記第２ユーザの画像情報及び／又は音声情報の初期状態からの変化に基づいて、前記第２ユーザの画像情報及び／又は音声情報に対応する前記感情レベルを判定する、
ことを特徴とする請求項１乃至３のいずれか一に記載の解析装置。
【請求項６】
前記出力部は、抽出した紹介先を選択可能にする紹介画面を表示部に表示させる、
ことを特徴とする請求項１乃至５のいずれか一に記載の解析装置。
【請求項７】
前記紹介先は、医療施設であり、
前記第１ユーザが提示する項目は、前記第２ユーザの対象疾患の治療成績に関する項目、前記第２ユーザの対象疾患の治療件数又は処置件数に関する項目、紹介先医師の性別に関する項目の中から選択される１つを含む、
ことを特徴とする請求項１乃至６のいずれか一に記載の解析装置。
【請求項８】
第１ユーザが第２ユーザに紹介先を提示する解析装置で動作する解析プログラムであって、
前記解析装置に、
前記解析装置又は当該解析装置と通信可能な装置に設けられた映像入力部及び／又は音声入力部から、前記第１ユーザが提示する項目に対する前記第２ユーザの反応を表す、前記第２ユーザの顔又は上半身の画像情報、及び／又は、前記第２ユーザの会話の音声情報を取得する情報取得処理、
前記第１ユーザが提示する項目と前記第２ユーザの画像情報及び／又は音声情報に基づいて判定された感情レベルとを対応付け、前記項目毎の前記感情レベルの変化に基づいて、各々の前記項目に対する前記第２ユーザの満足度を解析する解析処理、
前記第２ユーザの満足度に基づいて紹介先の候補を抽出して前記第２ユーザに提示する出力処理、を実行させる、
ことを特徴とする解析プログラム。
【請求項９】
前記情報取得処理では、前記第１ユーザの音声情報を取得し、
前記解析処理では、前記第１ユーザの音声情報を解析して前記項目を特定する、
ことを特徴とする請求項８に記載の解析プログラム。
【請求項１０】
前記解析処理では、前記第２ユーザの画像情報及び／又は音声情報を取得した時刻と当該画像情報及び／又は音声情報に基づいて判定された感情レベルとを関連付けると共に、前記第１ユーザが項目を提示した時刻と当該項目とを関連付け、前記時刻に基づいて、前記項目と前記感情レベルとを対応付ける、
ことを特徴とする請求項８又は９に記載の解析プログラム。
【請求項１１】
前記情報取得処理では、取得した前記第２ユーザの画像情報及び／又は音声情報を、感情レベル毎の画像情報及び／又は音声情報を記憶するデータベースを備える装置に送信し、
前記解析処理では、前記装置から、前記第２ユーザの画像情報及び／又は音声情報と前記感情レベル毎の画像情報及び／又は音声情報とを比較することによって判定された前記感情レベルを受信する、
ことを特徴とする請求項８乃至１０のいずれか一に記載の解析プログラム。
【請求項１２】
前記解析処理では、前記第２ユーザの画像情報及び／又は音声情報と予め記憶部に記憶した前記感情レベル毎の画像情報及び／又は音声情報とを比較して、又は、前記第２ユーザの画像情報及び／又は音声情報の初期状態からの変化に基づいて、前記第２ユーザの画像情報及び／又は音声情報に対応する前記感情レベルを判定する、
ことを特徴とする請求項８乃至１０のいずれか一に記載の解析プログラム。
【請求項１３】
前記出力処理では、抽出した紹介先を選択可能にする紹介画面を表示部に表示させる、
ことを特徴とする請求項８乃至１２のいずれか一に記載の解析プログラム。
【請求項１４】
前記紹介先は、医療施設であり、
前記第１ユーザが提示する項目は、前記第２ユーザの対象疾患の治療成績に関する項目、前記第２ユーザの対象疾患の治療件数又は処置件数に関する項目、紹介先医師の性別に関する項目の中から選択される１つを含む、
ことを特徴とする請求項８乃至１３のいずれか一に記載の解析プログラム。
【請求項１５】
第１ユーザが第２ユーザに紹介先を提示する解析装置を含むシステムにおける解析方法であって、
前記解析装置は、
前記解析装置又は当該解析装置と通信可能な装置に設けられた映像入力部及び／又は音声入力部から、前記第１ユーザが提示する項目に対する前記第２ユーザの反応を表す、前記第２ユーザの顔又は上半身の画像情報、及び／又は、前記第２ユーザの会話の音声情報を取得する情報取得処理と、
前記第１ユーザが提示する項目と前記第２ユーザの画像情報及び／又は音声情報に基づいて判定された感情レベルとを対応付け、前記項目毎の前記感情レベルの変化に基づいて、各々の前記項目に対する前記第２ユーザの満足度を解析する解析処理と、
前記第２ユーザの満足度に基づいて紹介先の候補を抽出して前記第２ユーザに提示する出力処理と、を実行する、
ことを特徴とする解析方法。
【請求項１６】
前記情報取得処理では、前記第１ユーザの音声情報を取得し、
前記解析処理では、前記第１ユーザの音声情報を解析して前記項目を特定する、
ことを特徴とする請求項１５に記載の解析方法。
【請求項１７】
前記解析処理では、前記解析処理では、前記第２ユーザの画像情報及び／又は音声情報を取得した時刻と当該画像情報及び／又は音声情報に基づいて判定された感情レベルとを関連付けると共に、前記第１ユーザが項目を提示した時刻と当該項目とを関連付け、前記時刻に基づいて、前記項目と前記感情レベルとを対応付ける、
ことを特徴とする請求項１５又は１６に記載の解析方法。
【請求項１８】
前記システムに、感情レベル毎の画像情報及び／又は音声情報を記憶したデータベースを備える装置を含み、
前記情報取得処理では、取得した前記第２ユーザの画像情報及び／又は音声情報を前記装置に送信し、
前記解析処理では、前記装置から、前記第２ユーザの画像情報及び／又は音声情報と前記感情レベル毎の画像情報及び／又は音声情報とを比較することによって判定された前記感情レベルを受信する、
ことを特徴とする請求項１５乃至１７のいずれか一に記載の解析方法。
【請求項１９】
前記解析処理では、前記第２ユーザの画像情報及び／又は音声情報と予め記憶部に記憶した前記感情レベル毎の画像情報及び／又は音声情報とを比較して、又は、前記第２ユーザの画像情報及び／又は音声情報の初期状態からの変化に基づいて、前記第２ユーザの画像情報及び／又は音声情報に対応する前記感情レベルを判定する、
ことを特徴とする請求項１５乃至１７のいずれか一に記載の解析方法。
【請求項２０】
前記出力処理では、抽出した紹介先を選択可能にする紹介画面を表示部に表示させる、
ことを特徴とする請求項１５乃至１９のいずれか一に記載の解析方法。
【請求項２１】
前記紹介先は、医療施設であり、
前記第１ユーザが提示する項目は、前記第２ユーザの対象疾患の治療成績に関する項目、前記第２ユーザの対象疾患の治療件数又は処置件数に関する項目、紹介先医師の性別に関する項目の中から選択される１つを含む、
ことを特徴とする請求項１５乃至２０のいずれか一に記載の解析方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、解析装置、解析プログラム及び解析方法に関し、特に、ユーザの画像情報や音声情報に基づいてユーザが満足する紹介先を適切に提示する解析装置、当該解析装置で動作する解析プログラム及び当該解析装置における解析方法に関する。
【背景技術】
【０００２】
近年、地域の診療所等に従事する医師は不足する傾向にあり、地域の患者が中核病院に集中するようになってきていることから、中核病院での医師の負担が増大し、医師が辞めていくという悪循環が発生している。この問題に対して、地域における医師確保に加えて、地域の診療所等と中核病院とを適切に役割分担して患者の治療を一体的に実現することが重要になってきている。
【０００３】
例えば、回復期の患者や軽い疾患の患者は地域の診療所等で診てもらい、重い疾患の患者は中核病院で診てもらうように、疾患やその重症度合に応じて、地域の診療所等と中核病院とで医療の役割分担を行うことが重要であり、このような役割分担を行うために、患者に適切な医療施設を紹介する方法の提案が求められている。
【０００４】
このような医療施設の紹介に関する技術として、例えば、下記特許文献１には、医療機関が他の医療機関に患者を紹介したときの紹介事由、紹介元と紹介先の医療機関、紹介状作成日および患者情報を一レコードとして蓄積記憶している記憶部と、前記紹介先の医療機関ごとに前記記憶部のレコード数を計数する計数部と、前記計数部が計数結果に基づき前記紹介先の医療機関ごとに前記紹介事由に適した紹介先であるかを示す評価ポイントを付与する評価部を備えた医療機関評価装置において、前記計数部は、前記紹介事由が一致するレコード数を紹介先医療機関の紹介件数として計数する紹介件数計数手段と、前記紹介件数として計数されたレコードの紹介先医療機関を紹介元医療機関にしているレコードであって、前記紹介件数として計数されたレコードの患者情報と一致、且つ前記紹介件数として計数されたレコードの紹介状作成日から第一の所定期間内の紹介状作成日となっているレコード数を再紹介補正値として計数する再紹介補正値計数手段を有し、前記評価部は、前記紹介件数を前記再紹介補正値にて減算補正して評価ポイントを付与する構成が開示されている。
【０００５】
また、下記特許文献２には、患者を特定する患者情報と、患者の傷病名と、自医療機関を特定する自己情報とに基づいて、他の医療機関に患者を紹介する紹介状の作成機能を備えた診療支援装置であって、傷病の診療に適した少なくとも１の診療科名を傷病名毎に対応付けて記憶している傷病−診療科記憶手段と、紹介先として設定可能な医療機関に設置されている診療科名を医療機関毎に対応付けて記憶している医療機関情報記憶手段と、紹介状発行対象の患者の傷病名に対応する診療科が設置されている医療機関を紹介先候補として抽出して表示する候補表示手段と、を有する構成が開示されている。
【０００６】
また、医療施設の紹介に関する技術ではないが、会話の発音からユーザの満足度を解析する技術に関して、下記特許文献３には、対象会話における対象会話参加者の音声から抽出される、複数の単語データ、及び、対象会話参加者における各単語の発声時間を示す複数の発音時間データを取得するデータ取得部と、データ取得部により取得される複数の単語データの中から、丁寧表現又は非丁寧表現を構成し得る複数の特定単語データを抽出する抽出部と、抽出部により抽出される複数の特定単語データ及び複数の特定単語データに関する複数の発声時間データに基づいて、対象会話における、対象会話参加者の丁寧表現から非丁寧表現への変化点を検出する変化検出部と、変化検出部による変化点の検出結果に基づいて、当該対象会話が不満会話であるか否かを判定する不満判定部と、を有する不満会話判定装置が開示されている。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００８−１１２３９０号公報
【特許文献２】特開２００３−１６７９５５号公報
【特許文献３】ＷＯ２０１４／０６９０７５
【発明の概要】
【発明が解決しようとする課題】
【０００８】
地域にある診療所等では、ある疾患に対して精査や治療が行えないという理由で、診療所の患者を中核病院に紹介する場合（診療所→中核病院）、または、中核病院で回復期にある患者を診療所に紹介する場合（中核病院→診療所）には、どちらのケースでも、主治医は、患者に紹介する医療施設を選定する必要がある。この紹介先の選定に際し、特許文献１では、過去の紹介実績に基づいて紹介先を選定している。また、特許文献２では、患者の疾患を診療可能な診療科を有する医療施設を抽出し、更に患者の生活地（自宅、会社）に近い順に紹介先の候補として通知している。
【０００９】
ここで、中核病院で回復期にある患者を診療所に紹介する場合（中核病院→診療所）は、経過観察が主な目的となるため、特許文献１、２のように、過去の紹介実績に基づいて紹介先を選定したり、患者の生活地に近くて治療可能な施設を選定したりする方法でも顕著な問題は生じない。
【００１０】
しかしながら、診療所で精査や治療が行えないために、患者を中核病院に紹介する場合（診療所→中核病院）においては、対象疾患の治療が可能な複数の中核病院は、病院ごとに医療（検査技術、治療技術）の質に差が存在し、また、患者の価値観は多種多様（治療成績、外部機関からの評価、紹介先医師の性別、通い易さ）であり、どの観点を重視するかによって患者が望んでいる紹介先は大きく異なるため、ユーザが満足する紹介先を適切に紹介することが難しいという問題があった。
【００１１】
本発明は、上記問題点に鑑みてなされたものであって、その主たる目的は、ユーザが満足する紹介先を適切に提示することができる解析装置、解析プログラム及び解析方法を提供することにある。
【課題を解決するための手段】
【００１２】
本発明の一側面は、第１ユーザが第２ユーザに紹介先を提示する解析装置であって、前記解析装置又は当該解析装置と通信可能な装置に設けられた映像入力部及び／又は音声入力部から、前記第１ユーザが提示する項目に対する前記第２ユーザの反応を表す、前記第２ユーザの顔又は上半身の画像情報、及び／又は、前記第２ユーザの会話の音声情報を取得する情報取得部と、前記第１ユーザが提示する項目と前記第２ユーザの画像情報及び／又は音声情報に基づいて判定された感情レベルとを対応付け、前記項目毎の前記感情レベルの変化に基づいて、各々の前記項目に対する前記第２ユーザの満足度を解析する解析部と、前記第２ユーザの満足度に基づいて紹介先の候補を抽出して前記第２ユーザに提示する出力部と、を備えることを特徴とする。
【００１３】
本発明の一側面は、第１ユーザが第２ユーザに紹介先を提示する解析装置で動作する解析プログラムであって、前記解析装置に、前記解析装置又は当該解析装置と通信可能な装置に設けられた映像入力部及び／又は音声入力部から、前記第１ユーザが提示する項目に対する前記第２ユーザの反応を表す、前記第２ユーザの顔又は上半身の画像情報、及び／又は、前記第２ユーザの会話の音声情報を取得する情報取得処理、前記第１ユーザが提示する項目と前記第２ユーザの画像情報及び／又は音声情報に基づいて判定された感情レベルとを対応付け、前記項目毎の前記感情レベルの変化に基づいて、各々の前記項目に対する前記第２ユーザの満足度を解析する解析処理、前記第２ユーザの満足度に基づいて紹介先の候補を抽出して前記第２ユーザに提示する出力処理、を実行させることを特徴とする。
【００１４】
本発明の一側面は、第１ユーザが第２ユーザに紹介先を提示する解析装置を含むシステムにおける解析方法であって、前記解析装置は、前記解析装置又は当該解析装置と通信可能な装置に設けられた映像入力部及び／又は音声入力部から、前記第１ユーザが提示する項目に対する前記第２ユーザの反応を表す、前記第２ユーザの顔又は上半身の画像情報、及び／又は、前記第２ユーザの会話の音声情報を取得する情報取得処理と、前記第１ユーザが提示する項目と前記第２ユーザの画像情報及び／又は音声情報に基づいて判定された感情レベルとを対応付け、前記項目毎の前記感情レベルの変化に基づいて、各々の前記項目に対する前記第２ユーザの満足度を解析する解析処理と、前記第２ユーザの満足度に基づいて紹介先の候補を抽出して前記第２ユーザに提示する出力処理と、を実行することを特徴とする。
【発明の効果】
【００１５】
本発明の解析装置、解析プログラム及び解析方法によれば、ユーザが満足する紹介先を適切に提示することができる。
【００１６】
その理由は、第１ユーザが第２ユーザに紹介先を提示する解析装置は、第１ユーザが提示する項目（話題）を取得すると共に、第１ユーザが提示する項目に対する第２ユーザの画像情報及び／又は音声情報を取得し、第１ユーザが提示する項目と第２ユーザの画像情報及び／又は音声情報に基づいて判定された感情レベルとを対応付け、項目毎の感情レベルの変化に基づいて、各々の項目に対する第２ユーザの満足度を解析し、満足度が高い紹介先の候補を抽出して第２ユーザに提示するからである。
【図面の簡単な説明】
【００１７】
【図１】本発明の一実施例に係る紹介システムの構成を示す模式図である。
【図２】本発明の一実施例に係る紹介システムの他の構成を示す模式図である。
【図３】本発明の一実施例に係る紹介システムの他の構成を示す模式図である。
【図４】本発明の一実施例に係る紹介システムの他の構成を示す模式図である。
【図５】本発明の一実施例に係る管理装置の構成を示すブロック図である。
【図６】本発明の一実施例に係る解析装置の構成を示すブロック図である。
【図７】本発明の一実施例に係る紹介システムの概略動作を示す模式図である。
【図８】本発明の一実施例に係る解析装置の表示部に表示される出力画面の一例を示す図である。
【図９】本発明の一実施例に係る解析装置の動作を示すフローチャート図である。
【図１０】本発明の一実施例に係る解析装置の動作を示すフローチャート図である。
【図１１】本発明の一実施例に係る管理装置の動作を示すフローチャート図である。
【発明を実施するための形態】
【００１８】
背景技術で示したように、地域の診療所等と中核病院とで医療の役割分担を行うことが重要であり、診療所の患者を中核病院に紹介する場合（診療所→中核病院）や、中核病院の患者を診療所に紹介する場合（中核病院→診療所）には、主治医は患者に紹介する医療施設を選定する必要がある。
【００１９】
この紹介先の選定に際し、過去の紹介実績に基づいて紹介先を選定したり、患者の生活地に近くて治療可能な施設を選定したりする方法が提案されているが、診療所で精査や治療が行えないために、患者を中核病院に紹介する場合（診療所→中核病院）においては、対象疾患の治療が可能な複数の中核病院は病院ごとに医療の質に差が存在し、また、患者の価値観は多種多様であるため、ユーザが満足する紹介先を適切に紹介することが難しいという問題があった。
【００２０】
また、このような問題は、医師が患者に医療施設を紹介する場合に限らず、不動産業者が顧客に不動産を紹介する場合、証券マンが顧客に株式を紹介する場合、旅行業者が顧客に旅行プランを紹介する場合、保険外交員が顧客に保険を紹介する場合など、第１のユーザが第２のユーザに、任意の種類の物や情報を紹介する場合に対して同様に生じる。
【００２１】
そこで、本発明の一実施の形態では、第１ユーザ（例えば、医師）が第２ユーザ（例えば、患者）に紹介先を提示する際に、第１ユーザが提示する項目（話題）に対する第２ユーザの表情や仕草を撮影した画像情報や第２ユーザが発音した音声情報を取得し、第１ユーザが提示する項目と第２ユーザの画像情報や音声情報に基づいて判定された感情レベルとを対応付け、項目毎の第２ユーザの感情レベルの変化に基づいて、各々の項目に対する第２ユーザの満足度を解析（第２ユーザが満足している項目や不満に感じている項目を特定）し、満足度が高い紹介先の候補を抽出して第２ユーザに提示するようにする。以下、医師が患者に医療施設を紹介する場合を例にして、具体的に説明する。
【実施例】
【００２２】
上記した本発明の実施の形態についてさらに詳細に説明すべく、本発明の一実施例に係る解析装置、解析プログラム及び解析方法について、図１乃至図１１を参照して説明する。図１乃至図４は、本実施例の紹介システムの構成を示す模式図であり、図５は、本実施例の管理装置の構成を示すブロック図、図６は、本実施例の解析装置の構成を示すブロック図である。また、図７は、本実施例の紹介システムの概略動作を示す模式図であり、図８は、本実施例の解析装置の表示部に表示される紹介画面の一例を示す図である。また、図９及び図１０は、本実施例の解析装置の動作を示すフローチャート図であり、図１１は、本実施例の管理装置の動作を示すフローチャート図である。
【００２３】
図１に示すように、本実施例の紹介システム１０は、ＤＢ（Data Base）を参照して、ユーザの感情レベルを判定する管理装置２０と、ユーザの画像情報や音声情報を取得して管理装置２０に提供すると共に、管理装置２０から取得した項目毎の感情レベルを解析して、ユーザが満足する医療施設を紹介する解析装置３０などで構成される。これらはイーサネット（登録商標）、トークンリング、ＦＤＤＩ（Fiber-Distributed Data Interface）等の規格により定められるＬＡＮ（Local Area Network）やＷＡＮ（Wide Area Network）等の通信ネットワーク４０を介して接続されている。
【００２４】
なお、図１では、紹介システム１０を管理装置２０と解析装置３０とで構成したが、図２に示すように、紹介システム１０に、解析装置３０と通信可能な入力装置５０（後述する映像入力部や音声入力部を備える装置）を設け、入力装置５０が取得したユーザの画像情報や音声情報を有線、無線ＬＡＮ、Bluetooth（登録商標）やＮＦＣ（Near Field Communication）などの近距離無線通信などを用いて解析装置３０に送信する構成としてもよい。
【００２５】
また、図１及び図２では、紹介システム１０にＤＢを備える管理装置２０を設けたが、解析装置３０の記憶部にＤＢを備える場合は、図３に示すように、紹介システム１０を解析装置３０、又は、解析装置３０及び入力装置５０で構成してもよい。
【００２６】
また、図１乃至図３では、解析装置３０の前で第１ユーザ（本実施例では医師とする。）と第２ユーザ（本実施例では患者とする。）とが対面して会話を行う構成としているが、図４に示すように、第１ユーザ（医師）が使用する解析装置３０とは別に、第２ユーザ（患者）が使用するクライアント装置５１を設け、解析装置３０とクライアント装置５１とを通信ネットワーク４０で接続し、映像及び音声をリアルタイムで双方向通信できるようにしてもよい。以下、図１の構成を前提にして、各装置について詳細に説明する。
【００２７】
［管理装置］
管理装置２０は、解析装置３０から送信される情報とＤＢに保存された情報とを比較して第２ユーザの感情レベルを判定するコンピュータ装置やサーバなどであり、図５（ａ）に示すように、制御部２１、記憶部２２、ネットワークＩ／Ｆ部２３などで構成される。
【００２８】
制御部２１は、マイクロプロセッサ等により構成されるＣＰＵ（Central Processing Unit）とＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）などのメモリとで構成され、ＣＰＵは、ＲＯＭや記憶部２２に記憶した制御プログラムをＲＡＭに展開して実行することにより、管理装置２０全体の動作を制御する。
【００２９】
記憶部２２は、ＨＤＤ（Hard Disk Drive）やＳＳＤ（Solid State Drive）などで構成され、ＣＰＵが各部を制御するためのプログラム、ＤＢ（各感情レベル（満足〜不満）の代表的な画像情報や音声情報）などを記憶する。
【００３０】
ネットワークＩ／Ｆ部２３は、ＮＩＣ（Network Interface Card）やモデムなどで構成され、管理装置２０を通信ネットワーク４０に接続し、解析装置３０からの画像情報や音声情報を受信すると共に、解析装置３０に感情レベルの判定結果を送信する。
【００３１】
また、上記制御部２１は、図５（ｂ）に示すように、レベル判定部２１ａなどとして機能する。レベル判定部２１ａは、解析装置３０から、第２ユーザの顔（ジェスチャも判断要素にする場合は上半身）を撮影した画像情報を受信したら、受信した顔又は上半身の画像情報と記憶部２２のＤＢに保存されている各感情レベルの顔又は上半身の代表的な画像情報とを比較し、公知のパターン認識技術を利用して、例えば、眉毛や目尻、口元の角度、目や口の開き具合、顔のうつむき具合などの一致率を計算することによって、受信した画像情報がどの感情レベルに属するかを判定し、判定結果（感情レベル）を解析装置３０に送信する。また、解析装置３０から、第２ユーザが発音した音声情報を受信したら、受信した音声情報と記憶部２２のＤＢに保存されている各感情レベルの代表的な音声情報とを比較し、公知のパターン認識技術を利用して、音声の強弱、高低、抑揚、会話のスピード、会話の間合いなどの一致率を計算することによって、受信した音声情報がどの感情レベルに属するかを判定し、判定結果（感情レベル）を解析装置３０に送信する。なお、感情レベルの判定は画像情報又は音声情報の一方に基づいて行ってもよいし、画像情報及び音声情報の双方に基づいて行ってもよい。
【００３２】
［解析装置］
解析装置３０は、第１ユーザが第２ユーザと対面しながら使用するパーソナルコンピュータ、タブレット端末などであり、図６（ａ）に示すように、制御部３１、記憶部３２、ネットワークＩ／Ｆ部３３、映像入力部３４、音声入力部３５、表示部３６、操作部３７などで構成される。
【００３３】
制御部３１は、マイクロプロセッサ等により構成されるＣＰＵとＲＯＭやＲＡＭなどのメモリとで構成され、ＣＰＵは、ＲＯＭや記憶部３２に記憶した制御プログラムをＲＡＭに展開して実行することにより、解析装置３０全体の動作を制御する。
【００３４】
記憶部３２は、ＨＤＤやＳＳＤなどで構成され、ＣＰＵが各部を制御するためのプログラム、自装置の処理機能に関する情報、映像入力部３４が取得した画像情報、音声入力部３５が取得した音声情報、医療施設に関する情報、必要に応じて、ＤＢ（各感情のレベル（満足〜不満）の代表的な画像情報や音声情報）などを記憶する。
【００３５】
ネットワークＩ／Ｆ部３３は、ＮＩＣやモデムなどで構成され、解析装置３０を通信ネットワーク４０に接続し、管理装置２０に第２ユーザの画像情報及び／又は音声情報などを送信し、管理装置２０から感情レベルの判定結果を受信する。なお、図２に示すように、入力装置５０が別に配置される場合は、ネットワークＩ／Ｆ部３３は、更に、有線、無線ＬＡＮ、Bluetooth（登録商標）やＮＦＣなどの近距離無線通信により、入力装置５０から第２ユーザの画像情報及び／又は音声情報などを受信する。
【００３６】
映像入力部３４は、ＣＣＤ（Charge Coupled Devices）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）カメラなどで構成され、一定間隔（例えば、１秒毎）又は連続して、第２ユーザ（患者）の顔又は上半身を撮影して、画像情報（静止画又は動画）を取得する。
【００３７】
音声入力部３５は、マイクなどで構成され、第２ユーザ（患者）の音声を録音して、音声情報を取得する。なお、第１ユーザ（医師）の音声に基づいて項目を特定する場合は、第１ユーザ（医師）及び第２ユーザ（患者）の音声情報を取得する。その際、第１ユーザの音声と第２ユーザの音声とは、例えば、音声の強弱や高低などに基づいて判別してもよいし、指向性を有する音声入力部３５を２つ設け、各々の音声入力部３５を第１ユーザと第２ユーザとに向けて設置することにより、第１ユーザの音声と第２ユーザの音声とを判別できるようにしてもよい。
【００３８】
表示部３６は、液晶表示装置（ＬＣＤ：Liquid Crystal Display）や有機ＥＬ（electroluminescence）表示装置などで構成され、第１ユーザが第２ユーザに医療施設を紹介する紹介画面などを表示する。
【００３９】
操作部３７は、マウスやキーボード、表示部３６上に形成された電極が格子状に配列されたタッチセンサなどで構成され、本実施例の解析に関する各種操作や上記の紹介画面に対する各種操作を可能にする。
【００４０】
また、上記制御部３１は、図６（ｂ）に示すように、計時部３１ａ、情報取得部３１ｂ、解析部３１ｃ、出力部３１ｄなどとしても機能する。
【００４１】
計時部３１ａは、ＣＰＵのクロックなどに基づいて時間を計測する。具体的には、映像入力部３４が画像情報を取得した時刻、音声入力部３５が音声情報を取得した時刻などを計測する。
【００４２】
情報取得部３１ｂは、映像入力部３４及び／又は音声入力部３５から、第１ユーザ（医師）が提示する項目に対する第２ユーザ（患者）の反応を表す、第２ユーザの画像情報及び／又は音声情報を取得する。具体的には、予め定めた時間毎（例えば、１秒毎）に、映像入力部３４から第２ユーザ（患者）の顔又は上半身を撮影した画像情報を取得すると共に、音声入力部３５から第２ユーザ（患者）の音声を一定時間録音した音声情報（及び、必要に応じて第１ユーザ（医師）の音声を一定時間録音した音声情報）を取得し、第２ユーザ（患者）の画像情報及び／又は音声情報を管理装置２０に送信して感情レベルの判定を指示する。その際、管理装置２０での感情レベルの判定が容易になるように、情報取得部３１ｂは、必要に応じて、公知の手法を用いて画像情報及び／又は音声情報をパターン化し、パターン化した画像情報（例えば、眉毛や目尻、口元の角度、目や口の開き具合、顔のうつむき具合などを識別可能にした画像情報）及び／又はパターン化した音声情報（例えば、声の強弱や高低、抑揚、会話のスピード、会話の間合いなどを識別可能にした音声情報）を管理装置２０に送信してもよい。
【００４３】
解析部３１ｃは、管理装置２０から感情レベルの判定結果を受信し、各々の画像情報及び／又は音声情報に対応する感情レベルと計時部３１ａが計測した時刻とを関連付ける。また、公知の音声認識技術を利用して、第１ユーザ（医師）の音声情報から第１ユーザが提示する項目を特定し、特定した項目と計時部３１ａが計測した時刻とを関連付ける。そして、計時部３１ａが計測した時刻に基づいて、管理装置２０から受信した感情レベルと第１ユーザ（医師）の音声情報から特定した項目とを対応付け、どの項目に対して第２ユーザ（患者）の感情がどのように変化したかに基づいて、各々の項目に対する第２ユーザ（患者）の満足度を解析し、第２ユーザが満足している（感情レベルが高い）項目や第２ユーザが不満を感じている（感情レベルが低い）項目を特定する。
【００４４】
なお、第１ユーザが提示する項目は、例えば、第２ユーザの対象疾患の治療成績に関する項目、第２ユーザの対象疾患の治療件数又は処置件数に関する項目、紹介先医師の性別に関する項目などであり、上記治療成績は、例えば、第２ユーザの対象疾患を手術した後の平均入院日数、第２ユーザの対象疾患の治療の成功率、第２ユーザの対象疾患を手術した後の所定の年数後の生存率などである。また、解析装置３０の記憶部３２にＤＢを備える場合は、解析部３１ｃをレベル判定部として機能させ、情報取得部３１ｂが取得した画像情報及び／又は音声情報と、ＤＢに保存されている各感情レベルの代表的な画像情報及び／又は音声情報とを比較し、公知のパターン認識技術を利用して感情レベルを判定してもよい。また、情報取得部３１ｂが取得した画像情報及び／又は音声情報の時間的な変化（初期状態からの変化）に基づいて感情レベルを相対的に判定してもよい。
【００４５】
出力部３１ｄは、解析部３１ｃの解析結果に基づいて、記憶部３２に記憶した医療施設の中から第２ユーザ（患者）の満足度が高い医療施設の候補を抽出し、抽出した候補を選択可能にする紹介画面を表示部３６に表示させる。具体的には、第２ユーザ（患者）が満足している（感情のレベルが高い）項目に基づいて、医療施設の候補を抽出したり、第２ユーザ（患者）が不満を感じている（感情のレベルが低い）項目に基づいて、抽出した候補を除外したりする。そして、１又は複数の医療施設の候補を選択可能に記載した紹介画面を作成して表示部３６に表示させる。
【００４６】
上記計時部３１ａ、情報取得部３１ｂ、解析部３１ｃ、出力部３１ｄはハードウェアとして構成してもよいし、制御部３１を、計時部３１ａ、情報取得部３１ｂ、解析部３１ｃ、出力部３１ｄとして機能させる解析プログラムとして構成し、当該解析プログラムを制御部３１のＣＰＵに実行させるようにしてもよい。
【００４７】
なお、図１乃至図６は、本実施例の紹介システム１０、管理装置２０、解析装置３０の一例であり、その構成や制御は適宜変更可能である。例えば、上記では表示部３６に紹介画面を表示させて紹介先を通知する構成としたが、紹介先を音声で通知する構成としてもよく、その場合は、解析装置３０にスピーカなどの音声出力部を設ければよい。
【００４８】
以下、上記構成の紹介システムの概略動作について、図７を参照して説明する。ここでは、一定間隔（ｔ０、ｔ１、ｔ２、…）で、第２ユーザの表情や仕草を撮影する（時刻ｔ０の時：画像０、時刻ｔ１の時：画像１、時刻ｔ２の時：画像２、…）。そして、会話の中で、第２ユーザの感情レベルの変化を常時測定する。
【００４９】
まず、図７（ａ）に示すように、時刻ｔ０で撮影した画像０（第２ユーザの表情）を管理装置２０に送信し、画像０がどの感情レベルに属するかを管理装置２０（ＤＢ）に問い合わせる。ＤＢは、受信した画像０（第２ユーザの表情）の特徴と、予め保存している各感情レベル（レベル２〜レベル−２）の画像群の特徴と、を比較することで、受信した画像０（第２ユーザの表情）がどの感情レベルに属するかを公知のパターン認識技術を利用して判定し、その判定結果を解析装置３０に送信する。ここでは、時刻ｔ０での画像０はレベル０と判定される。
【００５０】
そして、図７（ｂ）に示すように、上記処理を一定時間毎に繰り返し、管理装置２０から受信した感情レベルを第１ユーザ（医師）の音声情報から特定した項目に対応付けることで、どの会話の時に、第２ユーザ（患者）の感情がどのように変化したのかを読み取ることが可能となる。ここでは、第２ユーザ（患者）は、転院に際して、転院先の病院の候補における治療成績の話の時に感情レベルが上昇していることから、転院先の治療成績に満足していると判断することができる。また、転院先の病院の候補における通院時間の話の時に感情レベルが低下していることから、通院時間に少し不満を感じていると判断することができる。また、転院先の病院の候補における紹介先の医師の話の時は感情レベルが通常レベルであることから、医師の性別（男性、女性）の観点を重視していないと判断することができる。
【００５１】
なお、上記の一定時間は、解析装置３０又は入力装置５０の設定画面（図示せず）にて調整が可能である。また、ここでは、第２ユーザ（患者）の画像情報に基づいて感情レベルを判定しているが、画像情報に代えて、若しくは画像情報に加えて、音声情報に基づいて感情レベルを判定しても良い。
【００５２】
図８は、上記の解析結果に基づいて病院を検索した結果を示す紹介画面６０の一例である。解析装置３０では、第２ユーザ（患者）の表情や仕草（画像情報）、会話（音声情報）を解析した結果、治療成績の良さや対象疾患の処置件数の多さを、病院選びの重要な観点としていることが分かったので、解析装置３０の紹介画面６０には、治療成績が良い病院の観点と、対象疾患の処置件数の多い病院の観点で、いくつか（ここでは、それぞれ２病院）候補を抽出して表示する。なお、それぞれの抽出件数は、解析装置３０側で任意に設定可能である。
【００５３】
このように、解析装置３０は、第２ユーザ（患者）の画像情報や音声情報を管理装置２０に送信して感情レベルの判定を指示し、管理装置２０がパターン認識技術を利用して判定した感情レベルを受信し、受信した感情レベルを第１ユーザ（医師）の音声情報に基づいて特定した項目に対応付けることにより、どの項目に満足しているか不満を感じているかを認識することができるため、第２ユーザ（患者）が所望する候補（病院）を適切に紹介することができる。
【００５４】
なお、上記では、解析装置３０で取得した第２ユーザ（患者）の画像情報や音声情報をそのまま管理装置２０に送信したが、画像情報の構成（第２ユーザのどの部分をどの角度で撮影した画像であるかなど）が変化すると、管理装置２０でのパターン認識が困難になる恐れがある。そのような場合は、解析装置３０側で画像情報から特徴部位（例えば、顔の輪郭部分、目や眉毛、唇など）を抽出し、特徴部位の情報を管理装置２０に送信するようにしてもよいし、パターン化した画像情報（例えば、眉毛や目尻、口元の角度、目や口の開き具合などを識別可能にした画像情報）を管理装置２０に送信するようにしてもよい。また、音声情報の構成（第２ユーザの音声の中に他のユーザの音声が混在しているかなど）が変化すると、管理装置２０でのパターン認識が困難になる恐れがある。そのような場合は、解析装置３０側で第２ユーザの画像情報と音声情報とを比較して、第２ユーザの画像情報を参照して第２のユーザの音声のみを抽出し、抽出した音声情報を管理装置２０に送信するようにしてもよく、また、管理装置２０でのパターン認識を容易にするために、パターン化した音声情報（例えば、声の強弱や高低、抑揚などを識別可能にした音声情報）を管理装置２０に送信するようにしてもよい。
【００５５】
また、第２ユーザの要望抽出において、第２ユーザの顕在意識に基づいて抽出するのではなく、第２ユーザ自身も知らない重要項目の面から、満足度が高そうな項目を抽出できるようにしてもよい。
【００５６】
以下、解析装置３０の動作について、図９及び図１０を参照して説明する。解析装置３０のＣＰＵは、ＲＯＭ又は記憶部３２に記憶した解析プログラムをＲＡＭに展開して実行することにより、図９及び図１０のフローチャート図に示す各ステップの処理を実行する。なお、以下では、解析装置３０に映像入力部３４及び音声入力部３５を備えるものとして説明する。
【００５７】
［全体処理］
図９に示すように、まず、解析装置３０の制御部３１は、解析機能の使用開始が指示されたかを判断し（Ｓ１０１）、解析機能の使用開始が指示されたら（Ｓ１０１のＹｅｓ）、解析処理を実行する（Ｓ１０２）。
【００５８】
図１０はこのステップの詳細を示しており、まず、制御部３１（計時部３１ａ）は、現在の時刻を取得し（Ｓ２０１）、予め定めた一定時間が経過したら（Ｓ２０２のＹｅｓ）、制御部３１（情報取得部３１ｂ）は、映像入力部３４から第２ユーザ（患者）の画像情報を取得し（Ｓ２０３）、音声入力部３５から第１ユーザ（医師）及び第２ユーザ（患者）の音声情報を取得する（Ｓ２０４）。
【００５９】
次に、制御部３１（情報取得部３１ｂ）は、管理装置２０に、取得した第２ユーザ（患者）の画像情報及び音声情報を送信して、管理装置２０に第２ユーザ（患者）の感情レベルを問い合わせる（Ｓ２０５）。
【００６０】
次に、制御部３１（解析部３１ｃ）は、管理装置２０から感情レベルの判定結果を受信したら（Ｓ２０６のＹｅｓ）、管理装置２０から受信した感情レベルと計時部３１ａが測定した現在時刻とを関連付けて記憶部３２などに記憶する（Ｓ２０７）。また、制御部３１（解析部３１ｃ）は、第１ユーザの音声情報を解析して項目を特定し、特定した項目と計時部３１ａが測定した現在時刻とを関連付けて記憶部３２などに記憶する（Ｓ２０８）。なお、第１ユーザの操作部３７の操作に応じて、各項目が表示部３６に順に表示されるようにしてもよく、その場合は、Ｓ２０４で第１ユーザ（医師）の音声情報を取得する必要はなく、Ｓ２０８では、項目と操作時刻とを関連付ければよい。
【００６１】
そして、制御部３１（解析部３１ｃ）は、解析機能の終了操作が行われたかを判断し（Ｓ２０９）、終了操作が行われていない場合は、Ｓ２０１に戻って同様の処理を繰り返す。一方、終了操作が行われたら（Ｓ２０９のＹｅｓ）、制御部３１（解析部３１ｃ）は、計時部３１ａが測定した時刻に基づいて、第１ユーザの音声情報から特定した項目と管理装置２０から受信した感情レベルとを対応付け（Ｓ２１０）、項目毎の感情レベルの変化から、第２ユーザが満足している項目及び不満に感じている項目を特定する（Ｓ２１１）。
【００６２】
図９に戻って、制御部３１（出力部３１ｄ）は、紹介機能の使用開始が指示されたかを判断し（Ｓ１０３）、紹介機能の使用開始が指示されていない場合は（Ｓ１０３のＮｏ）、Ｓ１０２に戻って解析処理を継続する。
【００６３】
紹介機能の使用開始が指示されたら（Ｓ１０３のＹｅｓ）、制御部３１（出力部３１ｄ）は、記憶部３２に記憶された医療施設に関する情報を参照して、現在の施設でユーザの要望が満たされない項目を抽出し（Ｓ１０４）、抽出した項目を満たすことが可能な別の施設の有無を確認する（Ｓ１０５）。
【００６４】
確認の結果、抽出した項目を満たすことが可能な別の施設が存在する場合は（Ｓ１０６のＹｅｓ）、制御部３１（出力部３１ｄ）は、表示部３６に現在の施設よりも第２ユーザにとって良い施設が存在すること、その施設の優れた箇所を案内表示する（Ｓ１０７）。一方、抽出した項目を満たすことが可能な別の施設が存在しない場合は（Ｓ１０６のＮｏ）、制御部３１（出力部３１ｄ）は、表示部３６に現在の施設よりもユーザにとって良い施設が存在しないことを案内表示する（Ｓ１０８）。
【００６５】
次に、管理装置２０の動作（感情レベルの判定処理）について、図１１を参照して説明する。
【００６６】
管理装置２０の制御部２１は、解析装置３０から受信した第２ユーザの画像情報、音声情報を記憶部２２（ＤＢ）に保存する（Ｓ３０１）。
【００６７】
次に、制御部２１（レベル判定部２１ａ）は、受信した第２ユーザの画像情報、音声情報と、ＤＢに予め保存された画像情報、音声情報とを比較し、公知のパターン認識技術を利用して、第２ユーザの感情がどのレベルに属するかを判定する（Ｓ３０２）。そして、判定結果（感情レベル）を解析装置３０に送信する（Ｓ３０３）。
【００６８】
なお、本発明は、上記実施例の記載に限定されるものではなく、本発明の趣旨を逸脱しない限りにおいて、その構成や制御は適宜変更可能である。
【００６９】
例えば、上記実施例では、ＤＢに保存された画像情報や音声情報と第２ユーザ（患者）の画像情報や音声情報とを比較して感情レベルを判定する場合について記載したが、第２ユーザ（患者）の画像情報や音声情報の初期状態からの変化に基づいて、感情レベルを相対的に判定してもよい。
【００７０】
また、上記実施例では、第２ユーザ（患者）の画像情報や音声情報を取得する場合について記載したが、取得する情報は、第１ユーザ（医師）が提示する項目に対する第２ユーザ（患者）の反応が認識できる情報であればよく、例えば、体温や脈拍、発汗などの生体情報を取得する場合に対して、本発明の解析方法を同様に適用することができる。
【００７１】
また、上記実施例では、第１ユーザ（医師）の音声情報を解析して項目を特定したが、第１ユーザ（医師）の操作部３７の操作（例えば、マウスのクリック操作）に応じて、各項目が表示部３６に順に表示されるようにしてもよく、その場合は、第１ユーザ（医師）の音声情報を取得する必要はなく、項目と操作時刻とを関連付ければよい。
【００７２】
また、上記実施例では、患者の画像情報や音声情報に基づいて医師が患者に医療施設を紹介する場合について記載したが、第１のユーザが第２のユーザに任意の種類の物や情報を紹介する場合に対して、本発明の解析方法を同様に適用することができる。
【産業上の利用可能性】
【００７３】
本発明は、ユーザの画像情報や音声情報に基づいてユーザが満足する紹介先を提示する解析装置、当該解析装置で動作する解析プログラム、当該解析プログラムを記録した記録媒体及び当該解析装置における解析方法に利用可能である。
【符号の説明】
【００７４】
１０  紹介システム
２０  管理装置
２１  制御部
２１ａ  レベル判定部
２２  記憶部
２３  ネットワークＩ／Ｆ部
３０  解析装置
３１  制御部
３１ａ  計時部
３１ｂ  情報取得部
３１ｃ  解析部
３１ｄ  出力部
３２  記憶部
３３  ネットワークＩ／Ｆ部
３４  映像入力部
３５  音声入力部
３６  表示部
３７  操作部
４０  通信ネットワーク
５０  入力装置
５１  クライアント装置
６０  紹介画面
【図１】
2018195164.tif 000003
【図２】
2018195164.tif 000004
【図３】
2018195164.tif 000005
【図４】
2018195164.tif 000006
【図５】
2018195164.tif 000007
【図６】
2018195164.tif 000008
【図７】
2018195164.tif 000009
【図８】
2018195164.tif 000010
【図９】
2018195164.tif 000011
【図１０】
2018195164.tif 000012
【図１１】
2018195164.tif 000013