(57)【要約】【課題】各種情報の通信中に生じた通信者同士の感情変化を自動的に且つリアルタイムに相互伝達することが可能な情報交信用端末を提供する。【解決手段】各種情報を交信する情報交信システムに適用可能な情報交信用端末(2,4,6,8,10,12)であり、情報交信元の情報交信用端末は情報交信先に各種情報を送信する送信手段１４を備え、情報交信先の情報交信端末は情報交信元からの各種情報を受信する受信手段１６を備える。送信手段は、各種情報を情報交信先に送信する際の情報交信元の感情変化を検出する検出機構１８、感情変化に基づき情報交信元の喜怒哀楽の程度を判定する判定機構２０、判定結果を情報交信先に送信する送信機構２２を備え、受信手段には、情報交信元からの感情変化を受信する受信機構２４、その感情変化に基づき情報交信元の感情変化における喜怒哀楽の程度を報知する報知機構２６を備える。【選択図】    図１
2005072743.tif 000002
【特許請求の範囲】
【請求項１】
情報交信元と情報交信先との間で各種情報を交信する際に、情報交信元の感情変化を情報交信先に送信する送信手段を備えた情報交信用端末であって、
前記情報交信元の情報交信用端末の送信手段には、少なくとも、
前記各種情報を所定の情報交信先に送信する際に生じた情報交信元の感情変化を検出する検出機構と、
前記検出機構で検出された感情変化に基づいて、当該情報交信元の喜怒哀楽の程度を判定する判定機構と、
前記判定機構で判定された結果としての感情変化を所定の情報交信先に送信する送信機構と、が設けられていることを特徴とする情報交信用端末。
【請求項２】
情報交信元と情報交信先との間で各種情報を交信する際に、情報交信元の感情変化を情報交信先で受信する受信手段を備えた情報交信用端末であって、
前記情報交信先の情報交信用端末の受信手段には、少なくとも、
前記情報交信元から送信された感情変化を受信する受信機構と、
前記受信機構で受信された前記感情変化に基づいて、前記情報交信元の感情変化における喜怒哀楽の程度を報知する報知機構と、が設けられていることを特徴とする情報交信用端末。
【請求項３】
情報交信元と情報交信先との間で各種情報を交信する際に、情報交信先に感情変化を送信する送信手段と、情報交信元からの前記感情変化を受信する受信手段とを備えた情報交信用端末であって、
前記送信手段には、少なくとも、
前記各種情報を所定の情報交信先に送信する際に生じた情報交信元の感情変化を検出する検出機構と、
前記検出機構で検出された感情変化に基づいて、当該情報交信元の喜怒哀楽の程度を判定する判定機構と、
前記判定機構で判定された判定結果としての感情変化を所定の情報交信先に送信する送信機構と、が設けられていると共に、
前記受信手段には、少なくとも、
前記情報交信元から送信された前記判定結果としての感情変化を受信する受信機構と、
前記受信機構で受信された前記判定結果としての感情変化に基づいて、前記情報交信元の感情変化における喜怒哀楽の程度を報知する報知機構と、が設けられていることを特徴とする情報交信用端末。
【請求項４】
前記判定機構は、少なくとも、
当該情報交信元の少なくとも喜怒哀楽の程度を予め所定の変化パターンとして登録する登録部と、
前記各種情報を所定の情報交信先に送信する際に生じた当該情報交信元の感情変化が前記登録部に登録された変化パターンのいずれに該当するかを判定する判定部と、
前記判定部で判定された変化パターンに該当する喜怒哀楽の程度を判定結果として出力する出力部とを備えていることを特徴とする請求項１又は３に記載の情報交信用端末。
【請求項５】
前記報知機構は、前記情報交信元の感情変化における喜怒哀楽の程度を当該端末上に画像表示することを特徴とする請求項２又は３に記載の情報交信用端末。
【請求項６】
前記画像表示には、少なくとも、文字、動画、静止画、発光による表示が含まれることを特徴とする請求項５に記載の情報交信用端末。
【請求項７】
前記報知機構は、前記情報交信元の感情変化における喜怒哀楽の程度を当該端末上に音声報知することを特徴とする請求項２又は３に記載の情報交信用端末。
【請求項８】
前記報知機構は、前記情報交信元の感情変化における喜怒哀楽の程度を当該端末上に振動報知することを特徴とする請求項２又は３に記載の情報交信用端末。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、通信機器（例えば、携帯電話やパソコン等）による各種情報の通信中に生じた通信者同士の感情変化（例えば、動揺、興奮、歓喜、落胆、憤慨などの感情の変化）を自動的に且つリアルタイムに相互交信することが可能な情報交信用端末に関する。
【背景技術】
【０００２】
従来、各種情報の通信中に感情変化などを送信するための情報交信用端末を用いたシステムが知られており、例えば特許文献１に示す交信システムでは、所定の通信機器による通話中に受信者と送信者とが、自己の通信機器の感情ボタン部を選択的に押す（ボタン操作する）ことにより、現在の感情を相手方に送信できるようになっている。この場合、ボタンを押した回数に応じて、相手方に送信される感情の音量レベルや怒りの度合いを変化させている。更に、相手方の通信機器のモニタ上に現在の感情を表した画像を表示させている。
【０００３】
しかし、従来の情報交信用端末を用いた交信システムでは、例えば通話中に通話者が自らボタン操作を行わなければならないため、通話者は常にボタン操作を気にして通話しなければならず、煩に耐えないだけで無く、通話に集中できなかった。また、ボタン操作で選択できる感情表現は限りがあるため、微妙な感情変化を相手方に送ることができなかった。更に、ボタン操作を忘れた場合（又は、ボタン操作が遅れた場合）には、通話中に時々刻々と変化する感情変化をリアルタイムに相手に送ることができないため、円滑なコミュニケーションを図ることが困難であった。
【特許文献１】特開２００２−３７４３６６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
本発明は、このような問題を解決するためになされており、その目的は、各種情報の通信中に生じた通信者同士の感情変化を自動的に且つリアルタイムに相互交信することが可能な情報交信用端末を提供することにある。
【課題を解決するための手段】
【０００５】
このような目的を達成するために、本発明は、情報交信元と情報交信先との間で各種情報を交信する際に、情報交信元の感情変化を情報交信先に送信する送信手段１４を備えた情報交信用端末(例えば、2,4,6,8,10,12)であって、情報交信元の情報交信用端末の送信手段には、少なくとも、各種情報を所定の情報交信先に送信する際に生じた情報交信元の感情変化を検出する検出機構１８と、検出機構で検出された感情変化に基づいて、当該情報交信元の喜怒哀楽の程度を判定する判定機構２０と、判定機構で判定された結果としての感情変化を所定の情報交信先に送信する送信機構２２とが設けられている。
また、本発明は、情報交信元と情報交信先との間で各種情報を交信する際に、情報交信元の感情変化を情報交信先で受信する受信手段１６を備えた情報交信用端末(例えば、2,4,6,8,10,12)であって、情報交信先の情報交信用端末の受信手段には、少なくとも、情報交信元から送信された感情変化を受信する受信機構２４と、受信機構で受信された感情変化に基づいて、情報交信元の感情変化における喜怒哀楽の程度を報知する報知機構２６とが設けられている。
更に、本発明は、情報交信元と情報交信先との間で各種情報を交信する際に、情報交信先に感情変化を送信する送信手段１４と、情報交信元からの前記感情変化を受信する受信手段１６とを備えた情報交信用端末(例えば、2,4,6,8,10,12)であって、送信手段には、少なくとも、各種情報を所定の情報交信先に送信する際に生じた情報交信元の感情変化を検出する検出機構１８と、検出機構で検出された感情変化に基づいて、当該情報交信元の喜怒哀楽の程度を判定する判定機構２０と、判定機構で判定された判定結果としての感情変化を所定の情報交信先に送信する送信機構２２とが設けられていると共に、受信手段には、少なくとも、情報交信元から送信された判定結果としての感情変化を受信する受信機構２４と、受信機構で受信された判定結果としての感情変化に基づいて、情報交信元の感情変化における喜怒哀楽の程度を報知する報知機構２６とが設けられている。
また、判定機構は、少なくとも、当該情報交信元の少なくとも喜怒哀楽の程度を予め所定の変化パターンとして登録する登録部２０ａと、各種情報を所定の情報交信先に送信する際に生じた当該情報交信元の感情変化が登録部に登録された変化パターンのいずれに該当するかを判定する判定部２０ｂと、判定部で判定された変化パターンに該当する喜怒哀楽の程度を判定結果として出力する出力部２０ｃとを備えている。
更に、報知機構は、判定機構で判定された判定結果に基づいて、情報交信元の感情変化における喜怒哀楽の程度を当該端末上に画像表示（少なくとも、文字、動画、静止画、発光による表示）、音声報知、振動報知することができるようになっている。
【発明の効果】
【０００６】
本発明によれば、各種情報の通信中に生じた通信者同士の感情変化を自動的に且つリアルタイムに相互伝達することが可能な情報交信用端末を実現することができる。
【発明を実施するための最良の形態】
【０００７】
本発明の情報交信用端末は、情報交信元と情報交信先との間で各種情報を交信（無線交信、有線交信）するために構築された情報交信システムに適用することが可能であり、以下の実施の形態では、その一例として、かかる情報交信システムに適用した情報交信用端末について説明する。
図１(ａ),(ｂ)には、情報交信システムに適用した情報交信用端末の一実施の形態が示されており、本実施の形態の情報交信用端末としては、例えば、固定電話２、モバイルＰＣ(Personal Computer)４、ＰＤＡ(Personal Digital Assistants)６、携帯電話８、ＰＨＳ(Personal Handyphone System)１０、デスクトップ形パソコン１２等を想定することができるが、これに限定されることは無く、各種情報を交信することができれば、これ以外の通信機器（例えば、トランシーバ）も本実施の形態の情報交信用端末に含まれることは言うまでも無い。
【０００８】
複数の情報交信用端末2,4,6,8,10,12はそれぞれ、少なくとも、情報交信先に各種情報を送信する送信手段１４と、情報交信元からの各種情報を受信する受信手段１６とを備えている。
この場合、各種情報には、例えば、文字情報、画像(動画、静止画)情報、音声情報などが含まれる。また、情報交信元及び情報交信先とは、いずれも、複数の情報交信用端末2,4,6,8,10,12を操作するユーザやオペレータ等を想定することができるが、本実施の形態では、各種情報を発信する側のユーザやオペレータ等を情報交信元、各種情報を受信する側のユーザやオペレータ等を情報交信先と呼ぶこととする。
【０００９】
送信手段１４には、少なくとも、各種情報を所定の情報交信先に送信する際に生じた情報交信元の感情変化を検出する検出機構１８と、検出機構１８で検出された感情変化に基づいて、当該情報交信元の少なくとも喜怒哀楽の程度を判定する判定機構２０と、判定機構２０で判定された判定結果を所定の情報交信先に送信する送信機構２２とが設けられている。
また、受信手段１６には、少なくとも、情報交信元から送信された判定結果を受信する受信機構２４と、受信機構２４で受信された判定結果に基づいて、情報交信元の感情変化における喜怒哀楽の程度を報知する報知機構２６とが設けられている。
【００１０】
ここで、感情変化とは、例えば、喜び、怒り、哀しみ(悲しみ)、楽しみ等の喜怒哀楽のほか、動揺、嫌悪、感嘆、不快、愉快、困惑など、人の心の動き(気分や気持)の変化を総称した概念である。また、喜怒哀楽の程度とは、上述したような人の心の動き(気分や気持)の変化の高低や強弱などを意味する。
このような感情変化(人の心の動き)は、人の外面的には表れないが、人の内面的には、例えば、発汗量の変化、血圧の変化、脈拍の変化、体温の変化、音声の変化などとなって表れる場合が多い。従って、これらの変化を検出することによって、その人(本実施の形態では、情報交信元)の現在の感情変化(心の動き)をリアルタイムに把握することができる。
【００１１】
そこで、本実施の形態において、送信手段１４の検出機構１８には、図１(ｃ)に示すように、各種情報を所定の情報交信先に送信する際に生じた情報交信元の感情変化に伴う発汗量の変化を検出する発汗量検出センサ１８ａ、感情変化に伴う血圧の変化を検出する血圧検出センサ１８ｂ、感情変化に伴う脈拍の変化を検出する脈拍検出センサ１８ｃ、感情変化に伴う体温の変化を検出する体温検出センサ１８ｄ、感情変化に伴う音声の変化を検出する音声検出センサ１８ｅが設けられている。
【００１２】
発汗量検出センサ１８ａは、市販のセンサを利用することが可能であり、人間の身体を抵抗として、その電流の流れ具合を測定することで、発汗量を検出できるようになっている。例えば、汗をかくと抵抗値が下がって電流の流量が多くなり、逆に汗が乾くと抵抗値が上がって電流の流量が少なくなる。この場合、電流の流量を測定することによって、その人の現在の発汗量を検出することが可能となる。
【００１３】
血圧検出センサ１８ｂについては、心臓の収縮によってできる血管の振動変化を圧力センサーを使って測定する装置が既に開発されており、かかる装置構成を利用すれば良い。脈拍検出センサ１８ｃについては、既に市販されている各種の指式脈拍計の構成を利用すれば良い。体温検出センサ１８ｄについては、既に市販されている各種の体温計の構成を利用すれば良い。音声検出センサ１８ｅについては、既に市販されている各種の音声認識装置の構成を利用すれば良い。
【００１４】
発汗量、血圧、脈拍、体温、音声などは、自律神経の活動に応じて変化するが、その変化状態は個人差がある。そこで、端末2,4,6,8,10,12を主に利用するユーザやオペレータ等の自律神経の活動に伴う感情変化を所定の変化パターンとして予め登録しておくことが好ましい。この場合、感情変化に伴って変化する発汗量、血圧、脈拍、体温、音声の変化パターンを予め登録すれば良い。例えば、喜んだときの変化パターン、怒ったときの変化パターン、哀しんだときの変化パターン、楽しんだときの変化パターンを登録することになるが、更に、このような喜怒哀楽の程度も感情変化の高低や強弱（発汗量の大小、血圧の高低、脈拍の強弱、体温の高低、音声の強弱など）により微妙に変化するため、可能な限り細分化した変化パターンを登録することが好ましい。
【００１５】
そうすれば、交信中に例えば発汗量が微妙に変化しても、その変化が例えば若干怒った感情変化なのか、かなり怒った感情変化なのか、或いは、憤慨した感情変化なのかをリアルタイムに且つ正確に検出することが可能となる。即ち、音声を例にすると、受け手が「了解しました」を発した際に、相手の意見や指示に喜んで同意する際の「了解しました」と、相手の意見や指示に憤慨している際の「了解しました」のいずれの状態なのかが、予め登録された変化パターンと比較して判定され、憤慨していれると判定されれば、それに応じた音声信号を相手の端末に送信することになる。これにより相手は、受け手が現在憤慨していることをリアルタイムに且つ正確に把握することができるため、それ以降のコミュニケーションをどのようにとれば良いのかを考慮することが可能となる。
【００１６】
このような検出機構１８は、情報交信用端末2,4,6,8,10,12を操作するユーザの感情変化(心の動き)を検出し易い箇所に配置することが好ましい。例えば図２(ａ)に示すような携帯電話８では、ユーザが把持する部分(例えば、交信中に情報交信元の手や顔に接する部分)Ｐに、検出機構１８を配置すれば良い。
この場合、検出機構１８を配置する情報交信用端末2,4,6,8,10,12やその他の通信機器によっては、発汗量、血圧、脈拍、体温、音声等のいずれかを検出できない場合もある。例えば、発汗量、血圧、脈拍、体温のいずれかの変化は検出することができるが、音声の変化は検出することができない場合も考えられる。
例えば図４に示すようなパソコン用マウス２８を想定すると、パソコン用マウス２８には、各種情報の交信中にオペレータの手や指が接しているため、発汗量、血圧、脈拍、体温のいずれかの変化を正確に検出することができる。しかし、オペレータから発せられた音声の変化をパソコン用マウス２８（検出機構１８の音声検出センサ１８ｅ）で雑音の影響を受けること無く正確に検出することは困難である。
【００１７】
本実施の形態では、このような状況を考慮して、検出機構１８には、センサ制御回路１８ｆが設けられており、使用目的や使用環境に応じた任意のセンサ18a,18b,18c,18d,18eだけを選択的に作動制御することができるようになっている。例えば図４に示すように、検出機構１８をパソコン用マウス２８に配置する場合には、センサ制御回路１８ｆにより、発汗量検出センサ１８ａ、血圧検出センサ１８ｂ、脈拍検出センサ１８ｃ、体温検出センサ１８ｄのいずれかを作動制御して、音声検出センサ１８ｅを停止制御する。この場合、任意のセンサ18a,18b,18c,18d,18eだけを選択的に作動制御する方法としては、例えば、情報交信用端末2,4,6,8,10,12のモニタ上に各センサ18a,18b,18c,18d,18eの名称や略称などを表示して、その中から任意のセンサを選択して作動制御する方法が考えられるが、任意のセンサを的確に選択できれば、これ以外の方法であっても良いことは言うまでもない。
このような検出機構１８によれば、使用目的や使用環境に最適なセンサのみを作動制御することができるため、人(本実施の形態では、情報交信元)の内面的な感情変化(心の動き)を正確に検出することができる。
【００１８】
このように各センサ18a,18b,18c,18d,18eによって人(本実施の形態では、情報交信元)の内面的な感情変化(心の動き)が検出されたとき、続いて、その感情変化の喜怒哀楽の程度（その人の心の動きの変化の高低や強弱など）が判定機構２０によって判定される。
図１(ｄ)に示すように、判定機構２０は、少なくとも、情報交信元の少なくとも喜怒哀楽の程度を予め所定の変化パターンとして登録する登録部２０ａと、各種情報を所定の情報交信先に送信する際に生じた当該情報交信元の感情変化が登録部２０ａに登録された変化パターンのいずれに該当するかを判定する判定部２０ｂと、判定部２０ｂで判定された変化パターンに該当する喜怒哀楽の程度を判定結果として出力する出力部２０ｃとを備えている。
【００１９】
登録部２０ａには、上述したような感情変化に伴って変化する発汗量、血圧、脈拍、体温、音声の変化パターンが予め登録される。即ち、発汗量、血圧、脈拍、体温、音声などの変化状態は個人差があるため、情報交信用端末2,4,6,8,10,12を主に利用する情報交信元(ユーザやオペレータ等)の自律神経の活動に伴う感情変化を所定の変化パターンとして予め登録される。例えば、喜んだときの変化パターン、怒ったときの変化パターン、哀しんだときの変化パターン、楽しんだときの変化パターンが登録されることになるが、更に、このような喜怒哀楽の程度は、情報交信元の感情変化の高低や強弱（発汗量の大小、血圧の高低、脈拍の強弱、体温の高低、音声の強弱など）により微妙に変化するため、可能な限り細分化した変化パターンが登録される。
【００２０】
判定部２０ｂでは、現在情報交信用端末2,4,6,8,10,12を使用している情報交信元(ユーザやオペレータ等)の発汗量、血圧、脈拍、体温、音声の変化が、登録部２０ａに予め登録された変化パターンのいずれに該当するのかを比較して判定する。具体的には、まず、発汗量が微妙に増加した際に、その増加量が情報交信元の喜怒哀楽の感情変化のいずれに起因したものなのかを判定する。このとき、発汗量の増加が例えば怒ったときの感情変化に起因すると判定されたとき、続いて、怒ったときの変化パターンのいずれに該当するのかが比較判定される。登録部２０ａには、変化パターンとして怒りの程度に応じた複数種類の変化パターンが登録されている。例えば怒りの程度が比較的低い（激怒まではいかないが多少怒っている程度）変化パターン、怒りの程度が非常に高い（激怒）変化パターン、怒りの程度が非常に低い（ちょっとムラっとした状態）変化パターン等が登録されている。
そして、現在の発汗量の増加が、怒りの程度が比較的低い（激怒まではいかないが多少怒っている程度）変化パターンであると判定されたとき、その判定結果（その判定結果としての感情変化）は、出力部２０ｃを介して送信機構２２に出力された後、この送信機構２２によって所定の情報交信先の情報交信用端末2,4,6,8,10,12に送信される。
【００２１】
各情報交信用端末2,4,6,8,10,12に送信された判定結果（多少怒っている変化パターン）は、受信手段１６の受信機構２４で受信され、そのとき、報知機構２６は、かかる判定結果に基づいて、情報交信元の感情変化における喜怒哀楽の程度を報知する。この場合、喜怒哀楽の程度を報知する方法としては、例えば図２に示すように、画像表示（少なくとも、文字、動画、静止画、発光による表示）、音声表示、振動表示などの各種の表示方法を適用することができる。なお、図２には、相手から「…了解しました。」と通話された際に、その人の内面的な感情変化が報知されている様子が示されている。
例えば図２(ａ)では、携帯電話８のモニタ８ａ上に文字で「多少怒ってます」と報知され、図２(ｂ)では、携帯電話８のモニタ８ａ上に静止画で「多少怒った顔」が報知され、図２(ｃ)では、携帯電話８から音声で「多少怒ってます」が報知され、図２(ｄ)では、携帯電話８から振動で「多少怒った状態」が報知されている。
【００２２】
ここで、図２(ｂ)に示すような顔の表情による報知方法では、例えば図２(ｅ)に示すような喜怒の程度に応じて表情変化する複数の顔を報知機構２６に登録しておき、判定結果に応じた顔を選択するようにすれば良い。この場合、喜怒だけで無く、哀楽や動揺、嫌悪、感嘆、不快、愉快、困惑などに対応した表情変化なども登録すれば良い。
また、図２(ｄ)の振動による報知方法では、喜怒哀楽の種類や程度に応じて振動状態に変化（例えば、断続的振動、連続的振動、振動に強弱をつけるなど）をつければ良い。
また、図示しなかったが、発光による報知方法では、喜怒哀楽の種類や程度に応じて発光状態に変化（例えば、断続的発光、連続的発光、発光に強弱や色味をつけるなど）をつければ良い。
【００２３】
以上、本実施の形態によれば、各種情報を所定の情報交信先に送信する際に生じた情報交信元の感情変化を検出し、そのときの情報交信元の感情変化における喜怒哀楽の程度を報知することができるため、各種情報の通信中に生じた通信者同士の感情変化を自動的に且つリアルタイムに相互交信することができる。例えば図３に示すように、ユーザＳ１とユーザＳ２とが通話中において、ユーザＳ２が返答に困った場合、そのときに生じたユーザＳ２の感情変化（「困ったなぁ」という感情変化）は、検出機構１８及び判定機構２０により正確に検出及び判定され、そのときの判定結果が報知機構２６によりリアルタイムにユーザＳ１に報知される。この結果、ユーザＳ１とユーザＳ２とは、互いの感情変化を把握しながら交信を続行することが可能となり、その結果、相互の円滑なコミュニケーションを図ることができる。
また、従来のように例えば通話中に通話者が自らボタン操作を行うといった煩わしさが不要になるため、各種情報の交信に集中することができ、コミュニケーションの円滑性を向上させることが可能となる。
【産業上の利用可能性】
【００２４】
本発明は、電話機（例えば、携帯電話やＰＨＳ、固定電話など）を初めとする各種の通信機器（例えば、パソコンやＰＤＡ、トランシーバなど）に適用することが可能である。
【図面の簡単な説明】
【００２５】
【図１】（ａ）は、本発明の一実施の形態に係る情報交信システムの全体構成を示す図、（ｂ）は、情報交信システムに用いられる情報交信用端末の内部構成を示す図、（ｃ）は、情報交信システムに用いられる情報交信用端末の検出機構の構成を示す図、（ｄ）情報交信システムに用いられる情報交信用端末の判定機構の構成を示す図。
【図２】（ａ）は、情報交信システムに用いられる情報交信用端末の報知機構により文字で感情変化を報知している様子を示す図、（ｂ）は、画像で感情変化を報知している様子を示す図、（ｃ）は、音声で感情変化を報知している様子を示す図、（ｄ）は、振動で感情変化を報知している様子を示す図、（ｅ）は、画像で感情変化を報知する場合における複数の顔の表情変化の一例を示す図。
【図３】ユーザ同士が感情変化を把握しながら交信している様子を示す図。
【図４】パソコン用マウスに検出機構を配置する場合の説明図。
【符号の説明】
【００２６】
2,4,6,8,10,12  情報交信用端末
１４  送信手段
１６  受信手段
１８  検出機構
２０  判定機構
２２  送信機構
２４  受信機構
２６  報知機構
【図１】
2005072743.tif 000003
【図２】
2005072743.tif 000004
【図３】
2005072743.tif 000005
【図４】
2005072743.tif 000006