(57)【要約】【課題】情報受信対象者の受信情報に関連する有益な行動の発生を、情報送信者や他の情報受信対象者に伝達する。【解決手段】情報発信者の発信情報を検出する発信情報検出部１と、情報受信対象者の行動を表す情報を検出する行動検出部２と、情報受信対象者の行動の意味を表す情報を抽出する行動解釈部３と、発信情報と情報受信対象者の行動の意味を表す情報との関連する度合いを判定する行動関連度判定部４３と、行動関連度に基づいて情報受信対象者が発信情報に関与する度合いである意識関与度を判定する意識関与度判定部４４と、情報受信対象者の行動の意味を表す情報が、所定の基準に照らして発信情報に貢献する度合い、または他の情報受信対象者に対して有益である度合いを表す行動有益度を判定する行動有益度判定部４５と、を備える。【選択図】図６
2010086356.tif 000002
【特許請求の範囲】
【請求項１】
情報発信者が発信する情報を検出する発信情報検出手段と、
前記情報発信者の発信する情報を受信しうる者である情報受信対象者の行動を表す情報を、前記情報受信対象者の画像、音声、機器の操作および生体情報のうちの少なくとも１つを含む情報を用いて検出する行動検出手段と、
前記行動検出手段で検出した情報受信対象者の行動の意味を表す情報を抽出する行動解釈手段と、
前記発信情報検出手段で検出した前記情報発信者の発信する情報と、前記行動解釈手段で抽出した前記情報受信対象者の行動の意味を表す情報との関連する度合いを判定する行動関連度判定手段と、
前記行動関連度判定手段で判定した行動関連度に基づいて、前記情報受信対象者が前記情報発信者の発信する情報を受信する度合いである意識関与度を判定する意識関与度判定手段と、
前記行動解釈手段で抽出した前記情報受信対象者の行動の意味を表す情報が、所定の基準に照らして前記情報発信者が発信する情報に貢献する度合い、または他の情報受信対象者に対して有益である度合いを表す行動有益度を判定する行動有益度判定手段と、
を備えることを特徴とする意識関与度測定装置。
【請求項２】
前記行動検出手段が検出した行動を表す情報から、前記情報受信対象者の覚醒している度合いである覚醒度を検出する覚醒度判定手段と、
前記行動検出手段が検出した行動を表す情報から、前記情報受信対象者が前記情報発信者の発信する情報に注目している度合いである情報注目度を検出する情報注目度判定手段と、
を備え、
前記意識関与度判定手段は、前記行動関連度に加えて前記覚醒度および前記情報注目度とに基づいて、前記意識関与度を判定する、
ことを特徴とする請求項１に記載の意識関与度測定装置。
【請求項３】
前記意識関与度判定手段が判定した前記意識関与度に基づいて、前記情報受信対象者に関する情報を前記情報発信者に対して提示する発信者支援情報提示手段を備えることを特徴とする請求項１または２に記載の意識関与度測定装置。
【請求項４】
前記意識関与度判定手段で判定した前記意識関与度が、所定の基準より小さい前記情報受信対象者に対して、警告を表示する受信対象者警告手段を備えることを特徴とする請求項１ないし３のいずれか１項に記載の意識関与度測定装置。
【請求項５】
前記行動有益度判定手段で判定した行動有益度が所定の範囲にある場合に、その行動有益度が判定された前記情報受信対象者による行動の発生を、前記情報発信者に対して提示する有益行動情報対発信者提示手段を備えることを特徴とする請求項１ないし４のいずれか１項に記載の意識関与度測定装置。
【請求項６】
前記行動有益度判定手段で判定した行動有益度が所定の範囲にある場合に、その行動有益度が判定された前記情報受信対象者による行動の発生を、前記情報受信対象者に対して提示する有益行動情報対受信対象者提示手段を備えることを特徴とする請求項５に記載の意識関与度測定装置。
【請求項７】
前記行動有益度判定手段で判定した行動有益度が所定の範囲にある場合に、その行動有益度が判定された前記情報受信対象者による行動を公開するよう促す情報を、該情報受信対象者に対して表示する有益行動公開催促手段を備えることを特徴とする請求項５または６に記載の意識関与度測定装置。
【請求項８】
情報発信者が発信する情報を検出する発信情報検出ステップと、
前記情報発信者の発信する情報を受信しうる者である情報受信対象者の行動を表す情報を、前記情報受信対象者の画像、音声、機器の操作および生体情報のうちの少なくとも１つを含む情報を用いて検出する行動検出ステップと、
前記行動検出ステップで検出した情報受信対象者の行動の意味を表す情報を抽出する行動解釈ステップと、
前記発信情報検出ステップで検出した前記情報発信者の発信する情報と、前記行動解釈ステップで抽出した前記情報受信対象者の行動の意味を表す情報との関連する度合いを判定する行動関連度判定ステップと、
前記行動関連度判定ステップで判定した行動関連度に基づいて、前記情報受信対象者が前記情報発信者の発信する情報を受信する度合いである意識関与度を判定する意識関与度判定ステップと、
前記行動解釈ステップで抽出した前記情報受信対象者の行動の意味を表す情報が、所定の基準に照らして前記情報発信者が発信する情報に貢献する度合い、または他の情報受信対象者に対して有益である度合いを表す行動有益度を判定する行動有益度判定ステップと、
を備えることを特徴とする意識関与度測定方法。
【請求項９】
前記行動検出ステップで検出した行動を表す情報から、前記情報受信対象者の覚醒している度合いである覚醒度を検出する覚醒度判定ステップと、
前記行動検出手段が検出した行動を表す情報から、前記情報受信対象者が前記情報発信者の発信する情報に注目している度合いである情報注目度を検出する情報注目度判定ステップと、
を備え、
前記意識関与度判定ステップは、前記行動関連度に加えて前記覚醒度および前記情報注目度とに基づいて、前記意識関与度を判定する、
ことを特徴とする請求項８に記載の意識関与度測定方法。
【請求項１０】
前記意識関与度判定ステップで判定した前記意識関与度に基づいて、前記情報受信対象者に関する情報を前記情報発信者に対して提示する発信者支援情報提示ステップを備えることを特徴とする請求項８または９に記載の意識関与度測定方法。
【請求項１１】
前記意識関与度判定ステップで判定した前記意識関与度が、所定の基準より小さい前記情報受信対象者に対して、警告を表示する受信対象者警告ステップを備えることを特徴とする請求項８ないし１０のいずれか１項に記載の意識関与度測定方法。
【請求項１２】
前記行動有益度判定ステップで判定した行動有益度が所定の範囲にある場合に、その行動有益度が判定された前記情報受信対象者による行動の発生を、前記情報発信者に対して提示する有益行動情報対発信者提示ステップを備えることを特徴とする請求項８ないし１１のいずれか１項に記載の意識関与度測定方法。
【請求項１３】
前記行動有益度判定ステップで判定した行動有益度が所定の範囲にある場合に、その行動有益度が判定された前記情報受信対象者による行動の発生を、前記情報受信対象者に対して提示する有益行動情報対受信対象者提示ステップを備えることを特徴とする請求項１２に記載の意識関与度測定方法。
【請求項１４】
前記行動有益度判定ステップで判定した行動有益度が所定の範囲にある場合に、その行動有益度が判定された前記情報受信対象者による行動を公開するよう促す情報を、該情報受信対象者に対して表示する有益行動公開催促ステップを備えることを特徴とする請求項１２または１３に記載の意識関与度測定方法。
【請求項１５】
コンピュータを、
情報発信者が情報を発信していることを検出する情報発信検出手段と、
前記情報発信者の発信する情報を受信しうる者である情報受信対象者の行動を表す情報を、前記情報受信対象者の画像、音声、機器の操作および生体情報のうちの少なくとも１つを含む情報を用いて検出する行動検出手段と、
前記行動検出手段で検出した情報受信対象者の行動の意味を表す情報を抽出する行動解釈手段と、
前記情報発信者検出手段で検出した情報発信と、前記行動解釈手段で抽出した前記情報受信対象者の行動の意味を表す情報との関連する度合いを判定する行動関連度判定手段と、
前記行動関連度判定手段で判定した行動関連度に基づいて、前記情報受信対象者が前記情報発信者の発信する情報を受信する度合いである意識関与度を判定する意識関与度判定手段と、
前記行動解釈手段で抽出した前記情報受信対象者の行動の意味を表す情報が、所定の基準に照らして前記情報発信者が発信する情報に貢献する度合い、または他の情報受信対象者に対して有益である度合いを表す行動有益度を判定する行動有益度判定手段
として機能させることを特徴とする意識関与度測定プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、会議や講演などにおける談話を聞く場合や、舞台、テレビ、ＰＣなどの媒体を通してコンテンツを視聴する場合などの情報の発信と受信が発生する場合において、情報発信者や情報受信対象者を支援する技術に関する。より詳しくは、発信情報が情報受信の対象者に受信されているか否かの判定に基づき情報発信者や情報受信対象者を支援する情報を提供する技術に関する。
【背景技術】
【０００２】
会議や講演、会話などの情報の発信と受信が発生する場合において、情報受信の対象者が情報をきちんと受け取ったか否かを確認するのは、正しく情報伝達を行うために重要な課題である。特に近年は、ネットワーク環境を利用したテレビ電話や遠隔会議などの、簡単には情報受信対象者の状態を確認できない状況でのコミュニケーションが盛んになってきており、情報受信対象者が情報をきちんと受け取ったか否かを確認する技術の重要性が高まっている。そのような、情報の発信と受信が発生する場合において、発信情報が情報受信対象者に受信されているか否かを判定する技術が存在する。
【０００３】
第１の関連する技術は、情報受信対象者が会議や講演などにそもそも出席しているか、情報受信対象者のテレビやＰＣ（パーソナルコンピュータ）などの情報受信装置が情報を受信しているか否かなどの情報受信対象者のプレゼンスを判定するというものである。
【０００４】
第２の関連する技術は、情報受信対象者が眠っていないか、うつ伏せになっていないか、脳が活性化しているか否かなどの、情報受信対象者が情報受信可能な程度に意識が覚醒しているか、集中しているかを判定するというものである。
【０００５】
第３の関連する技術は、情報受信対象者が会議や講演などにおける話者や、テレビ、コンピュータなどの媒体を通して視聴しているコンテンツの方を目視しているか否かなどの、情報受信対象者が発信された情報に対して直接的に注目しているかを判定するというものである。
【０００６】
第４の関連する技術は、情報受信対象者が発信された情報を受け取った際に、情報送信者が想定したような行動を行っているか否かを判定するというものである。これは例えば、コンピュータネットワークで配信されたコンテンツの入力フォームに入力を行っているか、語学の遠隔学習において課題文の復唱を行っているか、テレビ視聴時にＥＰＧ（番組表）を確認しているかなどの判定などが挙げられる。
【０００７】
第２の関連する技術の例として、特許文献１に記載されている集中度取得装置が上げられる。特許文献１の技術は、ＴＶ番組の視聴者の脈拍や皮膚温度といった生体情報を測定することで視聴者の集中度を測定するものである。
【０００８】
第３の関連する技術の例として、特許文献２に記載されている視聴質測定方法が挙げられる。特許文献２の技術は、アイカメラの画像から視聴者の視線を測定し、視聴者がテレビの方を向いているか否かで視聴者の番組に対する集中度を測定する技術である。
【０００９】
第３の関連する技術の別の例として、特許文献３に記載されている講演者支援装置が挙げられる。特許文献３の技術は、カメラの画像から聴講者の顔の向きと表情、マイクロフォンの音声から聴講者の静聴度を測定し、センサから脈拍と体温を計測することで聴講者の注目度を測定する技術である。
【００１０】
第４の関連する技術の例として、特許文献４に記載の情報処理装置が挙げられる。特許文献４に記載の技術は、ＴＶ視聴において、視聴者がＴＶの周囲にいたかどうかの判定、視聴者のＴＶに対する番組表確認やチャンネル変更等の操作内容などの情報から視聴者のＴＶ番組の視聴の質を測定するものである。
【００１１】
第４の関連する技術の別の例として、特許文献５に記載の学習時状況判断プログラムが挙げられる。特許文献５に記載の技術は、遠隔学習において、脳内の血流量測定、カメラ画像を用いた学習者の顔の向きの測定、マイクロフォンと音声認識を用いた学習者の発話内容が学習内容に沿っているか否かの判定、および学習者が学習端末に対し行った操作が学習コンテンツ内で行われたものか否かの判定などの情報から学習者の学習状況を判断するものである。
【００１２】
その他、類似するテキストを分類する技術として、未分類の複数テキストの中から、既存のデータベースに格納されている複数テキストと同じまたは類似する傾向を有するテキストを分類することが、特許文献６に記載されている。
【００１３】
【特許文献１】特開２００３−１１１１０６号公報
【特許文献２】特開２００６−２５４１４５号公報
【特許文献３】特開２００７−２１３２８２号公報
【特許文献４】特開２００５−３０３４５２号公報
【特許文献５】特開２００４−２２９９４８号公報
【特許文献６】特開２００４−００５０２５号公報
【発明の開示】
【発明が解決しようとする課題】
【００１４】
第１の関連する技術の、情報受信対象者のプレゼンスにより情報受信対象者が情報を受信したか否かを判定する方法では、講演の聴講者が出席していても眠っている場合や、ＴＶの視聴者がＴＶのスイッチを入れていてもＴＶのそばにいない場合などでも、情報受信対象者が情報を受信していると判定してしまう。それは、第１の関連する技術は、情報受信対象者が情報受信可能な状態にあるか否かを判定する機能を持たないからである。
【００１５】
第２の関連する技術の、情報受信対象者が情報受信可能な程度に意識が覚醒している度合いや集中している度合いを判定することで、情報受信対象者が情報を受信したか否かを判定する方法は、講演の聴講者が講演者の談話以外のもの（外の風景など）に集中している場合などの、情報受信対象者が発信された情報以外のものに集中している場合であっても、情報受信対象者が情報を受信していると判定してしまう。それは、第２の関連する技術は、情報受信対象者が発信された情報に注目しているか否かを判定する機能を持たないからである。
【００１６】
第３の関連する技術の、情報受信対象者が発信された情報に直接的に注目しているかを判定することで情報受信対象者が情報を受信したか否かを判定する方法は、情報受信対象者が語学の遠隔学習において課題文の復唱などの、情報発信者が想定した発信された情報に関する行動を、発信された情報に直接注目せずに行っている場合であっても情報受信対象者は情報を受信していないと判定してしまう。それは、第３の関連する技術は、情報受信対象者が発信された情報に注目せずに行っている行動が、情報発信者が想定した発信された情報に関する行動か否かを判定する機能を持たないからである。
【００１７】
第４の関連する技術の、情報受信対象者が発信された情報を受け取った際に、情報発信者が想定したような行動を行っているか否かを判定することで、情報受信対象者が情報を受信したか否かを判定する方法は、情報受信対象者が視聴しているＴＶ番組について他の視聴者と会話する場合などの、発信された情報に関する情報発信者が想定していない行動を行っている場合であっても情報受信対象者は情報を受信していないと判定してしまう。それは、第４の関連する技術は、情報発信者が想定していない行動で情報受信対象者が行っている行動が、発信された情報に関するか否かを判定する機能を持たないからである。
【００１８】
また、上記第１〜第４の関連する技術は、情報受信対象者同士の発信された情報に関連する会話や、情報受信対象者が手元のコンピュータなどで行う発信された情報に関連する情報の調査などの、情報受信対象者の発信された情報に関連する行動内容が有益であった場合でも、その情報受信対象者の行動の情報を公開するよう促したり、有益な行動の発生を情報発信者や他の情報受信対象者に伝達したりすることができない。それは、第１〜第４の技術は、情報受信対象者の発信された情報に関連する行動内容が、情報発信者や他の情報受信対象者に有益であるか否かを判定する機能を持たないからである。
【００１９】
本発明の目的は、情報受信対象者同士の発信された情報に関連する会話や、情報受信対象者が手元のコンピュータなどで行う発信された情報に関連する情報の調査などの、情報受信対象者の発信された情報に関連する行動内容が有益であった場合には、その情報受信対象者の行動の情報を公開するよう促したり、有益な行動の発生を情報発信者や他の情報受信対象者に伝達したりすることができる意識関与度判定装置を提供することにある。
【課題を解決するための手段】
【００２０】
本発明の第１の観点に係る意識関与度測定装置は、
情報発信者が発信する情報を検出する発信情報検出手段と、
前記情報発信者の発信する情報を受信しうる者である情報受信対象者の行動を表す情報を、前記情報受信対象者の画像、音声、機器の操作および生体情報のうちの少なくとも１つを含む情報を用いて検出する行動検出手段と、
前記行動検出手段で検出した情報受信対象者の行動の意味を表す情報を抽出する行動解釈手段と、
前記発信情報検出手段で検出した前記情報発信者の発信する情報と、前記行動解釈手段で抽出した前記情報受信対象者の行動の意味を表す情報との関連する度合いである行動関連度を判定する行動関連度判定手段と、
前記行動関連度判定手段で判定した行動関連度に基づいて、前記情報受信対象者が前記情報発信者の発信する情報を受信する度合いである意識関与度を判定する意識関与度判定手段と、
前記行動解釈手段で抽出した前記情報受信対象者の行動の意味を表す情報が、所定の基準に照らして前記情報発信者が発信する情報に貢献する度合い、または他の情報受信対象者に対して有益である度合いを表す行動有益度を判定する行動有益度判定手段と、
を備えることを特徴とする。
【００２１】
本発明の第２の観点に係る意識関与度測定方法は、
情報発信者が発信する情報を検出する発信情報検出ステップと、
前記情報発信者の発信する情報を受信しうる者である情報受信対象者の行動を表す情報を、前記情報受信対象者の画像、音声、機器の操作および生体情報のうちの少なくとも１つを含む情報を用いて検出する行動検出ステップと、
前記行動検出ステップで検出した情報受信対象者の行動の意味を表す情報を抽出する行動解釈ステップと、
前記発信情報検出ステップで検出した前記情報発信者の発信する情報と、前記行動解釈ステップで抽出した前記情報受信対象者の行動の意味を表す情報との関連する度合いである行動関連度を判定する行動関連度判定ステップと、
前記行動関連度判定ステップで判定した行動関連度に基づいて、前記情報受信対象者が前記情報発信者の発信する情報を受信する度合いである意識関与度を判定する意識関与度判定ステップと、
前記行動解釈ステップで抽出した前記情報受信対象者の行動の意味を表す情報が、所定の基準に照らして前記情報発信者が発信する情報に貢献する度合い、または他の情報受信対象者に対して有益である度合いを表す行動有益度を判定する行動有益度判定ステップと、
を備えることを特徴とする。
【００２２】
本発明の第３の観点に係る意識関与度測定プログラムは、コンピュータを、
情報発信者が情報を発信していることを検出する情報発信検出手段と、
前記情報発信者の発信する情報を受信しうる者である情報受信対象者の行動を表す情報を、前記情報受信対象者の画像、音声、機器の操作および生体情報のうちの少なくとも１つを含む情報を用いて検出する行動検出手段と、
前記行動検出手段で検出した情報受信対象者の行動の意味を表す情報を抽出する行動解釈手段と、
前記情報発信者検出手段で検出した情報発信と、前記行動解釈手段で抽出した前記情報受信対象者の行動の意味を表す情報との関連する度合いである行動関連度を判定する行動関連度判定手段と、
前記行動関連度判定手段で判定した行動関連度に基づいて、前記情報受信対象者が前記情報発信者の発信する情報を受信する度合いである意識関与度を判定する意識関与度判定手段と、
前記行動解釈手段で抽出した前記情報受信対象者の行動の意味を表す情報が、所定の基準に照らして前記情報発信者が発信する情報に貢献する度合い、または他の情報受信対象者に対して有益である度合いを表す行動有益度を判定する行動有益度判定手段
として機能させることを特徴とする。
【発明の効果】
【００２３】
本発明によれば、有益な行動の発生を情報発信者や他の情報受信対象者に伝達したり、情報受信対象者に有益な行動内容を開示するよう催促したりすることができる。その理由は、本発明の意識関与度判定装置は、覚醒度、情報注目度、行動関連度の３つの指標および、行動検出手段から送られた情報受信対象者の行動情報、行動解釈手段から送られた情報受信対象者の行動意味情報、意識関与度判定手段により求められた情報受信対象者の意識関与度などの情報から、情報受信対象者の行動内容が情報発信者や他の情報受信対象者に有益である度合いである行動有益度を判定する行動有益度判定手段を備えるためである。
【発明を実施するための最良の形態】
【００２４】
（実施の形態１）
図１は、実施の形態１に係る意識関与度測定装置の構成例を示すブロック図である。意識関与度測定装置１００は、発信情報検出部１と、行動検出部２と、行動解釈部３と、意識判定部４と、発信者支援情報提示部５とから構成される。さらに、意識判定部４は、覚醒度判定部４１、情報注目度判定部４２、行動関連度判定部４３、意識関与度判定部４４から構成される。
【００２５】
発信情報検出部１は、情報発信者が発信する発信情報を検出し、意識判定部４に送る。行動検出部２は、情報受信対象者の画像、音声、機器の操作および生体情報の少なくとも１つを情報受信対象者の行動を表す行動情報として検出し、行動解釈部３と意識判定部４に送る。行動検出部２は、例えば情報受信対象者の画像を撮影するカメラ、情報受信対象者の音声を収録するマイクロフォン、情報受信対象者の機器操作情報を取得する手段、情報受信対象者の生体情報を取得するセンサなどから構成される。
【００２６】
行動解釈部３は、行動検出部２から送られた情報受信対象者の行動情報から、情報受信対象者の行動の意味を表す行動意味情報を抽出し、意識判定部４に送る。行動解釈部３は、例えば情報受信対象者の画像から情報受信対象者の注視先を検出する手段、情報受信対象者の画像や加速度情報から情報受信対象者の動作を検出する手段、情報受信対象者の音声をテキスト化する音声認識手段、情報受信対象者の音声テキストや機器への入力テキストからキーワード検出や疑問文判定を行う手段、操作情報の内容を分析する手段、生体情報を分析する手段などを備える。
【００２７】
覚醒度判定部４１は、行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報から、情報受信対象者の意識の覚醒の度合いである覚醒度を判定して意識関与度判定部４４に送る。
【００２８】
情報注目度判定部４２は、行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報から、情報受信対象者が発信情報に直接注目している度合いである情報注目度を判定して意識関与度判定部４４に送る。
【００２９】
行動関連度判定部４３は、発信情報検出部１から送られた情報発信者が発信した発信情報と、行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報から、情報受信対象者の行動が発信情報に関連する度合いである行動関連度を判定して意識関与度判定部４４に送る。
【００３０】
意識関与度判定部４４は、覚醒度判定部４１から送られた覚醒度と情報注目度判定部４２から送られた情報注目度と行動関連度判定部４３から送られた行動関連度から情報受信対象者の意識が発信された情報に関与しているかどうかを総合的に判断する度合いである意識関与度を判定して発信者支援情報提示部５に送る。
【００３１】
発信者支援情報提示部５は、意識判定部４から送られた意識関与度の情報を基に情報発信者を支援する情報を情報発信者に対して提示する。
【００３２】
以下に、図１の構成図および図２と図３のフローチャートを参照して本実施の形態の全体の動作について詳細に説明する。図２は図１の発信情報検出部１、行動検出部２および行動解釈部３の動作（情報検出および行動解釈）の一例を示すフローチャートである。
【００３３】
発信情報検出部１は、情報発信者が発信する発信情報を検出し、意識判定部４に送る（図２のステップＡ１）。
【００３４】
行動検出部２は、情報受信対象者の画像、音声、機器の操作および生体情報の少なくとも１つを情報受信対象者の行動を表す行動情報として検出し、行動解釈部３と意識判定部４に送る（ステップＡ２）。ステップＡ２の次に、行動解釈部３は、行動検出部２から送られた情報受信対象者の行動情報から、情報受信対象者の行動の意味を表す行動意味情報を抽出し、意識判定部４に送る（ステップＡ３）。
【００３５】
発信情報検出部１、行動検出部２および行動解釈部３は、以上の動作を繰り返す。なお、ステップＡ１と、ステップＡ２ないしＡ３はそれぞれ独立しており、並列して進めることが可能である。
【００３６】
図３は図１の意識判定部４と発信者支援情報提示部５の動作（情報発信者支援１）の一例を表すフローチャートである。
【００３７】
覚醒度判定部４１は行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報から、情報受信対象者の意識の覚醒の度合いである覚醒度を判定する。覚醒度判定部４１は、判定した覚醒度を意識関与度判定部４４に送る（図３のステップＢ１）。
【００３８】
情報注目度判定部４２は行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報から、情報受信対象者が発信された情報に直接注目している度合いである情報注目度を判定する。情報注目度判定部４２は、判定した情報注目度を意識関与度判定部４４に送る（ステップＢ２）。
【００３９】
また、行動関連度判定部４３は発信情報検出部１から送られた情報発信者が発信した発信情報と、行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報から、情報受信対象者の行動が発信情報に関連する度合いである行動関連度を判定する。行動関連度判定部４３は、判定した行動関連度を意識関与度判定部４４に送る（ステップＢ３）。
【００４０】
意識関与度判定部４４は、覚醒度判定部４１から送られた情報受信対象者の覚醒度と、情報注目度判定部４２から送られた情報受信対象者の情報注目度と、行動関連度判定部４３から送られた情報受信対象者の行動関連度から、情報受信対象者の意識が発信された情報に関与しているかどうかを総合的に判断する度合いである意識関与度を判定する。そして、判定した意識関与度を発信者支援情報提示部５に送る（ステップＢ４）。
【００４１】
発信者支援情報提示部５は、意識判定部４から送られた情報受信対象者の意識関与度の情報を基に情報発信者を支援する情報を情報発信者に対して提示する（ステップＢ５）。
【００４２】
なお、ステップＢ１、ステップＢ２、ステップＢ３はそれぞれ独立しており、並列して進めることが可能である。
【００４３】
以上説明したように、本実施の形態の意識関与度測定装置１００によれば、行動関連度判定部４３が情報受信対象者の行動内容と発信された情報の関連する度合いである行動関連度を判定し、意識関与度判定部４４が情報受信対象者の意識の覚醒度を表す度合いである覚醒度と情報受信対象者の発信された情報に対する直接的な注目の度合いである情報注目度に加えて前記行動関連度を用いて情報受信対象者の意識が発信された情報に関与しているかどうかを総合的に判断する度合いである意識関与度を判定する。そのため、情報受信対象者が情報に直接注目せずに、情報発信者が想定していない発信した情報に関連する行動を行っている場合でも、情報受信対象者の意識は発信された情報に関与していると判定する。その結果、情報受信対象者の意識関与度を正しく判定することができる。そして、その判定を基に情報発信者を支援する情報を提示することができる。
【００４４】
（実施の形態２）
図４は、実施の形態２に係る意識関与度測定装置１００の構成例を示すブロック図である。実施の形態２では、発信された情報に対する意識関与度が低い受信対象者に対して、警告を発する。図４を参照すると、実施の形態２に係る意識関与度測定装置１００は、図１の実施の形態１の構成と比べて、発信者支援情報提示部５の代わりに受信対象者警告部６を備える点で異なる。受信対象者警告部６は、意識判定部４から送られた意識関与度の情報を基に意識関与度の低い情報受信対象者に対して警告を発する。
【００４５】
なお、本実施の形態は実施の形態１の発信者支援情報提示部５を追加で備えていてもよい。
【００４６】
以下に、図４の構成図および図２と図５のフローチャートを参照して本実施の形態の全体の動作について詳細に説明する。図４の発信情報検出部１、行動検出部２および行動解釈部３の動作は、図２に示す実施の形態１の発信情報検出部１、行動検出部２および行動解釈部３の動作と同様である。
【００４７】
図５は図４の意識判定部４と受信対象者警告部６の動作（情報受信対象者支援１）の一例を表すフローチャートである。図５のステップＢ１〜Ｂ３は、図３に示す実施の形態１の意識判定部４の動作のステップＢ１〜Ｂ３と同様である。
【００４８】
意識関与度判定部４４は、覚醒度判定部４１から送られた情報受信対象者の覚醒度と、情報注目度判定部４２から送られた情報受信対象者の情報注目度と、行動関連度判定部４３から送られた情報受信対象者の行動関連度から、情報受信対象者の意識が発信された情報に関与しているかどうかを総合的に判断する度合いである意識関与度を判定する。そして、判定した意識関与度を受信対象者警告部６に送る（ステップＢ４）。
【００４９】
受信対象者警告部６は、意識関与度判定部４４から送られた情報受信対象者の意識関与度の情報を基に意識関与度の低い情報受信対象者に対して警告を発する（ステップＢ６）。
【００５０】
以上説明したように、本実施の形態２の意識関与度測定装置１００では、行動関連度判定部４３が情報受信対象者の行動内容と発信された情報の関連度する度合いである行動関連度を判定し、意識関与度判定部４４は、情報受信対象者の意識の覚醒度を表す度合いである覚醒度と、情報受信対象者の発信された情報に対する直接的な注目の度合いである情報注目度に加えて、行動関連度を用いて情報受信対象者の意識が発信された情報に関与しているかどうかを総合的に判断する度合いである意識関与度を判定する。そのため、情報受信対象者が情報に直接注目せずに、情報発信者が想定していない発信情報に関連する行動を行っている場合でも、情報受信対象者の意識は発信された情報に関与していると判定する。その結果、情報受信対象者の意識関与度を正しく判定することができる。そして、その判定を基に意識関与度の低い情報受信対象者に対し警告を発することができる。
【００５１】
（実施の形態３）
図６は、本発明の実施の形態３に係る意識関与度測定装置１００の構成例を示すブロック図である。実施の形態３では、受信対象者が行っている有益な行動を判定する。図６を参照すると、実施の形態３の意識関与度測定装置１００は、図１の実施の形態１の構成と比較して、意識判定部４が行動有益度判定部４５を備え、発信者支援情報提示部５を備えず、さらに有益行動情報対発信者提示部７を備える点で異なる。
【００５２】
なお、本実施の形態は実施の形態１の発信者支援情報提示部５や実施の形態２の受信対象者警告部６を追加で備えていてもよい。
【００５３】
行動有益度判定部４５は、発信情報検出部１から送られた情報発信者が発信した発信情報と、行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報と、覚醒度判定部４１から送られた情報受信対象者の覚醒度と、情報注目度判定部４２から送られた情報受信対象者の情報注目度と、行動関連度判定部４３から送られた情報受信対象者の行動関連度と、意識関与度判定部４４から送られた情報受信対象者の意識関与度とから、情報受信対象者が行っている行動が情報発信者や他の情報受信対象者に対して有益である度合いを表す行動有益度を判定する。行動有益度判定部４５は、判定した行動有益度を有益行動情報対発信者提示部７に送る。
【００５４】
有益行動情報対発信者提示部７は、行動有益度判定部４５から送られた情報受信対象者の行動有益度の情報を基に、情報受信対象者による有益な行動の発生を情報発信者に対して提示する。
【００５５】
行動有益度判定部４５は、例えば、以下のような場合に、情報受信対象者の行動が情報発信者や他の情報受信対象者に対して有益であると判定する。
【００５６】
例えば、情報受信対象者が発信する情報に、情報発信者が発信する情報のキーワードが含まれ、あるキーワードについて疑問を呈しているような場合である。疑問は、「．．．は何か？」というように発信情報の中の用語、概念が不明である場合や、反証になるような事柄を挙げるような場合が含まれる。情報受信対象者の中に、発信情報に対する疑問を感じる人が存在することが、情報発信者または他の情報受信対象者にとって有益であり得るので、その行動を有益行動と判断する。
【００５７】
このような疑問は、例えば、情報受信対象者が情報端末に入力した文字列を分析して、キーワードと疑問形式を抽出することによって、検出することができる。情報端末の入力は、例えば、携帯電話によるメール、無線ＬＡＮを経由したチャットなどがある。また、情報受信対象者の発する音声を入力して音声認識し、認識した文字列からキーワードと疑問形式を抽出することによって、検出することも可能である。
【００５８】
ある情報受信対象者が、上述の疑問に対して解説する情報などを発信している場合も、有益行動と判断することができる。この場合も、その情報受信対象者が情報端末に入力した文字列や発話した内容などからキーワードを抽出し、情報受信対象者同士の関係などから疑問に対する回答であることを検出することによって、判断できる。
【００５９】
また例えば、情報受信対象者が情報端末などを用いて、発信情報に含まれるキーワードに関連する情報検索を行っている場合が挙げられる。情報検索しているということは、その情報受信対象者が疑問を持っていることを暗示し、また、検索した内容が情報発信者や他の情報受信対象者にとって有益であり得る。情報検索は、例えば、携帯電話または無線ＬＡＮなどを経由して、インターネットの検索エンジンにアクセスしていることによって検出できる。または、情報端末で電子辞書などを検索していることを検出してもよい。
【００６０】
有益行動情報対発信者提示部７は、例えば、発信情報のあるキーワードについて疑問が表出されたこと、その疑問について解説がなされたこと、または発信情報に関連して情報検索がなされたことやその検索結果などを、情報発信者に対して提示する。情報発信者に対する提示は、例えば、そばに備えられた情報端末の画面に表示したり、イヤホンなどを経由して音声などで通知することによって行う。
【００６１】
図７は、実施の形態３の情報発信者支援の動作の一例を示すフローチャートである。図６の発信情報検出部１、行動検出部２および行動解釈部３の動作は、図２に示す発信情報検出部１、行動検出部２および行動解釈部３の動作と同様である。
【００６２】
覚醒度判定部４１は、行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報から、情報受信対象者の意識の覚醒の度合いである覚醒度を判定する。覚醒度判定部４１は、判定した覚醒度を意識関与度判定部４４と行動有益度判定部４５に送る（図７のステップＣ１）。
【００６３】
情報注目度判定部４２は、行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報から、情報受信対象者が他者の話などの発信された情報に直接注目している度合いである情報注目度を判定する。情報注目度判定部４２は、判定した情報注目度を意識関与度判定部４４と行動有益度判定部４５に送る（ステップＣ２）。
【００６４】
行動関連度判定部４３は、発信情報検出部１から送られた情報発信者が発信した発信情報と、行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報から、情報受信対象者の行動が発信された情報に関連する度合いである行動関連度を判定する。行動関連度判定部４３は、判定した行動関連度を意識関与度判定部４４と行動有益度判定部４５に送る（ステップＣ３）。
【００６５】
意識関与度判定部４４は、覚醒度判定部４１から送られた情報受信対象者の覚醒度と、情報注目度判定部４２から送られた情報受信対象者の情報注目度と、行動関連度判定部４３から送られた情報受信対象者の行動関連度から、情報受信対象者の意識が発信された情報に関与しているかどうかを総合的に判断する度合いである意識関与度を判定する。意識関与度判定部４４は、判定した意識関与度を行動有益度判定部４５に送る（ステップＣ４）。
【００６６】
行動有益度判定部４５は、発信情報検出部１から送られた情報発信者が発信した発信情報と、行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報と、覚醒度判定部４１から送られた情報受信対象者の覚醒度と、情報注目度判定部４２から送られた情報受信対象者の情報注目度と、行動関連度判定部４３から送られた情報受信対象者の行動関連度と、意識関与度判定部４４から送られた情報受信対象者の意識関与度とから、情報受信対象者が行っている行動が情報発信者や他の情報受信対象者に対して有益である度合いを表す行動有益度を判定する。行動有益度判定部４５は、判定した行動有益度を有益行動情報対発信者提示部７に送る（ステップＣ５）。
【００６７】
有益行動情報対発信者提示部７は、行動有益度判定部４５から送られた情報受信対象者の行動有益度の情報を基に、上述のように発信情報のあるキーワードについて疑問が表出されたこと、その疑問について解説がなされたこと、または発信情報に関連して情報検索がなされたことやその検索結果などの、情報受信対象者による有益な行動の発生を情報発信者に対して提示する（ステップＣ６）。
【００６８】
なお、ステップＣ１、ステップＣ２、ステップＣ３はそれぞれ独立しており、並列して進めることが可能である。
【００６９】
以上説明したように、本実施の形態３の意識関与度測定装置１００では、行動有益度判定部４５が、覚醒度、情報注目度、行動関連度の３つの指標および、発信情報検出部１から送られた情報発信者が発信した発信情報と、行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報、意識関与度判定部４４により求められた情報受信対象者の意識関与度などの情報から、情報受信対象者の行動内容が情報発信者や他の情報受信対象者に有益である度合いである行動有益度を判定する。そのため、情報受信対象者による有益な行動の発生を情報発信者に伝達することができる。
【００７０】
（実施の形態４）
図８は、本発明の実施の形態４に係る意識関与度測定装置１００の構成例を示すブロック図である。実施の形態４では、情報受信対象者が行っている有益な行動の発生を、情報受信対象者に提示する。図８を参照すると、実施の形態４の意識関与度測定装置１００は、図６の構成と比べて、有益行動情報対発信者提示部７の代わりに有益行動情報対受信対象者提示部８を備える点で異なる。
【００７１】
有益行動情報対受信対象者提示部８は、行動有益度判定部４５から送られた情報受信対象者の行動有益度の情報を基に、情報受信対象者による有益な行動の発生を情報受信対象者に対して提示する。情報受信対象者に有益な行動は、実施の形態３で説明したものと同様である。
【００７２】
なお、本実施の形態は実施の形態１の発信者支援情報提示部５や実施の形態２の受信対象者警告部６、第３の形態の有益行動情報対発信者提示部７を追加で備えていてもよい。
【００７３】
以下に、図８の構成図および図２と図９のフローチャートを参照して本実施の形態の全体の動作について詳細に説明する。本形態の図８の発信情報検出部１、行動検出部２および行動解釈部３の動作は、図２に示す第１の形態の発信情報検出部１、行動検出部２および行動解釈部３の動作と同様である。
【００７４】
図９は図８の意識判定部４と有益行動情報対受信対象者提示部８の動作（情報受信対象者支援２）を表すフローチャートである。図９のステップＣ１〜Ｃ４は図７に示す実施の形態３の意識判定部４の動作のステップＣ１〜Ｃ４と同様である。
【００７５】
行動有益度判定部４５は、発信情報検出部１から送られた情報発信者が発信した発信情報と、行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報と、覚醒度判定部４１から送られた情報受信対象者の覚醒度と、情報注目度判定部４２から送られた情報受信対象者の情報注目度と、行動関連度判定部４３から送られた情報受信対象者の行動関連度と、意識関与度判定部４４から送られた情報受信対象者の意識関与度とから、情報受信対象者が行っている行動が情報発信者や他の情報受信対象者に対して有益である度合いを表す行動有益度を判定する。行動有益度判定部４５は、判定した行動有益度を有益行動情報対受信対象者提示部８に送る（ステップＣ５）。
【００７６】
有益行動情報対受信対象者提示部８は、行動有益度判定部４５から送られた情報受信対象者の行動有益度の情報を基に、情報受信対象者による有益な行動の発生を他の情報受信対象者に対して提示する（ステップＣ７）。
【００７７】
以上説明したように、本実施の形態４の意識関与度測定装置１００では、行動有益度判定部４５が、覚醒度、情報注目度、行動関連度の３つの指標および、発信情報検出部１から送られた情報発信者が発信した発信情報と、行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報、意識関与度判定部４４により求められた情報受信対象者の意識関与度などの情報から、情報受信対象者の行動内容が情報発信者や他の情報受信対象者に有益である度合いである行動有益度を判定する。そのため、情報受信対象者による有益な行動の発生を他の情報受信対象者に伝達することができる。
【００７８】
（実施の形態５）
図１０は、本発明の実施の形態５に係る意識関与度測定装置１００の構成例を示すブロック図である。実施の形態５では、情報受信対象者が行っている有益な行動を公開するよう促す情報を、情報受信対象者に対して提示する。図１０を参照すると、実施の形態５の意識関与度測定装置１００は、図６の構成と比べて、有益行動情報対発信者提示部７の代わりに有益行動情報公開催促部９を備える点で異なる。
【００７９】
有益行動情報公開催促部９は、行動有益度判定部４５から送られた情報受信対象者の行動有益度の情報を基に、有益な行動を発生させた情報受信対象者に対して、その有益な行動の内容を情報発信者や他の情報受信対象者に公開することを促す情報を表示する。
【００８０】
なお、本実施の形態は実施の形態１の発信者支援情報提示部５や実施の形態２の受信対象者警告部６、実施の形態３の有益行動情報対発信者提示部７、または実施の形態４の有益行動情報対受信対象者提示部８を追加で備えていてもよい。
【００８１】
以下に、図１０の構成図および図２と図１１のフローチャートを参照して本実施の形態の全体の動作について詳細に説明する。図１０の発信情報検出部１、行動検出部２および行動解釈部３の動作は、図２に示す第１の形態の発信情報検出部１、行動検出部２および行動解釈部３の動作と同様である。
【００８２】
図１１は図１０の意識判定部と有益行動情報公開催促部９の動作（情報受信対象者支援３）の一例を表すフローチャートである。図１１ステップＣ１〜Ｃ４は図７に示す第３の形態の意識判定部４の動作のステップＣ１〜Ｃ４と同様である。
【００８３】
行動有益度判定部４５は、発信情報検出部１から送られた情報発信者が発信した発信情報と、行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報と、覚醒度判定部４１から送られた情報受信対象者の覚醒度と、情報注目度判定部４２から送られた情報受信対象者の情報注目度と、行動関連度判定部４３から送られた情報受信対象者の行動関連度と、意識関与度判定部４４から送られた情報受信対象者の意識関与度とから、情報受信対象者が行っている行動が情報発信者や他の情報受信対象者に対して有益である度合いを表す行動有益度を判定する。行動有益度の判定は、実施の形態３で説明したものと同様である。行動有益度判定部４５は、判定した行動有益度を有益行動情報公開催促部９に送る（ステップＣ５）。
【００８４】
有益行動情報公開催促部９は、行動有益度判定部４５から送られた情報受信対象者の行動有益度の情報を基に、有益な行動を発生させた情報受信対象者に対して、その有益な行動の情報を情報発信者や他の情報受信対象者に公開するよう催促する（ステップＣ８）。
【００８５】
以上説明したように、本実施の形態５の意識関与度測定装置１００では、行動有益度判定部４５が、覚醒度、情報注目度、行動関連度の３つの指標および、発信情報検出部１から送られた情報発信者が発信した発信情報と、行動検出部２から送られた情報受信対象者の行動情報と、行動解釈部３から送られた情報受信対象者の行動意味情報、意識関与度判定部４４により求められた情報受信対象者の意識関与度などの情報から、情報受信対象者の行動内容が情報発信者や他の情報受信対象者に有益である度合いを表す行動有益度を判定する。そのため、有益な行動を発生させた情報受信対象者に対し、その有益な行動の情報を情報発信者や他の情報受信対象者に公開するよう催促することができる。
【００８６】
（具体例１）
以下に、具体的な例を用いて本発明の実施の形態の動作を説明する。図１２は具体例１の使用状況を示す図である。具体例１は本発明の実施の形態１を講演会場で使用した場合の具体的な動作例である。具体例１においては、情報発信者は講演を行っている講演者であり、情報受信対象者は講演を聴いている聴講者である。
【００８７】
具体例１において、図１の発信情報検出部１は講演者の発生する音声を収録するマイクロフォンＡ、およびそれを音声認識してテキスト化しキーワードを抽出する手段である。図１の行動検出部２は聴講者の画像を収録するカメラ、聴講者が発生する音声を収録するマイクロフォンＢ、聴講者の生体情報として聴講者の脈拍と体温を取得するセンサおよび聴講者が操作するノートパソコンの操作を逐次取得するプログラムである。図１の行動解釈部３は聴講者の画像から聴講者の注視先を認識する手段、および聴講者の音声を認識してテキスト化しそこからキーワードを抽出する手段である。発信者支援情報提示部５は講演者に向けて準備されている画面であるとする。
【００８８】
図１の覚醒度判定部４１は、例えば、聴講者の脈拍と体温の値が一定以上であるか否かで聴講者の覚醒度を判定する。
【００８９】
図１の情報注目度判定部４２は、例えば、聴講者の視線が講演者の方を向いているか否かで聴講者の情報注目度を判定する。
【００９０】
図１の行動関連度判定部４３は、例えば、聴講者がノートパソコンで行った操作により開かれたファイル中のテキストに含まれる講演内容のキーワードの量と聴講者の発話に含まれる講演内容のキーワードの量から聴講者の行動関連度を判定する。
【００９１】
図１の意識関与度判定部４４は覚醒度と情報注目度と行動関連度の総和から聴講者の意識関与度を判定する。
【００９２】
なお、具体例１においては、行動検出部２および行動解釈部３は各聴講者に対して用意されている。
【００９３】
具体例１において、発信情報検出部１は聴講者の発生する音声をマイクロフォンＡから取得し、キーワードを検出して意識判定部４に送る（図２のステップＡ１）。
【００９４】
行動検出部２はカメラから聴講者の画像を、マイクロフォンＢから聴講者の発生する音声を、センサから聴講者の脈拍と体温を、ノートパソコンから聴講者の操作情報をそれぞれ取得し、聴講者の行動情報として行動解釈部３と意識判定部４へ送る（ステップＡ２）。
【００９５】
行動解釈部３は、行動検出部２から送られた聴講者の行動情報を受け取り、聴講者の画像から聴講者の注視先を、聴講者の発生する音声からキーワードをそれぞれ検出して聴講者の行動意味情報として意識判定部４へ送る（ステップＡ３）。
【００９６】
なお、本具体例においてもステップＡ１、ステップＡ２〜Ａ３はそれぞれ独立しており、並列して進めることが可能である。
【００９７】
覚醒度判定部４１は行動検出部２から送られた聴講者の行動情報と、行動解釈部３から送られた聴講者の行動意味情報とを受け取り、聴講者の脈拍と体温の値が一定以上であるか否かで情報受信対象者の意識の覚醒の度合いである聴講者の覚醒度を判定して意識関与度判定部４４に送る（図３のステップＢ１）。
【００９８】
情報注目度判定部４２は行動検出部２から送られた聴講者の行動情報と、行動解釈部３から送られた聴講者の行動意味情報とを受け取り、聴講者の視線が講演者の方を向いているか否かで聴講者が発信された情報に直接注目している度合いである情報注目度を判定して意識関与度判定部４４に送る（ステップＢ２）。
【００９９】
行動関連度判定部４３は発信情報検出部１から送られた講演者が発信した発信情報と、行動検出部２から送られた聴講者の行動情報と、行動解釈部３から送られた聴講者の行動意味情報とを受け取り、聴講者がノートパソコンで行った操作により開かれたファイル中のテキストに含まれる講演内容のキーワードの量と聴講者の発話に含まれる講演内容のキーワードの量から情報受信対象者の行動が発信された情報に関連する度合いである行動関連度を判定して意識関与度判定部４４に送る（ステップＢ３）。
【０１００】
意識関与度判定部４４は、覚醒度判定部４１から送られた覚醒度と、情報注目度判定部４２から送られた情報注目度と、行動関連度判定部４３から送られた行動関連度を受け取り、覚醒度と情報注目度と行動関連度の総和から聴講者の意識が講演に関与しているかどうかを総合的に判断する度合いである意識関与度を判定して発信者支援情報提示部５に送る（ステップＢ４）。
【０１０１】
発信者支援情報提示部５は、意識判定部４から送られた聴講者の意識関与度の情報を基に講演者を支援する情報を講演者に対して提示する（ステップＢ５）。
【０１０２】
図１３は具体例１の発信者支援情報提示部５である画面の表示例を示したものである。ここでは、発信者支援情報として意識関与度が低下した聴講者を、カメラで撮影した画像を用いて表示している。
【０１０３】
なお、具体例１においても、ステップＢ１、ステップＢ２、ステップＢ３はそれぞれ独立しており、並列して進めることが可能である。
【０１０４】
本具体例では、聴講者がノートパソコンで行った操作により開かれたファイル中のテキストに含まれる講演内容のキーワードの量と、聴講者の発話に含まれる講演内容のキーワードの量から、聴講者の行動が講演内容に関連する度合いである行動関連度を判定し、意識関与度判定部が覚醒度と情報注目度に加えて前記行動関連度を用いて聴講者の意識が講演内容に関与しているかどうかを総合的に判断する度合いである意識関与度を判定するように構成されている。そのため、聴講者が講演者に直接注目せずに講演内容に関連する会話やノートパソコンを用いた講演内容に関する情報の調査などの、講演内容に関連していても講演者が想定していない行動を行っている場合でも、聴講者の意識は発信された情報に関与していると判定し、その判定を基に講演者を支援する情報を提示することができる。
【０１０５】
本具体例における行動情報検出部２が生体情報を取得するためのセンサとしては、以下のような情報を取得するセンサを用いてもよい。
- 呼吸、心電、筋電、脳波、血流、脈拍、瞳孔、体温、姿勢(画像、加速度センサ、圧力センサ等で取得)
【０１０６】
本具体例における覚醒度判定部４１は、以下のような基準で覚醒度の判定を行ってもよい。
- 眠っていないか：呼吸、心電、筋電、瞳孔、脳波、脈拍、体温等の情報を基に判定
- うつ伏せになっていないか：注視先や姿勢等の情報を基に判定
- 頭は働いているか：脳波等の情報を基に判定
【０１０７】
本具体例における情報注目度判定部４２は、以下のような基準で情報注目度の判定を行ってもよい。
- 話者やスライドを注視しているか：注視先、操作情報(遠隔講演の場合)等の情報を基に判定
- 話をしていないか(静聴しているか)：発話等の情報を基に判定
- 生体情報が話者の話のリズムと同調しているか：呼吸、筋電等の情報を基に判定
- 配布資料(会議のために準備されたコンテンツ)を見ているか：注視先、操作情報等の情報を基に判定
【０１０８】
本具体例における行動関連度判定部４３は、以下のような基準で行動関連度の判定を行ってもよい。
- 注視先の情報受信対象者の意識関与度が高い：注視先等の情報を基に判定
- 発話内容に講演の話題との関連キーワードが頻出：発話等の情報を基に判定
キーワードはオフラインであらかじめ決めたものでもリアルタイムの講演内容から取得したものを用いてもよい。
- 発話の形態が質問かどうか：発話等の情報を基に判定
- 発話内容に会議の主要参加者のプロフィールとの関連キーワードが頻出：発話等の情報を基に判定
- 講演との関連度が高いアプリケーションの使用：操作情報等の情報を基に判定
アプリケーションの関連度はオフラインであらかじめ決めておく。
- 講演との関連度が高いファイルの使用：操作情報等の情報を基に判定
ファイルの関連度の例としてはオフラインで決められたファイルにあらかじめ関連度を振る、ファイルに含まれる講演内容のキーワード量を用いる、などが挙げられる。
- 会議参加者のキーボードによる入力語彙：操作情報等の情報を基に判定
会議のメモをとっている場合などが挙げられる。
【０１０９】
本具体例における意識関与度判定部４４は以下のような基準に基づき意識関与度の判定を行ってもよい。
- 覚醒度が低い場合はそもそも頭が働いていないので意識関与度は低く判定する
- 覚醒度が充分高くても情報注目度、行動関連度が共に低い場合は意識が講演以外のことに向いているので意識関与度は低く判定する
- 覚醒度が充分高く、情報注目度も高い場合は講演者やスライドに意識が向いているので意識関与度は高く判定する
- 覚醒度が充分高くて情報注目度が低いが、行動関連度が高い場合は、講演者・スライドに注目しておらずとも講演と関係ある行動を行っているので意識関与度は高く判定する
- 覚醒度が充分高くて情報注目度が低いが、行動関連度が高い状態が長く続く場合は、講演と関係ある行動を行っていても講演に対する意識が徐々に低下していっているとも考えられるので、意識関与度が徐々に低下していったように判定する。
【０１１０】
本具体例における発信者支援情報提示部５は、以下のような情報の提示を行ってもよい。
- 各聴講者の覚醒度、情報注目度、行動関連度、意識関与度
それらの各パラメータ表示形式の例として、数字表示や各種グラフ表示(折れ線グラフ、棒グラフ等)などが挙げられる。
表示は全聴講者について行ってもよいし、講演者が指定した特定の聴講者やこれらのパラメータが特定のパターンを示す聴講者(特定のパラメータが著しく低下している者等)に絞って行ってもよい。
- 休憩を入れる、話題を変える等の具体的な講演者に対する行動指示
講演者の各パラメータを過去の講演時のものと照合するなどし、最適と思われる行動を勧める等を行う。
- 聴講者の多数の意識関与度が低下した際に講演者に簡単な警告を表示
【０１１１】
本具体例における発信者支援情報提示部５は、以下のような手段で情報の提示を行ってもよい。
- スピーカー等による音声による提示
- 画面による画像やテキストを用いた提示
- サイレン、ベル、ビープ音、ランプ等による警告的な表示
【０１１２】
（具体例２）
具体例２は本発明の実施の形態２を遠隔学習で使用した場合の具体的な動作例である。具体例２においては、情報発信者は遠隔学習の教師であり、情報受信対象者は遠隔学習の学習者である。
【０１１３】
具体例２において、図４の発信情報検出部１は、教師の発生する音声を収録するマイクロフォンＡ、教師の音声および教師が教師用端末により学習者へと発信する学習用資料からキーワードを検出する手段から構成されるとする。
【０１１４】
図４の行動検出部２は、学習者の様子を収めているカメラ、学習者が発生する音声を収録するマイクロフォンＢ、学習者が操作する学習端末の操作を逐次取得するプログラム、学習者の生体情報として学習者の脳波を取得するセンサから構成されるとする。
【０１１５】
図４の行動解釈部３は、学習者の画像から学習者の注視先を認識する手段、学習者の音声からキーワードを検出する手段、学習者の操作情報から学習者の操作内容が学習コンテンツ内で行われているか否かの判定を行う手段から構成されるとする。
【０１１６】
図４の受信対象者警告部６は学習者が使用している学習端末であるとする。
【０１１７】
また、図４の覚醒度判定部４１は、学習者の脳波が一定以上に活発か否かで学習者の覚醒度を判定する。
【０１１８】
図４の情報注目度判定部４２は、学習者の視線が学習端末の方を向いているか否かおよび一定以上の音声を発していないかで学習者の情報注目度を判定する。
【０１１９】
図４の行動関連度判定部４３は、学習者が学習端末で行った操作により入力されたテキストに含まれる学習内容のキーワードの量から学習者の行動関連度を判定する。
【０１２０】
図４の意識関与度判定部４４は覚醒度と情報注目度と行動関連度の総和から聴講者の意識関与度を判定する。
【０１２１】
受信対象者警告部６は意識関与度の低下している学習者に対し、もっと集中して学習するよう警告メッセージを表示する。
【０１２２】
なお、具体例２においては、行動検出部２および行動解釈部３および受信対象者警告部６は各学習者に対して用意されている。
【０１２３】
図１４は具体例２の使用状況を示す図である。具体例２において、発信情報検出部１は、マイクロフォンＢから教師の発話内容を、教師用端末から学習用資料をそれぞれ取得して、それぞれから学習内容のキーワードを取得し意識判定部４に送る（図２のステップＡ１）。
【０１２４】
行動検出部２は、カメラから学習者の画像を、マイクロフォンＢから学習者の発生する音声を、学習端末から学習者による捜査の情報を、センサから学習者の脳波をそれぞれ取得し、行動情報として行動解釈部３と意識判定部４に送る（ステップＡ２）。
【０１２５】
行動解釈部３は、学習者の画像から学習者の注視先を、学習者の音声からキーワードを、学習者の操作情報から学習者の操作内容が学習コンテンツ内で行われているか否かの判定結果をそれぞれ取得し、行動意味情報として行動解釈部４と意識判定部４に送る（ステップＡ３）。
【０１２６】
なお、具体例２においてもステップＡ１、ステップＡ２〜Ａ３はそれぞれ独立しており、並列して進めることが可能である。
【０１２７】
覚醒度判定部４１は行動検出部２から送られた学習者の行動情報と、行動解釈部３から送られた学習者の行動意味情報とを受け取り、学習者の脳波が一定以上に活発か否かで意識の覚醒の度合いである学習者の覚醒度を判定して意識関与度判定部４に送る（図５のステップＢ１）。
【０１２８】
情報注目度判定部４２は行動検出部２から送られた学習者の行動情報と、行動解釈部３から送られた学習者の行動意味情報とを受け取り、学習者の視線が学習端末の方を向いているか否かおよび一定以上の音声を発していないかで学習者が発信された情報に直接注目している度合いである情報注目度を判定して意識関与度判定部４に送る（ステップＢ２）。
【０１２９】
行動関連度判定部４３は発信情報検出部１から送られた教師が発信した発信情報と、行動検出部２から送られた学習者の行動情報と、行動解釈部３から送られた学習者の行動意味情報とを受け取り、学習者が学習端末で行った操作により入力されたテキストに含まれる学習内容のキーワードの量から情報受信対象者の行動が発信された情報に関連する度合いである行動関連度を判定して意識関与度判定部４４に送る（ステップＢ３）。
【０１３０】
意識関与度判定部４４は、覚醒度判定部４１から送られた覚醒度と情報注目度判定部４２から送られた情報注目度と行動関連度判定部４３から送られた行動関連度を受け取り、覚醒度と情報注目度と行動関連度の総和から情報受信対象者の意識が発信された情報に関与しているかどうかを総合的に判断する度合いである意識関与度を判定して受信対象者警告部６に送る（ステップＢ４）。
【０１３１】
受信対象者警告部６は意識判定部４から送られた意識関与度の情報を基に、意識関与度の低下している学習者に対し、もっと集中して学習するよう警告メッセージを表示する（ステップＢ６）。
【０１３２】
なお、具体例２においても、ステップＢ１、ステップＢ２、ステップＢ３はそれぞれ独立しており、並列して進めることが可能である。
【０１３３】
具体例２の行動検出部１、行動解釈部２、覚醒度判定部４１、情報注目度判定部４２、行動関連度判定部４３、意識関与度判定部４４としては、具体例１の説明で列挙したようなバリエーションを考慮してもよい。
【０１３４】
本具体例における受信対象者警告部６は、以下のような情報の提示をもって情報受信対象者に警告を行ってもよい。
- 学習内容に集中するような単純な警告
- 情報受信対象者自身の覚醒度、情報注目度、行動関連度、意識関与度の各パラメータ
表示形式の例として、数字表示や各種グラフ表示(折れ線グラフ、棒グラフ等)などが挙げられる。
- 休憩を入れる、学習課題を変える等の具体的な学習者に対する行動指示
学習者の各パラメータを過去の学習時のものと照合するなどし、最適と思われる行動を勧める等が挙げられる。
【０１３５】
本具体例における受信対象者警告部６は、以下のような手段で情報受信対象者に警告を行ってもよい。
- スピーカー等による音声による提示
- 画面による画像やテキストを用いた提示
- サイレン、ベル、ビープ音、ランプ等による警告的な表示
【０１３６】
（具体例３）
具体例３は本発明の実施の形態３をＴＶによる番組視聴で使用した場合の具体的な動作例である。具体例３においては、情報発信者は番組製作者であり、情報受信対象者は番組の視聴者である。
【０１３７】
具体例３において、図６の発信情報検出部１は、番組の音声を認識してキーワードを検出する手段および番組制作者が手動で番組のキーワードを入力する手段から構成されるとする。
【０１３８】
図６の行動検出部２は、視聴者の様子を収めているカメラ、視聴者が発生する音声を収録するマイクロフォン、視聴者が操作するリモコンの操作を逐次取得するプログラム、視聴者の生体情報として視聴者の心拍と視聴位置を取得するセンサから構成されるとする。
【０１３９】
図６の行動解釈部３は、視聴者の画像から視聴者の注視先を検出する手段、視聴者の発生する音声を認識しキーワードおよび「好き」「良い」「悪い」などの番組内容を評価する語の検出を行う手段、視聴者の視聴位置がＴＶから近いか否か判定する手段から構成されるとする。
【０１４０】
有益行動情報対発信者提示部７は番組制作者向けの情報表示画面であるとする。
【０１４１】
図６の覚醒度判定部４１は、視聴者の心拍が一定以上に活発か否かおよび視聴者のテレビからの距離が一定以内であるか否かで学習者の覚醒度を判定する。
【０１４２】
図６の情報注目度判定部４２は、視聴者の視線がテレビの方を向いているか否かで視聴者の情報注目度を判定する。
【０１４３】
図６の行動関連度判定部４３は、視聴者の発話テキストに含まれる番組内容のキーワードの量から視聴者の行動関連度を判定する。
【０１４４】
図６の意識関与度判定部４４は覚醒度と情報注目度と行動関連度の総和から視聴者の意識関与度を判定する。
【０１４５】
図６の行動有益度判定部４５は、視聴者の意識関与度と行動関連度および、視聴者の発話テキストに「好き」「良い」「悪い」などの番組内容を評価する語が出現するか否かで視聴者の行動有益度を判定する。
【０１４６】
図６の有益行動情報対発信者提示部７は、番組制作者に行動有益度が高いと判定された視聴者とその視聴者が発した番組評価の発言を提示する。
【０１４７】
なお、具体例３においても、行動検出部２および行動解釈部３は各視聴者に対して用意されている。
【０１４８】
図１５は具体例３の使用状況を示す図である。具体例３において、発信情報検出部１は、番組の音声認識結果および番組制作者による手動入力から番組内容のキーワードを取得し、意識判定部４に送る（図２のステップＡ１）。
【０１４９】
行動検出部２は、カメラから視聴者の画像、マイクロフォンから視聴者が発生する音声、リモコンから視聴者が操作情報、センサから視聴者の生体情報として視聴者の心拍と視聴位置をそれぞれ取得して視聴者の行動情報として行動解釈部３および意識判定部４に送る（ステップＡ２）。
【０１５０】
行動解釈部３は、視聴者の画像から視聴者の注視先を、視聴者の発生する音声を認識しキーワードおよび「好き」「良い」「悪い」などの番組内容を評価する語を、視聴者の視聴位置がＴＶから近いか否か判定結果をそれぞれ取得して視聴者の行動意味情報として意識判定部４に送る（ステップＡ３）。
【０１５１】
なお、具体例３においてもステップＡ１、ステップＡ２〜Ａ３はそれぞれ独立しており、並列して進めることが可能である。
【０１５２】
覚醒度判定部４１は行動検出部２から送られた視聴者の行動情報と、行動解釈部３から送られた視聴者の行動意味情報とを受け取り、視聴者の心拍が一定以上に活発か否かおよび視聴者のテレビからの距離が一定以内であるか否かで意識の覚醒の度合いである学習者の覚醒度を判定して意識関与度判定部４４と行動有益度判定部４５に送る（図７のステップＣ１）。
【０１５３】
情報注目度判定部４２は行動検出部２から送られた視聴者の行動情報と、行動解釈部３から送られた視聴者の行動意味情報とを受け取り、視聴者の視線がテレビの方を向いているか否かで視聴者が発信された情報に直接注目している度合いである情報注目度を判定して意識関与度判定部４４と行動有益度判定部４５に送る（ステップＣ２）。
【０１５４】
行動関連度判定部４３は発信情報検出部１から送られた番組製作者が発信した発信情報と、行動検出部２から送られた視聴者の行動情報と、行動解釈部３から送られた視聴者の行動意味情報とを受け取り、視聴者の発話テキストに含まれる番組内容のキーワードの量から情報受信対象者の行動が発信された情報に関連する度合いである行動関連度を判定して意識関与度判定部４４と行動有益度判定部４５に送る（ステップＣ３）。
【０１５５】
意識関与度判定部４４は、覚醒度判定部４１から送られた覚醒度と情報注目度判定部４２から送られた情報注目度と行動関連度判定部４３から送られた行動関連度を受け取り、覚醒度と情報注目度と行動関連度の総和から情報受信対象者の意識が発信された情報に関与しているかどうかを総合的に判断する度合いである意識関与度を判定して行動有益度判定部４５に送る（ステップＣ４）。
【０１５６】
行動有益度判定部４５は、視聴者の意識関与度と行動関連度および、視聴者の発話テキストに「好き」「良い」「悪い」などの番組内容を評価する語が出現するか否かで視聴者の行動有益度を判定し有益行動情報対発信者提示部７に送る（ステップＣ５）。
【０１５７】
有益行動情報対発信者提示部７は、番組制作者に行動有益度が高いと判定された視聴者とその視聴者が発した番組評価の発言を提示する（ステップＣ６）。
【０１５８】
図１６は具体例３における有益行動情報対発信者提示部７である情報表示画面の表示例である。ここでは、有益行動情報対発信者提示部７は有益行動を行った視聴者のリストをカメラで撮影した画像を用いて表示し、その下に視聴者が発した発言中のキーワードと番組内容を評価する語を表示している。
【０１５９】
なお、具体例３においても、ステップＣ１、ステップＣ２、ステップＣ３はそれぞれ独立しており、並列して進めることが可能である。
【０１６０】
なお、本具体例の行動検出部２、覚醒度判定部４１、情報注目度判定部４２、行動関連度判定部４３、意識関与度判定部４４としては、具体例１および具体例２の説明で列挙したようなバリエーションを考慮してもよい。
【０１６１】
本具体例の行動有益度判定部４５は以下のような基準で行動有益度の判定を行ってもよい。
- 関連行動の長時間の継続
（情報注目度は低くとも）行動関連度の高い状態が長時間続いた場合、またはＰＣ（パーソナルコンピュータ）などでの関連話題の調査や会議参加者同士のローカルな討議などが長引いた場合
- 新規トピックの出現
会話や操作で、発信された情報に未だ現れていないトピックが新規に出現した場合
- 新たな質問
視聴者同士や視聴者が視聴者場所で行っている質疑の情報が発生した場合
【０１６２】
有益行動情報対発信者提示部７は、情報発信者に以下のような情報を提示してもよい。
- 行動有益度が高い情報の内容
画像や音声、テキストで行動有益度が高い情報を提示してもよいし、行動全体を提示してもよいし新規出現部分などの特に行動有益度が高い部分のみを提示してもよい。
- 行動有益度が高い情報の発生
上記のように内容を伝達せずとも、メッセージやランプ、ビープ音などで有益度の高い行動が発生したことだけを伝達してもよい(どの視聴者が発声させたかも伝達してもしなくてもよい)。
【０１６３】
（具体例４）
具体例４は本発明の実施の形態４を遠隔会議で使用した場合の具体的な動作例である。具体例４においては、情報発信者は発言を行っている会議参加者であり、情報受信対象者は他の会議参加者である。
【０１６４】
具体例４において、図８の発信情報検出部１は発言者の発生する音声を収録するマイクロフォンＡおよび発言者の音声を認識してキーワードを検出する手段と発言者の遠隔会議端末への入力テキストからキーワードを検出する手段から構成されるとする。
【０１６５】
図８の行動検出部２は会議参加者の様子を収めているカメラ、会議参加者が発生する音声を収録するマイクロフォンＢ、会議参加者が操作する遠隔会議端末の操作を逐次取得するプログラム、会議参加者の生体情報として会議参加者の脈拍を取得するセンサから構成されるとする。
【０１６６】
図８の行動解釈部３は会議参加者の画像から会議参加者の注視先を検出する手段、会議参加者の発生する音声からキーワードを検出する手段、会議参加者の遠隔会議端末への入力テキストからキーワードを検出する手段、会議参加者の音声および遠隔会議端末への入力テキストに新規質問事項が含まれるか否か判定する手段から構成されるとする。
【０１６７】
有益行動情報対受信対象者提示部８は会議参加者が使用している遠隔会議端末の画面であるとする。
【０１６８】
また、図８の覚醒度判定部４１は、会議参加者の脈拍が一定以上に活発か否かで会議参加者の覚醒度を判定する。
【０１６９】
図８の情報注目度判定部４２は、会議参加者の視線が遠隔会議端末の画面中の発言者の画像の方を向いているか否かで会議参加者の情報注目度を判定する。
【０１７０】
図８の行動関連度判定部４３は、会議参加者の発話テキストおよび遠隔会議端末への入力テキストに含まれる会議内容のキーワードの量から会議参加者の行動関連度を判定する。
【０１７１】
図８の意識関与度判定部４４は覚醒度と情報注目度と行動関連度の総和から会議参加者の意識関与度を判定する。
【０１７２】
図８の行動有益度判定部４５は、会議参加者の意識関与度と行動関連度および、会議参加者の発話テキストおよび遠隔会議端末への入力テキストに会議に関する新規質問事項が含まれるか否かで視聴者の行動有益度を判定する。
【０１７３】
図８の有益行動情報対受信対象者提示部８は、会議参加者全員に行動有益度が高いと判定された会議参加者とその会議参加者が発した新規質問事項の内容を提示する。
【０１７４】
なお、本具体例においては、行動検出部２および行動解釈部３と有益行動情報対受信対象者提示部８は各会議参加者に対して用意されている。
【０１７５】
図１７は具体例４の使用状況を示す図である。具体例４において、発信情報検出部１は、発言者の音声と遠隔会議端末への入力テキストからキーワードを検出し意識判定部４に送る（図２のステップＡ１）。
【０１７６】
行動検出部２はカメラから会議参加者の画像を、マイクロフォンＢから会議参加者が発生する音声を、遠隔会議端末から会議参加者が操作情報を、センサから生体情報として会議参加者の脈拍をそれぞれ取得し会議参加者の行動情報として行動解釈部３と意識判定部４に送る（ステップＡ２）。
【０１７７】
行動解釈部３は、会議参加者の画像から会議参加者の注視先を、会議参加者の発生する音声および会議参加者の遠隔会議端末への入力テキストからキーワードを、会議参加者の音声および遠隔会議端末への入力テキストから新規質問事項が含まれるか否かの判定結果をそれぞれ検出し、会議参加者の行動意味情報として意識判定部４に送る（ステップＡ３）
【０１７８】
なお、具体例４においてもステップＡ１、ステップＡ２〜Ａ３、はそれぞれ独立しており、並列して進めることが可能である。
【０１７９】
覚醒度判定部４１は行動検出部２から送られた会議参加者の行動情報と、行動解釈部３から送られた会議参加者の行動意味情報とを受け取り、会議参加者の心拍が一定以上に活発か否かで意識の覚醒の度合いである会議参加者の覚醒度を判定して、意識関与度判定部４４と行動有益度判定部４５に送る。（図９のステップＣ１）。
【０１８０】
情報注目度判定部４２は行動検出部２から送られた会議参加者の行動情報と、行動解釈部３から送られた会議参加者の行動意味情報とを受け取り、会議参加者の視線が遠隔会議端末の画面中の発言者の画像の方を向いているか否かで会議参加者が発信された情報に直接注目している度合いである情報注目度を判定して意識関与度判定部４４と行動有益度判定部４５に送る（ステップＣ２）。
【０１８１】
行動関連度判定部４３は発信情報検出部１から送られた発言者が発信した発信情報と、行動検出部２から送られた会議参加者の行動情報と、行動解釈部３から送られた会議参加者の行動意味情報とを受け取り、会議参加者の発話テキストおよび遠隔会議端末への入力テキストに含まれる会議内容のキーワードの量から会議参加者の行動が発信された情報に関連する度合いである行動関連度を判定して意識関与度判定部４４と行動有益度判定部４５に送る（ステップＣ３）。
【０１８２】
意識関与度判定部４４は、覚醒度判定部４１から送られた覚醒度と情報注目度判定部４２から送られた情報注目度と行動関連度判定部４３から送られた行動関連度を受け取り、覚醒度と情報注目度と行動関連度の総和から情報受信対象者の意識が発信された情報に関与しているかどうかを総合的に判断する度合いである意識関与度を判定して行動有益度判定部４５に送る（ステップＣ４）。
【０１８３】
行動有益度判定部４５は、会議参加者の意識関与度と行動関連度および、会議参加者の発話テキストおよび遠隔会議端末への入力テキストに会議に関する新規質問事項が含まれるか否かで視聴者の行動有益度を判定し有益行動対受信対象者提示部８に送る。（ステップＣ５）。
【０１８４】
有益行動情報対受信対象者提示部８は、会議参加者全員に行動有益度が高いと判定された会議参加者とその会議参加者が発した新規質問事項の内容を提示する（ステップＣ７）。
【０１８５】
図１８は具体例４における有益行動情報対受信対象者提示部８である遠隔会議端末の画面の表示例である。ここでは、有益行動情報対受信対象者提示部８は有益行動を行った会議参加者のリストをカメラで撮影した画像を用いて表示し、その下に会議参加者が発した新規質問事項を表示している。
【０１８６】
なお、具体例４においても、ステップＣ１、ステップＣ２、ステップＣ３はそれぞれ独立しており、並列して進めることが可能である。
【０１８７】
なお、本具体例の行動検出部２、覚醒度判定部４１、情報注目度判定部４２、行動関連度判定部４３、意識関与度判定部４４としては、具体例１ないし具体例３の説明で列挙したようなバリエーションを考慮してもよい。
【０１８８】
本具体例の行動有益度判定部４５は具体例３のようなバリエーションを考慮してもよい。有益行動情報対受信対象者提示部８は、具体例３の有益行動情報対発信者提示部７のようなバリエーションを考慮してもよい。
【０１８９】
（具体例５）
具体例５は本発明の実施の形態５を遠隔会議で使用した場合の具体的な動作例である。具体例５においては、情報発信者は発言を行っている会議参加者であり、情報受信対象者は他の会議参加者である。
【０１９０】
具体例５において、図１０の発信情報検出部１は発言者の発生する音声を収録するマイクロフォンＡおよび発言者の音声を認識してキーワードを検出する手段と発言者の遠隔会議端末への入力テキストからキーワードを検出する手段から構成されるとする。
【０１９１】
図１０の行動検出部２は会議参加者の様子を収めているカメラ、会議参加者が発生する音声を収録するマイクロフォンＢ、会議参加者が操作する遠隔会議端末の操作を逐次取得するプログラム、会議参加者の生体情報として会議参加者の脈拍を取得するセンサから構成されるとする。
【０１９２】
図１０の行動解釈部３は会議参加者の画像から会議参加者の注視先を検出する手段、会議参加者の発生する音声からキーワードを検出する手段、会議参加者の遠隔会議端末への入力テキストからキーワードを検出する手段、会議参加者の音声および遠隔会議端末への入力テキストに新規質問事項が含まれるか否か判定する手段から構成されるとする。
【０１９３】
具体例５において、図１０の有益行動情報公開催促部９は会議参加者が使用している遠隔会議端末の画面であるとする。
【０１９４】
また、図１０の覚醒度判定部４１は、会議参加者の脈拍が一定以上に活発か否かで会議参加者の覚醒度を判定する。
【０１９５】
図１０の情報注目度判定部４２は、会議参加者の視線が遠隔会議端末の画面中の発言者の画像の方を向いているか否かで会議参加者の情報注目度を判定する。
【０１９６】
図１０の行動関連度判定部４３は、会議参加者の発話テキストおよび遠隔会議端末への入力テキストに含まれる会議内容のキーワードの量から会議参加者の行動関連度を判定する。
【０１９７】
図１０の意識関与度判定部４４は覚醒度と情報注目度と行動関連度の総和から視聴者の意識関与度を判定する。
【０１９８】
図１０の行動有益度判定部４５は、会議参加者の意識関与度と行動関連度および、会議参加者の発話テキストおよび遠隔会議端末への入力テキストに会議に関する新規質問事項が含まれるか否かで視聴者の行動有益度を判定する。
【０１９９】
図１０の有益行動情報公開催促部９は、行動有益度が高いと判定された会議参加者に、その会議参加者が行った新規質問事項を遠隔会議場で公開するよう催促するメッセージを提示する。
【０２００】
なお、具体例５においても、この行動検出部２および行動解釈部３および有益行動情報公開催促部９は各会議参加者に対して用意されている。
【０２０１】
具体例５の使用状況を示す図は、具体例４と同様に図１７である。具体例５において、発信情報検出部１は、発言者の音声と遠隔会議端末への入力テキストからキーワードを検出し意識判定部４に送る（図２のステップＡ１）。
【０２０２】
行動検出部２はカメラから会議参加者の画像を、マイクロフォンＢから会議参加者が発生する音声を、遠隔会議端末から会議参加者が操作情報を、センサから生体情報として会議参加者の脈拍をそれぞれ取得し会議参加者の行動情報として行動解釈部３と意識判定部４に送る（ステップＡ２）。
【０２０３】
行動解釈部３は、会議参加者の画像から会議参加者の注視先を、会議参加者の発生する音声および会議参加者の遠隔会議端末への入力テキストからキーワードを、会議参加者の音声および遠隔会議端末への入力テキストから新規質問事項が含まれるか否かの判定結果をそれぞれ検出し、会議参加者の行動意味情報として意識判定部４に送る（ステップＡ３）。
【０２０４】
なお、具体例５においてもステップＡ１、ステップＡ２〜Ａ３、はそれぞれ独立しており、並列して進めることが可能である。
【０２０５】
覚醒度判定部４１は行動検出部２から送られた会議参加者の行動情報と、行動解釈部３から送られた会議参加者の行動意味情報とを受け取り、会議参加者の心拍が一定以上に活発か否かで意識の覚醒の度合いである学習者の覚醒度を判定して、意識関与度判定部４４と行動有益度判定部４５に送る（図１１のステップＣ１）。
【０２０６】
情報注目度判定部４２は行動検出部２から送られた会議参加者の行動情報と、行動解釈部３から送られた会議参加者の行動意味情報とを受け取り、会議参加者の視線が遠隔会議端末の画面中の発言者の画像の方を向いているか否かで会議参加者が発信された情報に直接注目している度合いである情報注目度を判定して意識関与度判定部４４と行動有益度判定部４５に送る（ステップＣ２）。
【０２０７】
また、行動関連度判定部４３は発信情報検出部１から送られた発言者が発信した発信情報と、行動検出部２から送られた会議参加者の行動情報と、行動解釈部３から送られた会議参加者の行動意味情報とを受け取り、会議参加者の発話テキストおよび遠隔会議端末への入力テキストに含まれる会議内容のキーワードの量から会議参加者の行動が発信された情報に関連する度合いである行動関連度を判定して意識関与度判定部４４と行動有益度判定部４５に送る（ステップＣ３）。
【０２０８】
意識関与度判定部４４は、覚醒度判定部４１から送られた覚醒度と情報注目度判定部４２から送られた情報注目度と行動関連度判定部４３から送られた行動関連度を受け取り、覚醒度と情報注目度と行動関連度の総和から情報受信対象者の意識が発信された情報に関与しているかどうかを総合的に判断する度合いである意識関与度を判定して行動有益度判定部４５に送る（ステップＣ４）。
【０２０９】
行動有益度判定部４５は、会議参加者の意識関与度と行動関連度および、会議参加者の発話テキストおよび遠隔会議端末への入力テキストに会議に関する新規質問事項が含まれるか否かで視聴者の行動有益度を判定し、有益行動情報公開催促部９へ送る（ステップＣ５）。
【０２１０】
有益行動情報公開催促部９は、行動有益度が高いと判定された会議参加者に、その会議参加者が行った新規質問事項を遠隔会議場で公開するよう催促するメッセージを提示する（ステップＣ８）。
【０２１１】
なお、具体例５においても、ステップＣ１、ステップＣ２、ステップＣ３はそれぞれ独立しており、並列して進めることが可能である。
【０２１２】
具体例５の行動検出部２、覚醒度判定部４１、情報注目度判定部４２、行動関連度判定部４３、意識関与度判定部４４としては、具体例１ないし具体例４の説明で列挙したようなバリエーションを考慮してもよい。また、具体例５の行動有益度判定部４５は第３、４の具体例のようなバリエーションを考慮してもよい。
【０２１３】
本具体例における有益行動情報公開催促部９は、以下のような情報の提示をもって情報受信対象者に催促を行ってもよい。
- 単純に行動情報公開催促するような単純な警告
- 情報受信対象者自身の覚醒度、情報注目度、行動関連度、意識関与度の各パラメータ
表示形式の例として、数字表示や各種グラフ表示(折れ線グラフ、棒グラフ等)などが挙げられる。
- 端末操作、電話等の具体的な情報受信対象者に対する情報公開方法指示
【０２１４】
本具体例における有益行動情報公開催促部９は、以下のような部で情報受信対象者に警告を行ってもよい。
- スピーカー等による音声による提示
- 画面による画像やテキストを用いた提示
- サイレン、ベル、ビープ音、ランプ等による警告的な表示
【０２１５】
図１９は、図１、図４、図６、図８または図１０に示す意識関与度測定装置１００のハードウェア構成の一例を示すブロック図である。意識関与度測定装置１００は、図１９に示すように、制御部３１、主記憶部３２、外部記憶部３３、入力部３４、表示部３５および送受信部３６を備える。主記憶部３２、外部記憶部３３、入力部３４、表示部３５および送受信部３６はいずれも内部バス３０を介して制御部３１に接続されている。
【０２１６】
制御部３１はＣＰＵ（Central Processing Unit）等から構成され、外部記憶部３３に記憶されている意識関与度測定用プログラム５００に従って、前述の意識関与度測定装置１００の処理を実行する。
【０２１７】
主記憶部３２はＲＡＭ（Random-Access Memory）等から構成され、外部記憶部３３に記憶されている意識関与度測定用プログラム５００をロードし、制御部３１の作業領域として用いられる。
【０２１８】
外部記憶部３３は、フラッシュメモリ、ハードディスク、ＤＶＤ−ＲＡＭ（Digital Versatile Disc Random-Access Memory）、ＤＶＤ−ＲＷ（Digital Versatile Disc ReWritable）等の不揮発性メモリから構成され、前記の処理を制御部３１に行わせるための意識関与度測定用プログラム５００を予め記憶し、また、制御部３１の指示に従って、このプログラムが記憶するデータを制御部３１に供給し、制御部３１から供給されたデータを記憶する。
【０２１９】
入力部３４は、呼吸、心電、筋電、脳波、血流、脈拍、瞳孔、体温、姿勢(画像、加速度センサ、圧力センサ等で取得)などの生体情報を取得するセンサ、またはカメラなどを接続して、それらの信号を入力する。制御部３１は、入力部３４に接続するそれらのセンサなどの信号を用いて、情報受信対象者の生体情報を取得する。入力部３４はまた、マイクロフォンに接続し、アンプおよびＡ−Ｄ変換器を備える。入力部３４は、マイクロフォンの音声信号をＡ−Ｄ変換し、数値演算しやすいデータにして制御部３１に供給する。さらに、入力部３４は、カメラに接続し、カメラの画像信号を制御部３１に供給する。
【０２２０】
表示部３５は、ランプ、ＬＥＤ、または、ＣＲＴ（Cathode Ray Tube）もしくはＬＣＤ（Liquid Crystal Display）などの画像表示部を駆動する回路を備え、それらを用いて、情報発信者または情報受信対象者への支援情報を出力する。表示部３５はまた、例えば、音信号源とアンプを備える。ブザー、スピーカなどの音響出力装置を接続して、音響または音声によって情報発信者または情報受信対象者への支援情報を出力してもよい。
【０２２１】
送受信部３６は、無線送受信機、無線モデム又は網終端装置、およびそれらと接続するシリアルインタフェース又はＬＡＮ（Local Area Network）インタフェースから構成されている。送受信部３６を介して、情報発信者または情報受信対象者の情報端末から操作情報を取得し、また、それらの情報端末に支援情報を表示する。
【０２２２】
図１、図４、図６、図８または図１０に示す意識関与度測定装置１００の各部の処理は、意識関与度測定用プログラム５００が、制御部３１、主記憶部３２、外部記憶部３３、入力部３４、表示部３５および送受信部３６などを資源として用いて実行する。
【０２２３】
その他、本発明の好適な変形として、以下の構成が含まれる。
【０２２４】
本発明の第１の観点に係る意識関与度測定装置について、
好ましくは、前記行動検出部が検出した行動情報および前記行動解釈手段が検出した行動意味情報から、前記情報受信対象者の覚醒している度合いである覚醒度を検出する覚醒度判定手段と、
前記行動検出手段が検出した行動情報および前記行動解釈手段が検出した行動意味情報から、前記情報受信対象者が前記情報発信者の発信する情報に注目している度合いである情報注目度を検出する情報注目度判定手段と、
を備え、
前記意識関与度判定手段は、前記行動関連度に加えて前記覚醒度および前記情報注目度とに基づいて、前記意識関与度を判定する、
ことを特徴とする。
【０２２５】
好ましくは、前記意識関与度判定手段が判定した前記意識関与度に基づいて、前記情報受信対象者に関する情報を前記情報発信者に対して提示する発信者支援情報提示手段を備えることを特徴とする。
【０２２６】
好ましくは、前記意識関与度判定手段で判定した前記意識関与度が、所定の基準より小さい前記情報受信対象者に対して、警告を表示する受信対象者警告手段を備えることを特徴とする。
【０２２７】
好ましくは、前記行動有益度判定手段で判定した行動有益度が所定の範囲にある場合に、その行動有益度が判定された前記情報受信対象者による行動の発生を、前記情報発信者に対して提示する有益行動情報対発信者提示手段を備えることを特徴とする。
【０２２８】
好ましくは、前記行動有益度判定手段で判定した行動有益度が所定の範囲にある場合に、その行動有益度が判定された前記情報受信対象者による行動の発生を、前記情報受信対象者に対して提示する有益行動情報対受信対象者提示手段を備えることを特徴とする。
【０２２９】
好ましくは、前記行動有益度判定手段で判定した行動有益度が所定の範囲にある場合に、その行動有益度が判定された前記情報受信対象者による行動を公開するよう促す情報を、該情報受信対象者に対して表示する有益行動公開催促手段を備えることを特徴とする。
【０２３０】
本発明の第２の観点に係る意識関与度測定方法について、
好ましくは、前記行動検出ステップで検出した行動情報および前記行動解釈ステップで検出した行動意味情報から、前記情報受信対象者の覚醒している度合いである覚醒度を検出する覚醒度判定ステップと、
前記行動検出手段が検出した行動情報および前記行動解釈ステップで検出した行動意味情報から、前記情報受信対象者が前記情報発信者の発信する情報に注目している度合いである情報注目度を検出する情報注目度判定ステップと、
を備え、
前記意識関与度判定ステップは、前記行動関連度に加えて前記覚醒度および前記情報注目度とに基づいて、前記意識関与度を判定する、
ことを特徴とする。
【０２３１】
好ましくは、前記意識関与度判定ステップで判定した前記意識関与度に基づいて、前記情報受信対象者に関する情報を前記情報発信者に対して提示する発信者支援情報提示ステップを備えることを特徴とする。
【０２３２】
好ましくは、前記意識関与度判定ステップで判定した前記意識関与度が、所定の基準より小さい前記情報受信対象者に対して、警告を表示する受信対象者警告ステップを備えることを特徴とする。
【０２３３】
好ましくは、前記行動有益度判定ステップで判定した行動有益度が所定の範囲にある場合に、その行動有益度が判定された前記情報受信対象者による行動の発生を、前記情報発信者に対して提示する有益行動情報対発信者提示ステップを備えることを特徴とする。
【０２３４】
好ましくは、前記行動有益度判定ステップで判定した行動有益度が所定の範囲にある場合に、その行動有益度が判定された前記情報受信対象者による行動の発生を、前記情報受信対象者に対して提示する有益行動情報対受信対象者提示ステップを備えることを特徴とする。
【０２３５】
好ましくは、前記行動有益度判定ステップで判定した行動有益度が所定の範囲にある場合に、その行動有益度が判定された前記情報受信対象者による行動を公開するよう促す情報を、該情報受信対象者に対して表示する有益行動公開催促ステップを備えることを特徴とする。
【産業上の利用可能性】
【０２３６】
本発明によれば、会議への参加、講演の聴講、舞台・テレビ・ＰＣなどによるコンテンツ視聴などの情報の発信と受信が発生する場合などに、情報の発信者と受信対象者を支援する、特に、情報受信対象者の状態を取得し、発信された情報への意識関与度を推定して、情報発信者、情報受信対象者に情報を提供するといった用途、特に情報発信者や他の情報受信対象者に有益な情報受信対象者による行動の情報を提供する用途に適用できる。
【図面の簡単な説明】
【０２３７】
【図１】本発明の実施の形態１に係る意識関与度測定装置の構成例を示すブロック図である。
【図２】本発明の実施の形態１ないし実施の形態５の発信情報検出部と行動検出部と行動解釈部の動作を示すフローチャートである。
【図３】実施の形態１の情報発信者支援の動作の一例を示すフローチャートである。
【図４】本発明の実施の形態２に係る意識関与度測定装置の構成例を示すブロック図である。
【図５】実施の形態２の情報受信対象者支援の動作の一例を示すフローチャートである。
【図６】本発明の実施の形態３に係る意識関与度測定装置の構成例を示すブロック図である。
【図７】実施の形態３の情報発信者支援の動作の一例を示すフローチャートである。
【図８】本発明の実施の形態４に係る意識関与度測定装置の構成例を示すブロック図である。
【図９】実施の形態４の情報受信対象者支援の動作の一例を示すフローチャートである。
【図１０】本発明の実施の形態５に係る意識関与度測定装置の構成例を示すブロック図である。
【図１１】実施の形態５の情報受信対象者支援の動作の一例を示すフローチャートである。
【図１２】本発明の具体例１の使用状況を示す図である。
【図１３】具体例１の発信者支援情報提示部の表示例を示す図である。
【図１４】本発明の具体例２の使用状況を示す図である。
【図１５】本発明の具体例３の使用状況を示す図である。
【図１６】具体例３の有益行動情報対発信者提示部の表示例を示す図である。
【図１７】本発明の具体例４および具体例５の使用状況を示す図である。
【図１８】具体例４の有益行動情報対受信対象者提示部の表示例を示す図である。
【図１９】本発明の実施の形態に係る意識関与度測定装置のハードウェア構成の一例を示すブロック図である。
【符号の説明】
【０２３８】
１  発信情報検出部
２  行動検出部
３  行動解釈部
４  意識判定部
５  発信者支援情報提示部
６  受信対象者警告部
７  有益行動情報対発信者提示部
８  有益行動情報対受信対象者提示部
９  有益行動情報公開催促部
３１  制御部
３２  主記憶部
３３  外部記憶部
３４  入力部
３５  表示部
３６  送受信部
４１  覚醒度判定部
４２  情報注目度判定部
４３  行動関連度判定部
４４  意識関与度判定部
４５  行動有益度判定部
１００  意識関与度測定装置
５００  意識関与度測定用プログラム
【図１】
2010086356.tif 000003
【図２】
2010086356.tif 000004
【図３】
2010086356.tif 000005
【図４】
2010086356.tif 000006
【図５】
2010086356.tif 000007
【図６】
2010086356.tif 000008
【図７】
2010086356.tif 000009
【図８】
2010086356.tif 000010
【図９】
2010086356.tif 000011
【図１０】
2010086356.tif 000012
【図１１】
2010086356.tif 000013
【図１２】
2010086356.tif 000014
【図１３】
2010086356.tif 000015
【図１４】
2010086356.tif 000016
【図１５】
2010086356.tif 000017
【図１６】
2010086356.tif 000018
【図１７】
2010086356.tif 000019
【図１８】
2010086356.tif 000020
【図１９】
2010086356.tif 000021