(57)【要約】【課題】ヒトが発するアフォーダンスを用いることによって、円滑かつ効率的なコミュニケーションが行えるようにする。【解決手段】送信側に、入力された知覚情報中での発信者のアフォーダンスの有無とそれが正しいものかどうかを判定するアフォーダンス定性分析部１０１と、正しいアフォーダンスが存在する場合に、十分に効果的なものかを判定するアフォーダンス定量分析部１０３と、アフォーダンスを生成するアフォーダンス生成部１０２と、アフォーダンスを強調するアフォーダンス強調部１０４と、生成または強調されたアフォーダンスを知覚可能な情報に変換する知覚情報化部１０５を設ける。受信側に、興味対象に関連の深い知覚情報を選択する知覚情報選択部１０９と、知識データベース１６０を参照してアフォーダンスを分析する分析部１１１と、知識データベース１６０上の他の関連知識を用いてアフォーダンスを推定する推定部１１２を設ける。【選択図】      図１
2005209022.tif 000002
【特許請求の範囲】
【請求項１】
発信者の知覚情報を受信側に伝達するためのコミュニケーション方法であって、
知覚情報入力手段によって前記発信者の知覚情報を入力する段階と、
知識データベースを参照し、前記入力された知覚情報中に前記発信者に係るアフォーダンスが含まれているか、該アフォーダンスが正しいものかを判定する定性分析段階と、
前記入力された知覚情報中に正しいアフォーダンスが存在している場合に、前記知識データベースを参照して、該正しいアフォーダンスが十分に効果的なアフォーダンスであるかどうかを判定する定量分析段階と、
前記定性分析段階において前記アフォーダンスが存在しないまたは正しくないと判定した場合に、正しいアフォーダンスを生成する段階と、
前記定量分析段階において前記正しいアフォーダンスが十分に効果的なものではないと判定した場合に、前記正しいアフォーダンスを強調する段階と、
生成されまたは強調されたアフォーダンスを知覚情報化手段が知覚可能な情報に変換する段階と、
前記知覚可能な情報を送信手段が前記受信側に送信する段階と、
を有する、コミュニケーション方法。
【請求項２】
送信側からの発信者の知覚情報を含む情報を受けて知覚者に提示するコミュニケーション方法であって、
前記送信側から送信される知覚情報を受信手段が知覚する受信段階と、
コミュニケーション相手に対する興味対象を入力する段階と、
前記受信段階で知覚される情報の中で、前記入力された興味対象に関連の深い知覚情報を選択する段階と、
過去の経験において得られた知覚情報と内部要因との関連性に関する情報を知識として格納している知識データベースを参照して、前記選択された知覚情報に関する情報が前記知識データベースに存在するかどうか調べることにより、アフォーダンスを分析する段階と、
前記知識データベースに前記選択された知覚情報に関する情報が存在しない場合に、前記知識データベース上の他の関連知識を用いてアフォーダンスを推定する段階と、
前記分析されあるいは推定されたアフォーダンスを前記選択された知覚情報とともに出力手段が前記知覚者に提示する出力段階と、
を有するコミュニケーション方法。
【請求項３】
発信者の知覚情報を受信側に伝達するために送信側で用いられるコミュニケーション装置であって、
前記発信者の知覚情報を入力する知覚情報入力手段と、
知識データベースを参照し、前記入力された知覚情報中に前記発信者に係るアフォーダンスが含まれているか、該アフォーダンスが正しいものかを判定するアフォーダンス定性分析手段と、
前記入力された知覚情報中に正しいアフォーダンスが存在している場合に、前記知識データベースを参照して、前記正しいアフォーダンスが十分に効果的なアフォーダンスであるかどうかを判定するアフォーダンス定量分析手段と、
前記アフォーダンス定性分析手段が前記アフォーダンスが存在しないまたは正しくないと判定した場合に、正しいアフォーダンスを生成するアフォーダンス生成手段と、
前記アフォーダンス定量分析手段が前記正しいアフォーダンスが十分に効果的なものではないと判定した場合に、前記正しいアフォーダンスを強調するアフォーダンス強調手段と、
生成されまたは強調されたアフォーダンスを知覚可能な情報に変換する知覚情報化手段と、
前記知覚可能な情報を前記受信側に送信する送信手段と、
を有する、コミュニケーション装置。
【請求項４】
送信側からの発信者の知覚情報を含む情報を受けて知覚者に提示する受信側のコミュニケーション装置であって、
前記送信側から送信される知覚情報を知覚する受信手段と、
コミュニケーション相手に対する興味対象を入力する興味対象入力手段と、
前記受信手段で知覚された情報の中で、前記入力された興味対象に関連の深い知覚情報を選択する知覚情報選択手段と、
過去の経験において得られた知覚情報と内部要因との関連性に関する情報を知識として格納している知識データベースと、
前記知識データベースを参照して、前記選択された知覚情報に関する情報が前記知識データベースに存在するかどうか調べることにより、アフォーダンスを分析する分析手段と、
前記知識データベースに前記選択された知覚情報に関する情報が存在しない場合に、前記知識データベース上の他の関連知識を用いてアフォーダンスを推定する推定手段と、
前記分析されあるいは推定されたアフォーダンスを前記選択された知覚情報とともに前記知覚者に提示する知覚情報出力手段と、
を有するコミュニケーション装置。
【請求項５】
請求項３に記載の送信側のコミュニケーション装置と、請求項４に記載の受信側のコミュニケーション装置と、前記送信側のコミュニケーション装置と前記受信側のコミュニケーション装置とを接続する接続手段と、を有するコミュニケーションシステム。
【請求項６】
知覚情報を伝達するコミュニケーションシステムのデザインにおける改善すべき箇所を決定するシステムデザイン方法であって、
前記コミュニケーションシステムにおける分析、改善の対象とする事象を特定する段階と、
前記特定された事象について、判別手段が、知覚情報の有無により判別して分類する判別段階と、
前記判別段階において知覚情報無しと判別された場合に、内部要因列挙手段が、知覚情報が無いことの原因となっている内部要因を列挙する内部要因列挙段階と、
前記判別段階において知覚情報有りと判別された場合に、知覚情報細分類手段が、該知覚情報を、これ以上細分類できないまで階層的に細分類する知覚情報細分類段階と、
前記知覚情報細分類段階において細分類された知覚情報を関連付け手段がヒトの内部要因に関連付ける関連付け段階と、
前記内部要因列挙段階において列挙した内部要因の中で好ましくない内部要因、前記知覚情報細分類段階において得られた全ての好ましくない知覚情報、前記関連付け段階において関連付けられたヒトの内部要因、の少なくともいずれかに対してフラグ付与手段がフラグを付与する段階と、
前記フラグを付与された全内部要因の中で、重要度の高いものを選んでシステム改善の対象とする段階と、
を有するシステムデザイン方法。
【請求項７】
知覚情報を伝達するコミュニケーションシステムのデザインにおける改善すべき箇所を決定するシステムデザイン装置であって、
前記コミュニケーションシステムにおける分析、改善の対象とする事象を特定する改善対象特定手段と、
前記特定された事象について、知覚情報の有無により判別して分類する知覚情報有無判別手段と、
前記知覚情報有無判別手段が知覚情報無しと判別した場合に、知覚情報が無いことの原因となっている内部要因を列挙する内部要因列挙手段と、
前記知覚情報有無判別手段が知覚情報有りと判別した場合に、該知覚情報を、これ以上細分類できないまで階層的に細分類する知覚情報細分類手段と、
前記知覚情報細分類手段が細分類した知覚情報をヒトの内部要因に関連付ける関連付け手段と、
前記内部要因列挙手段が列挙した内部要因の中で好ましくない内部要因、前記知覚情報細分類手段によって得られた全ての好ましくない知覚情報、前記関連付け手段によって関連付けられたヒトの内部要因、の少なくともいずれかに対してフラグを付与するフラグ付与手段と、
前記フラグを付与された全内部要因の中で、重要度の高いものを選んでシステム改善の対象とするシステム改善対象決定手段と、
を有するシステムデザイン装置。
【請求項８】
コンピュータに、
知識データベースを参照し、入力された発信者の知覚情報中に該発信者に係るアフォーダンスが含まれているか、該アフォーダンスが正しいものかを判定する定性分析過程と、
前記入力された知覚情報中に正しいアフォーダンスが存在している場合に、前記知識データベースを参照して、該正しいアフォーダンスが十分に効果的なアフォーダンスであるかどうかを判定する定量分析過程と、
前記定性分析過程において前記アフォーダンスが存在しないまたは正しくないと判定した場合に、正しいアフォーダンスを生成する過程と、
前記定量分析過程において前記正しいアフォーダンスが十分に効果的なものではないと判定した場合に、前記正しいアフォーダンスを強調する過程と、
生成されまたは強調されたアフォーダンスを知覚可能な情報に変換する過程と、
を実行させる、プログラム。
【請求項９】
コンピュータに、
前記送信側から送信される発信者の知覚情報を知覚する過程と、
前記知覚された知覚情報の中で、入力された興味対象に関連の深い知覚情報を選択する過程と、
過去の経験において得られた知覚情報と内部要因との関連性に関する情報を知識として格納している知識データベースを参照して、前記選択された知覚情報に関する情報が前記知識データベースに存在するかどうか調べることにより、アフォーダンスを分析する過程と、
前記知識データベースに前記選択された知覚情報に関する情報が存在しない場合に、前記知識データベース上の他の関連知識を用いてアフォーダンスを推定する過程と、
を実行させるプログラム。
【請求項１０】
コンピュータに、
知覚情報を伝達するコミュニケーションシステムにおける分析、改善の対象とする事象を特定する過程と、
前記特定された事象について、判別手段が、知覚情報の有無により判別して分類する判別過程と、
前記判別過程において知覚情報無しと判別された場合に、知覚情報が無いことの原因となっている内部要因を列挙する内部要因列挙過程と、
前記判別過程において知覚情報有りと判別された場合に、該知覚情報を、これ以上細分類できないまで階層的に細分類する知覚情報細分類過程と、
前記知覚情報細分類過程において細分類された知覚情報をヒトの内部要因に関連付ける関連付け過程と、
前記内部要因列挙過程において列挙された内部要因の中で好ましくない内部要因、前記知覚情報細分類過程において得られた全ての好ましくない知覚情報、前記関連付け過程において関連付けられたヒトの内部要因、の少なくともいずれかに対してフラグを付与する過程と、
前記フラグを付与された全内部要因の中で、重要度の高いものを選んで前記コミュニケーションシステムにおけるシステム改善の対象とする過程と、
を実行させる、プログラム。
【請求項１１】
コンピュータが読み取り可能な記録媒体であって、請求項８乃至１０のいずれか１項に記載のプログラムを記録した記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、コンピュータを用いたコミュニケーションおよびそのコミュニケーションシステムデザインに関し、特に、知覚情報とヒトの内部要因とによって定義されるアフォーダンスを生成または強調してコミュニケーション相手に伝えることによって、円滑なコミュニケーションや実世界ではありえない効果的なコミュニケーションを実現するコミュニケーション方法および装置と、知覚情報を細分類して好ましくない事象を体系的に抽出しそれらの原因となっているヒトの内部要因と関連づけることで、コミュニケーションシステムのデザインにおける改善すべき箇所を決定するシステムデザイン方法および装置とに関する。
【背景技術】
【０００２】
アフォーダンス理論は、米国の知覚心理学者J. J. Gibsonが発表した知覚理論であり、アフォーダンス理論によれば、環境にある実在物の意味や価値は、動物や人間が作り出すのではなく、環境によって発せられており、同時に動物や人間の行為や反応を直接引き出す、とされている。この考え方は、ヒューマンインタフェースデザインの世界において広く受け入れられている（D. A. Norman, The Psychology of Everyday Things, Basic Books, New York, 1988（非特許文献１））。
【０００３】
例えば、ガラスでできたコップがあるとする。このコップからはさまざまな情報がアフォード（＝発信）されている。片側だけ口の開いた筒状の形をしているとか、材質はガラスである、といった情報が常にコップから発せられている。ヒトはそのときの状況によって、それが液体を中に入れて飲むための道具であると認識する場合もあるし、ガラス製なので落としたら割れてしまう、と認識することもある。
【０００４】
日本国内でのアフォーダンスの研究としては、佐々木による研究（佐々木正人、アフォーダンス−新しい認知の理論、岩波書店、東京、1994（非特許文献２））等がある。物体操作のアフォーダンスに関する特開平８−５５１４８号公報（特許文献１）に代表されるように、アフォーダンス関連の従来技術は、モノのアフォーダンスに関する内容がほとんどである。ヒューマノイドロボットのデザインにアフォーダンスの考え方を採用した特開２００３−２６６３６４号公報（特許文献２）もあるが、ロボットの視界に関するアフォーダンスという限定された内容にとどまっている。
【０００５】
一方、コンピュータを利用するコミュニケーションの研究は盛んに行われているが、人間が実生活においてフェース・ツー・フェース(Face-to-Face)で行うコミュニケーションと比較して、例えば、ビデオ会議で相手の表情が伝わりにくいといったように、さまざまな問題を抱えている。グループウェアやＣＳＣＷ(Computer Supported Cooperative Work)の分野でよく取り上げられるアウェアネスという概念は、そのような問題を解決する目的で有効と考えられている（P. Dourish, and S. Bly, "Portholes: Supporting awareness in a distributed workgroup," Proc. ACM SIGCHI Conf. on Human Factors in Comp. Sys., pp. 541-547, Monterey, CA, United States, May 1992（非特許文献３））。
【０００６】
アウェアネスは、日本語では「気づき」と訳され、「存在や状況に気づく」ことに主眼が置かれた概念である。これに対して、本発明では、「ヒトが発するアフォーダンス」というアプローチを採用する。「ヒトが発するアフォーダンス」という考え方では「知覚情報とそれをもたらすヒトの内部要因」に主眼が置かれ、その内部要因は、状況のように必ずしも時々刻々と変化する属性とは限らず、能力や特性といった静的な属性をも含む。例えば、Ａさんは無口だが、実はとても博識な人であり、話をさせると大変面白い話をする、といったことは、アウェアネスの世界では扱わないが、アフォーダンスの考え方には含まれる。
【０００７】
コンピュータを利用したコミュニケーションに関しては、従来技術は、映像の解像度を高くするなどといった、不足部分を補足することを志向するコンピュータ活用が主流であった。しかし、せっかくコンピュータを利用するのであるから、実世界ではあり得ないようなコミュニケーション形態を積極的に実現しようとする志向があってもよい。ビデオ会議において実写の顔映像を用いる代わりにコンピュータグラフィックスにより描かれた人形の表情を誇張して表現するのは、その一例である。
【０００８】
ユーザインタフェースのデザインについては、アフォーダンスの重要性が広く認められているが、コンピュータを用いたコミュニケーションシステムのデザインについては、まだ技術は成熟していない。ユーザインタフェースデザインにおける「モノのアフォーダンス」に相当するような広く認められる考え方は、コミュニケーションシステムのデザイン分野には存在していない。
【０００９】
以上のように、従来の技術では、（１）コンピュータを用いたコミュニケーションがフェース・ツー・フェースのコミュニケーションに比べて円滑、自然でないこと、（２）コミュニケーションにおけるコンピュータ活用が補足的であり、コンピュータ活用の利点が十分に生かされていないこと、（３）コンピュータを用いたコミュニケーションシステムのデザインにおいて、広く有効なデザイン手法が不足していること、（４）アフォーダンスが、モノが発する概念として捉えられており、広範囲のコミュニケーションシステムに適用可能な概念と認識されていないこと、という４つの問題点があった。
【特許文献１】特開平８−５５１４８
【特許文献２】特開２００３−２６６３６４
【非特許文献１】D. A. Norman, The Psychology of Everyday Things, Basic Books, New York, 1988
【非特許文献２】佐々木正人、アフォーダンス−新しい認知の理論、岩波書店、東京、1994
【非特許文献３】P. Dourish, and S. Bly, "Portholes: Supporting awareness in a distributed workgroup," Proc. ACM SIGCHI Conf. on Human Factors in Comp. Sys., pp. 541-547, Monterey, CA, United States, May 1992
【発明の開示】
【発明が解決しようとする課題】
【００１０】
アフォーダンス理論は、各種のコミュニケーションシステム特にコンピュータを用いたコミュニケーションシステムに広く利用されつつあるものの、上述した４つの問題点が残されており、アフォーダンス理論を利用した円滑で効果的なコミュニケーションシステムの実現は現状では難しい。
【００１１】
そこで本発明の目的は、知覚情報とヒトの内部要因によって定義されるアフォーダンスを生成または強調してコミュニケーション相手に伝えることによって、円滑なコミュニケーションや実世界ではありえない効果的なコミュニケーションを実現できる方法や装置を提供し、さらには、知覚情報を細分類して好ましくない事象を体系的に抽出し、それらの原因となっているヒトの内部要因と関連づけることで、コミュニケーションシステムのデザインにおける改善すべき箇所を決定するシステムデザイン方法及び装置を提供することにある。
【課題を解決するための手段】
【００１２】
本発明の第１のコミュニケーション方法は、送信側に対して適用されるものであり、発信者の知覚情報を受信側に伝達するためのコミュニケーション方法であって、知覚情報入力手段によって発信者の知覚情報を入力する段階と、知識データベースを参照し、入力された知覚情報中に発信者に係るアフォーダンスが含まれているか、そのアフォーダンスが正しいものかを判定する定性分析段階と、入力された知覚情報中に正しいアフォーダンスが存在している場合に、知識データベースを参照して、その正しいアフォーダンスが十分に効果的なアフォーダンスであるかどうかを判定する定量分析段階と、定性分析段階においてアフォーダンスが存在しないまたは正しくないと判定した場合に、正しいアフォーダンスを生成する段階と、定量分析段階において正しいアフォーダンスが十分に効果的なものではないと判定した場合に、その正しいアフォーダンスを強調する段階と、生成されまたは強調されたアフォーダンスを知覚情報化手段が知覚可能な情報に変換する段階と、知覚可能な情報を送信手段が受信側に送信する段階と、を有する。
【００１３】
本発明の第２のコミュニケーション方法は、受信側に対して適用されるものであり、送信側からの発信者の知覚情報を含む情報を受けて知覚者に提示するコミュニケーション方法であって、送信側から送信される知覚情報を受信手段が知覚する受信段階と、コミュニケーション相手に対する興味対象を入力する段階と、受信段階で知覚される情報の中で、入力された興味対象に関連の深い知覚情報を選択する段階と、過去の経験において得られた知覚情報と内部要因との関連性に関する情報を知識として格納している知識データベースを参照して、選択された知覚情報に関する情報が知識データベースに存在するかどうか調べることにより、アフォーダンスを分析する段階と、知識データベースに選択された知覚情報に関する情報が存在しない場合に、知識データベース上の他の関連知識を用いてアフォーダンスを推定する段階と、分析されあるいは推定されたアフォーダンスを選択された知覚情報とともに出力手段が知覚者に提示する出力段階と、を有する。
【００１４】
本発明の第１のコミュニケーション装置は、発信者の知覚情報を受信側に伝達するために送信側で用いられるコミュニケーション装置であって、発信者の知覚情報を入力する知覚情報入力手段と、知識データベースを参照し、入力された知覚情報中に発信者に係るアフォーダンスが含まれているか、そのアフォーダンスが正しいものかを判定するアフォーダンス定性分析手段と、入力された知覚情報中に正しいアフォーダンスが存在している場合に、知識データベースを参照して、正しいアフォーダンスが十分に効果的なアフォーダンスであるかどうかを判定するアフォーダンス定量分析手段と、アフォーダンス定性分析手段が前記アフォーダンスが存在しないまたは正しくないと判定した場合に、正しいアフォーダンスを生成するアフォーダンス生成手段と、アフォーダンス定量分析手段が正しいアフォーダンスが十分に効果的なものではないと判定した場合に、正しいアフォーダンスを強調するアフォーダンス強調手段と、生成されまたは強調されたアフォーダンスを知覚可能な情報に変換する知覚情報化手段と、知覚情報化手段が変換した知覚可能な情報を受信側に送信する送信手段と、を有する。
【００１５】
本発明の第２のコミュニケーション装置は、送信側からの発信者の知覚情報を含む情報を受けて知覚者に提示する受信側のコミュニケーション装置であって、送信側から送信される知覚情報を知覚する受信手段と、コミュニケーション相手に対する興味対象を入力する興味対象入力手段と、受信手段で知覚された情報の中で、入力された興味対象に関連の深い知覚情報を選択する知覚情報選択手段と、過去の経験において得られた知覚情報と内部要因との関連性に関する情報を知識として格納している知識データベースと、知識データベースを参照して、選択された知覚情報に関する情報が知識データベースに存在するかどうか調べることにより、アフォーダンスを分析する分析手段と、知識データベースに選択された知覚情報に関する情報が存在しない場合に、知識データベース上の他の関連知識を用いてアフォーダンスを推定する推定手段と、分析されあるいは推定されたアフォーダンスを選択された知覚情報とともに知覚者に提示する知覚情報出力手段と、を有する。
【００１６】
本発明においては、上述した第１のコミュニケーション装置（送信側）と第２のコミュニケーション装置（受信側）とをネットワークや物理的な空間を介して接続することにより、円滑なコミュニケーションや実世界ではありえない効果的なコミュニケーションを実現するコミュニケーションシステムが構成される。
【００１７】
本発明のシステムデザイン方法は、知覚情報を伝達するコミュニケーションシステムのデザインにおける改善すべき箇所を決定するシステムデザイン方法であって、コミュニケーションシステムにおける分析、改善の対象とする事象を特定する段階と、特定された事象について、判別手段が、知覚情報の有無により判別して分類する判別段階と、判別段階において知覚情報無しと判別された場合に、内部要因列挙手段が、知覚情報が無いことの原因となっている内部要因を列挙する内部要因列挙段階と、判別段階において知覚情報有りと判別された場合に、知覚情報細分類手段が、その知覚情報を、これ以上細分類できないまで階層的に細分類する知覚情報細分類段階と、知覚情報細分類段階において細分類された知覚情報を関連付け手段がヒトの内部要因に関連付ける関連付け段階と、内部要因列挙段階において列挙した内部要因の中で好ましくない内部要因、知覚情報細分類段階において得られた全ての好ましくない知覚情報、関連付け段階において関連付けられたヒトの内部要因、の少なくとも１つに対してフラグ付与手段がフラグを付与する段階と、フラグを付与された全内部要因の中で、重要度の高いものを選んでシステム改善の対象とする段階と、を有する。
【００１８】
本発明のシステムデザイン装置は、知覚情報を伝達するコミュニケーションシステムのデザインにおける改善すべき箇所を決定するシステムデザイン装置であって、コミュニケーションシステムにおける分析、改善の対象とする事象を特定する改善対象特定手段と、特定された事象について、知覚情報の有無により判別して分類する知覚情報有無判別手段と、知覚情報有無判別手段が知覚情報無しと判別した場合に、知覚情報が無いことの原因となっている内部要因を列挙する内部要因列挙手段と、知覚情報有無判別手段が知覚情報有りと判別した場合に、その知覚情報を、これ以上細分類できないまで階層的に細分類する知覚情報細分類手段と、知覚情報細分類手段が細分類した知覚情報をヒトの内部要因に関連付ける関連付け手段と、内部要因列挙手段が列挙した内部要因の中で好ましくない内部要因、知覚情報細分類手段によって得られた全ての好ましくない知覚情報、関連付け手段によって関連付けられたヒトの内部要因、の少なくとも１つに対してフラグを付与するフラグ付与手段と、フラグを付与された全内部要因の中で、重要度の高いものを選んでシステム改善の対象とするシステム改善対象決定手段と、とを有する。
【００１９】
すなわち本発明では、コミュニケーションにおいて知覚されるヒトの振る舞いと、その振る舞いの元となっているヒトの内部要因とによって、ヒトが発するアフォーダンスを定義、モデル化している。その結果、コミュニケーションにおいて不足しがちなアフォーダンスを、コンピュータなどを用いて生成、強調することが可能となっている。
【００２０】
ここで、ヒトの発する知覚情報と、ヒトの内部要因とについて説明する。
【００２１】
ヒトが発する知覚情報は、情報を知覚する目、耳、鼻、皮膚という４つの感覚器によって、例えば、以下のように分類できる。ただし、ヒトは味によってヒトを知覚することはほとんどないので、ここでは、味覚は考慮しないものとする。
・目：容姿、表情、ジェスチャなど、
・耳：発言、歌、動きに伴う物音など、
・鼻：体臭、口臭、香水など、
・皮膚：温度（体温）、質感（握手など）など。
【００２２】
これらの知覚情報は、さまざまな要因によってさらに細分化することが可能である。代表的な細分化要因としては、知覚情報の構成要素が挙げられる。例えば、容姿の例では、顔、服装などが該当する。これ以外にも、量や回数、強弱や高低、時間変化なども細分化の要因として挙げられる。例えば、会議において挙手した回数、発言のときの声の大きさ、挙手してから発言をするという行動の時間変化、などが該当する。また、これらの知覚情報は、それが無い場合にも意味を持つ知覚情報となり得ることに注意しなければならない。
【００２３】
ヒトの内部要因は、主として、「状態」と「性質」に分類される。「状態」とは、逐次変化する動的な要因である。例えば、頭の中で考えていることは、顔に表れる表情は常に変化するから、状態としての内部要因である。これに関わるアフォーダンスを認知するためには、その変化に追従できることが重要である。一方、「性質」とは、変化しない、あるいは変化速度が遅い静的な要因である。能力、適性、価値観などがこれに該当する。
【発明の効果】
【００２４】
本発明によれば、知覚情報とヒトの内部要因によって定義されるアフォーダンスを生成しまたは強調してコミュニケーション相手に伝えることによって、円滑なコミュニケーションや実世界ではありえない効果的なコミュニケーションを実現できるという効果がある。コンピュータを積極的にコミュニケーションに活用するだけでなく、ヒトの内部要因を考慮するため、利用者の立場に立ったコミュニケーションが可能となる。
【００２５】
また、知覚情報を細分類して好ましくない事象を体系的に抽出し、それらの原因となっているヒトの内部要因と関連づけることで、コミュニケーションシステムのデザインにおける改善すべき箇所を容易に決定でき、これにより、より優れたデザインを完成することができるようになる、という効果もある。
【発明を実施するための最良の形態】
【００２６】
次に、本発明の好ましい実施の形態について、図面を参照して説明する。
【００２７】
まず、本発明の第１の実施形態として、アフォーダンスを用いたコミュニケーションシステムを説明する。図１は、本実施形態のコミュニケーションシステムの構成を示すブロック図であり、大きく分けると送信側の装置と受信側の装置とから構成されている。このシステムは、送信側ユーザ（すなわち発信者）と受信側ユーザ（すなわち知覚者）との間のコミュニケーションを仲介し、あるいは支援するものである。送信側と受信側とは、例えば、電気通信ネットワークを介して接続しているものとする。
【００２８】
送信側においては、ユーザ（発信者）の映像や音声などの知覚情報を入力し、知覚情報とユーザの内部要因との関連性に関する情報を知識として格納しているデータベースを参照し、その知覚情報のアフォーダンスが、（１）存在しているかどうか、（２）正しいアフォーダンスかとうか、（３）効果的なアフォーダンスかどうか、を分析し、分析結果に基づいてアフォーダンスを生成または強調してそのアフォーダンスを知覚情報に付加して送信する。受信側では、受信した送信側ユーザの映像や音声などの知覚情報から、受信側ユーザ（知覚者）の興味となる知覚情報を選択し、知覚情報とユーザの内部要因との関連性に関する情報を知識として格納している知識データベースを参照し、選択された知覚情報に含まれるアフォーダンスを分析（理解）または推定（推論）し、その分析または推定結果を受信した知覚情報とともに出力する。
【００２９】
図１に示したコミュニケーションシステムでは、基本的には、送信側、受信側とも、各構成要素は、コンピュータによって、あるいはその他のハードウェア装置によって実現できるものであるが、場合によっては、例えばアプリケーションの種類によっては、部分的に各ユーザとのインタラクションが存在する場合もある。
【００３０】
図１に示すシステムにおいて、送信側の装置には、知覚情報入力部１００、アフォーダンス定性分析部１０１、アフォーダンス生成部１０２、アフォーダンス定量分析部１０３、アフォーダンス強調部１０４、知覚情報化部１０５、送信部１０６および知識データベース１５０が設けられている。知覚情報入力部１００は、送信側ユーザの画像や音声などを知覚情報として入力するためのものである。知覚情報入力部１００は、例えば、カメラ、マイクロホンなどを備えている。知識データベース１５０には、知覚情報とユーザの内部要因との関連性に関する情報が知識として格納されている。
【００３１】
アフォーダンス定性分析部１０１は、知覚情報入力部１００に入力した知覚情報においてアフォーダンスが存在しているかどうか、存在するならばそのアフォーダンスが正しいアフォーダンスであるかどうか、を判定するものである。この判定に際してアフォーダンス定性分析部１０１は、知識データベース１５０を参照する。すなわちアフォーダンス定性分析部１０１は、知覚情報が存在しないためにアフォーダンスが存在しない場合や、常識的内容でない等の理由によりアフォーダンスが受信側に正しく伝わらない場合を検出する。例えば、ビデオ会議において、無言であるためにその参加者の考えていることが伝わらない場合や、顔では笑っていて内心は怒っている場合等がこれに該当する。
【００３２】
アフォーダンス生成部１０２は、アフォーダンス定性分析部１０１における分析の結果、アフォーダンスが存在しない、あるいは正しくない場合に、正しいアフォーダンスを生成するためのものである。アフォーダンス生成部１０２におけるアフォーダンス生成としては、例えば、無言の場合に発言を促進したり、本当は怒っていることを明示的に伝えるために顔映像の背景のグラフィックに変化を加える、などが考えられる。アフォーダンス生成の具体例としては、ビデオ会議システムの例であれば、知識を用いて、Ａさんの面白い話をするという特性を判断し、Ａさんまたは参加者全員に対して映像テロップまたは音声によって意図的にＡさんに発言を促すことにより、会議での会話を活性化させることができる。
【００３３】
アフォーダンス定量分析部１０３は、アフォーダンス定性分析部１０１において正しいアフォーダンスが存在していると判断された場合に、そのアフォーダンスが十分に効果的なアフォーダンスであるかどうかを判定するためのものである。すなわちアフォーダンス定量分析部１０３は、知覚情報においてアフォーダンスは存在していても、知覚情報の大きさや変化量などが小さすぎるために十分にアフォーダンスが伝わらない場合を検出する。例えば、ビデオ会議システムにおいて映像解像度が極端に低い場合には、コミュニケーション相手の表情変化をはっきりと認識できないが、そのような場合を検出する。
【００３４】
アフォーダンス強調部１０４は、十分に効果的なアフォーダンスでない場合に、そのアフォーダンスを強調するものである。先に述べたコンピュータグラフィックスによる顔表情の誇張は、アフォーダンス強調の例である。具体的には、ビデオ会議システムにおいて、会議参加者の実写の映像を表示する代わりに、コンピュータグラフィクスにより描かれた顔を表示することとし、喜びや悲しみといった感情を誇張して表現できれば、実写の顔画像を用いる場合と比較して、アフォーダンスが協調されたことになる。別の例では、会議参加者の映像を表示するウィンドウに関し、発言要求のある参加者のウィンドウだけに対して着色枠（例えば赤枠）を付与して表示する。これは、発言欲求に関するアフォーダンスを、伝わりやすいように強調した例であると言える。
【００３５】
知覚情報化部１０５は、アフォーダンス生成部１０２において生成され、あるいはアフォーダンス強調部１０４において強調されたアフォーダンスを、知覚可能な情報として可視化するものである。映像や音といったコミュニケーション相手が知覚できるメディアにアフォーダンスを出力することが、ここでいう知覚情報化である。
【００３６】
送信部１０６は、このように知覚情報化部１０５で可視化された知覚情報を、例えば電気通信ネットワークを介して、コミュニケーション相手に送信するためのものである。アフォーダンス理論の基本的な考え方によれば、わざわざ送信しなくても知覚情報化すれば自然に情報は発信される、と理解する方が自然かもしれない。しかし本実施形態では、ビデオ会議のようなネットワーク越しのコミュニケーションも想定しているので、この送信部１０６を設けないと、コミュニケーション相手に情報が送信することできない。
【００３７】
一方、受信側の装置には、受信部１０７、興味対象入力部１０８、知覚情報選択部１０９、分析部１１１、推定部１１２、知覚情報出力部１１３及び知識データベース１６０が設けられている。受信側の知識データベース１６０には、送信側の知識データベース１５０と同様に、過去の経験において得られた知覚情報とユーザの内部要因との関連性に関する情報が、知識として格納されている。例えば、「無言のＡさんは実は博識である」などといった知識が格納されている。さらに、例えば、「無口＝話す話題がない」、「よくしゃべる＝発想が豊か」といった関連付けが知識として記憶されている。
【００３８】
受信部１０７は、送信者から送信される知覚情報を常時知覚し受信するためのものであり、本実施形態では、ネットワークなどを介して送信側の送信部１０６から送られてくる情報を受信する。
【００３９】
興味対象入力部１０８は、受信側ユーザにおけるコミュニケーション相手に対する興味を入力するものである。ここでいう「興味」とは、関心のようなものであり、「Ａさんはどんな人だろう？」等と心に抱く興味のことである。具体的には、興味対象入力部１０８は、受信側ユーザが例えばキーボードなどを介して入力したキーワードに基づいて「興味」の対象を決定するように構成されていてもよいし、情報を受信したときの受信側ユーザの表情などから「興味」を決定するようにしてもよい。
【００４０】
知覚情報選択部１０９は、受信部１０７で常時知覚される（すなわち受信された）情報の中で、興味対象入力部１０８で入力あるいは決定された「興味」の内容に関連の深い知覚情報を選択するためのものである。例えば、本実施形態のコミュニケーションシステムがビデオ会議システムとして実装されている場合において、受信側ユーザが、会議中、Ａさんの意見に興味がある場合、Ａさんの発話に関する知覚情報が選択される。
【００４１】
分析部１１１は、知覚情報選択部１０９において選択された知覚情報に関する情報が、知識データベース１５０に存在するかどうか調べることにより、アフォーダンスを分析し（あるいは理解）するものである。これに対し推定部１１２は、そのような知覚情報が知識データベース１５０に存在しない場合に、知識データベース１５０に格納されている他の関連知識を用いてアフォーダンスの推定や推論を行うものである。例えば、顔では笑っているＡさんの心理に関する知識を持っていない場合には、この推定部１１２が利用される。いつもより会話における相槌が少ないということが知覚されたとすれば、これをもとに推論を行って、今日は相槌が少ないから怒っているに違いない、という判断をする。
【００４２】
知覚情報出力部１１３は、受信側ユーザに提示するために、分析部１１１において分析（理解）されあるいは推定部１１２で推定（推論）されたアフォーダンスを知覚情報とともに、例えば音声あるいは映像の形態で、出力する。
【００４３】
次に、図１に示したコミュニケーションシステムにおける動作を説明する。図２は送信側での処理を示しており、図３は受信側での処理を示している。
【００４４】
送信側の装置では、図２に示すように、まず、ステップＳ１０において、知覚情報入力部１００に対し、送信側ユーザに関する知覚情報が入力される。すると、ステップＳ１１において、アフォーダンス定性分析部１０１は、知識データベース１５０を参照して、その知覚情報にアフォーダンスが存在しているかどうか判断し、存在するならば、ステップＳ１２において、そのアフォーダンスが正しいアフォーダンスであるかどうかを調べる。ステップＳ１１またはＳ１２において、アフォーダンス定性分析部１０１がアフォーダンスが存在していない、あるいは正しくないと判断した場合には、ステップ１３において、アフォーダンス生成部１０２が正しいアフォーダンスを生成し、その後、ステップＳ１６に移行する。
【００４５】
ステップＳ１２においてアフォーダンス定性分析部１０１が、正しいアフォーダンスが存在すると判断した場合には、ステップＳ１４において、アフォーダンス定量分析部１０３が、そのアフォーダンスが十分に効果的かどうかを判断する。十分に効果的ではないと判断した場合には、ステップＳ１５において、アフォーダンス強調部１０４がアフォーダンスを強調し、その後、ステップＳ１６に移行する。一方、ステップＳ１４において十分に効果的であると判断された場合にはステップＳ１６に移行する。
【００４６】
ステップＳ１６では、アフォーダンスを受信側が知覚できるように、知覚情報化部１０５において、知覚情報化が行われる。知覚情報化された情報は、ステップＳ１７において、送信部１０６により、受信側の装置に向けて送信される。ここでの送信では、ネットワークを介して遠隔地にデータとして送信される場合もあるし、同じ物理空間に受信者がいる場合には、送信というよりは、環境に向けて発信される。
【００４７】
次に、受信側の装置での処理を説明する。受信側では、ステップＳ２１において、受信部１０７が、送信側の装置から送信（発信）された情報を受信しあるいは感覚器を通して知覚する。本実施形態のコミュニケーションシステムがビデオ会議システムなどとして構築されている場合には、情報はネットワークを介して受信側に到達することになり、これに対応して受信部１０７はネットワークインターフェースなどを備えてその情報を受信する。また、情報が環境に向けて発信されるような場合、例えば、映像あるいは音声として環境に発信されているような場合には、受信部１０７は、感覚器に相当するカメラやマイクロホンを備えてその情報を知覚することになる。
【００４８】
一般的に、知覚される情報は一つとは限らず、多数存在する。例えば、送信側から送られてくる情報が映像データの形態であったとして、その映像データ中には、知覚の対象となるものが多数存在しうる。そこで、ステップＳ２２において、受信側ユーザ（知覚者）の興味を興味対象入力部１０８に入力する。そして、ステップＳ２３では、受信した知覚情報の中から、知覚情報選択部１０９によって、受信側ユーザの興味に応じて関連性の高い知覚情報が選択される。分析部１１１は、ステップＳ２４において、知識データベース１６０を参照して、その選択された知覚情報が知識データベース１６０内に存在するかどうかを調べる。存在する場合には、ステップＳ２５において、その知覚情報に対応したアフォーダンスが容易に理解されることとなる。一方、選択された知覚情報が知識データベース１６０内に存在しないとステップＳ２４に判断された場合、推論部１１２は、ステップＳ２６において、知識データベース１６０を参照して、関連する別の知識を参照し、推論することで、その知覚情報を引き起こしている内部要因を推測し、それにより、選択された知覚情報に含まれるアフォーダンスを推定（推論）する。
【００４９】
その後、ステップＳ２７において、分析されあるいは推定されたアフォーダンスが、知覚情報出力部１１３により、受信した知覚情報とともに出力される。
【００５０】
このようにして本実施形態のコミュニケーションシステムによれば、送信側ユーザのアフォーダンスを生成しまたは強調して受信側ユーザに伝えることが可能になり、円滑なコミュニケーションや実世界ではありえない効果的なコミュニケーションを実現できる。また、ヒトの内部要因を考慮することができるため、ユーザの立場に立ったコミュニケーションが可能となる。
【００５１】
上述した本発明の考え方を適用することにより、コミュニケーションシステムのデザインの改良を容易に行えるようになる。図４は、本発明の第２の実施形態のシステムデザイン装置を示している。このシステムデザイン装置は、「ヒトが発するアフォーダンス」を利用することによって、知覚情報を細分類して好ましくない事象を体系的に抽出し、それらの原因となっているヒトの内部要因と関連づけることで、コミュニケーションシステムのデザインにおける改善すべき箇所を決定するものである。図５は、このシステムデザイン装置の動作を示すフローチャートであり、図６は、「ビデオ会議における発言」を改善の対象の事象として、どのように知覚情報細分類とヒトの内部要因との関連付けが行われるかの一例を示している。
【００５２】
図４に示したシステムデザイン装置では、基本的には、各構成要素は、コンピュータによって、あるいはその他のハードウェア装置によって実現できるものであるが、場合によっては、例えばアプリケーションの種類によっては、部分的に各ユーザとのインタラクションが存在する場合もある。
【００５３】
このシステムデザイン装置は、対象事象特定部２０１、知覚情報有無判別部２０２、内部要因列挙部２０３、フラグ付与部２０４、知覚情報細分類部２０５、関連付け部２０６及びシステム改善対象決定部２０７を備えている。
【００５４】
ここで対象事象特定部２０１は、システムの分析、改善の対象とする事象を特定するものである。例えば、「ビデオ会議における発言」は、ここでいう事象の一例である。自己診断機能を持つシステムを対象とする場合には自動的に対象事象を特定できる場合もあるが、一般的には、ユーザが改善対象の事象を特定し、特定した事象をこの対象事象特定部２０１を介して本実施形態のシステムデザイン装置に入力することとなる。
【００５５】
知覚情報有無判別部２０２は、対象事象特定部２０１において特定された事象について、知覚情報の有無により判別して分類するものである。ビデオ会議の発言の例では、「発言有り」の場合と、「発言無し」の場合に分けられる。
【００５６】
内部要因列挙部２０３は、知覚情報有無判別部２０２が「知覚情報無し」と判別した場合に、知覚情報が無いことの原因となっている内部要因を列挙するものである。発言の例では、本人に発言意志が無いことや、議論能力が欠けていること、などが内部要因に該当する。
【００５７】
知覚情報細分類部２０５は、知覚情報有無判別部２０２が「知覚情報有り」と判別した場合に、その知覚情報を、これ以上細分類できない、あるいはこれ以上細分類する必要がない、と判断するまで、階層的に細分類するものである。ビデオ会議における発言の例では、例えば図６のように、「発言のぶつかり」が細分類される。
【００５８】
関連付け部２０６は、知覚情報細分類部２０５において細分類された知覚情報をヒトの内部要因に関連付けるものである。図６では、例えば、「同時発話」という細分類された知覚情報は、「発話タイミング適性の欠如」というヒトの内部要因に関連付けられている。
【００５９】
フラグ付与部２０４は、内部要因列挙部２０３において列挙した内部要因の中で、好ましくない内部要因、あるいは、知覚情報細分類部２０５において得られた全ての好ましくない知覚情報、あるいは、関連付け部２０６において関連付けられたヒトの内部要因、に対して、好ましくないことを表すフラグＮを付与するものである。
【００６０】
システム改善対象決定部２０７は、フラグ付与部２０４においてフラグＮを付与された全内部要因の中で、重要度の高いものを選んでシステム改善の対象とするものである。どの内部要因が重要かということの判断は、システムが自動で取得したログデータを自動分析して行ってもよいし、その分野の専門家の経験則に頼る方法もある。専門家の経験則に頼る場合には、システム改善対象決定部２０７は、フラグＮを付与された内部要因を表示し、専門家によるインタラクティブな入力に応じ、システム改善の対象を決定する。ここでは、その決定方法については限定しない。
【００６１】
次に、図５を用いて、本実施形態のシステムデザイン装置の動作を説明する。
【００６２】
まず、ステップＳ３１において、対象事象特定部２０１は、システムの分析、改善の対象とする事象を特定する。次に、ステップＳ３２において、知覚情報有無判別部２０２は、対象事象特定部２０１において特定された事象について、知覚情報の有無によって場合を分ける。
【００６３】
ステップＳ３２において知覚情報が無い場合は、ステップＳ３３において、内部要因列挙部２０３が、無知覚の理由と考えられるヒトの内部要因を列挙し、フラグ付与部２０４が、その中の好ましくない内部要因全てに対してフラグＮを付与する。一方、ステップＳ３２において知覚情報がある場合には、ステップＳ３４において、知覚情報細分類部２０５が、細分類不可能となるまであるいは細分類する必要がなくなるまでその知覚情報を階層的に細分類し、フラグ付与部２０４が全ての好ましくない知覚情報に対してフラグＮを付与し、その後、ステップＳ３５において、関連付け部２０６が、細分類された知覚情報の中で、フラグＮの付与された全知覚情報を、ヒトの内部要因と関連付け、フラグ付与部２０４によって、各内部要因にフラグＮを付与する。
【００６４】
ステップＳ３３またはＳ３５の実行後、ステップＳ３６において、システム改善対象決定部２０７は、フラグＮを付与された全内部要因の中で、重要度の高いものを選んでシステム改善の対象とする。
【００６５】
以上の処理によって、コミュニケーションシステムにおける改善すべき箇所が抽出されることになるから、抽出された箇所に関して改善やチューニングを行うことによって、ユーザにとってより使いやすいコミュニケーションシステムを構築することが可能になる。
【００６６】
図６は、上述したように、「ビデオ会議における発言」を改善の対象の事象とした場合に、どのように知覚情報細分類とヒトの内部要因との関連付けが行われるかを示しており、図中、Ｎが付された内部要因あるいは知覚情報は、フラグ付与部２０４によってフラグＮが付与されたものである。まず、知覚情報有無判別部２０２によって知覚情報がある場合（発言有り）と知覚情報がない場合（発言無し）に分けられる。発言無しの場合には、内部要因列挙部２０３によって、内部要因として、「発言意思無し」と「議論能力の欠如」が列挙され、このうち、「議論能力の欠如」にはフラグＮが付与されている。発言有りの場合には、知覚情報細分類部２０５によって、「発言有り」という知覚情報が、例えば、「発言が少なすぎる」、「発言が多すぎる」、「発言がぶつかる」などと分類され、このうち例えば「発言がぶつかる」は、さらに、「割り込み」、「同時発話」、「「間」の直後の同時発話」などに分類されている。これらの階層的に細分類された各知覚情報には、フラグ付与部２０４によってフラグＮが付与されている。さらに、関連付け部２０６によって、細分類された知覚情報と内部要因との関連付けが行われており、例えば、「割り込み」、「同時発話」、「「間」の直後の同時発話」の知覚情報に対しては、それぞれ、「強い反論、主張」、「発話タイミング適正の欠如」、「ゆずりあい」などの内部要因が関連付けられている。これらの関連付けられた内部要因に対しても、フラグ付与部２０４によってフラグＮが付与されている。
【００６７】
図６に示した例では、このようにして改善すべき箇所が抽出されるが、これらの箇所のうち、例えば、「発話タイミング適正の欠如」という発見された問題に関し、その原因となっているコミュニケーションシステムにおける欠陥を特定し、機能改善、あるいは新機能の追加を行うことが考えられる。具体的にはその改善策は、音声遅延を改善することかもしれないし、あるいは、会議参加者の発言欲求を明示的に画面表示するなどの機能の追加かも知れない。
【００６８】
以上説明した本発明の各実施形態において、第１の実施形態のコミュニケーションシステムの送信側の装置と受信側の装置、第２の実施形態のシステムデザイン装置は、いずれも、それを実現するためのコンピュータプログラムを、パーソナルコンピュータやサーバ用コンピュータなどのコンピュータに読み込ませ、そのプログラムを実行させることによっても実現できる。送信側装置を実現するためのプログラム、受信側装置を実現するためのプログラム、あるいはシステムデザイン装置を実現するためのプログラムは、いずれも、磁気テープやＣＤ−ＲＯＭなどの記録媒体によって、あるいは、ネットワークを介して、コンピュータのハードディスク装置などに読み込まれる。その後、そのようなプログラムをコンピュータのＣＰＵ（中央処理装置）が実行することにより、そのコンピュータが、送信側装置、受信側装置、あるいはシステムデザイン装置として機能することになる。
【図面の簡単な説明】
【００６９】
【図１】本発明の第１の実施形態のコミュニケーションシステムの構成を示すブロック図である。
【図２】図１に示すコミュニケーションシステムにおける送信側の装置での処理ステップを示すフローチャートである。
【図３】図１に示すコミュニケーションシステムにおける受信側の装置での処理ステップを示すフローチャートである。
【図４】本発明の第２の実施形態のシステムデザイン装置の構成を示すブロック図である。
【図５】図４に示すシステムデザイン装置での処理ステップを示すブロック図である。
【図６】「ビデオ会議における発言」を改善の対象の事象とした場合のおける知覚情報細分類とヒトの内部要因との関連付けの例を示す図である。
【符号の説明】
【００７０】
１００    知覚情報入力部
１０１    アフォーダンス定性分析部
１０２    アフォーダンス生成部
１０３    アフォーダンス定量分析部
１０４    アフォーダンス強調部
１０５    知覚情報化部
１０６    送信部
１０７    受信部
１０８    興味対象入力部
１０９    知覚情報選択部
１１１    分析部
１１２    推定部
１１３    視覚情報出力部
１５０，１６０    知識データベース
２０１    対象事象特定部
２０２    知覚情報有無判別部
２０３    内部要因列挙部
２０４    フラグ付与部
２０５    知覚情報細分類部
２０６    関連付け部
２０７    システム改善対象決定部
【図１】
2005209022.tif 000003
【図２】
2005209022.tif 000004
【図３】
2005209022.tif 000005
【図４】
2005209022.tif 000006
【図５】
2005209022.tif 000007
【図６】
2005209022.tif 000008