(57)【要約】【課題】生徒が教育や学習に参加しているという気分を味わうことができるようにした、遠隔教育コミュニケーションシステムを提供する。【解決手段】動作状態にされた複数の端末機４、５の各々の演算処理手段に格納されている、固有の分身オブジェクト画像情報１１が、サーバ９を介して、動作状態にされた複数の端末機５・・・の各々の表示手段６・・・に表示され、動作状態にされた複数の端末機５・・・の各々の操作者が、その端末機の外部入力手段から、情報を入力すると、入力された情報が、動作状態にされた複数の端末機５・・・の各々の表示手段６に表示されている、固有の分身オブジェクト画像情報１１・・・に表示されるようになっている。【選択図】  図２
2005055846.tif 000002
【特許請求の範囲】
【請求項１】
サーバと、
前記サーバに通信ネットワークを介して接続された、複数の端末機とを備え、
前記複数の端末機の各々は、
演算処理手段、外部入力手段、表示手段、撮像手段、音声入力手段及び音声出力手段を備え、
前記複数の端末機の各々には、固有番号が割り付けられており、且つ、
前記複数の端末機の各々の演算処理手段には、固有番号に対応するの分身オブジェクト画像情報を格納できるようにされており、
前記複数の端末機を動作状態にすると、
動作状態にされた前記複数の端末機の各々の演算処理手段に格納されている、前記固有の分身オブジェクト画像情報が、前記サーバを介して、前記動作状態にされた複数の端末機の各々の表示手段に表示され、
前記動作状態にされた複数の端末機の各々の操作者が、その端末機の外部入力手段から、情報を入力すると、入力された情報が、前記動作状態にされた複数の端末機の各々の表示手段に表示されている、固有の分身オブジェクト画像情報に表示されるようになっている、遠隔教育コミュニケーションシステム。
【発明の詳細な説明】
【技術分野】
【０００１】  本発明は、インターネット等の通信ネットワークとコンピュータとを組合せて用いることにより、遠隔に離れた生徒と講師とを接続し、実時間・双方向で遠隔教育や遠隔学習を行う、遠隔通信教育システムに関し、特に、生徒が教育や学習に参加しているという気分を味わうことができるようにした、遠隔教育コミュニケーションシステムに関する。
【背景技術】
【０００２】  近時、インターネット等の通信ネットワークとコンピュータとを組合せて用いて、実時間・双方向で遠隔教育や遠隔学習を行う方法として、テレビ会議システムを用いた遠隔講義が知られている。このような講義では、講師及び生徒の顔や姿をカメラにより撮像し、遠隔地相互を双方向通信でつないでカメラの画像を伝達することにより、相手の講師や生徒の顔や姿などの状況を把握しながら、教材や資料を画像として表示し、講師が音声で説明して、生徒からの質問を受けながら、遠隔での教育や学習を行っている。
【特許文献１】再表０１／００９８６７号公報
【０００３】  以下に、従来の遠隔教育のシステムの一例について更に詳しく説明する。【０００４】  図２１は、従来の遠隔教育システムの一例を概略的に示す構成図である。【０００５】  図２１中、この遠隔教育システム１０１は、講師側のカメラ１０２、講師側のマイク１０３、講師側の映像や音声を送受信するＣＯＤＥＣ（端末機）１０４、生徒側で音声や映像を送受信するＣＯＤＥＣ（端末機）１０５、生徒側の画像表示手段１０６、生徒側のスピーカ１０７、インターネットまたはＬＡＮ（通信ネットワーク）１０８、サーバ（配信サーバ）１０９を備える。【０００６】  従来の遠隔教育のシステムにおいては、講師の講義の様子をカメラ１０２で撮影し、マイク１０３で音声を入力し、それらの信号を講師側の音声・映像ＣＯＤＥＣ（端末機）１０４により講師側へ送信し、生徒側は同様の音声・映像ＣＯＤＥＣ（端末機）１０５により受信して、画像表示手段１０６へ表示し、スピーカ１０７にて出力する。講師側の送信する音声・映像信号はインターネットまたはＬＡＮ（通信ネットワーク）１０８を経由して、サーバ（配信サーバ）１０９に伝えられ、サーバ（配信サーバ）１０９により、参加する各生徒全員へ同じ信号を配信する方式で実現されていた。【０００７】  このような方式であるため、講師側の映像や音声は生徒側に送られるが、生徒側の様子は把握できないという問題点があった。【０００８】  また、生徒側にもカメラやマイクを設置し、生徒側の様子をカメラで撮影して、配信サーバを経由して、参加者全員へ配信する方式も実現されているが、遠隔カメラにより撮影される映像は、視点が固定的で、部分的に切り取られた、限られた情報だけしか伝えられないため、画像伝送による時間遅れやノイズ等による画質の劣化も加わり、あくまでも状況把握の参考としての役割にしかならなかった。遠隔カメラ映像からは生徒がどこを見ているかの把握もできず、生徒が本当にわかっているかどうか、生徒がどのように感じているか、などの状況把握は、講師が直接音声で生徒に話しかけて、理解しているかどうか質問し、聞いて確かめるしかなかった。このため、講師の話に対して生徒が理解しているか、注目しているか、興味を示しているか、などの生徒のさまざまな反応を遠隔のカメラ画像から把握するのは至難であり、カメラ映像が無いよりはましというレベルの、限られた効果しか実現できていなかった。【０００９】  生徒側からのカメラ映像の送信ができない、講師側から生徒側への一方向映像通信の場合は、さらに生徒側の状況把握が難しく、講師による一方的な講義にならざるを得ないという問題点があった。【００１０】  即ち、インターネット等の通信ネットワークとコンピュータとを組合せて、実時間・双方向で遠隔教育や遠隔学習を行う場合、従来使われているテレビ会議システムにおいては、相手の講師や生徒の状況を把握する方法として、講師及び生徒の顔や姿をカメラにより撮像し、一方向または、双方向通信でつなぐ方法が実現されている。この場合、講師は遠隔カメラ撮影・伝送した生徒側の状況を写したカメラ映像を見ることにより、生徒の様子を把握する。講師の話に対して生徒が理解しているか、注目しているか、興味を示しているか、などの生徒��さまざまな反応を遠隔のカメラ画像から把握するのは至難であり、カメラ映像が無いよりはましというレベルの、限られた効果しか実現できていなかった。【００１１】  一方、生徒側からのカメラ映像の送信ができない、講師側から生徒側への一方向映像通信の場合は、さらに生徒側の状況把握が難しく、講師による一方的な講義にならざるを得ないという問題点があった。【００１２】  実際に物理的に同じ場所で顔を合わせて話をしている場合に比べて、遠隔のカメラが撮影できる視点は固定的で、部分的に切り取られた、限られた情報だけしか伝えられない。画像伝送による時間遅れやノイズ等による画質の劣化も加わり、遠隔のカメラ映像はあくまでも状況把握の参考としての役割にしかならなかった。カメラ映像からは生徒がどこを見ているかの把握もできず、生徒が本当にわかっているかどうか、生徒がどのように感じているか、などの状況把握は、講師が直接音声で生徒に話しかけて、理解しているかどうか質問し、聞いて確かめるしかなかった。【００１３】  音声による質問やそれに対する応答は、発言者の把握や指名、マイク入力の制御、等の技術的な課題がある。さらに、どのような参加者がいるのかわからない、状況把握ができない環境の中で、講義中に声を出すのは参加者の生徒にとっては、かなりの精神的なプレッシャであり、活発な質疑を実現するにはヒューマンインタフェースとして大きな課題がある。また、音声による発言者は、その場に一人だけであり、同時に多数が参加する教育環境としては、音声による全体の状況把握は非常に難しいという問題点があった。【００１４】  遠隔講義において、文字チャットによるコミュニケーションも利用されているが、文字チャットは文字入力に手間取り、かなり操作に慣れるまではスムーズなコミュニケーションが難しい。文字で表せない気分や雰囲気は伝えるのが難しい。また、文字チャットは各参加者のチャットのメッセージを順番に列として表示するため、参加者が多数で一斉に入力すると、文字列が増え、見にくく、状況把握しにくいという問題点があった。【００１５】  物理的に集合した講習や講義においては、講師は生徒の表情や視線の様子から、言語以外の情報により、生徒の理解状況を体感できるが、遠隔のテレビ会議やテレビ講義による遠隔教育では、非言語的な状況把握が難しく、実際上は、講師が生徒の理解状況を把握しないまま、講師のペースで勝手に話を続けることが多かった。生徒の側も、自分達の状況を講師側へ伝える手段として、物理空間における表情や視線、ジェスチャーを介した無言のフィードバックが使えないため、離れた場所からテレビを見ているような距離感を克服できず、講師との一体感が無くなり、結果的には学習に対する意欲やモチベーションの低下を招いた。【００１６】  講師が講義の参加者の雰囲気を盛り上げようとしてジョークを話しても、生徒が笑ったかどうか把握できなければ、そのようなジョークを続けることは困難となる。ジョークを発して、すぐに参加者からのレスポンスがないと、なんとも話しづらい。このような場合、講師がおかしいですか？と質問するのもそぐわない。ジョークも話せないまま、反応がわからないまま、淡々と講義をするのは、講義する側も、聞く側��やりにくく、つまらないことになる。【００１７】  同様の断絶感は、講師と生徒との間だけではなく、生徒同士の間にも生じた。物理的に集合した研修や講義においては、生徒同士もお互いの表情や動作により、お互いの興味や理解状況を把握することができる。物理的に同席していれば、自分のクラスメートが講師の話をどのように理解したかが、視線やジェスチャー等の非言語的な視覚情報を介して、実時間で把握できる。しかし、テレビ会議やテレビ講義システムを用いた遠隔講義や遠隔教育の場合は生徒相互間の状況把握は非常に難しい。多くのテレビ会議やテレビ講義システムにおいて、講師や発言者は映像としても大きく表示されるが、発言しない生徒に関する映像は詳細には表示されない。したがって、従来の遠隔教育において生徒同士が、クラスメートとしてお互いの学習熱意や理解状況を非言語的に交換することは困難であり、講義参加により生じる集団的な学習効果のインパクトが少なくなり、結果的に生徒の学習意欲やモチベーションの低下を生じる大きな原因のひとつとなっていた。
【発明の開示】
【発明が解決しようとする課題】
【００１８】  本発明の目的は、上述した遠隔教育や遠隔学習の課題を解決し、講師と生徒、生徒同士が、お互いの理解度や興味、感情を実時間で相互に発信、交流することができ、相互にスムーズに情報交換しながら、遠隔学習を進めることができるシステムや方式を実現することにある。
【課題を解決するための手段】
【００１９】  本発明に記載の遠隔教育コミュニケーションシステムは、サーバと、サーバに通信ネットワークを介して接続された、複数の端末機とを備え、複数の端末機の各々は、演算処理手段、外部入力手段、表示手段、撮像手段、音声入力手段及び音声出力手段を備え、複数の端末機の各々には、固有番号が割り付けられており、且つ、複数の端末機の各々の演算処理手段には、固有番号に対応するの分身オブジェクト画像情報を格納できるようにされており、複数の端末機を動作状態にすると、動作状態にされた複数の端末機の各々の演算処理手段に格納されている、固有の分身オブジェクト画像情報が、サーバを介して、動作状態にされた複数の端末機の各々の表示手段に表示され、動作状態にされた複数の端末機の各々の操作者が、その端末機の外部入力手段から、情報を入力すると、入力された情報が、前記動作状態にされた複数の端末機の各々の表示手段に表示されている、固有の分身オブジェクト画像情報に表示されるようになっている。【００２０】    更に、本発明では、音声通信、画像通信を活用した遠隔教育のための分身型画面表現を活用したコミュニケーション方式を実現する。これを実現するための手段として、下記の手段を組合わせて実現する。【００２１】  （あ）遠隔の講師と複数の生徒をネットワークで結び、講師の音声や講師の顔映像、あるいは資料影像を生徒に配信し、表示する手段
（い）遠隔の講義を受講する生徒全員の名前および顔写真もしくはカメラ画像を、ネットワークを介して参加者全員に配信し、参加者個人毎の「分身オブジェクト」の集合として、画面に表示する手段
（う）受講中の感情や意思、表明したい意見、疑問、ジェスチャー、アクションなど思考、心理、動作に関する多様なメッセージ・リストを一覧的に参加者の画面上に表示し、各自がマウスなどのポインティングデバイスによりワンタッチもしくはワンクリックで、自分の感性に合致する「メッセージ」を選択し、システムに入力する手段
（え）上記（う）のメッセージ・リストの中から、各参加者が選択した「メッセージ」を、ネットワークを介して参加者全員に配信し、個人毎の「分身オブジェクト」からの「吹き出しオブジェクト」として表示する手段
（お）上記（う）のメッセージ・リストの中から、各参加者が選択した「メッセージ」を、ネットワークを介して参加者全員に配信し、選択した「メッセージ」に対する合成音声や効果音を出力する手段
（か）上記（う）のメッセージ・リストの中から、各参加者が選択した「メッセージ」を、ネットワークを介して参加者全員に配信し、個人毎の「分身オブジェクト」自体の個別動作として画面上でアニメーション表現する手段
（き）上記（え）の個人毎の「分身オブジェクト」からの「吹き出しオブジェクト」や、上記（か）の「分身オブジェクト」の個別動作などの、他の参加者の個々から発信・表示されるオブジェクトに対して、参加者が自分の感性に合致し賛同・共感するものをマウスなどのポインティングデバイスによりワンタッチもしくはワンクリックで選択して、「賛同信号」としてシステムに入力・配信する手段
（く）上記（き）の、ネットワークを介して配信される、参加者からの「賛同信号」に応じて、元となる「分身オブジェクト」や「吹き出しオブジェクト」と、賛同者の「分身オブジェクト」とを連結的に修飾した、「賛同オブジェクト」を、画面上でアニメーション表現する手段
（け）受講中の間、参加者からの「メッセージ」選択や「賛同信号」入力などの情報発信数を計測する手段を備え、情報発信が少ない場合に、システム側から自動的あるいは講師による手動操作により、その参加者へアラーム（入力促進メッセージ、アラーム音）を表示・出力する手段
（こ）上記（う）のメッセージ・リストに対して、参加者が自分自身で新たな「メッセージ」を追加し、それに対応した「吹き出しオブジェクト」、合成音声、「分身オブジェクト」自体のアニメーション表現を加工もしくは追加する手段
【発明の効果】
【００２２】  本発明では、参加者全員の分身に相当するオブジェクト（分身オブジェクト画像情報）を参加者全員の画面に表示させ、参加者が感じた感性をワンクリックの簡単な操作で、メッセージとして配信し、そのメッセージに対応して、各々の分身オブジェクト（分身オブジェクト画像情報）に画像としての動作や吹き出し型の修飾表示を動的に加えることにより、講義中の参加者の状況や反応を素早く、かつわかりやすく伝達する。このことにより、講師および生徒相互間の直接的な音声対話以外の手段による、感性的な状況把握を容易にするとともに、同時に生徒からの積極的な意見表明や、反応を引き出す効用を実現することができる。【００２３】  さらに、分身オブジェクト（分身オブジェクト画像情報）の座席を画面上での仮想的な教室内での配置として表示し、あらかじめ決められた座席や各自が自由に選択できる座席への着席イメージとして表示制御することにより、参加者の仮想的な教室への入室感覚を生成する。このことにより、参加者各自の分身オブジェクト（分身オブジェクト画像情報）の座席や位置を通じた、仮想的な教室内での生徒と講師との距離感、生徒同士での距離感、隣同士の感覚などの物理空間に類似した感性的環境を実現する。また、座席配置に際して、参加者のグループ分割の機能制御を、パーティションイメージの画像表現と結びつけて実施し、画面上でパーティションイメージにより座席を分断することにより、グループ音声の遮断や、インタラクションの規制などのグループ管理制御を簡単な操作で実行できるようにする。これにより、物理的な教室では実行できないような、ワンタッチで多人数を二人ずつのグループに分けたり、講義とグループ討議をフレキシブルに切り換えるなどの環境切り替えが容易な操作で実現できる。【００２４】  また、分身オブジェクト（分身オブジェクト画像情報）への吹き出し型の修飾表示を、遠隔教育環境における音声発言者の切り替えやマイクの切り替え制御に適用して実施し、発言中の人物の明示や発言を希望している参加者の明示と音声制御とを連動した方式を実現する。このような発言者および発言を希望している参加者を明示する制御方式により、従来のシステムでは司会者などによる人為的な制御をしないと難しいという、多数の参加者の中での発言権の移動制御の問題を解決し、参加者同士での自律的な判断による、スムーズな発言権移行がやりやすい方式を実現する。
【発明を実施するための最良の形態】
【００２５】  図１は、本発明に係る遠隔教育コミュニケーションシステ厶の概念を概略的に説明する図である。図１中、図１（ａ）は、従来の遠隔教育システムの概念図であり、また、図１（ｂ）は、本発明に係る遠隔教育コミュニケーションシステムの概念である。【００２６】  従来の遠隔教育システムは、図１（ａ）に示すように、遠隔教育の場を講師が生徒へ教材などのコンテンツを示しながら講義するという概念であり、講師側からは生徒を遠隔の先にあるひとまとめとして、とらえるものであった。【００２７】  これに対し、本発明に係る遠隔教育コミュニケーションシステムでは、遠隔教育の場を、図１（ｂ）に示すように、講師と複数の生徒が講師の講義を通じて相互にインタラクションを行う場であるという概念で捉え、その交流のためのシステムを実現する。このための手段として、遠隔教育の場に参加する生徒を、生徒という集合にひとまとめにするのではなく、各々の生徒の存在を明確に表す分身として、画面上に明示して表現する機能を実現するものである。【００２８】  図２は、本発明に係る遠隔教育コミュニケーションシステムの一例を概略的に示す構成図である。【００２９】  遠隔教育コミュニケーションシステム１は、講師側のカメラ２、講師側のマイク３、講師側の映像や音声を送受信するＣＯＤＥＣ（端末機）４、生徒側で音声や映像を送受信するＣＯＤＥＣ（端末機）５、生徒側の画像表示手段６、生徒側のスピーカ７、インターネットまたはＬＡＮ（通信ネットワーク）８、及び、サーバ（配信サーバ）９を備える。【００３０】  この遠隔教育コミュニケーションシステム１の以上の構成は、図２１に示す、従来の遠隔教育システム１０１と同様であるが、この遠隔教育コミュニケーションシステム１は、更に、画面上に表示する参加者の生徒を表す分身オブジェクト画像情報１１をＣＯＤＥＣ（端末機）４、５に格納できるようにしている。【００３１】  尚、この分身オブジェクト画像情報１１の各々は、ＣＯＤＥＣ（端末機）４、５の固有番号（ＩＤ）に対応するように固有の画像情報（例えば、ユーザの写真等）にされている。【００３２】  また、ＣＯＤＥＣ（端末機）４、５の各々は、画像表示手段６上に表示するメッセージ・リスト１２、分身オブジェクト画像情報１１やメッセージ・リスト１２の表示制御や通信制御を実行するクライアント・オブジェクト処理システム１３を備える。【００３３】  尚、サーバ（配信サーバ）９は映像・音声配信サーバ９ａ、メッセージ配信サーバ９ｂの機能を有する。【００３４】  この遠隔教育コミュニケーションシステム１では、複数の端末機４、５を動作状態にすると、講師と生徒を結ぶコミュニケーション機能として、従来の遠隔教育システムの講師および生徒の参加者を結んだ、カメラ２、マイク３、音声・画像ＣＯＤＥＣ４、５による、講師と生徒とを結ぶカメラ映像や音声通信だけでなく、参加者の端末の画面上に、参加者の分身オブジェクト画像情報１１、メッセージ・リスト１２及びメッセージ・リスト１２を表示し、それらを組合わせて、参加者同士のコミュニケーションを実現できる。【００３５】  尚、この遠隔教育コミュニケーションシステム１では、インターネットまたはＬＡＮ（通信ネットワー��）８を介して接続される映像・音声配信サーバ９ａ、メッセージ配信サーバ９ｂにより配信される情報を基にして、講師および生徒の端末機５のクライアント・オブジェクト処理システム１３が、分身オブジェクト画像情報１１とメッセージ・リスト１２を画像表示手段６上に表示する。生徒側の画像表示手段６においては、講師側との音声・画像ＣＯＤＥＣ（端末機）５による音声や映像の送受信や表示に加えて、分身オブジェクト画像情報１１やメッセージ・リスト１２が表示され、マウス等のポインティングデバイス１４により操作される。【００３６】  尚、メッセージ・リスト１２には、予め、受講中に想定される、「おもしろい」、「わからない」、「おどろいた」、などの多様なメッセージがリストとして一覧的に提示されている。生徒は、自分が随時感じたものに合致したメッセージをポインティングデバイス１４で、ワンタッチで選択する。選択されたメッセージは、クライアント・オブジェクト処理システム１３により、メッセージ配信サーバ９ｂへ送られ、参加者全員へ配信される。メッセージ配信サーバ９ｂから配信されたメッセージは各参加者のクライアント・オブジェクト処理システム１３により処理され、画面上の分身オブジェクト画像情報１１の動作や、吹き出し型のメッセージなどとして表示される。【００３７】  図３は、遠隔教育コミュニケーションシステム１におけるメッセージ情報の配信処理の例を示す図である。図３中、４は講師用端末機、５は生徒用端末機、９ｂはメッセージ配信サーバ、８はインターネットまたはＬＡＮ（通信ネットワーク）である。【００３８】  この遠隔教育コミュニケーションシステム１では、遠隔教育に参加する生徒の入力するメッセージを、講師や他の生徒全員へ配信する。このようなメッセージの相互配信を実現する方法としては、お互いが、各々全員の参加者の端末にピア・ツー・ピアで配信する方法があるが、その場合は全体の端末機の数をｍとすると、各端末が同様のメッセージを一斉にお互いに配信した場合、自分自身への配信を除いた、ｍ×（ｍ−１）回の配信処理が発生する。これは、参加する端末数ｍが増大するとほぼ二乗に比例してトラフィックが増大することになり、少人数の参加者の場合以外は、実用性に問題が生じる。【００３９】  この問題を防止するために、図３に示したような、メッセージ配信サーバ９ｂを用意し、全員がこのサーバ９ｂへメッセージを配信し、またそのサーバ９ｂから他者のメッセージを取得する方法がある。この場合は全体の端末機の数をｍとすると、各生徒の端末機５・・・が一斉に同様のメッセージを配信したとしても、配信処理はメッセージ配信サーバ９ｂへの送信と、サーバ９ｂからの受信の２回の２ｍ回ですむことになる。【００４０】  この遠隔教育コミュニケーションシステム１でのメッセージ配信は、サーバ９ｂを用意する方式でも、ピア・ツー・ピアによる相互配信のどちらの方式でも実現できる。【００４１】  図４は、この遠隔教育コミュニケーションシステム１において実現する画面上の分身オブジェクトの構成の例を示す図である。【００４２】  この遠隔教育コミュニケーションシステム１では、遠隔に離れた参加者の各々のお互いの様子や反応を、参加者各々をシンボ���として表現する分身オブジェクト画像情報２３の動作や吹き出しによって表現する。【００４３】  分身オブジェクト画像情報の基本形は、参加者の顔写真情報またはカメラ映像情報２１、参加者の氏名またはニックネーム２２、分身オブジェクト画像情報の形状を示す縁２３、分身オブジェクト画像情報２３へ付加表示される吹き出しオブジェクト２４を備える。【００４４】  これにより、参加者は、画像表示手段６・・・の画面上に表示される参加者の分身オブジェクト画像情報によって、他の参加者の存在を明示的に把握できる。【００４５】  従来の遠隔教育システムにおいては参加者の名前のリスト表示などは実施されていたが、顔写真や名札を全体としてひとつの固まりとして、分割的に取り扱うことはなされていなかった。また、従来のテレビ会議やテレビ講義においては、相手の顔や上半身の映像や状況映像をカメラで撮影して相手側に表示することはできていたが、その表現はあくまでも各々の映像を表示するウィンドウとして画面上に表示することしかできていなかった。【００４６】  また、画面上に多数のウィンドウを表示し、それぞれのウィンドウに遠隔の各地の参加者のカメラ映像を表示する場合でも、各々のウィンドウは単純な画面分割という表現であり、各々の画面を参加者の分身として捉えた画像処理を実現することはできていなかった。【００４７】  しかしながら、この遠隔教育コミュニケーションシステム１では、分身オブジェクト画像情報が参加者の分身として、ひとつの固まりとして捉えられて、取り扱えるようにする際の心理的な認識効果を出すために、分身オブジェクト画像情報の縁２３が重要な役割を果たす。【００４８】  ここに、分身オブジェクト画像情報の縁２３の形としては、顔写真や名札の形状に合わせた矩形のものが画像表示処理としては簡単に実現しやすいが、人間の分身としての心理的な効果を増すためには、矩形ではなく、より柔らかい楕円形や丸みをおびた形状の効果が大きい。【００４９】  また、画像表示手段６の画面上の分身の表現については、人物の人間的な表現の効果を上げるために、３次元のコンピュータグラフィックスなどを用いて、実在の人間の形状に近い形を表現することも考えられるが、そのような場合は、逆にリアリティが上がりすぎて、いろいろなジェスチャや分身の動作などを積極的に実行しにくくなるという心理的な問題が発生する。【００５０】  この点、遠隔教育コミュニケーションシステム１では、分身オブジェクト画像情報の構成要素を顔写真あるいは顔のカメラ映像と名札という２次元的な素材だけに限定し、分身オブジェクトの縁の形状によって、分身をシンボル的に表現することにより、分身オブジェクトに対する動作や修飾がリアルな雰囲気にならず、あくまでもシンボルとしての表現であるという効果を実現している。【００５１】  このようなシンボル的な表現は、文字チャットにおける、文字記号を組合わせたフェイスマークの利用において見られるように、謝ったり、驚いたり、感謝したりなどの多様な感情表現を気軽に、かつ積極的に発信させる効果がある。また受信側も、シンボル的なオーバーアクションの表現により、滑稽な印象が増幅され、コミュニケーションがスムーズに進行する効果が出���。【００５２】  本発明で実現する分身オブジェクトは文字記号により構成されるフェイスマークに比べて、顔写真またはカメラ映像を要素とすることにより、より実在の人物自身としての存在感をもちつつ、シンボルとしての軽やかな心理効果を備えた分身感覚とを両立して実現できる。【００５３】  単純なフェイスマークや、あるいは擬似的あるいは漫画的なアニメーションによる人物表現を用いた分身表示や、動物のマークなどを用いた分身表現などと比較して、本発明での顔写真やカメラ映像と名札との組合わせによる分身表現は、実際の本人の姿と名前を用いていることから、本当にその場に参加している人物という実在感が高い。【００５４】  教育、学習、議論、討論などの実名でのコミュニケーションにおいては、本発明の分身表現を利用することにより、参加者相互の存在感や、実際の人物とのコミュニケーションが行われているという信頼感の醸成の効果が広がり、参加意欲の強化につながる。【００５５】  このように、実在感効果と、シンボル効果とのバランスの観点から見て、本発明での分身オブジェクトは、３次元ＣＧによるリアリティのある分身イメージと、フェイスマークのような抽象化されたシンボルとの、中間的で双方の必要な機能を抽出した構成となっている。【００５６】  図５は、分身オブジェクトの形状として、人間の分身としての心理的効果を増すために、矩形から変形させた形状の例を示す図である。【００５７】  図６は、遠隔教育コミュニケーションシステム１の端末機５側の画像表示手段の画面の構成の例を示す図である。【００５８】  図６中、３１は講師の講義の様子をカメラで撮影した映像を受信し表示したもの、３２ａ、３２ｂ、３２ｃは参加者の生徒の分身オブジェクトを表示したもの、３３はメッセージ・リスト、１４はマウス等のポインティングデバイスである。【００５９】  遠隔教育コミュニケーションシステム１において、遠隔教育に参加した生徒は講師から送られてくる講義の様子を撮影したカメラ映像３１を画面に表示して、それを見ながら、講師の講義の音声を聞く。参加者の顔写真や映像と名札からなる分身オブジェクト３２ａ、３２ｂ、３２ｃが画面上に表示され、その講義に参加している生徒のイメージが明示される。生徒は講義の最中に講師の話に対して感じたことを、画面上に表示されたメッセージ・リスト３３の中から選択し、ポインティングデバイス１４により随時クリックして、自分がその時に感じた感覚を入力する。入力されたメッセージはサーバ９を介して、参加者全員の端末機５へ送信される。入力されたメッセージに応じて、分身オブジェクト３２ｂのようにメッセージを表す言葉自体を分身オブジェクトからの吹き出し型の表示としての出力（「おもしろい」というメッセージの吹き出し表示）や、分身オブジェクト３２ｃのアニメーションとしての動作（「びっくり」というメッセージの表現として、分身オブジェクトの一回転動作をアニメーション表示）として表示する。講師や他の参加者は分身オブジェクトに表示されるメッセージや動作を見て、各々の生徒がどのような心理的状態にあるかを明確に把握することができる。このような明示的な参加者の心理状態や感覚の表現が簡単な操作（マウスによるワンクリック）で実現できるので、参加者は気軽に、また積極的に自分の感覚を表明しやすくなる。出力される吹き出しオブジェクトや分身オブジェクトのアニメーション動作は、直接的な発声や物理的な身体動作に比べて、デフォルメされ、誇張され、滑稽な雰囲気が付加されるので、参加者同士の円滑なコミュニケーションの醸成に効果が大きい。従来の物理的に同席した面談においては、顔の表情やジェスチャーなどの非言語的な手段で表現していた面談者の感覚や心理状態を、より積極的に、自己表現として表出することができる。【００６０】  図７は、遠隔教育コミュニケーションシステム１の処理の流れの例を示すフロー図である。【００６１】  遠隔教育コミュニケーションシステム１の処理は、端末機５側のクライアント側の処理（オブジェクト処理）とサーバ９側の処理（メッセージ配信）とに分かれて実現される。【００６２】  クライアント側には、メッセージオブジェクト４１、分身オブジェクト４２、音声オブジェクト４３、吹き出しオブジェクト４４、および、これらのオブジェクトに関するオブジェクト通信処理４５がある。サーバ９側にはメッセージに対応する動作を規定するメッセージ・テーブル４６がある。【００６３】  これを動作するには、メッセージオブジェクト４１において、まず、クライアントの端末機５の画像表示手段６の画面上にメッセージ・リストを表示する。遠隔教育コミュニケーションシステム１では、メッセージ・リストに対するユーザの入力を監視し、ポインティングデバイスによるクリックなどの選択を検出する。【００６４】  次に、ユーザがどのメッセージを選択したかを検出したら、その検出結果をシステムのオブジェクト通信制御へ伝える。【００６５】  オブジェクト通信制御においては、ユーザが選択したメッセージをサーバ９側へ送信する。【００６６】  サーバ９側は、ユーザ側が選択したメッセージを受信し、事前に登録したメッセージ・テーブルを参照することにより、そのメッセージに対応する対象オブジェクト、およびオブジェクトに対する指示動作を読み出す。【００６７】  次に、サーバ９側のシステムは、受信したメッセージに対応するオブジェクトやオブジェクトに対する動作指示を、遠隔教育に参加しているクライアントの全員へ配信する。【００６８】次に、クライアント側のオブジェクト通信制御はサーバ９から、オブジェクトに対する動作指示を受信し、それをクライアント側の対象となるオブジェクトへ伝える。【００６９】  動作指示が分身オブジェクトに対するものである場合は、分身オブジェクトは対象となる分身オブジェクトに対して、指示されたアクションや、吹き出しオブジェクトの表示を行う。【００７０】  また、動作指示が音声オブジェクトに対するものである場合は、音声オブジェクトは指示された音声メッセージを出力したり、指示された効果音や合成音声をクライアントから出力する。【００７１】  また、動作指示が、他の参加者への賛同表現であった場合は、対象となる分身オブジェクトに対して、相互に連結した吹き出しオブジェクトを表示し、賛同表現を実行する。【００７２】  図７では、クライアント側のメッセージに対応する、オブジェクトや動作の指示の種類を定めたメッセージ・テーブルは事前にサーバ側に登録しておき、サーバ側でメッセージに対する動作指示を参照する方法を示したが、この他の方法として、メッセージ・テーブルを各々のクライアントへ事前に配信しておき、サーバは受信したメッセージを、単純に、全クライアントへ配信することのみを実行し、メッセージに対する動作指示の参照は各クライアントが自分でメッセージ・テーブルを参照して実行する方法もある。このようなメッセージ・テーブルをサーバ側、あるいはクライアント側のどちらに配置するかは、サーバの規模やメッセージ・テーブルへの改変の頻度などの他のシステム条件により、システム構成を適宜選定できる。【００７３】  図８は、遠隔教育コミュニケーションシステム１において、遠隔教育への参加者用のクライアント側の画面上に用意しておく、メッセージの例である。参加者が遠隔講義を受講中や、遠隔会議の参加中に、自分の感じた感覚や思いを簡単に、ワンクリックやワンタッチで入力できるように、受講中や会議中に想定される心理的なイベントを単語として表現し、一覧的に表示したメッセージ・リストを作成する。参加者が想起する心理的なイベントは、その意図の種類に対応して、大きくは、「理解・賛同」、「興味・面白さ」、「感動・感情」、「技術・希望」に分類される。参加者が自分の感じた感覚に相当する単語や語彙を選定しやすくするためには、参加者が選択、入力する対象となる一覧表示としてのメッセージ・リストへは、これらの４分類すべてをカバーするように単語や語彙の種類を用意する必要がある。【００７４】  メッセージ・リストへ語彙を一覧的に表示する際、意図の種類に応じて、分類してまとめておくことにより、参加者が自分の感じた感覚に一番合致した語彙を選定するのが容易になるという効果が実現できる。また、上記の４分類において、肯定的な語彙と否定的な語彙を対応させて、一覧的に配置して表示することにより、各々の感覚に対応する語彙の選定がより容易になる。【００７５】  メッセージ・リストに表示する語彙として、心理的な言葉だけでなく、「拍手する」、「うなずく」、「首を振る」、「あくびする」、「笑う」、「首をかしげる」、「目を丸くする」、「手を振る」、「お辞儀する」、などの具体的な非言語的コミュニケーション動作に直接的に対応する語彙を用意する方法もある。参加者が自分のしたい非言語的コミュニケーション動作をメッセージ・リストから選択して、分身オブジェクトからの吹き出しオブジェクトへ文字として表示、あるいは分身オブジェクトの擬似的なアニメーション動作として表現することにより、その意図や意思を他の参加者へ伝達できる。【００７６】  メッセージ・リストの表示方法としては、語彙の全体を一覧的に表形式で常時表示する方法が、ユーザにとって一番容易に選定しやすい方法である。画面上に常時表示されている語彙が、ユーザの視野に常時容易に入ることにより、積極的な自己表現やレスポンスの反応をやりやすくする。一覧的に表示されていないと、ユーザは操作の煩わしさから、反応をクリックすることが少なくなる。【００７７】  一方、表示画面の都合でメッセージ・リストを常時表示できない場合は、プルダウンメニュー形式や、アイコン型のボタンによる、２段階��の呼び出し型の表示方法がある。これは、自己表現や操作に習熟したユーザにとっては有効な方法である。【００７８】  図９は、本発明に係る遠隔教育コミュニケーションシステム１の分身オブジェクトの動作表現の例である。【００７９】  ５１は分身オブジェクトの構成例であり、顔写真と氏名を記した名札から構成される分身オブジェクトを示している。【００８０】  ５２は、分身オブジェクトからの吹き出しオブジェクトの例を示す。吹き出しオブジェクトは入力されたメッセージを文字メッセージとして表示するために用いる。メッセージ内容と発信者を示す吹き出し口により、だれが、どんなメッセージを出しているかをわかりやすく表示する。【００８１】  ５３は、分身オブジェクトの縁の色や太さを変化させた、アニメーション修飾の例を示す。分身オブジェクトの縁の色や太さを動的に変化させることにより、分身に対応するユーザの感情や心理状態を表現する。例えば、メッセージの中でも肯定的なメッセージの場合は縁の色を赤色に変化させ、否定的なメッセージの場合は青色に変化させることにより、メッセージで表現する心理をよりわかりやすく増幅して表現することができる。【００８２】  ５４は、分身オブジェクトを回転させた、アニメーション修飾の例を示す。従来のテレビ会議やテレビ講義では、固定的な表示ウィンドウとして表示されていた人物の顔写真やカメラ映像が、名札や縁と一緒に回転することにより、分身オブジェクトで表示されている参加者の心理を強く印象的に表現することができる。驚いた感情や、受けた感情の強さを強調する場合にわかりやすい、効果的な表現として実現できる。実際の場では身体を回転させるような激しい動作をすることはないが、このようなシンボルとしての場においては、分身オブジェクトを回転することにより、非常に強烈な自分の心理表現の非言語動作として使うことができる。【００８３】５５は、分身オブジェクトの上下動作、あるいは左右動作の例である。分身オブジェクトを上下あるいは左右に揺する動作を表現することにより、「うなづき」や、「いやいや」などの非言語的なジェスチャーの印象の表現を実現できる。【００８４】  ５６は、分身オブジェクトの明るさを点滅させた、アニメーション修飾の例を示す。分身オブジェクトを点滅させることにより、実際の場において目をパチパチ、心臓がドキドキするような喜びの非言語動作に対応させた表現として利用することができる。【００８５】  これらの分身オブジェクトに対するアニメーション修飾は、それぞれ独立して、あるいは組合わせて適用することができる。ユーザが選択、入力したメッセージに対してどのようなアニメーション修飾を表示するかは、事前にメッセージ・テーブルとして登録しておくことにより、システ厶が対応する動作を実行する。【００８６】  図１０は、分身オブジェクト同士での賛同の感情表現の実施例である。【００８７】  遠隔教育や遠隔会議の環境を表す画面として、画面上に配列的に配置された複数の分身オブジェクト相互において、お互いが握手したり、お互いの手をタッチしたりする非言語的動作を表現した例である。【００８８】  １）氏名：ＡＡの参加者がメッセージ「ＯＫ！」を選択し、自分の分身オブジェクトにメッセージに対応する吹き出しオブジェクトを表示する。【００８９】  ２）この吹き出しオブジェクトを見て、それに賛同あるいは賛成した、氏名：ＦＦの参加者が、氏名：ＡＡの吹き出しオブジェクトを選択してワンクリックまたはタッチする。この感覚は、自分が相手の手に握手またはタッチする非言語的動作に対応する印象を生成できる。【００９０】  ３）氏名：ＦＦの参加者の、氏名：ＡＡの参加者のメッセージに対する賛成のタッチ動作を表現する修飾として、氏名：ＦＦの分身オブジェクトから吹き出しオブジェクトが氏名：ＡＡの吹き出しオブジェクトとリンクあるいは結合した表現で表示される。これにより、その場の参加者全員が、氏名：ＡＡの参加者に対して氏名：ＦＦの参加者が賛同した様子が、明示的に伝えられる。【００９１】  従来の遠隔教育やテレビ会議システムにおいては参加者同士でお互いに握手したり、タッチしたりすることができず、姿はカメラ映像として見えてはいるものの、同じ場所に同席してお互いが非言語的にインタラクションすることができないというまどろっこしさがあった。相手に触ったり、肩をたたいたり、握手したり、小突いたり、などの身体的なインタラクションができず、全員が各々分割されたウィンドウに分散され、相互には手を出すことができないという制約があった。本発明では、分身オブジェクトというシンボルを介して、分身オブジェクト同士でのインタラクションを実現することにより、お互いがシームレスに同じ場所を共有し、一体感を持って交流でき、隣り合って同席し参加している感覚が生成できる。【００９２】  このような参加者同士の分身オブジェクトの結合表現は、賛同や賛成だけでなく、乾抔、握手、肩たたき、抱擁、などの相互交流の非言語的動作のアニメーション修飾として適用できる。分身オブジェクトを介したインタラクションは、実際にリアルの場に同席した以上の、より増幅された相互交流を導く効果がある。簡単なワンクリックにより、相手の肩をたたく感覚で、賛同オブジェクトを表示し、分身オブジェクトを修飾することにより、自分の好意を相手に明示することができる。自己表現が下手だと言われる人にとっても、分身オブジェクトを介すれば、オーバーアクションのジェスチャーとして気軽な感覚で使える。【００９３】  図１１は、本発明の分身オブジェクトのアニメーション修飾とメッセージとの対応関係の実施例である。【００９４】  メッセージ「なるほど（うなずく）」６１ａに対しては、分身オブジェクトの上下動作の繰り返し動作６１ｂ、「わからない（首をかしげる）」６２ａに対しては分身オブジェクトを少し傾ける動作６２ｂ、「おかしい（笑う）」６３ａに対しては、分身オブジェクトを左右に回転して揺する動作６３ｂ、「ちがう（首を横に振る）」６４ａに対しては、分身オブジェクトの左右動作の繰り返し動作６４ｂ、「はずかしい（身をすくめる）」６５ａに対しては、分身オブジェクトの全体サイズを縮小する動作６５ｂ、「ごめんなさい（頭を下げる）」６６ａに対しては、分身オブジェクトの上下サイズを縮小し、高さを縮める動作６６ｂ、「びっくり（驚きの動作）」６７ａに対しては、分身オブジェクトを一回転する動作６７ｂ、「うれしい（喜びの動作）」６８ａに対しては、分身オブジェクトの点滅または色を変化させる動作６８ｂを各々対応させ、これをメッセージ・テーブル４６として保持する。【００９５】  このようなメッセージ・テーブル４６を用意し、参加者から発せられるメッセージに対応する動作を参照し、分身オブジェクトのアニメーション動作を実行し、吹き出しオブジェクトにメッセージの語彙を表示する。【００９６】  分身オブジェクトのアニメーション修飾の動作に関しては、本実施例のように、実際の人物の動作と対応させた印象をもつ、シンボル化しやすい分身オブジェクト動作をどの参加者へも共通動作として選定する場合以外に、自由に分身オブジェクトの動作を利用者自身が選定あるいは加工し、参加者独自の分身オブジェクトの動作機能として、それを事前にメッセージ・テーブルとして登録する方法も可能である。【００９７】  図１２は、本発明の分身オブジェクトとして、参加者の複数の顔写真を用意し、それらを切り換えて分身オブジェクト中に表示するアニメーション修飾の方法により、多様なメッセージとの対応を実現した例である。【００９８】  これを動作するには、事前に参加者の顔写真として、普通の表情の顔写真７１ｂ、わからない表情の顔写真７２ｂ、面白いと思ったときの笑い顔の顔写真７３ｂ、なるほどと納得したときの顔写真７４ｂを用意して、それらを素材とする分身オブジェクトを作成する。【００９９】  各々のメッセージと分身オブジェクトとの対応関係として、「わからない」というメッセージ７２ａに対してわからない表情の顔写真７２ｂ、「おもしろい」７３ａというメッセージに対して面白いと思ったときの笑い顔の顔写真７３ｂ、「なるほど」７４ａというメッセージに対してなるほどと納得したときの顔写真７４ｂ、それ以外のメッセージ７１ａに対して普通の表情の顔写真７１ｂという対応関係のメッセージ・テーブル４６を設定する。【０１００】  この登録されたメッセージ・テーブル４６を事前にクライアントへ配信する。【０１０１】  参加者から入力されたメッセージに応じて、対応する表情の顔写真からなる分身オブジェクトの表示に切り換えて、画面上に表現する。これにより、分身オブジェクトの顔写真が、各々の入力されたメッセージに応じて切り替わることとなり、カメラで撮影された人物映像が無くても、参加者の表情の変化を強調して表現できる。事前に顔写真を準備する際に、自分が意図したい顔の表情を自由に選択して登録することが可能であり、各自の好む自己表現を容易に実現できる。【０１０２】  図１３は、本発明の分身オブジェクトの座席配置の実現例である。【０１０３】  顔写真と名札からなる分身オブジェクトは画面上で、参加者の存在を明示するシンボルであり、画面上のその位置は遠隔教育の教室やテレビ会議の会議室における座席として制御される。図１３は、講師の映像または講師の分身オブジェクトを上段に配置し、その下に行列形式に生徒の分身オブジェクトを配列した例である。参加者の生徒は講師の教壇に向かって整列して並んだ教室内に座席があり、各々が着席した表現を実現している。【０１０４】  図１４は、別の座席は位置の実施例である。【０１０５】  講師の映像または講師の分身オブジェクトを囲んで、生徒の分身オ��ジェクトがその周りをぐるりと取り囲んだ座席配置として制御されている。この場合は、参加した生徒は講師を囲む円卓に全員が着席している印象をもつように表現している。【０１０６】  講師の映像は単純なカメラ映像の受信映像そのままを表示するか、もしくは、講師自身の顔写真などを素材とする分身オブジェクトとして表示制御することができる。講師自身を顔写真からなる分身オブジェクトとして表現すれば、講師のカメラ映像が無くても、音声通信と分身オブジェクトの動作だけで、遠隔教育や会議の相互交流を実現できる。【０１０７】  図１５は、本発明の分身オブジェクトの座席配置を制御する方法の例を説明する図である。【０１０８】  参加者の分身オブジェクトの座席配置に関しては、システムに参加者がログインし接続した際に、事前に決められた画面上の座席位置へ配置することができる。あるいは、教室への入室順（接続順）にしたがって、あらかじめ決められた順番で座席を指定して着席させる方法も可能である。【０１０９】  図１５において、まず、１）クライアントがサーバへ接続しログインし、教室へ参加する。【０１１０】  次に、２）サーバ側は参加者の参加順番、参加者の氏名またはＩＤ番号、画面上の座席位置、の対応関係を示す座席テーブルを参加クライアントへ配信する。【０１１１】  次に、３）クライアントは配信された座席テーブル情報に基づき、教室に参加した各分身オブジェクトの画面上の配置を決定する。【０１１２】  次に、４）クライアントは、決定した位置に分身オブジェクトを表示する。【０１１３】  参加者の座席配置が先着順など、あらかじめ固定的に決められていない場合は、座席テーブルは参加者が追加される度に情報が追加され、クライアントは追加された座席テーブルを受信して、各参加者の座席配置を決定する。【０１１４】  図１６は、本発明における座席とパーティション機能の実現例を示す図である。【０１１５】  遠隔教育やテレビ会議などにおいて、講義、演習、討論の進行の際、参加者全員が同じ場所で、一斉に同じ話を聞き、全員で議論するモードだけでは都合が悪いケースが生じる。例えば、いくつかの小グループに分かれて議論するモード、二人ずつのペアに分かれて練習するモード、全員が別々の個室に分かれて、各自で演習や試験に取り組むモード、などの目的に応じた部屋の構成を実現する必要が生じる場合がある。このような大部屋モードと個別の部屋モードとの分離や集合の実現方法は物理空間で実現しようとすると、可動式の壁やパーティションの設置などが必要であり、非常に手間がかかるという問題点がある。【０１１６】  従来の遠隔教育システムやテレビ会議システムは参加者全員が同じ場所に集まる機能のみの実現を目指しており、このような自由にパーティションによって教室や会議室の空間を区切る機能は実現されていなかった。【０１１７】  遠隔のクライアントへ情報や映像、音声を配信するサーバは、それ自身は参加者のどれにどのような情報や音声信号を配信し、あるいはどの情報や音声信号を配信しないか制御することができるが、その指定の方法が課題であった。多数の参加者のだれとだれがグループになり、どのような情報を遮断するか、これらを逐一指示あるいは指定するのは��常に煩雑である。サーバ側へグループ分けの情報を伝達する方法が課題であった。【０１１８】  また教育サービスのための教室や会議室においては、講師や司会者は全員を一斉に集めたり、あるいは個別にグループ分けしたりしながら、その分けられたパーティションの中を、自由に回覧や巡回しながら、指導や状況把握を行う必要があるが、そのような空間の分離や移動に関する操作方法について、簡単で操作がやりやすい方式は実現されていなかった。【０１１９】  図１７は、本発明の、画面上の分身オブジェクト、座席オブジェクト、パーティションオブジェクトを用いて、画面上でオブジェクトの画像に対するインタラクションにより、わかりやすく簡単な操作で素早く教室のグループモードを切り換える方式の実現例である。【０１２０】  これを動作するには、本発明の分身オブジェクトにより構成されるシステムにおいて、１）座席オブジェクト、パーテイションオブジェクトのデザイン（形、色など）をサーバへ登録する。座席オブジェクトはイスを上から見た図形として表示し、パーティションオブジェクトは図に示されているように、画面上を教室の空間として見立てた際に、座席を取り囲むパーティション用の壁を天井から見た２次元の線画の配置図として表現する。パーティションの壁を線として表現する。線で囲まれた領域はパーティションで囲まれた場所を表し、外部に対して閉鎖され、外部との音声やり取りの遮断やインタラクションの遮断の対象になる。【０１２１】  ２）パーティションオブジェクトの機能（音声遮断、インタラクション遮断など）をサーバへ登録する。利用するパーティションオブジェクトによりどのような遮蔽を行うかを定義し、機能を登録する。たとえば、パーティション外部との音声の遮断やインタラクションの制限などを指定する。【０１２２】  ３）座席オブジェクト、パーティションオブジェクトの組合せにより、配置を決め、サーバへ登録する。パーティションの内側に何人分の座席を配置するか、どのようなグループ分けにするかを、２次元の間取り図を作成する要領で、パーティションと座席の配置や大きさを決める。【０１２３】  ４）座席、パーティションの情報（形状、機能）をサーバからクライアントへ配信する。クライアントの画面上へ分身オブジェクト、座席オブジェクト、パーティションオブジェクトを表示する。それらの個々のオブジェクトは自由に画面上で移動可能な、画面上の表示オブジェクトとして表現する。【０１２４】  クライアントの画面上で、座席オブジェクトへ分身オブジェクトを着席させる。着席の指示操作は、画面上に表示されている分身オブジェクトをドラッグ・アンド・ドロップまたは選択クリック等の画像操作により選定し、パーティション内の座席に移動させる。この指示操作は画面上での手動操作により個別に実行するか、あるいは、システムによりあらかじめ決められた座席への自動的な移動として実行する。表示オブジェクトの画面上での移動により、参加者全体の中でのグループ分けや参加者間での通信機能の制限の指定をサーバ側に伝達する。パーティションの壁を表す線画に囲まれた座席に配置された分身オブジェクトに関してはパーティション外部の分身オブジェクトとのコミュニケーションやインタラクションを制約される制限の指定がサーバへ伝達される。パーティション内部に配置された分身オブジェクト同士のコミュニケーションについては、音声やインタラクションが自由に交換できるように機能の指定を行う。【０１２５】  ５）パーティションオブジェクトの機能指定に応じたコミュニケーション制御（パーティション外部との音声遮断、インタラクション遮断など）を行う。サーバ側は指定された制限機能に対応した、情報の配信制限を実行する。サーバ側は参加者のグループ構成の指定の情報に基づき、音声やインタラクションの配信を制約もしくは切り換える。【０１２６】  このような、画面上での２次元形式の間取り図型のパーティション配置図において、簡単な分身オブジェクトの移動操作により、線画状のパーティション壁に囲まれた座席へ配置された分身オブジェクトに対する制約制御を実施することで、仮想的な教室や会議室内でのグループ分割や集合機能を実施することができる。講師や司会者が分割された個別のパーティションの間を巡回する機能についても、自分の分身オブジェクトを対象とするパーティションへ移動させることにより、簡単な操作で指示し、実現できる。【０１２７】  図１８は、分身オブジェクトとパーティションオブジェクトを用いた、座席配置制御の実施例である。【０１２８】  あらかじめ、座席配置と、参加者のだれとだれをグループに分け、どのようなパーティション配置をするか、座席テーブルとして定めておく。このような、参加者の氏名またはＩＤと、座席位置、音声遮断などのグループ構成における機能条件、グループ分けのための所属グループ番号、などのグループ分割に必要な情報を座席テーブルとしてサーバへ登録しておく。【０１２９】  １）指定した座席テーブル情報をサーバからクライアントに配信する。この配信の指示は、講師や司会者などのグループ分割を指示する操作者により、ボタンあるいはコマンド入力によりシステムへ入力し実施する。【０１３０】  ２）配信された、座席テーブル情報に基づき、クライアント側のシステムは教室に参加した各分身オブジェクトの配置を決定する。【０１３１】  ３）指定された位置に分身オブジェクト、座席オブジェクト、パーティションオブジェクトを表示する。座席テーブルに基づき、パーティションや座席のオブジェクトの表示を作成し、同時に分身オブジェクトを配置する。【０１３２】  ４）サーバおよびクライアントは、指定されたパーティション情報に応じて、オブジェクト間のインタラクションや対話通信の制御を実行する。
この実施例においては、講師などの指示者のサーバへの配信指示により、参加者のグループ分割に関する座席テーブルの情報が一斉に各クライアントへ配信され、それに基いてグループ分割が実施されるため、非常に簡単、速やかに一瞬のうちに参加者をパーティションで分割することができる。全員参加の講義と、個人ごとの演習、二人ずつのロールプレイ、少人数グループ討議などへの教室条件の変更が簡単に実現できる。【０１３３】  図１９は、本発明において、分身オブジェクトにより、音声による発言者の発言権制御を行う実施例である。【０１３４】  多人数が参加する遠隔教育システムや、テレビ会議システ厶においては、原則的には、その場において同時に音声で話せるのは、一人だけである。複数の人間が同時に音声で話すと、クライアント側では複数の声が一つのスピーカに出力され、非常に聞きづらくなる。したがって、講義や会議においては、マイクの発言権の制御方法が課題となっている。【０１３５】  遠隔講義やテレビ会議においては、音声信号の符号化処理や通信処理により、音声の伝達遅延が生じ、実際に声を出した時刻と、その音声が相手に伝わる時刻とに大きな遅延が生じる。参加者が自分でマイクの発言権をもらう操作時間、発言権をもらってから発話するまでの操作時間、実際に声を出してその声が相手に伝わるまでの遅延時間、などの多くの遅延時間が重なり合うことになる。このため、従来の遠隔教育システムやテレビ会議システムにおいては、参加者にとって、今だれが話しをしているのか、だれが発言権を求めているのか、次にだれが発言権をもらうのか、等の状況がわからず、発言しにくいという課題があった。発言権の遷移状況がわかりづらいため、一斉に多数の人の発言が衝突したり、だれから順番に発言権を与えたらよいかわからないなどの問題も多発した。【０１３６】  図１９では、分身オブジェクトによる、参加者表示を利用し、発言権の遷移状況を視覚化することにより、参加者同士での発言権のス厶ーズな移行を実現した。【０１３７】  （１）参加者は全員が分身オブジェクトとして、画面上に表示され、発言ボタンが画面上に表示されている。発言ボタンは初期状態として、「発言ボタン（受付中）」と表示している（ステップＳ１）。【０１３８】  （２）発言したい参加者は発言ボタンをクリックまたは押下して、発言を求める（ステップＳ２）。この入力により、システムは発言希望者を検出し、発言ボタン入力者の発言ボタンへ「発言受付中」の表示を出す。同時に、発言入力者の分身オブジェクトへ「発言したい」という吹き出しオブジェクトを表示する（ステップＳ３）。【０１３９】  （３）ほぼ同時に複数の発言希望者が、発言ボタンを押下することは多い。その場合も、同様に発言希望者の分身オブジェクトへ「発言したい」という吹き出しオブジェクトを表示する。この際、システムが一定時間の受付時間範囲内において、発言希望者の入力時刻の順番を検出し、その順番を合わせて表示する。一定時間の受付時間範囲を設定することにより、音声の遅延や発言権処理の操作遅延による、発言者の衝突による混乱を避ける（ステップＳ４、Ｓ５）。【０１４０】  この受付時間処理は新たな「発言受付中」を検出し、処理を開始してか��、新たな最初の発言者を決定し、発言者が発声し、ある決められた時間Ｔの音声が配信され、参加者が新たな発言を少し聞くまでの時間内においては、そのほかの発言者へのマイクの発言権移動を指定せず、それまでの時間内に発言ボタンを押下した他の参加者はすべて発言権を却下する方式で、実施する。これにより、参加者は常に他者の発言をある程度聞いてから、新たな発言を求めるようにガイドされる（ステップＳ６）。【０１４１】  （４）システムは発言希望者の順番に基き、マイクにより発言権を与える参加者と、順番により発言権を却下する参加者とを判定する。発言権を与える参加者へは「マイク接続ＯＮ」等の表示を行い、発言権者の音声信号を参加者へ配信する。同時に発言者の分身オブジェクトに「発言中」の吹き出しオブジェクトを表示する（ステップＳ７）。【０１４２】  （５）発言権を却下する参加者へは発言ボタンへ「他の方が先です」の表示を行い、発言権が却下されたことを伝える（ステップＳ８、Ｓ９）。【０１４３】  （６）発言者が発言ボタンを押下し、マイクをＯＦＦするか（ステップＳ１０）、または発言時間がある決められた時間Ｔを過ぎた場合に、初期状態「発言ボタン（受付中）」へ戻る。【０１４４】  本方式では、発言者、発言の希望状況が分身オブジェクトとして表示されるため、だれが発言を求めているか明示的にわかりやすく、参加者同士での発言権の移行がスムーズになる。発言権の受付判断に関しては、一律的な時間順番による判断の他に、参加メンバの役職や優先度により判定したり、講師が手動で個別に指名、指示する方法がある。分身オブジェクトの表示と判定処理を連動することにより、これらの判定処理は本方式に容易に組み込むことができる。【０１４５】  図２０は、本発明のシステムの別の実施例を示す図である。【０１４６】  図２０中、２は講師側のカメラ、３は講師側のマイク、４は講師側の映像や音声を送受信するＣＯＤＥＣ（端末機）、１１は画像表示手段６上に表示する参加者の生徒を表す分身オブジェクト、１２は画面上に表示するメッセージ・リスト、１３は分身オブジェクト１１やメッセージ・リスト１２の表示制御や通信制御を実行するクライアント・オブジェクト処理システム、６は生徒側の講師映像の画像表示手段、７は生徒側のスピーカ及びマイク等の音声入出力、５は生徒側で音声や映像を送受信するＣＯＤＥＣ（端末機）、１３は生徒側の分身オブジェクトやメッセージ・リストの表示制御や通信制御を実行するクライアント・オブジェクト処理システム、１２は生徒側のメッセージ・リスト、１４はクライアント端末のマウス等のポインティングデバイス、８１は講師側の発言ボタン、８２は生徒側の発言ボタン、８はインターネットまたはＬＡＮ（（通信ネットワーク）８、９はサーバ（配信サーバ）である。【０１４７】  サーバ（配信サーバ）９は、映像・音声配信サーバ９ａと、メッセージ配信サーバ９ｂとを備える。【０１４８】  本発明においては、講師と生徒を結ぶコミュニケーション機能として、従来の遠隔教育システムの講師および生徒の参加者を結んだ、カメラ２、マイク３、音声・画像ＣＯＤＥＣ（端末機）４による、講師と生徒とを結ぶカメラ映像や音声通信だけでなく、参加者の端���機５の画面上に、参加者の分身オブジェクト１１と、メッセージ・リスト１２、発言ボタン８１、８２を表示し、それらを組合わせて、参加者同士のコミュニケーションを実現する。【０１４９】  インターネットまたはＬＡＮ（（通信ネットワーク）８を介して接続される映像・音声配信サーバ９ａ、メッセージ配信サーバ９ｂにより配信される情報を基にして、講師および生徒の端末のクライアント・オブジェクト処理システム１３が、分身オブジェクトとメッセージ・リストを画面上に表示する。生徒側の端末においては、講師側との音声・画像ＣＯＤＥＣ（端末機）５による音声や映像の送受信や表示に加えて、分身オブジェクト１１やメッセージ・リスト１２、発言ボタン８２が表示され、マウス等のポインティングデバイス１４により操作される。【０１５０】  メッセージ・リスト１２には受講中に想定される、多様なメッセージがリストとして一覧的に提示されている。生徒は、自分が随時感じたものに合致したメッセージをポインティングデバイス１４で、ワンタッチで選択する。選択されたメッセージは、クライアント・オブジェクト処理システム１３により、メッセージ配信サーバ９ｂへ送られ、参加者全員へ配信される。メッセージ配信サーバ９ｂから配信されたメッセージは各参加者のクライアント・オブジェクト処理システム１３により処理され、画面上の分身オブジェクトの動作や、吹き出し型のメッセージなどとして表示される。【０１５１】  講師側あるいは生徒側の音声信号は画面上の発言ボタン８１、８２の押下により、発言権の要求が行われる。発言権ボタンの押下による発言権要求はインターネットまたはＬＡＮ（（通信ネットワーク）８を経由して、メッセージ配信サーバ９ｂへ伝えられ、発言権の制御処理および吹き出しオブジェクトによる発言者の表示が実行される。同時に映像・音声配信サーバ９ａにおいて発言者の音声信号の通信制御としての発言者切り替え処理が実行される。【０１５２】  参加者のグループ分割が必要になった場合は、講師の指示により、参加者の座席テーブル情報がメッセージ配信サーバ９ｂより各クライアントへ配信され、参加者の分身オブジェクトの座席の指定と、パーティションによるグループ分割が実行される。同時に座席テーブルにより指示されたパーティション機能に応じて音声の遮断やインタラクションの制限などの制御情報の配信が映像・音声サーバ９ａより配信される。
【産業上の利用可能性】
【０１５３】  以上のように、本発明では、ネットワークを介して接続する多数の端末、クライアント、サーバを結んで、画面表示されるメッセージ・リストの中からのワンクリックでの簡単な操作で、自由にメッセージを選択して、参加者へ配信し、メッセージに対応する分身オブジェクトの動作や吹き出しオブジェクト表示等を出力表現することにより、参加者からの非言語的なコミュニケーションに対する多様な機能を実現することができ、遠隔教育やテレビ会議などの参加者のコミュニケーション表現力の向上と、学習者の参加意欲の増強支援を実現することができる。
【図面の簡単な説明】
【０１５４】
【図１】  本発明に係る遠隔教育コミュニケーションシステムの概念を概略的に説明する図であり、図１（ａ）は、従来の遠隔教育システムの概念図であり、また、図１（ｂ）は、本発明に係る遠隔教育コミュニケーションシステムの概念である。
【図２】  本発明に係る遠隔教育コミュニケーションシステムの一例を概略的に示す構成図である。
【図３】  本発明に係る遠隔教育コミュニケーションシステムにおけるメッセージ情報の配信処理の例を示す図である。
【図４】  本発明に係る遠隔教育コミュニケーションシステムにおいて実現する画面上の分身オブジェクトの構成の例を示す図である。
【図５】  分身オブジェクトの形状として、人間の分身としての心理的効果を増すために、矩形から変形させた形状の例を示す図である。
【図６】  本発明に係る遠隔教育コミュニケーションシステムの端末機側の画像表示手段の画面の構成の例を示す図である。
【図７】  本発明に係る遠隔教育コミュニケーションシステムの処理の流れの例を示すフロー図である。
【図８】  本発明に係る遠隔教育コミュニケーションシステムにおいて、遠隔教育への参加者用のクライアント側の画面上に用意しておく、メッセージの例である。
【図９】  本発明に係る遠隔教育コミュニケーションシステムの分身オブジェクトの動作表現の例である。
【図１０】  分身オブジェクト同士での賛同の感情表現の実施例である。
【図１１】  本発明の分身オブジェクトのアニメーション修飾とメッセージとの対応関係の実施例である。
【図１２】  本発明の分身オブジェクトとして、参加者の複数の顔写真を用意し、それらを切り換えて分身オブジェクト中に表示するアニメーション修飾の方法により、多様なメッセージとの対応を実現した例である。
【図１３】  本発明の分身オブジェクトの座席配置の実現例である。
【図１４】  本発明の別の座席配置の実施例である。
【図１５】  本発明の分身オブジェクトの座席配置を制御する方法の例を説明する図である。
【図１６】  本発明における座席とパーティション機能の実現例を示す図である。
【図１７】  本発明の、画面上の分身オブジェクト、座席オブジェクト、パーティションオブジェクトを用いて、画面上でオブジェクトの画像に対するインタラクションにより、わかりやすく簡単な操作で素早く教室のグループモードを切り換える方式の実現例である。
【図１８】  分身オブジェクトとパーティションオブジェクトを用いた、座席配置制御の実施例である。
【図１９】  本発明において、分身オブジェクトにより、音声による発言者の発言権制御を行う実施例である。
【図２０】  本発明のシステムの別の実施例を示す図である。
【図２１】  従来の遠隔教育システムの一例を概略的に示す構成図である。
【符号の説明】
【０１５５】１  遠隔教育コミュニケーションシステム
２  講師側のカメラ
３  講師側のマイク
４  講師側の映像や音声を送受信するＣＯＤＥＣ（端末機）
５  生徒側で音声や映像を送受信するＣＯＤＥＣ（端末機）
６  画像表示手段
７  スピーカ
８  インターネットまたはＬＡＮ（通信ネットワーク）
９  サーバ
１１  分身オブジェクト画像情報
１２  メッセージ・リスト
１３  クライアント・オブジェクト処理システム
１４  ポインティングデバイス
【図１】
2005055846.tif 000003
【図２】
2005055846.tif 000004
【図３】
2005055846.tif 000005
【図４】
2005055846.tif 000006
【図５】
2005055846.tif 000007
【図６】
2005055846.tif 000008
【図７】
2005055846.tif 000009
【図８】
2005055846.tif 000010
【図９】
2005055846.tif 000011
【図１０】
2005055846.tif 000012
【図１１】
2005055846.tif 000013
【図１２】
2005055846.tif 000014
【図１３】
2005055846.tif 000015
【図１４】
2005055846.tif 000016
【図１５】
2005055846.tif 000017
【図１６】
2005055846.tif 000018
【図１７】
2005055846.tif 000019
【図１８】
2005055846.tif 000020
【図１９】
2005055846.tif 000021
【図２０】
2005055846.tif 000022
【図２１】
2005055846.tif 000023