(57)【要約】【課題】発話者が離れた場所にいる対象者に対して話しかける場合に、その離れた場所にいる参加者が、話しかけられた対象者が誰であるかの判断を誤ることを抑制するようにした情報処理装置を提供する。【解決手段】情報処理装置の状況提示手段は、通信回線を介して接続されている場所にいる参加者の状況を提示し、発話者判別手段は、発話者を判別し、対象者判別手段は、前記発話者判別手段によって判別された発話者の前記状況提示手段に対する行動を検知することによって、発話者が対象とする相手である前記場所にいる対象者を判別する。【選択図】図１
2009206924.tif 000002
【特許請求の範囲】
【請求項１】
通信回線を介して接続されている場所にいる参加者の状況を提示する状況提示手段と、
発話者を判別する発話者判別手段と、
前記発話者判別手段によって判別された発話者の前記状況提示手段に対する行動を検知することによって、発話者が対象とする相手である前記場所にいる対象者を判別する対象者判別手段
を具備することを特徴とする情報処理装置。
【請求項２】
前記対象者判別手段は、発話者の顔の向き又は発話者の視線を検知することによって、対象者を判別する
ことを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記対象者判別手段によって判別された対象者を提示する対象者提示手段
を具備することを特徴とする請求項１又は２に記載の情報処理装置。
【請求項４】
通信回線を介して接続されている場所にいる参加者の状況を受信する第１の受信手段と、
前記第１の受信手段によって受信された参加者の状況を提示する状況提示手段と、
発話者を判別する発話者判別手段と、
前記発話者判別手段によって判別された発話者の前記状況提示手段に対する行動を検知することによって、発話者が対象とする相手である前記場所にいる対象者を判別する対象者判別手段と、
前記対象者判別手段によって判別された対象者を対象者側情報処理装置に送信する第１の送信手段
を備える発話者側情報処理装置と、
前記発話者側情報処理装置と通信回線を介して接続されており、前記発話者側情報処理装置に参加者の状況を送信する第２の送信手段と、
前記第１の送信手段によって送信された対象者を受信する第２の受信手段と、
前記第２の受信手段によって受信された対象者を提示する対象者提示手段
を備える対象者側情報処理装置
を具備することを特徴とする情報処理システム。
【請求項５】
前記発話者側情報処理装置の第１の送信手段は、さらに前記発話者判別手段によって判別された発話者を送信し、
前記対象者側情報処理装置の第２の受信手段は、さらに発話者を受信し、
前記対象者側情報処理装置は、
前記第２の受信手段によって受信された発話者を提示する発話者提示手段
をさらに具備することを特徴とする請求項４に記載の情報処理システム。
【請求項６】
コンピュータを、
通信回線を介して接続されている場所にいる参加者の状況を提示する状況提示手段と、
発話者を判別する発話者判別手段と、
前記発話者判別手段によって判別された発話者の前記状況提示手段に対する行動を検知することによって、発話者が対象とする相手である前記場所にいる対象者を判別する対象者判別手段
として機能させることを特徴とする情報処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、情報処理システム及び情報処理プログラムに関する。
【背景技術】
【０００２】
離れた場所にいる人同士のコミュニケーションを円滑に行うための情報処理装置がある。例えば、会議室と他の場所にある会議室とを通信回線を介して接続して会議を行うための会議システムがある。これらの情報処理装置では、発話者を検知することが行われている。
【０００３】
これに関連する技術として、例えば、特許文献１には、会議参加者のうちの誰が話者であるかを知ると共に、次の話者や秘話の相手を指示したり、あるいは自分が次の話者に指定されていることを知ることができることを目的とし、話者選択制御手段は、会議参加者の要求により、話者を選択でき、そして、当該話者選択制御手段で選択された話者は、話者表示制御手段の要求により表示装置上に他の会議参加者と区別して表示され、また、遠隔会議集中制御手段は、会議参加者の情報を各会議参加者に送ると共に、前記話者選択制御手段で選択された話者の音声を各会議参加者相互間で送受信するように制御できることが開示されている。
【０００４】
また、例えば、特許文献２には、相手が知らない人であったり、声が似ていたりする場合においても、誰が発言しているかを特定し、遠隔地との電子音声会議の進行をスムーズに行うことを目的とし、ＩＳＤＮを利用した３者音声会議システムにおいて、音声送受信部は、音声をステレオヘッドホーンの左右に割り当てたＢ１チャネル及びＢ２チャネルのチャネル制御手段を有し、第１の音声出力部は、該音声送受信部に接続され、前記Ｂ１チャネルの音声を出力し、第２の音声出力部は、前記Ｂ２チャネルの音声を出力し、このような構成により、話者毎に音声の出力位置を変えて、現在、誰が話しているかを特定できることが開示されている。
【０００５】
また、例えば、特許文献３には、遠隔で提示されるイメージの中で、現実に対応した頭の向きによる実在感と、目の触れ合いが可能なテレビ会議システムを提供することを課題とし、テレビ会議システムにおいて、各会議室に、会議参加者のイメージフレームを表すビデオ信号を生成するビデオカメラと、遠隔の会議参加者のイメージフレームを表示するイメージ受像器があり、そのイメージ受像器とビデオカメラと、その場所の会議参加者の目との視差角θを定義し、テレビ会議システムはさらに、ビデオ信号に対応して、その場所の会議参加者のイメージフレームを分析し、視差補償されたフレームを生成するための、フレーム生成システムを含み、それぞれに視差補償されたフレームを表す信号は、対応するイメージ受像器に送信され、３人以上の参加者がいる場合は、頭の位置について各入力イメージフレームを分析し、頭の向きの修正がなされることが開示されている。
【特許文献１】特開平０４−３３９４８４号公報
【特許文献２】特開平０８−１２５７３８号公報
【特許文献３】特開平０８−２３７６２９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
本発明は、発話者が離れた場所にいる対象者に対して話しかける場合に、その離れた場所にいる参加者が、話しかけられた対象者が誰であるかの判断を誤ることを抑制するようにした情報処理装置、情報処理システム及び情報処理プログラムを提供することを目的としている。
【課題を解決するための手段】
【０００７】
かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。
請求項１の情報処理装置は、通信回線を介して接続されている場所にいる参加者の状況を提示する状況提示手段と、発話者を判別する発話者判別手段と、前記発話者判別手段によって判別された発話者の前記状況提示手段に対する行動を検知することによって、発話者が対象とする相手である前記場所にいる対象者を判別する対象者判別手段を具備することを特徴とする。
【０００８】
請求項２の情報処理装置は、請求項１に記載の情報処理装置であって、前記対象者判別手段は、発話者の顔の向き又は発話者の視線を検知することによって、対象者を判別することを特徴とする。
【０００９】
請求項３の情報処理装置は、請求項１又は２に記載の情報処理装置であって、前記対象者判別手段によって判別された対象者を提示する対象者提示手段を具備することを特徴とする。
【００１０】
請求項４の情報処理システムは、通信回線を介して接続されている場所にいる参加者の状況を受信する第１の受信手段と、前記第１の受信手段によって受信された参加者の状況を提示する状況提示手段と、発話者を判別する発話者判別手段と、前記発話者判別手段によって判別された発話者の前記状況提示手段に対する行動を検知することによって、発話者が対象とする相手である前記場所にいる対象者を判別する対象者判別手段と、前記対象者判別手段によって判別された対象者を対象者側情報処理装置に送信する第１の送信手段を備える発話者側情報処理装置と、前記発話者側情報処理装置と通信回線を介して接続されており、前記発話者側情報処理装置に参加者の状況を送信する第２の送信手段と、前記第１の送信手段によって送信された対象者を受信する第２の受信手段と、前記第２の受信手段によって受信された対象者を提示する対象者提示手段を備える対象者側情報処理装置を具備することを特徴とする。
【００１１】
請求項５の情報処理システムは、請求項４に記載の情報処理システムであって、前記発話者側情報処理装置の第１の送信手段は、さらに前記発話者判別手段によって判別された発話者を送信し、前記対象者側情報処理装置の第２の受信手段は、さらに発話者を受信し、前記対象者側情報処理装置は、前記第２の受信手段によって受信された発話者を提示する発話者提示手段をさらに具備することを特徴とする。
【００１２】
請求項６の情報処理プログラムは、コンピュータを、通信回線を介して接続されている場所にいる参加者の状況を提示する状況提示手段と、発話者を判別する発話者判別手段と、前記発話者判別手段によって判別された発話者の前記状況提示手段に対する行動を検知することによって、発話者が対象とする相手である前記場所にいる対象者を判別する対象者判別手段として機能させることを特徴とする。
【発明の効果】
【００１３】
請求項１記載の情報処理装置によれば、発話者が離れた場所にいる対象者に対して話しかける場合に、その離れた場所にいる参加者が、話しかけられた対象者が誰であるかの判断を誤ることを抑制できる。
【００１４】
請求項２記載の情報処理装置によれば、発話者の指定について明示的な動作を不要とすることができる。
【００１５】
請求項３記載の情報処理装置によれば、発話者は誰を対象者としているかを確認することができる。
【００１６】
請求項４記載の情報処理システムによれば、発話者が離れた場所にいる対象者に対して話しかける場合に、その離れた場所にいる参加者が、話しかけられた対象者が誰であるかの判断を誤ることを抑制できる。
【００１７】
請求項５記載の情報処理システムによれば、発話者と離れた場所にいる参加者は、その発話者が誰であるかを知ることができるようになる。
【００１８】
請求項６記載の情報処理プログラムによれば、発話者が離れた場所にいる対象者に対して話しかける場合に、その離れた場所にいる参加者が、話しかけられた対象者が誰であるかの判断を誤ることを抑制できる。
【発明を実施するための最良の形態】
【００１９】
以下、図面に基づき本発明を実現するにあたっての好適な一実施の形態の例を説明する。
図１は、本実施の形態の構成例についての概念的なモジュール構成図を示している。
なお、モジュールとは、一般的に論理的に分離可能なソフトウェア（コンピュータ・プログラム）、ハードウェア等の部品を指す。したがって、本実施の形態におけるモジュールはコンピュータ・プログラムにおけるモジュールのことだけでなく、ハードウェア構成におけるモジュールも指す。それゆえ、本実施の形態は、コンピュータ・プログラム、システム及び方法の説明をも兼ねている。ただし、説明の都合上、「記憶する」、「記憶させる」、これらと同等の文言を用いるが、これらの文言は、実施の形態がコンピュータ・プログラムの場合は、記憶装置に記憶させる、又は記憶装置に記憶させるように制御するの意である。また、モジュールは機能にほぼ一対一に対応しているが、実装においては、１モジュールを１プログラムで構成してもよいし、複数モジュールを１プログラムで構成してもよく、逆に１モジュールを複数プログラムで構成してもよい。また、複数モジュールは１コンピュータによって実行されてもよいし、分散又は並列環境におけるコンピュータによって１モジュールが複数コンピュータで実行されてもよい。なお、１つのモジュールに他のモジュールが含まれていてもよい。また、以下、「接続」とは物理的な接続の他、論理的な接続（データの授受、指示、データ間の参照関係等）を含む。
また、システム又は装置とは、複数のコンピュータ、ハードウェア、装置等がネットワーク（一対一対応の通信接続を含む）等の通信手段で接続されて構成されるほか、１つのコンピュータ、ハードウェア、装置等によって実現される場合も含まれる。「装置」と「システム」とは、互いに同義の用語として用いる。
【００２０】
以下、情報処理システムとして、会議に用いる遠隔会議システムを主に例示して説明する。なお、遠隔とは、通信回線を介して互いに接続されていることを示しており、必ずしも遠距離に離れていることでなくてもよい。
また、この情報処理システムを用いる者を参加者という。ただし、参加者は、明示的に本情報処理システムを用いるという意識を有している必要はない。
また、発話者とは、発言を行う者である。対象者とは、遠隔地にいる者であり、その発話者が対象とする相手（話しかける相手、質問を投げかける相手等）である。つまり、遠隔会議システムの例では、遠隔地の会議室にいる者であって、発話者がコミュニケーションを取りたい特定の者（一人又は複数であってもよい）である。
【００２１】
本実施の形態は、図１に示すように、遠隔会議システム（発話者側）１１０、遠隔会議システム（対象者側）１２０を有している。遠隔会議システム（発話者側）１１０は通信回線１９０を介して相互に遠隔会議システム（対象者側）１２０と接続されている。なお、遠隔会議システム（発話者側）１１０と遠隔会議システム（対象者側）１２０とは離れた場所にある会議室に設置されている。
遠隔会議システム（発話者側）１１０は、発話者判別モジュール１１１、相手側状況提示モジュール１１２、対象者判別モジュール１１３、対象者確認提示モジュール１１４、送受信モジュール１１９を有している。
遠隔会議システム（対象者側）１２０は、発話者提示モジュール１２１、対象者提示モジュール１２２、状況取得モジュール１２３、送受信モジュール１２９を有している。
【００２２】
なお、遠隔会議システム（発話者側）１１０と遠隔会議システム（対象者側）１２０は同じ構成を有していてもよい。つまり、遠隔会議システム（発話者側）１１０と遠隔会議システム（対象者側）１２０は、発話者判別モジュール１１１、相手側状況提示モジュール１１２、対象者判別モジュール１１３、対象者確認提示モジュール１１４、発話者提示モジュール１２１、対象者提示モジュール１２２、状況取得モジュール１２３、送受信モジュール１１９（１２９）を有していてもよい。これによって、発話者、対象者がどちらにいてもよい構成となる。
【００２３】
発話者は遠隔会議システム（発話者側）１１０側の会議室におり、対象者は遠隔会議システム（対象者側）１２０側の会議室にいる。また、遠隔会議システム（発話者側）１１０と遠隔会議システム（対象者側）１２０にはそれぞれマイク、ビデオカメラ等（図示せず）が接続されており、それによって参加者の声、映像、動作等を取得して発話者判別モジュール１１１、対象者判別モジュール１１３等によって制御される。また、提示装置として、例えば、ディスプレイ、スピーカ等が接続されており、相手側状況提示モジュール１１２、対象者確認提示モジュール１１４、発話者提示モジュール１２１、対象者提示モジュール１２２等によって制御される。また、参加者の操作を受け付ける操作受付装置として、例えば、マウス、キーボード、ディスプレイ表面に対する接触の位置を検知するタッチセンサー等が接続されており、対象者確認提示モジュール１１４等によって制御される。
【００２４】
まず、遠隔会議システム（発話者側）１１０内の説明を行う。
送受信モジュール１１９は、遠隔会議システム（対象者側）１２０の送受信モジュール１２９との間で通信回線１９０を介して互いに送受信を行う。例えば、対象者判別モジュール１１３によって判別された対象者を遠隔会議システム（対象者側）１２０の送受信モジュール１２９に送信する。また、遠隔会議システム（対象者側）１２０の送受信モジュール１２９から送信された遠隔会議システム（対象者側）１２０側の会議室にいる参加者の状況を受信し、相手側状況提示モジュール１１２へ渡すようにしてもよい。また、発話者判別モジュール１１１によって判別された発話者を遠隔会議システム（対象者側）１２０の送受信モジュール１２９に送信するようにしてもよい。
【００２５】
発話者判別モジュール１１１は、発話者を判別し、その発話者を対象者判別モジュール１１３へ渡す。また、判別した発話者を送受信モジュール１１９へ渡してもよい。発話者の判別は、従来から用いられている発話している者の検知によって行う。また、発言ボタン等が参加者毎に用意されており、操作された発言ボタンに対応付けられた者を発話者と判別してもよい。その他に、参加者毎にマイクが設置されており、そのマイクのスイッチが入ったことを検知すること、そのマイクの音量を他のマイクの音量と比較して大きな音量であるマイクを検知すること、複数の指向性マイクが設置されており、発話を捉えたマイクの先にいる参加者を検知すること、発声者を認識する音声認識、又はビデオカメラが撮影している画像から口の動きを検知することにより判別してもよい。
【００２６】
相手側状況提示モジュール１１２は、送受信モジュール１１９から受け取った遠隔会議システム（対象者側）１２０がある会議室にいる参加者の状況を提示する。ここで、状況の提示とは、例えば、遠隔会議システム（対象者側）１２０に接続されたビデオカメラによって撮影された映像、参加者のリスト等をディスプレイ等に提示することである。より具体的には、図２等を用いて説明する。
【００２７】
対象者判別モジュール１１３は、発話者判別モジュール１１１によって判別された発話者の相手側状況提示モジュール１１２に対する行動を検知することによって、対象者を判別する。そして、その判別結果を対象者確認提示モジュール１１４に渡してもよい。また、対象者判別モジュール１１３は、発話者の顔の向き又は発話者の視線を検知することによって、対象者を判別するようにしてもよい。例えば、相手側状況提示モジュール１１２によってディスプレイに提示されたものに対する視線の位置等を検知することである。対象者の判別手法については、図４等を用いて後述する。
【００２８】
対象者確認提示モジュール１１４は、対象者判別モジュール１１３によって判別された対象者を受け取り、その対象者を提示する。また、発話者に対して対象者が正しいか否かを確認させるようにしてもよい。そして、誤っている場合は、対象者を変更できるようにしてもよい。その変更は、ディスプレイのタッチセンサー等に対する操作者の操作に基づいて行う。
【００２９】
次に、遠隔会議システム（対象者側）１２０内の説明を行う。
送受信モジュール１２９は、遠隔会議システム（発話者側）１１０の送受信モジュール１１９との間で通信回線１９０を介して互いに送受信を行う。例えば、状況取得モジュール１２３から参加者の状況を受け取り、それを遠隔会議システム（発話者側）１１０の送受信モジュール１１９に送信する。また、遠隔会議システム（発話者側）１１０の送受信モジュール１１９から送信された対象者を受け取り、対象者提示モジュール１２２に渡す。また、遠隔会議システム（発話者側）１１０の送受信モジュール１１９から送信された発話者を受け取り、発話者提示モジュール１２１に渡すようにしてもよい。
【００３０】
発話者提示モジュール１２１は、送受信モジュール１２９によって受信された発話者を提示する。遠隔地の会議室で発話している人が誰であるのかを提示する。例えば、その発話者の名前、画像、似顔絵等の疑似画像等を提示するようにしてもよい。また、遠隔地の参加者の全員を提示して、その中で発話者を他とは異なるように提示（例えば、強調表示）するようにしてもよい。
【００３１】
対象者提示モジュール１２２は、送受信モジュール１２９によって受信された対象者を提示する。遠隔地の会議室での発話者が、誰に対して発言しているのかを提示する。例えば、その対象者の名前、画像、似顔絵等の疑似画像等を提示するようにしてもよい。また、遠隔地の参加者の全員を提示して、その中で対象者を他とは異なるように提示（例えば、強調表示）するようにしてもよい。また、参加者毎にランプを設置し、そのランプを点灯させて対象者を提示するようにしてもよい。また、参加者毎にスピーカを設置し、対象者のスピーカから発話者の発話を大きな音量で出力するようにしてもよい。また、発話者の似顔絵の視線を対象者に向けるように似顔絵を作成して提示するようにしてもよい。
【００３２】
状況取得モジュール１２３は、遠隔会議システム（対象者側）１２０側の参加者の状況を取得し、送受信モジュール１２９へ渡す。例えば、参加者の状況として、ビデオカメラで会議室内を撮影した画像、その会議の参加者のリスト等である。参加者のリストは、参加者の識別子（名前等を含む）を受け取り、リストとして作成したものである。参加者の識別子の受け取りは、例えば、参加者が所持しており個人を特定するデータが入っているＩＣカードを、カードリーダーが読み取るようにしてもよい。
【００３３】
図２は、相手側状況提示モジュール１１２によって提示される相手側（遠隔会議システム（対象者側）１２０）の会議室の状況例を示す説明図である。
相手側状況表示画面２００に提示されるものは、遠隔会議システム（対象者側）１２０の状況取得モジュール１２３によって取得されたものであり、送受信モジュール１２９、通信回線１９０、送受信モジュール１１９を介して、相手側状況提示モジュール１１２が受け取り、これを提示したものである。
【００３４】
相手側状況表示画面２００は、相手側画像表示領域２１０と参加者リスト表示領域２２０を有している。
相手側画像表示領域２１０には、遠隔会議システム（対象者側）１２０の会議室の映像を提示している。図２の例では、参加者として会議参加者２１１Ａ、２１２Ａ、２１３Ａ、２１４Ａ、２１５Ａの５人がいる。また、相手側画像表示領域２１０内のどの位置にどの参加者がいるのかを対象者判別モジュール１１３が特定できるようにしてもよい。例えば、各人がＩＣカードを有しており、そのＩＣカードの位置と映像の位置を対応させるようにし、映像内の位置から参加者を特定できるようにしてもよい。映像の位置と参加者の対応に関する情報は、状況取得モジュール１２３が映像とともに相手側状況提示モジュール１１２に送信する。対象者判別モジュール１１３は、参加者リスト表示領域２２０内の位置にどの参加者が対応しているかを相手側状況提示モジュール１１２に問い合わせ、相手側状況提示モジュール１１２は状況取得モジュール１２３によって送信された情報を用いて、その位置にどの参加者が対応しているかを返せばよい。
【００３５】
参加者リスト表示領域２２０には、遠隔会議システム（対象者側）１２０の会議室にいる者のリストを提示している。図２の例では、会議参加者２１１Ａ、２１２Ａ、２１３Ａ、２１４Ａ、２１５Ａのそれぞれの顔写真（参加者顔画像表示領域２１１Ｂ〜２１５Ｂ）、名前（氏名欄２１１Ｃ〜２１５Ｃ）を提示している。もちろん、参加者リスト表示領域２２０内のどの位置にどの参加者が対応しているかを対象者判別モジュール１１３が特定できるようにしてもよい。例えば、参加者リスト表示領域２２０内の位置にどの参加者が対応しているかを相手側状況提示モジュール１１２に問い合わせ、相手側状況提示モジュール１１２は描画したときの情報を用いて、その位置にどの参加者が対応しているかを返せばよい。
【００３６】
対象者判別モジュール１１３は、発話者判別モジュール１１１によって判別された発話者の相手側状況表示画面２００に対する行動を検知する。ここで検知する行動として、発話者の相手側状況表示画面２００に対する操作、発話者の顔の向き、又は発話者の視線がある。具体的には、例えば、対象者として「富士三郎」を指定する場合、発話者が会議参加者２１３Ａ、参加者顔画像表示領域２１３Ｂ、氏名欄２１３Ｃの位置を触れる操作、又は相手側状況表示画面２００内の富士三郎を見ること（つまり視線の先が会議参加者２１３Ａ、参加者顔画像表示領域２１３Ｂ、氏名欄２１３Ｃの位置となる）等がある。そして、対象者判別モジュール１１３は、前述したように、相手側状況表示画面２００内の位置から対応する対象者を特定する。
【００３７】
図３は、本実施の形態による処理例を示すフローチャートである。
遠隔会議システム（発話者側）１１０による処理はステップＳ３１２からステップＳ３２４までの処理（図３では左側にある処理）であり、遠隔会議システム（対象者側）１２０による処理はステップＳ３５２からステップＳ３６２までの処理（図３では右側にある処理）である。
【００３８】
まず、ステップＳ３５２では、遠隔会議システム（対象者側）１２０の状況取得モジュール１２３が、その会議における参加者の状況を取得する。
ステップＳ３５４では、遠隔会議システム（対象者側）１２０の送受信モジュール１２９が、ステップＳ３５２で取得された参加者の状況を通信回線１９０を介して遠隔会議システム（発話者側）１１０の送受信モジュール１１９へ送信する。
ステップＳ３５６では、遠隔会議システム（対象者側）１２０が、遠隔会議システム（発話者側）１１０の送受信モジュール１１９から対象者が送信されてくるまで待機状態となる。
【００３９】
ステップＳ３１２では、遠隔会議システム（発話者側）１１０が、遠隔会議システム（対象者側）１２０の送受信モジュール１２９から参加者の状況が送信されてくるまで待機状態となる。
ステップＳ３１４では、遠隔会議システム（発話者側）１１０の送受信モジュール１１９が、通信回線１９０を介して遠隔会議システム（対象者側）１２０の送受信モジュール１２９から送信されてきた参加者の状況を受信する。
ステップＳ３１６では、遠隔会議システム（発話者側）１１０の相手側状況提示モジュール１１２が、ステップＳ３１４で受信した参加者の状況を提示する。
ステップＳ３１８では、遠隔会議システム（発話者側）１１０の発話者判別モジュール１１１が、発話者を判別する。
ステップＳ３２０では、遠隔会議システム（発話者側）１１０の対象者判別モジュール１１３が、対象者を判別する。
ステップＳ３２２では、遠隔会議システム（発話者側）１１０の対象者確認提示モジュール１１４が、ステップＳ３２０で判別された対象者を提示する。そして、発話者にその対象者でよいかの確認を求めるようにしてもよい。
ステップＳ３２４では、遠隔会議システム（発話者側）１１０の送受信モジュール１１９が、ステップＳ３２０で判別された対象者を遠隔会議システム（対象者側）１２０の送受信モジュール１２９へ送信する。さらに発話者を送信するようにしてもよい。
【００４０】
ステップＳ３５８では、遠隔会議システム（対象者側）１２０の送受信モジュール１２９が、遠隔会議システム（発話者側）１１０の送受信モジュール１１９から送信されてきた対象者を受信する。さらに発話者を受信するようにしてもよい。
ステップＳ３６０では、遠隔会議システム（対象者側）１２０の対象者提示モジュール１２２が、対象者を特定する画像を作成する。
ステップＳ３６２では、遠隔会議システム（対象者側）１２０の対象者提示モジュール１２２が、ステップＳ３６０で作成された画像を対象者として提示する。
また、ステップＳ３６０、Ｓ３６２の前又は後で、発話者提示モジュール１２１が、ステップＳ３５８で受信した発話者を特定する画像を作成して提示するようにしてもよい。
【００４１】
次に、対象者判別モジュール１１３による処理例を説明する。対象者判別モジュール１１３は前述したように発話者の相手側状況表示画面２００に対する操作、発話者の顔の向き、又は発話者の視線を検知する。
対象者確認提示モジュール１１４によって表示されている相手側状況表示画面２００を発話者が触れる操作を検知して、その位置に対応する対象者を判別する。この場合、相手側状況表示画面２００に触れる者をビデオカメラにて撮影して、その撮影画像を認識して、触れた者が発話者でない場合は、対象者に触れる操作ではないと判断する。
【００４２】
次に、発話者の顔の向きの検知について説明する。
図４は、対象者判別モジュール１１３が画像処理によって発話者の顔の向きを検知して、対象者を判別する処理例を示す説明図である。
図４に示す目４１１、４１２、鼻４１３は、ビデオカメラによって撮影された発話者のものである。
図４に示すように目４１１、４１２、鼻４１３によってできる三角形４１４（図４（Ａ））又は三角形４１５（図４（Ｂ））の形状から判断して、顔の向きを抽出する。例えば、図４（Ａ）の三角形４１４の場合は、向かって左側を見ていることを抽出できる。同様に、図４（Ｂ）の三角形４１５の場合は、向かって右側を見ていることを抽出できる。
そして、対象者判別モジュール１１３は、その顔の向きから相手側状況表示画面２００の見ている位置を判断して、対象者を判別する。
また、顔（眼鏡、帽子等を含めてもよい）に反射するもの（マーカ）を貼り付け、その位置関係から顔の向きを検知するようにしてもよい。
この他に、発話者の顔の３次元形状を計測して顔の向きを検知するようにしてもよい。
【００４３】
次に、発話者の視線の検知について説明する。
対象者判別モジュール１１３は、ビデオカメラによって撮影された発話者の瞳孔を画像処理によって取り出して、その視線を検知するようにしてもよい。また、対象者判別モジュール１１３は、眼球運動の測定装置を用いて、例えば、強膜反射又は筋電位を測定して視線を検知するようにしてもよい。そして、対象者判別モジュール１１３は、その視線の先の相手側状況表示画面２００の位置を求め、対象者を判別する。
【００４４】
図５〜７は、対象者提示モジュール１２２によって提示される対象者の例を示す説明図である。
遠隔会議システム（発話者側）１１０内に遠隔会議システム（対象者側）１２０の状況取得モジュール１２３と同様のモジュールを有しており、遠隔会議システム（対象者側）１２０内に遠隔会議システム（発話者側）１１０の相手側状況提示モジュール１１２と同様のモジュールを有している場合について説明する。つまり、遠隔会議システム（対象者側）１２０のディスプレイに遠隔会議システム（発話者側）１１０側の参加者の状況を提示する。例えば、図５の例に示すように、相手側状況表示画面５００に相手側画像表示領域５１０、参加者リスト表示領域５２０を提示することになる。なお、遠隔会議システム（発話者側）１１０側の参加者は、会議参加者５１１Ａ、５１２Ａ、５１３Ａの３人である。
このような相手側状況表示画面５００の表示に対して、対象者提示モジュール１２２は、対象者表示領域５５５のように遠隔会議システム（発話者側）１１０側で対象者と判別された者を提示する。つまり、対象者判別モジュール１１３によって判別された対象者を送受信モジュール１１９が送信し、これを送受信モジュール１２９が受信して対象者提示モジュール１２２が提示したものである。
【００４５】
また、発話者提示モジュール１２１が、図６の例に示すように、参加者リスト表示領域６２０内の発話者の参加者顔画像表示領域６１３Ｂ、氏名欄６１３Ｃを他と異ならせて提示するようにしてもよい。例えば、発話者を示す表示を強調表示すること、発話者以外を示す表示をフェードアウトさせるように目立たせない表示にすること、又はその両方を行うこと等である。図６の例に示す場合は、発話者以外の参加者を参加者顔画像表示領域６１１Ｂ、参加者顔画像表示領域６１２Ｂのように点線表示（薄く表示等）を行い、逆に、発話者を氏名欄６１３Ｃのように強調表示している。そして、対象者提示モジュール１２２が、発話者（参加者顔画像表示領域６１３Ｂ、氏名欄６１３Ｃ）の下に対象者表示領域６５５を提示するようにしてもよい。
【００４６】
また、発話者提示モジュール１２１が、図７の例に示すように、対象者を発話者が見ていることを示す発話者の疑似画像（例えば、似顔絵、顔写真、その変形等）の表示を行うようにしてもよい。例えば、発話者提示モジュール１２１は、遠隔会議システム（発話者側）１１０の発話者判別モジュール１１１が判別した発話者を受け取り、発話者の左側を向いた疑似画像を生成して、対象者提示モジュール１２２は、遠隔会議システム（発話者側）１１０の対象者判別モジュール１１３が判別した対象者を受け取り、その対象者の疑似画像を生成して、発話者の参加者顔画像表示領域７１２Ｂの左側に対象者顔画像表示領域７７７を表示するようにしてもよい。さらに、図６の例で示したように対象者以外の者を目立たせないように表示（参加者顔画像表示領域７１１Ｂ）するようにしてもよい。
さらに、発話者提示モジュール１２１は、遠隔会議システム（発話者側）１１０の発話者判別モジュール１１１が判別した発話者、対象者提示モジュール１１３が判別した対象者及びその対象者（実物）の位置を受け取り、遠隔会議システム（対象者側）１２０側にいる実物の対象者が座っている位置を向いた疑似画像を生成して提示するようにしてもよい。例えば、対象者が遠隔会議システム（対象者側）１２０のディスプレイに向かって右側又は左側のいずれかの席に座っている場合は、参加者リスト内の発話者の画像をその方向に向けた疑似画像に変更して提示するものである。なお、実物の対象者が座っている位置は、本人が有している前述のＩＣカードの位置を検知して取得する。
【００４７】
強調表示としては、対象者を示す表示を点滅させること、コントラスト／解像度等を増加させること、拡大すること等がある。
目立たないように表示することとしては、フェードアウト表示すること、コントラスト／解像度等を低下させること、点線表示すること、縮小すること等がある。
【００４８】
その他に、参加者毎にランプを設置し、対象者提示モジュール１２２は、そのランプを点灯させて対象者を提示するようにしてもよい。また、参加者毎にスピーカを設置し、対象者提示モジュール１２２は、対象者のスピーカから発話者の発話を大きな音量で出力するようにしてもよい。
【００４９】
なお、本実施の形態としてのプログラムが実行されるコンピュータのハードウェア構成は、図８に例示するように、一般的なコンピュータであり、具体的にはパーソナルコンピュータ、サーバーとなり得るコンピュータ等である。発話者判別モジュール１１１、相手側状況提示モジュール１１２、対象者判別モジュール１１３、対象者確認提示モジュール１１４、発話者提示モジュール１２１、対象者提示モジュール１２２、状況取得モジュール１２３等のプログラムを実行するＣＰＵ８０１（この例では演算部としてＣＰＵを用いた）と、そのプログラムやデータを記憶するＲＡＭ８０２と、本コンピュータを起動するためのプログラム等が格納されているＲＯＭ８０３と、補助記憶装置であるＨＤ８０４（例えばハードディスクを用いることができる）と、キーボード、マウス等のデータを入力する入力装置８０６と、ＣＲＴや液晶ディスプレイ等の出力装置８０５と、通信ネットワークと接続するための通信回線インタフェース８０７（例えばネットワークインタフェースカードを用いることができる）、そして、それらをつないでデータのやりとりをするためのバス８０８により構成されている。これらのコンピュータが複数台互いにネットワークによって接続されていてもよい。
【００５０】
前述の実施の形態のうち、コンピュータ・プログラムによるものについては、本ハードウェア構成のシステムにソフトウェアであるコンピュータ・プログラムを読み込ませ、ソフトウェアとハードウェア資源とが協働して、前述の実施の形態が実現される。
なお、図８に示すハードウェア構成は、１つの構成例を示すものであり、本実施の形態は、図８に示す構成に限らず、本実施の形態において説明したモジュールを実行可能な構成であればよい。例えば、一部のモジュールを専用のハードウェア（例えばＡＳＩＣ等）で構成してもよく、一部のモジュールは外部のシステム内にあり通信回線で接続しているような形態でもよく、さらに図８に示すシステムが複数互いに通信回線によって接続されていて互いに協調動作するようにしてもよい。また、特に、パーソナルコンピュータの他、情報家電、複写機、ファックス、スキャナ、プリンタ、複合機（スキャナ、プリンタ、複写機、ファックス等のいずれか２つ以上の機能を有している画像処理装置）などに組み込まれていてもよい。
【００５１】
前記実施の形態においては、会議に用いることを主に示したが、離れた場所にいる人同士のコミュニケーションを行うものであればよい。例えば、遠隔における講義（例えば、先生が学生に質問する場合等）に使用してもよい。
【００５２】
なお、説明したプログラムについては、記録媒体に格納して提供してもよく、また、そのプログラムを通信手段によって提供してもよい。その場合、例えば、前記説明したプログラムについて、「プログラムを記録したコンピュータ読み取り可能な記録媒体」の発明として捉えてもよい。
「プログラムを記録したコンピュータ読み取り可能な記録媒体」とは、プログラムのインストール、実行、プログラムの流通などのために用いられる、プログラムが記録されたコンピュータで読み取り可能な記録媒体をいう。
なお、記録媒体としては、例えば、デジタル・バーサタイル・ディスク（ＤＶＤ）であって、ＤＶＤフォーラムで策定された規格である「ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ、ＤＶＤ−ＲＡＭ等」、ＤＶＤ＋ＲＷで策定された規格である「ＤＶＤ＋Ｒ、ＤＶＤ＋ＲＷ等」、コンパクトディスク（ＣＤ）であって、読出し専用メモリ（ＣＤ−ＲＯＭ）、ＣＤレコーダブル（ＣＤ−Ｒ）、ＣＤリライタブル（ＣＤ−ＲＷ）等、光磁気ディスク（ＭＯ）、フレキシブルディスク（ＦＤ）、磁気テープ、ハードディスク、読出し専用メモリ（ＲＯＭ）、電気的消去及び書換可能な読出し専用メモリ（ＥＥＰＲＯＭ）、フラッシュ・メモリ、ランダム・アクセス・メモリ（ＲＡＭ）等が含まれる。
そして、前記のプログラム又はその一部は、前記記録媒体に記録して保存や流通等させてもよい。また、通信によって、例えば、ローカル・エリア・ネットワーク（ＬＡＮ）、メトロポリタン・エリア・ネットワーク（ＭＡＮ）、ワイド・エリア・ネットワーク（ＷＡＮ）、インターネット、イントラネット、エクストラネット等に用いられる有線ネットワーク、あるいは無線通信ネットワーク、さらにこれらの組み合わせ等の伝送媒体を用いて伝送させてもよく、また、搬送波に乗せて搬送させてもよい。
さらに、前記のプログラムは、他のプログラムの一部分であってもよく、あるいは別個のプログラムと共に記録媒体に記録されていてもよい。また、複数の記録媒体に分割して
記録されていてもよい。また、圧縮や暗号化など、復元可能であればどのような態様で記録されていてもよい。
【図面の簡単な説明】
【００５３】
【図１】本実施の形態の構成例についての概念的なモジュール構成図である。
【図２】相手側状況提示モジュールによって提示される相手側の会議室の状況例を示す説明図である。
【図３】本実施の形態による処理例を示すフローチャートである。
【図４】対象者判別モジュールが画像処理によって対象者を検知する処理例を示す説明図である。
【図５】対象者提示モジュールによって提示される対象者の例を示す説明図である。
【図６】対象者提示モジュールによって提示される対象者の例を示す説明図である。
【図７】対象者提示モジュールによって提示される対象者の例を示す説明図である。
【図８】本実施の形態を実現するコンピュータのハードウェア構成例を示すブロック図である。
【符号の説明】
【００５４】
１１０…遠隔会議システム（発話者側）
１１１…発話者判別モジュール
１１２…相手側状況提示モジュール
１１３…対象者判別モジュール
１１４…対象者確認提示モジュール
１１９…送受信モジュール
１２０…遠隔会議システム（対象者側）
１２１…発話者提示モジュール
１２２…対象者提示モジュール
１２３…状況取得モジュール
１２９…送受信モジュール
１９０…通信回線
２００…相手側状況表示画面
２１０…相手側画像表示領域
２２０…参加者リスト表示領域
【図１】
2009206924.tif 000003
【図２】
2009206924.tif 000004
【図３】
2009206924.tif 000005
【図４】
2009206924.tif 000006
【図５】
2009206924.tif 000007
【図６】
2009206924.tif 000008
【図７】
2009206924.tif 000009
【図８】
2009206924.tif 000010