(57)【要約】カメラに基づくシステムは、幾つかのサイトを有し、各々はそれに関連するカメラを有する。処理システムは、所定の１つのサイトでカメラから受信されたビデオ信号を処理し、そして、所定のサイトから離れた１つ又はそれ以上のサイトで、所定のサイトに関連する対応する出力ビデオ信号の表示のために、代人プレゼンスモードと、少なくとも１つの他のモードの間の制御された切替を提供する。処理システムは、代人存在モードと、例えば、ライブビデオモードの他のモードの間の切り換えを制御するためにカメラにより発生されるビデオ信号から得られる情報を使用する。例えば、処理システムは、システムのユーザを確認するために、ビデオを処理し、対応するユーザプロファイルを取り出し、そして、取り出されたユーザプロファイル情報に従って、モード間の切換を制御する。
2004505514.tif 000002
【特許請求の範囲】
【請求項１】
カメラに基づくシステムであって、
ビデオ信号を発生する、少なくとも一つのカメラと、
カメラに接続され且つそこからビデオ信号を受信する処理システムとを有し、そのカメラは、システムの複数のサイトの所定の１つと関連しており、所定のサイト以外のサイトは、その所定のサイトに対する遠隔サイトを表し、処理システムは、カメラから受信されたビデオ信号を処理し且つ、１つ又はそれ以上の遠隔サイトにおいて、所定のサイトに関連する対応する出力ビデオの、代人プレゼンスモードと表示のための少なくとも一つの他のモードの間の、制御された切り換えを提供するように動作する、カメラに基づくシステム。
【請求項２】
代人プレゼンスモードは、１つ又はそれ以上の遠隔サイトにおいて、所定のサイトに関連する出力ビデオの、表示のためのデフォルトモードとして確立される、請求項１に記載のカメラに基づくシステム。
【請求項３】
少なくとも一つの他のモードは、カメラにより発生されたビデオ信号の少なくとも一部は、１つ又はそれ以上の遠隔サイトに提示される、ライブビデオモードを有する、請求項１に記載のカメラに基づくシステム。
【請求項４】
処理システムは、代人プレゼンスモードと少なくとも１つの他のモードの間の切り換えを制御するために、カメラにより発生されたビデオ信号から得られた情報を使用する、請求項１に記載のカメラに基づくシステム。
【請求項５】
処理システムは、システムの特定のユーザを確認するように更に動作する、請求項１に記載のカメラに基づくシステム。
【請求項６】
処理システムは、カメラにより発生されたビデオ信号を処理することにより、システムのユーザを確認する、請求項５に記載のカメラに基づくシステム。
【請求項７】
処理システムは、音声認識技術の使用を通して、少なくとも部分的に、ユーザを確認する、請求項５に記載のカメラに基づくシステム。
【請求項８】
処理システムが、確認されたユーザに関連する前に蓄積されたユーザプロファイルを取り出す、請求項５に記載のカメラに基づくシステム。
【請求項９】
処理システムは、取り出されたユーザプロファイル内の情報に基づいて、少なくとも部分的に、代人プレゼンスモードと少なくとも１つの他のモードの間の切り換えを制御する、請求項８に記載のカメラに基づくシステム。
【請求項１０】
処理システムは、取り出されたユーザプロファイル内の情報に基づいて、少なくとも部分的に、代人プレゼンスモードで、１つ又はそれ以上の他のサイトに提示される出力ビデオの少なくとも一つの特性を決定する、請求項８に記載のカメラに基づくシステム。
【請求項１１】
処理システムは、所定のサイトで、ユーザに、１つ又はそれ以上の遠隔サイトでの所定のサイトに関連するビデオの表示は、代人プレゼンスモード又は少なくとも１つの他のモードに従っているかどうかに関する、指示を与える、請求項１に記載のカメラに基づくシステム。
【請求項１２】
そこに関連するカメラを有する所定の１つのサイト、所定のサイトに対する遠隔サイトを表す所定のサイト以外のサイトの、複数のサイトを含むカメラに基づくシステム内で使用する方法であって、
カメラからビデオ信号を受信するステップと、
少なくとも１つ又はそれ以上の遠隔サイトで、所定のサイトに関連する対応する出力ビデオの表示のために、代人プレゼンスモードと少なくとも一つの他のモードの間の制御された切り替えを提供する、カメラから受信されたビデオ信号を処理するステップとを有する方法。
【請求項１３】
受信するステップと処理するステップは、カメラに接続された処理システム内で実行される、請求項１２に記載の方法。
【請求項１４】
代人プレゼンスモードは、少なくとも１つ又はそれ以上の遠隔サイトで、所定のサイトに関連する出力ビデオの表示のための、デフォルトモードとして確立される、請求項１２に記載の方法。
【請求項１５】
少なくとも１つの他のモードは、ライブビデオモードを含み、そのモードでは、カメラにより発生されたビデオ信号の少なくとも一部は、１つ又はそれ以上の遠隔サイトに表示される、請求項１２に記載の方法。
【請求項１６】
処理システムは、代人プレゼンスモードと少なくとも１つの他のモードの間の切り換えを制御するためにカメラにより発生されるビデオ信号から得られる情報を使用する、請求項１３に記載の方法。
【請求項１７】
処理システムは、更に、システムの特定のユーザを確認するように動作する、請求項１３に記載の方法。
【請求項１８】
処理システムは、カメラにより発生されたビデオ信号を処理することにより、システムのユーザを確認する、請求項１７に記載の方法。
【請求項１９】
処理システムは、音声認識技術の使用を通して、少なくとも部分的に、ユーザを確認する、請求項１７に記載の方法。
【請求項２０】
処理システムは、確認されたユーザに関連する、前に蓄積されたユーザプロファイルを取り出す、請求項１７に記載の方法。
【請求項２１】
処理システムは、取り出されたユーザプロファイル内の情報に基づいて少なくとも部分的に、代人プレゼンスモードと少なくとも１つの他のモードの間の切り換えを制御する、請求項２０に記載の方法。
【請求項２２】
処理システムは、取り出されたユーザプロファイル内の情報に基づいて少なくとも部分的に、代人プレゼンスモードで、１つ又はそれ以上の他のサイトに表示される出力ビデオの少なくとも１つの特性を決定する、請求項２０に記載の方法。
【請求項２３】
処理システムは、所定のサイトで、ユーザに、１つ又はそれ以上の遠隔サイトでの所定のサイトに関連するビデオの表示は、代人プレゼンスモード又は、少なくとも１つの他のモードに従っているかかどうかに関する、指示を与える、請求項１３に記載の方法。
【請求項２４】
カメラに基づくシステムの少なくとも一部の動作を制御するシステムソフトウェアの組の１つ又はそれ以上のプログラムを蓄積する蓄積媒体を含む製造物であって、カメラに基づくシステムは、そこに関連するカメラを有する所定の１つのサイト、所定のサイトに対する遠隔サイトを表す所定のサイト以外のサイトの、複数のサイトを含み、１つ又はそれ以上のプログラムは、カメラに基づくシステムの処理システムにより実行されたときに、
１つ又はそれ以上の遠隔サイトで、所定のサイトに関連する対応する出力ビデオの表示のために、代人プレゼンスモードと少なくとも一つの他のモードの間の制御された切り替えを提供するために、カメラから受信されたビデオ信号を処理するステップを実行する、製造物。
【発明の詳細な説明】
【０００１】
発明の分野
本発明は、一般的にはビデオ信号処理の分野に関連し、そして、特に、カメラに基づくシステム内で使用するビデオ信号処理技術に関連する。
【０００２】
発明の背景
現在のビデオ会議システムは、複数のサイト間の２方向ビデオ及びオーディオ通信を提供するように構成できる。そのようなシステムは、”ビデオプレゼンス”又は、”ライブビデオ”モードと呼ばれる配置、サイト間の連続ビデオ通信を許す。この種の配置に伴なう問題は、所定の１つのサイトから１つ又はそれ以上の他のサイトへの、ライブビデオの中断されない表示が、所定のサイトで表示されるそれらに対して侵害すると考えられる。この問題は、会議室又はビデオ会議に特に設計された他の施設と対称的に、特定の個人の家庭又はオフィスに対応する所定のサイト内のアプリケーションでは、特に明らかである。そのような家庭又はオフィスでの応用では、プライバシーの懸念は、ビデオプレセンスの使用を除外しうる。
【０００３】
上述のプライバシーの懸念では、従来のビデオ会議システム内である程度取り組まれており、”代人プレゼンス”と呼ばれるアプローチを使用するように構成され得る。代人プレゼンスは、一般的には、ユーザが、ビデオ会議に又は、遠隔参加者へ表示されるビデオ信号内に特定の方法で提示される他の同様な配置に、参加することを許す。各ユーザには、表示される信号内に提示される方法を介してある量の制御が提供されうる。
【０００４】
ビデオ会議応用の中の、表示プレゼンスの従来の使用の例は、１９９４年９月１３日にＴｏｈｅｉ　Ｎｉｔｔａに発行された、名称”アニメーション化された電子会議室”の、米国特許番号５，３４７，３０６に開示されている。この例では、ネットワークに基づくアニメーション化された電子会議室は、ネットワーク上の各参加者に対する端末及びローカルに予め蓄積されたアニメーショングラフィックスと、それぞれのワークステーションにおいて各参加者の検知を通して駆動されている、位置、姿勢、身振り、オーディオ内容及び、オプションの各個人がアニメーション化された電子会議室に表示されたいと望む人物を含むアニメーション化されたキャラクタ又は人形の形式の模擬された参加者を含む。所定のユーザは、どのように、ユーザが自分自身をスクリーン上に表示するかを、人物又は、キャラクタの制御の使用を通して、選択できる。
【０００５】
しかし、表示存在モードとライブビデオモードは、上述の従来システム中では、独立して実行されたので、これらのシステムは、所定のシステム内で、代人プレゼンスモードとライブビデオモードの間の切り換えに関する適切な技術を提供するのに失敗している。
【０００６】
発明の概要
本発明は、ビデオ会議システム又は他のカメラに基づくシステム内で、代人プレゼンスモードとライブビデオモードのような１つ又はそれ以上の他のモードの間の自動的な又は半自動的な切り換えのための方法と装置を提供することである。本発明の１つの特徴に従って、カメラに基づくシステムは、幾つかのサイトを有し、各々はそれに関連するカメラを有する。処理システムは、所定の１つのサイトでカメラから受信されたビデオ信号を処理し、そして、所定のサイトから離れた１つ又はそれ以上のサイトで、所定のサイトに関連する対応する出力ビデオ信号の表示のために、代人プレゼンスモードと、少なくとも１つの他のモードの間の制御された切替を提供する。処理システムは、代人プレゼンスモードと１つ又はそれ以上他のモードの間の切り換えを制御するためにカメラにより発生されるビデオ信号から得られる情報を使用する。代人プレゼンスモードは、１つ又はそれ以上の遠隔サイトで、所定のサイトに関連する対応する出力ビデオの表示のために、デフォルトモードとして確立される。
【０００７】
本発明の他の特徴に従って、処理システムは、システムのユーザを確認するよためにカメラにより発生されたビデオ信号を処理する。処理システムは、対応するユーザプロファイルを取り出し、且つ取り出されたユーザプロファイル内の情報に従ってモード間の切り替えを制御する。他の実施例に従って、処理システムは、音声認識技術の使用を通して少なくと部分的にユーザを確認しうる。
【０００８】
本発明の更なる特徴に従って、処理システムは、所定のサイトで、取り出されたユーザプロファイル内の情報に基づいて少なくとも部分的に、代人プレゼンスモード内の１つ又はそれ以上の遠隔サイトに表示する出力ビデオの少なくとも１つの特性を決定し得る。
【０００９】
本発明のさらに他の特徴に従って、所定のサイトで、処理システムは、所定のサイトで、ユーザに、１つ又はそれ以上の遠隔サイトでの所定のサイトに関連するビデオの表示は、代人プレゼンスモード又は少なくとも１つの他のモードに従っているかどうかに関する、指示を与えるように構成され得る。
【００１０】
優位に、本発明のビデオ会議システム又は、他のカメラに基づくシステム応用内の、代人プレゼンスモードとライブビデオモードの間の効率のよい且つ正確な切り換えを可能とする。本発明のこれらのそして他の特徴と優位点は、添付の図面を参照して、以下の詳細な説明を読めば更に明らかになろう。
【００１１】
発明の詳細な説明
例示の実施例内の本発明は、カメラに基づくシステム内での代人プレゼンスモードとライブビデオモードの間の切り換えに関する技術を提供する。優位に、モード間の切り換えは、自動で又は、半自動で実行されることが可能である。例えば、以下に説明する例示の実施例では、代人プレゼンスモードは、デフォルトモードとして設定され、システムは、対応するサイトでのある形式の活動の検出に基づいて、デフォルトモードからライブモードへそして反対に自動的に切り替える。検出された活動は、例えば、特定の位置及び所定の部屋内での位置での特定の個人の存在を含む。そのような場合には、そのサイトでカメラにより発生されたビデオ信号は、個人を確認するために、対応するユーザプロファイルを取り出すためにそして、１つ又はそれ以上のサイトに対する表示を発生するのに使用される、適切なモードと表示特性を決定するために、処理される。切り換えは、また、或は代わりに、半自動で実行されても良く、その場合には、例えば、あるユーザ入力は、検出された活動に基づいて、切り換え動作を実行する前に要求される。
【００１２】
図１は、本発明の例示的な実施例に従った、カメラに基づくシステム１００を示す。システム１００は、幾つかのサイト１０２−１，１０２−２，１０２−３，．．．１０２−Ｎを含み、各々はネットワーク１０３を介して通信で接続されている。各サイトは、カメラ１０４−ｉ、マイクロフォン１０５−ｉ、ディスプレイ１０６−ｉ及び、処理システム１０８−ｉを有するように構成され、ｉ＝１，２，４，．．．Ｎである。所定の処理システム１０８は、その対応するカメラ１０４、マイクロフォン１０５及び、ディスプレイ１０６に接続され、そして、その動作を制御する。
【００１３】
１つ又はそれ以上のユーザは、各々のサイト１０２−ｉに関連している。例えば、図に示されたように、ユーザ１１０は、サイト１０２−１に関連し、そして、ユーザ１１２はサイト１０２−Ｎに関連している。
【００１４】
動作では、システム１００は、所定の１つのサイト１０２−ｉに関連する処理システム１０８から、ビデオ信号を、１つ又はそれ以上の他のサイトの処理システムに供給する。これらの他のサイトは、所定のサイトに対して、ここでは、遠隔サイトとも呼ぶ。用語”遠隔”は、所定のサイトから地理的に離れているサイトのみではなく、例えば、建物の他の部屋内、施設の他の建物等のような、所定のサイトに共に配置されているサイトも含む。
【００１５】
本発明に従って、１つ又はそれ以上の他のサイトに表示するための所定のサイトの処理システム１０８により供給されるビデオ信号は、ビデオの自動又は半自動処理に基づいて又は、所定のサイトで発生された他の情報に基づいて、ライブビデオ信号又は代人プレゼンスビデオ信号のいずれかとして選択され得る。
【００１６】
図１のシステム１００内のカメラ１０４は、例えば、固定のビューカメラ、機械的ズームカメラ、電子的ズームカメラ、パン−チルトズーム（ＰＴＺ）カメラ等を含んでもよい。システム１００の全てのカメラは、同じ方法で構成される必要は無く、即ち、システム１００の所定の実行は、広い種類の異なる形式のカメラを含んでもよい。ここで使用する用語”カメラ”は、本発明のモード切り換え技術と共に使用されることが可能な、どのような形式の画像補足装置も含む。カメラ１０４は、対応する処理システム１０８に供給されるビデオ信号を発生する。ビデオ信号は、アナログ形式でカメラ１０４により発生され、そして、続いて、処理システム１０８に関連するアナログ／ディジタル変換器にような、処理システム１０８の要素を使用してディジタル形式に変換される。代わりにカメラは、ディジタル形式でビデオ信号を発生する、ディジタルネットワークカメラ、インターネットプロトコル（ＩＰ）カメラ又は、他の形式のディジタルカメラでもより。
【００１７】
図１の実施例の各サイトには、単一のカメラが示されているが、他の実施例は、例えば、付加さ情報を計算する能力をシステムに供給するために、各サイトに配置されたカメラの対のような、各サイトで複数のカメラを含んでも良い。同様に、複数のマイクロフォンも、図１の各サイト１０２に含まれてもよい。更に加えて、動き検出、オーディオロケータ装置等のような、図１に示されていない他の形式の装置もカメラとマイクロフォンともに、使用できる。所定のサイトでの、カメラ、マイクロフォン及び、処理システムの少なくとも一部は、単一装置に結合されてもよい。
【００１８】
各ディスプレイ１０６は、対応する処理システム１０８により発生された１つ又はそれ以上の出力ビデオ信号の表示を提供するように構成される。例えば、各ディスプレイ１０６は、本発明のモード切り換えに従って、ライブビデオと代人プレゼンスビデオ信号の両方を含む、特定の１つのサイト１０２により発生されたビデオ信号の種々の組合せを表示してもよい。そのようなディスプレイの例は、図３と共に以下に詳細に説明される。
【００１９】
所定の１つの処理システム１０８は、カメラ１０４により発生された入力ビデオ信号を受信し、受信された信号を以下に詳細に説明する方法で処理し、且つ、ディスプレイ１０６の対応する１つに表示するために適切なビデオ信号を発生する。上述のように、１つ又はそれ以上の出力ビデオ信号は、本発明のの技術に従って構成された代人プレゼンスタイプの配置を含む。
【００２０】
図１のカメラに基づくシステム１００のある要素又は要素のグループが、他の従来のコンピュータ、コンピュータの組み又は、ビデオ会議システム、その部分又は、これらと他の処理装置又はシステムの組合せの対応する要素を表すことに注意すべきである。更に、処理システム１０８の幾つかの又はすべ他の機能は、コンピュータ、テレビジョン受信機、セットトップボックス又は、他の形式の処理装置に統合される、特定用途向けの集積回路（ＡＳＩＣ）、プログラムされたマイクロプロセッサ、マイクロコントローラ又は、指示信号プロセッサ（ＤＳＰ）、回路カード等を使用して実行されてもよい。
【００２１】
処理システム１０８は、図２と３と共にここで説明されるモード切り替え技術を実行するシステムソフトウェアを実行するように構成されている。各処理システム１０８は、従って、１つ又はそれ以上のマイクロプロセッサ、中央処理ユニット、マイクロコントローラ、ＤＳＰ又は、ここで説明されるモード切り替え技術を実行するのに適する他のデータ処理要素と、そのような要素の一部又は、組合せを含む。又、処理システム１０８は各々が、上述のシステムソフトウェアの少なくとも一部を記憶するメモリを含む。これらの、メモリは、１つ又はそれ以上の電子的メモリ、ディスクベースのメモリ、及びその一部又は、他の形式のメモリとこれらと他の蓄積装置の組み合わせを含む。
【００２２】
図２は、図１のシステム１００内で実行され得る、本発明のモード切り換え処理を示すフロー図である。ステップ１２０では、所定のサイト１０２−ｉは、この実施例では、代人プレゼンスモードに対応するデフォルトモードに置かれている。このデフォルトモードでは、所定のサイトから離れた各サイト１０２は、所定のサイトからのライブビデオ信号の代わりに、所定のサイトからの、代人プレゼンスタイプのビデオ信号を表示する。遠隔サイトに表示されるべき代人プレゼンスビデオ信号の特定の特性は、例えば、処理システム１０８の対応する１つ内のユーザに対して蓄積されたユーザプロファイルの一部として所定のサイトでユーザにより制御される。
【００２３】
本発明の特徴に従って、所定のサイトからの代人プレゼンスビデオ信号が、１つ又はそれ以上の遠隔サイトで、表示され、実際の代人プレゼンスビデオ信号それ自身は、所定のサイトから各遠隔サイトには送られない。代わりに、遠隔サイトは、確認情報の受信に応答して、所定のサイトにより望まれている適切なな代人プレゼンス信号を表示するように、好適な確認する情報が、所定のサイトから遠隔サイトに送られる。例えば、幾つかの異なる形式の代人プレゼンスビデオ信号が、各サイトに蓄積されてもよく、又は、所定のサイトが予め蓄積された信号の特定の１つを選択することを確認することのみ必要とするために、変更可能な代人プレゼンス信号が各サイトに蓄積されてもよく、又は、遠隔サイトに所定のサイトに対する所望の代人プレゼンス信号を表示させるために、変更可能な信号の特定の特徴が蓄積されてもよい。そのようなアプローチは、所定のサイトのユーザのプライバシーを保存し、一方伝送帯域幅のような貴重なシステム資源も保存する。代人プレゼンスビデオ信号の伝送に対するここでの参照は、従って、ビデオ信号それ自身の変わりに、そのような信号に対する確認情報の伝送も含むことが意図されている。もちろん、実際の代人プレゼンスビデオ信号自身は、本発明の所定の実施例で伝送できる。
【００２４】
代人プレゼンス信号とライブビデオ信号の間の切り換えへのここでの参照は、その信号の対応するオーディオ部分の間の切り換えも含むことが意図されていることにも注意すべきである。
【００２５】
図２を再び参照すると、ステップ１２２は、ユーザが存在するかどうかを決定するために、所定のサイトでカメラにより発生されたビデオ信号が処理されることを示す。このステップは、所定のサイトでカメラにより発生されたビデオ信号の処理に基づいている。マイクロフォンからの信号の検出、動き検出装置、オーディオロケータ等のような、他の技術も、ビデオ信号処理と共に又はその代わりに、使用されても良い。ステップ１２４が、ユーザが存在しないことを示す場合には、処理は、ステップ１２２に戻り、そして、ユーザの存在を示すためにビデオ信号を監視することを継続する。
【００２６】
ステップ１２４は、ユーザが存在することを示す場合には、ユーザを確認することが行われる（ステップ１２６）。例えば、良く知られた従来のビデオ信号処理技術は、所定の画像内にユーザの顔をフレーム化しかつ、既知のシステムユーザに関する蓄積された情報と、結果の画像の特徴を比較するのに使用される。これらの技術は、特定のユーザとしての明確な確認又は、前のしかし明確に確認されなかった”タグ付け”を含み、そして、高さ、顔、色ヒストグラム署名等のような特徴に基づいている。本発明の所定の実施例で使用される確認の特定のレベルは、一般的には、所定の応用の特定の要求に従って変わる。
【００２７】
他の例として、システムは、音声発生器からの適切な音声プロンプト出力信号を使用して、確認情報に付いてユーザを促す。この場合には、ユーザはユーザの名前を述べることによりこの音声プロンプトに応答し、そして、システムは、前に蓄積されたユーザ確認子のデータベースに対して、比較される、確認子に話された名前を変換するために、音声認識を実行する。
【００２８】
このシステムは、特定のユーザの特徴を学習するように構成されることも可能である。例えば、ユーザは、システムが、ユーザに対応するビデオ又はビデオ情報を処理するために、そして、システムへの後のアクセスの際にユーザを確認するのに使用するためにそれを蓄積するために、音声コマンド又は他の機構を使用して発生されたコマンドを使用して、システムを学習モードにする。そのような技術は、ユーザを明白に確認するのには必要ないが、しかし、代わりに、例えば、そのユーザが誰であるかを正確に識別することなしに、特定のビデオ又はオーディオ署名が現在のユーザに関連付けられる、上述の”タグ付け”アプローチを代わりに含む。この方法では、そのユーザが続いてシステムにアクセスする時には、システムは、名前等の特定のユーザ情報を知ることなしに、ユーザを確認することができる。当業者には、これらの及び他の技術の多くの組合せが、システムに対して特定のユーザを確認するのに使用できることは明らかであろう。
【００２９】
図２のステップ１２８が、ユーザが成功的に確認されたことを示す場合には、ステップ１３０は、確認されたユーザに関連するユーザプロファイルを取り出すためにユーザの確認結果を使用する。ユーザが、確認されなかったときには、システムはステップ１２２に戻る。システムは、そのような未確認ユーザへ、システムはそれらを認識することが出来なかったこと、そして、特定の確認情報を入力し、部屋の中の特定の位置へ行き又は、そうでなければビデオプロンプト、音声プロンプト、身振り又は、同様なものを通して、システムと指定された方法で対話しなければならないことを、知らせるように構成される。これは、システムが適切な確認情報とそのような未確認ユーザに対する対応するユーザプロファイルを表すことを許す。
【００３０】
ステップ１３０で取り出されたユーザプロファイルは、対応するユーザの代人プレゼンス選択に関する情報を含む。例えば、ユーザプロファイルは、１つ又はそれ以上遠隔サイトに表示するために、代人プレゼンス信号の形式を規定する情報を含むことが可能である。この情報は、各遠隔サイトに対する異なる代人プレゼンス信号の仕様を含む。代人プレゼンス又は、ライブビデオのいずれかが、自動的に活性化されるべき、１日の中の時間又は検出可能な活動状態、特定の形式の代人プレゼンス信号がその遠隔サイトに表示されるべき、１日の中の時間又は検出可能な活動状態、等のような、ライブビデオモードと代人プレゼンスモードの間の好適な切り換えに関連する情報も含む。
【００３１】
所定の１つのサイトに関するこのユーザプロファイルは、そのサイトの対応する処理システムに関連するメモリ内に記憶される。
【００３２】
ステップ１３２は、取り出されたユーザプロファイルに基づいて、１つ又はそれ以上の遠隔サイトに対する表示を設定する。この設定は、全ての遠隔サイト又は、その指定されたサブセットに対する、適切なライブビデオモード又は代人プレゼンスモードを決定することを含む。この処理の一部として、システムは、取り出されたユーザプロファイル内に規定された嗜好に従って、１つ又はそれ以上の遠隔サイトの表示内で、代人プレゼンスモードとライブビデオモードの間を切り換え得る。
【００３３】
ステップ１３４で、システムは、ユーザはまだ存在するかを決定するために検査する。ユーザはまだ存在する場合には、処理はステップ１３２に戻り、代人プレゼンスモードとライブビデオモードの間の切り換えは、ユーザプロファイルと所定のサイトでの規定された活動に従って、制御されることが継続する。システムが、ステップ１３４で、ユーザはもはや存在しないと決定する場合には、処理はステップ１２２に戻り、所定のサイトでカメラにより発生されたビデオ信号内で他のユーザを検出しようとする。
【００３４】
前述のように、代人プレゼンスモードとライブビデオモードの間の切り換えは、所定のサイトでの、一定の形式の検出に基づいている。例えば、システムは、ライブビデオモードを使用して、１つ又はそれ以上の遠隔サイトと対話する意思を示すように、ユーザが、システムの指定された付近内に来て、そして、そこに一定の時間の期間だけとどまるかどうかを決定する。他の例としては、システムは、椅子や、所定の部屋内の演壇又はソファーのような、特定の位置でユーザの存在を検出できる。この場合には、ユーザプロファイルは、ユーザが部屋内の特定の場所又は位置で検出された場合には、デフォルト代人モードからライブビデオモードへの切り換えが自動的にトリガされるべきであることを規定してもよい。更なる例としては、一定のユーザは、部屋に一人で入る場合にはライブビデオモードで動作することを好む場合がある。そのような場合には、一旦ユーザが確認され且つ対応するユーザプロファイルが取り出され且つ処理されると、システムは自動的に、デフォルト代人プレゼンスモードからライブビデオモードへ切り換える。もちろん、多くの他のシナリオも可能である。
【００３５】
システムは、モード間の切り換えをするために、特定の仕方の手又は腕の動きのような、ユーザの身振りに応答するように構成されても良い。これらの身振りは、個々のユーザに対して又は、ユーザのグループに対して、上述のユーザプロファイルの一部として定義されてもよい。例えば、特定の身振りは、更なるモード間の切り換えを一時的に不可能化するために、特定のモードでそれ自身を”ロック”するためのシステムへのコマンドとして指定されてもよい。他の身振りは、このロックされたモードに対する、システムをロック解除するために指定できる。音声コマンド又は他の形式の身振りでないコマンドも、これらの機能を実行するために使用できる。
【００３６】
図３は、図１のカメラに基づくシステム１００内の所定の１つのサイトで使用され得るディスプレイの例を示す。この例では、図に示されたディスプレイは、サイト１０２−１に関連するディスプレイ１０６−１であるとするが、しかし、システムの他の各々のサイト内のディスプレイは、同様に構成される。この例のディスプレイ１０６−１は、それに関連するスクリーン１５２を有するモニタ１５０を含む。スクリーンは、各々がサイト１０２−１から離れた特定のサイトに対応する、４つの別の表示領域１５４−１，１５４−２，１５４−３及び、１５４−４を含むように、電子的に、構造的に又はその他で構成される。特に、表示領域１５４−１と１５４−４は、それぞれ、遠隔サイト２（１０２−２）と遠隔サイト５（１０２−５）からの、ライブビデオ信号を表示しており、一方、表示領域１５４−２と１５４−３は、それぞれ、遠隔サイト３（１０２−３）と遠隔サイト４（１０２−４）により供給される又は規定される代人プレゼンスビデオ信号を表示している。
【００３７】
また、ディスプレイ１０６−１に関連しているのは、第１のライト１６２と第１のライト１６４を含む、指示子ライト１６０の組みである。インジケータライト１６０の組みは、遠隔サイトがサイト１０２−１を見ている特定の方法で、サイト１０２−１でのユーザと通信をすることが意図されている。例えば、ライト１６２は、サイト１０２−１のユーザに、代人プレゼンスモードで遠隔サイトの各々にサイト１０２−１が表示されているということを示す、緑色ライトであり、一方、ライト１６４は、サイト１０２−１のユーザに、ライブビデオモードで遠隔サイトの各々にサイト１０２−１が表示されているということを示す、赤色ライトである。
【００３８】
図３のディスプレイ１０６−１は、各々は、サイト１０２−１に対して、対応する１つの遠隔サイトである、即ち、サイト１０２−２，１０２−３，．．．１０２−Ｎである、１７０−２，１７０−３，．．．１７０−Ｎで示された表示領域の追加の組みを更に含む。所定の１つの表示領域１７０は、サイト１０２−１でユーザに、対応する遠隔モードで現在表示されている、特定の代人プレゼンス又はライブビデオ信号を表示する。これは、サイト１０２−１でユーザに、遠隔サイトで表示されている実際の信号の詳細な表示を提供する。
【００３９】
同様な組みのライト１６０と表示領域１７０は、各々のサイト１０２で、ディスプレイ１０６内に実行されており、これらの各々のサイトでユーザは、遠隔サイトが、それらのローカルサイトに対するライブビデオ又は代人プレゼンスビデオを表示しているかを決定でき、そして、表示されている信号の特定の形式を決定できる。
【００４０】
ライトの組み１６０と、表示領域１７０は、サイト１０２−１でユーザに、現在動作しているモードを示す、一定のフィードバックを与える。他の形式のフィードバック機構も可能である。
【００４１】
本発明の他の実施例も、代人プレゼンスモードと、幾つかの異なる形式のライブビデオモードのような、複数の他のモードの間の切り換え、又は、代人プレゼンスモードと、複数ののライブビデオモードの間の切り換えを提供する。
【００４２】
特にビデオ会議システム応用に好適であるが、本発明は、ビデオ監視、監視又はセキュリティシステムのような、他の応用にも使用され得る。更に、図１と３に示されたシステム要素の特定の形式及び配置は、例としてのみであり、そして、多くの代わりのシステム構成は、本発明のモード切り換え技術を実行するのに使用できる。例えば、図１の実施例は、分散された方法でシステムの対応するサイトに各々が関連する、複数の処理システムを含むが、本発明は、中央化された処理又は、中央化された又は分散された処理の種々のハイブリッド結合を使用して実行できる。ここで使用された用語”処理システム”は、例えば、分散された処理システムの組の１つ又はそれ以上の構成要素、分散された処理システムの完全な組み、又は、中央化された処理システムのような、そのような代わりの配置を含むことが意図されている。これらの、そして、多くの以下の請求項の範囲内の他の実施例は、当業者には明らかである。
【図面の簡単な説明】
【図１】
本発明に従った代人プレゼンスモードとライブビデオモードの間の切り換えを統合するカメラに基づくシステムの例示の実施例のブロック図である。
【図２】
本発明に従った図１のカメラに基づくシステム内で実行される例示の切り替え動作を示すフロー図である。
【図３】
本発明と共に使用するのに適するディスプレイの例を示す図である。
【国際公開パンフレット】
2004505514.tif 000003
2004505514.tif 000004
2004505514.tif 000005
2004505514.tif 000006
2004505514.tif 000007
2004505514.tif 000008
2004505514.tif 000009
2004505514.tif 000010
2004505514.tif 000011
2004505514.tif 000012
2004505514.tif 000013
2004505514.tif 000014
2004505514.tif 000015
2004505514.tif 000016
2004505514.tif 000017
2004505514.tif 000018
2004505514.tif 000019
2004505514.tif 000020
【国際調査報告】
2004505514.tif 000021
2004505514.tif 000022