(57)【特許請求の範囲】
【請求項１】
ローカルユーザ（１）に遠隔ユーザの画像（Ｉ３）を表示することができるスクリーン（７）と、遠隔ユーザ（３）のためにローカルユーザの画像（Ｉ１）をキャプチャすることができる画像センサ（９）とを備える、ローカルユーザ（１）と少なくとも１名の遠隔ユーザ（３）の間のテレビ会議装置であって、
ローカル画像センサから来るローカルユーザ（１）の画像（Ｉ１）に選択された遅延（Ｒ）を適用することができる遅延ユニット（１２、１４、１６、１８）と、
そのように遅延されたローカルユーザの画像が、遠隔で表示されるローカルユーザの画像と同時にローカルで表示されるように、そのように遅延されたローカルユーザの画像をローカルユーザ（１）に表示することができるスクリーン（７）と、
そのように遅延されたローカルユーザの画像を、遅延のないローカルユーザの画像と重ね合わせることができ、このことが、ローカルユーザが、遅延のあるローカルユーザの画像と遅延のないローカルユーザの画像の間の不一致に応じてローカルユーザの挙動を適応させることを可能にする、重ね合わせユニットとをさらに備えることを特徴とする、テレビ会議装置。
【請求項２】
遅延（Ｒ）が、通信ネットワーク、画像の符号化、距離、音声と画像の伝搬速度、および／または伝送時間によって形成されるグループに属する要素の技術的特性に応じて計算される、請求項１に記載の装置。
【請求項３】
遅延がローカルユーザと遠隔ユーザの間の往復伝送遅れに応じて計算される、請求項１に記載の装置。
【請求項４】
遅延がリアルタイムで、動的に、恒久的に、または所与のペースで計算される、請求項１に記載の装置。
【請求項５】
ローカルユーザの画像が、ローカルユーザと遠隔ユーザの間の伝送のビットレートまたは誤り率をさらに考慮に入れて、ローカルで表示される、請求項１に記載の装置。
【請求項６】
サウンドの伝送中に存在するサウンドエコーおよび／またはローカルユーザと遠隔ユーザの間の伝送遅れを、視覚的表現または振動表現に変換することができる処理ユニットをさらに備えることを特徴とする、請求項１に記載の装置。
【請求項７】
ローカルユーザにローカルユーザの画像を表示することができるローカルスクリーンと、遠隔ユーザのためにローカルユーザの画像をキャプチャすることができるローカル画像センサとをローカルユーザに備えるように提供される、ローカルユーザと少なくとも１名の遠隔ユーザの間のテレビ会議通信方法であって、
ローカル画像センサから来るローカルユーザの画像に選択された遅延がローカルで適用されるステップをさらに備え、そのように遅延されたローカルユーザの画像が、遠隔で表示されるローカルユーザの画像と同時にローカルで表示されるように、そのように遅延されたローカルユーザの画像がローカルユーザに表示され、そのように遅延されたローカルユーザの画像を、遅延のないローカルユーザの画像と重ね合わせることができ、このことが、ローカルユーザが、遅延のあるローカルユーザの画像と遅延のないローカルユーザの画像の間の不一致に応じてローカルユーザの挙動を適応させることを可能にすることを特徴とする、テレビ会議通信方法。
【請求項８】
遠隔ユーザ（３）に、ローカルユーザの画像を遠隔ユーザに表示することができる遠隔スクリーン（１１）と、ローカルユーザのために遠隔ユーザの画像を表示することができる遠隔画像センサ（１３）と、遠隔画像センサから来る遠隔ユーザの画像に選択された遅延（Ｒ２）を適用することができる遠隔遅延ユニット（１６）とを備える別の通信装置が備えられ、さらにそのように遅延された遠隔ユーザの画像が、そのように遅延され、所与の時点で遠隔ユーザに表示される遠隔ユーザの画像が、前記時点でローカルユーザに表示される遠隔ユーザの画像と合致するように、遠隔ユーザに表示される、請求項７に記載の方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、テレビ会議通信に関する。
【背景技術】
【０００２】
一般に、テレビ会議は、ローカルユーザが、少なくとも１名の遠隔ユーザと音声および視覚によって通信することを可能にする。その目的で、各ユーザは、ユーザにユーザの画像を示す少なくとも１つのスクリーン、およびその他のユーザのためにユーザ自身の画像をキャプチャするカメラを使用する。
【０００３】
ユーザが互いに長距離で隔てられている場合、テレビ会議通信、特に、衛星を使用するテレビ会議通信は、ユーザ間で比較的高い非同期問題に悩まされる。このことは、ローカルユーザの画像が、使用される通信ネットワーク、画像の符号化、距離、およびユーザ間の音声と画像の伝搬速度に依存して比較的長い可能性がある期間の後に遠隔ユーザのロケーションに到達するためである。結果は、ユーザが互いに自然に、対話的に話していないという否定的な感覚であり、このことが、ユーザ間の高品質の通信を阻害する。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本発明は、この問題のソリューションを提供する。
【課題を解決するための手段】
【０００５】
本発明は、ローカルユーザに遠隔ユーザの画像を表示することができるローカルスクリーンと、遠隔ユーザのためにローカルユーザの画像をキャプチャすることができるローカル画像センサとを備える、ローカルユーザと少なくとも１名の遠隔ユーザの間のテレビ会議通信装置を開示する。
【０００６】
本発明の１つの一般的な定義によれば、装置は、ローカル画像センサから来るローカルユーザの画像に選択された遅延を適用することができるローカル遅延ユニットと、そのように遅延されたローカルユーザの画像が、遠隔で表示されるローカルユーザの画像と同時にローカルで表示されるように、そのように遅延されたローカルユーザの画像をローカルユーザに表示することができるローカルスクリーンとをさらに備える。
【０００７】
このため、本発明の装置のお陰で、ローカルユーザが、ローカルユーザ自身の画像のローカルビューを、その画像が遠隔で表示されるのと同時に有し、このことが、ローカルユーザが高品質のテレビ会議通信を実施することを可能にするため、非同期の否定的な感覚が解消される。
【０００８】
一実施形態によれば、この遅延は、通信ネットワーク、画像の符号化、距離、および音声と画像の伝搬速度、および／または経験される伝送時間によって形成されるグループに属する要素の技術的特性に応じて計算される。
【０００９】
別の実施形態によれば、この遅延は、ローカルユーザと遠隔ユーザの間の往復伝送時間に基づいて計算される。
【００１０】
さらに別の実施形態によれば、この遅延は、リアルタイムで、動的に、恒久的に、または所与のペースで計算される。
【００１１】
さらに別の実施形態によれば、画像は、伝送の品質をさらに考慮に入れて、ローカルで表示され、このことが、自身の画像を、その画像が遠隔で表示されるときに、同時であるだけでなく、同一の品質で、ローカルで見ることを可能にし、このことが、没入の感覚をさらに向上させる。
【００１２】
さらに別の実施形態によれば、装置は、そのように遅延されたローカルユーザの画像を、遅延のないローカルユーザの画像と重ね合わせることができ、このことが、ローカルユーザが、遅延のあるローカルユーザの画像と遅延のないローカルユーザの画像の間の不一致に応じてローカルユーザの挙動を適応させることを可能にする、重ね合わせユニットをさらに備える。
【００１３】
さらに別の実施形態によれば、装置は、サウンドの伝送中に存在するサウンドエコーおよび／またはローカルユーザと遠隔ユーザの間の伝送遅れを、視覚的表現または振動表現に変換することができる処理ユニットをさらに備える。このことも、電話会議において有利である。
【００１４】
本発明の別の目的は、ローカルユーザにローカルユーザの画像を表示することができるローカルスクリーンと、遠隔ユーザのためにローカルユーザの画像をキャプチャすることができるローカル画像センサとをローカルユーザに備えるように提供される、ローカルユーザと少なくとも１名の遠隔ユーザの間のテレビ会議通信方法である。
【００１５】
本発明の別の態様によれば、この方法は、ローカル画像センサから来るローカルユーザの画像に選択された遅延がローカルで適用されるステップをさらに備え、そのように遅延されたローカルユーザの画像が、遠隔で表示されるローカルユーザの画像と同時にローカルで表示されるように、そのように遅延されたローカルユーザの画像がローカルユーザに表示される。
【００１６】
さらに別の実施形態によれば、遠隔ユーザに、ローカルユーザの画像を遠隔ユーザに表示することができる遠隔スクリーンと、ローカルユーザのために遠隔ユーザの画像を表示することができる遠隔画像センサと、遠隔画像センサから来る遠隔ユーザの画像に選択された遅延を適用することができる遠隔遅延ユニットとを備える別の通信装置が備えられ、さらにそのように遅延された遠隔ユーザの画像が、そのように遅延され、所与の時点で遠隔ユーザに表示される遠隔ユーザの画像が、その時点でローカルユーザに表示される遠隔ユーザの画像と合致するように、遠隔ユーザに表示される。
【００１７】
本発明の他の特徴および利点は、後段の詳細な説明、および添付の図面を考察すると、明白となろう。
【図面の簡単な説明】
【００１８】
【図１】従来技術による長距離で互いに隔てられた２名のユーザ間のテレビ会議通信を示す概略図である。
【図２】本発明によるローカルユーザの画像に遅延が適用される、図１のテレビ会議通信を示す概略図である。
【図３】本発明の装置の一変種の実施形態を詳細に示す図である。
【図４】本発明の方法を示す流れ図である。
【図５】適用される遅延がユーザ間の往復時間と合致する図２のテレビ会議通信を示す概略図である。
【発明を実施するための形態】
【００１９】
図１を参照すると、テレビ会議通信が、サイト２に位置するローカルユーザ１と、サイト２から非常に遠く離れている、例えば、数千キロメートル離れた、サイト４に位置する遠隔ユーザ３の間で確立される。一変種において、このテレビ会議通信は、ローカルユーザ１と複数の遠隔ユーザ３の間で確立される。このテレビ会議通信は、処理手段１０が、この場合、サイト２に配置されている通信装置５の助けを借りて確立される。一変種において、通信装置５の処理手段１０は、サイト４などの、異なるサイトに配置されることが可能である。
【００２０】
サイト２で、通信装置５が、遅れＤを伴って遠隔ユーザ３の画像Ｉ３をローカルユーザ１に表示することができるスクリーン７を備える。この場合、遅れＤは、使用される通信ネットワーク、画像の符号化、距離、および２つのサイト２と４の間の音声と画像の伝搬速度に応じる。装置５は、遠隔ユーザ３のためにローカルユーザ１の画像Ｉ１をキャプチャすることができるカメラ９をさらに備える。また、スクリーン７は、基準時刻Ｔに、カメラ９から来るローカルユーザ１の画像Ｉ１を表示することもできる。
【００２１】
サイト４で、スクリーン１１が、通信装置５から来るローカルユーザの画像Ｉ１を遠隔ユーザ３に表示することを可能にする。画像Ｉ１は、使用される通信ネットワーク、画像の符号化、距離、およびユーザ間の音声と画像の伝搬速度に応じる遅れＤを伴って表示される。また、スクリーン１１は、サイト４に配置されたカメラ１３によってキャプチャされた遠隔ユーザ３の画像も表示する。この画像Ｉ３は、スクリーン７上でＴ＋Ｄに等しい時刻に、さらにスクリーン１１上でＴ＋２Ｄに等しい時刻に装置５を介して表示される。
【００２２】
このため、従来技術の通信装置は、ユーザ間の比較的高い非同期の問題に悩まされる。このことは、ローカルユーザの画像Ｉ１が、ローカルユーザが遅れＤに気付くことなしに、比較的長い可能性がある遅れＤの後に遠隔ユーザのロケーションに到達するためである。結果は、ユーザが互いに自然に、対話的に話していないという否定的な感覚であり、このことが、ユーザ間の高品質の通信を阻害する。
【００２３】
図２を参照すると、装置５が、ローカル画像センサ９から来るローカルユーザの画像Ｉ１に選択された遅延Ｒを適用することができるローカル遅延ユニット１２をさらに含む。
【００２４】
次に、ローカルスクリーン７が、そのように遅延されたローカルユーザの画像Ｉ１を、Ｔ＋Ｒに等しい時刻にローカルユーザに表示する一方で、遠隔スクリーン１１が、Ｔ＋Ｒ＋Ｄに等しい時刻にローカルユーザの画像Ｉ１を遠隔ユーザに表示し、ただし、Ｄは、２つのサイト間の通信遅れである。
【００２５】
遅延Ｒは、そのように遅延されたローカルユーザの画像Ｉ１が、遠隔ユーザのローカルで遅延された画像と同時にスクリーン７上で表示されるように選択される。つまり、遅延Ｒは、スクリーン７上に表示される時刻がＴ＋Ｒに等しい画像Ｉ１と、時刻がＴ＋Ｄに等しい画像Ｉ３が同期されるように、つまり、この場合、Ｔ＋Ｒ＝Ｔ＋Ｄであるように選択される。
【００２６】
同様に、遅延Ｒは、この場合、そのように遅延され、スクリーン１１上でＴ＋Ｄ＋Ｒに等しい時刻に表示されるローカルユーザの画像Ｉ１が、Ｔ＋２Ｄに等しい時刻にスクリーン１１上で表示される遠隔ユーザの画像と同期されるように、つまり、この場合、Ｔ＋Ｒ＋Ｄ＝Ｔ＋Ｄ＋Ｄであるように選択される。
【００２７】
図３を参照すると、通信装置が、サイト２において、画像センサ９から来るユーザの画像Ｉ１に選択された遅延Ｒ１を適用することができる遅延ユニット１４を備え、さらに通信ネットワーク１５を介してサイト２に接続されたサイト４において、画像センサ１３から来るユーザの画像Ｉ３に遅延Ｒ２を適用することができる遅延ユニット１６を備える。
【００２８】
遅延Ｒ１およびＲ２は、画像Ｉ１と画像Ｉ３がスクリーン７とスクリーン１１の上で同期しているように、つまり、Ｔ＋Ｒ１＝Ｔ＋Ｄ＝Ｔ＋Ｒ２であるように選択される。
【００２９】
図４を参照すると、テレビ会議通信方法の主なステップは、以下のとおりである。
【００３０】
ステップＳ１で、画像センサ９および１３を使用してビデオ獲得が実行される。
【００３１】
ステップＳ２で、遅延Ｒおよび／または遅延Ｒ１およびＲ２が推定される。
【００３２】
例えば、遅延は、画像がローカルサイトから遠隔サイトに送信された時点の間の時間的な差を測定することによって推定される。例えば、この測定は、ＲＴＰ（リアルタイムトランスポートプロトコル）パケット上で実行され、クロックは、ＮＴＰ（ネットワークタイムプロトコル）信号と同期される。
【００３３】
一変種において、遅延は、例えば、ＵＤＰ（ユーザデータグラムプロトコル）またはＩＣＭＰ（インターネット制御メッセージプロトコル）というプロトコルを使用して、プローブのパケットが着信した時点と送信された時点の間の時間的な差を測定することによって推定される。
【００３４】
実際には、遅延は、リアルタイムで、動的に、恒久的に、または所与のペースで計算される。
【００３５】
ステップＳ３で、そのように推定された遅延が、ステップＳ１中に獲得された画像に適用される。
【００３６】
実際には、遅延は、伝送遅れＤに対応する持続時間にわたるフルスクリーン向けのパケットをメモリの中に格納することによって適用される。
【００３７】
一変種において、遅延は、画像を復号する装置に送信されるべきパケットの時間ラベルを変更することによって適用される。
【００３８】
実際には、画像は、伝送品質（ビットレート、誤り率など）をさらに考慮に入れて、ローカルで表示され、このことが、自身の画像を、その画像が遠隔で表示されるときに、同時であるだけでなく、同一の品質で、ローカルで得ることを可能にする。
【００３９】
ステップＳ４で、スクリーン７上、およびスクリーン１１上で画像を表示するステップが実行される。
【００４０】
例えば、テレビ会議の品質をさらに向上させるために、装置は、それぞれのスクリーン７および１１の上で、そのように遅延されたユーザの画像を、遅延のないユーザの画像と重ね合わせることができ、このことが、ユーザが、遅延のあるユーザの画像と遅延のないユーザの画像の間の不一致に応じてユーザの挙動を適応させることを可能にする、重ね合わせユニットをさらに備える。
【００４１】
さらに別の実施形態によれば、装置は、サウンドの伝送中に存在するサウンドエコーおよび／またはローカルユーザと遠隔ユーザの間の伝送遅れを、視覚的表現または振動表現に変換することができる処理ユニットをさらに備える。
【００４２】
図５を参照すると、遅延ユニット１８が、２つのサイトの間の往復伝送遅れに応じて値が計算される、この場合は、Ｒ＝２Ｄである、遅延Ｒを適用する。
【００４３】
このため、スクリーン７上に示される画像Ｉ１と画像Ｉ３は、同期しており、Ｔ＋２Ｄに等しい時刻に表示される。同様に、スクリーン１１上に示される画像Ｉ１と画像Ｉ３も、同期しており、Ｔ＋２Ｄに等しい時刻に表示される。
【図１】
0005295383.tif 000002
【図２】
0005295383.tif 000003
【図３】
0005295383.tif 000004
【図４】
0005295383.tif 000005
【図５】
0005295383.tif 000006