(57)【要約】【課題】テレビ会議システムにおいて、他拠点の参加者が自拠点のカメラの映像をあまり必要としていない時に、プリセット位置の更新のためのカメラ制御を自動的に行えるようにする。【解決手段】他拠点で表示されている自拠点カメラ１０１の表示状態を端末装置１０２内の制御部１０９で検出し、自拠点カメラ１０１で撮影された映像の表示サイズまたは表示面積の割合が一定の大きさ以下になった場合に、自拠点カメラ１０１の映像があまり必要とされていないと判定して自拠点のカメラ１０１の制御を一時的に制限すると同時に、プリセット位置の更新などの自拠点カメラ制御を必要とするアクションの実行を開始する。【選択図】図６
2012029174.tif 000002
【特許請求の範囲】
【請求項１】
ネットワークを介して接続された自拠点と他拠点との間でテレビ会議を行うテレビ会議システムにおいて用いられる会議端末装置であって、
前記他拠点の表示装置で表示されている自拠点カメラの映像の表示状態を取得する表示状態取得手段と、
前記表示状態取得手段により取得された自拠点カメラの映像の必要度を判定するカメラ必要度判定手段と、
前記カメラ必要度判定手段により、前記自拠点カメラが撮影している映像の必要度合いが低いと判定された場合に、前記自拠点カメラの通常の撮影動作を一時的に制限して、プリセット位置の更新を含むカメラ制御を行う制御手段とを有することを特徴とする会議端末装置。
【請求項２】
前記表示状態取得手段は、前記自拠点カメラが撮影している人物の映像の表示状態変化を取得することを特徴とする請求項１に記載の会議端末装置。
【請求項３】
前記カメラ必要度判定手段は、あらかじめ設定された所定の表示条件を満たすどうかの判定を行うことを特徴とする請求項１に記載の会議端末装置。
【請求項４】
前記制御手段は、前記表示状態取得手段により前記自拠点カメラが撮影している人物の映像の表示状態変化を取得した場合に、前記カメラ必要度判定手段により前記所定の表示条件を満たすと判定された場合には、自拠点のカメラの制御を占有するとともに、あらかじめ定められたアクションを実行することを特徴とする請求項３に記載の会議端末装置。
【請求項５】
前記表示状態とは表示サイズまたは表示割合、またはその両方の組み合わせであることを特徴とする請求項１〜４の何れか１項に記載の会議端末装置。
【請求項６】
前記あらかじめ定められたアクションとは、カメラのパン、チルト、ズーム制御による、会議参加者に対応付けられたプリセット位置の更新であることを特徴とする請求項４に記載の会議端末装置。
【請求項７】
請求項１〜６の何れか１項に記載の会議端末装置を用いたことを特徴とするテレビ会議システム。
【請求項８】
ネットワークを介して接続された自拠点と他拠点との間でテレビ会議を行うテレビ会議システムにおいて用いられる会議端末装置の制御方法であって、
前記他拠点の表示装置で表示されている自拠点カメラの映像の表示状態を取得する表示状態取得工程と、
前記表示状態取得工程で取得された自拠点カメラの映像の必要度を判定するカメラ必要度判定工程と、
前記カメラ必要度判定工程において、前記自拠点カメラが撮影している映像の必要度合いが低いと判定された場合に、前記自拠点カメラの通常の撮影動作を一時的に制限して、プリセット位置の更新を含むカメラ制御を行う制御工程とを有することを特徴とする会議端末装置の制御方法。
【請求項９】
ネットワークを介して接続された自拠点と他拠点との間でテレビ会議を行うテレビ会議システムにおいて用いられる会議端末装置の制御方法の各工程をコンピュータに実行させるプログラムであって、
前記他拠点の表示装置で表示されている自拠点カメラの映像の表示状態を取得する表示状態取得工程と、
前記表示状態取得工程で取得された自拠点カメラの映像の必要度を判定するカメラ必要度判定工程と、
前記カメラ必要度判定工程において、前記自拠点カメラが撮影している映像の必要度合いが低いと判定された場合に、前記自拠点カメラの通常の撮影動作を一時的に制限して、プリセット位置の更新を含むカメラ制御を行う制御工程とをコンピュータに実行させることを特徴とするプログラム。
【請求項１０】
請求項９に記載のプログラムを記憶したことを特徴とするコンピュータ読み取り可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は会議端末装置及びテレビ会議システムに関し、特に、ネットワークを介して、テレビ会議に使用する端末装置に接続されたカメラを用いて各拠点間の通信を行うテレビ会議システムに関する。
【背景技術】
【０００２】
近年、離れた複数拠点で参加者がコミュニケーションを図るために、ネットワークを介して映像データや音声データを送受信することが可能なテレビ会議システムを利用する機会が多くなってきた。テレビ会議システムにおいては、離れた拠点のそれぞれの会議室にカメラを設置し、リアルタイムで参加者をカメラで撮像しながら、一同に会した場合と同様に会議を進めることが可能である。
【０００３】
通常、テレビ会議システムで使用するカメラは会議室全体を見渡せる位置に置かれ、遠隔操作によってパンチルト制御させることにより、撮像方向を動かすことができる。会議進行の途中である拠点の参加者がネットワーク経由で自拠点の端末装置を介して他拠点のカメラ制御を行い、発言者の方向にカメラを向けることや、他拠点から配信される映像の表示サイズを変更することなどが可能である。
【０００４】
カメラには、撮像方向をあらかじめメモリに記憶させておくことが可能なプリセット機能を有しているものがある。例えば、ある会議参加者の座席位置の方向を会議参加者個人に対応付けてプリセット登録しておけば、カメラを向けたい参加者の名前を指示するだけでパン・チルト・ズーム制御を自動的に行い、向けたい参加者の方向にカメラを向けることができる。さらに、特許文献１のようなシステムを用いれば、会議開始前に会議参加者全員の位置を確実に検出し、参加者の座席位置の遠近、および角度に関わらず適切な画像を自動的に得ることが可能である。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平０８−２０５１１４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
このようなテレビ会議システムでは、（イ）会議の途中で参加者が増える、（ロ）会議の途中で参加者が退席する、（ハ）参加者の座席位置が変わる、等の変化が発生した場合には、会議開始前に登録したプリセット位置情報を更新する必要が生じる。
【０００７】
プリセット位置情報を更新する場合、カメラがズーム可能であれば、最も広角にズームを制御することでなるべく広い範囲を撮影できるようにして、顔認識などによって参加者の位置を自動的に特定する。そして、プリセット位置をそれに合わせて登録しなおすといった方法で対処することができる。
【０００８】
しかし、その場合でも、画角が参加者全員を撮影するのに十分でない場合はパンチルト制御が必要になり、一部の参加者が写らなくなるという問題がある。また、最も広角に制御した場合は、映像中の参加者が小さくなってしまうため、相手拠点の参加者が自分の発言に対する特定の参加者の表情を確認したいといった場合には問題がある。
【０００９】
こうした問題が生じないようにするには、他拠点の参加者が自拠点のカメラの映像をあまり必要としていない時に、前述したようなプリセット位置の更新のためのカメラ制御を行えるようにする必要がある。しかし、こうした判断を参加者の誰かに行わせるのは手間がかかる問題点があった。
本発明は前述の問題点に鑑み、他拠点の参加者が自拠点のカメラの映像をあまり必要としていない時に、プリセット位置の更新のためのカメラ制御を自動的に行えるようにすることを目的とする。
【課題を解決するための手段】
【００１０】
本発明の会議端末装置は、ネットワークを介して接続された自拠点と他拠点との間でテレビ会議を行うテレビ会議システムにおいて用いられる会議端末装置であって、前記他拠点の表示装置で表示されている自拠点カメラの映像の表示状態を取得する表示状態取得手段と、前記表示状態取得手段により取得された自拠点カメラの映像の必要度を判定するカメラ必要度判定手段と、前記カメラ必要度判定手段により、前記自拠点カメラが撮影している映像の必要度合いが低いと判定された場合に、前記自拠点カメラの通常の撮影動作を一時的に制限して、プリセット位置の更新を含むカメラ制御を行う制御手段とを有することを特徴とする。
【発明の効果】
【００１１】
本発明によれば、参加者の増減や座席移動があった場合でも、各拠点の参加者のプリセット位置を更新するなどのアクションを自動的に実行することができる。これによって、人手による煩雑な操作が不要となり、参加者全員がテレビ会議に集中することができるようになる。
【図面の簡単な説明】
【００１２】
【図１】テレビ会議システムの構成例を示すブロック図である。
【図２】テレビ会議システムを利用している状況の一例を示す図である。
【図３】各拠点の記憶部に記憶されている表示状態テーブルの一例を示す図である。
【図４】表示装置に映されている画面の一例を示す図である。
【図５】各拠点の端末装置内の制御部で実行されるプロセスを示す図である。
【図６】自拠点からのプリセット更新要求プロセスを表すフローチャートである。
【図７】自拠点カメラの映像の表示状態更新プロセスを表すフローチャートである。
【図８】他拠点カメラの映像の更新要求プロセスを表すフローチャートである。
【発明を実施するための形態】
【００１３】
発明を実施するための最良の形態について図面を参照して詳細に説明する。
図２は、会議システムを利用している場面の一例を示す図である。図２のように、ＷＡＮ２１３と各拠点のＨＵＢ２０１、２０２、２０３を介して各拠点のカメラ２０４、２０５、２０６と端末装置２０７、２０８、２０９、表示装置２１０、２１１、２１２をそれぞれ接続する。以上により、各拠点に設置されたカメラ２０４〜２０６の映像を共有することができるテレビ会議システムが構築されている。
【００１４】
表示装置２１０、２１１、２１２は、端末装置２０７、２０８、２０９内の図示しないネットワーク通信部、映像出力部を介してそれぞれ接続される。カメラ２０４、２０５、２０６は、各拠点の会議参加者を撮像するためのカメラで、これらのカメラで撮像した映像を拠点間においてリアルタイムで送受信することで、離れた拠点の会議参加者が発言している様子や表情を確認しながら会議を進めることができる。
【００１５】
図１は、本発明のテレビ会議システムの一例を示すブロック図である。以下、本実施形態のテレビ会議システムの構成要素について説明する。
カメラ１０１は、各拠点における会議参加者を撮像するための人物撮像カメラであり、１０２は各拠点のカメラを制御するための会議端末装置である（以下、単に端末装置とする）。カメラ１０１で撮影した映像は、ＷＡＮ１０３、ＨＵＢ１０４を通じて、各拠点の端末装置に配信される。また、端末装置１０２はＷＡＮ１０３、ＨＵＢ１０４を通じて、他拠点のカメラを制御することが可能である。
【００１６】
自拠点のカメラ１０１、端末装置１０２、表示装置１０５以外に、他拠点のカメラ１１３、端末装置１１４、表示装置１１５がＨＵＢ１１２からＷＡＮ１０３に接続され、会議を行っている各拠点に設置されているものとする。端末装置１１４内の構成は、端末装置１０２と同様である。他拠点カメラ１１３の映像は、ＨＵＢ１１２、ＷＡＮ１０３、ＨＵＢ１０４を通じて端末装置１０２内のネットワーク通信部１０６に入力され、映像出力部１０７から表示装置１０５に出力される。
【００１７】
端末装置１０２内のネットワーク通信部１０６、映像出力部１０７、記憶部１０８、制御部１０９、操作入力部１１０がバス１１１に接続されている。制御部１０９は、端末装置１０２の制御を行う部分である。制御部１０９には、他拠点カメラから配信されている映像の表示状態を取得する表示状態取得部１１６と、他拠点の表示装置における自拠点カメラ１０１から配信している映像の表示状態を保持する表示状態保持部１１７を有する。
【００１８】
制御部１０９は表示状態取得部１１６により、他拠点カメラから受信した映像の、自拠点の表示装置１０５における表示状態を取得する。表示状態とは、表示サイズまたは表示割合、またはその両方の組み合わせで決まる。記憶部１０８は、カメラ１０１で撮影した映像が他拠点の表示装置でどのような表示状態で参照されているかを示す表示状態テーブルを保持し、リアルタイムで更新されるものとする。また、表示状態取得部１１６は、自拠点カメラ１０１が撮影している人物の映像の表示状態変化を取得する。
【００１９】
図３は、記憶部１０８に保持されている表示状態テーブルの一例を示す図である。図３の表示サイズとは、各拠点の表示装置において自拠点のカメラから配信している映像が表示されている表示サイズを表す。また、表示面積とは、他拠点の表示装置において自拠点カメラから配信している映像が最前面に表示されている表示面積の割合を表している。
【００２０】
例えば、図４で他拠点から受信している映像４０１の上に資料映像４０２が表示されていて、他拠点のカメラから受信している映像４０１の上に資料映像４０２が重なっている部分を４０３とする。映像４０１の面積から４０３の面積を引いた残りの面積を映像４０１の面積で割って１００倍した値を表示面積とする。記憶部１０８には参加者のプリセット位置情報や参加者情報、会議で使用する資料データも格納されているものとする。操作入力部１１０では、自拠点や他拠点のカメラ操作、記憶部１０８に格納されている資料ファイルの表示などの操作を行う。
【００２１】
図５は、制御部１０９内で動作しているプロセスを示している。５０１は、他拠点カメラ１１３から撮影した映像を自拠点の端末装置１０２内のネットワーク通信部１０６を介して映像出力部１０７から表示装置１０５に出力する映像取得プロセスである。５０２は、自拠点の端末装置１０２から他拠点の端末装置に向けて、自拠点カメラ１０１のプリセット更新を要求する自拠点からのプリセット更新要求プロセスである。
【００２２】
各拠点の端末装置内の制御部は、表示状態取得部と表示状態保持部を有している。本実施形態においては、ある拠点の表示装置において、自拠点カメラ１０１が配信している映像の表示状態が変更になったとき、以下のように動作する。すなわち、自拠点の端末装置１０２内の制御部１０９が表示状態取得部１１６により記憶部１０８に格納されている表示状態テーブルから自拠点カメラ１０１から配信している映像の表示状態を読み出す。
【００２３】
自拠点カメラ１０１が配信している映像において、他拠点全てにおける表示状態が条件を満たしているときは、自拠点カメラ１０１の必要度が低いと判定するカメラ必要度判定処理を行う。この判定は、あらかじめ設定された所定の表示条件を満たすどうかに従って行う。カメラ必要度判定処理の結果、必要度合いが低いと判定された場合、自拠点の端末装置１０２の制御部１０９は、自拠点カメラ１０１の通常の撮影動作を一時的に制限して、自拠点カメラ１０１の制御を占有し、プリセット更新を含むカメラ制御を行う。
【００２４】
５０３は、自拠点カメラの映像の表示状態を更新するプロセスである。他拠点のあるカメラから配信された映像の表示状態を自拠点の端末装置１０２内の操作入力部１１０より変更したときに、自拠点の表示装置１０５における表示状態を端末装置１０２内の制御部１０９が表示状態取得部１１６により前記表示状態を取得する。
【００２５】
表示状態取得部１１６は、端末装置１０２内の記憶部１０８に表示状態の変更内容を格納し、記憶部１０８に格納された前記表示状態の変更に基づいて表示状態を変更したカメラが設置されている拠点の端末装置内の制御部に表示状態更新要求を送信する。
【００２６】
５０４は、他拠点カメラから配信された映像を受信し、自拠点の表示装置１０５で表示する際の表示状態の更新要求プロセスである。自拠点カメラから配信している映像の表示状態を他拠点の端末装置内の操作入力部より変更したときに、自拠点カメラの表示状態を変更した拠点から前記表示状態の更新要求を受信する。
【００２７】
その際に、表示状態の更新内容も同時に受信する。前記表示状態の更新要求を受信したときに、自拠点の端末装置１０２内の制御部１０９は、表示状態保持部１１７より表示状態の更新内容を記憶部１０８に保持している表示状態テーブルを更新する。５０１、５０２、５０３、５０４の各プロセスは並列に動作し、テレビ会議開始と同時に開始され、テレビ会議終了とともに各プロセスを終了させる。５０２、５０３、５０４の各プロセスの動作を図６、図７、図８のフローチャートを用いて後述する。
【００２８】
図６は、自拠点の端末装置１０２から他拠点の端末装置に向けて、自拠点カメラ１０１のプリセット更新を要求する、自拠点からのプリセット更新要求プロセスを説明するフローチャートである。
まず、自拠点カメラ１０１から配信している映像が他拠点でどのような表示状態で表示されているかを示す表示状態テーブルを記憶部１０８から読み出す（Ｓ６０１）。
【００２９】
次に、Ｓ６０２において、自拠点以外の全ての拠点で表示サイズが所定のサイズ以下、あるいは、表示面積が一定割合以下を満たしているかを判定する。Ｓ６０２の判定の結果、条件を満たしている場合は、自拠点カメラ１０１の制御権の状態を取得し（Ｓ６０３）、自拠点の端末装置１０２内の制御部１０９が自拠点カメラ１０１のカメラ制御を占有する。Ｓ６０２の判定において条件を満たしていない場合はＳ６０１に戻る。
【００３０】
Ｓ６０３で制御権を取得した後は、自拠点の制御部１０９が自拠点カメラ１０１の制御権を取得できているかを判定する（Ｓ６０４）。自拠点カメラ１０１は、制御権を取得できていれば自拠点カメラ１０１の制御権を占有し、プリセット更新実行を開始するので、制御部１０９は自拠点カメラ１０１のプリセット更新の実行状態を取得する（Ｓ６０５）。
【００３１】
次に、Ｓ６０６において、プリセット更新が終了しているかを判定する。プリセット更新を終了している場合は、Ｓ６１０に進んで会議を終了させる操作があるかを判定する。会議を終了させる操作がない場合は、６０１に戻る。
【００３２】
一方、Ｓ６０６でプリセット更新が終了していない場合は、Ｓ６０７に進み、他拠点における自拠点カメラの映像の表示状態を記憶部１０８から読み出す。次に、Ｓ６０８において、自拠点以外の全ての拠点で表示サイズが所定のサイズ以下、あるいは、表示面積が一定割合以下を満たしているかを判定する。Ｓ６０８の条件を満たしている場合は、プリセット更新を終了するまで実行する。Ｓ６０８の条件を満たしていない場合は、自拠点カメラ１０１にプリセット更新の終了要求を送信する（Ｓ６０９）。
【００３３】
Ｓ６０４の判定で自拠点カメラ１０１の制御権を取得できていない場合は、Ｓ６１１に進み、自拠点カメラ１０１の制御権を要求する。次に、Ｓ６１２に進み、制御権を取得できているかを判定し、制御権を取得できない場合は、制御権を取得できるまで自拠点カメラ１０１の制御権を要求し続ける。
【００３４】
Ｓ６１２で制御権を取得できた場合は、自拠点カメラ１０１に制御開始を送信し（Ｓ６１３）、Ｓ６０５に処理を進める。Ｓ６１０で会議を終了させる操作があった場合は、本プロセスも終了する。
【００３５】
図７は、端末装置１０２内の制御部１０９が他拠点カメラの映像の表示状態を更新するプロセスを表すフローチャートである。
処理が開始されると、最初のＳ７０１において、他拠点カメラの映像の表示状態を変更する端末装置１０２内の操作入力部１１０からの操作入力を待機する。操作入力があるとＳ７０２に進み、表示状態の変更操作の有無を検出する。変更がない場合はＳ７０１に戻り、変更がある場合はＳ７０３に進み、他拠点カメラの映像の表示状態を変更する端末装置１０２内の操作入力部１１０からの操作入力に合わせて変更し、変更した表示状態を検出する。端末装置１０２内の制御部１０９は、表示状態取得部１１６により記憶部１０８に格納されている表示状態を取得し、表示状態を更新する。
【００３６】
次に、Ｓ７０４に進み、Ｓ７０３で表示状態を変更した映像を配信している端末装置に表示状態テーブルの更新要求を送信する。その後、Ｓ７０５において、会議を終了させる操作の有無を判断する。会議を終了させる操作がない場合はＳ７０１に戻り、会議を終了させる操作がある場合は、本プロセスも終了する。
【００３７】
図８は、他拠点カメラから配信された映像を受信し、自拠点の表示装置１０５で表示する際に、他拠点カメラから受信した映像の表示状態を変更したことによる表示状態の更新要求プロセスを表すフローチャートである。
【００３８】
処理が開始されると、Ｓ８０１において、他拠点から表示状態に係る通信の有無を判断する。通信が有った場合にはＳ８０２に進む。Ｓ８０２においては、他拠点のカメラから配信された映像の表示状態が自拠点の端末装置１０２内の操作入力部１１０で変更されることにより、他拠点の端末装置１１４内の図示しない記憶部に記憶されている表示状態テーブルの更新要求の有無を検出する。
【００３９】
更新要求がある場合は、Ｓ８０３に進み、他拠点の端末装置１１４内の図示しない制御部は図示しない表示状態保持部により、端末装置１１４内の図示しない記憶部に記憶されている表示状態テーブルを更新する。更新した後は、Ｓ８０４に進む。なお、更新要求が無い場合にはＳ８０１に戻る。
Ｓ８０４においては、会議を終了させる操作の有無を判断する。操作がない場合はＳ８０１に戻り、会議を終了させる操作がある場合は、本プロセスも終了する。
【００４０】
本実施形態のテレビ会議システムは、会議参加者に対応付けられたプリセット位置の更新を行う。これにより、会議参加者の増減や座席移動があった場合、あらかじめ定められたアクションを自動的に実行できるようにした。あらかじめ定められたアクションとしては、カメラのパン、チルト、ズーム制御などを含む。これにより、テレビ会議参加者全員が会議に集中することが可能となり、人手による煩雑な操作を不要としたいときに好適である。
【００４１】
（その他の実施形態）
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（コンピュータプログラム）を、ネットワーク又は各種のコンピュータ読み取り可能な記憶媒体を介してシステム或いは装置に供給する。そして、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【符号の説明】
【００４２】
１０１  カメラ、１０２  端末装置、１０３  ＷＡＮ、１０４  ＨＵＢ、１０５  表示装置、１０６  ネットワーク通信部、１０７  映像入力部、１０８  記憶部、１０９  制御部、１１０  操作入力部、１１１  バス、１１２  ＨＵＢ、１１３  カメラ、１１４  端末装置、１１５  表示装置、１１６  表示状態取得部、１１７  表示状態保持部
【図１】
2012029174.tif 000003
【図２】
2012029174.tif 000004
【図３】
2012029174.tif 000005
【図４】
2012029174.tif 000006
【図５】
2012029174.tif 000007
【図６】
2012029174.tif 000008
【図７】
2012029174.tif 000009
【図８】
2012029174.tif 000010