(57)【特許請求の範囲】
【請求項１】
複数のテレビ会議端末装置と、
この複数のテレビ会議端末装置が伝送する画像信号から合成画像の信号を生成しこの複数のテレビ会議端末装置に伝送する多地点テレビ会議装置と、
前記合成画像の分割表示様式を示す合成モードを多地点テレビ会議装置に指示する操作装置と、
を備えた多地点テレビ会議システムにおいて、
前記多地点テレビ会議装置は、
第１の階層には前記合成モードを複数格納し、第２の階層にはこの各合成モードに連なるとともに合成モードの表示パターンをイベントにより変更する変更条件を格納する、合成画像作成データ−ベースと、
前記イベントを検出することにより前記合成画像作成データベースの第２の階層に格納された変更条件を選択するイベント検出手段と、
前記操作装置により選択された合成モードと前記イベント検出手段により選択された変更条件とに基づいて合成画像を生成する画像処理手段と、
を備えたことを特徴とする多地点テレビ会議システム
【請求項２】
複数のテレビ会議端末装置と、
この複数のテレビ会議端末装置が伝送する画像信号から合成画像の信号を生成しこの複数のテレビ会議端末装置に伝送する多地点テレビ会議装置と、
前記テレビ会議端末装置の数と前記合成画像の分割表示様式を示す合成モードとを前記多地点テレビ会議装置に指示する操作装置と、
を備えた多地点テレビ会議システムにおいて、
多地点テレビ会議装置は、
テレビ会議中に生じるイベントを検出するイベント検出手段と、
前記複数の合成モードを格納した第１の階層、この各合成モードに連なってこの合成モードの表示パターンをイベントにより変更する変更条件を格納する第２の階層、この各変更条件に連なって複数のテレビ会議端末装置の接続数を示す情報を格納した第３の階層及びこの接続数を示す情報に連なって合成画像の分割表示条件を示す分割画像作成情報を格納した第４の階層からなる合成画像作成データベースと、
前記合成モード、前記テレビ会議端末装置の数及び前記イベントに応じて合成画像作成データベースから前記分割画像作成情報を抽出する画像情報抽出手段と、
この画像情報抽出手段により抽出された分割画像作成情報に基づいて合成画像を生成する画像処理手段と、
を備えたことを特徴とする多地点テレビ会議システム
【請求項３】
操作装置は、
第１の階層に格納された合成モードを変更するとともに、この第１の階層の変更に伴って第２の階層に格納された変更条件、第３の階層に格納された接続数を示す情報及び第４の階層に格納された分割画像作成情報を変更するデータベース修正手段
を備えたことを特徴とする請求項２に記載の多地点テレビ会議システム。
【請求項４】
テレビ会議端末装置は、
第１の階層に格納された合成モードを変更するとともに、この第１の階層の変更に伴って第２の階層に格納された変更条件、第３の階層に格納された接続数を示す情報及び第４の階層に格納された分割画像作成情報を変更するデータベース修正手段
を備えたことを特徴とする請求項２に記載の多地点テレビ会議システム。
【請求項５】
複数のテレビ会議端末装置が伝送する画像信号から合成画像の信号を生成しこの複数のテレビ会議端末装置に伝送する多地点テレビ会議装置において、
前記多地点テレビ会議装置は、
第１の階層には前記合成画像の分割表示様式である合成モードを複数格納し、第２の階層にはこの各合成モードに連なるとともにこの合成モードの表示パターンをイベントにより変更する変更条件を格納する合成画像作成データ−ベースと、
この合成画像作成データベースの第１の階層に格納された複数の合成モードから合成モードを選択する操作手段と、
前記イベントを検出しこのイベントに基づいて前記合成画像作成データベースの第２の階層に格納された変更条件を選択するイベント検出手段と、
前記操作手段により選択された合成モードと前記イベント検出手段により選択された変更条件とに基づいて合成画像を生成する画像処理手段と、
を備えたことを特徴とする多地点テレビ会議装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、複数のテレビ会議端末を相互に接続し、多地点間で通信会議を行う多地点テレビ会議に関するものである。
【０００２】
【従来の技術】
図１２は従来の多地点テレビ会議システムを示すブロック図である。図１２において、１０１は多地点テレビ会議装置、１０２は多地点テレビ会議装置１０１に対して指示を与える操作装置、１０３は操作装置１０２と多地点テレビ会議装置１０１を接続する制御線、１１１〜１１４は各々テレビ会議端末装置、１２１〜１２４は各々テレビ会議端末装置１１１〜１１４と多地点間テレビ会議装置１０１を接続する回線である。
１３１〜１３４は多地点テレビ会議装置１０１に設けられて各々テレビ会議端末装置１１１〜１１４と呼制御を行う回線対応部、１４１〜１４４は多地点テレビ会議装置１０１に設けられて各々テレビ会議端末装置１１１〜１１４と送受信する映像、音声、データ等の各メディア信号を多重・分離する多重分離部、１５１〜１５４は多重分離部１４１〜１４４からの映像信号を復号化する映像復号化部、１６１〜１６４は各々復号化した映像信号を編集して出力する編集部、１６１ａ〜１６１ｄ、１６２ａ〜１６２ｄ、１６３ａ〜１６３ｄ、１６４ａ〜１６４ｄは個別処理部であり、各々編集部１６１〜１６４に設けられてテレビ会議端末装置１１１〜１１４毎の映像信号に縮小、切り出し、枠付加等々の編集処理を行う。１７１〜１７４は各々映像合成部であり、編集部部１６１〜１６４からの編集された映像を合成して合成画像を出力する。１８１〜１８４は映像符号化部であり、映像合成部１７１〜１７４からの合成画像を符号化する。
【０００３】
１９１は多地点テレビ会議装置１０１を制御するＣＰＵ、１９２はメモリ、１９３は各テレビ会議端末装置１１１〜１１４からの画像の復号化及び各テレビ会議端末装置１１１〜１１４へ分配する合成画像の作成及び符号化を行う画像処理部であり、上述の符号１５１〜１５４、１６１〜１６４、１７１〜１７４、１８１〜１８４を付した構成を含む。
１９４は各テレビ会議端末装置１１１〜１１４からの音声を処理する音声処理部、１９５は各テレビ会議端末装置１１１〜１１４からのデータを処理するデータ処理部である。なお、多地点テレビ会議装置１０１は上述の符号１３１〜１３４、１４１〜１４４、１９１〜１９５を付した構成を含む。１９６は多地点テレビ会議システムであり、上述の符号１０１〜１０３、１１１〜１１４、１２１〜１２４を付した構成を含む。
なお、この図１１においては、簡単のため、回線１２１〜１２４の回線構成においてテレビ会議端末装置１１１〜１１４との間にある伝送路および交換機等は省略してある。
【０００４】
次に動作を図により説明する。テレビ会議端末装置１１１〜１１４からの信号は、各々回線１２１〜１２４を介して多地点テレビ会議装置１０１の回線対応部１３１〜１３４に入力され、多重分離分離部１４１〜１４４により、映像、音声、データ等の各メディア信号に分離される。
分離された各メディア信号のうち映像信号は画像処理部１９３に、音声信号は音声処理部１９４に、データ信号はデータ処理部１９５に入力され、各々の処理部で必要な信号処理が行われる。
【０００５】
ここで、画像処理部１９３の動作を詳細に説明する。
映像復号化部１５１〜１５４は多重分離部１４１〜１４４からの映像信号を復号化し、ＣＰＵ１９１の指示により各々編集部１６１〜１６４の個別処理部１６１ａ〜１６１ｄ、個別処理部１６２ａ〜１６２ｄ、個別処理部１６３ａ〜１６３ｄ、個別処理部１６４ａ〜１６４ｄに出力する。
個別処理部１６１ａ〜１６１ｄ、個別処理部１６２ａ〜１６２ｄ、個別処理部１６３ａ〜１６３ｄ、個別処理部１６４ａ〜１６４ｄは各々映像の編集作業を行い、各々映像合成部１７１〜１７４に編集した映像信号を出力する。映像合成部１７１〜１７４は各々編集された映像信号を合成して合成画像信号を映像符号化部１８１〜１８４に出力する。
【０００６】
なお、ＣＰＵ１９１は所定の情報を入力して合成画像の表示パターンの変更を指示する。例えば、会議開催当初、会議に参加する端末がテレビ会議端末装置１１１〜１１３であったのが会議途中にテレビ会議端末装置１１４が会議に参加した場合に、ＣＰＵ１９１は参加端末数変更の情報を受け、メモリ１９２に記憶した合成画像の表示パターンの変更プログラムにより合成画像を３分割画面から４分割画面に変更するように個別処理部１６１ａ〜１６１ｄ、個別処理部１６２ａ〜１６２ｄ、個別処理部１６３ａ〜１６３ｄ、個別処理部１６４ａ〜１６４ｄに指示する。
映像符号化部１８１〜１８４は合成画像信号を符号化して多重分離部１４１〜１４４に出力する。
多重分離部１４１〜１４４は画像処理部１９３、音声処理部１９４、データ処理部１９５からのメディア信号を多重化して回線対応部１３１〜１３４及び回線１２１〜１２４を介して各テレビ会議端末に分配する。
【０００７】
【発明が解決しようとする課題】
従来の多地点テレビ会議システム１９６は以上のように構成されているので、合成画像の表示パターンを変更する場合、ＣＰＵ１９１は合成画像を変更するきっかけとなる情報を入力し（イベントの発生を検出）し、メモリ１９２に記憶している合成画像の表示パターンの変更プログラムにより合成画像の表示パターンの変更を指示する。ここで、表示パターンを変更するために画像をどのように加工処理するかを示す情報は変更プログラム上に組み込まれてメモリ１９２に記憶されているので、その情報量をそれほど多くできず合成画像の表示パターンが限られていた。
また、その情報を変更プログラム上に組み込んでメモリ１９２に記憶しているので、客先の要求等により、今までにないイベントに応じて今までと異なる表示パターンの合成画像が必要となる場合は、ソフトウェア技術者が逐一新たに必要な合成画像の表示パターンを変更する変更プログラムを作成しなければならなかった。また、通常は作成した変更プログラムの評価等も行わなければならず時間と費用がかかり、容易に客先の要求等に対応できなかった。
【０００８】
この発明は以上のような問題点を解決するためになされたもので、この発明の目的は、合成画像を変更するきっかけとなるイベントに対応する合成画像を容易に生成表示することのできる多地点テレビ会議システムを提供すること、また、複数の表示パターンの合成画像を生成できる多地点テレビ会議システムを提供することである。
【０００９】
【課題を解決するための手段】
この発明の多地点テレビ会議システムは、複数のテレビ会議端末装置と、複数のテレビ会議端末装置が伝送する画像信号から合成画像の信号を生成し複数のテレビ会議端末装置に伝送する多地点テレビ会議装置と、合成画像の分割表示様式を示す合成モードを多地点テレビ会議装置に指示する操作装置と、を備えた多地点テレビ会議システムにおいて、多地点テレビ会議装置は、第１の階層には合成モードを複数格納し、第２の階層には各合成モードに連なるとともに合成モードの表示パターンをイベントにより変更する変更条件を格納する、合成画像作成データ−ベースと、イベントを検出することにより合成画像作成データベースの第２の階層に格納された変更条件を選択するイベント検出手段と、操作装置により選択された合成モードとイベント検出手段により選択された変更条件とに基づいて合成画像を生成する画像処理手段と、を備えたものである。
【００１４】
【発明の実施の形態】
実施の形態１．
この発明の多地点テレビ会議システムの一実施の形態について説明する。図１は実施の形態１による多地点テレビ会議システムを示すブロック図、図２は記憶装置に記憶した合成画像作成データベースを示す説明図である。
図１において、２０１は多地点テレビ会議装置、２０２は多地点テレビ会議装置２０１に指示を与える操作装置、２０２ａは操作装置２０２に設けられて合成画像作成データベースを修正するデータベース修正部、２１１〜２１４はテレビ会議端末装置、２０３は操作装置２０２と多地点テレビ会議装置２０１を接続する制御線、２２１〜２２４は各々テレビ会議端末装置２１１〜２１４と多地点テレビ会議装置２０１を接続する回線である。
【００１５】
２３１〜２３４は多地点テレビ会議装置２０１に設けられて各々テレビ会議端末装置２１１〜２１４と呼制御を行う回線対応部、２４１〜２４４は多地点テレビ会議装置２０１に設けられて各々テレビ会議端末装置２１１〜２１４と送受信する映像、音声、データ等の各メディア信号を多重・分離する多重分離部、２５１〜２５４は多重分離部２４１〜２４４からの映像信号を復号化する映像復号化部、２６１〜２６４は映像復号化部２５１〜２５４からの復号化した映像信号を編集して出力する編集部、２６１ａ〜２６１ｄ、２６２ａ〜２６２ｄ、２６３ａ〜２６３ｄ、２６４ａ〜２６４ｄは個別処理部であり、各々編集部２６１〜２６４に設けられてテレビ会議端末装置２１１〜２１４毎の映像信号にの縮小、切り出し、枠付加等々の編集を行う。２７１〜２７４は各々映像合成部であり、編集部２６１〜２６４からの編集された映像を合成して合成画像を出力する。２８１〜２８４は映像符号化部であり、映像合成部２７１〜２７４からの合成画像を符号化する。
２９１は多地点テレビ会議装置２０１を制御するＣＰＵ、２９２はメモリ、２９３は各テレビ会議端末装置２１１〜２１４からの画像の復号化及び各テレビ会議端末装置２１１〜２１４へ分配する合成画像の作成及び符号化を行う画像処理部であり、上述の符号２５１〜２５４、２６１〜２６４、２７１〜２７４、２８１〜２８４を付した構成を含む。
【００１６】
２９４は各テレビ会議端末装置２１１〜２１４からの音声を処理する音声処理部、２９５は各テレビ会議端末装置２１１〜２１４からのデータを処理するデータ処理部、２９６は合成画像作成データベースを記憶した記憶装置である。なお、多地点テレビ会議装置２０１は上述の符号２３１〜２３４、２４１〜２４４、２９１〜２９６を付した構成を含む。２９７は多地点テレビ会議システムであり、上述の符号２０１〜２０３、２１１〜２１４、２２１〜２２４を付した構成を含む。
なお、この図１においては、簡単のため、回線２２１〜２２４の回線構成において多地点テレビ会議装置２０１とテレビ会議端末装置２１１〜２１４各々との間にある伝送路および交換機等は省略してある。
【００１７】
図２に示す合成画像作成データベース３０７は、テレビ会議中に生じるイベント（合成画像を変更するきっかけとなるイベントを示す。以下、単にイベントと称す。）に対応した合成画像を作成するためのデータベースであり、イベントにより変更する変更条件及び合成画像を作成するための画像処理情報である複数の分割画像作成情報を階層化して格納して形成されている。以下その階層構造を説明する。
図２において、３０１は合成画像の分割表示様式を示す合成モード１〜Ｉを格納した第１の階層である。なお、分割表示様式とは、例えば、イベントに応じて合成画像中の特定の分割画像を強調表示したり、イベントに応じて合成画像中の分割画像の配列順序を変えて表示したりする分割画像の表示様式を言う。
３０２は画面変更イベント１〜Ｊを格納した第２の階層であり、第１の階層３０１の合成モード１〜Ｉの各々に連なって少しつづ異なる画面変更イベントが設けられている。これら画面変更イベント１〜Ｊは、イベントにより合成画像の表示パターンを変更するための変更条件を示す。
３０３は参加地点数１〜Ｋを格納した第３の階層であり、第２の階層３０２の画面変更イベント１〜Ｊの各々に連なって参加地点数１〜Ｋを設けている。なお、参加地点数１〜Ｋは画面変更イベント発生時に会議に参加しているテレビ会議端末装置２１１〜２１４の数と照合するためのものである。これら参加地点数１〜Ｋは、テレビ会議に参加している参加地点数により合成画像の表示パターンを変更するための変更条件を示す。
【００１８】
３０４は分割数と分割画像１〜Ｌとを格納した第４の階層であり、第３の階層３０３の参加地点数１〜Ｋの各々に連なって分割数と分割画像１〜Ｌとを設けている。この第４の階層３０４の分割数は合成画像上での分割画像数を指定するものであり、分割画像１〜Ｌはテレビ会議端末装置２１１〜２１４の各々から得られる映像信号を割り当てるためのものである。これら分割数、分割画像１〜Ｌは合成画像上の分割画像数により合成画像の表示パターンを変更するための変更条件を示す。
なお、分割数が第３の階層３０３の参加地点数未満の場合は、分割画像１〜Ｌに割り当てられた映像信号が分割画像作成の対象なる。したがって、自身の画像が合成画像上にないテレビ会議端末装置が発生する。また、分割数が参加端末数よりも多い場合は、その余分な分割画像にダミー映像が挿入される。但し、テレビ会議端末装置２１１〜２１４の各々から１つの映像信号でなく複数の映像信号が伝送された場合はダミー映像でなく、分割画像１〜Ｌに割り当てられた映像信号が分割画像作成の対象となる。
３０５は画面変更イベント発生時のテレビ会議端末装置２１１〜２１４の状態を識別するための状態種別１〜Ｍを格納した第５の階層であり、第４の階層３０４の分割画像１〜Ｌの各々に連なって状態種別１〜Ｍを設けている。これら状態種別１〜Ｍは画面変更イベント発生時のテレビ会議端末装置２１１〜２１４の状態により合成画像の表示パターンを変更するための変更条件を示す。
【００１９】
３０６は合成画面を作成するための画像処理情報である分割画像作成情報を格納した第６の階層であり、第５の階層３０５の状態種別１〜Ｍの各々に連なって分割画像作成情報を格納する。分割画像作成情報は、例えば、図２に示すように合成画像上での分割画像の「表示位置」（この表示位置は分割画像の左上角の合成画像上での座標で表わされる。）、テレビ会議端末装置からの映像信号による画像の「縮小率」、テレビ会議端末装置からの映像信号による画像から分割部面を切り出す場合の「切り出し位置」（この切り出し位置は分割画像の左上角の元データの映像上での座標で表わされる。）、分割画像に枠を付加するか否かを示す「枠有無」、分割画像に枠を付ける場合の色を示す「枠色」、分割画像を点滅表示するか否かを示す「点滅有無」、他の分割画像と重なる場合に見れるように表示するか隠すかを示す「優先順位」等々を格納する。
３０７は合成画像作成データベースであり、上述の第１の階層３０１〜第６の階層３０６より形成する。
【００２０】
このように階層化した合成画像作成データベース３０７によれば、第１の階層３０１の合成モード１〜Ｉの中から選択した合成モードに連なる第２の階層３０２の画面変更イベント及びこの画面変更イベントに連なる第３の階層３０３の参加地点数及びこの参加地点数に連なる第４の階層の分割数と分割画像及び分割画像に連なる第５の階層３０５の状態種別及びこの状態種別に連なる第６の階層３０６に格納した分割画像作成情報を抽出することができる。したがって、第１の階層３０１の合成モードの選択から第２の階層３０２〜第５の階層３０５の各階層の変更条件により第６の階層３０６に至るまで、複数の組合わせが可能でありその組合わせにより第６の階層３０６から様々な分割画像作成情報を抽出することができ、複数の表示パターンの合成画像を作成することが可能となる。
また、第２の階層３０２の画面変更イベント、第３の階層３０３〜第５の階層３０５の変更条件等、各階層毎の組合わせに応じて最終的に抽出される分割画像の作成情報は異なるので、１つの合成モードからでも複数の表示パターンの合成画像を作成することが可能となる。
【００２１】
次に、動作を図により説明する。なお、多地点テレビ会議装置２０１の回線対応部２３１〜２３４、多重分離部２４１〜２４４、映像復号化部２５１〜２５４、映像符号化部２８１〜２８４、音声処理部２９４、データ処理部２９５の動作は、各々図１２に示す従来の多地点テレビ会議装置１０１の回線応部１３１〜１３４、多重分離部１４１〜１４４、映像復号化部１５１〜１５４、映像符号化部１８１〜１８４、音声処理部１９４、データ処理部１９５の動作と同様であるので説明を省略し、多地点テレビ会議装置２０１からテレビ会議端末装置２１１〜２１４に分配する合成画像の変更動作について説明する。
【００２２】
図３は合成画像の表示パターン例を示す説明図であり、図３（ａ）は３地点会議の合成画像を示す説明図、図３（ｂ）、（ｃ）は４地点会議の合成画像を示す説明図である。なお、図３に示す合成画像の表示パターンは話者の映像を枠で囲って表示して強調するものである（以下、話者の映像を枠で囲って強調表示する合成画像を用いるテレビ会議を会議モード１と称す）。
図において、Ａは３地点会議の会議モード１の合成画像であり、テレビ会議端末装置２１１〜２１３からの映像から作成した分割画像ａ１〜ａ３を同一画面上に表示したものである。ａ１１は分割画像ａ１に設けられた枠であり、テレビ会議端末装置２１１が話者であることを示す。
また、Ａ１、Ａ２は４地点会議の会議モード１の合成画像であり、図３（ａ）に示す３分割の合成画像Ａにテレビ会議端末装置２１４（図１に示す）からの映像から作成した分割画像ａ４を加えて同一画面上に表示したものである。また、合成画像Ａ１、Ａ２において、各々テレビ会議端末装置２１１、２１２が話者であり、分割画像ａ１、ａ２はその枠ａ１１、ａ２１が設けられて強調表示されている。
【００２３】
図４は合成画像の他の表示パターン例を示す説明図であり、図４（ａ）は３地点会議の合成画像を示す説明図、図４（ｂ）は４地点会議の合成画像を示す説明図である。なお、図４に示す合成画像の表示パターンはテレビ会議端末装置２１１〜２１４の何れか１つの装置からの映像を大きく表示して強調するものである（以下、１つの映像を大きく表示する合成画像を用いるテレビ会議を会議モード２と称す）。
図において、Ｂは３地点会議の会議モード２の合成画像であり、テレビ会議端末装置２１１〜２１３（図１に示す）からの映像から作成した分割画像ｂ１〜ｂ３を同一画面上に表示したものである。この会議モード２ではテレビ会議端末装置２１１を代表者とし、分割画像ｂ１を他の分割画像ｂ２、ｂ３に比べて大きくすることにより強調表示している。
また、Ｂ１は４地点会議の会議モード２の合成画像であり、３分割の合成画像Ｂにテレビ会議端末装置２１４からの映像から作成した分割画像ｂ４を加えて同一画面上に表示したものである。
なお、図３、図４に示す合成画像の表示パターンは、イベントに応じて特定の分割画像を強調表示する分割表示様式に含まれるものである。
【００２４】
図５は図２に示す合成画像作成データベース３０７に格納した変更条件の一例を示す説明図である。図において、図２と同一符号は同一又は相当部分を示し説明を省略する。合成画像の表示パターンを選択する第１の階層３０１には表示パターンを選択するための合成モード１〜５を格納する。
第２の階層３０２には第１の階層３０１の「合成モード２」の下位に画面変更イベントとして「参加端末数変更、会議モード１の話者変更、会議モード変更」を格納する。
【００２５】
第３の階層３０３には第２の階層３０２の「第１の会議モードの話者変更」の下に参加端末数として「２〜４端末参加」を格納し、「会議モード変更」の下位に参加端末数として「２〜４端末参加」を格納する。
第４の階層３０４には各々第３の階層３０３の「４端末参加」の下位に分割画像数を示す「分割数４」、テレビ会議端末装置２１１〜２１４からの映像信号を割り当てた「端末２１１〜２１４」を格納する。
第５の階層３０５には第４の階層３０４の「端末２１１」の下位に状態種別として、テレビ会議端末装置２１１から音声が伝送されている／いないを示す「話者、非話者」を格納し、第４の階層３０４の「端末２１２」の下位に状態種別として、テレビ会議端末装置２１２が「会議モード１か２か、及び分配映像か非分配映像か」を格納する。
【００２６】
第６の階層３０６には第５の階層３０５の「話者」の下位に分割画像の作成情報として、分割画像の表示位置を示す「上１／２（０．０）」、元データの映像の縮小率を示す「縮小なし」、分割画像の元データの映像から切り出し位置を示す「上下１／４」、分割画像の枠有無を示す「枠有」、枠の色を示す「白」、分割画像の点滅有無を示す「点滅無」、分割画像の優先順位を示す「最優先」等々を格納し、第５の階層３０５の「会議モード２・非分配映像」の下位に分割画像の表示位置を示す「右下（３／４．３／４）」、元データの映像の縮小率を示す「１／９縮小」、分割画像の元データの映像からの切り出し位置を示す「上下右左１／４」、分割画像の枠有無を示す「枠無」、枠の色「（空欄）」、分割画像の点滅有無を示す「点滅無」、分割画像の優先順位を示す「最優先」等々を格納する。
【００２７】
なお、「会議モード１の話者変更」を上位とする第４の階層３０４「端末２１２〜２１４」の下位の各階層に各々図３（ｂ）、（ｃ）に示す分割画像ａ２〜ａ４を作成する情報が格納されている。
また、「会議モード変更」を上位とする第４の階層３０４の「端末２１１、２１３、２１４」の下位の各階層に各々図４（ｂ）に示す分割画像ｂ１、ｂ３、ｂ４を作成する情報が格納されている。
【００２８】
図６はテレビ会議の立ち上げと合成画像変更動作を示すフローチャートである。
まず、テレビ会議端末装置２１１〜２１４（図１に示す）が会議に参加する４地点会議及び会議開催当初の会議モードを会議モード１とした場合のテレビ会議の立ち上げ方法を図６により説明する。
操作装置２０２より合成画像作成データベース３０７（図５に示す）の第１の階層３０１の合成モード２を選択してモード選択信号を伝送する。多地点テレビ会議装置２０１（図１に示す）は制御線２０３を介してモード選択信号を受け、多地点テレビ会議装置２０１のＣＰＵ２９１はモード選択信号の示す合成モード２をメモリ２９２に登録する（ステップＳ１）。
なお、操作装置２０２（図１に示す）より合成モードを選択指示する場合、操作装置２０２の画面（図示せず）に合成モード毎の代表的な合成画像の表示パターンを表示しておくと合成モードの選択を容易にできる。
【００２９】
次にテレビ会議開始時は操作装置２０２からＣＰＵ２９１に対して会議モードの設定、参加端末数の通知、主催者側のテレビ会議端末装置の指定等々を行う。ＣＰＵ２９１は操作装置２０２からの指示をメモリ２９２に記憶すると共に、編集部２６１〜２６４（図１に示す）の個別処理部２６１ａ〜２６１ｄ、２６２ａ〜２６２ｄ、２６３ａ〜２６３ｄ、２６４ａ〜２６４ｄに対して会議モード、参加端末数等々の分割画像の作成条件を指示する。
個別処理部２６１ａ〜２６１ｄ、２６２ａ〜２６２ｄ、２６３ａ〜２６３ｄ、２６４ａ〜２６４ｄはＣＰＵ２９１の指示により、映像復号化部２５１〜２５４により復号化されたテレビ会議端末装置２１１〜２１４からの映像信号を各々編集して分割画像信号を映像合成部２７１〜２７４に出力する。映像合成部２７１〜２７４は上述の作成条件を基に分割画像信号を合成して合成画像を示す合成画像信号を出力する。映像合成部２７１〜２７４から出力された合成画像信号は、映像符号化部２８１〜２８４により符号化され、多重分離部２４１〜２４４により音声信号やデータ信号に多重化されて回線対応部２３１〜２３４により回線２２１〜２２４を介してテレビ会議端末装置２１１〜２１４に伝送される。テレビ会議端末装置２１１〜２１４は伝送された合成画像信号を合成画像としてモニターに表示して４地点会議のテレビ会議を開催する（ステップＳ２）。
【００３０】
次に、例えば、テレビ会議中に画面変更イベントとして、テレビ会議の発言者がテレビ会議端末装置２１２からテレビ会議端末装置２１１に切り替わった場合について説明する。即ち、図３（ｃ）に示す合成画像Ａ２から図３（ｂ）に示す合成画像Ａ１に合成画像の表示を変更する場合について説明する。
音声処理部２９４はテレビ会議に参加しているテレビ会議端末装置２１１〜２１４の音声データのレベルを検出して最大レベルのテレビ会議端末装置が切り替わった場合、例えば、音声データのレベルが最大のものがテレビ会議端末装置２１２からテレビ会議端末装置２１１に切り替わった場合、ＣＰＵ２９１に対して話者がテレビ会議端末装置２１２からテレビ会議端末装置２１１に変更したことを通知する（ステップＳ３）。この場合、音声処理部２９４はテレビ会議中に生じるイベントを検出するイベント検出手段に相当する。
【００３１】
ＣＰＵ２９１はその通知を受け、その話者切替の内容をメモリ２９２に記憶すると共にメモリ２９２に記憶した合成モード（合成モード２）を確認して合成画像作成データベース３０７にアクセスし、第１の階層３０１の合成モード２の下位の第２の階層３０２に「会議モード１の話者変更」（図５に示す）が格納されているか否か検出し（ステップＳ４）、格納されている場合はステップＳ５に進み、格納されていない場合はステップＳ３に戻り、合成画像変更イベント発生の通知を待つ。
【００３２】
ＣＰＵ２９１はステップＳ５において、現在会議に参加している地点数（テレビ会議端末装置２１１〜２１４の４端末参加）を確認する（ステップＳ５）。
次に、ＣＰＵ２９１は合成画像作成データベース３０７（図５に示す）の第２の階層３０２の「会議モード１の話者変更」の下位の第３の階層３０３の当該端末数を示す「４端末参加」の下位の第４の階層３０４に対して各テレビ会議端末装置２１１〜２１４からの映像毎にアクセスする。ＣＰＵ２９１は第４の階層３０４の表示画面数の「分割数４」を検出してテレビ会議端末装置２１１〜２１４の画像を割り当てた「端末２１１〜２１４」にアクセスする。
例えば、「端末２１１」にアクセスする場合について説明すると、ＣＰＵ２９１はテレビ会議端末装置２１１からの映像を示す「端末２１１」の下位の第５の階層３０５にアクセスすると共に、テレビ会議端末装置２１１の状態をメモリ２９２に問い合わせてテレビ会議端末装置２１１が話者であると確認して第５の階層３０５の「話者」の下位の第６の階層にアクセスする。ＣＰＵ２９１は第６の階層から、図３（ｂ）に示す分割画像ａ１を作成するための「上１／２（０．０）」、「縮小なし」、「上下１／４」等々の分割画像の作成情報を抽出して個別処理部２６１ａ、２６２ａ、２６３ａ、２６４ａに出力する（ステップＳ６）。
即ち、ＣＰＵ２９１は合成画像作成データベース３０７から分割画像作成情報を抽出する画像情報抽出手段に相当する。
【００３３】
なお、ＣＰＵ２９１は第４の階層３０４の「端末２１２〜２１４」に同様にアクセスして第６の階層３０６から各々図３（ｂ）に示す分割画像ａ２〜ａ４分割画像の作成情報を抽出してテレビ会議端末装置２１２の映像に対する分割画像の作成情報を個別処理部２６１ｂ、２６２ｂ、２６３ｂ、２６４ｂに出力し、テレビ会議端末装置２１３の映像に対する分割画像の作成情報を個別処理部２６１ｃ、２６２ｃ、２６３ｃ、２６４ｃに出力し、テレビ会議端末装置２１４の映像に対する分割画像の作成情報を個別処理部２６１ｄ、２６２ｄ、２６３ｄ、２６４ｄに出力する（ステップＳ６）。
【００３４】
以下、ステップＳ７での各部の動作を説明する。個別処理部２６１ａ〜２６１ｄ、２６２ａ〜２６２ｄ、２６３ａ〜２６３ｄ、２６４ａ〜２６４ｄは各々ＣＰＵ２９１からの分割画像の作成情報に基づいて、映像復号化部２５１〜２５４により復号化されたテレビ会議端末装置２１１〜２１４からの映像信号を編集処理して分割画像信号を映像合成部２７１〜２７４に出力する。
映像合成部２７１〜２７４は各々個別処理部２６１ａ〜２６１ｄ、２６２ａ〜２６２ｄ、２６３ａ〜２６３ｄ、２６４ａ〜２６４ｄからの分割画像信号を合成して生成した合成画像信号を映像符号化部２８１〜２８４に出力する。
【００３５】
映像符号化部２８１〜２８４は合成画像信号を符号化して多重分離部２４１〜２４４に出力し、多重分離部２４１〜２４４は符号化した映像信号を音声信号やデータと多重化して回線対応部２３１〜２３４に出力する。回線対応部２３１〜２３４は回線２２１〜２２４を介して各テレビ会議端末装置２１１〜２１４に多重化した伝送信号を分配する。
各テレビ会議端末装置２１１〜２１４では、図３（ｂ）に示すように分割画像ａ１が枠ａ１１を設けられて強調表示される。
【００３６】
また、画面変更イベントとして、例えば、操作装置２０２（図１に示す）より会議モード１から会議モード２に会議モードを変更指示する場合、即ち図３（ｂ）に示す合成画像Ａ１から図４（ｂ）に示す合成画像Ｂ１に表示パターンを変更する場合について説明する。
操作装置２０２は画面変更イベント「会議モード変更」を指示するイベント信号を多地点テレビ会議装置２０１（図１に示す）に伝送する（ステップＳ３）。多地点テレビ会議装置２０１のＣＰＵ２９１はそのイベント信号を受け、メモリ２９２に記憶した合成モード（合成モード２）を確認すると共に合成画像作成データベース３０７（図４に示す）にアクセスして第１の階層３０１の合成モード２の下位の第２の階層３０２に「会議モード変更」が格納されているか否か検出（ステップＳ４）し、格納されている場合はステップＳ５に進み、格納されていない場合はステップＳ３に戻り、画面変更イベント発生の通知を待つ。
【００３７】
ＣＰＵ２９１はステップＳ５において、現在会議に参加している地点数（テレビ会議端末装置２１１〜２１４の４端末参加）を確認する。
次に、ＣＰＵ２９１は合成画像作成データベース３０７の第２の階層３０２の「会議モード変更」の下位の第３の階層３０３の当該端末数を示す「４端末参加」の下位の第４の階層３０４に対して各テレビ会議端末装置２１１〜２１４からの映像毎にアクセスする。
ＣＰＵ２９１は第４の階層３０４の表示画像数の「分割数４」を検出してテレビ会議端末装置２１１〜２１４（図１に示す）からの画像を割り当てた「端末２１１〜２１４」にアクセスする。
例えば、「端末２１２」にアクセスする場合について説明すると、ＣＰＵ２９１は「端末２１２」の下位の第５の階層３０５にアクセスすると共にテレビ会議端末装置２１２の状態をメモリ２９２に問い合わせ、テレビ会議端末装置２１２の状態を確認（会議モード１、非分配映像）し、第５の階層３０５の会議モードの異なる「会議モード２、非分配映像」の下位の第６の階層にアクセスする。なお、会議モード等の情報はテレビ会議立ち上げ時にメモリ２９２に予め格納されている。
ＣＰＵ２９１は第６の階層から図４（ｂ）に示す分割画像ｂ２の作成情報を抽出して個別処理部２６１ｂ、２６２ｂ、２６３ｂ、２６４ｂに出力する（ステップＳ６）。
【００３８】
なお、ＣＰＵ２９１は「端末２１１、２１３、２１４」に対しても同様にアクセスして第６の階層３０６から各々分割画像ｂ１、ｂ３、ｂ４の作成情報を抽出してテレビ会議端末装置２１１からの映像に対する分割画像の作成情報を個別処理部２６１ａ、２６２ａ、２６３ａ、２６４ａに出力し、テレビ会議端末装置２１３からの映像に対する分割画像の作成情報を個別処理部２６１ｃ、２６２ｃ、２６３ｃ、２６４ｃに出力し、テレビ会議端末装置２１４からの映像に対する分割画像の作成情報を個別処理部２６１ｄ、２６２ｄ、２６３ｄ、２６４ｄに出力する。
【００３９】
ステップＳ７以降の動作は上述と同様であるので説明を省略する。
各テレビ会議端末装置２１１〜２１４では、図３（ｂ）に示す合成画像Ａ１から図４（ｂ）に示す合成画像Ｂ１に変更した合成画像が表示される。
【００４０】
次に、合成画像作成データベース３０７（図２、４に示す）の内容を修正した新たな合成画面データベースを用いて合成画像の表示パターンを変更する動作について説明する。
図７は合成画像作成データベースに追加した合成モードの内容を示す説明図である。図において図２、図５と同一符号は同一又は相当部分を示し説明を省略す合成画像の表示パターンを選択する第１の階層３０１には新たな合成モード６を格納する。
画面変更イベントを格納する第２の階層３０２には上位階層の「合成モード６」の下位に「参加端末数変更、会議モード１の話者変更、会議モード変更、会議終了５分前」を格納する。なお、ここで、新たな画面変更イベントは「会議終了５分前」であるが、この「会議終了５分前」とは、テレビ会議終了の５分前になった場合、合成画像中のテレビ会議の主催者側の画像を強調して表示し、テレビ会議の主催者に注目が集まるようにするものである。以下、この「会議終了５分前」の下位の階層について説明する。
【００４１】
参加端末数を格納する第３の階層３０３には上位階層の「会議終了５分前」の下位に「２〜４端末参加」を格納する。
分割画像数と分割画像を格納する第４の階層３０４には、例えば、上位階層の「４端末参加」の下位に分割画像数を示す「分割数４」、テレビ会議端末装置２１１〜２１４の映像をＣＰＵ２９１が任意に選択して割り当てる「任意端末１〜４」を格納する。
状態種別を格納する第５の階層３０５には、例えば、上位階層の「任意端末１」の下位にテレビ会議の主催者か否かを示す「主催、主催以外」を格納する。
【００４２】
分割画像の作成情報を格納する第６の階層３０６には、例えば、上位階層の「主催」の下位に分割画像の表示位置を示す「中央（１／４，１／４）」、元データの映像の縮小率を示す「１／４縮小」、分割画像の元データの映像から切り出し位置を示す「なし」（即ち、全画面表示を意味する。）、分割画像の枠有無を示す「枠有」、枠の色を示す「赤」、分割画像の点滅有無を示す「点滅有」、分割画像の優先順位を示す「最優先」等々を格納する。
【００４３】
なお、この第６の階層３０６に格納した分割画像の作成情報によれば、主催側からの映像を１／４に縮小して赤色の枠を設けて合成画像上の中央に点滅させて最優先で表示することになる。したがって、テレビ会議終了５分前にテレビ会議参加者に対して主催者が自動的にイニシアチブを取り易い状況を提供することができる。また、テレビ会議終了時間に回線が自動的に遮断されるシステム構成の場合は、回線遮断の警告表示として用いることもできる。
３０７ａは新たな合成画像作成データベースであり、上述の符号第１の階層３０１〜第６の階層３０６から形成する。
【００４４】
図８は合成画像データベース修正、テレビ会議の立ち上げ及び合成画像変更動作を示すフローチャートである。
次に動作を図により説明する。まず、ステップＳ０におけるの動作を説明す．。操作者の指示により、操作装置２０２は合成画像作成データベース３０７（図５に示す）のダウンロード要求信号を多地点テレビ会議装置２０１に伝送する。多地点テレビ会議装置２０１のＣＰＵ２９１はダウンロード要求信号を受けて、記憶装置２９６に記憶した合成画像作成データベース３０７を操作装置２０２にダウンロードする。
【００４５】
操作装置２０２のデータベース修正部２０２ａは操作者からの第１の階層３０１〜第６の階層３０６各々の合成モード、画面変更イベント、参加端末数、分割数、映像の割当、分割画像の作成情報等々を指示されて、第１の階層３０１〜第６の階層３０６までを階層化した部分的な新たなデータベースを作成すると共にこの新たなデータベースをダウンロードされた合成画像作成データベース３０７に追加登録して新たな合成画像データベース３０７ａを生成する。操作者の指示により操作装置２０２は新たな合成画像作成データベース３０７ａを多地点テレビ会議装置２０１に伝送する。
多地点テレビ会議装置２０１のＣＰＵ２９１は操作装置２０２からの新たな合成画像データベース３０７ａを記憶装置２９６に記憶する（ステップＳ０）。
【００４６】
次に、ステップＳ１以降の動作を説明する。操作装置２０２より合成画像作成データベース３０７ａの第１の階層３０１の合成モード６を選択する。操作装置２０２からの合成モード６を選択する旨を示すモード選択信号は制御線２０３を介して多地点テレビ会議装置２０１に伝送される。多地点テレビ会議装置２０１のＣＰＵ２９１はモード選択信号の示す合成モード６をメモリ２９２に登録する（ステップＳ１）。
次にテレビ会議開始時は操作装置２０２からＣＰＵ２９１に対して会議モードの設定、参加端末数の通知、主催者側のテレビ会議端末装置の指定等々を行う。なお、予めテレビ会議の終了時刻を決めている場合は、操作装置２０２から終了時刻を多地点テレビ会議装置２０１に指示する。
ＣＰＵ２９１は操作装置２０２からの指示をメモリ２９２に記憶すると共に編集部２６１〜２６４各々の個別処理部２６１ａ〜２６１ｃ、２６２ａ〜２６２ｃ、２６３ａ〜２６３ｃ、２６４ａ〜２６４ｄに会議モード、参加端末数等々の合成画像の作成条件を指示して合成画像を作成させてテレビ会議を開催する（ステップＳ２）。なお、ステップＳ２における多地点テレビ会議装置２０１の符号２３１〜２３４、２４１〜２４４、２５１〜２５４、２７１〜２７４、２８１〜２８４を付した構成の動作は図６に示すステップＳ２における各部の動作と同様であるので説明を省略する。
【００４７】
次に、例えば、画面変更イベントが「会議終了５分前」の場合について説明すると、テレビ会議の終了時刻がメモリ２９２に記憶してある場合は、ＣＰＵ２９１は内部クロックの時刻とメモリ２９２に記憶したテレビ会議終了時刻とが一致するか否かにより、画面変更イベント（会議終了５分前）が発生したか否かを検出する（ステップＳ３）。
また、テレビ会議の終了時刻がメモリ２９２に記憶していない場合は、操作装置２０２より合成モード６の第１の階層３０１の「会議終了５分前」を多地点テレビ会議装置２０１のＣＰＵ２９１に通知する（ステップＳ３）。
ステップＳ４以降の動作は図６に示す合成画像変更動作と同様であるので説明を省略する。
【００４８】
なお、新たなデータベースを追加登録した合成画像作成データベース３０７ａについて述べたが、記憶装置２９２の記憶容量を考慮して合成画像データベース３０７ａから不要なデータを削除しても良いし、第１の階層３０１の合成モードを増やさずに、既存の合成モードの下位の第２の階層３０２〜第６の階層３０６に格納する画面変更イベント、参加端末数、分割画像の作成情報等々を修正しても良いことは言うまでもない。
【００４９】
以上説明したように、この実施の形態１による多地点テレビ会議システムによれば、操作装置２０２から合成画像の表示パターンを選択する複数の合成モードを第１の階層３０１に格納し、合成画像を変更するきっかけとなる画面変更イベントを第２の階層３０２に格納し、第３の階層３０３〜第５の階層３０５に合成画像を変更する上での変更条件を格納して、第６の階層３０６に合成画像を作成するための分割画像の作成情報を格納して形成した合成画像作成データベース３０７を記憶装置２６２に記憶すると共に、ＣＰＵ２９１は外部から得る情報を第２の階層３０２〜第５の階層３０５から検出して、全ての階層の条件に適合する分割画像の作成情報を第６の階層３０６から抽出し、個別処理部２６１ａ〜２６１ｄ、２６２ａ〜２６２ｄ、２６３ａ〜２６３ｄ、２６４ａ〜２６４ｄはその分割画像の作成情報に基づいて各テレビ会議端末装置２１１〜２１４からの映像を処理して分割画像を作成し、映像合成部２７１〜２７４によりその分割画像を合成して合成画像を出力するので、合成画像を変更すべきイベントに対応して合成画像の表示パターンを変更でき、また、テレビ会議に要求される条件を満たす複数の合成画像を自動的に作成することができ、テレビ会議の利便性を向上させることができる。
【００５０】
また、記憶装置２９６に記憶した合成画像作成データベース３０７の内容を操作装置２０２に設けたデータベース修正部２０２ａにより修正することにより、ソフトウェア技術者等の特有の技術を有するものでなくても、容易に新たな合成画像の表示パターンを作成することができると共に容易に新たな画面変更イベントに適合する合成画像の表示パターンを作成できる。
【００５１】
実施の形態２．
この発明の多地点テレビ会議システムの他の実施の形態について説明する。この実施の形態２による多地点テレビ会議システム２９７（図１に示す）は会議途中でメモリ２９２（図１に示す）に記憶した合成モードを変更し、合成画像の表示パターンを変更するものである。
図９は実施の形態２による合成画像変更動作を示すフローチャートである。
次に、動作を図により説明する。なお、ステップＳ１、Ｓ２及びステップＳ３〜Ｓ７は図６に示すステップＳ１、Ｓ２及びステップＳ３〜Ｓ７に示す合成画像変更動作と同一であるので説明を省略し、ステップＳ２ａ、Ｓ２ｂ、Ｓ２ｃについて説明する。
【００５２】
当初予定していなかった画面変更イベントに対応して合成画像を変更するようにしたい場合、データベース修正部２０２ａ（図１に示す）は操作者の指示により操作装置２０２を介してメモリ２９２（図１に示す）に記憶する合成モードの変更を要求する合成モード変更信号を多地点テレビ会議装置２０１（図１に示す）に伝送する。なお、この実施の形態２において、データベース修正部２０２ａは合成モード変更手段に相当する。
多地点テレビ会議装置２０１のＣＰＵ２９１は、ステップＳ２ａにおいて合成モード変更信号を受けたか否か判定し、合成モード変更信号を受けていない場合はステップＳ３に進み、画面変更イベントの通知を待つ。また、合成モード変更信号を受けた場合、ステップＳ２ｂに進む。
【００５３】
次に、ステップＳ２ｂにおいて、データベース修正部２０２ａは操作者の指示により操作装置２０２を介して合成画像作成データベース３０７ａ（図７に示す）の第１の階層３０１の他の合成モードを選択するモード選択信号を多地点テレビ会議装置２０１に伝送する。
多地点テレビ会議装置２０１のＣＰＵ２９１はモード選択信号の示す他の合成モードをメモリ２９２に記憶すると共に先に記憶した合成モードを削除する（ステップＳ２ｂ）。
【００５４】
次に、新たにメモリ２９２に記憶した他の合成モードで作成される合成画像の表示パターンに変更したい場合は、操作装置２０２は操作者の指示によりＣＰＵ２９１に対して合成画像作成データベース３０７ａの第２の階層３０２〜第５の階層３０５までの条件を指示する。
ＣＰＵ２９１はその指示に基づいて合成画像作成データベース３０７ａにアクセスして第６の階層３０６に格納した分割画像の作成情報を抽出し、編集部２６１〜２６４（図１に示す）に出力する。編集部２６１〜２６４以降の合成画像の作成動作は上述の実施の形態１に示す合成画像の作成動作と同一であるので説明を省略する。各テレビ会議端末装置２１１〜２１４には操作装置２０２より指示した内容の合成画像が表示される（ステップＳ２ｃ）。
【００５５】
なお、この実施の形態３では、ステップＳ２ａ、ｂにおいて、操作装置２０２を介してデータベース修正部２０２ａより多地点テレビ会議装置２０１のメモリ２９２に記憶する合成モードの変更を指示したが、このステップＳ２ａ、ｂにおいて、即ち、テレビ会議中にデータベース修正部２０２ａより操作装置２０２を介して多地点テレビ会議装置２０１の記憶装置２９６に記憶する合成画像データベース３０７ａの内容を変更するようにしても良い。なお、合成画像作成データベース３０７ａの修正は、上述の実施の形態１に示したデータベース修正部２０２ａの動作と同等で良い。
【００５６】
以上説明した通り、テレビ会議開催中に会議開催当初には予定していない画面変更イベントに対応するために、操作装置２０２を介してデータベース修正部２０２ａよりメモリ２９２に記憶した合成画像作成データベース３０７ａの第１の階層３０１の合成モードを当該画面変更イベントを下位に有する他の合成モードに変更することにより、当該画面変更イベントに対応した合成画像を表示することができる。なお、この場合、データベース修正部２０２ａを用いて新たなデータベースを作成しなくても良く効率的に対応できる。
【００５７】
実施の形態３．
この発明の多地点テレビ会議システムの他の実施の形態について説明する。図１０は実施の形態３による多地点テレビ会議システムを示す説明図である。図において、図１と同一符号は同一又は相当部分を示し説明を省略する。
２１１ａ〜２１４ａは各々テレビ会議端末装置２１１〜２１４に設けられたデータベース修正部であり、合成画像作成データベース３０７（図２に示す）のダウンロード及び修正並びにメモリ２９２（図１に示す）に記憶する合成モードを指示する。２９７ａは多地点テレビ会議システムであり、上述の符号２１１ａ〜２１４ａを付した構成及び符号２０１〜２０３、２１１〜２１４、２２１〜２２４を付した構成を含む。
【００５８】
次に、動作を図により説明する。図１１は合成画像変更動作を示すフローチャートである。
次に動作を図により説明する  まず、多地点テレビ会議装置２０１と各テレビ会議端末装置２１１〜２１４とを回線２２１〜２２４により接続する（ステップＳ０ａ）。
次に、操作装置２０２より指示して多地点テレビ会議装置２０１から合成画像作成データベース３０７をテレビ会議端末装置２１１にダウンロードする。なお、このダウンロードに際しては、ＩＴＵ−Ｔ勧告Ｈ２２１のＭＢＥを使用して記憶装置２９６に記憶した合成画像作成データベース３０７を多重分離部２４１、回線対応部２３１、制御線２２１を介してテレビ会議端末装置２１１に伝送する。（ステップＳ０ｂ）
【００５９】
次に、テレビ会議端末装置２１１に設けられたデータベース修正部２１１ａは、ダウンロードされた合成画像作成データベース３０７を各階層毎に繋がりが分かるようにテレビ会議端末装置２１１のモニター上（不図示）に表示させる。データベース操作部２１１ａは、例えば、図２、図５に示すような合成画像作成データベース３０７の階層構造を示す画像をテレビ会議端末装置２１１のモニター上に表示させる。
データベース修正部２１１ａは操作者より合成モードを選択指示されると、テレビ会議端末装置２１１を介して合成モード選択信号が多地点テレビ会議装置２０１に伝送される。多地点テレビ会議装置２０１のＣＰＵ２９１は指示された合成モードをメモリ２９２に記憶する（ステップＳ１ａ）。
なお、ステップＳ２以降の動作は上述の図６に示す合成画像変更動作と同様であるので説明を省略する。
【００６０】
また、ステップＳ０ｂにおいて、データベース修正部２１１ａは合成モードを選択指示するだけでなく、図８に示す合成画像変更動作のステップＳ０におけるデータベース修正部２０２ａの動作と同様に合成画像作成データベース３０７の修正を行って新たな合成画像データベース３０７を生成し、テレビ会議端末装置２１１から多地点テレビ会議装置２０１にアップロードして新たな合成画像作成データベースを記憶装置２９６に記憶しても良い。
【００６１】
また、上述のテレビ会議端末装置２１１からメモリ２９２に記憶する合成モードを変更させる動作及び記憶装置２９６に新たな合成画像作成データベース３０７を記憶する動作はテレビ会議開催前に限らず、図９に示すステップＳａ、ｂと同様にテレビ会議中に行っても良い。
【００６２】
なお、データベース修正部２１１ａの動作について述べたが、他のテレビ会議端末装置２１２〜２１４のデータベース修正部２１２ａ〜２１４ａによりメモリ２９２に記憶する合成モードの指示、記憶装置２９６に記憶する合成画像作成データベース３０７の内容の修正を行っても良いことは言うまでもない。
【００６３】
以上説明した通り、テレビ会議開催前に多地点テレビ会議装置２０１の記憶装置２９６に記憶した合成データベース３０７をテレビ会議端末装置２１１（テレビ会議端末装置２１１〜２１４の何れか１の装置）にダウンロードし、データベース修正部２１１ａにより合成モードを指示し多地点テレビ会議装置２０１のメモリ２９１にその合成モードを記憶するので、遠隔地にあるテレビ会議端末装置２１１側から会議形態を考慮した合成画像の表示パターンを選択でき、多地点テレビ会議システム２９７ａの利便性を向上することができる。
【００６４】
また、記憶装置２９６に記憶した合成画像作成データベース３０７の内容をデータベース操作部２１１ａにより修正した場合は、テレビ会議端末装置２１１側から新たな画面変更イベントに対応させて自動的にその新たな画面変更イベントに適合する合成画像を表示させることができる。
【００６５】
また、テレビ会議開催中に合成画像作成データベース３０７を多地点テレビ会議装置２０１からダウンロードし、データベース修正部２１１ａにより合成モードの変更を多地点テレビ会議装置２０１に指示してメモリ２９２に記憶した合成モードをデータベース修正部２１１ａの示した合成モードに変更した場合は、会議開催当初には予定していない画面変更イベントに急遽対応する必要が生じた場合に、他の合成モードの下位にその画面変更イベントを格納してあれば、容易に必要とする合成画像を表示することができる。
【００６６】
【発明の効果】
この発明の多地点テレビ会議システムによれば、複数のテレビ会議端末装置と、複数のテレビ会議端末装置が伝送する画像信号から合成画像の信号を生成し複数のテレビ会議端末装置に伝送する多地点テレビ会議装置と、合成画像の分割表示様式を示す合成モードを多地点テレビ会議装置に指示する操作装置と、を備えた多地点テレビ会議システムにおいて、多地点テレビ会議装置は、第１の階層には合成モードを複数格納し、第２の階層には各合成モードに連なるとともに合成モードの表示パターンをイベントにより変更する変更条件を格納する合成画像作成データ−ベースと、イベントを検出することにより合成画像作成データベースの第２の階層に格納された変更条件を選択するイベント検出手段と、操作装置により選択された合成モードとイベント検出手段により選択された変更条件とに基づいて合成画像を生成する画像処理手段と、を備えたので、テレビ会議中に生じるイベントに応じて抽出される分割画像作成情報を異なるように設定できる。したがって、そのイベントに応じた合成画像を容易に生成表示することができる。
【００７０】
また、この発明の多地点テレビ会議システムによれば、操作装置より指示された合成モードを会議中に他の合成モードに変更する合成モード変更手段を設け、画像情報抽出手段は他の合成モードとテレビ会議端末装置の数とイベントに応じて合成画像作成データベースから分割画像作成情報を抽出するので、合成モード変更手段により、イベントに適合した他の合成モードに変更してよりイベントに対応する合成画像を生成するとこができる。
【図面の簡単な説明】
【図１】  この発明の実施の形態１の多地点テレビ会議システムを示す説明図でふる。
【図２】  合成画像作成データベースを示す説明図である。
【図３】  合成画像の表示パターン例を示す説明図であり、図３（ａ）は３地点会議の合成画像を示す説明図、図３（ｂ）、（ｃ）は４地点会議の合成画像を示す説明図である。
【図４】  合成画像の他の表示パターン例を示す説明図であり、図４（ａ）は３地点会議の合成画像を示す説明図、図４（ｂ）は４地点会議の合成画像を示す説明図である。
【図５】  合成画像作成データベースに格納したデータを示す説明図である。
【図６】  合成画像変更動作を示すフローチャートである。
【図７】  合成画像作成データベースに格納した他のデータを示す説明図である。
【図８】  合成画像作成データベース修正及び合成画像変更動作を示すフローチャートである。
【図９】  この発明の実施の形態２の合成画像変更動作を示すフローチャートである。
【図１０】  この発明の実施の形態３の多地点テレビ会議システムを示す説明図である。
【図１１】  この発明の実施の形態３の合成画像変更動作を示すフローチャートである。
【図１２】  従来の多地点テレビ会議システムを示す説明図である。
【符号の説明】
２０１  多地点テレビ会議装置、  ２０２  操作装置、  ２０２ａ  データベース修正部、  ２０３  制御線、  ２１１〜２１４  テレビ会議端末装置、  ２１１ａ〜２１４ａ  データベース操作部、  ２２１〜２２４  回線、  ２３１〜２３４  回線対応部、  ２４１〜２４４  多重分離部、  ２５１〜２５４  映像復号化部、２６１〜２６４  編集部、  ２７１〜２７４  映像合成部、  ２８１〜２８４  映像符号化部、  ２９１  ＣＰＵ、  ２９２  メモリ、  ２９３  画像処理部、  ２９４  音声処理部、  ２９５  データ処理部、  ２９６  記憶装置、  ２９７、２９７ａ  多地点テレビ会議システム。
【図１】
0003711685.tif 000002
【図２】
0003711685.tif 000003
【図３】
0003711685.tif 000004
【図４】
0003711685.tif 000005
【図５】
0003711685.tif 000006
【図６】
0003711685.tif 000007
【図７】
0003711685.tif 000008
【図８】
0003711685.tif 000009
【図９】
0003711685.tif 000010
【図１０】
0003711685.tif 000011
【図１１】
0003711685.tif 000012
【図１２】
0003711685.tif 000013