(57)【要約】【課題】ユーザの資料画像、撮像画像の画像切り替えの操作手間を軽減する。【解決手段】ＰＣ１２５は、所定パターンの領域が設けられた資料画像の画像データを出力する。挿入領域検出部２０５は、資料画像データから、所定パターンの領域を、撮像画像挿入領域として検出する。この検出結果に基づいて、制御部２０１の制御のもと、親子画面入替部２０６、縮小部２０７、合成部２０８により、資料画像データおよび撮像画像データを合成して、送信画像データを生成する。資料画像に所定パターンの領域を設けておくことで、撮像画像と資料画像の切り替え、一方の画像内への他方の画像の挿入等が自動的に行われるため、ユーザの画像切り替えの操作手間が軽減される。【選択図】図４
2008227668.tif 000002
【特許請求の範囲】
【請求項１】
複数のコミュニケーションシステム端末が互いにネットワークを介して接続されたコミュニケーションシステムであって、
上記複数のコミュニケーション端末のうち、所定のコミュニケーション端末は、
カメラで撮像されて得られた撮像画像データを入力する第１の入力部と、
上記撮像画像データとは異なる所定画像の画像データを入力する第２の入力部と、
上記第２の入力部に入力される画像データに基づいて、該画像データによる画像から撮像画像挿入領域を検出する挿入領域検出部と、
上記挿入領域検出部における上記撮像画像挿入領域の検出結果に基づいて、上記第２の入力部に入力される画像データに上記第１の入力部に入力される撮像画像データを合成して合成画像データを得る合成部と、
上記合成部で得られる合成画像データを他のコミュニケーション端末に送信する通信部とを有する
ことを特徴とするコミュニケーションシステム。
【請求項２】
ネットワークを介して他のコミュニケーション端末に接続されるコミュニケーション端末であって、
カメラで撮像されて得られる撮像画像データを入力する第１の入力部と、
上記撮像画像データとは異なる所定画像の画像データを入力する第２の入力部と、
上記第２の入力部に入力される画像データに基づいて、該画像データによる画像から撮像画像挿入領域を検出する挿入領域検出部と、
上記挿入領域検出部における上記撮像画像挿入領域の検出結果に基づいて、上記第２の入力部に入力される画像データに上記第１の入力部に入力される撮像画像データを合成して合成画像データを得る合成部と、
上記合成部で得られる合成画像データを他のコミュニケーション端末に送信する通信部と
を備えることを特徴とするコミュニケーション端末。
【請求項３】
上記挿入領域検出部は、
上記第２の入力部に入力される画像データによる画像から、少なくとも形状または色により特定される所定パターンの領域を上記撮像画像挿入領域として検出する
ことを特徴とする請求項２に記載のコミュニケーション端末。
【請求項４】
上記所定パターンを予め登録するパターン登録部をさらに有する
ことを特徴とする請求項３に記載のコミュニケーション端末。
【請求項５】
上記パターン登録部は、
上記第２の入力部に入力される画像データによる画像からパターン候補を検出するパターン候補検出手段と、
上記パターン候補検出手段で検出されたパターン候補をユーザに提示するユーザ提示手段と、
上記ユーザ提示手段で提示されたパターン候補からユーザが所定のパターンを選択するユーザ操作手段と、
上記ユーザ操作手段により選択されたパターン候補を上記所定パターンとして登録するパターン登録手段とを有する
ことを特徴とする請求項４に記載のコミュニケーション端末。
【請求項６】
上記挿入領域検出部の検出結果に基づいて、上記第１の入力部に入力される画像データによる画像が表示される画面と、上記第２の入力部に入力される画像データによる画像が表示される画面の親子関係を入れ替える親子画面入替部と、
上記親子画面入替部で表示画面が子画面とされた画像に対応した画像データに対して画サイズ縮小処理を施す画サイズ縮小部とをさらに有し、
上記合成部は、上記挿入領域検出部における撮像画像挿入領域の検出結果に基づいて、上記親子画面入替部で表示画面が親画面とされた画像に対応した画像データの一部を上記画サイズ縮小部で得られる画像データに置き換えて上記合成画像データを得る
ことを特徴とする請求項２に記載のコミュニケーション端末。
【請求項７】
ネットワークを介して他のコミュニケーション端末に接続されるコミュニケーション端末における送信画像データの生成方法であって、
カメラで撮像されて得られる撮像画像データを取得する第１の画像データ取得ステップと、
上記撮像画像データとは異なる所定画像の画像データを取得する第２の画像データ取得ステップと、
上記第２の画像データ取得ステップで取得される画像データに基づいて、該画像データによる画像から撮像画像挿入領域を検出する挿入領域検出ステップと、
上記挿入領域検出ステップにおける撮像画像挿入領域の検出結果に基づいて、上記第２の画像データ取得ステップで取得される画像データに上記第１の画像データ取得ステップで取得される撮像画像データを合成して送信画像データを得る合成ステップと
を備えることを特徴とするコミュニケーション端末における送信画像データの生成方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、例えばテレビ会議システム等に適用して好適なコミュニケーションシステム、コミュニケーション端末およびコミュニケーション端末における送信画像データの生成方法に関する。詳しくは、この発明は、コミュニケーション端末において、資料画像等の所定画像から撮像画像挿入領域を検出し、その検出結果に基づいて、所定画像の画像データに撮像画像データを合成して送信画像データを得ることにより、ユーザの画像切り替え等の操作手間を軽減するようにしたコミュニケーションシステム等に係るものである。
【背景技術】
【０００２】
互いに離れた個々の地点で撮像を行い、得られた画像データをネットワーク経由で相手の地点に送信して表示させることにより、双方向にコミュニケーションをとることができるようにしたコミュニケーションシステムが知られている。このようなコミュニケーションシステムとして、例えば、特許文献１等に記載されているテレビ会議システムがある。
【特許文献１】特開２００５−３２８４８４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
上述したテレビ会議システムにおいて、例えば、ある地点の会議室で会議参加者がプレゼンテーションを行っている状態で、当該ある地点に配置された会議端末から、他の地点の会議室に配置された会議端末に、会議の様子を示す撮像画像の他に、当該プレゼンテーションで使用する資料の画像（資料画像）を送信する必要が生じることがある。
【０００４】
従来、そのような場合、ユーザ（例えば、会議参加者等）が、送信画像データを、カメラから出力される撮像画像データから、例えばコンピュータから出力される資料画像の画像データに、切り替える操作を行っていた。
【０００５】
この発明の目的は、ユーザの画像切り替え等の操作手間を軽減することにある。
【課題を解決するための手段】
【０００６】
この発明の概念は、
複数のコミュニケーションシステム端末が互いにネットワークを介して接続されたコミュニケーションシステムであって、
上記複数のコミュニケーション端末のうち、所定のコミュニケーション端末は、
カメラで撮像されて得られた撮像画像データを入力する第１の入力部と、
上記撮像画像データとは異なる所定画像の画像データを入力する第２の入力部と、
上記第２の入力部に入力される画像データに基づいて、該画像データによる画像から撮像画像挿入領域を検出する挿入領域検出部と、
上記挿入領域検出部における上記撮像画像挿入領域の検出結果に基づいて、上記第２の入力部に入力される画像データに上記第１の入力部に入力される撮像画像データを合成して合成画像データを得る合成部と、
上記合成部で得られる合成画像データを他のコミュニケーション端末に送信する通信部とを有する
ことを特徴とするコミュニケーションシステムにある。
【０００７】
この発明において、コミュニケーションシステムは、複数のコミュニケーション端末が互いにネットワークを介して接続された構成となっている。複数のコミュニケーション端末のうち、所定のコミュニケーション端末は、第１の入力部、第２の入力部、挿入領域検出部、合成部および通信部を有するものとされる。
【０００８】
第１の入力部にはカメラで撮像されて得られた撮像画像データが入力され、第２の入力部には撮像画像データとは異なる所定画像（例えば、資料画像等）の画像データが入力される。挿入領域検出部では、第２の入力部に入力される所定画像の画像データに基づいて、この画像データによる画像（所定画像）から、撮像画像挿入領域が検出される。この場合、挿入領域検出部では、例えば、所定画像から、少なくとも形状または色により特定される所定パターンの領域が、撮像画像挿入領域として検出される。このように挿入領域検出部で検出される撮像画像挿入領域を所定パターンの領域とすることで、予め、所定画像内の所望位置に当該所定パターンの領域を形成しておけば、当該所望位置に撮像画像を挿入することが可能となる。
【０００９】
例えば、所定パターンとして、矩形パターン、円形パターン、ひし型パターン等の形状により特定されるパターンが考えられる。また、例えば、所定パターンとして、黒色パターン、灰色パターン等の単一色パターン、赤色枠で囲まれた青色パターン、赤枠で囲まれた緑色パターン等の複数色パターン等の色により特定されるパターンが考えられる。また、例えば、所定パターンとして、赤色枠で囲まれた青色の矩形パターン、赤枠で囲まれた緑色の円形パターン等の形状および色により特定されるパターンが考えられる。所定パターンを形状および色により特定されるパターンとすることで、挿入領域検出部における撮像画像挿入領域の検出精度を高めることが可能となる。
【００１０】
合成部では、挿入領域検出部における撮像画像挿入領域の検出結果に基づいて、第２の入力部に入力される画像データ（所定画像の画像データ）に第１の入力部に入力される撮像画像データが合成されて送信画像データが得られる。この送信画像データは、通信部により、他のコミュニケーション端末に送信される。
【００１１】
このようにこの発明においては、所定画像から撮像画像挿入領域が検出され、その検出結果に基づいて、所定画像の画像データに撮像画像データが合成されて送信画像データが得られるものであり、撮像画像と所定画像の切り替え、所定画像内への撮像画像の挿入（ピクチャー・イン・ピクチャー）等が自動的に行われるため、ユーザの画像切り替え等の操作手間を軽減できる。
【００１２】
例えば、この発明において、コミュニケーション端末は、挿入領域検出部における撮像画像挿入領域の検出結果に基づいて、第１の入力部に入力される画像データによる画像（撮像画像）が表示される画面と、第２の入力部に入力される画像データによる画像（所定画像）が表示される画面の親子関係を入れ替える親子画面入替部と、親子画面入替部で表示画面が子画面とされた画像に対応した画像データに対して画サイズ縮小処理を施す画サイズ縮小部とをさらに有し、合成部は、挿入領域検出部における撮像画像挿入領域の検出結果に基づいて、親子画面入替部で表示画面が親画面とされた画像に対応した画像データの一部を画サイズ縮小部で得られる画像データに置き換えて合成画像データを得るものとされてもよい。
【００１３】
例えば、挿入領域検出部で検出される撮像画像挿入領域が、所定画像内に含まれる関係にあるときは、所定画像は親画面に表示され、撮像画像は子画面に表示されるという親子関係とされる。この場合、所定画像の画像データの一部が、画サイズ縮小部で処理された撮像画像データに置き換えられて、合成画像データが得られる。また、例えば、挿入領域検出部で検出される撮像画像挿入領域の外形は所定画像の外形と同じであるが、当該撮像画像挿入領域内に撮像画像挿入領域でない領域が含まれるという関係にあるときは、撮像画像は親画面に表示され、所定画像は子画面に表示されるという親子関係とされる。この場合、撮像画像データの一部が、画サイズ縮小部で処理された所定画像の画像データに置き換えられて、合成画像データが得られる。
【００１４】
このように、挿入領域検出部で検出される撮像画像挿入領域に基づいて、撮像画像が表示される画面と所定画像が表示される画面の親子関係が入れ替えられる構成とすることで、所定画像内に撮像画像を挿入するだけでなく、撮像画像内に所定画像を挿入するというピクチャー・イン・ピクチャーも可能となる。
【００１５】
例えば、この発明において、コミュニケーション端末は、挿入領域検出部で撮像画像挿入領域として検出される領域のパターンである所定パターンを予め登録するパターン登録部を有するものとされてもよい。これにより、ユーザは、所定画像に含まれる複数のパターンの領域のうち、任意のパターンの領域を、挿入領域検出部で検出させる所定パターンの領域として設定できる。
【００１６】
パターン登録部は、例えば、第２の入力部に入力される画像データによる画像からパターン候補を検出するパターン候補検出手段と、このパターン候補検出手段で検出されたパターン候補をユーザに提示するユーザ提示手段と、このユーザ提示手段で提示されたパターン候補からユーザが所定のパターンを選択するユーザ操作手段と、このユーザ操作手段により選択されたパターン候補を所定パターンとして登録するパターン登録手段とを有するものとされる。この場合、ユーザは所定画像から検出されて提示されたパターン候補から所定のパターンを選択して登録操作を行うものであり、ユーザの登録操作が簡単となる。
【発明の効果】
【００１７】
この発明によれば、コミュニケーション端末において、資料画像等の所定画像から撮像画像挿入領域を検出し、その検出結果に基づいて、所定画像の画像データに撮像画像データを合成して送信画像データを得るものであり、ユーザの画像切り替え等の操作手間を軽減できる。
【発明を実施するための最良の形態】
【００１８】
以下、図面を参照しながら、この発明の実施の形態について説明する。
【００１９】
図１は、実施の形態としてのコミュニケーションシステムとしての会議システム１００の構成例を示している。このテレビ会議システム１００は、会議端末１１０Ａと会議端末１１０Ｂとが、ＬＡＮ（Local Area Network）、インターネット等のネットワーク３００を介して接続されて構成されている。
【００２０】
図２は、会議端末１１０Ａ側の構成を示している。この図２は、会議参加者Ｍａがプレゼンテーションを行っている状態を示している。会議端末１１０Ａには、カメラ１２１と、ディスプレイ１２２と、マイクロホン１２３と、スピーカ１２４と、ノート型のパーソナルコンピュータ１２５と、プロジェクタ１２６とが接続されている。
【００２１】
カメラ１２１は、被写体（例えば、プレゼンテーションを行っている会議参加者Ｍａ等）を撮像し、当該被写体に対応した撮像画像データを生成し、この撮像画像データを会議端末１１０Ａに送る。このカメラ１２１は、例えば、ＣＣＤ(Charged Coupled Device)あるいはＣＭＯＳ(ComplementaryMetal-Oxide Semiconductor)等の撮像素子を用いて構成されている。ディスプレイ（モニタ）１２２は、会議端末１１０Ａから出力される画像データに基づき、当該画像データによる画像を表示する。
【００２２】
マイクロホン１２３は音声を捉え、当該音声に対応した音声信号を出力し、この音声信号を会議端末１１０Ａに送る。スピーカ１２４は、会議端末１１０Ａから出力される音声信号に基づき、当該音声信号による音声を出力する。
【００２３】
パーソナルコンピュータ１２５は、会議参加者Ｍａがプレゼンテーションで用いる資料画像を表示するための画像データを出力し、この画像データを会議端末１１０Ａに送る。ここで、パーソナルコンピュータ１２５が出力する画像データは、赤、緑、青の３原色信号により構成されている。これに対して、上述のカメラ１２１が出力する画像データは、輝度信号、赤色差信号、青色差信号により構成されている。
【００２４】
プロジェクタ１２６は、会議端末１１０Ａから出力される画像データに基づき、当該画像データに対応した画像をスクリーン１２７上に投写する。会議端末１１０Ａからプロジェクタ１２６に供給される画像データは、パーソナルコンピュータ１２５から出力される資料画像の画像データにカメラ１２１から出力される撮像画像データを合成した合成画像データである。
【００２５】
会議端末１１０Ａは、パーソナルコンピュータ１２５から供給される資料画像の画像データに基づいて、この画像データによる画像から撮像画像挿入領域を検出する。そして、この会議端末１１０Ａは、撮像画像挿入領域の検出結果に基づいて、パーソナルコンピュータ１２５から出力される資料画像の画像データにカメラ１２１から出力される撮像画像データを合成して、合成画像データ（送信画像データ）を生成する。
【００２６】
図３は、会議端末１１０Ｂ側の構成を示している。この図３は、会議参加者Ｍｂ，Ｍｃが、会議端末１１０Ａ側で行われているプレゼンテーションを聴取している状態を示している。会議端末１１０Ｂには、カメラ１３１と、ディスプレイ１３２と、マイクロホン１３３と、スピーカ１３４とが接続されている。
【００２７】
カメラ１３１は、被写体（例えば、プレゼンテーションを聴取している会議参加者Ｍｂ，Ｍｃ等）を撮像し、当該被写体に対応した撮像画像データを生成し、この撮像画像データを会議端末１１０Ｂに送る。このカメラ１３１は、例えば、ＣＣＤあるいはＣＭＯＳ等の撮像素子を用いて構成されている。ディスプレイ（モニタ）１３２は、会議端末１１０Ｂから出力される画像データに基づき、当該画像データによる画像を表示する。
【００２８】
マイクロホン１３３は音声を捉え、当該音声に対応した音声信号を出力し、この音声信号を会議端末１１０Ｂに送る。スピーカ１３４は、会議端末１１０Ｂから出力される音声信号に基づき、当該音声信号による音声を出力する。
【００２９】
図２および図３を参照して、テレビ会議システム１００の動作を説明する。
【００３０】
会議端末１１０Ａ側において、カメラ１２１で、例えば、プレゼンテーションを行っている会議参加者Ｍａ等の被写体が撮像される。そして、このカメラ１２１から出力される被写体に対応した撮像画像データは会議端末１１０Ａに供給される。また、パーソナルコンピュータ１２５から出力されるプレゼンテーションで用いる資料画像の画像データは、会議端末１１０Ａに供給される。
【００３１】
会議端末１１０Ａでは、資料画像の画像データに基づいて、当該画像データによる画像（資料画像）から、撮像画像挿入領域が検出される。そして、会議端末１１０Ａでは、この撮像画像挿入領域の検出結果に基づいて、資料画像の画像データに撮像画像データが合成されて、送信画像データ（合成画像データ）が生成される。会議端末１１０Ａにおける、撮像画像挿入領域の検出処理、資料画像の画像データと撮像画像データの合成処理の詳細については、後述する。
【００３２】
会議端末１１０Ａで生成された送信画像データは、当該会議端末１１０Ａからプロジェクタ１２６に供給される。そして、プロジェクタ１２６により、合成画像データによる画像がスクリーン１２７上に投写される。また、会議端末装置１１０Ａで生成される合成画像データは、圧縮処理後に、当該会議端末１１０Ａから、ネットワーク３００を介して、会議端末１１０Ｂに送られる。
【００３３】
また、マイクロホン１２３から出力される音声信号は、会議端末１１０Ａに供給される。会議端末１１０Ａでは、この音声信号に対して、アナログ信号からデジタル信号への変換処理、圧縮処理等が行われる。そして、圧縮後の圧縮音声データは、当該会議端末１１０Ａから、ネットワーク３００を介して、会議端末１１０Ｂに送られる。
【００３４】
また、会議端末１１０Ａでは、会議端末１１０Ｂから送られてくる圧縮画像データおよび圧縮音声データが受信される。会議端末１１０Ａでは、受信された圧縮画像データに対して伸長処理が施されて、受信画像データが得られる。会議端末１１０Ａでは、受信画像データによる画像が親画面に表示され、上述の送信画像データによる画像が子画面に表示されるように、画像データの合成処理が行われて表示画像データが生成される。この表示画像データは会議端末１１０Ａからディスプレイ１２２に供給され、当該ディプレイ１２２には表示画像データによる画像が表示される。
【００３５】
また、会議端末１１０Ａでは、受信された圧縮音声データに対して伸長処理、デジタル信号からアナログ信号への変換処理等が行われて、受信音声信号が得られる。この受信音声信号は会議端末１１０Ａからスピーカ１２４に供給され、当該スピーカ１２４から受信音声信号による音声が出力される。
【００３６】
一方、会議端末１１０Ｂ側において、カメラ１３１で、例えば、プレゼンテーションを聴取している会議参加者Ｍｂ，Ｍｃ等の被写体が撮像される。そして、このカメラ１３１から出力される被写体に対応した撮像画像データは会議端末１１０Ｂに送信画像データとして供給される。会議端末１１０Ｂでは、送信画像データに対して、圧縮処理が施される。そして、圧縮後の圧縮画像データは、当該会議端末１１０Ｂから、ネットワーク３００を介して、会議端末１１０Ａに送られる。
【００３７】
また、マイクロホン１３３から出力される音声信号は、会議端末１１０Ｂに供給される。会議端末１１０Ｂでは、この音声信号に対して、アナログ信号からデジタル信号への変換処理、圧縮処理等が行われる。そして、圧縮後の圧縮音声データは、当該会議端末１１０Ｂから、ネットワーク３００を介して、会議端末１１０Ａに送られる。
【００３８】
また、会議端末１１０Ｂでは、会議端末１１０Ａから送られてくる圧縮画像データおよび圧縮音声データが受信される。会議端末１１０Ｂでは、受信された圧縮画像データに対して伸長処理が施されて、受信画像データが得られる。そして、この受信画像データは会議端末１１０Ｂからディスプレイ１３２に供給され、当該ディプレイ１３２には受信画像データによる画像が表示される。因みに、このように会議端末１１０Ｂ側のディスプレイ１２２に表示される画像は、上述の会議端末１１０Ａ側のスクリーン１２７上にプロジェクタ１２６により投写される画像と同じ内容となる。
【００３９】
また、会議端末１１０Ｂでは、受信された圧縮音声データに対して伸長処理、デジタル信号からアナログ信号への変換処理等が行われて、受信音声信号が得られる。この受信音声信号は会議端末１１０Ｂからスピーカ１３４に供給され、当該スピーカ１３４から受信音声信号による音声が出力される。
【００４０】
図４は、会議端末１１０Ａの具体的な構成例を示している。会議端末１１０Ａは、制御部２０１と、リモートコントロール信号受信部（以下、「リモコン受信部」という）２０２と、画像入力端子２０３ａ，２０３ｅと、画像出力端子２０３ｂ，２０３ｆと、音声入力端子２０３ｃと、音声出力端子２０３ｄと、フォーマット変換部２０４，２１１と、挿入領域検出部２０５と、親子画面入替部２０６と、縮小部２０７と、合成部２０８と、画像圧縮／伸長部２０９と、表示処理部２１０と、Ａ／Ｄ変換器２１２と、エコーキャンセラ２１３と、音声圧縮／伸長部２１４と、Ｄ／Ａ変換器２１５と、パケタイズ／デパケタイズ部２１６と、通信インタフェース（通信Ｉ／Ｆ）２１７とを有している。
【００４１】
制御部２０１は、会議端末１１０Ａの各部の動作を制御する。リモコン受信部２０２は、ユーザ操作に対応してリモートコマンダ１２８から発生される、例えば赤外線等のリモートコントロール信号を受信する。リモコン受信部２０２は、受信したリモートコントロール信号に対応した操作信号を、制御部２０１に供給する。
【００４２】
画像入力端子２０３ａは、カメラ１２１から出力される撮像画像データを入力する端子である。この画像入力端子２０３ａは、第１の入力部を構成している。画像出力端子２０３ｂは、ディスプレイ１２２に供給する画像データ（表示画像データ）を出力する端子である。音声入力端子２０３ｃは、マイクロホン１２３で得られる音声信号を入力する端子である。音声出力端子２０３ｄは、スピーカ１２４に供給する音声信号を出力する端子である。画像入力端子２０３ｅは、パーソナルコンピュータ２０３ｂから出力される資料画像の画像データを入力する端子である。この画像入力端子２０３ｅは、第２の入力部を構成している。画像出力端子２０３ｆは、プロジェクタ１２６に供給する画像データを出力する端子である。
【００４３】
フォーマット変換部２０４は、画像入力端子２０３ｅに入力される、パーソナルコンピュータ１２５からの資料画像の画像データを、赤、緑、青の３原色信号から輝度信号、赤色差信号、青色差信号に、フォーマット変換する。挿入領域検出部２０５は、画像入力端子２０３ｅに入力される資料画像の画像データに基づいて、当該画像データによる画像、つまり資料画像から、撮像画像挿入領域を検出する。
【００４４】
挿入領域検出部２０５は、資料画像から、少なくとも形状または色により特定される所定パターンの領域を、撮像画像挿入領域として検出する。例えば、所定パターンとして、矩形パターン、円形パターン、ひし型パターン等の形状により特定されるパターンが考えられる。また、例えば、所定パターンとして、黒色パターン、灰色パターン等の単一色パターン、赤色枠で囲まれた青色パターン、赤枠で囲まれた緑色パターン等の複数色パターン等の色により特定されるパターンが考えられる。また、例えば、所定パターンとして、赤色枠で囲まれた青色の矩形パターン、赤枠で囲まれた緑色の円形パターン等の形状および色により特定されるパターンが考えられる。この場合、形状および色の双方により特定される所定パターンの領域を撮像画像挿入領域として検出するようにすることで、撮像画像挿入領域の検出精度を高めることができる。
【００４５】
この実施の形態においては、挿入領域検出部２０５で撮像画像挿入領域として検出される所定パターンを予め登録できる。制御部２０１の所定パターン登録時における制御処理については後述する。
【００４６】
図５（ａ）〜（ｄ）は、資料画像の一例を示している。挿入領域検出部２０５で撮像画像挿入領域として検出される所定パターンが赤色枠で囲まれた青色の矩形パターンであるとき、挿入領域検出部２０５は、図５（ａ）〜（ｄ）のそれぞれにハッチングを付して示している領域を、撮像画像挿入領域として検出する。ここで、図５（ａ）〜（ｃ）に示す例では、挿入領域検出部２０５で検出される撮像画像挿入領域が、資料画像内に含まれる関係（以下、適宜、「第１の関係」という）にある。これに対して、図５（ｄ）に示す例では、挿入領域検出部２０５で検出される撮像画像挿入領域の外形は資料画像の外形と同じであるが、当該撮像画像挿入領域内に撮像画像挿入領域でない領域が含まれるという関係（以下、適宜、「第２の関係」という）にある。
【００４７】
親子画面入替部２０６は、挿入領域検出部２０５における撮像画像挿入領域の検出結果に基づいて、画像入力端子２０３ａに入力される撮像画像データによる画像（撮像画像）が表示される画面と、画像入力端子２０３ｅに入力される画像データによる画像（資料画像）が表示される画面の親子関係を入れ替える。
【００４８】
親子画面入替部２０６は、画像入力端子２０３ａに入力される撮像画像データ、およびフォーマット変換部２０４でフォーマット変換された、資料画像の画像データ（資料画像データ）を入力とする。そして、親子画面入替部２０６は、上述の第１の関係にあるとき、資料画像は親画面に表示され、撮像画像は子画面に表示されるという親子関係とし、Ｐ側出力端子に親画面用画像データとして資料画像データを出力し、Ｃ側出力端子に子画面用画像データとして撮像画像データを出力する。また、親子画面入替部２０６は、上述の第２の関係にあるとき、撮像画像は親画面に表示され、資料画像は子画面に表示されるという親子関係とし、Ｐ側出力端子に親画面用画像データとして撮像画像データを出力し、Ｃ側出力端子に子画面用画像データとして資料画像データを出力する。
【００４９】
縮小部２０７は、親子画面入替部２０６のＣ側出力端子に出力される子画面用画像データに対して、画素の間引き、補間等による画サイズの縮小処理を施す。上述の第１の関係にあるとき、縮小部２０７は、挿入領域検出部２０５で検出された撮像画像挿入領域（矩形領域）のサイズに合致するように、画サイズを縮小する。一方、上述の第２の関係にあるとき、縮小部２０７は、挿入領域検出部２０５で検出された撮像画像挿入領域内に含まれる撮像画像挿入領域でない領域（矩形領域）のサイズに合致するように、画サイズを縮小する。
【００５０】
合成部２０８は、挿入領域検出部２０５で検出された撮像画像挿入領域に基づいて、親子画面入替部２０６のＰ側出力端子に出力される親画面用画像データの一部を、縮小部２０７で縮小処理が施された子画面用画像データで置き換えて、送信画像データとしての合成画像データを生成する。ここで、親画面用画像データの一部とは、上述の第１の関係にあるときは、挿入領域検出部２０５で検出された撮像画像挿入領域（矩形領域）に対応した部分となり、上述の第２の関係にあるときは、挿入領域検出部２０５で検出された撮像画像挿入領域内に含まれる撮像画像挿入領域でない領域（矩形領域）に対応した部分となる。
【００５１】
画像圧縮／伸長部２０９は、合成部２０８で生成された合成画像データ（送信画像データ）に対して、例えば、ＩＴＵによって標準化されたＨ．３２３等の所定規格に準拠した圧縮方式によって圧縮処理を施し、圧縮画像データを生成する。また、画像圧縮／伸長部２０９は、パケタイズ／デパケタイズ部２１６で再構成された、会議端末１１０Ｂからの圧縮画像データに対して、伸長処理を施し、復号化された画像データ（受信画像データ）を生成する。
【００５２】
表示処理部２１０には、合成部２０８で生成された送信画像データ（合成画像データ）および画像圧縮／伸長部２０９で得られる受信画像データ（復号化画像データ）が供給される。表示処理部２１０は、撮像画像データおよび受信画像データに基づいて、受信画像内に撮像画像が子画面として挿入された表示を行うための新たな画像データを生成し、当該画像データを画像出力端子２０３ｂに出力する。フォーマット変換部２１１は、合成部２０８で生成された送信画像データを、輝度信号、赤色差信号、青色差信号から赤、緑、青の３原色信号にフォーマット変換し、変換後の画像データを画像出力端子２０３ｆに出力する。
【００５３】
Ａ／Ｄ変換器２１２は、音声入力端子２０３ｂに入力される、マイクロホン１２３からの音声信号をアナログ信号からデジタル信号に変換する。エコーキャンセラ２１３は、音声圧縮／伸長部２１４で得られる復号化音声データに基づいて補正信号を生成し、Ａ／Ｄ変換器２１２で得られる音声データを、当該補正信号により補正して、通話品質を確保する。
【００５４】
音声圧縮／伸長部２１４は、Ａ／Ｄ変換器２１２からエコーキャンセラ２１３で補正された音声データ（送信音声データ）に対して、上述した画像データと同様に、Ｈ．３２３等の所定規格に準拠した圧縮方式の圧縮処理を施し、圧縮音声データを生成する。また、音声圧縮／伸長部２１４は、パケタイズ／デパケタイズ部２１６で再構成された、会議端末１１０からの圧縮音声データに対して、伸長処理を施し、復号化された音声データ（受信音声データ）を生成する。
【００５５】
パケタイズ／デパケタイズ部２１６は、画像圧縮／伸長部２０９で得られる圧縮画像データ、およびが音声圧縮／伸長部２１４で得られる圧縮音声データを、所定フォーマットでパケット化し、得られたパケットデータを通信インタフェース２１７に送出する。また、パケタイズ／デパケタイズ部２１６は、通信インタフェース２１７で受信される、会議端末１１０Ｂから送られてくるパケットデータから、圧縮画像データおよび圧縮音声データを抽出し、抽出された圧縮画像データを画像圧縮／伸長部２０９に送出し、抽出された圧縮音声データを音声圧縮／伸長部２１４に送出する。
【００５６】
通信インタフェース２１７は、パケタイズ／デパケタイズ部２１６で得られたパケットデータを、ネットワーク３００を介して、会議端末１１０Ｂに送信する。また、通信インタフェース２１７は、会議端末１１０Ｂからネットワーク３００を介して送られてくるパケットデータを受信し、パケタイズ／デパケタイズ部２１６に送出する。
【００５７】
図４に示す会議端末１１０Ａの動作を説明する。まず、送信系の動作を説明する。
【００５８】
カメラ１２１から画像入力端子２０３ａに入力される撮像画像データは、この画像入力端子２０３ａから親子画面入替部２０６に入力される。また、パーソナルコンピュータ１２５から画像入力端子２０３ｅに入力される資料画像データは、この画像入力端子２０３ｅから挿入領域検出部２０５に供給される。
【００５９】
挿入領域検出部２０５では、資料画像データに基づいて、当該資料画像データによる画像、つまり資料画像から、予め設定された所定パターン（例えば、赤色枠で囲まれた青色の矩形パターン等）の領域が撮像画像挿入領域として検出される。このように検出された撮像画像挿入領域の情報は、挿入領域検出部２０５から制御部に供給される。この撮像画像挿入領域の情報は、制御部２０１における、親子入替部２０６における入替動作、縮小部２０７の縮小動作および合成部２０８の合成動作等の制御に用いられる。
【００６０】
また、パーソナルコンピュータ１２５から画像入力端子２０３ｅに入力される資料画像データは、この画像入力端子２０３ｅからフォーマット変換部２０４に供給される。このフォーマット変換部２０４では、資料画像データが、赤、緑、青の３原色信号から輝度信号、赤色差信号、青色差信号に、フォーマット変換される。このフォーマット変換により、資料画像データのフォーマットは、カメラ１２１からの撮像画像データのフォーマットと等しくされる。フォーマット変換部２０４でフォーマット変換された資料画像データは、親子画面入替部２０６に入力される。
【００６１】
親子画面入替部２０６では、制御部２０１の制御のもと、挿入領域検出部２０５における撮像画像挿入領域の検出結果に基づいて、撮像画像データによる画像（撮像画像）が表示される画面と、資料画像データによる画像（資料画像）が表示される画面の親子関係が入れ替えられる。
【００６２】
挿入領域検出部２０５で検出される撮像画像挿入領域が、資料画像内に含まれる関係（第１の関係）にあるときは（図５（ａ）〜（ｃ）参照）、資料画像は親画面に表示され、撮像画像は子画面に表示されるという親子関係とされる。この場合、親子画面入替部２０６において、Ｐ側出力端子には親画面用画像データとして資料画像データが出力され、Ｃ側出力端子には子画面用画像データとして撮像画像データが出力される。
【００６３】
一方、挿入領域検出部２０５で検出される撮像画像挿入領域の外形は資料画像の外形と同じであるが、当該撮像画像挿入領域内に撮像画像挿入領域でない領域が含まれるという関係（第２の関係）にあるときは（図５（ｄ）参照）、撮像画像は親画面に表示され、資料画像は子画面に表示されるという親子関係とされる。この場合、親子画面入替部２０６において、Ｐ側出力端子には親画面用画像データとして撮像画像データが出力され、Ｃ側出力端子には子画面用画像データとして資料画像データが出力される。
【００６４】
親子画面入替部２０６のＣ側出力端子に出力される子画面用画像データは、縮小部２０７に供給される。この縮小部２０７では、制御部２０１の制御のもと、挿入領域検出部２０５における撮像画像挿入領域の検出結果に基づいて、子画面用画像データに対して、画素の間引き、補間等による画サイズの縮小処理が施される。この場合、上述の第１の関係にあるときは、撮像画像挿入領域（矩形領域）のサイズに合致するように、画サイズが縮小される。なお、撮像画像挿入領域が画面全体に及ぶときは（図５（ｃ）参照）、画サイズの縮小は行われない。
一方、上述の第２の関係にあるとき、撮像画像挿入領域内に含まれる撮像画像挿入領域でない領域（矩形領域）のサイズに合致するように、画サイズが縮小される。
【００６５】
このように縮小部２０７で画サイズの縮小処理が施された子画面用画像データは、合成部２０８に供給される。この合成部２０８には、親子画面入替部２０６のＰ側出力端子に出力される親画面用画像データも供給される。この合成部２０８では、制御部２０１の制御のもと、挿入領域検出部２０５における撮像画像挿入領域の検出結果に基づいて、親画面用画像データの一部が、縮小部２０９で縮小処理が施された子画面用画像データで置き換えられ、送信画像データとしての合成画像データが生成される。この場合、親画面用画像データの一部とは、上述の第１の関係にあるときは、撮像画像挿入領域（矩形領域）に対応した部分とされ、上述の第２の関係にあるときは、撮像画像挿入領域内に含まれる撮像画像挿入領域でない領域（矩形領域）に対応した部分とされる。
【００６６】
合成部２０８で生成された合成画像データは画像圧縮／伸長部２０９に供給される。この画像圧縮／伸長部２０９では、合成画像データ（送信画像データ）に対して圧縮処理が施され、圧縮画像データが生成される。そして、この圧縮画像データはパケタイズ／デパケタイズ部２１６に供給される。
【００６７】
また、マイクロホン１２３から音声入力端子２０３ｃに入力される音声信号は、Ａ／Ｄ変換器２１２に供給されて、アナログ信号からデジタル信号に変換される。Ａ／Ｄ変換器２１２から出力される音声データはエコーキャンセラ２１３を介して音声圧縮／伸長部２１４に供給される。この音声圧縮／伸長部２１４では、音声データ（送信音声データ）に対して圧縮処理が施され、圧縮音声データが生成される。この圧縮音声データはパケタイズ／デパケタイズ部２１６に供給される。
【００６８】
パケタイズ／デパケタイズ部２１６では、画像圧縮／伸長部２０９から供給される圧縮画像データおよび音声圧縮／伸長部２１４から供給される圧縮音声データが、所定フォーマットでパケット化され、得られたパケットデータは、通信インタフェース２１７により、ネットワーク３００を介して、会議端末１１０Ｂに送信される。
【００６９】
これにより、会議端末１１０Ｂ側には、合成部２０８で生成された、資料画像データおよび撮像画像データが合成された合成画像データが供給され、会議端末１１０Ｂ側のディスプレイ１３２には当該合成画像データによる画像が表示される。つまり、上述の第１の関係にあるときは、資料画像内の撮像画像挿入領域にカメラ１２１の撮像画像が挿入された態様の画像が表示される。なお、撮像画像挿入領域が画面全体に及ぶときは（図５（ｃ）参照）、画面全体に撮像画像が表示される。また、会議端末１１０Ｂ側には、マイクロホン１２３からの音声信号が供給され、会議端末１１０Ｂ側のスピーカ１３４からは会議端末１１０Ａ側の音声が出力される。
【００７０】
また、合成部２０８で生成された、資料画像データおよび撮像画像データが合成された合成画像データ（送信画像データ）はフォーマット変換部２１１に供給される。このフォーマット変換部２１１では、合成画像データが、輝度信号、赤色差信号、青色差信号から赤、緑、青の３原色信号に、フォーマット変換される。このフォーマット変換により、合成画像データのフォーマットは、プロジェクタ１２６の入力フォーマットに合わせられる。フォーマット変換部２１１でフォーマット変換された合成画像データは画像出力端子２０３ｆに出力される。これにより、プロジェクタ１２６により、スクリーン１２７上には、当該合成画像データによる画像が投写される。このようにスクリーン１２７上に投写される画像は、上述した会議端末１１０Ｂ側のディスプレイ１３２に表示される画像と同じものとなる。
【００７１】
次に、受信系の動作を説明する。
【００７２】
通信インタフェース２１７で受信される、会議端末１１０Ｂからネットワーク３００を介して送られてくるパケットデータは、パケタイズ／デパケタイズ部２１６に供給される。パケタイズ／デパケタイズ部２１６では、通信インタフェース２１７から供給されるパケットデータから、圧縮画像データおよび圧縮音声データが抽出され、圧縮画像データは画像圧縮／伸長部２０９に供給され、圧縮音声データは音声圧縮／伸長部２１４に供給される。
【００７３】
画像圧縮／伸長部２０９では、パケタイズ／デパケタイズ部２１６から供給される圧縮画像データに対して伸長処理が施され、受信画像データが生成される。この受信画像データは、表示処理部２１０に供給される。また、この表示処理部２１０には、合成部２０８で生成された送信画像データ（合成画像データ）も供給される。表示処理部２１０では、送信画像データおよび受信画像データに基づいて、受信画像内に送信画像が子画面として挿入された表示を行うための新たな画像データが生成される。この画像データは、画像出力端子２０３ｂに出力される。これにより、ディスプレイ１２２には、受信画像内に送信画像が子画面として挿入された表示が行われる。
【００７４】
また、音声圧縮／伸長部２１４では、パケタイズ／デパケタイズ部２１６から供給される圧縮音声データに対して伸長処理が施されて受信音声データが生成される。この受信音声データは、エコーキャンセラ２１３を介してＤ／Ａ変換器２１５に供給され、デジタル信号からアナログ信号に変換される。そして、このＤ／Ａ変換器２１５から出力される受信音声信号は、音声出力端子２０３ｄに出力される。これにより、スピーカ１２４から、受信音声信号による音声（会議端末１１０Ｂ側の音声）が出力される。
【００７５】
上述したように、図４に示す会議端末１１０Ａにおいては、挿入領域検出部２０５で撮像画像挿入領域として検出される所定パターンを予め登録できる。図６のフローチャートは、制御部２０１における所定パターン登録時における制御処理を示している。この場合、制御部２０１は、パターン登録部（パターン候補検出手段、ユーザ提示手段、ユーザ操作手段、パターン登録手段）を構成している。
【００７６】
まず、制御部２０１は、ステップＳＴ１において、ユーザのパターン登録開始操作に基づいて、処理を開始し、その後に、ステップＳＴ２に移る。このステップＳＴ２において、制御部２０１は、パターン候補を検出する。この場合、パーソナルコンピュータ１２５から画像入力端子２０３ｅにパターン登録用の画像データが入力される。
【００７７】
図７は、このパターン登録用の画像データによるパターン登録用画像の一例を示している。図７に示すパターン登録用画像は、３つのパターン候補が含まれている。第１は黒枠で囲まれた灰色の矩形パターンＰＴ１であり、第２は赤枠で囲まれた青色の矩形パターンＰＴ２であり、第３は黒色の矩形パターンＰＴ３である。
【００７８】
制御部２０１は、ステップＳＴ２において、挿入領域検出部２０５に、上述のパターン登録用の画像データに基づき、この画像データによる画像、つまりパターン登録用画像から、当該挿入領域検出部２０５で検出し得る各種パターンを、パターン候補として検出させる。なお、ここでは、挿入領域検出部２０５は、上述した３つのパターンＰＴ１〜ＰＴ３を検出し得るものとする。挿入領域検出部２０５で検出されたパターン候補の情報は、当該挿入領域検出部２０５から制御部２０１に供給される。
【００７９】
次に、制御部２０１は、ステップＳＴ３において、ＧＵＩ（Graphical UserInterface）画面としてのパターン選択画面をユーザに提示する。この場合、制御部２０１は、表示処理部２１０に、パターン選択画面用の画像データを生成させる。これにより、ディスプレイ１２２に、当該パターン選択画面用の画像データによるパターン選択画面が表示される。
【００８０】
図８（ａ）は、上述したようにパターン登録用画像に３つのパターンＰＴ１〜ＰＴ３が含まれている場合における、ステップＳＴ３で提示されるパターン選択画面の一例を示している。このパターン選択画面にはパターンＰＴ１〜ＰＴ３が表示されている。図８（ａ）のパターン選択画面では、３つのパターンＰＴ１〜ＰＴ３の中で、第１のパターンＰＴ１が選択し得る状態あることが、パターンＰＴ１が点滅され、さらには「使用するパターンを選択して下さい」の文字表示の下位置に、当該パターンＰＴ１が表示されることで、ユーザに示されている。
【００８１】
次に、制御部２０１は、ステップＳＴ４において、ユーザがリモートコマンダ１２８において左右キーを操作したか否かを判定する。左右キーの操作がないとき、制御部２０１は、ステップＳＴ５において、ユーザがリモートコマンダ１２８において下キーを操作したか否かを判定する。下キーの操作がないとき、制御部２０１は、ステップＳＴ４に戻る。
【００８２】
ステップＳＴ４で左右キーの操作があるとき、制御部２０１は、ステップＳＴ６において、選択し得るパターンを変更し、その後に、ステップＳＴ４に戻る。ここで、制御部２０１は、左キーの操作があるときは前のパターンを選択し得るパターンとし、右キーの操作があるときは次のパターンを選択し得るパターンとする。
【００８３】
この場合、制御部２０１は、表示処理部２１０で生成されるパターン選択画面用の画像データを変更させる。図８（ｂ）は、パターンＰＴ２が選択し得る状態とされた場合における、パターン選択画面の一例を示している。３つのパターンＰＴ１〜ＰＴ３の中で、第１のパターンＰＴ２が選択し得る状態あることが、パターンＰＴ２が点滅され、さらには「使用するパターンを選択して下さい」の文字表示の下位置に、当該パターンＰＴ２が表示されることで、ユーザに示されている。
【００８４】
また、ステップＳＴ５で下キーの操作があるとき、制御部２０１は、ステップＳＴ７において、選択し得る状態にあったパターンを、撮像画像挿入領域を検出するためのパターン（所定パターン）として登録する。この場合、制御部２０１は、表示処理部２１０で生成されるパターン選択画面用の画像データを変更させる。図８（ｃ）は、パターンＰＴ２が所定パターンとして登録された場合における、パターン選択画面の一例を示している。この場合、パターンＰＴ２の点滅が停止され、文字表示も、「使用するパターンを登録しました」に変わる。
【００８５】
制御部２０１は、ステップＳＴ７の処理の後に、ステップＳＴ８において、パターン登録処理を終了する。なお、表示処理部２１０におけるパターン選択画面用の画像データの生成は一定時間後に終了する。なお、上述したように選択し得る状態にあるパターンを点滅させる代わりに、当該パターンに対応して網掛け、枠表示等の修飾を行うようにしてもよい。
【００８６】
図９は、会議端末１１０Ｂの具体的な構成例を示している。この図９において、図４と対応する部分には同一符号を付し、その詳細説明は省略する。会議端末１１０Ｂは、制御部２０１と、リモコン受信部２０２と、画像入力端子２０３ａと、画像出力端子２０３ｂと、音声入力端子２０３ｃと、音声出力端子２０３ｄと、画像圧縮／伸長部２０９とＡ／Ｄ変換器２１２と、エコーキャンセラ２１３と、音声圧縮／伸長部２１４と、Ｄ／Ａ変換器２１５と、パケタイズ／デパケタイズ部２１６と、通信インタフェース（通信Ｉ／Ｆ）２１７とを有している。
【００８７】
この会議端末１１０Ｂは、上述した会議端末１１０Ａにおける画像入力端子２０３ｅ、画像出力端子２０３ｆ、フォーマット変換部２０４，２１１、挿入領域検出部２０５、親子画面入替部２０６、縮小部２０７および合成部２０８が除かれた構成となっており、各部の機能は上述の会議端末１１０Ａと同様である。
【００８８】
図９に示す会議端末１１０Ｂの動作を説明する。まず、送信系の動作を説明する。
【００８９】
カメラ１３１から画像入力端子２０３ａに入力される撮像画像データは、画像圧縮／伸長部２０９に供給される。この画像圧縮／伸長部２０９では、撮像画像データ（送信画像データ）に対して圧縮処理が施され、圧縮画像データが生成される。この圧縮画像データはパケタイズ／デパケタイズ部２１６に供給される。
【００９０】
また、マイクロホン１３３から音声入力端子２０３ｃに入力される音声信号は、Ａ／Ｄ変換器２１２に供給されて、アナログ信号からデジタル信号に変換される。Ａ／Ｄ変換器２１２から出力される音声データはエコーキャンセラ２１３を介して音声圧縮／伸長部２１４に供給される。この音声圧縮／伸長部２１４では、音声データ（送信音声データ）に対して圧縮処理が施され、圧縮音声データが生成される。この圧縮音声データはパケタイズ／デパケタイズ部２１６に供給される。
【００９１】
パケタイズ／デパケタイズ部２１６では、画像圧縮／伸長部２０９から供給される圧縮画像データおよび音声圧縮／伸長部２１４から供給される圧縮音声データが、所定フォーマットでパケット化され、得られたパケットデータは、通信インタフェース２１７により、ネットワーク３００を介して、会議端末１１０Ａに送信される。
【００９２】
これにより、会議端末１１０Ａ側には、カメラ１３１で得られた撮像画像データが供給され、会議端末１１０Ａ側のディスプレイ１２２にはカメラ１３１による撮像画像が表示される。また、会議端末１１０Ａ側には、マイクロホン１３３からの音声信号が供給され、会議端末１１０Ａ側のスピーカ１２４からは会議端末１１０Ｂ側の音声が出力される。
【００９３】
次に、受信系の動作を説明する。
【００９４】
通信インタフェース２１７で受信される、会議端末１１０Ａからネットワーク３００を介して送られてくるパケットデータは、パケタイズ／デパケタイズ部２１６に供給される。パケタイズ／デパケタイズ部２１６では、通信インタフェース２１７から供給されるパケットデータから、圧縮画像データおよび圧縮音声データが抽出され、圧縮画像データは画像圧縮／伸長部２０９に供給され、圧縮音声データは音声圧縮／伸長部２１４に供給される。
【００９５】
画像圧縮／伸長部２０９では、パケタイズ／デパケタイズ部２１６から供給される圧縮画像データに対して伸長処理が施され、受信画像データが生成される。この受信画像データは画像出力端子２０３ｂに出力される。これにより、ディスプレイ１３２には、受信画像データによる画像、つまり会議端末１１０Ａ側で生成された資料画像と撮像画像との合成画像が表示される。
【００９６】
また、音声圧縮／伸長部２１４では、パケタイズ／デパケタイズ部２１６から供給される圧縮音声データに対して伸長処理が施されて受信音声データが生成される。この受信音声データは、エコーキャンセラ２１３を介してＤ／Ａ変換器２１５に供給され、デジタル信号からアナログ信号に変換される。そして、このＤ／Ａ変換器２１５から出力される受信音声信号は、音声出力端子２０３ｄに出力される。これにより、スピーカ１２４から、受信音声信号による音声（会議端末１１０Ａ側の音声）が出力される。
【００９７】
上述したように、図４に示す会議端末１１０Ａにおいては、パーソナルコンピュータ１２５から画像入力端子２０３ｅに入力される画像データによる資料画像から、挿入領域検出部２０５で撮像画像挿入領域が検出され、その検出結果に基づいて、親子画面入替部２０６、縮小部２０７および合成部２０８により、資料画像の画像データに撮像画像データが合成されて送信画像データが得られるものであり、撮像画像と資料画像の切り替え、資料画像内への撮像画像の挿入（ピクチャー・イン・ピクチャー）等が自動的に行われるため、ユーザの画像切り替え等の操作手間を軽減できる。
【００９８】
また、図４に示す会議端末１１０Ａにおいては、挿入領域検出部２０５で検出される撮像画像挿入領域を所定パターンの領域とするものであり、予め、資料画像内の所望位置に当該所定パターンの領域を形成しておけば、当該資料画像内の所望位置に撮像画像を挿入できる。
【００９９】
また、図４に示す会議端末１１０Ａにおいては、挿入領域検出部２０５で検出される撮像画像挿入領域に基づいて、親子画面入替部２０６において撮像画像が表示される画面と所定画像が表示される画面の親子関係が入れ替えられるものであり、資料画像内に撮像画像を挿入するだけでなく、撮像画像内に資料画像を挿入するというピクチャー・イン・ピクチャーも可能となる。
【０１００】
また、図４に示す会議端末１１０Ａにおいては、挿入領域検出部２０５で撮像画像挿入領域として検出される領域のパターンである所定パターンを予め登録することができ、ユーザは、資料画像に含まれる複数のパターンの領域のうち、任意のパターンの領域を、挿入領域検出部２０５で検出させる所定パターンの領域として設定できる。この場合、ユーザは資料画像から検出されてディスプレイ１２２に提示されたパターン候補から所定のパターンを選択して登録操作を行うものであり、ユーザは登録操作を簡単に行うことができる。また、このように登録されたパターンは、実際に挿入領域検出部２０５で検出されたものであり、挿入領域検出部２０５における撮像画像挿入領域の検出処理が安定して行われることになる。
【０１０１】
なお、上述実施の形態においては、会議端末１１０Ａおよび会議端末１１０Ｂがネットワーク３００を介して接続されたテレビ会議システム１００を示したが、この発明は、ユーザ同士が会議以外のコミュニケーションをとるその他のコミュニケーションシステムにも同様に適用できる。また、撮像画像と合成される画像は資料画像に限定されるものではなく、いかなる画像であってもよい。
【０１０２】
また、上述実施の形態においては、資料用画像に挿入される撮像画像が１つであるものを示したが、複数のカメラからの撮像画像を挿入する構成も考えられる。その場合、各撮像画像を、資料画像の異なるパターン領域に挿入するようにしてもよい。例えば、赤枠で囲まれた青色の矩形パターンの領域には第１のカメラからの撮像画像が挿入され、赤枠に囲まれた緑色の矩形パターンの領域には第２のカメラからの撮像画像が挿入される、等である。
【産業上の利用可能性】
【０１０３】
この発明は、ユーザの画像切り替え等の操作手間を軽減できるものであり、例えばテレビ会議システム等のコミュニケーションシステムに適用できる。
【図面の簡単な説明】
【０１０４】
【図１】実施の形態としてのテレビ会議システムの構成例を示すブロック図である。
【図２】テレビ会議システムの一方の会議端末側の構成例を示すブロック図である。
【図３】テレビ会議システムの他方の会議端末側の構成例を示すブロック図である。
【図４】テレビ会議システムの一方の会議端末の具体的な構成例を示すブロック図である。
【図５】パーソナルコンピュータからの資料画像の一例を示す図である。
【図６】制御部における所定パターン登録時における制御処理を示すフローチャートである。
【図７】パーソナルコンピュータからのパターン登録用画像の一例を示す図である。
【図８】パターン登録時に表示されるパターン選択画面の一例を示す図である。
【図９】テレビ会議システムの他方の会議端末の具体的な構成例を示すブロック図である。
【符号の説明】
【０１０５】
１００・・・テレビ会議システム、１１０Ａ，１１０Ｂ・・・会議端末、１２１・・・カメラ、１２２・・・ディスプレイ、１２３・・・マイクロホン、１２４・・・スピーカ、１２５・・・パーソナルコンピュータ、１２６・・・プロジェクタ、１２７・・・スクリーン、１２８・・・リモートコマンダ、１３１・・・カメラ、１３２・・・ディスプレイ、１３３・・・マイクロホン、１３４・・・スピーカ、２０１・・・制御部、２０２・・・リモコン受信部、２０３ａ，２０３ｅ・・・画像入力端子、２０３ｂ，２０３ｆ・・・画像出力端子、２０３ｃ・・・音声入力端子、２０３ｄ・・・音声出力端子、２０４，２１１・・・フォーマット変換部、２０５・・・挿入領域検出部、２０６・・・親子画面入替部、２０７・・・縮小部、２０８・・・合成部、２０９・・・画像圧縮／伸長部、２１０・・・表示処理部、２１２・・・Ａ／Ｄ変換器、２１３・・・エコーキャンセラ、２１４・・・音声圧縮／伸長部、２１５・・・Ｄ／Ａ変換器、２１６・・・パケタイズ／デパケタイズ部、２１７・・・通信インタフェース、３００・・・ネットワーク
【図１】
2008227668.tif 000003
【図２】
2008227668.tif 000004
【図３】
2008227668.tif 000005
【図４】
2008227668.tif 000006
【図５】
2008227668.tif 000007
【図６】
2008227668.tif 000008
【図７】
2008227668.tif 000009
【図８】
2008227668.tif 000010
【図９】
2008227668.tif 000011