(57)【要約】【課題】テレビ会議システムにおいて、例えば資料などを提示して会議を進行させていくのにあたり、ポインタ図形に相当するものを表示させることで、会議における意思疎通の円滑化を図る。そのうえで、図形表示に関連した操作、制御処理などについて、より簡易化、効率化が図られるようにする。【解決手段】、近端と遠端の通信端末装置側との間で、近端側にて入力した画像信号を共通に表示出力させる。そのうえで、マーク画像を、近端側と遠端側にて表示される画像に対して合成して表示させる。マーク画像は、その図柄が定められた所定数のもののうちから、近端の通信端末装置側での操作により選択される。また、遠端の通信端末装置側にてマーク画像を表示させるには、近端の通信端末装置から遠端の通信端末装置に対して、指示用図形画像表示のための制御情報を送信し、遠端の通信端末装置が、この制御情報に基づいて指示用図形画像を表示させるように構成する。【選択図】図６
2009171246.tif 000002
【特許請求の範囲】
【請求項１】
画像信号を入力する画像信号入力手段と、
他の通信端末装置との間での通信を実行する通信手段と、
その態様が定められている所定数の指示用図形画像のうちから、表示すべき指示用図形画像を選択する操作が行われる操作手段と、
上記画像信号入力手段により入力した画像信号を、主画像若しくはその画像部分として表示出力させるとともに、上記操作手段に対する操作により指示用図形画像が選択されたことに応じては、この選択された指示用図形画像が上記主画像内にて合成されて表示出力されるように制御する表示制御手段と、
上記画像信号入力手段により入力した画像信号を、他の通信装置側において主画像若しくはその画像部分として表示出力されるべき画像信号として、上記通信手段により送信させる画像送信手段と、
上記操作手段に対する操作により指示用図形画像が選択されたことに応じて、この選択された指示用図形画像が、他の端末装置側にて表示されているとする主画像内にて合成されて表示されるようにするための制御情報を生成する制御情報生成手段と、
上記制御情報を上記通信手段により送信させる制御情報送信制御手段と、
を備えることを特徴とする通信端末装置。
【請求項２】
上記制御情報生成手段は、その制御情報により表示されるべき指示用図形画像ごとに固有となる画像識別情報が含まれるようにして、上記制御情報を形成する、
ことを特徴とする請求項１に記載の通信端末装置。
【請求項３】
画像信号を入力するための画像信号入力手順と、
他の通信端末装置との間での通信を実行する通信手順と、
上記画像信号入力手順により入力した画像信号を、主画像若しくはその画像部分として表示出力させるとともに、上記操作手段に対する操作により指示用図形画像が選択されたことに応じては、この選択された指示用図形画像が上記主画像内にて合成されて表示出力されるように制御する表示制御手順と、
上記画像信号入力手順により入力した画像信号を、他の通信装置側において主画像若しくはその画像部分として表示出力されるべき画像信号として、上記通信手順により送信させる画像送信手順と、
上記操作手段に対する操作により指示用図形画像が選択されたことに応じて、この選択された指示用図形画像が、他の端末装置側にて表示されているとする主画像内にて合成されて表示されるようにするための制御情報を生成する制御情報生成手順と、
上記制御情報を上記通信手順により送信させる送信制御手順と、
を実行することを特徴とする画像処理方法。
【請求項４】
他の通信端末装置との間での通信を実行する通信手段と、
上記通信手段により受信され、その態様が定められている所定数の指示用図形画像のうちのいずれかの指示用図形画像を表示させるために他の通信端末装置から送信されてきた制御情報を保持する制御情報保持手段と、
上記通信手段により受信され、他の通信端末装置から送信されていた画像信号を、主画像若しくはその画像部分として表示出力させる主画像対応表示制御手段と、
上記制御情報保持手段が保持する制御情報に基づいて、上記主画像内にて指示用図形画像が合成されて表示されるように制御する指示用図形画像表示制御手段と、
を備えることを特徴とする通信端末装置。
【請求項５】
他の通信端末装置との間での通信を実行する通信手順と、
上記通信手順により受信され、その態様が定められている所定数の指示用図形画像のうちのいずれかの指示用図形画像を表示させるために他の通信端末装置から送信されてきた制御情報を保持する制御情報保持手順と、
上記通信手順により受信され、他の通信端末装置から送信されていた画像信号を、主画像若しくはその画像部分として表示出力させる主画像対応表示制御手順と、
上記制御情報保持手順により保持される制御情報に基づいて、上記主画像内にて指示用図形画像が合成されて表示されるように制御する指示用図形画像表示制御手順と、
を実行することを特徴とする画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えばテレビ会議システムの構成要素となる通信端末装置と、この通信端末装置に適用できる画像処理方法に関する。
【背景技術】
【０００２】
テレビ会議システムにおいては、互いに離れた会議場などの場所ごとにテレビ会議システム対応の端末装置を設け、さらにこの端末装置に撮像装置及びディスプレイ装置を接続する。そして、１つの近端としての或る会議場においては、例えばその会議場に居る会議参加者などを撮像装置により撮像して得た撮像画像を端末装置経由で、遠端となる他の会議場の端末装置に対して送信する。遠端側の端末装置は、近端側から送信されてきた撮像画像を受信し、これを自身に接続されているディスプレイに表示させる。
また、端末装置には、マイクロフォンとスピーカも接続され、近端側のマイクロフォンにより収音して得られる近端話者の音声信号を、端末装置経由で遠端側に送信する。遠端側の端末装置では、受信した音声信号をスピーカから出力する。
これにより、テレビ会議システムによっては、通信相手の会議場の様子をディスプレイ装置に表示させながら会話を行うようにして、会議を進行させていくことができる。
【０００３】
また、実際の会議などにおいては、資料を用いての説明を行う必要のある場面も生じ得るが、撮影した資料を表示しながらも、あとは単に音声により会話をするというのでは、意志の疎通が円滑に行われない場合がある。
そこで、特許文献１においては、「一方の通信装置におけるスーパーインポーズ手段からの映像を両通信装置のモニタに表示させることとして、一方の通信装置のマウス操作による位置情報とマウスボタンの操作情報を描画手段に与え、描画手段はこれらの情報よりポインタ図形をモニタに表示するための信号を発生し、また点、直線、円の表示信号を発生する」ようにした構成が記載されている。
【０００４】
【特許文献１】特開平８−１６３５２８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
本願発明としても、テレビ会議システムにおいて、例えば資料などを提示して会議を進行させていくのにあたり、ポインタ図形に相当するものを表示させることで、会議における意思疎通の円滑化を図ろうとするものであり、そのうえで、図形表示に関連した操作、制御処理などについて、より簡易化、効率化が図られるようにすることを目的とする。
【課題を解決するための手段】
【０００６】
そこで本発明は上記した課題を考慮して、通信端末装置として次のように構成する。
つまり、画像信号を入力する画像信号入力手段と、他の通信端末装置との間での通信を実行する通信手段と、その態様が定められている所定数の指示用図形画像のうちから、表示すべき指示用図形画像を選択する操作が行われる操作手段と、画像信号入力手段により入力した画像信号を、主画像若しくはその画像部分として表示出力させるとともに、操作手段に対する操作により指示用図形画像が選択されたことに応じては、この選択された指示用図形画像が主画像内にて合成されて表示出力されるように制御する表示制御手段と、画像信号入力手段により入力した画像信号を、他の通信装置側において主画像若しくはその画像部分として表示出力されるべき画像信号として、通信手段により送信させる画像送信手段と、操作手段に対する操作により指示用図形画像が選択されたことに応じて、この選択された指示用図形画像が、他の端末装置側にて表示されているとする主画像内にて合成されて表示されるようにするための制御情報を生成する制御情報生成手段と、制御情報を通信手段により送信させる制御情報送信制御手段とを備えることとした。
【０００７】
また、他の通信端末装置との間での通信を実行する通信手段と、この通信手段により受信され、その態様が定められている所定数の指示用図形画像のうちのいずれかの指示用図形画像を表示させるために他の通信端末装置から送信されてきた制御情報を保持する制御情報保持手段と、通信手段により受信され、他の通信端末装置から送信されていた画像信号を、主画像若しくはその画像部分として表示出力させる主画像対応表示制御手段と、制御情報保持手段が保持する制御情報に基づいて、主画像内にて指示用図形画像が合成されて表示されるように制御する指示用図形画像表示制御手段とを備えることとした。
【０００８】
上記構成によっては、近端の通信端末装置側と、遠端（他の）の通信端末装置側との間で、近端側にて入力した画像信号を共通に表示出力させることができる。そのうえで、指示用図形画像を、近端側と遠端側にて表示される画像に対して合成して表示させることが可能となる。
そして、表示すべき指示用図形画像は、その態様が定められた所定数のもののうちから、近端の通信端末装置に対する操作により選択するようにされる。つまり、ユーザが指示用図形画像を表示させようとするときには、予め用意された指示用図形画像のうちから適当なものを選ぶという操作を行えばよい。
また、遠端の通信端末装置側にて主画像内にて指示用図形画像を表示させるのにあたっては、近端の通信端末装置から遠端の通信端末装置に対して、指示用図形画像を合成した主画像の画像信号を送信するのではなく、指示用図形画像表示のための制御情報を送信し、遠端の通信端末装置が、この制御情報に基づいて指示用図形画像を表示させるように動作する。
【発明の効果】
【０００９】
このようにして本発明は、近端の通信端末装置側と遠端の通信端末装置側において共通に表示される画像に対して指示用図形画像を表示できるようにしていることで、この指示用図形画像をユーザが利用することで、テレビ会議システムなどでのコミュニケーションにおける意思疎通を充分に図ることが可能になる。そのうえで、指示用図形画像の表示は、予め用意されるもののうちから選択するという操作に応じて行われる。これにより、指示用図形画像を表示させるための操作としては非常に簡易化されたことになり、それだけ操作性が向上されることになる。また、指示用図形画像はその態様が予め定められているから、描画、表示のための処理、アルゴリズムも簡易化できる。また、遠端の通信端末装置側にて指示用図形画像を表示させるのにあたっては、制御情報を送信して、遠端の通信端末装置側にて指示用図形画像表示のための制御を実行させることになるので、通信処理も軽く、効率的なものとすることができる。
【発明を実施するための最良の形態】
【００１０】
本願発明を実施するための最良の形態（以下、実施の形態という）としては、テレビジョン会議システム(テレビ会議システム)における映像送受信系に本願発明を適用する。
テレビ会議システムは、場所の異なる会議場ごとに通信端末であるテレビ会議端末装置を設置し、このテレビ会議端末装置から、撮像装置により撮影した画像と、マイクロフォンにより収音した音声を他のテレビ会議端末装置に送信させると共に、他のテレビ会議端末装置から送信されてきた画像と音声を受信して、それぞれ、ディスプレイ装置、スピーカから出力させるように構成される。つまり、テレビ会議システムでは、画像を相互に送受信する映像送受信系と、音声を相互に送受信する音声送受信系とを備える。そして、本実施の形態としては、上記映像送受信系として撮像画像を送受信するために設けられるテレビ会議端末装置を中核とするシステムが該当する。
【００１１】
図１は、テレビ会議システムにおける映像送受信系を主体とするシステム構成例を示している。
この場合には、互いに離れた２つの場所Ａ、場所Ｂが会議場とされており、これらの場所Ａ，Ｂのそれぞれにおいて、テレビ会議端末装置１−１、１−２が設置される。これらのテレビ会議端末装置１−１、１−２は、所定の通信方式に対応する通信回線により接続されて、相互通信が可能なようにされている。
また、場所Ａにおいては、テレビ会議端末装置１−１とともに、撮像装置２−１、雲台３−１、ディスプレイ装置４−１が備えられる。
撮像装置２−１は、画角調整のためのズーム機構を備え、雲台３−１に取り付けられている。雲台３−１は、パン機構とチルト機構を備えることで、取り付けられた撮像装置の撮像方向（撮像視野）を、所定角度範囲で上下方向及び左右方向に変更することが可能とされている。
また、リモートコントローラ５−１は、テレビ会議端末装置１−１の動作をユーザが遠隔操作するために設けられる。
【００１２】
また、この場合においては、テレビ会議端末装置１−１に対して接続されるようにして、パーソナルコンピュータ６及びペンタブレット７が備えられる。
パーソナルコンピュータ６からテレビ会議システム１−１に対しては、例えばＵＩ(User Interface)としての画像に対応する所定形式の表示用の画像信号を出力するようにされる。
ペンタブレット７は、ポインティングデバイスの１つであり、タブレットの面上に対してペンを近づける、当てるなどの各種の操作を行うことができる。このペンタブレット７−１のタブレットに対して行われたペン操作に応じた操作信号が、テレビ会議端末装置１−１に対して入力されるようになっている。
【００１３】
同様にして、場所Ｂにおいては、テレビ会議端末装置１−２とともに、撮像装置２−２、雲台３−２、ディスプレイ装置４−２、及びリモートコントローラ５−２が備えられる。ただし、ここでは、テレビ会議端末装置１−２側においては、パーソナルコンピュータ６、及びペンタブレット７は示されていないものの、実際においては、テレビ会議端末装置１−２側にも、パーソナルコンピュータ６、及びペンタブレット７を備えて接続した構成としてもよい。
【００１４】
なお、以降の説明において、テレビ会議端末装置、撮像装置、雲台、ディスプレイ装置、リモートコントローラ、などについて、特に離れた場所にある同一のものを区別する必要のない場合には、テレビ会議端末装置１、撮像装置２、雲台３、ディスプレイ装置４、リモートコントローラ５などのようにして表記する。
また、音声送受信系については、ここでは図示は省略している。
【００１５】
この図に示される映像送受信系の基本的動作は、例えば次のようになる。
先ず、場所Ａにおいて、撮像装置２−１により撮像して得られた動画像としての画像信号(撮像画像信号)は、テレビ会議端末装置１−１に入力される。テレビ会議端末装置１−１は、入力された画像信号を、通信回線を経由してテレビ会議端末装置１−２に対して送信する。テレビ会議端末装置１−２は、上記のようにして送信されてきた撮像画像信号を受信し、ディスプレイ装置４−２から出力させる。
また、同様にして、場所Ｂ内の撮像装置２−２により撮像して得られた画像信号は、テレビ会議端末装置１−２によりテレビ会議端末装置１−１に送信される。テレビ会議端末装置１−１では、受信した画像信号を、ディスプレイ装置４−１から出力させる。
このようにして、テレビ会議システムの映像送受信系では、映像の双方向通信を行うものであり、これにより、例えば或る１つの場所にいる会議参加者は、他の場所の会議場の様子を視覚的に把握することができる。
なお、内部の信号切り換えにより、テレビ会議端末装置１−１は、撮像装置２−１から入力される撮像画像信号の画像を、ディスプレイ装置４−１により表示出力させることも可能である。
【００１６】
また、以降においては、図１に示される場所Ａ側のテレビ会議端末装置１−１及びその周辺装置からなるシステムを「近端」として扱い、場所Ｂ側のテレビ会議端末装置１−２及びその周辺装置からなるシステムを「遠端」として扱って説明を行う場合がある。
【００１７】
図２は、１つの場所において備えられるテレビ会議システム（テレビ会議端末装置とその周辺装置）を、テレビ会議端末装置１の内部構成例とともに示している。なお、図１との対応では、テレビ会議端末装置１−１、１−２は、この図２に示す構成を共通に有するものとして考えてよい。また、この図においても、音声送受信系に対応する部位についての図示は省略している。
【００１８】
この場合の撮像装置２においては、撮像のための光学系と、撮像光を利用して非圧縮の動画像としての画像信号を生成する信号処理部とを備えるものとされる。撮像装置２から出力される画像信号（撮像画像信号）は、テレビ会議端末装置１における画像信号処理／表示制御部１１に対して入力される。
また、撮像装置２の光学系に対応しては、ズームレンズの位置を移動させて画角を変更するための機構を有して成る、ズーム機構部２ａを備える。
また、雲台３は、取り付けられた撮像装置２の撮像視野を左右に変更するための機構であるパン機構部３ａと、上記撮像視野を上下に変更するための機構であるチルト機構部３ｂとを有して成る。
【００１９】
画像信号処理／表示制御部１１は、入力される画像信号について必要に応じて所定の信号処理を実行するとともに、ディスプレイ装置４に対して画像を表示させるための表示制御を実行する。
【００２０】
例えば、画像信号処理／表示制御部１１は、撮像装置２から入力される撮像画像信号について必要に応じて所要の信号処理を施したうえで、エンコーダ１２に転送する。
【００２１】
エンコーダ１２は、入力される画像信号について所定方式による画像圧縮符号化処理を実行して、通信部１４に対して転送する。通信部１４は、制御部１８の制御に応じて、エンコーダ１２から転送されてくる圧縮画像信号について、所定の通信方式に従って、通信回線経由で、他のテレビ会議端末装置に対して送信する。
【００２２】
また、他のテレビ会議端末装置から送信されてきた圧縮画像信号は、通信部１４にて受信されて、デコーダ１３に転送される。
デコーダ１３は、入力されてくる圧縮画像信号について、画像圧縮符号化に対する復調（デコード）処理を実行して所定形式の画像信号を得る。このようにして得た画像信号を画像信号処理／表示制御部１１に転送する。
【００２３】
画像信号処理／表示制御部１１は、例えば上記のようにしてデコーダ１３から転送される画像信号の画像がディスプレイ装置４にて表示されるようにするための表示制御を実行することができる。これにより、他の会議場において撮影された画像が、ディスプレイ装置４にて表示されることになる。
また、画像信号処理／表示制御部１１は、上記撮像画像信号について、ディスプレイ装置４にて所定の態様により表示されるようにして表示制御を実行することも可能とされている。
さらに、画像信号処理／表示制御部１１は、制御部１８の制御に応じて、各種の操作画像をディスプレイ装置４により表示させるための画像生成処理、表示制御処理を実行可能とされている。
なお、画像信号処理／表示制御部１１は、その一部、あるいは全ての機能をＤＳＰ(Digital Signal Processor)により構成することができる。
【００２４】
また、このテレビ会議端末装置１は、撮像装置２の撮像視野を可変制御する機能を有するものとされている。ここでの撮像視野の可変は、パン制御、チルト制御、ズーム制御の組み合わせによるものとする。パン制御、チルト制御は、撮像方向をそれぞれ左右方向と上下方向とで可変する制御で、ズーム制御は、撮像装置の画角を変更する制御である。これに対応して、テレビ会議端末装置１は、ＰＴＺ（ＰＴＺ:Pan(Panning),Tilt(Tilting),Zoom(Zooming)）駆動制御部１５を備える。
【００２５】
ＰＴＺ駆動制御部１５は、図示するようにして、パン／チルト駆動制御部１６とズーム駆動制御部１７とを備える。
パン／チルト駆動制御部１６は、制御部１８からのパン方向における移動量の指示情報に応じて、雲台３が備えるとされるパン機構部３ａにおけるパンモータを駆動するための駆動信号を生成して出力する。同様に、制御部１８からのチルト方向における移動量の指示情報に応じて、雲台３が備えるとされるチルト機構部３ｂにおけるチルトモータを駆動するための駆動信号を生成して出力する。これにより、撮像装置２の撮像視野として、左右方向（パン方向）と上下方向（チルト方向）の撮像方向を変更する変更することが可能とされる。
また、ズーム駆動制御部１７は、制御部１９からの画角変更量の指示情報に応じて、撮像装置２の光学系において備えられるズーム機構部２ａにおけるズームモータを駆動するための駆動信号を生成して出力する。これにより、撮像視野として、画角を変更することが可能になる。
【００２６】
制御部１８は、例えばＣＰＵ、ＲＯＭ、ＲＡＭなどを有して成るマイクロコンピュータなどにより構成されるもので、テレビ会議端末装置１についての全体制御を実行する。
【００２７】
記憶部１９は、例えば不揮発性の記憶デバイスから成るもので、制御部１８が必要な各種のプログラム、データなどを記憶する。
【００２８】
リモートコントローラ５は、テレビ会議端末装置１の動作についての各種の操作をユーザが行うための所要の操作子を備え、これらの操作子に対する操作に応じて、赤外線、あるいは電波などにより操作情報信号を送信する。この操作情報信号は、受信部２０にて受信復調されて制御部１８に入力される。制御部１８は、入力される操作情報信号に応答して所要の制御、処理を実行する。
【００２９】
また、この場合のテレビ会議端末装置１においては、ＰＣ画像入力端子２１が備えられる。ＰＣ画像入力端子２１とパーソナルコンピュータ６の外部映像出力端子とを接続することで、テレビ会議端末装置１は、パーソナルコンピュータ６から出力される画像信号（ＰＣ画像信号）を入力することができる。このようにして入力されるＰＣ画像信号は、ここでは、画像信号処理／表示制御部１１に対して入力されるものとしている。
例えば図１との対応では、近端となるテレビ会議端末装置１−１では、制御部１８の制御により、画像信号処理／表示制御部１１に入力されるＰＣ画像信号について、自身と接続されるディスプレイ装置４−１に対して画像として表示させることが可能とされる。また、撮像装置２−１から入力される撮像画像信号と同様にして、遠端となるテレビ会議端末装置に対して送信することも可能とされている。
なお、テレビ会議端末装置１−１は、撮像画像信号とＰＣ画像信号とが入力されている場合、画像信号の送信を行うのにあたり、いずれか一方のみの画像信号を選択して送信することもできるし、例えば時分割多重などの伝送技術を利用して、両者の画像信号を同時的に送信することも可能である。この場合、画像信号を受信する遠端となるテレビ会議端末装置１−２側では、撮像画像信号とＰＣ画像信号とを同時的に受信取得できることになるが、その表示に関しては、例えばユーザ操作などに応じて、両者の画像信号の画像を、ディスプレイ装置４−２における画面上に所定の態様により同時表示させることもできるし、いずれか一方のみを選択して表示させることもできる。
【００３０】
また、テレビ会議端末装置１は、タブレット端子２２を備える。このタブレット端子２２に対してペンタブレット７が接続されることで、テレビ会議端末装置１に対してペンタブレット７からの操作信号（ペンタブレット操作信号）が入力されることになる。例えば制御部１８は、そのときに起動されているペンタブレット対応のアプリケーションに従い、入力されるペンタブレット操作信号に応じた所要の制御処理を実行する。
【００３１】
なお、上記ＰＣ画像入力端子２１に対応した有線によるインターフェース経由でパーソナルコンピュータ６からＰＣ画像信号を入力するのに代えて、例えば何らかの無線によるインターフェース経由でインターフェース経由でＰＣ画像信号を入力するようにしてよい。また、同様に、ペンタブレット７側についても、タブレット端子２１に対応した有線によるインターフェースに代えて、無線によるインターフェース経由でペンタブレット操作信号を入力するようにしてよい。
【００３２】
ここで、上記したペンタブレット対応のアプリケーションとして一般的なものの１つとして、タブレットに対するペン操作の軌跡に応じた線画などを描画するためのものが挙げられる。このようなアプリケーションでは、入力されるペンタブレット操作信号が示す位置情報などに応じて描画した画像が、自身に接続されるディスプレイ装置４に表示させている画像上に表示されるようにして制御処理を実行するようにされる。あるいは、遠端のテレビ会議端末装置に対して送信すべき画像に、ペンタブレット操作信号に応じて描画した画像を合成するように制御処理を実行するようにされる。
【００３３】
すると、例えば図１に示したシステム構成のようにして、近端のテレビ会議端末装置１−１に対してパーソナルコンピュータ６とペンタブレット７とが接続されている環境では、次のような会議の進め方とすることができる。
つまり、パーソナルコンピュータ６に資料となるデータを保存しておいて、この資料のデータを開いて表示させた状態の画像（ＰＣ画像信号）をテレビ会議端末装置１−１に入力させる。テレビ会議端末装置１−１では、自身に接続されるディスプレイ装置４−１に対して、このときのＰＣ画像信号を画像として表示出力させる。また、このＰＣ画像信号を、遠端のテレビ会議端末装置１−２に対して送信し、テレビ会議端末装置１−２側においても、ディスプレイ装置４−２により、受信したＰＣ画像信号を画像として表示出力させる。これにより、近端側のディスプレイ装置４−１と遠端側のディスプレイ装置４−２の双方において、パーソナルコンピュータ６で開いている同じ資料の画像が表示される。つまり、場所Ａ、Ｂの会議参加者が全て、同じ資料の画像を見ることができる。
【００３４】
そのうえで、ペンタブレット７による操作によっては、そのときに入力されている表示画面部４０に表示される画像上に、タブレット上でのペンの移動軌跡に応じた描画が行えるように設定しておくようにする。これにより、場所Ａ側の或る会議参加者が、例えば資料についての説明にあたり、ディスプレイ装置４−１に表示される資料の画像を見ながらペンタブレット７を操作することで、例えば資料が表示される画像上に、適宜、必要な線画の書き込みを行っていくことができる。このようにすれば、単に資料の画像を見ながら、あとは会話のみに頼るような会議の進め方とするよりも、場所Ａ、Ｂの会議参加者双方での資料への理解であるとか、相互の意志の疎通が円滑になることが期待される。
【００３５】
ただし、上記のようなペンタブレット７を用いた描画のためのペン操作は、比較的に複雑であって、例えば或る程度の時間が空くことになり、また、誤操作なども多くなりがちなので、実際には会議の円滑な進行の妨げになっているようなこともしばしばある。また、上記の描画操作は、いわゆるフリーハンドによる書き込みとなるのであるが、ペンタブレット７に対する操作によるフリーハンドの書き込みは、或る程度慣れていないと、意図している通りの描画を行うことが難しいという問題もある。
また、単純に、テレビ会議端末装置１は、他にも音声、通信に関連した処理を実行する必要があるが、上記したようなタブレットの操作に応じた描画の処理は、画像処理としては相応に重い処理となるので、できればより軽いものとなることが好ましいということもある。
【００３６】
そこで、本実施の形態は、テレビ会議端末装置１が実装する、ペンタブレット７に対応するアプリケーションとして次のような描画機能のものを提案する。
先ず、図３、図４を参照して、本実施の形態のペンタブレット対応の描画機能がどのようなものであるのかについて説明する。
【００３７】
図３（ａ）には、ディスプレイ装置４における表示画面部４０において、ＰＣ画像信号に基づいた画像（ＰＣ表示画像４１）と、撮像装置２からの撮像画像信号に基づいた画像（撮像表示画像４２）を同時的に表示させている状態が示されている。
なお、撮像表示画像４２としては、通信相手側から送信されてきた撮像画像信号の画像を表示出力させているものとする。つまり、通信相手側にて撮像されている画像を表示させている。
【００３８】
また、上記図３（ａ）を含み、図３及び図４に示される表示画面部４０における画像内容は、近端側のディスプレイ装置４−１にて表示されているものを示している。
従って、先に述べた図１との対応からすれば、ＰＣ表示画像４１としては、同じ近端のテレビ会議端末装置１−１が入力しているパーソナルコンピュータ６からのＰＣ画像信号のものとなり、撮像表示画像４２としては、遠端側の撮像装置２−２により撮像されてテレビ会議端末装置１−２から送信されてきた撮像画像信号のものとなる。
【００３９】
ただし、ＰＣ表示画像４１と撮像表示画像４２については、遠端のテレビ会議端末装置１−２側のディスプレイ装置４−２の表示画面部４０においても、この図に示される態様の表示が行われているものとする。
この場合のＰＣ表示画像４１は、通信相手である近端のテレビ会議端末装置１−１から送信してくるＰＣ画像信号のものとなり、撮像表示画像４２としても、通信相手である近端の撮像装置２−１により撮像されてテレビ会議端末装置１−１から送信されてきた撮像画像信号のものとなる。
このようにして、先にも述べたように、ＰＣ表示画像４１については、近端側のディスプレイ装置４−１と、遠端側のディスプレイ装置４−２とで、共通内容の画像が表示されている。
【００４０】
ここで、場所Ａ（近端側）における或る会議参加者が、例えばＰＣ表示画像４１の内容を説明するのにあたり、目印になるようなものを書き込みたいと思ったとする。このような場合、この参加者は、ペンタブレット７（あるいはリモートコントローラ５−１でもよい）を操作して、図３（ｂ）に示すようにして、表示画面部４０に対してマーク画像選択ウィンドウ４３を表示させる。
【００４１】
このマーク画像選択ウィンドウ４３は、ペンタブレット７が接続されている近端側のテレビ会議端末装置１−１に接続しているディスプレイ装置４−１においてのみ表示されるようにすればよい。
このマーク画像選択ウィンドウ４３は、例えば、所定数のマーク画像選択ボタン４４が配列表示される態様となっている。マーク画像選択ボタン４４の各々は、それぞれ異なる所定の図柄・図形・デザインによるマーク画像に対応している。この場合には、最も左のマーク画像選択ボタン４４が×の図形のマーク画像に対応し、左から２番目のマーク画像選択ボタン４４が○の図柄のマーク画像に対応し、左から３番目のマーク画像選択ボタン４４が△の図柄のマーク画像に対応し、左から４番目のマーク画像選択ボタン４４が□の図柄のマーク画像に対応する。個々のマーク画像選択ボタン４４には、対応するマーク画像の図柄が配置表示されて示されている。
そのうえで、これらのマーク画像選択ボタン４４におけるいずれか１つに対して、選択指示枠４５が配置表示される。この選択指示枠４５が配置されているマーク画像選択ボタン４４が、現在において選択決定候補となっていることを示す。
【００４２】
例えばペンタブレット７の操作者は、ペンタブレット７に対する所定操作により、所望のマーク画像の図柄に対応するマーク画像選択ボタン４４に対して選択指示枠４５を移動させることができる。そして、この場合においては、ペンタブレット７の操作者は、図３（ｂ）から図４（ａ）へのマーク画像選択ウィンドウの表示の遷移として示すようにして、左から２番目の○の図柄に対応するマーク画像選択ボタン４４に選択指示枠４５を移動して配置させたものとする。そして、この状態において、ペンタブレット７に対する所定操作により、決定操作を行ったとする。これにより、○の図柄のマーク画像の選択が確定されたことになる。
【００４３】
そして、上記のようにして○の図柄のマーク画像の選択が確定されたことに応じては、同じ図４（ａ）に示すようにして、表示画面部４０に対応する画像（主画像）上に、新たに○の図柄のマーク画像４６が表示されるようになる。
そして、このようにしてマーク画像４６を表示させて以降は、例えばペンタブレット７に対するドラッグ操作によって、マーク画像４６を表示画面部４０上の任意の位置に移動して配置させることができる。例えば図４（ａ）から図４（ｂ）への遷移として示すようにして、ＰＣ表示画像４２において示されている折れ線グラフにおける所望の位置に対して、マーク画像４６を配置させることができる。
【００４４】
このようにして、本実施の形態では、例えば表示画面部４０におけるＧＵＩ(Graphical User Interface)を利用して、予めその図柄・図形・デザインが定められたマーク画像のうちから、所望のマーク画像を選択する操作を行うことで、その選択したマーク画像（指示用図形画像）４６を表示画面部４０上に表示させることができる。
このような操作であれば、例えばユーザは、ペンタブレット７によりフリーハンドで書き込むようにしてマークを描画するような面倒で難しい操作を行う必要がない。
【００４５】
そして、そのための仕組みについては後述するが、マーク画像４６は、遠端のテレビ会議端末装置１−２側のディスプレイ装置４−２の表示画面４０上においても、近端のテレビ会議端末装置１−１側のディスプレイ装置４−１の表示画面４０上にて表示されているのと同じ図柄と位置により表示されるようになっている。従って、例えばマーク画像選択ボタン４４に対する選択決定操作が行われたことに応じては、遠端側のディスプレイ装置４−２の表示画像４２においても、図４（ａ）と同じ図柄と位置にてマーク画像４６が新たに表示される。そして、ペンタブレット７に対する操作に応じて、近端側のディスプレイ装置４−１において図４（ａ）から図４（ｂ）に示すようにして表示が変化しているときには、同じ表示の変化が遠端側のディスプレイ装置４−２においても現れている。
【００４６】
なお、本実施の形態においては、例えば先の図３（ｂ）、図４（ａ）により説明したマーク画像選択ボタン４４に対する選択決定操作により、表示画面部４０上に、複数のマーク画像４６を配置表示させ、これらの各表示位置もドラッグ操作により移動可能とされている。また、このときには、同じ図柄のマーク画像４６も複数配置表示させることができるものとする。
また、表示画面部４０に表示されたマーク画像４６は、ペンタブレット７に対する所定操作により、任意のものを選択して消去することも可能とされているものとする。
【００４７】
図５は、上記したマーク画像の表示に対応するテレビ会議端末装置１の構成例を抜き出して示している。なお、この図に示す構成は、近端側のテレビ会議端末装置１−１とともに、遠端側のテレビ会議端末装置１−２も有するものとされる。
【００４８】
制御部１８は、例えばプログラムを実行することで得られる処理機能として、図示するようにして、マーク画像処理ブロック３０を有する。また、記憶部１９には、マーク画像データ１９ａを記憶する。
また、マーク画像処理ブロック３０は、ペンタブレット７からのペンタブレット操作信号を入力して、マーク画像表示に関連した処理を実行する。つまり、図３（ｂ）、図４（ａ）に示したマーク画像選択ウィンドウ４３としてのＧＵＩに関する処理と、図４（ａ）（ｂ）に示した、マーク画像４６の表示に関する処理を実行する。
また、ここでのマーク画像処理ブロック３０は、マーク画像４６の表示のためには、記憶部１９に記憶されるマーク画像データ１９ａを用いることとしている。このマーク画像データ１９ａには、予め定めた図柄のマーク画像を表すデータから成るものとされる。マーク画像処理ブロック３０は、このマーク画像データ１９ａを参照して利用することで、マーク画像選択ボタン４４に対する選択決定操作に応じて指定されることとなる図柄のマーク画像を描画する処理を行うことができる。
マーク画像処理ブロック３０は、例えば描画処理により生成した、マーク画像選択ウィンドウ４３としてのＧＵＩ画像の画像データ、また、マーク画像４６としての画像データを、画像信号処理／表示制御部１１における画像合成処理部３１に対して出力する。また、この際には、マーク画像処理ブロック３０は、出力した画像データが表す画像についての、主画像上での表示位置を画像信号処理／表示制御部１１に対して指定するようにもされる。
【００４９】
また、マーク画像処理ブロック３０は、適宜、通信部１４を制御して、例えば後述するようにして、他の通信端末装置との間で、表示指示情報の送受信を行うようにもされている。
【００５０】
この場合の画像合成処理部３１は、図３、図４に示した表示態様例に対応させて、ＰＣ表示画像４１、撮像表示画像４２、マーク画像選択ウィンドウ４３、マーク画像４６を合成した画像を表示可能なようにするための画像信号処理（画像合成処理）を実行する部位とされる。
この図に示すようにして、画像合成処理部３１には、撮像画像信号、ＰＣ画像信号、及びマーク画像選択ウィンドウ４３の画像データ、マーク画像４６の画像データが入力されるようになっている。ここで、ＰＣ画像信号については、近端のテレビ会議端末装置１−１の場合には、自身に接続されたパーソナルコンピュータ６から入力したものとなる。これに対して、遠端側のテレビ会議端末装置１−２においては、近端のテレビ会議端末装置１−１から送信されてきたものを受信して得られるパーソナルコンピュータ６のＰＣ画像信号となる。
【００５１】
画像合成処理部３１は、上記のようにして入力されてくる画像信号、画像データについて、例えばデジタル画像処理により合成することで、例えば図３、図４に示される態様の表示の画像を生成する。そして、合成処理後の１画面分の表示用画像信号をディスプレイ装置４に対して出力する。これにより、実際に表示画面部４０において図３、図４に示した画像が表示されることになる。
なお、確認のために述べておくと、この場合において、マーク画像４６が表示されるべき主画像とは、少なくともＰＣ表示画像４１、撮像表示画像４２を含む、表示画面部４０全体に対応する１画面分の有効画像領域にて表示されている画像となる。
【００５２】
図６は、本実施の形態としてのマーク画像表示のために近端側のテレビ会議端末装置１−１、及び遠端側のテレビ会議端末装置１−２が実行する動作の手順例を示している。なお、この図に示す処理としては、例えば図３（ｂ）などに示されるようにして、既に主画像上にマーク画像選択ウィンドウ４３を表示出力させている状態にあることを前提とする。
また、この図に示す手順は、近端側のテレビ会議端末装置１−１、及び遠端側のテレビ会議端末装置１−２における、制御部１８のマーク画像処理ブロック３０が主として実行するものとしてみることができる。
【００５３】
先ず、近端側のテレビ会議端末装置１−１においては、マーク画像選択ウィンドウ４３を表示出力させていることに応じて、このマーク画像選択ウィンドウ４３に対する操作に相当する、ペンタブレット７からの操作信号を入力して処理することとされている。そして、ステップＳ１０１により、マーク画像の選択決定操作、即ち、図３（ｂ）、図４（ａ）にて説明した、マーク画像選択ウィンドウ４３内のマーク画像選択ボタン４４についての選択決定操作が行われたか否かを判別することとしている。
ステップＳ１０１にて、肯定の判別結果が得られた場合には、ステップＳ１０２、Ｓ１０３の手順を実行してからステップＳ１０４に進む。これに対して、否定の判別結果が得られた場合にはステップＳ１０２、Ｓ１０３の手順をスキップしてステップＳ１０４に進む。
【００５４】
ステップＳ１０２においては、上記ステップＳ１０１に対応して選択決定されたマーク画像についての表示指示情報を新規に生成する。この表示指示情報（制御情報）は、画像ＩＤ、図柄情報、及び位置情報から成る。そして、新規生成した表示指示情報を、自身におけるマーク画像表示制御（ステップＳ１１０）のために、例えば制御部１８が有するとされるＲＡＭなどに保持させる。
【００５５】
画像ＩＤは、今回のステップＳ１０１に対応して選択決定されたことに応じて主画面上に表示されることとなるマーク画像に対応して固有となるようにして付される識別子（番号）となるものである。従って、例えば、同じ図柄であっても複数のマーク画像４６を表示させているとすれば、これらのマーク画像４６に対しては、それぞれ異なる画像ＩＤが付されていることになる。図６に示す近端側のテレビ会議端末装置１−１の手順が開始されてからは、ステップＳ１０２が実行される都度、表示指示情報の生成処理の１つとして、所定規則に従って、過去に生成したものと重複しない画像ＩＤを発生させることになる。
【００５６】
また、図柄情報は、今回のステップＳ１０１に対応して選択決定されたことに応じて主画面上に表示されることとなるマーク画像の図柄が何であるのかを示す情報となる。例えば、図３、図４に示した例との対応であれば、マーク画像の図柄としては、×、○、△、□の４つの図柄が予め用意されている。従って、図柄情報としては、これら４つの図柄のうちのいずれの図柄のものであるのかを示すものとなる。なお、図柄情報の実体としては、例えば実際のマーク画像の描画のために利用可能な形式の画像データ自体とされてもよいし、対応する図柄のマーク画像を描画する処理を実行させるために記述されたプログラム、スクリプト、コマンドなどとされてもよい。
【００５７】
位置情報は、主画面としての画像上において、対応するマーク画像４６を配置表示すべき位置を示す情報となる。
【００５８】
ステップＳ１０３においては、上記ステップＳ１０２にて新規生成した表示指示情報を、遠端側のテレビ会議端末装置１−２に対して送信させるための制御を実行する。
【００５９】
ステップＳ１０４においては、ペンタブレット７に対して行われた操作として、現在において、近端側と遠端側の双方にて表示中とされるマーク画像４６を主画像上で移動させるためのドラッグ操作が行われたか否かを判別する。ここで、肯定の判別結果が得られたのであれば、ステップＳ１０５、Ｓ１０６の手順を実行してからステップＳ１０７に進むが、否定の判別結果が得られたのであれば、そのままステップＳ１０７に進む。
【００６０】
ステップＳ１０５においては、今回のステップＳ１０４に対応する移動操作に応じて、移動対象のマーク画像についての表示指示情報における位置情報を更新する。つまり、マーク画像４６の移動操作に応じた操作信号が示す座標の変化量などに基づいて、このマーク画像４６が表示されるべき位置情報を新たに求め、この位置情報により、これまでの位置情報を上書きするようにして書き換えを実行するものである。
そして、ステップＳ１０６により、上記ステップＳ１０５により位置情報を更新させた表示指示情報を、遠端側のテレビ会議端末装置１−２に対して送信する。なお、このときには、更新後の表示指示情報そのものを送信することに代えて、指定の表示指示情報における位置情報が更新されたことを通知するコマンドとともに、更新後の位置情報を送信するようにしてもよい。このとき位置情報が更新された表示指示情報を特定するための情報には、画像ＩＤを用いることができる。先の説明からも理解されるように、画像ＩＤは、現在表示中とされるマーク画像ごとに個別となる識別子であり、従って、表示されるマーク画像４６ごとに対応して生成される表示指示情報ごとにも対応して固有となるからである。
【００６１】
ステップＳ１０７においては、ペンタブレット７に対する操作として、現在において表示中とされるマーク画像を消去するための操作が行われたか否かを判別する。ここで肯定の判別結果が得られた場合には、ステップＳ１０８、Ｓ１０９の手順を実行してからステップＳ１１０に進むが、否定の判別結果が得られたのであれば、そのままステップＳ１１０に進む。
【００６２】
ステップＳ１０８においては、例えば現在においてＲＡＭなどに保持させている表示指示情報のうちから、今回のステップＳ１０７にて判別された消去操作の対象となったマーク画像４６についての位置情報を削除する。
また、これとともに、ステップＳ１０９により、同じ今回のステップＳ１０７にて判別された消去操作の対象となったマーク画像４６に対応する表示指示情報の削除を要求するコマンドを送信する。このときにも、削除要求の対象となる表示指示情報を示すのには画像ＩＤを用いることができる。
【００６３】
ステップＳ１１０においては、現在において、例えばＲＡＭに保持しているとされる表示指示情報ごと内容に基づいて、マーク画像４６を表示出力させるための描画処理、及び表示制御を実行する。
つまり、例えばマーク画像処理ブロック３０は、１つの表示指示情報に対応しては、その表示指示情報が有する図柄情報が示す図柄に対応するマーク画像表示のためのデータを、マーク画像データ１９ａから読み出して取得し、このデータに基づいて描画処理を実行する。そして、この描画処理によって生成されるマーク画像としての部分画像のデータを、同じ表示指示情報が有する位置情報が示す主画像内の位置にて合成するようにして、画像合成処理部３１における画像合成処理についての制御を実行する。
このような描画処理、表示制御処理を、現在保持している表示指示情報ごとに実行する。この結果、ユーザ操作に応じたマーク画像の表示が得られることになる。
なお、この図に示される手順の流れでは、表示指示情報を１つも保持していない場合でもステップＳ１１０の手順に進むことになるが、この場合の実際としては、ステップＳ１１０において、マーク画像表示に必要な表示指示情報が存在しないことが認識されるので、マーク画像表示のための実質的な制御は実行しないようにされる。
ステップＳ１１０の手順を実行したとされると、ステップＳ１０１に戻る。
【００６４】
次に、遠端側のテレビ会議端末装置１−２のマーク画像処理ブロック３０が実行するものとされる手順について説明する。
遠端側では、先ず、ステップＳ２０１により、近端側のテレビ会議端末装置１−１のステップＳ１０３、Ｓ１０６、Ｓ１０９の実行に応じて送信されてくる、新規に生成された表示指示情報（新規表示指示情報）、更新された表示指示情報（更新表示指示情報）、削除要求のいずれかの情報が受信されるのを待機する。そして、これらの情報のうちのいずれかが通信部１４にて受信されてマーク画像処理ブロック３０に渡されたとすると、ステップＳ２０１において肯定の判別結果が得られることとなって、ステップＳ２０２以降の手順に進む。
【００６５】
ステップＳ２０２においては、今回のステップＳ２０１に対応して受信した情報が、新規表示指示情報、更新表示指示情報、削除要求のいずれであるのかを判別する。
受信した情報が新規表示指示情報である場合にはステップＳ２０３に進み、更新表示指示情報である場合にはステップＳ２０４に進み、削除要求である場合にはステップＳ２０５に進む。
【００６６】
ステップＳ２０３においては、受信した新規表示指示情報を、例えばＲＡＭなどに保持させる。
【００６７】
ステップＳ２０４では、現在において保持されている表示指示情報のうち、受信した更新表示指示情報が有する画像ＩＤと一致する画像ＩＤを有する表示指示情報について、上記受信した更新表示指示情報の内容に書き換えるようにして更新する。ただし、先に述べたように、この場合において更新表示指示情報において更新されている内容は、位置情報のみとしていることから、実際の処理にあっては、表示指示情報のうちから位置情報のみを更新するようにしてもよい。
【００６８】
ステップＳ２０５では、現在において保持されている表示指示情報のうちから、受信した削除要求が示す画像ＩＤを有する表示指示情報を削除する。
【００６９】
ステップＳ２０６では、先に述べたステップＳ１１０と同様にして、遠端側のテレビ会議端末装置１−２において保持している表示指示情報に基づいてマーク画像４６を表示させるための制御を実行する。ここで、遠端側のテレビ会議端末装置１−２が、このステップＳ２０６の手順に利用するものとして保持している表示指示情報は、同じタイミングにて近端側のテレビ会議端末装置１−１にて保持しているとされる表示指示情報と同一となる。これにより、近端側と遠端側のディスプレイ装置４にて、同じマーク画像を同じ位置に表示させることが可能になる。
【００７０】
また、上記処理によっては、近端側と遠端側のディスプレイ装置４にて、同じマーク画像を同じ位置に表示させるのにあたっては、近端側にて主画像にマーク画像を表示させた画像の画像信号を遠端側に送信するのではなく、表示指示情報、若しくはコマンド（削除通知）の送受信により、同一の表示指示情報を共有することにより実現している。この場合、マーク画像の描画及び表示制御の処理は、近端側と遠端側のテレビ会議端末装置のそれぞれで独立して行われることになる。これにより、例えば図３、図４にて説明したようにして、近端側と遠端側のディスプレイ装置４にて表示させているＰＣ表示画像４１が共通であっても、撮像表示画像４２は互いに通信相手の撮像画像を表示させている、というように、その表示内容が異なるような場合でも、例えば、ＰＣ表示画像４１の表示サイズ、表示位置が同じでありさえすれば、マーク画像４６はＰＣ表示画像４１上で、互いに同じ位置にて表示させることができる。
そのうえで、本実施の形態では、表示指示情報が画像ＩＤを有することで、近端側と遠端側で共有する表示指示情報の間での同一性を判断することができる。これにより、更新される表示指示情報の内容についての整合を得ることができ、また、近端側と遠端側とで同じマーク画像を削除することなども可能になる。
【００７１】
また、これまでの説明においては、表示指示情報の位置情報は、表示画面部４０全体に対応する表示画像領域を主画像として扱っているが、例えば、例えばＰＣ表示画像４１のように、表示画面部４０全体に対応する表示画像領域の一部となる画像部分を主画像として扱うようにして、この部分画像としての主画像内における位置が示されるような位置情報とすることもできる。マーク画像処理ブロック３０は、このような位置情報に基づいては、主画像として表示させている部分画像上でのマーク画像４６の表示位置を、例えば表示画面部４０全体に対応する表示画像領域における一つの座標として求め、このようにして求めた座標に対してマーク画像４６を配置表示させるような制御を実行すればよい。このような構成とすれば、例えば近端側と遠端側とで、異なる位置やサイズによりＰＣ表示画像４１を表示させている状況であっても、互いのＰＣ表示画像４１上で、同じ位置に対してマーク画像４６を表示させることが可能になる。また、このときには、ＰＣ表示画像４２のサイズに適合させて、マーク画像４６の表示サイズも変更するようにして表示制御を行うことが好ましい。
【００７２】
確認のために述べておくと、本実施の形態での主画像とは、表示画面部全体に対応する画像表示領域であるか、その一部の部分画像領域であるかにかかわらず、マーク画像を配置表示させるべき画像領域とされた画像領域をいうものである。
【００７３】
また、本実施の形態のマーク画像を新規に表示させるための操作は、先にも述べたようにして、例えば、表示画面部４０において表示させたマーク画像選択ウィンドウ４３に対するボタンの選択決定操作であり、非常に簡易である。
このことからすると、本実施の形態のマーク画像表示の操作は、ペンタブレット７のような描画が行えるようなものではなくとも、例えば操作子に対する操作のみが可能とされている操作装置を用いることによっても可能であるということがいえる。そして、例えば図１、図２に示した本実施の形態の構成であれば、マーク画像表示のためには、リモートコントローラ５を用いることができるといえる。
【００７４】
そこで、変形例として、ペンタブレット７に代えて、リモートコントローラ５の操作子に対する操作に応じてマーク画像を表示させるための構成を、図７に示しておくこととする。なお、この図において図６と同一部分には同一符号を付して説明を省略する。
【００７５】
図７においては、マーク画像処理ブロック３０は、ペンタブレット７からのタブレット操作信号に代えて、受信部２０から出力されるリモコン操作信号を入力するようにされている。
例えばユーザが、リモートコントローラ５に対する操作として、マーク画像選択ウィンドウ４３を表示させるための操作を行ったとすると、これに応じたリモコン操作信号がマーク画像処理ブロック３０に入力される。マーク画像処理ブロック３０は、このリモコン操作信号の入力に応答して、マーク画像選択ウィンドウ４３を表示出力するための処理を実行する。次に、マーク画像選択ウィンドウ４３を表示させている状態の下で、例えばリモートコントローラ５の左右キーなどに対する操作によって選択指示枠４５を移動させるための操作が行われ、これに応じたリモコン操作信号が入力されると、マーク画像処理ブロック３０は、表示中の選択指示枠４５を、操作に応じた方向に配置されるマーク画像選択ボタン４４に移動するようにして表示制御を実行する。そして、リモートコントローラ５に対する決定操作に応じたリモコン操作信号が入力されることに応じては、マーク画像処理ブロック３０は、図６のステップＳ１０２、Ｓ１０３、Ｓ１１０の手順を実行するようにされる。さらに、リモートコントローラ５に対する操作として、表示中のマーク画像４６を移動させる操作であるとか、消去する操作が行われたことに応じては、ステップＳ１０５、Ｓ１０６、また、ステップＳ１０８、Ｓ１０９の手順とともにステップＳ１１０の手順を実行する。
【００７６】
また、先の実施の形態のようにして、ペンタブレット７によりマーク画像表示の操作を行うこととする場合においては、例えばペンタブレット７がテレビ会議端末装置１に特化されるようなものであれば、ペンタブレット７のタブレットの面上にマーク画像選択ボタンに相当する絵柄のシートなどを貼り付けておき、このシート上に対するポインティング操作などによって、マーク画像の選択決定が行えるようにしてもよい。
【００７７】
なお、先の説明では、表示中のマーク画像については、その位置を移動させる操作が可能とされている。例えば、それだけではなく、表示中のマーク画像を一旦消去することなく、そのまま表示させた状態で図柄を変更するような操作が可能なように構成することもできる。この場合には、操作に応じて、表示指示情報における図柄情報を書き換え、更新すればよい。
【００７８】
また、実際においては、３以上のテレビ会議端末装置１が相互に通信を行って、撮像により得られる画像信号の送受信を行うと共に、各テレビ会議端末装置１により受信画像の表示出力を実行するようにしてテレビ会議システムが構築される場合がしばしばある。本実施の形態としては、これまで説明を簡単なものとするために、２つのテレビ会議端末装置１によりテレビ会議システムを構築した場合を前提としているが、本実施の形態に基づいた構成は、上記のような３以上のテレビ会議端末装置によりテレビ会議システムを構築する場合においても何ら問題なく適用できる。
また、例えば図１、図２に示したテレビ会議システムの構成であるとか、テレビ会議端末装置１の内部構成などについても適宜変更されてよい。
【００７９】
また、図６のフローチャートに示した処理手順は、制御部１８のマーク画像処理ブロック３０が主に実行するものであるとしたが、これは、制御部１８を形成するＣＰＵがプログラムを実行することにより得られるものとしてみることができる。このプログラムは、例えば、ペンタブレットのドライバ、若しくはペンタブレットに対応するアプリケーションなどとなる。このようなプログラムは、制御部１８を形成するＲＯＭや記憶部１９などに対して製造時などに書き込んで記憶させるほか、リムーバブルの記憶媒体に記憶させておいたうえで、この記憶媒体からインストール(アップデートも含む)させるようにして上記記憶部１９などに記憶させることが考えられる。また、データインターフェース経由により、他のホストとなる機器からの制御によってプログラムのインストールを行えるようにすることも考えられる。さらに、ネットワーク上のサーバなどにおける記憶装置に記憶させておいたうえで、例えばネットワーク経由でサーバからダウンロードして取得できるように構成することも考えられる。
【図面の簡単な説明】
【００８０】
【図１】本発明の実施の形態に対応するテレビ会議システムの構成例を示す図である。
【図２】本実施の形態のテレビ会議端末装置の内部構成例を、これと接続される撮像装置、ディスプレイ装置等と共に示す図である。
【図３】実施の形態のマーク画像表示の態様例及びそのための操作手順例を説明するための図である。
【図４】実施の形態のマーク画像表示の態様例及びそのための操作手順例を説明するための図である。
【図５】実施の形態のテレビ会議端末装置におけるマーク画像表示のための構成を抜き出して示す図である。
【図６】実施の形態のマーク画像表示のために近端側、遠端側のテレビ会議端末装置が実行する動作の手順例を示す図である。
【図７】実施の形態のテレビ会議端末装置におけるマーク画像表示のための構成を抜き出して示す図である（変形例）。
【符号の説明】
【００８１】
１（１−１、１−２）  テレビ会議端末装置、２（２−１、２−２）  撮像装置、２ａ  ズーム機構部、３ａ  パン機構部、３ｂ  チルト機構部、４（４−１、４−２）  ディスプレイ装置、５（５−１、５−２）  リモートコントローラ、６  パーソナルコンピュータ、７  ペンタブレット、１１  画像信号処理／表示制御部、１２  エンコーダ、１３  デコーダ、１４  通信部、１５  ＰＴＺ駆動制御部、１６  パン／チルト駆動制御部、１７  ズーム駆動制御部、１８  制御部、１９  記憶部、２０  受信部、２１  ＰＣ画像入力端子、２２  タブレット端子、３０  マーク画像処理ブロック、３１  画像合成処理部、４０  表示画面部、４１  ＰＣ表示画像、４２  撮像表示画像、４３  マーク画像選択ウィンドウ、４４  マーク画像選択ボタン、４５  選択指示枠
【図１】
2009171246.tif 000003
【図２】
2009171246.tif 000004
【図３】
2009171246.tif 000005
【図４】
2009171246.tif 000006
【図５】
2009171246.tif 000007
【図６】
2009171246.tif 000008
【図７】
2009171246.tif 000009