(57)【要約】【課題】従来のテレビ電話システム等では、相手側対話者の位置が適正でない場合に音声で移動を促したり手動操作によって相手側のビデオカメラの制御を行う方法が採られるが、自然なコミュニケーションを妨げるためにそれを改善する。【解決手段】一方の端末装置１では、被写体位置計測部１５で対話者Ｐaの位置を求め、その位置情報に基づいて相手側端末装置３のビデオカメラ３１のパン制御及びズーム制御に係る制御情報を作成し、画像・音声情報と共に合成情報として相手側端末装置３へ送信する。端末装置３では合成情報から制御情報を分離し、カメラ制御部４０によってビデオカメラ３１の前記制御を実行する。対話者Ｐaは自らの位置を移動させるだけで、相手側端末装置３のビデオカメラ３１を制御でき、自己側端末装置１のモニタ２２の画面に相手方対話者Ｐbを所望の態様で適正に表示させることができる。【選択図】図１
2006165827.tif 000002
【特許請求の範囲】
【請求項１】
撮像手段と表示手段とマイクロホンと通信手段とをそれぞれ備えた少なくとも２つの端末装置が通信回線を介して接続される構成のテレビ電話システムにおいて、
前記各端末装置は、
前記撮像手段をパン動作及び／又はチルト動作が可能な駆動機構で支持していると共に、
前記表示手段の画面中央から見て、その画面中央に立てた法線と前記撮像手段の被写体である対話者の位置とが水平方向及び／又は垂直方向についてなす角度を求める角度計測手段と、
前記角度計測手段が求めた角度情報に基づいて、相手側端末装置の前記撮像手段に関するパン方向及び／又はチルト方向の動作制御情報を生成する制御情報生成手段と、
前記マイクロホンから得られる音声情報と前記撮像手段から得られる画像情報と前記制御情報生成手段が生成した動作制御情報とを合成した合成情報を作成する送信情報合成手段と、
前記相手側端末装置から受信した前記合成情報を音声情報と画像情報と動作制御情報とに分離する受信情報分離手段と、
前記受信情報分離手段が分離した動作制御情報に基づいて、前記撮像手段を前記相手側端末装置の角度計測手段が求めた角度情報に対応する角度だけパン動作及び／又はチルト動作させる撮像制御手段と
を備え、
前記各端末装置間で前記合成情報を相互に伝送し合うことにより、前記各端末装置が前記受信情報分離手段で分離した音声情報と画像情報とをそれぞれ音声出力手段と表示手段とで再生出力させる共に、前記各端末装置側の対話者が側方及び／又は上下方向へ移動することにより、その対話者側の端末装置における前記表示手段に表示されている相手側対話者の水平方向及び／又は垂直方向の表示位置を制御し得るようにしたことを特徴とするテレビ電話システム。
【請求項２】
撮像手段と表示手段とマイクロホンと通信手段とをそれぞれ備えた少なくとも２つの端末装置が通信回線を介して接続される構成のテレビ電話システムにおいて、
前記各端末装置は、
前記撮像手段がズーム動作機能を有していると共に、
前記表示手段と被写体である対話者との間の距離を求める距離計測手段と、
前記距離計測手段が求めた距離情報に基づいて、相手側端末装置の前記撮像手段に対するズーム動作制御情報を生成する制御情報生成手段と、
前記マイクロホンから得られる音声情報と前記撮像手段から得られる画像情報と前記制御情報生成手段が生成したズーム動作制御情報とを合成した合成情報を作成する送信情報合成手段と、
前記相手側端末装置から受信した前記合成情報を音声情報と画像情報とズーム動作制御情報とに分離する受信情報分離手段と、
前記受信情報分離手段が分離したズーム動作制御情報に基づいて、前記撮像手段の画角を前記相手側端末装置の距離計測手段が求めた距離情報に対応させて制御する撮像制御手段と
を備え、
前記各端末装置間で前記合成情報を相互に伝送し合うことにより、前記各端末装置が前記受信情報分離手段で分離した音声情報と画像情報とをそれぞれ音声出力手段と表示手段とで再生出力させる共に、前記各端末装置側の対話者が前記表示手段に対して前後方向へ移動することにより、その対話者側の端末装置の前記表示手段に表示されている相手側対話者の表示倍率を制御し得るようにしたことを特徴とするテレビ電話システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明はテレビ電話システムに係り、より自然なコミュニケーションが図れる画像表示を実現するための改良に関する。
【背景技術】
【０００２】
最近、高速通信ネットワークの拡充により、テレビ電話システムが普及しつつある。それらのシステムは、ビデオカメラとマイクロフォンとモニタとを有する端末装置間で相互に映像と音声を送受信し合うことにより、相手側の姿を見ながら音声でのやりとりを行うものであり、通常のコミュニケーションに近い形態が実現できる。
【０００３】
しかしながら、テレビ電話システムでは、ビデオカメラを定位置に固定し、そのビデオカメラの撮像範囲内の画像だけを相手側端末装置に送信し、受信側端末装置においてはその受信画像をそのままモニタリングしているだけである。従って、受信側端末装置でのモニタの画像は前記ビデオカメラの位置によって視点が決定されてしまい、コミュニケーションを行っている相手が画面の中央からずれていたり、極端な場合には画面から外れてしまっているような場合が生じ得る。そのような場合に、音声によって相手側に移動を促すことが可能であるが、会話の途中で逐一そのような要求を行うことは円滑なコミュニケーションの妨げとなる。
【０００４】
一方、その問題点に関連して、下記特許文献１には次のような「画像情報伝達装置及び画像情報伝達システム」が開示されている。その技術は、自己側及び相手側のそれぞれの意思を尊重してプライバシを守りつつも、相手側の許可する範囲内で自由に視点を移せるように画面の遠隔操作ができるようにしたものである。より具体的には、送り手側は撮像された画像から送信許可範囲を予め選択しておき、受け手側はその送信許可範囲内で任意の画像範囲を選択的に受信できるようにしている。従って、受け手側では自己の視線をある程度自由に選択操作できることになる。
【０００５】
しかし、このシステムの場合、ビデオカメラの撮像範囲よりも狭い範囲内の画像を送受信することになり、それぞれのビデオカメラの性能を十分に生かし切れないだけでなく、相手側が移動した場合に画面内に相手を捕捉できるように手動操作を行わねばならず、ユーザにとっては相手側とのコミュニケーションを行いながら手動操作を行うという負担を強いることになる。
【特許文献１】特開２００１−５３９４７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
前記のように、従来のテレビ電話システムでは、コミュニケーションを行っている相手側がビデオカメラの撮像領域の中心からずれている状態や、撮像領域から外れてしまったような状態が生じた際に、音声によって相手側に移動を促したり、手動操作によって相手側のビデオカメラのパン・チルト動作を制御して、適正な画像表示を行えるようにしているが、いずれも円滑なコミュニケーションを妨げる要因となる。そこで、本発明は、テレビ電話システムにおいて、対話中に自己の動きに対応して相手側のビデオカメラを制御できるようにして、より自然なコミュニケーションが図れるようにすることを目的として創作された。
【課題を解決するための手段】
【０００７】
第１の発明は、撮像手段と表示手段とマイクロホンと通信手段とをそれぞれ備えた少なくとも２つの端末装置が通信回線を介して接続される構成のテレビ電話システムにおいて、前記各端末装置は、前記撮像手段をパン動作及び／又はチルト動作が可能な駆動機構で支持していると共に、前記表示手段の画面中央から見て、その画面中央に立てた法線と前記撮像手段の被写体である対話者の位置とが水平方向及び／又は垂直方向についてなす角度を求める角度計測手段と、前記角度計測手段が求めた角度情報に基づいて、相手側端末装置の前記撮像手段に関するパン方向及び／又はチルト方向の動作制御情報を生成する制御情報生成手段と、前記マイクロホンから得られる音声情報と前記撮像手段から得られる画像情報と前記制御情報生成手段が生成した動作制御情報とを合成した合成情報を作成する送信情報合成手段と、前記相手側端末装置から受信した前記合成情報を音声情報と画像情報と動作制御情報とに分離する受信情報分離手段と、前記受信情報分離手段が分離した動作制御情報に基づいて、前記撮像手段を前記相手側端末装置の角度計測手段が求めた角度情報に対応する角度だけパン動作及び／又はチルト動作させる撮像制御手段とを備え、前記各端末装置間で前記合成情報を相互に伝送し合うことにより、前記各端末装置が前記受信情報分離手段で分離した音声情報と画像情報とをそれぞれ音声出力手段と表示手段とで再生出力させる共に、前記各端末装置側の対話者が側方及び／又は上下方向へ移動することにより、その対話者側の端末装置における前記表示手段に表示されている相手側対話者の水平方向及び／又は垂直方向の表示位置を制御し得るようにしたことを特徴とするテレビ電話システムに係る。
【０００８】
この第１の発明では、各端末装置において、角度計測手段が求めた角度情報に基づいて相手側端末装置の撮像手段の動作制御情報を生成し、自己のマイクロホンによる音声情報と撮像手段による画像情報と前記動作制御情報とを合成した合成情報を相手側端末装置へ送信する。相手側端末装置では、受信した合成情報を音声情報と画像情報と動作制御情報とに分離し、音声情報と画像情報とをそれぞれ音声出力手段と表示手段とで再生出力させるが、動作制御情報に基づいて撮像手段を制御する。但し、この発明では、相手側端末装置の撮像手段のパン動作及び／又はチルト動作を制御して自己側端末装置の表示手段に表示されている相手側対話者の水平方向及び／又は垂直方向の表示位置を制御することを目的としており、角度計測手段が求める角度情報は「表示手段の画面中央から見て、その画面中央に立てた法線と撮像手段の被写体である対話者の位置とが水平方向及び／又は垂直方向についてなす角度」とされる。従って、各端末装置の撮像手段の被写体である対話者は、自らの位置を側方及び／又は上下方向へ移動させることによって相手側端末装置の撮像手段のパン動作及び／又はチルト動作を制御でき、自己の端末装置の表示手段に表示されている相手側対話者を画面内で意図的に移動させることができる。
【０００９】
第２の発明は、撮像手段と表示手段とマイクロホンと通信手段とをそれぞれ備えた少なくとも２つの端末装置が通信回線を介して接続される構成のテレビ電話システムにおいて、前記各端末装置は、前記撮像手段がズーム動作機能を有していると共に、前記表示手段と被写体である対話者との間の距離を求める距離計測手段と、前記距離計測手段が求めた距離情報に基づいて、相手側端末装置の前記撮像手段に対するズーム動作制御情報を生成する制御情報生成手段と、前記マイクロホンから得られる音声情報と前記撮像手段から得られる画像情報と前記制御情報生成手段が生成したズーム動作制御情報とを合成した合成情報を作成する送信情報合成手段と、前記相手側端末装置から受信した前記合成情報を音声情報と画像情報とズーム動作制御情報とに分離する受信情報分離手段と、前記受信情報分離手段が分離したズーム動作制御情報に基づいて、前記撮像手段の画角を前記相手側端末装置の距離計測手段が求めた距離情報に対応させて制御する撮像制御手段とを備え、前記各端末装置間で前記合成情報を相互に伝送し合うことにより、前記各端末装置が前記受信情報分離手段で分離した音声情報と画像情報とをそれぞれ音声出力手段と表示手段とで再生出力させる共に、前記各端末装置側の対話者が前記表示手段に対して前後方向へ移動することにより、その対話者側の端末装置の前記表示手段に表示されている相手側対話者の表示倍率を制御し得るようにしたことを特徴とするテレビ電話システムに係る。
【００１０】
この第２の発明は、各端末装置において、距離計測手段が求めた距離情報に基づいて相手側端末装置の撮像手段のズーム動作制御情報を生成し、そのズーム動作制御情報を音声情報と画像情報と共に送信して相手側端末装置の撮像手段による画角を制御する。即ち、相手側端末装置の撮像手段のズーム動作機能を制御対象とするために距離情報（表示手段と被写体である対話者との間の距離）を用いた画角制御を行うことになるが、原理的には第１の発明と同様である。この発明によれば、各端末装置の撮像手段の被写体である対話者は、自らの位置を前後方向へ移動させることによって相手側端末装置の撮像手段の画角を制御でき、自己の端末装置の表示手段に表示されている相手側対話者の表示倍率を意図的に変更させることができる。
【発明の効果】
【００１１】
本発明のテレビ電話システムによれば、一方の端末装置における撮像手段の被写体である対話者は、自らをその撮像手段に対して移動（側方・上下方向や前後方向）させることにより、表示手段の画面上での相手側対話者の表示位置や表示倍率を制御でき、従来のように音声で移動を促したり手動操作による制御を行う場合と比較して、フェイスツーフェイスによる会話に近い自然なコミュニケーションを可能にする。
【発明を実施するための最良の形態】
【００１２】
以下、本発明のテレビ電話システムの各実施形態を図面に基づいて詳細に説明する。先ず、図１は各端末装置をブロック図で表したテレビ電話システムの概略構成図である。同図に示すように、各端末装置１,３は通信ネットワーク２を介して接続されており、一方の端末装置１,(３)は撮像・収音した画像・音声情報を相手側端末装置３,(１)へ送信し、また相手側端末装置３,(１)から受信した画像・音声情報を再生出力させる。但し、前記及び以下の説明において、端末装置やその各機能部を表す符号：Ｍ,(Ｎ)は、Ｍ側又は(Ｎ)側の一方のみを端末装置やその各機能部に対応付けて読むことにより、各端末装置１,３間の相互性が理解できるようになっている。
【００１３】
各端末装置１,(３)は、対話者Ｐa,(Ｐb)を被写体として撮像するビデオカメラ１１,(３１)と、前記ビデオカメラ１１,(３１)をパン・チルト方向へ回動自在に駆動できる雲台１２,(３２)と、対話者Ｐa,(Ｐb)の音声を収音するマイクロホン１３,(３３)と、ビデオカメラ１１,(３１)から得られる撮像信号とマイクロホン１３,(３３)から得られる音声信号に圧縮処理等を施す送信信号処理部１４,(３４)と、ビデオカメラ１１,(３１)の撮像信号を用いて後述の方法により被写体である対話者Ｐa,(Ｐb)の下記モニタ２２,(４２)に対する位置を計測する被写体位置計測部１５,(３５)と、被写体位置計測部１５,(３５)から得られる位置情報に基づいて相手側端末装置３,(１)における雲台３２,(１２)のパン・チルト制御情報及びビデオカメラ３１,(１１)のズーム制御情報を生成する制御情報生成部１６,(３６)と、制御情報生成部１６,(３６)が生成した各制御情報と送信信号処理部１４,(３４)が処理した後の画像・音声情報とを合成する送信情報合成部１７,(３７)と、送信情報合成部１７,(３７)による合成情報を相手側端末装置３,(１)へ送信し、また相手側端末装置３,(１)から受信した合成情報を受信する送受信部１８,(３８)と、送受信部１８,(３８)で受信した相手側端末装置３,(１)からの合成情報を制御情報と画像・音声情報とに分離する受信情報分離部１９,(３９)と、受信情報分離部１９,(３９)が分離したパン・チルト制御情報とズーム制御情報に基づいて雲台１２,(３２)のパン・チルト角度［即ち、ビデオカメラ１１,(３１)のパン・チルト角度］及びビデオカメラ１１,(３１)のズーム状態を制御するカメラ制御部２０,(４０)と、受信情報分離部１９,(３９)が分離した画像・音声情報に伸長処理等を施す受信情報処理部２１,(４１)と、受信情報処理部２１,(４１)が処理した画像信号を再生表示させるモニタ２２,(４２)と、受信情報処理部２１,(４１)が処理した音声信号を再生出力させるスピーカ２３,(４３)とからなる。
【００１４】
前記のように、被写体位置計測部１５,(３５)はビデオカメラ１１,(３１)の撮像信号を用いて対話者Ｐa,(Ｐb)のモニタ２２,(４２)に対する位置を求めるが、その「位置」は「モニタ２２,(４２)の画面中央に立てた法線と対話者とが水平方向及び垂直方向についてなす角度情報」及び「モニタ２２,(４２)の画面と対話者との距離情報」によって与えられる。そこで、被写体位置計測部１５,(３５)では、先ず、ビデオカメラ１１,(３１)の撮像信号を分割して動き検出を行うことにより撮像画像内での対話者Ｐa,(Ｐb)の表示位置を求めると共に、ビデオカメラ１１,(３１)からフォーカス情報を検出してビデオカメラ１１,(３１)と対話者Ｐa,(Ｐb)との離隔距離を求める。その場合、求められた表示位置や距離はビデオカメラ１１,(３１)の撮像画像の中央を基準にした水平方向と垂直方向に係る位置とビデオカメラ１１,(３１)の位置を基準にした距離であるが、ビデオカメラ１１,(３１)はモニタ２２,(４２)の上側等に設置されているため、被写体位置計測部１５,(３５)ではモニタ２２,(４２)の画面中央を基準にした値に換算する。その結果、それらの換算値を用いて前記の角度情報と距離情報が求まる。
【００１５】
尚、前記のように撮像画像内における対話者Ｐa,(Ｐb)の表示位置を分割ブロックの画像信号に対する動き検出によって求める方式は、テレビ電話システムの場合には被写体である対話者Ｐa,(Ｐb)だけに動きがあり、背景には動きが無い場合が多いことに基づいているが、一般に、対話者Ｐa,(Ｐb)はモニタ２２,(４２)に対して正対した姿勢をとるため、画像認識（パターン認識）技術による撮像信号の解析を行って撮像画像内での対話者Ｐa,(Ｐb)の位置を求める方式も採用できる。また、この実施形態では離隔距離位置をビデオカメラ１１,(３１)のフォーカス情報から求めるようにしているが、超音波や赤外線を用いた測距センサにより離隔距離を求める方式も採用できる。
【００１６】
そして、この実施形態のテレビ電話システムでは、一方の端末装置１,(３)の被写体位置計測部１５,(３５)が求めた対話者Ｐa,(Ｐb)の角度情報と距離情報に基づいて制御情報生成部１６,(３６)が相手側端末装置３,(１)の雲台３２,(１２)とビデオカメラ３１,(１１)の制御情報（パン・チルト制御情報，ズーム制御情報）を作成し、それが画像・音声情報と共に合成情報として相手側端末装置３,(１)へ送信される。その場合の合成情報は図２のような構成であり、制御情報と画像情報と音声情報とがパケットで多重化されて送信される。一方、通信ネットワーク２を介して合成情報を受信した相手側端末装置３,(１)では、それを画像・音声情報と制御情報に分離し、モニタ４２,(２２)とスピーカ４３,(２３)により画像・音声情報を再生出力させると共に、カメラ制御部４０,(２０)が制御情報に基づいてビデオカメラ３１,(１１)及び雲台３２,(１２)を制御する。従って、パン・チルト制御及びズーム制御がなされたビデオカメラ３１,(１１)による画像情報とマイクロホン３３,(１３)が収音した音声情報とが端末装置３,(１)側で生成した制御情報と合成されて端末装置３,(１)から端末装置１,(３)へ送信され、端末装置１,(３)側ではその合成情報から分離された画像・音声情報をモニタ２２(４２)とスピーカ２３(４３)で再生すると共に、分離された制御情報に基づいて自らの雲台１２,(３２)とビデオカメラ１１,(３１)を制御する。
【００１７】
前記のように制御情報はパン・チルト及びズームに係る情報からなるが、パン・チルト及びズームに係る制御は独立して実行され、次にそれらの制御に係る具体的内容を説明する。
［パン・チルト制御］
例えば、図３（Ａ）に示すように、端末装置１側の対話者Ｐaがモニタ２２に正対しているが、端末装置３側の対話者Ｐbがモニタ４２に正対しておらず、且つ点線で示すようにビデオカメラ３１が対話者Ｐbを正面に捉えていない場合においては、端末装置１側のモニタ２２に表示される画像は対話者Ｐbが画面内で右側へずれた位置に映っている状態となる。そこで、図３（Ｂ）に示すように、端末装置１側の対話者Ｐaがモニタ２２に対する正対状態（モニタ２２の画面中央に立てた法線上に位置する状態）から適当な角度θだけ右側へ移動すると、端末装置１側の被写体位置計測部１５が対話者Ｐaの新たな位置：Ｐa'（角度情報と距離情報）を計測し、制御生成部１６がその角度情報を用いて端末装置３側のビデオカメラ３１のパン制御情報を作成し、その制御情報が画像・音声情報との合成情報として端末装置３側へ送信される。合成情報を受信した端末装置３では受信した合成情報からパン制御情報を分離してカメラ制御部４０が雲台３２を制御することになるが、図３に示すように、この場合はビデオカメラ３１の撮像方向（光軸方向）を左側へ角度θだけ回転させるパン制御となり、対話者Ｐbをビデオカメラ３１の撮像画像の中央寄りへ移動させることになる。
【００１８】
従って、端末装置１側の対話者Ｐaは、モニタ２２における端末装置３側の対話者Ｐbの表示状態を図４(Ｂ)の状態から図４(Ｃ)の状態に変化させることができる。即ち、端末装置１側の対話者Ｐaは自らが移動することにより、モニタ２２の画面内で対話者Ｐbの位置を中央へ移動させて、その表示画面で正対した状態へ修正することができる。そして、そのような対話者Ｐaの移動とモニタ２２の画面内における対話者Ｐbの移動の関係は、対話者Ｐaからみれば、図４(Ａ)に示すように壁５０に形成された仮想的な窓５１を介して対話者Ｐbを見ている状態に相当し、窓の向こう側に居る相手と対話を行うという日常的な対話状態と同様であり、より自然なコミュニケーションの状態が構成できる。
【００１９】
尚、ここでは、端末装置１側の対話者Ｐaが移動して、端末装置３側を制御する場合について説明したが、各端末装置１,３は相互に制御し合う関係にあり、逆の場合についても同様の制御手順が実行される。また、パン制御についてだけ説明したが、チルト制御に関しても同様の原理で実行させることができる。
【００２０】
［ズーム制御］
この制御は、図５に示すように、一方の端末装置１側のモニタ２２に対して対話者Ｐaが前後方向へ移動することにより、他方の端末装置３側のビデオカメラ３１をズームイン／ズームアウト制御するものである。今、対話者Ｐaがモニタ２２へ近付いて新たな位置：Ｐa'へ移動したとすると、ビデオカメラ１１から得られる画像信号とフォーカス情報に基づいて被写体位置計測部１５がその位置（角度情報と距離情報）を計測し、制御情報生成部１６がビデオカメラ１１と前記計測位置の間の距離情報に基づいて端末装置３側のビデオカメラ３１のズーム制御情報を生成し、その制御情報が画像・音声情報との合成情報として端末装置３側へ送信される。合成情報を受信した端末装置３では受信した合成情報からズーム制御情報を分離してカメラ制御部４０がビデオカメラ３１のズーム機能を制御することになるが、その制御方式には２種類ある。即ち、端末装置１側で対話者Ｐaがモニタ２２へ近付いた場合に、ビデオカメラ３１をズームイン制御して画角を小さくする方式（図５での画角：α1）と、逆にズームアウト制御して画角を大きくする方式（図５での画角：α2）がある。
【００２１】
対話者Ｐaがモニタ２２へ近付いた際にビデオカメラ３１をズームイン制御する場合は、図５において対話者Ｐaがモニタ２２へ近付いて新たな位置：Ｐa'に進むと、モニタの画面は図６(Ｂ)の表示状態から図６(Ｃ)の表示状態となる。即ち、対話者Ｐaはモニタ２２へ近付くことにより、モニタ２２で対話者Ｐbがズームインされた画像を見ることができる。一方、逆に、対話者Ｐaがモニタ２２から遠ざかった時には、ビデオカメラ３１をズームアウト制御がなされる。そして、対話者Ｐaの移動とモニタ２２で表示される対話者Ｐbの関係は、対話者Ｐaからみれば、図６(Ａ)に示すように壁５０に形成された仮想的な窓５１を想定すると、対話者Ｐaが窓に近付く（遠ざかる）につれて対話者Ｐbも窓に近付く（遠ざかる）という距離関係となる。これは、相手の表情をよく見たい場合に相手側に近付き、逆に相手の全体像を見たい場合には相手側から遠ざかるという日常的な動作と共通しており、より自然なコミュニケーションの状態が構成できる。
【００２２】
次に、対話者Ｐaがモニタ２２へ近付いた際にビデオカメラ３１をズームアウト制御する場合は、図５において対話者Ｐaがモニタ２２へ近付いて新たな位置：Ｐa'に進むと、モニタ２２の画面は図７(Ｂ)の表示状態から図７(Ｃ)の表示状態となる。即ち、前記の図６の場合と逆の表示関係となり、図７(Ａ)に示すように、壁５０に形成された仮想的な窓５１を介して対話者Ｐaと対話者Ｐbが常に一定の距離にある関係を構成できる。即ち、対話者Ｐaが窓５１に近付くと対話者Ｐbが窓５１から遠ざかるという関係をモニタ４２の画面上に反映させることができる。尚、ここでは、端末装置１側の対話者Ｐaが移動して、端末装置３側を制御する場合について説明したが、逆の場合についても同様の制御手順が実行されることは［パン・チルト制御］の場合と同様である。この制御方式は、常に一定の間隔を隔てて対話を行うような仮想的環境が望まれるような場合に有効である。
【００２３】
以上のように、実施形態に係るテレビ電話システムでは、一方の端末装置１,(３)において対話者Ｐa,(Ｐb)がモニタ２２,（４２）に対して移動するだけで相手側端末装置３,(１)での対話者Ｐb,(Ｐa)の撮像条件を制御することができ、音声で移動を促したり手動操作による制御を行う必要がなく、自然なコミュニケーションを図る上で極めて有効である。この実施形態ではパン・チルト制御とズーム制御とを並行して実行するシステムとして説明したが、それらの制御は独立して実行できるため、何れか一方の制御のみを実行するものであってもよく、テレビ電話システムの利用条件によって必要な制御方式を適宜選択するようにすればよい。
【産業上の利用可能性】
【００２４】
本発明はテレビ電話システムに適用でき、更にはパーソナルコンピュータを通信回線で結んだビデオチャットシステム等にも適用できる。
【図面の簡単な説明】
【００２５】
【図１】本発明の実施形態に係るテレビ電話システムの概略構成図である。
【図２】各端末装置間での送信情報（画像・音声情報と制御情報とをパケットで多重化）を示す図である。
【図３】（Ａ）はテレビ電話システムにおけるビデオカメラのパン・チルト制御を説明するための概略図であり、（Ｂ）は対話者がモニタとの正対位置から移動した場合における角度情報の概念図である。
【図４】（Ａ）はパン・チルト制御における対話者相互間の仮想的関係を示す図、(Ｂ)は対話者が画面内（前記仮想的関係では窓枠内）で右方向にずれている表示状態を示す図、(Ｃ)は対話者が画面内（前記仮想的関係では窓枠内）で中央に収められた表示状態を示す図である。
【図５】テレビ電話システムにおけるビデオカメラのズーム制御を説明するための概略図である。
【図６】（Ａ）はズーム制御（対話者がビデオカメラに近付いた際にズームイン制御）における対話者相互間の仮想的関係を示す図、(Ｂ)はズームイン前の対話者の表示状態を示す図、(Ｃ)はズームイン後の対話者の表示状態を示す図である。
【図７】（Ａ）はズーム制御（対話者がビデオカメラに近付いた際にズームアウト制御）における対話者相互間の仮想的関係を示す図、(Ｂ)はズームアウト前の対話者の表示状態を示す図、(Ｃ)はズームアウト後の対話者の表示状態を示す図である。
【符号の説明】
【００２６】
１,３…端末装置、２…通信ネットワーク、１１,３１…ビデオカメラ、１２,３２…雲台、１３,３３…マイクロホン、１４,３４…送信信号処理部、１５,３５…被写体位置計測部、１６,３６…制御情報生成部、１７,３７…送信情報合成部、１８,３８…送受信部、１９,３９…受信情報分離部、２０,４０…カメラ制御部、２１,４１…受信情報処理部、２２,４２…モニタ、２３,４３…スピーカ、５０…窓、５１…壁、Ｐa,Ｐb…対話者。
【図１】
2006165827.tif 000003
【図２】
2006165827.tif 000004
【図３】
2006165827.tif 000005
【図４】
2006165827.tif 000006
【図５】
2006165827.tif 000007
【図６】
2006165827.tif 000008
【図７】
2006165827.tif 000009