(57)【要約】【課題】カメラの向きが変化している間に撮像された画像の表示を回避し、瞬時に画面を切り替える。【解決手段】マイクロホン１２３Ａ〜１２３Ｌのいずれかが有効とされている状態で、他のマイクロホンのスイッチが押圧された場合、制御部２０１は、マイク音声切り替え部２０６を制御し、スイッチが押圧されたマイクロホンで得られた音声信号が取り出されるようにして、当該マイクロホンを有効にする。また、制御部２０１は、カメラ画像切り替え部２０３で取り出されている撮像画像データを出力しているカメラとは異なるカメラが、スイッチが押圧されたマイクロホンに対応した会議参加者の方向を向くように、当該カメラの撮像方向を制御する。その後、制御部２０１は、カメラ画像切り替え部２０３を制御し、当該カメラで得られた撮像画像データが取り出されるようにする。【選択図】図４
2009135634.tif 000002
【特許請求の範囲】
【請求項１】
撮像方向の調整が可能な複数のカメラと、
上記複数のカメラで撮像されて得られた画像データから所定の画像データを取り出して出力する画像データ取り出し部と、
撮像方向を指示する撮像方向指示部と、
上記画像データ取り出し部で一の方向に向いている第１のカメラで撮像されて得られた画像データが取り出されている状態で上記撮像方向指示部により他の方向の撮像が指示されるとき、上記第１のカメラとは異なる第２のカメラが上記他の方向に向いた状態で上記画像データ取り出し部により該第２のカメラで撮像されて得られた画像データが取り出されるように制御する制御部と
を備えることを特徴とするカメラ装置。
【請求項２】
上記制御部は、上記撮像方向指示部により他の方向の撮像が指示されるとき、上記第２のカメラが上記他の方向に向いていないとき、該第２のカメラを上記他の方向に向くように制御する
ことを特徴とする請求項１に記載のカメラ装置。
【請求項３】
上記撮像方向指示部は、プッシュツートークマイクのスイッチ操作に基づいて撮像方向を指示する
ことを特徴とする請求項１に記載のカメラ装置。
【請求項４】
上記撮像方向指示部は、撮像方向のプリセットポジションの選択操作に基づいて撮像方向を指示する
ことを特徴とする請求項１に記載のカメラ装置。
【請求項５】
音声方向検出部をさらに備え、
上記撮像方向指示部は、上記音声方向検出部の検出出力に基づいて撮像方向を指示する
ことを特徴とする請求項１に記載のカメラ装置。
【請求項６】
ネットワークを介して他のコミュニケーション端末に接続されるコミュニケーション端末であって、
カメラ装置と、
上記カメラ装置から出力される画像データを他のコミュニケーション端末に送信する通信部とを備え、
上記カメラ装置は、
撮像方向の調整が可能な複数のカメラと、
上記複数のカメラで撮像されて得られた画像データから所定の画像データを取り出して出力する画像データ取り出し部と、
上記画像データ取り出し部で一の方向に向いている第１のカメラで撮像されて得られた画像データが取り出されている状態で他の方向の撮像が指示されるとき、上記第１のカメラとは異なる第２のカメラが上記他の方向に向くように制御し、該第２のカメラが上記他の方向に向いた後に上記画像データ取り出し部で上記第２のカメラで撮像されて得られた画像データが取り出されるように制御する制御部とを有する
ことを特徴とするコミュニケーション端末。
【請求項７】
撮像方向の調整が可能な複数のカメラで撮像されて得られた画像データから所定の画像データを取り出して出力する画像データ出力方法であって、
一の方向に向いている第１のカメラで撮像されて得られた画像データが取り出されている状態で他の方向の撮像が指示されるとき、
上記第１のカメラとは異なる第２のカメラが上記他の方向に向くように制御し、
上記第２のカメラが上記他の方向に向いた後に、上記第２のカメラで撮像されて得られた画像データを取り出して出力する
ことを特徴とする画像データ出力方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、例えばテレビ会議システム等に適用して好適なカメラ装置、コミュニケーション端末および画像データ出力方法に関する。詳しくは、この発明は、一の方向に向いている第１のカメラで撮像されて得られた画像データが取り出されている状態で他の方向の撮像が指示されるとき、第１のカメラとは異なる第２のカメラが他の方向に向いた後に、この第２のカメラで撮像されて得られた画像データを取り出すことにより、カメラの向きが変化している間に撮像された画像の表示を回避し、瞬時に画面を切り替えるようにしたカメラ装置等に係るものである。
【背景技術】
【０００２】
互いに離れた個々の地点で撮像を行い、得られた画像データをネットワーク経由で相手の地点に送信して表示させることにより、双方向にコミュニケーションをとることができるようにしたコミュニケーションシステムが知られている。このようなコミュニケーションシステムとして、例えば、特許文献１等に記載されているテレビ会議システムがある。
【０００３】
そして、例えば、特許文献２には、このようなテレビ会議システムにおいて、話者の位置を検出し、カメラが話者の方向に向くように制御するカメラ方向制御装置が記載されている。
【特許文献１】特開２００５−３２８４８４号公報
【特許文献２】特開平８−２９８６５２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
上述したようにカメラが話者の方向に向くように制御するものにあっては、カメラの向きが変化している間の画像データがそのまま相手側に送られ、当該画像データによる見苦しい画像が表示されてしまう。この場合、カメラの向きの変化が速い場合には、見ている人が、気分が悪くなったりすることもある。
【０００５】
この発明の目的は、カメラの向きが変化している間に撮像された画像の表示を回避し、瞬時に画面を切り替えることにある。
【課題を解決するための手段】
【０００６】
この発明の概念は、
撮像方向の調整が可能な複数のカメラと、
上記複数のカメラで撮像されて得られた画像データから所定の画像データを取り出して出力する画像データ取り出し部と、
撮像方向を指示する撮像方向指示部と、
上記画像データ取り出し部で一の方向に向いている第１のカメラで撮像されて得られた画像データが取り出されている状態で上記撮像方向指示部により他の方向の撮像が指示されるとき、上記第１のカメラとは異なる第２のカメラが上記他の方向に向いた状態で上記画像データ取り出し部により該第２のカメラで撮像されて得られた画像データが取り出されるように制御する制御部と
を備えることを特徴とするカメラ装置にある。
【０００７】
この発明においては、撮像方向の調整が可能な複数のカメラを備えるものである。そして、画像データ取り出し部より、この複数のカメラで撮像されて得られた画像データから、所定の画像データが取り出されて出力される。コミュニケーション端末の場合、当該取り出された画像データが、通信部により、他のコミュニケーション端末に送信される。
【０００８】
画像データ取り出し部で一の方向に向いている第１のカメラからの画像データが取り出されている状態で、撮像方向指示部により他の方向の撮像が指示されるとき、各カメラの向きおよび画像データ取り出し部の取り出しは、制御部により以下のように制御される。
【０００９】
すなわち、第１のカメラとは異なる第２のカメラが他の方向に向いていない場合には、当該第２のカメラが当該他の方向に向くように制御される。そして、第２のカメラが当該他の方向を向いた状態で、画像データ取り出し部により第２のカメラで撮像されて得られた画像データが取り出されるように制御される。
【００１０】
例えば、撮像方向指示部では、プッシュツートークマイクのスイッチ操作、撮像方向のプリセットポジションの選択操作、あるいは音声方向検出部の検出出力に基づいて、撮像方向を指示することが行われる。
【００１１】
このように、各カメラの向きおよび画像データ取り出し部の取り出しが制御されることで、カメラの向きが変化している間に撮像された画像の表示が回避され、瞬時に画面が切り替えられる。
【発明の効果】
【００１２】
この発明によれば、一の方向に向いている第１のカメラで撮像されて得られた画像データが取り出されている状態で他の方向の撮像が指示されるとき、第１のカメラとは異なる第２のカメラが他の方向に向くように制御し、この第２のカメラが他の方向に向いた後に、この第２のカメラで撮像されて得られた画像データを取り出すものであり、カメラの向きが変化している間に撮像された画像の表示を回避し、瞬時に画面を切り替えることができる。
【発明を実施するための最良の形態】
【００１３】
以下、図面を参照しながら、この発明の実施の形態について説明する。
【００１４】
図１は、実施の形態としてのコミュニケーションシステムとしてのテレビ会議システム１００の構成例を示している。このテレビ会議システム１００は、会議端末１１０Ａと会議端末１１０Ｂとが、ＬＡＮ（Local Area Network）、インターネット等のネットワーク３００を介して接続されて構成されている。
【００１５】
図２は、会議端末１１０Ａ側の構成を示している。この図２は、会議参加者ＭＡ〜ＭＬが着席している状態を示している。会議端末１１０Ａには、２台のカメラ１２１ａ，１２１ｂと、ディスプレイ１２２と、マイクロホン１２３Ａ〜１２３Ｌと、スピーカ１２４とが接続されている。
【００１６】
カメラ１２１ａ，１２１ｂは、被写体としての会議参加者ＭＡ〜ＭＬを撮像し、当該被写体に対応した撮像画像データを生成し、この撮像画像データを会議端末１１０Ａに送る。このカメラ１２１ａ，１２１ｂは、撮像方向の調整が可能なカメラであって、例えば、ＣＣＤ(ChargedCoupled Device)あるいはＣＭＯＳ(Complementary Metal-OxideSemiconductor)等の撮像素子を用いて構成されている。ディスプレイ（モニタ）１２２は、会議端末１１０Ａから出力される画像データに基づき、当該画像データによる画像を表示する。
【００１７】
マイクロホン１２３Ａ〜１２３Ｌは音声を捉え、当該音声に対応した音声信号を出力し、この音声信号を会議端末１１０Ａに送る。このマイクロホン１２３Ａ〜１２３Ｌは、いわゆるプッシュツートークマイクであり、図示しないスイッチを押すことで有効となるマイクロホンである。スピーカ１２４は、会議端末１１０Ａから出力される音声信号に基づき、当該音声信号による音声を出力する。
【００１８】
図３は、会議端末１１０Ｂ側の構成を示している。会議端末１１０Ｂには、カメラ１３１と、ディスプレイ１３２と、マイクロホン１３３と、スピーカ１３４とが接続されている。
【００１９】
カメラ１３１は、被写体としての会議参加者ＭＭを撮像し、当該被写体に対応した撮像画像データを生成し、この撮像画像データを会議端末１１０Ｂに送る。このカメラ１３１は、例えば、ＣＣＤあるいはＣＭＯＳ等の撮像素子を用いて構成されている。ディスプレイ（モニタ）１３２は、会議端末１１０Ｂから出力される画像データに基づき、当該画像データによる画像を表示する。
【００２０】
マイクロホン１３３は音声を捉え、当該音声に対応した音声信号を出力し、この音声信号を会議端末１１０Ｂに送る。スピーカ１３４は、会議端末１１０Ｂから出力される音声信号に基づき、当該音声信号による音声を出力する。
【００２１】
図２および図３を参照して、テレビ会議システム１００の動作を説明する。
【００２２】
会議端末１１０Ａ側において、カメラ１２１ａ，１２１ｂで、会議参加者ＭＡ〜ＭＬが撮像される。カメラ１２１ａ，１２１ｂで得られた撮像画像データは会議端末１１０Ａに供給される。会議端末１１０Ａでは、カメラ１２１ａ，１２１ｂから供給される画像データのうち、例えば発言者を撮っているカメラの画像データが取り出されて送信画像データとされる。そして、この送信画像データは、圧縮処理後に、当該会議端末１１０Ａから、ネットワーク３００を介して、会議端末１１０Ｂに送られる。
【００２３】
また、マイクロホン１２３Ａ〜１２３Ｌから出力される音声信号は、会議端末１１０Ａに供給される。会議端末１１０Ａでは、マイクロホン１２３Ａ〜１２３Ｌから供給される音声信号のうち、例えば発言者のマイクロホンからの音声信号が取り出され、アナログ信号からデジタル信号への変換処理、圧縮処理等が行われる。そして、圧縮後の圧縮音声データは、当該会議端末１１０Ａから、ネットワーク３００を介して、会議端末１１０Ｂに送られる。
【００２４】
また、会議端末１１０Ａでは、会議端末１１０Ｂから送られてくる圧縮画像データおよび圧縮音声データが受信される。会議端末１１０Ａでは、受信された圧縮画像データに対して伸長処理が施されて、受信画像データが得られる。この受信画像データは会議端末１１０Ａからディスプレイ１２２に供給され、当該ディプレイ１２２には受信画像データによる画像が表示される。
【００２５】
また、会議端末１１０Ａでは、受信された圧縮音声データに対して伸長処理、デジタル信号からアナログ信号への変換処理等が行われて、受信音声信号が得られる。この受信音声信号は会議端末１１０Ａからスピーカ１２４に供給され、当該スピーカ１２４から受信音声信号による音声が出力される。
【００２６】
一方、会議端末１１０Ｂ側において、カメラ１３１で、会議参加者ＭＭが撮像される。そして、このカメラ１３１から出力される撮像画像データは会議端末１１０Ｂに送信画像データとして供給される。会議端末１１０Ｂでは、送信画像データに対して、圧縮処理が施される。そして、圧縮後の圧縮画像データは、当該会議端末１１０Ｂから、ネットワーク３００を介して、会議端末１１０Ａに送られる。
【００２７】
また、マイクロホン１３３から出力される音声信号は、会議端末１１０Ｂに供給される。会議端末１１０Ｂでは、この音声信号に対して、アナログ信号からデジタル信号への変換処理、圧縮処理等が行われる。そして、圧縮後の圧縮音声データは、当該会議端末１１０Ｂから、ネットワーク３００を介して、会議端末１１０Ａに送られる。
【００２８】
また、会議端末１１０Ｂでは、会議端末１１０Ａから送られてくる圧縮画像データおよび圧縮音声データが受信される。会議端末１１０Ｂでは、受信された圧縮画像データに対して伸長処理が施されて、受信画像データが得られる。そして、この受信画像データは会議端末１１０Ｂからディスプレイ１３２に供給され、当該ディプレイ１３２には受信画像データによる画像が表示される。
【００２９】
また、会議端末１１０Ｂでは、受信された圧縮音声データに対して伸長処理、デジタル信号からアナログ信号への変換処理等が行われて、受信音声信号が得られる。この受信音声信号は会議端末１１０Ｂからスピーカ１３４に供給され、当該スピーカ１３４から受信音声信号による音声が出力される。
【００３０】
図４は、会議端末１１０Ａの具体的な構成例を示している。会議端末１１０Ａは、制御部２０１と、リモートコントロール信号受信部（以下、「リモコン受信部」という）２０２と、カメラ画像切り替え部２０３と、表示処理部２０４と、画像圧縮／伸長部２０５と、マイク音声切り替え部２０６と、Ａ／Ｄ変換器２０７と、エコーキャンセラ２０８と、音声圧縮／伸長部２０９と、Ｄ／Ａ変換器２１０と、パケタイズ／デパケタイズ部２１１と、通信インタフェース（通信Ｉ／Ｆ）２１２とを有している。
【００３１】
制御部２０１は、会議端末１１０Ａの各部の動作を制御する。リモコン受信部２０２は、ユーザ操作に対応してリモートコマンダ１２８から発生される、例えば赤外線等のリモートコントロール信号を受信する。リモコン受信部２０２は、受信したリモートコントロール信号に対応した操作信号を、制御部２０１に供給する。
【００３２】
上述したように、カメラ１２１ａ，１２１ｂは、撮像方向を調整できるカメラである。制御部２０１は、カメラ１２１ａ，１２１ｂの向き、つまり、パン位置、チルト位置を制御する。また、上述したように、マイクロホン１２３Ａ〜１２３Ｌはプッシュツートークマイクであり、スイッチを押すことで有効となるマイクロホンである。制御部２０１には、各カメラからスイッチ操作出力が供給される。
【００３３】
カメラ画像切り替え部２０３には、カメラ１２１ａ，１２１ｂで撮像されて得られた撮像画像データが供給される。このカメラ画像切り替え部２０３は、制御部２０１の制御のもと、カメラ１２１ａ，１２１ｂから供給される撮像画像データのうち、例えば発言者を撮っているカメラの画像データを取り出し、送信画像データとして出力する。このカメラ画像切り替え部２０３は、画像データ取り出し部を構成している。
【００３４】
画像圧縮／伸長部２０５は、カメラ画像切り替え部２０３で得られた送信画像データに対して、例えば、ＩＴＵによって標準化されたＨ．３２３等の所定規格に準拠した圧縮方式によって圧縮処理を施し、圧縮画像データを生成する。また、画像圧縮／伸長部２０５は、パケタイズ／デパケタイズ部２１１で再構成された、会議端末１１０Ｂからの圧縮画像データに対して、伸長処理を施し、復号化された画像データ（受信画像データ）を生成する。
【００３５】
表示処理部２０４には、カメラ画像切り替え部２０３で得られた送信画像データ、および画像圧縮／伸長部２０５で得られた受信画像データが供給される。表示処理部２０４は、送信画像データおよび受信画像データに基づいて、表示画像データを生成し、当該表示画像データを、ディスプレイ１２２に供給する。表示処理部２０４は、制御部２０１の制御により、例えば、受信画像データをそのまま表示画像データとして出力し、あるいは受信画像内に送信画像が子画面として挿入された画像を表示する新たな画像データを生成して出力する。なお、図２のディスプレイ１２２に表示されている画像は、表示処理部２０４で、受信画像データをそのまま表示画像データとして出力した場合の画像例である。
【００３６】
マイク音声切り替え部２０６には、マイクロホン１２３Ａ〜１２３Ｌからの音声信号が供給される。このマイク音声切り替え部２０６は、制御部２０１の制御のもと、マイクロホン１２３Ａ〜１２３Ｌから供給される音声信号のうち、例えば発言者のマイクロホンで得られた音声信号を取り出し、送信音声信号として出力する。
【００３７】
Ａ／Ｄ変換器２０７は、マイク音声切り替え部２０６から出力される送信音声信号をアナログ信号からデジタル信号に変換する。エコーキャンセラ２０８は、音声圧縮／伸長部２０９で得られる受信音声データ（復号化音声データ）に基づいて補正信号を生成し、Ａ／Ｄ変換器２０７で得られた送信音声データを、当該補正信号により補正して、通話品質を確保する。
【００３８】
音声圧縮／伸長部２０９は、エコーキャンセラ２０８で補正された送信音声データに対して、上述した画像データと同様に、Ｈ．３２３等の所定規格に準拠した圧縮方式の圧縮処理を施し、圧縮音声データを生成する。また、音声圧縮／伸長部２０９は、パケタイズ／デパケタイズ部２１１で再構成された、会議端末１１０Ｂからの圧縮音声データに対して、伸長処理を施し、復号化された音声データ（受信音声データ）を生成する。
【００３９】
パケタイズ／デパケタイズ部２１１は、画像圧縮／伸長部２０５で得られた圧縮画像データ、およびが音声圧縮／伸長部２０９で得られた圧縮音声データを、所定フォーマットでパケット化し、得られたパケットデータを通信インタフェース２１２に送出する。また、パケタイズ／デパケタイズ部２１１は、通信インタフェース２１２で受信された、会議端末１１０Ｂから送られてくるパケットデータから、圧縮画像データおよび圧縮音声データを抽出し、抽出された圧縮画像データを画像圧縮／伸長部２０５に送出し、抽出された圧縮音声データを音声圧縮／伸長部２０９に送出する。
【００４０】
通信インタフェース２１２は、パケタイズ／デパケタイズ部２１１で得られたパケットデータを、ネットワーク３００を介して、会議端末１１０Ｂに送信する。また、通信インタフェース２１２は、会議端末１１０Ｂからネットワーク３００を介して送られてくるパケットデータを受信し、パケタイズ／デパケタイズ部２１１に送出する。
【００４１】
図４に示す会議端末１１０Ａの動作を説明する。まず、送信系の動作を説明する。
【００４２】
カメラ１２１ａ，１２１ｂで得られた撮像画像データは、カメラ画像切り替え部２０３に供給される。このカメラ画像切り替え部２０３では、カメラ１２１ａ，１２１ｂから供給される画像データのうち、例えば発言者を撮っているカメラの画像データが取り出され、送信画像データとして出力される。
【００４３】
カメラ画像切り替え部２０３で得られた送信画像データは画像圧縮／伸長部２０５に供給される。この画像圧縮／伸長部２０５では、送信画像データに対して圧縮処理が施され、圧縮画像データが生成される。そして、この圧縮画像データは、パケタイズ／デパケタイズ部２１１に供給される。
【００４４】
また、マイクロホン１２３Ａ〜１２３Ｌで得られた音声信号は、マイク音声切り替え部２０６に供給される。マイク音声切り替え部２０６では、マイクロホン１２３Ａ〜１２３Ｌから供給される音声信号のうち、例えば発言者のマイクロホンで得られた音声信号が取り出されて、送信音声信号として出力される。この送信音声信号は、Ａ／Ｄ変換器２０７に供給されて、アナログ信号からデジタル信号に変換される。そして、Ａ／Ｄ変換器２０７から出力される送信音声データはエコーキャンセラ２０８を介して音声圧縮／伸長部２０９に供給される。この音声圧縮／伸長部２０９では、送信音声データに対して圧縮処理が施され、圧縮音声データが生成される。この圧縮音声データはパケタイズ／デパケタイズ部２１１に供給される。
【００４５】
パケタイズ／デパケタイズ部２１１では、画像圧縮／伸長部２０５から供給される圧縮画像データおよび音声圧縮／伸長部２０９から供給される圧縮音声データが、所定フォーマットでパケット化され、得られたパケットデータは、通信インタフェース２１２により、ネットワーク３００を介して、会議端末１１０Ｂに送信される。会議端末１１０Ｂ側には、カメラ画像切り替え部２０３で得られた送信画像データが供給され、会議端末１１０Ｂ側のディスプレイ１３２には当該送信画像データによる画像が表示される。また、会議端末１１０Ｂ側には、マイク音声切り替え部２０６で得られた送信音声信号が供給され、会議端末１１０Ｂ側のスピーカ１３４からは会議端末１１０Ａ側の音声が出力される。
【００４６】
次に、受信系の動作を説明する。
【００４７】
通信インタフェース２１２で受信される、会議端末１１０Ｂからネットワーク３００を介して送られてくるパケットデータは、パケタイズ／デパケタイズ部２１１に供給される。パケタイズ／デパケタイズ部２１１では、通信インタフェース２１２から供給されるパケットデータから、圧縮画像データおよび圧縮音声データが抽出され、圧縮画像データは画像圧縮／伸長部２０５に供給され、圧縮音声データは音声圧縮／伸長部２０９に供給される。
【００４８】
画像圧縮／伸長部２０５では、パケタイズ／デパケタイズ部２１１から供給される圧縮画像データに対して伸長処理が施され、受信画像データが生成される。この受信画像データは、表示処理部２０４に供給される。また、この表示処理部２０４には、カメラ画像切り替え部２０３で得られた送信画像データも供給される。表示処理部２０４では、例えば、受信画像データがそのまま表示画像データとして出力され、あるいは受信画像内に送信画像が子画面として挿入された画像を表示する新たな画像データが生成されて出力される。表示処理部２０４から出力された表示画像データはディスプレイ１２２に供給され、当該ディスプレイ１２２には、表示画像データによる画像（受信画像（会議端末１１０Ｂ側の画像）、あるいは受信画像内に送信画像(会議端末１１０Ａ側の画像)が子画面として挿入された画像）が表示される。
【００４９】
また、音声圧縮／伸長部２０９では、パケタイズ／デパケタイズ部２１１から供給される圧縮音声データに対して伸長処理が施されて受信音声データが生成される。この受信音声データは、エコーキャンセラ２０８を介してＤ／Ａ変換器２１０に供給され、デジタル信号からアナログ信号に変換される。そして、このＤ／Ａ変換器２１０で得られた受信音声信号は、スピーカ１２４に供給され、当該スピーカ１２４から、受信音声信号による音声（会議端末１１０Ｂ側の音声）が出力される。
【００５０】
図５は、会議端末１１０Ｂの具体的な構成例を示している。この図５において、図４と対応する部分には同一符号を付し、その詳細説明は省略する。会議端末１１０Ｂは、制御部２０１と、リモコン受信部２０２と、表示処理部２０４と、画像圧縮／伸長部２０５とＡ／Ｄ変換器２０７と、エコーキャンセラ２０８と、音声圧縮／伸長部２０９と、Ｄ／Ａ変換器２１０と、パケタイズ／デパケタイズ部２１１と、通信インタフェース（通信Ｉ／Ｆ）２１２とを有している。
【００５１】
この会議端末１１０Ｂは、上述した会議端末１１０Ａにおけるカメラ画像切り替え部２０３およびマイク音声切り替え部２０６が除かれた構成となっており、詳細説明は省略するが、各部の機能は上述の会議端末１１０Ａと同様である。
【００５２】
図５に示す会議端末１１０Ｂの動作を説明する。まず、送信系の動作を説明する。
【００５３】
カメラ１３１で得られた撮像画像データは、画像圧縮／伸長部２０５に供給される。この画像圧縮／伸長部２０５では、撮像画像データ（送信画像データ）に対して圧縮処理が施され、圧縮画像データが生成される。この圧縮画像データはパケタイズ／デパケタイズ部２１１に供給される。
【００５４】
また、マイクロホン１３３で得られた音声信号は、Ａ／Ｄ変換器２０７に供給されて、アナログ信号からデジタル信号に変換される。Ａ／Ｄ変換器２０７から出力される送信音声データはエコーキャンセラ２０８を介して音声圧縮／伸長部２０９に供給される。この音声圧縮／伸長部２０９では、送信音声データに対して圧縮処理が施され、圧縮音声データが生成される。この圧縮音声データはパケタイズ／デパケタイズ部２１１に供給される。
【００５５】
パケタイズ／デパケタイズ部２１１では、画像圧縮／伸長部２０５から供給される圧縮画像データおよび音声圧縮／伸長部２０９から供給される圧縮音声データが、所定フォーマットでパケット化され、得られたパケットデータは、通信インタフェース２１２により、ネットワーク３００を介して、会議端末１１０Ａに送信される。
【００５６】
これにより、会議端末１１０Ａ側には、カメラ１３１で得られた撮像画像データが供給され、会議端末１１０Ａ側のディスプレイ１２２にはカメラ１３１による撮像画像が表示される。また、会議端末１１０Ａ側には、マイクロホン１３３からの音声信号が供給され、会議端末１１０Ａ側のスピーカ１２４からは会議端末１１０Ｂ側の音声が出力される。
【００５７】
次に、受信系の動作を説明する。
【００５８】
通信インタフェース２１２で受信される、会議端末１１０Ａからネットワーク３００を介して送られてくるパケットデータは、パケタイズ／デパケタイズ部２１１に供給される。パケタイズ／デパケタイズ部２１１では、通信インタフェース２１２から供給されるパケットデータから、圧縮画像データおよび圧縮音声データが抽出され、圧縮画像データは画像圧縮／伸長部２０５に供給され、圧縮音声データは音声圧縮／伸長部２０９に供給される。
【００５９】
画像圧縮／伸長部２０５では、パケタイズ／デパケタイズ部２１１から供給される圧縮画像データに対して伸長処理が施され、受信画像データが生成される。この受信画像データは表示処理部２０４に供給される。また、この表示処理部２０４には、カメラ１３１で得られた撮像画像データ（送信画像データ）も供給される。表示処理部２０４では、例えば、受信画像データがそのまま表示画像データとして出力され、あるいは受信画像内に送信画像が子画面として挿入された画像を表示する新たな画像データが生成されて出力される。表示処理部２０４から出力された表示画像データはディスプレイ１３２に供給され、当該ディスプレイ１３２には、表示画像データによる画像（受信画像（会議端末１１０Ａ側の画像）、あるいは受信画像内に送信画像(会議端末１１０Ｂ側の画像)が子画面として挿入された画像）が表示される。
【００６０】
また、音声圧縮／伸長部２０９では、パケタイズ／デパケタイズ部２１１から供給される圧縮音声データに対して伸長処理が施されて受信音声データが生成される。この受信音声データは、エコーキャンセラ２０８を介してＤ／Ａ変換器２１０に供給され、デジタル信号からアナログ信号に変換される。そして、このＤ／Ａ変換器２１０から出力される受信音声信号はスピーカ１３４に供給され、当該スピーカ１３４から、受信音声信号による音声（会議端末１１０Ａ側の音声）が出力される。
【００６１】
次に、会議端末１１０Ａにおいて、マイクロホン１２３Ａ〜１２３Ｌのいずれかが有効とされている状態で、他のマイクロホンのスイッチが押圧された場合における、制御部２０１の制御動作を説明する。
【００６２】
この場合、制御部２０１は、マイク音声切り替え部２０６を制御し、スイッチが押圧されたマイクロホンで得られた音声信号が取り出されるようにして、当該マイクロホンを有効にする。
【００６３】
また、制御部２０１は、カメラ画像切り替え部２０３で取り出されている撮像画像データを出力しているカメラとは異なるカメラが、スイッチが押圧されたマイクロホンに対応した会議参加者の方向を向くように、当該カメラの撮像方向を制御する。なお、制御部２０１には、各マイクロホンに対応した会議参加者の位置情報が予めプリセットされている。制御部２０１は、当該位置情報に基づいてカメラの撮像方向を制御する。その後、制御部２０１は、カメラ画像切り替え部２０３を制御し、当該カメラで得られた撮像画像データが取り出されるようにする。
【００６４】
図６のフローチャートは、制御部２０１の制御手順を示している。
【００６５】
まず、制御部２０１は、ステップＳＴ１において、制御動作を開始し、その後に、ステップＳＴ２に移る。このステップＳＴ２において、制御部２０１は、マイクロホン１２３Ａ〜１２３Ｌのいずれかのスイッチが押圧されたか否かを判定する。マイクロホンのスイッチが押圧されたとき、制御部２０１は、ステップＳＴ３において、スイッチが押圧されたマイクロホンは現在有効となっているマイクロホンであるか否かを判定する。現在有効となっているマイクロホンであるとき、制御部２０１は、ステップＳＴ２に戻る。
【００６６】
一方、現在有効となっていないマイクロホンであるとき、制御部２０１は、ステップＳＴ４において、マイク音声切り替え部２０６を制御し、スイッチが押圧されたマイクロホンからの音声信号が取り出されるようにして、当該マイクロホンを有効とする。
【００６７】
次に、制御部２０１は、ステップＳＴ５において、現在カメラ画像切り替え部２０３で取り出されている撮像画像データを出力しているカメラとは異なるカメラの向きを、スイッチが押圧されたマイクロホンに対応した会議参加者の方向を向くように、当該カメラの撮像方向を移動する。その後、制御部２０１は、ステップＳＴ６において、カメラ画像切り替え部２０３を制御し、上述したように撮像方向を移動したカメラの撮像画像データが取り出されるようにする。
【００６８】
制御部２０１は、ステップＳＴ６の処理の後、ステップＳＴ２に戻り、次にマイクロホンスイッチの押圧に備える。
【００６９】
上述の説明から、制御部２０１は、プッシュツートークマイクのスイッチ操作に基づいて、撮像方向を指示しているものと言える。この意味で、制御部２０１は、撮像方向指示部を構成している。
【００７０】
次に、上述した制御部２０１の制御動作の具体例を、図７を参照して説明する。ここで、カメラ１２１ａは「カメラ０」とし、カメラ１２１ｂは「カメラ１」とする。
【００７１】
「ステップ０」
カメラ０は会議参加者ＭＨを撮像し、カメラ１は会議参加者ＭＣを撮像しており、カメラ画像切り替え部２０３（図４参照）はカメラ０の撮像画像データを取り出している。
【００７２】
「ステップ１」
会議参加者ＭＥがマイクロホン１２３Ｅのスイッチを押して、発言を開始する。この場合、マイク音声切り替え部２０６（図４参照）は、マイクロホン１２３Ｅの音声信号を取り出す。なお、この場合、制御部２０１に供給されるマイクロホン１２３Ｅのスイッチの操作出力は、会議参加者ＭＥの撮像を指示するコマンドとなる。
【００７３】
「ステップ２」
制御部２０１（図４参照）は、画像を出力していないカメラ１の向きを、会議参加者ＭＥに移動する。
【００７４】
「ステップ３」
カメラ画像切り替え部２０３（図４参照）を、カメラ１の撮像画像データを取り出すように切り替える。
【００７５】
「ステップ４」
会議参加者ＭＣがマイクロホン１２３Ｃのスイッチを押して、発言を開始する。この場合、マイク音声切り替え部２０６（図４参照）は、マイクロホン１２３Ｃの音声信号を取り出す。なお、この場合、制御部２０１に供給されるマイクロホン１２３Ｃのスイッチの操作出力は、会議参加者ＭＣの撮像を指示するコマンドとなる。
【００７６】
「ステップ５」
制御部２０１（図４参照）は、画像を出力していないカメラ０の向きを、会議参加者ＭＣに移動する。
【００７７】
「ステップ６」
カメラ画像切り替え部２０３（図４参照）を、カメラ０の撮像画像データを取り出すように切り替える。
【００７８】
以下、会議参加者が自分のマイクロホンのスイッチを押す毎に、上述したと同様の動作の繰り返しとなる。
【００７９】
図８は、上述の「ステップ０」から「ステップ６」までの動作をまとめて示している。この図８において、「表示カメラ」は、カメラ画像切り替え部２０３で取り出される撮像画像データを出力するカメラを意味している。また、「表示画像」は、「表示カメラ」が向いて撮像している会議参加者を意味している。
【００８０】
ここで、カメラ位置スコア計算ルールを、以下のように設定する。
（１）カメラ画像切り替え部２０３で撮像画像データが取り出されているカメラ（表示カメラ）
同じ位置：２
移動    ：０
（２）カメラ画像切り替え部２０３で撮像画像データが取り出されていないカメラ（表示カメラでないカメラ）
同じ位置：１
移動    ：０
（３）画像撮像コマンドの指定位置に移動するカメラがある？
ある：２
ない：０
【００８１】
図９は、上述のカメラ位置スコア計算ルールに基づいて、「ステップ１」でＭＥ画像撮像コマンドがきたときの各ケースのカメラ位置スコアを計算したものである。この場合、画像が取り出されていないカメラ１が移動するケース１のカメラ位置スコアが最も高くなっている。上述では「ステップ２」でカメラ１を移動しているが、これは、「ステップ１」で計算されるカメラ位置スコアが最も高くなるケースに従ってカメラを移動していることになる。なお、「ステップ５」に関しても、「ステップ４」で計算されるカメラ位置スコアが最も高くなるケースに従ったカメラ移動となっている。
【００８２】
また、表示スコア計算ルールを、以下のように設定する。
（ａ）移動していない画像              ：＋１
（ｂ）画像撮像コマンドの指定通りの画像：＋２
（ｃ）今まで取り出されていた画像      ：＋１
【００８３】
図１０は、上述の表示スコア計算ルールに基づいて、各ステップの表示スコアを計算したものである。例えば、「ステップ０」において、カメラ０は（ａ）〜（ｃ）の全てを満たすので、表示スコアは「４」となるが、カメラ１は(ａ)のみを満たすので、表示スコアは「１」となる。また、例えば、「ステップ１」において、カメラ０は（ａ）、（ｃ）は満たし、（ｂ）を満たさないので、表示スコアは「２」となるが、カメラ１は「ステップ０」と同じく(ａ)のみを満たすので、表示スコアは「１」となる。以下、同様である。
【００８４】
図１０から明らかなように、「表示カメラ」の切り替えは、表示スコアの大小が逆転したとき、例えば、「ステップ３」、「ステップ６」で、行われることになる。
【００８５】
上述したように、図４に示す会議端末１１０Ａにおいては、一方のカメラで撮像されているある会議参加者の撮像画像データがカメラ画像切り替え部２０３で取り出されている状態で、他の会議参加者の撮像が指示されるとき、他方のカメラが他の会議参加者に向くように制御され、その後に、カメラ画像切り替え部２０３で当該他方のカメラの撮像画像データが取り出されるように切り替えられるものであり、カメラ画像切り替え部２０３で取り出される撮像画像データが途切れることはなく、また、このカメラ画像切り替え部２０３からカメラの向きが変化している間の撮像画像データは出力されない。したがって、会議端末１１０Ｂ側における会議端末側１１０Ａ側の画像表示において、カメラの向きが変化している間の画像が表示されることが回避され、瞬時に画面が切り替えられる。
【００８６】
なお、上述実施の形態において、会議端末１１０Ａでは、プッシュツートークマイクとしてのマイクロホン１２３Ａ〜１２３Ｌにおけるスイッチの操作出力を、当該スイッチが押されたマイクロホンに対応した会議参加者を撮像するコマンドとして利用しているが(図６参照)、当該撮像コマンドはその他の方法、例えば、リモートコマンダ１２８における撮像方向のプリセットポジションの選択操作等によって発生されるものであってもよい。
【００８７】
図１１は、例えばリモートコマンダ１２８の操作によって撮像方向のプリセットポジションが選択可能とされている場合における、制御部２０１の制御手順を示している。
【００８８】
まず、制御部２０１は、ステップＳＴ２１において、制御動作を開始し、その後に、ステップＳＴ２２に移る。このステップＳＴ２２において、制御部２０１は、リモートコマンダ１２８の操作によってプリセットポジションが選択されたか否かを判定する。
【００８９】
プリセットポジションが選択されたとき、制御部２０１は、ステップＳＴ２３において、選択されたプリセットポジションに向いているカメラがあるか否かを判定する。選択されたプリセットポジションに向いているカメラがあるとき、制御部２０１は、ステップＳＴ２４において、選択されたプリセットポジションに向いているカメラは、画像を出力しているカメラ、つまり現在カメラ画像切り替え部２０３で取り出されている撮像画像データを出力しているカメラであるか否かを判定する。
【００９０】
選択されたプリセットポジションに向いているカメラが画像を出力しているカメラであるとき、制御部２０１は、直ちに、ステップＳＴ２２に戻り、次のプリセットポジションの選択に備える。一方、選択されたプリセットポジションに向いているカメラが画像を出力しているカメラでないとき、制御部２０１は、ステップＳＴ２５において、カメラ画像切り替え部２０３を制御し、上記の選択されたプリセットポジションに向いているカメラの撮像画像データが取り出されるようにする。
【００９１】
制御部２０１は、ステップＳＴ２５の処理の後、ステップＳＴ２２に戻り、次のプリセットポジションの選択に備える。
【００９２】
また、上述のステップＳＴ２３において、選択されたプリセットポジションに向いているカメラがないとき、制御部２０１は、ステップＳＴ２６において、画像を出力していないカメラ、つまり現在カメラ画像切り替え部２０３で取り出されている撮像画像データを出力しているカメラとは異なるカメラの向きを、選択されたプリセットポジションに移動する。
【００９３】
その後、制御部２０１は、ステップＳＴ２５に移り、カメラ画像切り替え部２０３を制御し、上述のステップＳＴ２６で選択されたプリセットポジションに向きを移動したカメラの撮像画像データが取り出されるようにする。そして、制御部２０１は、ステップＳＴ２５の処理の後、ステップＳＴ２２に戻り、次のプリセットポジションの選択に備える。
【００９４】
上述の説明から、制御部２０１は、プリセットポジションの選択操作に基づいて、撮像方向を指示しているものと言える。この意味で、制御部２０１は、撮像方向指示部を構成している。
【００９５】
なお、上述したようにプッシュツートークマイクのスイッチ操作、あるいはプリセットポジションの選択操作に基づいて各カメラの向きを制御する他に、例えば、会議端末１１０Ａが音声方向を検出する機能を有する場合、その検出出力に基づいて、各カメラの向きを制御することが考えられる。
【００９６】
この場合、図１２に示すように、例えば、図１、図２に示すカメラ１２１ａの代わりに、カメラ１２１ａ′が使用される。このカメラ１２１ａ′は、カメラ１２１ａと同様に、撮像方向の調整が可能なカメラであり、さらに、その雲台１２１ｃには音声方向を検出するための２つのマイクロホン１２１ｄ，１２１ｅが取り付けられている。
【００９７】
また、図１３に示すように、図１、図２、図４に示す会議端末１１０Ａの代わりに、会議端末１１０Ａ′が使用される。この会議端末１１０Ａ′は、図１３に示すように、音声検出処理部２１３を有している。上述したようにカメラ１２１ａ′の雲台１２１ｃに取り付けられているマイクロホン１２１ｄ，１２１ｅの出力は、図１３に示すように、会議端末１１０Ａの音声検出処理部２１３に供給される。音声検出処理部２１３は、マイクロホン１２１ｄ，１２１ｅの出力から音声を検出し、さらに、その音声の方向を検出する。これらの検出出力は、制御部２０１に供給される。
【００９８】
図１４は、音声検出処理部２１３の検出出力を用いる場合における、制御部２０１の制御手順を示している。
【００９９】
まず、制御部２０１は、ステップＳＴ３１において、制御動作を開始し、その後に、ステップＳＴ３２に移る。このステップＳＴ３２において、制御部２０１は、音声が検出されたか否かを判定する。
【０１００】
音声が検出されたとき、制御部２０１は、ステップＳＴ３３において、音声方向に向いているカメラがあるか否かを判定する。音声方向に向いているカメラがあるとき、制御部２０１は、ステップＳＴ３４において、音声方向に向いているカメラは、画像を出力しているカメラ、つまり現在カメラ画像切り替え部２０３で取り出されている撮像画像データを出力しているカメラであるか否かを判定する。
【０１０１】
音声方向に向いているカメラが画像を出力しているカメラであるとき、制御部２０１は、直ちに、ステップＳＴ３２に戻り、次の音声検出に備える。一方、音声方向に向いているカメラが画像を出力しているカメラでないとき、制御部２０１は、ステップＳＴ３５において、カメラ画像切り替え部２０３を制御し、上述の音声方向に向いているカメラの撮像画像データが取り出されるようにする。制御部２０１は、ステップＳＴ３５の処理の後、ステップＳＴ３２に戻り、次の音声検出に備える。
【０１０２】
また、上記のステップＳＴ３３において、音声方向に向いているカメラがないとき、制御部２０１は、ステップＳＴ３６において、画像を出力していないカメラ、つまり現在カメラ画像切り替え部２０３で取り出されている撮像画像データを出力しているカメラとは異なるカメラの向きを、音声方向に移動する。
【０１０３】
その後、制御部２０１は、ステップＳＴ３５に移り、カメラ画像切り替え部２０３を制御し、上述のステップＳＴ３６で音声方向に向きを移動したカメラの撮像画像データが取り出されるようにする。そして、制御部２０１は、ステップＳＴ３５の処理の後、ステップＳＴ３２に戻り、次の音声検出に備える。
【０１０４】
上述の説明から、制御部２０１は、音声方向の検出出力に基づいて、撮像方向を指示しているものと言える。この意味で、制御部２０１は、撮像方向指示部を構成している。
【０１０５】
なお、上述実施の形態において、会議端末１１０Ａ，１１０Ａ′には撮像方向の調整が可能な２台のカメラ１２１ａ，１２１ｂが接続されるものを示したが、この発明は、３台以上のカメラを備えるものにも同様に適用できる。
【０１０６】
また、上述実施の形態においては、この発明のカメラ装置を、テレビ会議システムを構成する会議端末に適用したものを示したが、当該カメラ装置の適用範囲はこれに限定されるものではない。
【産業上の利用可能性】
【０１０７】
この発明は、カメラの向きが変化している間の画像表示を回避し、瞬時に画面を切り替えることができるものであり、例えば、テレビ会議システム等のコミュニケーションシステムに適用できる。
【図面の簡単な説明】
【０１０８】
【図１】実施の形態としてのテレビ会議システムの構成例を示すブロック図である。
【図２】テレビ会議システムの一方の会議端末側の構成例を示すブロック図である。
【図３】テレビ会議システムの他方の会議端末側の構成例を示すブロック図である。
【図４】テレビ会議システムの一方の会議端末の具体的な構成例を示すブロック図である。
【図５】テレビ会議システムの他方の会議端末の具体的な構成例を示すブロック図である。
【図６】会議端末１１０Ａにおいて、いずれかのマイクロホンが有効とされている状態で、他のマイクロホンのスイッチが押圧された場合における、制御部２０１の制御手順を説明するためのフローチャートである。
【図７】制御部２０１の制御動作の具体例を説明するための図である。
【図８】具体例における各ステップの動作状態をまとめて示した図である。
【図９】カメラ位置スコア計算ルールに基づいた、具体例の「ステップ１」におけるカメラ位置スコアの計算例を示す図である。
【図１０】表示スコア計算ルールに基づいた、具体例における各ステップの表示スコアの計算例を示す図である。
【図１１】リモートコマンダの操作によって撮像方向のプリセットポジションが選択可能とされている場合における、制御部２０１の制御手順を説明するためのフローチャートである。
【図１２】テレビ会議システムの一方の会議端末側の他の構成例を示すブロック図である。
【図１３】テレビ会議システムの一方の会議端末の他の構成例を示すブロック図である。
【図１４】音声検出処理部２１３の検出出力を用いる場合における、制御部２０１の制御手順を説明するためのフローチャートである。
【符号の説明】
【０１０９】
１００・・・テレビ会議システム、１１０Ａ，１１０Ａ′，１１０Ｂ・・・会議端末、１２１ａ，１２１ａ′，１２１ｂ・・・カメラ、１２１ｃ・・・雲台、１２１ｄ，１２１ｅ・・・マイクロホン、１２２・・・ディスプレイ、１２３Ａ〜１２３Ｌ・・・マイクロホン、１２４・・・スピーカ、１２８・・・リモートコマンダ、１３１・・・カメラ、１３２・・・ディスプレイ、１３３・・・マイクロホン、１３４・・・スピーカ、２０１・・・制御部、２０２・・・リモコン受信部、２０３・・・カメラ画像切り替え部、２０４・・・表示処理部、２０５・・・画像圧縮／伸長部、２０６・・・マイク音声切り替え部、２０７・・・Ａ／Ｄ変換器、２０８・・・エコーキャンセラ、２０９・・・音声圧縮／伸長部、２１０・・・Ｄ／Ａ変換器、２１１・・・パケタイズ／デパケタイズ部、２１２・・・通信インタフェース、２１３・・・音声検出処理部、３００・・・ネットワーク
【図１】
2009135634.tif 000003
【図２】
2009135634.tif 000004
【図３】
2009135634.tif 000005
【図４】
2009135634.tif 000006
【図５】
2009135634.tif 000007
【図６】
2009135634.tif 000008
【図７】
2009135634.tif 000009
【図８】
2009135634.tif 000010
【図９】
2009135634.tif 000011
【図１０】
2009135634.tif 000012
【図１１】
2009135634.tif 000013
【図１２】
2009135634.tif 000014
【図１３】
2009135634.tif 000015
【図１４】
2009135634.tif 000016