(57)【要約】【課題】相手拠点の表示画面上で子画面と所定の被写体とが重複することを防止可能な画像表示装置を提供する。【解決手段】テレビ会議装置１００Ａは、表示画面１０上に画面１５、１２を構成可能なであり、自拠点の映像を撮影するカメラ１００と、カメラ１００により撮影された映像データに含まれる被写体を検出する被写体検出部１２１と、ネットワーク１３０を介して、相手拠点の表示画面２０において複数の画面２５、２３を構成するための他画面構成情報を受信するレイアウト受信部１１７と、他画面構成情報および被写体の検出位置に基づいて、表示画面２０における主画面２５に映像データが表示された場合に、被写体と子画面２３とが重複するか否かを判定する判定部１１９と、判定部１１９による判定結果に基づいて、カメラ１００による撮影状態を制御するカメラ制御部１２０を備える。【選択図】図１
2010161662.tif 000002
【特許請求の範囲】
【請求項１】
表示画面上に複数の表示領域を構成可能な画像表示装置であって、
当該画像表示装置が配置される自拠点の被写体を撮影する撮影部と、
前記撮影部により撮影された映像データに含まれる前記被写体を検出する被写体検出部と、
通信回線を介して、他の画像表示装置の表示画面である他表示画面において複数の表示領域を構成するための他画面構成情報を受信するレイアウト受信部と、
前記他画面構成情報および前記被写体の検出位置に基づいて、前記他表示画面における主表示領域に前記映像データが表示された場合に、前記映像データに含まれる被写体と前記主表示領域に重畳的に構成される副表示領域とが重複するか否かを判定する判定部と、
前記判定部による判定結果に基づいて、前記撮影部による撮影状態を制御する撮影状態制御部と、
を備える画像表示装置。
【請求項２】
請求項１に記載の画像表示装置であって、
前記他画面構成情報は、前記副表示領域の表示位置情報と前記他表示画面の解像度情報を含む
画像表示装置。
【請求項３】
請求項２に記載の画像表示装置であって、
前記判定部は、前記他表示画面において前記被写体と前記副表示領域とが重複すると判定した場合、前記他画面構成情報および前記被写体の検出位置に基づいて、前記撮影部を水平方向に回転させる回転角度を決定し、
前記撮影状態制御部は、前記撮影部を水平方向に前記回転角度分回転するよう制御する
画像表示装置。
【請求項４】
請求項２または３に記載の画像表示装置であって、
前記判定部は、前記他表示画面において前記被写体と前記副表示領域とが重複すると判定した場合、前記他画面構成情報および前記被写体の検出位置に基づいて、前記撮影部を鉛直方向に回転させる回転角度を決定し、
前記撮影状態制御部は、前記撮影部を鉛直方向に前記回転角度分回転するよう制御する
画像表示装置。
【請求項５】
請求項２ないし４のいずれか１項に記載の画像表示装置であって、
前記撮影状態制御部は、前記他表示画面において前記被写体と前記副表示領域とが重複すると判定した場合、前記撮影部の撮影倍率を低下するよう制御する
画像表示装置。
【請求項６】
請求項１ないし５のいずれか１項に記載の画像表示装置であって、更に、
当該画像表示装置の表示画面である自表示画面において複数の表示領域を構成するための自画面構成情報を設定する自画面構成情報設定部と、
通信回線を介して、前記自画面構成情報を送信するレイアウト送信部と
を備える画像表示装置。
【請求項７】
請求項６に記載の画像表示装置であって、
前記自画面構成情報は、前記自表示画面において主表示領域に重畳的に構成される副表示領域の表示位置情報と前記自表示画面の解像度情報を含む
画像表示装置。
【請求項８】
請求項７に記載の画像表示装置であって、
前記レイアウト送信部は、前記自表示画面において前記副表示領域による表示を開始するときに、前記自画面構成情報を送信する
画像表示装置。
【請求項９】
請求項１ないし８のいずれか１項に記載の画像表示装置を備えるテレビ会議装置。
【請求項１０】
表示画面上に複数の表示領域を構成可能な画像表示装置における画像表示方法であって、
第１の画像表示装置が配置される自拠点の被写体を撮影する撮影ステップと、
前記撮影ステップにおいて撮影された映像データに含まれる前記被写体を検出する検出ステップと、
通信回線を介して、第２の画像表示装置の表示画面において複数の表示領域を構成するための他画面構成情報を受信する受信ステップと、
前記他画面構成情報および前記被写体の検出位置に基づいて、前記第２の画像表示装置の表示画面における主表示領域に前記映像データが表示された場合に、前記映像データに含まれる被写体と前記主表示領域に重畳的に構成される副表示領域とが重複するか否かを判定する判定ステップと、
前記判定ステップにおける判定結果に基づいて、前記撮影部による撮影状態を制御する制御ステップと、
を有する画像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示装置、テレビ会議装置、画像表示方法に関する。
【背景技術】
【０００２】
近年、ＩＰネットワークのインフラが整備されてきたことに伴い、カメラ映像や音声をＩＰネットワークを経由して遠隔拠点に伝送して表示するテレビ会議装置が各所で導入されるようになった。
【０００３】
テレビ会議装置が各所に配置され、複数のテレビ会議装置で構成されたテレビ会議システムは、各テレビ会議装置の表示画面に、相手拠点の画像を表示してテレビ会議を行うことが可能になっている。また、各テレビ会議装置のユーザは、自分がカメラに映っているかを把握したい場合には、自拠点のテレビ会議装置に、相手拠点の画像とともに自分拠点の画像を重畳表示させることも可能である。
【０００４】
例えば、図８では、Ａ拠点のテレビ会議装置およびＢ拠点のテレビ会議装置を用いてテレビ会議を行っている。図８（ａ）に示すように、Ａ拠点の画面１０に表示されるＢ拠点の画像（相手画像）１１の一部に、Ａ拠点の画像（自画像）１２を重畳表示することができ、ユーザ自身がカメラに映っているかを把握することが可能である。
【０００５】
このような重畳表示を行う方法の一例は、大きく表示している相手画面の上の一部に小さく自拠点のカメラ映像を表示する画面表示方法である。このような画面表示方法としては、小さく表示する画面をマウス等の入力機器によって移動することにより、ユーザが望む位置に子画面を表示する方法が知られている（例えば、特許文献１参照）。
【０００６】
【特許文献１】特開２００４−１０１７０８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかしながら、上記の方法では、自拠点の表示画面にどのような映像が表示されているかを把握することはできても、相手拠点の表示画面にどのような映像が表示されているかを把握することができない。そのために、相手拠点の表示画面に自拠点の映像のうちの相手に見せたい映像が、相手拠点の表示画面に重畳表示されている子画面によって隠れてしまい、会議がスムーズに進行しないことがある。
【０００８】
例えば、図８（ａ）に示すＡ拠点では、相手画像１１の右下に自拠点の画像１２を小さく表示させて、カメラに映っていることが確認できる。しかし、図８（ｂ）に示すＢ拠点では、相手拠点の画像を表示する子画面２３によって、自拠点の会議の参加者２１の顔周辺の画像の一部が隠れてしまっている。このように、実際には、相手画面に所望の映像が映っていない場合がある。
【０００９】
図８（ｂ）では、Ｂ拠点において、自拠点の会議の参加者２１および２２が自拠点のカメラには映っていても、表示画面に重畳表示される子画面２３によって、会議の参加者２１の映像が、相手画面に表示されない例を示している。このような例は、会議の参加者自身に限らず、会議の参加者が相手拠点の参加者に見せたい物や会議中に相手拠点と共有する資料映像等である場合も同様に当てはまる。
【００１０】
本発明は、上記事情に鑑みてなされたものであり、相手拠点の表示画面上で子画面と所定の被写体とが重複することを防止可能な画像表示装置、テレビ会議装置、および画像表示方法を提供することを目的とする。
【課題を解決するための手段】
【００１１】
本発明の画像表示装置は、表示画面上に複数の表示領域を構成可能な画像表示装置であって、当該画像表示装置が配置される自拠点の被写体を撮影する撮影部と、前記撮影部により撮影された映像データに含まれる前記被写体を検出する被写体検出部と、通信回線を介して、他の画像表示装置の表示画面である他表示画面において複数の表示領域を構成するための他画面構成情報を受信するレイアウト受信部と、前記他画面構成情報および前記被写体の検出位置に基づいて、前記他表示画面における主表示領域に前記映像データが表示された場合に、前記映像データに含まれる被写体と前記主表示領域に重畳的に構成される副表示領域とが重複するか否かを判定する判定部と、前記判定部による判定結果に基づいて、前記撮影部による撮影状態を制御する撮影状態制御部と、を備える。
【００１２】
この構成により、相手拠点の表示画面上で子画面と所定の被写体とが重複することを防止可能である。具体的には、相手拠点の表示画面を構成するための画面構成情報を取得し、自拠点の映像データに含まれる被写体を検出する。次に、この画面構成情報と被写体の検出位置とに基づいて、相手画面上で被写体と相手拠点の表示画面の副表示領域としての子画面とが重複しないかを判断する。この判断により、相手拠点の表示画面上で例えば子画面に隠れた重要な表示データがある場合であっても、自拠点の撮影部の撮影状態を変更し、その表示データが子画面に隠れない状態とすることができる。
【発明の効果】
【００１３】
本発明によれば、相手拠点の表示画面上で子画面と所定の被写体とが重複することを防止可能である。
【発明を実施するための最良の形態】
【００１４】
以下、本発明の実施形態の画像表示装置、テレビ会議装置、画像表示方法について、添付図面を参照して詳細に説明する。
【００１５】
本実施形態では、画像表示装置の一例として、テレビ会議装置について説明する。
本実施形態では、複数のテレビ会議装置が複数の拠点に配置され、配置された複数のテレビ会議装置がテレビ会議システムを構成している。各テレビ会議システムは、所定の通信回線を介して音声データや映像データの通信を行う。
【００１６】
図１は、本実施形態の各テレビ会議装置の主要な構成の一例を示すブロック図である。
ここでは、Ａ地点に配置されるテレビ会議装置を１Ａ、Ｂ地点に配置されるテレビ会議装置を１Ｂとしている。テレビ会議装置１Ｂは他の画像表示装置の一例である。なお、図１では、Ａ拠点の会議参加者とＢ拠点の会議参加者が各々のテレビ会議装置を用いてテレビ会議を行うことを想定している。しかし、図１の構成は、テレビ会議に限られず、テレビ会議装置によって送受信される映像や音声を用いて他のコミュニケーションを行うようにしてもよい。また、Ａ拠点およびＢ拠点は、必ずしも遠距離であるとは限らない。また、ここでは、２拠点に２つのテレビ会議装置を配置する場合について説明するが、これに限られない。
【００１７】
図１に示すテレビ会議装置１Ａおよび１Ｂは、自拠点における人物等の被写体を撮影するカメラ１００と、カメラ１００の映像データを取得して、相手拠点のテレビ会議装置にネットワーク１３０を介して送信するとともに、相手拠点のテレビ会議装置からの映像をネットワーク１３０を介して受信する映像送受信装置１１０と、映像送受信装置１１０が受信した映像データ等を表示するディスプレイ１４０と、ユーザの指示に応じて各種操作入力を行うマウスやリモコン等の入力装置１５０と、を備える。
【００１８】
次は、映像送受信装置１１０について詳細に説明する。
以下の説明は、分かりやすく説明するために、テレビ会議装置１Ａについて説明するが、テレビ会議装置１Ｂはテレビ会議装置１Ａと対になる装置であり、同様の構成部位や機能を有する。図１においても、テレビ会議装置１Ｂの映像送受信装置１１０については、詳細な構成部位を省略している。また、画面表示例については、図８を参照して説明する。
【００１９】
映像送受信装置１１０は、映像取得部１１１、映像送信部１１２、映像受信部１１３、映像表示部１１４、操作部１１５、レイアウト送信部１１６、レイアウト受信部１１７、自画面表示部１１８、判定部１１９、カメラ制御部１２０、被写体検出部１２１、およびレイアウト決定部１２２を備える。
【００２０】
映像取得部１１１は、カメラ１００が撮影した映像（人物２１、２２等の被写体を含む映像）を映像データとして取得する。この映像データは、例えば、自拠点であるＡ拠点のテレビ会議装置１Ａでは副表示領域としての子画面１２に表示され、相手拠点であるＢ拠点のテレビ会議装置１Ｂでは主表示領域としての主画面２５に表示される。
【００２１】
映像送信部１１２は、映像取得部１１１が取得した映像データを符号化し、ネットワークに送信可能なデータ形式に変換する（以下、本符号化した映像データを符号化映像データと呼ぶ）。次に、映像送信部１１２は、この符号化映像データをネットワーク１３０を介してテレビ会議装置１Ｂに送信する。なお、テレビ会議装置１Ａが送信する符号化映像データは、テレビ会議装置１Ｂの映像受信部１１３によって受信される。
【００２２】
映像受信部１１３は、ネットワーク１３０を介して、テレビ会議装置１Ｂから送信された人物１０１等の被写体を含む符号化映像データを受信し、ディスプレイ１４０に表示可能な形式に変換する。この映像データは、例えば、テレビ会議装置１Ａでは主画面１５に表示され、テレビ会議装置１Ｂでは子画面２３に表示される。なお、テレビ会議装置１Ａが受信する符号化映像データは、テレビ会議装置１Ｂの映像送信部１１２が送信した符号化映像データである。
【００２３】
映像表示部１１４は、映像受信部１１３からの人物１１等の被写体を含む映像データや相手拠点のテレビ会議装置１Ｂと共有する共有データ等を、主画面１５もしくは子画面１２に表示する。なお、映像表示部１１４は、Ａ拠点のカメラ１００により撮影された映像データ以外（つまり自画像以外）を、主画面１５もしくは子画面１２に表示するものとする。また、映像表示部１１４は、主画面１５もしくは子画面１２に表示する際の表示画面１０の解像度情報をレイアウト決定部１２２へ送る。
【００２４】
レイアウト受信部１１７は、ネットワーク１３０を介して、テレビ会議装置１Ｂから送信された相手画面構成情報を受信する。相手画面構成情報とは、相手拠点であるＢ拠点に配置されるテレビ会議装置１Ｂの表示画面２０において、主画面２５、子画面２３等の各画面を構成するための画面構成情報を含む。相手画面構成情報の詳細については、後述する。また、表示画面２０は、他表示画面の一例であり、相手画面構成情報は、他画面構成情報の一例である。なお、テレビ会議装置１Ａが受信する相手画面構成情報は、テレビ会議装置１Ｂのレイアウト送信部１１６が送信した自画面構成情報である。
【００２５】
操作部１１５は、テレビ会議装置１Ａのユーザ指示に応じて、入力装置１５０を介して、自画面表示部１１８に子画面１２を表示するか否かを指定するための情報や、表示画面１０に対する子画面１２の位置を指定するための情報を取得する。この指定情報は、例えば、テレビ会議装置１Ａの図示しない記憶部に記憶される所定の複数のパターンから一つを選択するためのパターン選択情報である。指定情報は、例えば、子画面１２が矩形の場合、その左上の領域や右下の領域を指定する座標情報である。なお、主画面、子画面等の各画面は、必ずしも矩形である必要はなく、円形等の他の形状であってもよい。
【００２６】
図２は、パターン選択情報のイメージ例を示すものである。
図２に示すように、パターン選択情報は、第１の表示データ２０１が表示される主画面１５に対して、第２の表示データ２０２が表示される子画面１２を、表示領域に重畳表示するための情報である。具体的には、パターン選択情報は、主画面１５に対して表示される子画面１２の配置を、右下（図２（ａ））、右上（図２（ｂ））、左上（図２（ｃ））、左下（図２（ｄ））などを示す情報である。いずれの表示形態とするかは、入力装置１５０を介して操作部１１５が決定する。なお、主画面１５および子画面１２に表示される内容は、例えば、映像取得部１１１により取得された自拠点の映像データ、映像受信部１１３により受信された相手拠点の映像データ、両拠点で共有する資料データ、あるいは、その他のコンテンツデータ等の表示データのいずれかを含む。
【００２７】
また、操作部１１５は、テレビ会議装置１Ａのユーザ指示に応じて、自画像を表示するか否かを指定するための情報を取得する。また、操作部１１５は、これらの指定情報をレイアウト決定部１２２へ送る。
【００２８】
レイアウト決定部１２２は、操作部１１５からの指定情報および映像表示部１１４からの表示画面１０の解像度情報を基に、自画面構成情報を生成する。自画面構成情報とは、自拠点であるＡ拠点に配置されるテレビ会議装置の表示画面１０において、主画面１５、子画面１２等の各画面を構成するための画面構成情報である。自画面構成情報の詳細については、後述する。
【００２９】
レイアウト送信部１１６は、ネットワーク１３０を介して、レイアウト決定部１２２からの自画面構成情報をテレビ会議装置１Ｂに送信する。また、レイアウト送信部１１６は、例えば入力装置１５０の入力に応じて、子画面１２を表示画面上に表示させたタイミングで、自画面構成情報を送信してもよい。なお、テレビ会議装置１Ａが送信する自画面構成情報は、テレビ会議装置１Ｂのレイアウト受信部１１７が相手画面構成情報として受信する。
【００３０】
自画面表示部１１８は、レイアウト決定部１２２からの自画面構成情報に基づいて、映像取得部１１１により取得された映像データ（つまり自画像）を、主画面１５または子画面１２に表示する。このとき、自画面表示部１１８は、操作部１１５により指定された子画面１２の大きさに応じて、適宜縮小や拡大を行う。なお、子画面１２は、１つとは限らない。
【００３１】
被写体検出部１２１は、映像取得部１１１からの映像データに含まれる顔、人物、資料などの様々な被写体を検出する。被写体の検出方法の一例としては、あらかじめ被写体の無い背景画像を取得しておき、現在の映像との差分を取得して被写体の有無を調べる背景差分法、被写体の特徴抽出に基づいて顔部分や人物を検出する顔検出方法や人物検出方法がある。また、被写体検出部１２１は、被写体の検出方法として、映像データの検出対象の動きを検出する動物体検出方法を用いても良い。また、被写体検出部１２１は、検出した被写体が映像データのどの領域に位置するかを検出する。この検出位置は、例えば、後述する図３において説明する顔領域の位置座標として表すことができる。
【００３２】
判定部１１９は、被写体検出部１２１からの検出結果およびレイアウト受信部１１７からの相手画面構成情報に基づいて、相手拠点の表示画面上で子画面と所定の被写体とが重複するか否かを判定する。次に、判定部１１９は、判定結果に基づいて、自拠点に配置されるカメラ１００の制御方法（カメラの回転方向、ズーム倍率など）を決定する。つまり、判定部１１９は、相手拠点の表示画面上で子画面と所定の被写体とが重複するか否かに基づいて、カメラ１００の撮影状態を制御するための指示を行う。
【００３３】
カメラ制御部１２０は、判定部１１９によるカメラ１００の制御方法（カメラの回転方向、ズーム倍率など）に基づいて、カメラ１００を制御するためのカメラ制御コマンドを生成する。カメラ制御コマンドは、カメラ１００が認識可能なコマンドであり、例えばＡＳＣＩＩコードなどの文字列である。このコマンドに応じて、カメラ１００は、制御される。つまり、カメラ制御部１２０は、カメラ１００の撮影状態を実際に制御する。
【００３４】
次に、自画面構成情報の詳細について説明する。
ここでは、自装置としてのテレビ会議装置１Ａの表示画面１０が子画面１２を有する場合について説明する。また、各画面が、矩形であることを想定している。
【００３５】
レイアウト決定部１２２が生成する自画面構成情報には、子画面１２の矩形の左上座標および右下座標、表示画面１０の水平方向の解像度および垂直方向の解像度の情報が含まれる。解像度情報とは、例えば単位をピクセルとして示す情報である。なお、解像度情報は、子画面１２の表示位置を決定する際には不要であり、レイアウト送信部１１６から相手拠点のテレビ会議装置へ送信する場合には必要になる。また、自画面構成情報は、子画面１２と主画面１５に表示するそれぞれのデータに関する情報を含んでもよい。
【００３６】
次に、相手画面構成情報の詳細について説明する。
ここでは、相手装置としてのテレビ会議装置１Ｂの表示画面２０が子画面２３を有する場合について説明する。また、各画面が矩形であることを想定している。
【００３７】
レイアウト受信部１１７が受信する相手画面構成情報には、テレビ会議装置１Ｂが子画面２３を表示させるために使用した相手画面構成情報が含まれる。そして、この相手画面構成情報には、矩形の左上座標および右下座標、表示画面２０の水平方向の解像度および垂直方向の解像度の情報を含む。また、他画面構成情報は、子画面２３と主画面１５に表示するそれぞれのデータに関する情報を含んでもよい。
【００３８】
これらの自画面構成情報および相手画面構成情報は、基本的には同一のものである。また、ここでは、矩形の左上座標と右下座標を用いる場合を示したが、これ以外の場所の座標情報を用いてもよい。
【００３９】
次に、図３〜図７を用いて、判定部１１９の動作について説明する。
図３は、本実施形態における判定部１１９の動作の一例を示すフローチャートである。
本実施形態では、自拠点に配置されるテレビ会議装置を１Ａ、相手拠点に配置されるテレビ会議装置を１Ｂとする。また、本実施形態では、図８に示すように、テレビ会議装置１Ｂの主画面２５に自拠点に配置されるカメラ１００により撮影された映像データを表示しており、主画面２５のいずれかの位置に子画面２３を重畳表示しているものとする。また、自拠点のテレビ会議の参加者は、２名として説明する。また、被写体検出部１２１は、被写体検出として顔検出を行うものとする。また、ここでは、自拠点のカメラをカメラ１００Ａとして説明する。
【００４０】
まず、判定部１１９は、映像取得部１１１からの入力画像としての映像データに対して、所定の顔検出処理を行うよう被写体検出部１２１へ指示する。なお、この顔検出処理は、公知技術を用いる（ステップＳ１１）。
【００４１】
続いて、判定部１１９は、レイアウト受信部１１７からの相手画面構成情報を取得する。そして、判定部１１９は、相手画面構成情報から、テレビ会議装置１Ｂの子画面２３の表示位置情報および表示画面１０の解像度情報を取得する（ステップＳ１２）。
【００４２】
続いて、判定部１１９は、被写体検出部１２１により検出された顔領域の領域情報を取得する。本実施形態では、２つの顔領域が検出されたとする。判定部１１９は、テレビ会議装置１Ｂの表示画面２０において、子画面２３が被写体検出部１２１により検出された２つの顔領域の少なくとも１つと重複するか否かを判定する（ステップＳ１３）。
【００４３】
以下の説明では、図４〜図７に示すように、相手画面構成情報に含まれる子画面２３の表示位置情報として（ｘ１、ｙ１、ｘ２、ｙ２）という情報が含まれているものとする。ここで、ｘ１およびｙ１は、表示画面２０における子画面２３の矩形の左上座標を示す。また、ｘ２およびｙ２は、表示画面２０における子画面２３の矩形の右下座標を示す。
【００４４】
また、第１の顔領域の位置は、（１、ｘｆ１、ｙｆ１）、（１、ｘｆ２、ｙｆ２）と表し、第２の顔領域の位置は（２、ｘｆ１、ｙｆ１）、（２、ｘｆ２、ｙｆ２）と表す。ここで、「１」および「２」は、顔領域の識別情報、ｘｆ１およびｙｆ１は表示画面１０における各顔領域の矩形の左上座標、ｘｆ２およびｙｆ２は表示画面１０における各顔領域の矩形の右下座標を示す。つまり、（１、ｘｆ１、ｙｆ１）は、第１の顔領域の矩形の左上座標、（１、ｘｆ２、ｙｆ２）は第１の顔領域の矩形の右下座標を示す。また、（２、ｘｆ１、ｙｆ１）は、第２の顔領域の矩形の左上座標、（２、ｘｆ２、ｙｆ２）は第２の顔領域の矩形の右下座標を示す。図４〜図７では、図面向かって左側に第１の顔領域、右側に第２の顔領域がある場合を示している。
【００４５】
また、図４〜図７では、説明のために（顔領域の識別情報、顔領域の座標情報）として座標を表す場合がある。例えば、（２、ｘｆ２）は、第２の顔領域の矩形右下ｘ座標ｘｆ２を表すものである。
【００４６】
また、テレビ会議装置１Ｂの表示画面２０の解像度は、（Ｘ，Ｙ）と表す。ここで、Ｘは、表示画面２０の水平方向の解像度、Ｙは表示画面２０の垂直方向の解像度を示す。
【００４７】
ステップＳ１３において、具体的には、次式（１）〜（４）のいずれかを満たす場合、表示画面２０において子画面２３がいずれの顔領域とも重複しないと判定する。
ｘｆ１＜ｘ１、かつ、ｘｆ２＜ｘ１・・・（１）
ｘ２＜ｘｆ１、かつ、ｘ２＜ｘｆ２・・・（２）
ｙｆ１＜ｙ１、かつ、ｙｆ２＜ｙ１・・・（３）
ｙ２＜ｙｆ１、かつ、ｙ２＜ｙｆ２・・・（４）
【００４８】
ステップＳ１３において、判定部１１９は、表示画面２０において子画面２３が顔領域と重複する場合、カメラ１００Ａを左右に回転させることで子画面２３がいずれの顔領域とも重複しなくなるかを判定する（ステップＳ１４）。このとき、次の式（５）、（６）のいずれかを満たす場合、子画面２３が表示画面２０の画面外とならず、かつ、カメラ１００Ａを左右に動かして子画面２３がいずれの顔領域とも重複しないと推定する。
（２、ｘｆ２）−（１、ｘｆ１）＜ｘ１・・・（５）
（２、ｘｆ２）−（１、ｘｆ１）＜Ｘ−ｘ２・・・（６）
【００４９】
図４は、表示画面２０にカメラ１００Ａにより撮影された映像データを表示した場合の子画面２３と顔領域との位置関係の一例を示す図である。式（５）、（６）により重複しないと推定された場合であって、図４に示す状態、つまり（２、ｘｆ２）＞ｘ１の場合には、次の式（７）に示す角度θだけカメラ１００を右に回転すると、いずれの顔領域も子画面２３と重複しなくなる。
【数１】
2010161662.tif 000003
【００５０】
ここで、図４に示すＬは、カメラ位置から仮想の撮影平面までの距離を表している。また、ωｘは、カメラ１００Ａから仮想の撮影平面に垂線を下ろした基準撮影方向と、水平方向の撮影対象端部とのなす角を示している。また、θは、カメラ１００Ａの基準撮影方向と実際に回転すべき回転角度とのなす角を示している。これらは、図５〜図７においても同様である。また、ωｙは、カメラ１００Ａの基準撮影方向と鉛直方向の撮影対象端部とのなす角を示している。
【００５１】
また、図５は、表示画面２０にカメラ１００Ａにより撮影された映像データを表示した場合の子画面２３と顔領域との位置関係の一例を示す図である。式（５）、（６）により重複しないと推定された場合であって、図５に示す状態、つまり（１、ｘｆ１）＞ｘ２の場合には、次式（８）に示す角度θだけカメラ１００Ａを左に回転すると、いずれの顔領域も子画面２３と重複しなくなる。
【数２】
2010161662.tif 000004
【００５２】
図４または図５に示したように、カメラ１００を左右いずれかに回転させることで子画面２３が顔領域と重複しなくなる場合、判定部１１９は、判定情報をカメラ制御部１２０へ送る（ステップＳ１５）。その判定情報は、カメラ１００Ａを式（７）もしくは式（８）に示す角度θ分左右にパン回転させるよう指示する情報である。
【００５３】
ステップＳ１４において、カメラ１００Ａを左右に回転させても子画面２３と少なくとも１つの顔領域とが重複する判定された場合、判定部１１９は、次の処理を行う。判定部１１９は、カメラ１００Ａを上下に回転させることで子画面２３がいずれの顔領域とも重複しなくなるかを判定する（ステップＳ１６）。このとき、判定部１１９は、次式（９）、（１０）のいずれかを満たす場合、カメラ１００Ａを上下に動かしても、子画面２３が表示画面２０の画面外とならず、かつ、子画面２３がいずれの顔領域とも重複しないと推定する。
（２、ｙｆ２）−（１、ｙｆ１）＜ｙ１・・・（９）
（２、ｙｆ２）−（１、ｙｆ１）＜Ｙ−ｙ２・・・（１０）
【００５４】
図６は、表示画面２０にカメラ１００Ａにより撮影された映像データを表示した場合の子画面２３と顔領域との位置関係の一例を示す図である。判定部１１９は、式（９）、（１０）により重複しないと推定された場合であって、図６に示す状態、つまり（１、ｙｆ１）、（２、ｙｆ１）のうち小さい値をｙｆｍｉｎとする。次に、判定部１１９は、ｙｆｍｉｎ＜ｙ２の場合、次式（１１）に示す角度θだけカメラ１００を上に回転すると、いずれの顔領域も子画面２３と重複しなくなると推定する。
【数３】
2010161662.tif 000005
【００５５】
また、図７は、表示画面２０にカメラ１００Ａにより撮影された映像データを表示した場合の子画面２３と顔領域との位置関係の一例を示す図である。判定部１１９は、式（９）、（１０）により重複しないと推定された場合であって、図７に示す状態、（１、ｙｆ１）、（２、ｙｆ１）のうち大きい値をｙｆｍａｘとする。次に、判定部１１９は、ｙｆｍａｘ＜ｙ１の場合、次式（１２）に示す角度θだけカメラ１００Ａを下に回転すると、いずれの顔領域も子画面２３と重複しなくなると推定する。
【数４】
2010161662.tif 000006
【００５６】
図６または図７に示したように、カメラ１００Ａを上下いずれかに回転させることで子画面２３が顔領域と重複しなくなる場合、判定部１１９は、次の処理を行う。判定部１１９は、カメラ１００Ａを式（１１）もしくは式（１２）に示す角度θ分上下にチルト回転させるよう指示する判定情報を、カメラ制御部１２０へ送る（ステップＳ１７）。
【００５７】
ステップＳ１６において、カメラ１００Ａを上下に回転させても子画面２３と少なくとも１つの顔領域とが重複する場合、判定部１１９は、次の処理を行う。判定部１１９は、一定量ズームアウト（つまり撮影倍率を低下）するよう指示する判定情報をカメラ制御部１２０へ送る（ステップＳ１８）。判定部１１９は、ステップＳ１８を実行した後、ステップＳ１１に戻る。したがって、判定部１１９は、子画面２３と顔領域との重複がなくなるまで、一定量ずつズームアウトしながら上記判定を行うことになる。なお、判定部１１９は、子画面２３と顔領域との重複がなくなる前に、判定開始から所定時間経過後に図３に示した処理を終了するようにしてもよい。
【００５８】
以上のように、本実施形態では、相手拠点に配置されるテレビ会議装置の表示画面において、所定の被写体と子画面とが重複して子画面に隠れた表示データを見ることができないという状況を回避可能である。
【００５９】
なお、図３では、テレビ会議の参加者の顔を被写体としたが、参加者の人物自体被写体としてもよい。さらに、本実施形態は、自拠点および相手拠点で共有する資料映像等の資料データを被写体としてもよい。この場合は、資料データを被写体として検出し、子画面と資料データとが重複しないよう判定することになる。また、自拠点のテレビ会議参加者が２名でない場合には、２名以上の顔領域を検出することになり、いずれの顔領域とも子画面が重複しないようカメラ制御することになる。
【００６０】
また、図３において、本実施形態は、子画面２３と被写体とが重複すると判定された場合、第１に左右にカメラを回転し、第２に上下にカメラを回転し、第３にズームアウトすると説明したが、この順序に限定されない。さらに、本実施形態は、重複すると判定された場合、左右に回転、上下に回転、ズームアウトをそれぞれ単独で行うようにしてもよい。
【産業上の利用可能性】
【００６１】
本発明は、相手拠点の表示画面上で子画面と所定の被写体とが重複することを防止可能な画面表示装置、テレビ会議装置等に有用である。
【図面の簡単な説明】
【００６２】
【図１】本発明の実施形態におけるテレビ会議装置の構成の一例を示すブロック図
【図２】本発明の実施形態におけるテレビ会議装置の画面構成の例を示す模式図
【図３】本発明の実施形態におけるテレビ会議装置の判定部の主要な動作の一例を示すフローチャート
【図４】本発明の実施形態における相手拠点の表示画面に自拠点のカメラにより撮影された映像データを表示した場合の子画面と顔領域との位置関係の一例を示す図
【図５】本発明の実施形態における相手拠点の表示画面に自拠点のカメラにより撮影された映像データを表示した場合の子画面と顔領域との位置関係の一例を示す図
【図６】本発明の実施形態における相手拠点の表示画面に自拠点のカメラにより撮影された映像データを表示した場合の子画面と顔領域との位置関係の一例を示す図
【図７】本発明の実施形態における相手拠点の表示画面に自拠点のカメラにより撮影された映像データを表示した場合の子画面と顔領域との位置関係の一例を示す図
【図８】テレビ会議装置の表示画面に表示される映像の一例を示す図
【符号の説明】
【００６３】
１Ａ、１Ｂ  テレビ会議装置
１０、２０  表示画面
１１、２１、２２  人物
１２、２３  子画面
１５、２５  主画面
１００、１００Ａ  カメラ
１１０  映像送受信装置
１１１  映像取得部
１１２  映像送信部
１１３  映像受信部
１１４  映像表示部
１１５  操作部
１１６  レイアウト送信部
１１７  レイアウト受信部
１１８  自画面表示部
１１９  判定部
１２０  カメラ制御部
１２１  被写体検出部
１２２  レイアウト決定部
１４０  ディスプレイ
１５０  入力装置
【図１】
2010161662.tif 000007
【図２】
2010161662.tif 000008
【図３】
2010161662.tif 000009
【図４】
2010161662.tif 000010
【図５】
2010161662.tif 000011
【図６】
2010161662.tif 000012
【図７】
2010161662.tif 000013
【図８】
2010161662.tif 000014