(57)【特許請求の範囲】
【請求項１】
１つの入力画像を複数の領域に分ける領域分割部と、
前記領域分割部により分けられた複数の領域のうち少なくとも１つの領域の画像について、前記入力画像の撮影視点と異なる仮想視点から撮影した画像に画像変換を行う画像変換部と、
前記入力画像の中から所定の対象物を検索する画像検索部と、
この画像検索部により検索された前記対象物の位置に基づいて前記領域分割部により分割される前記複数の領域を決定する領域設定部と、
を具備する画像変換装置。
【請求項２】
前記画像変換部が画像変換を行う際に用いる前記仮想視点は、前記複数の領域のうち少なくとも１つの他の領域の画像の視点と異なる視点である、
請求項１記載の画像変換装置。
【請求項３】
前記画像変換部により変換された前記複数の領域の画像を、前記複数の領域の位置関係を保ったまま画像データとして出力する出力部、
をさらに具備する請求項１に記載の画像変換装置。
【請求項４】
前記画像検索部により検索された前記対象物の向きを検出する向き検出部と、
前記向き検出部により検出された前記対象物の向きに基づいて前記各領域の画像の変換先の視線を決定する視線設定手段と、
をさらに具備し、
前記画像変換部は、前記視線設定手段により決定された視線に応じて前記各領域の画像を変換する、
請求項１に記載の画像変換装置。
【請求項５】
前記対象物は人物の顔部分である、
請求項１に記載の画像変換装置。
【請求項６】
被写体を結像するレンズおよび当該レンズにより結像された光学像を電気信号に変換する撮像素子を有し、撮影画像を得る撮影部と、
前記撮影画像を前記入力画像とする請求項１に記載の画像変換装置と、
を具備するカメラ。
【請求項７】
請求項６に記載のカメラと、
前記画像変換部により変換された前記複数の領域の画像をそれぞれ個別に表示出力する複数の表示部と、
を具備する映像システム。
【請求項８】
１つの入力画像を複数の領域に分ける領域分割ステップと、
前記領域分割ステップにより分けられた複数の領域のうち少なくとも１つの領域の画像について、前記入力画像の撮影視点と異なる仮想視点から撮影した画像に画像変換を行う画像変換ステップと、
前記入力画像の中から所定の対象物を検索する画像検索ステップと、
この画像検索ステップにより検索された前記対象物の位置に基づいて前記領域分割ステップにより分割される前記複数の領域を決定する領域設定ステップと、
を含む画像変換方法。
【請求項９】
コンピュータが読み取り可能にプログラムが記録された記録媒体であって、
前記プログラムは、
前記コンピュータに、
１つの入力画像を複数の領域に分ける領域分割機能と、
前記領域分割機能により分けられた複数の領域のうち少なくとも１つの領域の画像について、前記入力画像の撮影視点と異なる仮想視点から撮影した画像に画像変換を行う画像変換機能と、
前記入力画像の中から所定の対象物を検索する画像検索機能と、
この画像検索機能により検索された前記対象物の位置に基づいて前記領域分割機能により分割される前記複数の領域を決定する領域設定機能と、
を実現させる記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、視線方向が変更されたように画像を変換する画像変換装置、カメラ、映像システム、画像変換方法およびプログラムを記録した記録媒体に関する。
【背景技術】
【０００２】
以前より、カメラで撮影された画像を、撮影視点と異なる仮想的な視点から投影した画像に変換する技術が知られている。【０００３】
また、特許文献１には、この画像変換技術を利用して、複数のカメラで撮影された複数の画像から、広い範囲を俯瞰したような画像を作成する技術が開示されている。この技術では、設置位置の異なる複数のカメラによって撮影した複数の画像を、同一視点から撮影したような画像にそれぞれ変更し、かつ、これらの複数の画像を１つに合成することで、上記の広い範囲を俯瞰した画像を作成している。【０００４】
また、特許文献２には、メインカメラにより撮影された画像に死角部分が含まれる場合に、上記の画像変換技術を利用して、死角部分の画像を埋め合わせる技術が開示されている。この技術では、他のサブカメラによって死角部分を埋める範囲の撮影を行わせるとともに、この撮影画像の視点をメインカメラの視点と同一になるように変換して、死角部分と重なる範囲の画像を切り抜いて合成している。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−３３３５６５号公報
【特許文献２】特許第４３６４４７１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
例えば、テーブルの三方に参加者を配置させ、残りの一方からカメラで撮影して、この画像を他会場で表示出力させてテレビ会議を行う場合を考察する。この場合、カメラの正面に配置された参加者は、画像内で正面を向いた適切な表示状態となる。一方、カメラの左方と右方に配置された参加者は、画像内で横を向いてテレビ会議にやや不適切な表示状態となる。この場合、画像の左の領域は左へ向きを変え、画像の右の領域は右へ向きを変えたように表示ができれば、参加者全体の画像を適切に表示できると考えられる。【０００７】
しかしながら、従来の視点を変更する画像変換技術は、１つの画像全体を１つの仮想的な視点から見たように変換するものであった。そのため、この画像変換技術では、例えば、画像の右側は３０°向きを変え、画像の左側は２０°向きを変えたいといったような場合に、柔軟に対応することができなかった。【０００８】
この発明の目的は、１つの画像の中に、異なる方向に向きを変更したい複数の領域がある場合でも、柔軟に対応して所望の画像変換を行うことのできる画像変換装置、カメラ、映像システム、画像変換方法およびプログラムを記録した記録媒体を提供することにある。
【課題を解決するための手段】
【０００９】
本発明に係る画像変換装置は、１つの入力画像を複数の領域に分ける領域分割部と、前記領域分割部により分けられた複数の領域のうち少なくとも１つの領域の画像について、前記入力画像の撮影視点と異なる仮想視点から撮影した画像に画像変換を行う画像変換部とを具備する構成を採る。
【発明の効果】
【００１０】
本発明に従うと、１つの入力画像を複数の領域に分けて、領域ごとに視線を変更する画像変換を行うことができる。したがって、１つの画像の中に、異なる方向に向きを変更したい複数の領域がある場合に柔軟に対応することができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の第１実施形態のカメラ装置とディスプレイとからなるテレビ会議システムを示すブロック図
【図２】実施形態のカメラ装置を用いた撮影状況の一例を表わした平面図
【図３】図２の撮影により得られる撮影画像を表わした画像図
【図４】視線設定部により設定された視線方向を表わした平面図
【図５】画像変換および画像合成の処理後の撮影画像を表わした画像図
【図６】ディスプレイの配置例を示す平面図
【図７】ディスプレイ配置の変形例を示す平面図
【図８】ディスプレイ構成の変形例を示す平面図
【図９】本発明の第２実施形態のカメラ装置とディスプレイとからなるテレビ会議システムを示すブロック図
【図１０】顔向き検出部の処理手順を示すフローチャート
【図１１】顔検出が行われている状態を表わした画像図
【図１２】各顔の方向検出の結果の一例を示す説明図
【図１３】領域設定と視線設定の結果の一例を示す説明図
【発明を実施するための形態】
【００１２】
以下、本発明の実施の形態を図面に基づいて説明する。
【００１３】
［第１実施形態］
図１は、本発明の第１実施形態のカメラ装置１とディスプレイ２１とからなるテレビ会議システム（映像システム）を示すブロック図である。
【００１４】
この実施形態のカメラ装置１は、カメラレンズと撮像素子とを有し撮影画像の画像データを取り込む画像入力部１２と、撮影画像を複数の領域に分割する領域分割部１３と、分割された各領域の画像に対して画像変換を行う画像変換部１４とを備えている。また、このカメラ装置１は、画像合成および出力を行う合成部１５と、人物の顔の３次元形状モデルまたは部屋の壁や机などの形状モデルが格納された形状モデルデータベース１６とを備えている。さらに、このカメラ装置１は、分割する領域を設定する領域設定部１７と、画像変換に関する設定を行う視線設定部１８等を備えている。
【００１５】
領域設定部１７は、複数の操作ボタンを有し、ユーザの操作入力を受けて撮影画像中に複数の領域を設定する。例えば、領域設定部１７は、ユーザの操作入力によって撮影画像中に任意の線分を表示出力させ、これらの線分あるいは撮影画像の外枠線によって囲まれた範囲を１つの領域として設定する。あるいは、領域設定部１７は、ユーザの操作入力によって、撮影画像中に複数の点を入力させ、入力された複数の点を頂点とした折れ線により分割される領域、または、入力された複数の点を母点とするボロノイ領域を求める。そして、領域設定部１７は、このボロノイ領域を複数の領域として設定するようにしてもよい。設定された領域の情報は、領域分割部１３と視線設定部１８へ送られる。
【００１６】
領域分割部１３は、領域設定部１７から設定された領域の情報を受けて、撮影画像が設定された領域で分割されるように、画像入力部１２から供給される画像データの分割処理を行う。そして、領域分割部１３は、領域ごとの画像データを生成して画像変換部１４へ送る。
【００１７】
視線設定部１８は、複数の操作ボタンを有し、ユーザの操作入力を受けて撮影画像中の複数の領域に対して変換先の視線方向（画像変換後の視線となる方向）を設定する。例えば、視線設定部１８は、撮影画像の設定領域ごとに矢印を表示させるとともに、ユーザの操作入力によりこの矢印の向きを３次元的に変更可能にする。そして、視線設定部１８は、最終的に決定された矢印の向きを変換先の視線方向として設定する。領域ごとの視線方向の設定情報は、画像変換部１４へ送られる。
【００１８】
画像変換部１４は、カメラレンズの光軸を視線方向とした画像を、領域ごとに設定された視線方向で眺めた画像になるように、各領域の画像データに対して画像変換処理を行う。なお、広角撮影の場合には、視野角に応じて画像の左右の領域の視線方向は、カメラレンズの光軸から少し変化する。そのため、上記の視線方向を変更する画像変換を正確に行うには、変換前の画像が３次元的にどのような形状でどのように配置されているかという情報が必要となる。画像変換部１４は、正確さが要求される人物の顔の部分のみ顔の３次元モデルを用い、その他の部分は一様な平面に沿って配置されたモデルとして扱って、簡易的な画像変換を行うようになっている。上記一様な平面の向きは、例えば、画像解析により各領域の画像内で向きを特定できる線分または多角形を抽出し、これらから平均的な向きを推測して求めることができる。また、画像変換部１４は、ユーザにこの平面の向きを入力させるように構成してもよい。
【００１９】
画像変換部１４は、各領域の画像内で人物の顔部分をマッチング処理等により検索し、人物の顔部分が有ればさらに目鼻口および輪郭等から顔の向きを特定する。そして、画像変換部１４は、形状モデルデータベース１６の３次元形状データを用いて顔の画像を３次元形状に対応づける。また、その他の部分は、上述のように向きを推定した平面に対応づける。これらの処理により、画像変換部１４は、画像データの各画素を仮想的な３次元マッピング空間の座標点に対応づけることができる。続いて、画像変換部１４は、視線設定部１８から供給された設定情報に基づいて、仮想的な３次元空間にマッピングされた画像を新たに設定された視線方向から撮影された画像に変換する処理を行って、変換後の画像データを生成する。このような画像処理により、画像変換部１４は、人物の顔の部分は比較的に正確に、その他の部分は大まかに（平面モデルとして変換されるように）、各領域の画像を撮影時のカメラの視線方向からの新たに設定された視線方向で眺めたような画像に変換することができる。
【００２０】
合成部１５は、画像変換部１４から供給される複数領域の画像データを、分割されたときの配列と同じになるように並べて１つの画像データに合成し、この画像データを表示出力用の表示データに変換して出力する。なお、分割された複数領域の画像データを複数のディスプレイでそれぞれ個別に表示出力させる場合には、合成部１５は、分割された複数領域の画像データを、個別のディスプレイに適する表示データに変換して出力する構成とすればよい。
【００２１】
図１のテレビ会議システムは、上述のカメラ装置１と、ネットワークを介して表示データを入力して画像の表示出力を行う１つ又は複数のディスプレイ２１等から構成される。例えば、３台のディスプレイ２１を備えるシステムでは、これら複数のディスプレイ２１が画像の分割領域に対応して、表示画像の複数の領域部分を主に表示出力するように設定される。
【００２２】
次に、上記テレビ会議システムの動作について説明する。
【００２３】
図２には、カメラ装置１を用いた撮影状況の一例を表わした平面図を、図３には、図２の撮影によって得られる撮影画像を表わした画像図を示す。図２の例は、テーブル５１の三方に人物Ｐ１〜Ｐ６が配置され、テーブル５１の残りの一方から広角のカメラレンズ１１を介して広い視野角θ１で人物Ｐ１〜Ｐ６を撮影している状況を表わしている。このような撮影により図３のような画像が得られている。
【００２４】
最初に、ユーザは、領域設定部１７を介して領域の設定を行う。ここでは、ユーザが、図３に示すように、領域設定部１７により分断線Ｌ１，Ｌ２を指定して、テーブル５１の左辺の範囲、対面の範囲、右辺の範囲を各領域とする設定を行ったとする。
【００２５】
図４には、視線設定部により設定された視線方向を表わした平面図を、図５には、画像変換および画像合成の処理後の撮影画像を表わした画像図を示す。
【００２６】
次に、ユーザは、視線設定部１８を介して変換する視線方向の設定を行う。例えば、ユーザは、図４に示すように、左の領域に対して実カメラの視線方向ＶＡ１に対する新たな視線方向ＶＡ２を、視線設定部１８を介して設定する。さらに、ユーザは、中央の領域に対して元から変更のない視線方向ＶＢ２を、視線設定部１８を介して設定し、右の領域に対して実カメラの視線方向ＶＣ１に対して新たな視線方向ＶＣ２を、視線設定部１８を介して設定する。
【００２７】
続いて、画像変換部１４は、左の領域の画像データに対して、Ａ面Ｓ１の画像と人物Ｐ１，Ｐ２の３次元形状の顔部分とその背景の壁の画像を回転角“−θＡ”で回転させる画像変換処理を行う。また、画像変換部１４は、右の領域の画像データに対して、Ｃ面Ｓ３の画像と人物Ｐ５，Ｐ６の３次元形状の顔部分とその背景の壁の画像を回転角“θＣ”で回転させる画像変換処理を行う。画像変換部１４は、視線方向に変更のない中央の領域の画像データについてはそのまま合成部１５へ送る。
【００２８】
そして、このような複数の領域の変換後の画像データが合成部１５で合成されて、図５のような画像が生成される。図５の画像では、テーブル５１の左に配置された人物Ｐ１，Ｐ２と右に配置された人物Ｐ５，Ｐ６とが、正面に近い向きに変換され、遠近感も変換前に比較してほぼ同等に変換されるなど、テレビ会議用に見やすい画像に変換されている。
【００２９】
なお、上記の合成の際、合成部１５は、各領域の画像の境目を滑らかにするスムージング処理、または、特徴的な物体の位置を合わせる処理を行っても良い。例えば、図５の場合、合成部１５は、テーブル５１が特徴的な物体であるとして端の位置を合わせるために、例えばＡ面の画像全体を上下に移動させてもよい。また、合成部１５は、移動させることによって空いた領域をユーザにより見えないようにするため、画面全体の上下領域を消去して、画像全体が長方形になるように合成すればよい。
【００３０】
なお、合成部１５は、画像変換部１４が変換した各領域の画像データを、変換前の画像データと同じ領域サイズ（形状）にして合成するため、変換後の画像データ中、使用する領域を選択したうえで合成する。変換後の画像データではサイズが不足する部分が生じる場合には、合成部１５は、不足部分の画素データとして近くの画像を左右反転（鏡像を作成）して利用する構成としてもよい。
【００３１】
図６には、複数のディスプレイ２１の配置例を表わした平面図を示す。図中、５２はテレビ会議の会場のテーブル、Ｐ７〜Ｐ１０は会場の人物である。また、点線より下側が接続元（現在の会場）での視聴空間を、点線より上側が画像から想像される接続先の会場の空間イメージを表わしている。
【００３２】
カメラ装置１から送られてくる画像を視聴する側では、図６に示すように、画像の分割領域の個数と同数のディスプレイ２１が、分割領域と同じ配置に並べられる。その際、各ディスプレイ２１の向きＶＡ，ＶＢ，ＶＣは、各領域の画像の変換後の視線方向ＶＡ２，ＶＢ２，ＶＣ２に対応するように並べられる。或いは、ディスプレイ２１の向きの情報がカメラ装置１へ送られ、カメラ装置１では、この情報に対応させて新たな変換先の視線方向ＶＡ２，ＶＢ２，ＶＣ２が設定される構成としてもよい。
【００３３】
そして、各ディスプレイ２１には、対応する各領域の画像が主に含まれるように表示出力が行われる。合成部１５が、表示出力先のディスプレイ２１を決定する際には、合成部１５は、各ディスプレイ２１の配置情報と画像中の各分割領域の位置情報とを参照すればよい。そして、合成部１５は、該当するディスプレイ２１の配置情報に対応する分割領域を含んだ画像データを各ディスプレイ２１へ送信する。
【００３４】
このような複数のディスプレイ２１の画像出力によって、図６に示すように、画像から想像されるテレビ会議の相手の人物Ｐ１〜Ｐ６とテーブル５１の配置および向きが、適宜広がる（側面方向から正面方向に向きを変えて見た）ように変換される。これにより、テレビ会議の相手が見やすくなる。
【００３５】
図７と図８には、ディスプレイ２１の個数と配置の変形例を表わした平面図を示す。図７に示される複数のディスプレイ２１は、角度を変えずに平面上に並べて配置されたものである。このような配置のときには、ディスプレイ２１の画面平面の垂線と、見やすい向きＶＡ，ＶＢ，ＶＣに応じた変換後の視線方向との角度差を、視線方向の変換角θＡ、θＢに付加するとよい。こうすることで、ディスプレイ２１を平面的に配置した場合でも、図６の場合とほぼ同様に、テレビ会議の相手を見やすく表示出力することができる。また、図８に示すように、１台のディスプレイ２１により全分割領域の画像を一括して表示させるようにしてもよく、このようにしても、図６の場合とほぼ同様に、テレビ会議の相手を見やすく表示出力することができる。
【００３６】
［第２実施形態］
図９は、第２実施形態のカメラ装置１Ａとディスプレイ２１とからなるテレビ会議システムを示すブロック図である。第２実施形態のカメラ装置１Ａは、領域設定部１７による画像中の領域の設定と、視線設定部１８による新たな視線方向の設定とを、顔向き検出部１９の処理によって自動的に遂行されるようにしたものである。
【００３７】
図１０は、顔向き検出部１９の処理手順を示すフローチャート、図１１は顔検出を説明する画像図、図１２は、各顔の方向検出の結果の一例を示す説明図、図１３は領域設定と視線設定の結果の一例を示す説明図である。
【００３８】
顔向き検出部１９は、例えばユーザからの設定開始の指示操作に基づいて図１０に示すフローチャートの処理を開始する。ユーザは、人物配置を済ませ撮影フレームを決めた状態で設定開始の指示操作を行う。
【００３９】
処理が開始されると、先ず、顔向き検出部１９は、この時点の撮影画像を画像入力部１２から取得して、この撮影画像の中から人物の顔部分をマッチング処理により検出する（ステップＪ１：画像検索処理）。図１１に示すように、テーブル５１と人物Ｐ１〜Ｐ６が撮影された画像Ｇ１であれば、ここで、人物Ｐ１〜Ｐ６の顔部分の検出枠ｆ１〜ｆ６が抽出される。
【００４０】
次に、顔向き検出部１９は、検出された顔部分の輪郭、目鼻口の配置を分析して各顔の向きを検出する（ステップＪ２：向き検出処理）。図１２に示すように、画像Ｇ１の各人物Ｐ１〜Ｐ６の顔向きが検出されて、カメラレンズの位置と各自の顔向きの関係からそれぞれ数値化される。
【００４１】
続いて、顔向き検出部１９は、検出された顔の画像中の位置および顔の向きに基づいて、複数の顔をグループ分けする（ステップＪ３）。具体的には、顔向き検出部１９は、検出された顔の向きの差が所定角度以内（例えば３０°以内）であり、かつ、検出された顔の位置が順番になっている複数の顔を、１つのグループとしてまとめる。画像Ｇ１の場合、顔向き検出部１９は、左から連続する２人の人物Ｐ１，Ｐ２の顔の向きの差が３０°以内であり、次の３人目の人物Ｐ３の顔の向きの差が３０°を超えるので、検出枠ｆ１，ｆ２の顔を第１グループとする。同様の処理の繰り返しにより、顔向き検出部１９は、検出枠ｆ３，ｆ４の顔を第２グループ、検出枠ｆ５，ｆ６の顔を第３グループとする。
【００４２】
グループ分けを行った後、顔向き検出部１９は、各グループに対応させて画像の領域を分割する（ステップＪ４：領域設定処理）。領域の分割は、例えば、ボロノイ分割のアルゴリズムを利用して行うことができる。すなわち、顔向き検出部１９は、検出された各顔の中心を母点とし、画像上の各点が、一番近い母点に属するように各顔ごとの領域分けを行う。さらに、顔向き検出部１９は、同一グループに属する複数の顔の領域を合わせて、当該グループの領域Ｒ１〜Ｒ３（図１３参照）とする。グループごとの領域Ｒ１〜Ｒ３が決定したら、顔向き検出部１９は、この領域Ｒ１〜Ｒ３の情報を領域設定部１７へ送って領域設定が行われる。
【００４３】
領域分割の後、顔向き検出部１９は、グループごとに変換先の視線方向を決定する処理を行う（ステップＪ５：視線設定処理）。視線方向は、図１３に示すように、同一グループに含まれる複数の顔の向きを平均した方向として求める。求められた視線方向は、グループごとの領域Ｒ１〜Ｒ３に対応づけられて、視線設定部１８へ送られる。それにより、視線設定部１８において各領域Ｒ１〜Ｒ３の変換先の視線方向が設定される。なお、視線方向が、各領域Ｒ１〜Ｒ３の中央点とカメラとを結ぶ視線方向を基準に、小さな角度（例えば±５°）しか変化がない場合には、画像変換を省略するため変換先の視線方向の設定が行われない構成としてもよい。
【００４４】
第２実施形態において、画像の領域設定と新たな視線方向の設定の他は、第１実施形態と同様である。この第２実施形態では、領域設定と新たな視線方向の設定に必要なユーザの操作入力を大幅に削減することができる。
【００４５】
以上のように、上記第１および第２実施形態のカメラ装置１，１Ａ、および、テレビ会議システムによれば、１つの入力画像に対して、画像を複数の領域に分割し、領域ごとに異なる視線方向の画像に変換する画像変換処理を行うことができる。したがって、このシステムによれば、１つの入力画像中に様々な方向を向いた複数の被写体が含まれている場合に、これらの被写体の配置または向きに柔軟に対応して、全体的に見やすい画像に変換することができる。或いは、様々な態様で所望の変形を及ぼした画像に変換することができる。
【００４６】
なお、上記実施形態では、本発明の映像システムを、テレビ会議システムに応用した例を示したが、これらの構成を、１台のデジタルスチルカメラまたは１台のデジタルビデオカメラ内で実現させてもよい。すなわち、画像の取り込み、画像の領域分割、視線方向を変更する画像変換、および、画像の表示出力が１台の装置で行われる構成としてもよい。また、実施形態のカメラ装置１，１Ａから画像入力部１２を切り離した部分が画像変換装置として別体に設けられてよい。
【００４７】
また、上記第２実施形態では、複数の顔をグループ分けしてグループごとの各領域で視線方向を変更する画像変換を行う例を示した。しかしながら、画像変換部としては、顔の検出枠ｆ１〜ｆ６の各々を個別の領域として設定し、顔の部分のみを個別に画像変換（視線方向の変更）する構成を採用してもよい。
【００４８】
また、背景部分も顔の角度に応じて視線方向の変換を行ってもよい。なお、視線方向の変換は、入力がカメラ画像であり、ＣＧのように横および後ろの画像データがないので、控えめ（想定される変換よりも小さめ）の変換が良い場合もある。特に変換角度が３０°を超える場合は控えめな変換を行うようにするとよい。
【００４９】
また、視線設定部１８は、必ずしも全ての視線を変更する必要はなく、１つの領域の視点変換を行い、他の領域は視点変換を行わず元の視線のままとし、結果として２つの視線が相対的に変化した視線設定を行うようにしてもよい。
【００５０】
また、領域設定部１７、視線設定部１８、顔向き検出部１９は、カメラ装置１（又はカメラ装置１Ａ）に必ずしも含まれる必要はなく、ネットワーク経由でこのような機能が提供される構成としてもよい。例えば、テレビ会議システムの接続先のテレビ会議装置が画像入力部、領域分割部、画像変換部、形状モデルDB、合成部を具備する。また、接続元のテレビ会議装置が領域設定部、視線設定部、顔向き検出部を具備する。そして、接続元のテレビ会議装置が、接続先のテレビ会議装置からネットワーク経由で画像を受け取り、領域設定、視線設定、顔向き検出を行い、その結果を接続先のテレビ会議システムに送ることで所望の画像を得るように構成してもよい。
【００５１】
また、上記実施形態で示した、領域分割部１３、画像変換部１４、合成部１５、領域設定部１７、視線設定部１８、顔向き検出部１９の各構成は、ハードウェアにより構成しても良いし、コンピュータがプログラムを実行することで実現されるソフトウェアとして構成しても良い。プログラムは、コンピュータが読み取り可能な記録媒体に記録されていても良い。記録媒体は、フラッシュメモリなどの非一過性の記録媒体であっても良い。
【００５２】
２０１１年７月２５日出願の特願２０１１−１６１９１０の日本出願に含まれる明細書、図面および要約書の開示内容は、すべて本願に援用される。
【産業上の利用可能性】
【００５３】
本発明は、デジタルスチルカメラ、デジタルビデオカメラ、映像を異なる場所へ送信または放送して視聴させる映像システムに適用できる。
【符号の説明】
【００５４】
１，１Ａ  カメラ装置
１２  画像入力部
１３  領域分割部
１４  画像変換部
１５  合成部
１６  形状モデルデータベース
１７  領域設定部
１８  視線設定部
２１  ディスプレイ
ＶＡ１〜ＶＣ１  実カメラの視線方向
ＶＡ２〜ＶＣ２  変換先の視線方向
【図１】
0005963006.tif 000002
【図２】
0005963006.tif 000003
【図３】
0005963006.tif 000004
【図４】
0005963006.tif 000005
【図５】
0005963006.tif 000006
【図６】
0005963006.tif 000007
【図７】
0005963006.tif 000008
【図８】
0005963006.tif 000009
【図９】
0005963006.tif 000010
【図１０】
0005963006.tif 000011
【図１１】
0005963006.tif 000012
【図１２】
0005963006.tif 000013
【図１３】
0005963006.tif 000014