(57)【特許請求の範囲】
【請求項１】
広角カメラレンズを備える広角カメラと、
該広角カメラからのデジタル映像信号を受信し、該デジタル映像信号に含まれる映像の歪み補正をする第１制御部と、
該第１制御部が映像の歪み補正をする際に用いる映像補正情報を保持する保持部であって、前記映像補正情報が、少なくとも前記広角カメラからのデジタル映像信号に含まれる映像の一部の領域に関する歪み補正のための補正情報を含む保持部と、
ネットワークに接続された他のビデオ会議端末装置との信号の送受信を行うための第２制御部と、
前記広角カメラのデジタル映像信号および前記歪み補正後のデジタル映像信号を表示する情報表示部と、
前記保持部に保持されている前記映像補正情報を切り替える信号を、操作するごとに出力する操作部とを備え、
前記デジタル映像信号に含まれる映像は、複数の領域に分けられ、
前記保持部は、前記領域に応じて前記映像補正情報を予め記憶しており、
前記操作部は、前記操作により前記複数の領域のいくつか、もしくは、全てを選択するとともに、複数の前記映像補正情報のうち、選択された前記複数の領域に対応した前記映像補正情報を選択し、
前記第１制御部が、前記操作部によって切り替えられて選択された前記映像補正情報を用いて前記デジタル映像信号に含まれる映像の歪み補正をすることを特徴とするビデオ会議端末装置。
【請求項２】
広角カメラレンズを備える広角カメラと、
該広角カメラからのデジタル映像信号を受信し、該デジタル映像信号に含まれる映像の歪み補正をする第１制御部と、
該第１制御部が映像の歪み補正をする際に用いる映像補正情報を保持する保持部であって、前記映像補正情報が、少なくとも前記広角カメラからのデジタル映像信号に含まれる映像の一部の領域に関する歪み補正のための補正情報を含む保持部と、
ネットワークに接続された他のビデオ会議端末装置との信号の送受信を行うための第２制御部と、
前記広角カメラのデジタル映像信号および前記歪み補正後のデジタル映像信号を表示する情報表示部と、
前記保持部に保持されている前記映像補正情報を切り替える信号を、操作するごとに出力する操作部とを備え、
前記第１制御部が、前記操作部によって切り替えられて選択された前記映像補正情報を用いて前記デジタル映像信号に含まれる映像の歪み補正をし、
前記広角カメラからのデジタル映像信号に含まれる映像の一部の領域が、前記広角カメラからのデジタル映像信号に含まれる映像の概略全体部分、概略中央部分、概略左側部分および概略右側部分から選択される少なくとも１または２以上のいずれかの組み合わせからなることを特徴とするビデオ会議端末装置。
【請求項３】
前記広角カメラの仰角を検知する情報表示傾き検知手段を備え、該情報表示傾き検知手段から情報表示傾き信号が出力されると、前記保持部が、該保持部に保持されている前記映像補正情報の中から、前記情報表示傾き信号に対応する映像補正情報を選択し、前記第１制御部が、前記選択された映像補正情報を前記広角カメラからのデジタル映像信号に含まれる映像の歪み補正をする際に用いる対象とすることを特徴とする請求項１または請求項２に記載のビデオ会議端末装置。
【請求項４】
前記広角カメラの撮影方向を検知するカメラ方向検知手段を備え、該カメラ方向検知手段からカメラ方向信号が出力されると、前記保持部が、該保持部に保持されている前記映像補正情報の中から、前記カメラ方向信号に対応する映像補正情報を選択し、前記第１制御部が、該選択された映像補正情報を前記広角カメラからのデジタル映像信号に含まれる映像の歪み補正をする際に用いる対象とすることを特徴とする請求項１から請求項３までのいずれか１項に記載のビデオ会議端末装置。
【請求項５】
前記映像補正情報が、所定の条件下において歪み補正を行う対象を特定した関係を示す補正情報をさらに備えることを特徴とする請求項１から請求項４までのいずれか１項に記載のビデオ会議端末装置。
【請求項６】
請求項１から請求項５までのいずれか１項に記載のビデオ会議端末装置の少なくとも２つと、該少なくとも２つのビデオ会議端末装置の間で行われるビデオ会議を制御するビデオ会議サーバとを備え、前記少なくとも２つのビデオ会議端末装置と前記ビデオ会議サーバとがネットワークで接続されていることを特徴とするビデオ会議システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ビデオ会議端末装置、ビデオ会議システム、映像の歪み補正方法および映像の歪み補正プログラムに関する。
【背景技術】
【０００２】
例えば、インターネット等の通信ネットワークを介して、遠隔地との間で、遠隔会議を行うビデオ会議システムが普及している。この会議システムにおいては、遠隔会議を行う出席者等の当事者の一方がいる会議室において、遠隔会議システムの端末装置を用いている。
【０００３】
この遠隔会議システムの端末装置により、会議の当事者などの会議室の画像および発言などの音声を撮影および収集し、それをデジタルデータに変換して相手方の端末装置に送信し、相手方の会議室のディスプレイに表示およびスピーカにより音声出力することにより、実際の会議に近い状態で遠隔地間の会議が行われている。
【０００４】
従来のビデオ会議システムでは、多人数の参加者を表示画面内に取り込むために、端末装置のカメラにズーム機構や上下左右に動く機構を持たせたり、複数のカメラから構成されるマルチカメラを用いたりして、実質的に広い画角を確保している。
【０００５】
特許文献１は、魚眼レンズカメラにより撮影された画像の歪みを補正する画像補正処理部を備えた魚眼レンズカメラ装置を開示する。この装置において、画像補正処理部は、魚眼レンズカメラの設置角を補正する座標変換と、魚眼レンズ画像の歪みを補正する座標変換とを組み合わせて演算する構成を有する。
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、従来のビデオ会議システムは、画像の歪みを補正する処理回路等は必要としないが、端末装置のサイズや重量が増し原価が上昇するため、高価な据え置き型のシステムとなっている。
【０００７】
また、特許文献１の魚眼レンズカメラ装置では、撮影の状態を把握することができず、このため、ユーザの所望する補正の方法を選択的に利用するということはできない。
【０００８】
これらの問題を解決するために、本発明は、広角カメラを備えるとともに、ユーザビリティを向上させたビデオ会議システムおよび画像歪み補正方法を提供することと、広角カメラを利用するとともに、簡易な構成を採用することによって、自動的にまたは画像の状態から操作者の所望する表示態様で画像の歪みを補正し、さらに端末装置のサイズや重量の増加を抑えて持ち運び可能とした、ビデオ会議システムおよび画像歪み補正方法を提供することとを目的とする。
【課題を解決するための手段】
【０００９】
上記の課題を達成するために、本発明に係るビデオ会議端末装置は、広角カメラレンズを備える広角カメラと、該広角カメラからのデジタル映像信号を受信し、該デジタル映像信号に含まれる映像の歪み補正をする第１制御部と、該第１制御部が映像の歪み補正をする際に用いる映像補正情報を保持する保持部であって、前記映像補正情報が、少なくとも前記広角カメラからのデジタル映像信号に含まれる映像の一部の領域に関する歪み補正のための補正情報を含む保持部と、ネットワークに接続された他のビデオ会議端末装置との信号の送受信を行うための第２制御部と、前記広角カメラのデジタル映像信号および前記歪み補正後のデジタル映像信号を表示する情報表示部と、前記保持部に保持されている前記映像補正情報を切り替える信号を、操作するごとに出力する操作部とを備え、前記デジタル映像信号に含まれる映像は、複数の領域に分けられ、前記保持部は、前記領域に応じて前記映像補正情報を予め記憶しており、前記操作部は、前記操作により前記複数の領域のいくつか、もしくは、全てを選択するとともに、複数の前記映像補正情報のうち、選択された前記複数の領域に対応した前記映像補正情報を選択し、前記第１制御部が、前記操作部によって切り替えられて選択された前記映像補正情報を用いて前記デジタル映像信号に含まれる映像の歪み補正をすることを特徴とする。
【発明の効果】
【００１０】
本発明によれば、広角カメラを備えるとともに、ユーザビリティを向上させたビデオ会議システムおよび画像歪み補正方法を提供することができ、さらに、広角カメラを利用するとともに、簡易な構成を採用することによって、自動的にまたは画像の状態から操作者の所望する表示態様で画像の歪みを補正し、さらに端末装置のサイズや重量の増加を抑えて持ち運び可能とした、ビデオ会議システムおよび画像歪み補正方法を提供することができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置の斜視図である。
【図２】図１に示すビデオ会議端末装置のブロック図を含むビデオ会議システムの一例のブロック図である。
【図３】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置における画像補正テーブルの一例を示す図である。
【図４】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置における画像補正テーブルの他の一例を示す図である。
【図５】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置における画像補正テーブルのさらに他の一例を示す図である。
【図６】歪み補正を行わない場合の画像の一例を説明するための図である。
【図７】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置において、図６に示す画像の概略全体部分に歪み補正を行った場合を説明するための図である。
【図８】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置において、図６に示す画像の概略中央部分に歪み補正を行った場合を説明するための図である。
【図９】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置において、図６に示す画像の概略左側部分および概略右側部分に歪み補正を行って一画面とした場合を説明するための図である。
【図１０】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置において、図６に示す画像の概略中央部分、概略左側部分および概略右側部分に歪み補正を行って一画面とした場合を説明するための図である。
【図１１】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置において、画像の歪み補正方法の実施の形態に係るフローチャートである。
【図１２】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置において、カメラの仰角または方向を検出するステップを含む画像の歪み補正方法の実施の形態に係るフローチャートである。
【図１３】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置において、映像補正テーブル番号を決定するための一例のフローチャートである。
【図１４】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置における、画像の歪み補正方法の他の例に係るフローチャートである。
【図１５】図１４に示す画像の歪み補正方法の概念を説明するための図である。
【図１６】図１４に示す画像の歪み補正方法における領域の切り出しの方法の一例を説明するための図である。
【図１７】図１４に示す画像の歪み補正方法において切り出した領域と表示画像との関係を説明するための図である。
【図１８】図１４に示す画像の歪み補正方法において切り出した領域と映像表示番号との関係を説明するための図である。
【図１９】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置における画像の歪み補正方法において、画像の一部のマスクまたは画像の切り出しを行う方法の一例に係るフローチャートである。
【図２０】図１９に示す画像の一部のマスクまたは画像の切り出し方法の一例を説明するための図である。
【図２１】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置における画像の歪み補正方法において、切り出した画像の明るさを調整するための明るさ調整テーブルの一例を示す図である。
【図２２】本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置における画像の歪み補正方法において、図２１に示す明るさ調整テーブルを用いて、切り出した画像の明るさを調整するためのフローチャートである。
【図２３】図２２に示すフローチャートに基づいて切り出した画像の明るさを調整する方法を説明するための画像の一例を示す図である。
【発明を実施するための形態】
【００１２】
以下、本発明の実施の形態について、図面を参照しながら説明する。
【００１３】
＜ビデオ会議端末装置の外観＞
図１は、本発明の実施の形態に係るビデオ会議システム用のビデオ会議端末装置１００の斜視図である。
【００１４】
ビデオ会議端末装置１００は、図中概略水平面内に置かれた本体部１００ａと、ＬＣＤヒンジ部１１５を中心とするＬＣＤヒンジ動作（図中、符号１１４で示す）によって本体部１００ａから約９０度に渡って回転（回動）可能な表示部１００ｂとを備える。
【００１５】
表示部１００ｂには情報表示部の一例としての液晶表示部１０１が設けられ、液晶表示部１０１の上方には広角カメラの一例としての超広角カメラ１１２が設けられている。
【００１６】
超広角カメラ１１２のレンズは、ガラスまたはプラスチックにより形成され、例えば１３０度以上１９０度以下の画角を有する。超広角カメラ１１２に代えて例えば１１０度以上の画角を有する広角カメラを用いてもよい。
【００１７】
以下の説明において、広角カメラと称するものには超広角カメラも含む。
【００１８】
また、本実施の形態では、液晶ディスプレイをＬＣＤ（Liquid Crystal Display）と略称する。
【００１９】
本実施の形態では、表示部１００ｂの情報表示部としてＬＣＤを用いた例を示しているが、これに限らず、例えばプラズマディスプレイ、ＥＬ（エレクトロルミネッセンス）ディスプレイ等の他のディスプレイを採用しても良い。
【００２０】
従って、液晶表示部１０１と呼ばれる構成は情報表示部とし、ＬＣＤヒンジ部１１５は情報表示ヒンジ部とも言う。
【００２１】
また、ビデオ会議端末装置１００は、中央演算処理装置としてのＣＰＵ（Central Processing Unit）と、固定されたデータの記憶を行うＲＯＭ（Read Only Memory）と、一時的にデータを記憶するＲＡＭ（Random Access Memory）と、書き換え可能な不揮発性のメモリからなるバックアップメモリと、バッファ等を有する入力インターフェース回路と、出力インターフェース回路とを備えている。
【００２２】
超広角カメラ１１２は、ＬＣＤヒンジ部１１５の回転軸線と平行な軸線を中心に約１８０度回転可能なカメラ回転機構１１１に保持されていて、矢印で示すように液晶表示部１０１のある正面方向から背面方向まで回転することができる。
【００２３】
また、表示部１００ｂは、会議用のマイク１１３およびスピーカ１１６を備える。ただし、ビデオ会議端末装置１００に内蔵されたマイク１１３およびスピーカ１１６に代えて、ビデオ会議端末装置１００に設けられたＵＳＢ端子を介して外部のマイクおよびスピーカまたはスピーカ・マイクを接続して、これを用いてもよい。
【００２４】
さらに、ビデオ会議端末装置１００は、ＨＤＭＩやＶＧＡの画像出力端子を備えており、液晶表示部１０１に表示されるコンテンツを外部のモニタやプロジェクタに表示させることも可能である。
【００２５】
図１において、ビデオ会議端末装置１００の本体部１００ａの左側部は、電源のオンオフのための電源キー１０２と、ビデオ会議端末装置１００で実行可能な設定、操作メニュー等を表示するためのメニューキー１０３と、液晶表示部１０１の画面上でキー操作、例えば、ソフトキーボード等を操作するための上下左右矢印キー１０４とを備える。
【００２６】
本体部１００ａの左側部は、さらに、例えば、画面上のＯＫボタンを選択したり、上下左右矢印キー１０４によりソフトキーボード上で選択したキーを採用したりする際に用いる決定キー１０５（キーボードのＥＮＴＥＲキーに相当するもの）と、ビデオ会議を終了させるための切断キー１０６とを備える。
【００２７】
また、図１において、ビデオ会議端末装置１００の本体部１００ａの右側部は、後述の映像の所望の領域を表示して歪み補正を実行させるための操作部の一例としてのカメラ切替キー１０７と、液晶表示部１０１の画面の輝度を調整するためのＬＣＤ輝度切替キー１０８とを備える。
【００２８】
本体部１００ａの右側部は、さらに、スピーカ１１６から出力される音量を調整するための音量ボリュームキー１０９と、マイク１１３で取得する音声を相手のビデオ会議端末装置１００に伝えないようにするための音量ミュートキー１１０とを備える。
【００２９】
＜ビデオ会議端末装置を含むビデオ会議システムの概略構成＞
図２は、図１に示すビデオ会議端末装置１００の機能ブロック図を含むビデオ会議システムの一例の機能ブロック図である。ビデオ会議システムは、図２中に一点鎖線のブロックで示すローカル（ある拠点の端末）のビデオ会議端末装置１００と、ビデオ会議を行う他のいくつかのリモート（ある拠点の端末と離れた拠点にある端末）のビデオ会議端末装置４０と、ビデオ会議システムを制御するビデオ会議サーバ５０と、これらを接続するネットワーク３０とを備える。
【００３０】
この実施の形態では、例えば、ローカルのビデオ会議端末装置１００で撮影される出席者は、当該ローカルのビデオ会議端末装置１００の液晶表示部１０１に映し出された自己の映像をモニタしながらその映像の歪み補正処理を行い、その歪み補正を行った映像をリモートのビデオ会議端末装置４０に送るものとする。
【００３１】
同様に、リモートのビデオ会議端末装置４０で撮影される出席者は、当該リモートのビデオ会議端末装置４０に映し出された自己の映像をモニタしながらその映像の歪み補正処理を行い、その歪み補正を行った映像をローカルのビデオ会議端末装置１００に送るものとする。
【００３２】
ローカルのビデオ会議端末装置１００とリモートの各ビデオ会議端末装置４０とは同様の構成を有するため、以下、代表的に、ローカルのビデオ会議端末装置１００の備える機能ブロックについて説明する。
【００３３】
カメラレンズ１０は、ビデオ会議映像を取り込む超広角カメラ１１２（図１）のレンズに相当する。カメラレンズ１０は、ガラスあるいはプラスチック等により形成されている。カメラレンズ１０により捉えられた撮像対象の会議の出席者を含む映像の光信号は、カメラセンサ１１に送られる。
【００３４】
カメラセンサ１１はイメージセンサであり、カメラレンズ１０からの光信号をデジタル映像信号に変換する。イメージセンサは、ＣＣＤやＣＭＯＳセンサ等で実現され、例えば、水平方向に６４０ドット、垂直方向に４８０ドットの画素の映像を生成する光電変換デバイスである。
【００３５】
カメラセンサ１１によって光信号から変換されたデジタル映像信号は、第１制御部の一例であるカメラ映像補正制御部１２に送信される。
【００３６】
カメラ映像補正制御部１２は、カメラセンサ１１からデジタル映像信号を受信すると、後述するように、カメラ切替キー１０７（図１）の信号に応じて切り替えられて選択された映像補正情報の一例としての映像補正テーブルの内容に応じて映像信号の映像の歪みを補正し、補正後のデジタル映像信号をビデオ会議伝送制御部１５に送信する。
【００３７】
補正後のデジタル映像信号は、映像表示部１９に送信されて液晶表示部１０１に表示される。この液晶表示部１０１を見ている出席者は、カメラ切替キー１０７を切り替えることによって液晶表示部１０１に他の映像補正テーブルによって歪みが補正された映像をモニタすることによって適切な映像を選択する。
【００３８】
その選択された映像のデジタル映像信号は、第２制御部の一例であるネットワーク制御部１６からネットワーク３０を経由してリモートのビデオ会議端末装置４０に送信されてその液晶表示部１０１に表示される。これにより、リモートのビデオ会議端末装置４０の出席者は適切に歪み補正がされた映像を見ながら会議を行うことができる。
【００３９】
カメラ切替キー１０７を切り替えると、後述する通り、映像補正テーブルを選択するために、映像補正テーブル番号が保持部の一例であるカメラ映像補正テーブル保持部１３に送信される。
【００４０】
カメラ映像補正テーブル保持部１３は、ビデオ会議端末装置１００に内蔵されたハードディスクやＲＯＭ、ＲＡＭ等のメモリによって実現されるもので、少なくとも１つの映像補正テーブルを保持する。
【００４１】
映像補正テーブルについては、図３から図５までを参照しながら後述する。なお、映像補正テーブルは、テーブル形式のデータ構造として例示されているが、いずれのデータ構造の形式であっても良い。従って、映像補正テーブルは、テーブル形式のデータ構造を問わないので、映像補正情報とも言う。
【００４２】
スピーカ出力部１４は、スピーカ１１６（図１）によって実現されるもので、マンマシン制御部１８から受信した再生ボリューム信号に従って、ビデオ会議伝送制御部１５から受信したデジタル音声信号を再生する。
【００４３】
この再生されるデジタル音声信号は、他のリモートのビデオ会議端末装置４０のマイク入力部１７で取得されてネットワーク制御部１６から出力され、ネットワーク３０を経由し、さらにローカルのビデオ会議端末装置１００のネットワーク制御部１６を経由してビデオ会議伝送制御部１５に届いたデジタル音声信号である。
【００４４】
ビデオ会議伝送制御部１５は、ビデオ会議の呼制御とデジタル映像信号およびデジタル音声信号の伝送制御とを行う。これらのビデオ会議の制御方法については後述する。ビデオ会議伝送制御部１５は、ＣＰＵとそのＣＰＵ上で実行されるＲＯＭに記憶されたプログラムにより実現される。
【００４５】
また、カメラ映像補正制御部１２は、記憶部を備えていて、ビデオ会議の映像、歪み補正した映像、切り取った領域の映像を格納する。
【００４６】
ネットワーク制御部１６は、ネットワーク３０とビデオ会議端末装置１００との間でのデータの送受信を制御するもので、ビデオ会議伝送制御部１５から受け取った送信データをネットワーク３０に送信し、またネットワーク３０からの受信データをビデオ会議伝送制御部１５に送る。
【００４７】
このように、ネットワーク制御部１６は、ビデオ会議伝送制御部１５とネットワーク３０との間でのデータ送受信を透過的に実行する。ネットワーク制御部１６は、ネットワークインタフェースにより実現される。なお、ネットワークインタフェースは、有線、無線のいずれの送受信手段を用いてもよい。
【００４８】
マイク入力部１７は、マンマシン制御部１８から受け取った録音ボリューム信号に従った大きさでビデオ会議の音声を拾ってデジタル音声信号に変換してビデオ会議伝送制御部１５に送る。
【００４９】
マイク入力部１７は、マイク１１３（図１）により実現される。ビデオ会議伝送制御部１５に送られたデジタル音声信号は、ネットワーク制御部１６およびネットワーク３０を経由してビデオ会議を行っている他のリモートのビデオ会議端末装置４０に送信される。
【００５０】
マンマシン制御部１８は、操作者（またはユーザ）によるビデオ会議端末装置１００の超広角カメラ１１２や各キーの操作を制御する。例えば、マンマシン制御部１８は、ビデオ会議端末装置１００の超広角カメラ１１２によって取り込まれた映像データを映像表示部１９に送って液晶表示部１０１（図１）に表示する。
【００５１】
また、ユーザが、液晶表示部１０１（図１）を見ながらカメラ表示切替キー２０、カメラ方向検知手段の一例であるカメラ方向スイッチ２１、その他の操作キー２３を操作したり、ＬＣＤ傾き検知手段の一例であるＬＣＤ傾きスイッチ２２によってＬＣＤの所定の傾き（つまり、超広角カメラ１１２の仰角）が検知されたりすると、マンマシン制御部１８は、カメラ表示切替キー２０、カメラ方向スイッチ２１、ＬＣＤ傾きスイッチ２２およびその他の操作キー２３から、それぞれ、カメラ切替信号、カメラ方向信号、ＬＣＤ傾き信号およびその他のキーの操作信号を受け取る。
【００５２】
本実施の形態では、カメラ方向検知手段としてカメラ方向スイッチ２１を採用したが、これには限られず、例えば、カメラレンズ１０の光軸の向きを検出するセンサ等であってもよい。
【００５３】
また、本実施の形態では、ＬＣＤ傾き検知手段としてＬＣＤ傾きスイッチ２２を採用したが、これには限られず、例えば、カメラレンズ１０の光軸の傾斜角度を検出するセンサ等であってもよい。
【００５４】
カメラ表示切替キー２０は、カメラ切替キー１０７（図１）に対応し、カメラ方向スイッチ２１は、カメラ回転機構１１１（図１）の前面側および背面側の回転位置のそれぞれの位置においてオンまたはオフになる。
【００５５】
ＬＣＤ傾きスイッチ２２は、ＬＣＤヒンジ部１１５（図１）によるＬＣＤヒンジ動作１１４に伴い表示部１００ｂがいくつかの所定の角度の位置になるとオンまたはオフになる。また、その他の操作キー２３は、例えば、図１の電源キー１０２、メニューキー１０３、上下左右矢印キー１０４、決定キー１０５、切断キー１０６、ＬＣＤ輝度切替キー１０８、音量ボリュームキー１０９、音量ミュートキー１１０に対応する。
【００５６】
なお、先にも示したように液晶表示部１０１はＬＣＤに限らないため、ＬＣＤ傾きスイッチ２２は、情報表示傾きスイッチとも言い、ＬＣＤ輝度切替キー１０８は、情報表示輝度切替キーとも言う。
【００５７】
また、各種操作キーは、いわゆるキーの形状で無くても良い。例えば、液晶等の表示パネルにタッチセンサを組み込んだタッチパネルで各種操作キーを実現しても良い。従って、実施の形態中では操作キーと称するが、形状等を問わないため操作キーを操作部と称する。
【００５８】
マンマシン制御部１８は、その他の操作キー２３からその他のキーの操作信号を受け取ると、該当キーに相当する制御を行う。例えば、音量ボリュームキー１０９が操作された場合には、マンマシン制御部１８は、スピーカ出力部１４に、音量ボリュームキー１０９によって指定された音量での再生を指示する再生ボリューム信号を送る。
【００５９】
音量ミュートキー１１０の場合には、マンマシン制御部１８は、マイク入力部１７に、音声入力を拾わないような録音ボリューム信号を送る。
【００６０】
ビデオ会議開始画面表示中に決定キー１０５が操作された場合には、マンマシン制御部１８は、ビデオ会議伝送制御部１５にビデオ会議室アドレス信号を送る。
【００６１】
詳しくは後述の通り、ビデオ会議室アドレス信号がビデオ会議サーバ５０に送られると、ビデオ会議が開始される。ビデオ会議画面表示中に切断キー１０６が操作された場合には、マンマシン制御部１８は、ビデオ会議伝送制御部１５にビデオ会議終了要求信号を送る。
【００６２】
また、詳しくは後述の通り、ビデオ会議終了要求信号がビデオ会議サーバ５０に送られて、その要求のあったビデオ会議端末装置１００がネットワークから切り離される。
【００６３】
また、マンマシン制御部１８は、カメラ表示切替キー２０からカメラ切替信号を受け取るか、カメラ方向スイッチ２１からカメラ方向信号を受け取るか、または、ＬＣＤ傾きスイッチ２２からＬＣＤ傾き信号を受け取ると、カメラ映像補正切替信号をカメラ映像補正制御部１２に送る。
【００６４】
カメラ映像補正制御部１２は、マンマシン制御部１８からカメラ映像補正切替信号を受け取ると、その信号を映像補正テーブル切替信号に変換して、その映像補正テーブル切替信号をカメラ映像補正テーブル保持部１３に送信する。
【００６５】
カメラ映像補正テーブル保持部１３は、カメラ映像補正制御部１２から映像補正テーブル切替信号を受け取ると、その映像補正テーブル切替信号に基づいて適切な映像補正テーブルに切り替えて、その映像補正テーブルのデータをカメラ映像補正制御部１２に送信する。
【００６６】
カメラ映像補正制御部１２は、その映像補正テーブルのデータに基づいて映像の歪み補正を行う。この際、カメラ映像補正テーブル保持部１３は、カメラ表示切替キー２０からカメラ切替信号を受け取っても、カメラ方向スイッチ２１からのカメラ方向信号またはＬＣＤ傾きスイッチ２２からのＬＣＤ傾き信号による映像補正テーブルの切替に優先して対応する。
【００６７】
このため、カメラ表示切替キー２０を操作した際には、操作者は、既に自動的に選択された映像補正テーブルの中から適切な映像補正テーブルを選択すればよい。
【００６８】
カメラ映像補正制御部１２は、カメラ映像補正テーブル保持部１３から、その時に切り替えられて選択されている映像補正テーブルデータを用いてデジタル映像信号を補正する。このカメラ映像補正制御部１２は、ビデオ会議端末装置１００に内蔵されているＣＰＵと、ＣＰＵ上で実行されるプログラムで実現される。
【００６９】
映像表示部１９は、マンマシン制御部１８から受け取った画面データまたはビデオ会議伝送制御部１５から受け取ったビデオ会議映像信号に従って、所定の画面を液晶表示部１０１に表示する。
【００７０】
＜映像補正テーブル１＞
図３は、ユーザがカメラ切替キー１０７（図１）を押すごとに選択される映像補正テーブルの一例を示す。映像補正テーブルは、映像補正テーブル番号、シャープネス補正の要否および歪み補正の対象の関係を定める。
【００７１】
例えば、映像補正テーブル番号「０」を選択すると、シャープネス補正は「しない」になり、歪み補正の対象は「全体」、つまり、歪み補正を行っていない画像において会議の出席者の全員を含む概略全体部分を切り出した部分に歪み補正を行うことになる。
【００７２】
他に歪み補正の対象として示す「中央」は、歪み補正を行っていない画像における概略中央部分を切り出したものに歪み補正を行うことを意味する。
【００７３】
「左右」は、歪み補正を行っていない画像における概略左側部分と右側部分とを切り出したものに歪み補正を行ってそれらを一画面に表示したものを意味する。
【００７４】
「中央、左右」は、歪み補正を行っていない画像における、概略中央部分と概略左側部分と右側部分とを切り出したものに歪み補正を行ってそれらを一画面に表示したものを意味する。
【００７５】
映像補正テーブルは、画像の所定の領域に歪み補正を行うために、例えば「補正の対象」に以下のような歪み補正テーブルを使用する。アドレスは、歪み補正後の画素アドレス、つまり歪み補正後に表示される画素に対するアドレスになる。また、Ｘ座標値とＹ座標値は、カメラセンサ１１の光電変換デバイス面のドット位置となる。
【００７６】
歪み補正後の画素アドレス０：歪み補正前の光電変換デバイスのＸ座標値とＹ座標値
歪み補正後の画素アドレス１：歪み補正前の光電変換デバイスのＸ座標値とＹ座標値
歪み補正後の画素アドレス２：歪み補正前の光電変換デバイスのＸ座標値とＹ座標値
（途中省略）
歪み補正後の画素アドレス３０７１９９：歪み補正前の光電変換デバイスのＸ座標値とＹ座標値
この歪み補正テーブルは、各歪み補正後の画素アドレスに該当するカメラセンサ１１の光電変換デバイス面のドットの位置を歪み補正前のＸＹ座標値に基づいて変換することを示す。
【００７７】
具体的に説明すると、例えば、ＸＹ座標のＸ軸は、カメラセンサ１１の光電変換デバイス面に向かって水平方向の右方向を正とし、Ｙ軸は、カメラセンサ１１の光電変換デバイス面に向かって垂直方向の下方向を正とする。
【００７８】
これにより、歪み補正後の画素アドレス０は、例えば、カメラセンサ１１の光電変換デバイス面に向かって左上のドットにおけるＸＹ座標（０，０）の実際の値となり、アドレス１は、Ｘ軸に沿って正方向に１ドット分移動した位置のドットのＸおよびＹの座標（１，０）における実際の値となる。
【００７９】
同じＹ座標０においてＸ軸の右端のドットの座標の次の座標は、その下のＹ座標１におけるＸ軸の左端の座標（０，１）となり、その実際の値が用いられる。
【００８０】
同様に表示モニタのアドレスが、例えば、水平方向において６４０ドットで、垂直方向において４８０ドットの場合には、最後のアドレス値は、６４０×４８０−１＝３０７１９９となる。
【００８１】
歪み補正後のＸＹ座標値の算出は所定の補正アルゴリズムに基づいて行う。なお、各座標における値は実数となり、小数点以下は周辺ドットから補間することが行われる。
【００８２】
歪み補正を行う際には、カメラ映像補正制御部１２が、カメラセンサ１１からデジタル映像信号を受信すると、そのデジタル映像信号の各ドットを、各ドットに該当する上記のテーブルを利用して、その利用後のデジタル映像信号をビデオ会議伝送制御部１５に送る。
【００８３】
歪み補正の対象が選択された場合には、その選択された対象の領域に相当する画像のドットを、上記テーブルの補正後の画素アドレスに対応させることによってその補正の対象の歪み補正を行う。
【００８４】
上記テーブルの各アドレスに対応する歪み補正前のＸＹ座標における値を予め計算しておき、ドットの移動処理をリアルタイムに行う。これにより、カメラセンサ１１上の映像の概略全体、概略中央部分、概略左側部分さらに概略右側部分の歪み補正を簡易かつ高速に行うことができる。
【００８５】
シャープネスは、映像のエッジ強調をするためのフィルタであって、「歪み補正」が「中央」または「左右」の場合に映像が拡大してぼけてしまうのを低減するために使用する。
【００８６】
なお、このシャープネスは、カメラ映像補正制御部１２にて行われる。特に、このシャープネスは、アドレスの座標値に移動する前の画像または移動後の画像に対して、空間フィルタ等を施すことにより実行される。
【００８７】
映像補正テーブル番号は、ユーザがカメラ切替キー１０７（図１）を押した際に、マンマシン制御部１８からカメラ映像補正制御部１２に送信されるカメラ映像補正切替信号に含まれている。
【００８８】
＜映像補正テーブル２＞
図４は、ユーザがカメラ切替キー１０７（図１）を押すごとに切り替えられて選択される映像補正テーブルの他の一例を示す。
【００８９】
この映像補正テーブルは、映像補正テーブル番号、シャープネス補正の要否、歪み補正の対象およびカメラ方向の関係を定める。図３に示す映像補正テーブルとは、「カメラ方向」を考慮する点が異なる。
【００９０】
カメラ方向は、超広角カメラ１１２（図１）が液晶表示部１０１の設けられている側にある場合には、「前向き」とする。また、カメラ回転機構１１１（図１）が約１８０度回転して、超広角カメラ１１２（図１）が、液晶表示部１０１のある正面から背面まで回転した場合に、「後向き」とする。
【００９１】
「カメラ方向」が「前向き」の場合は、全ての領域に対し「歪み補正」を行うが、「後向き」の場合に主として人物以外を映したときには「左右」部分には歪み補正は適用しない。
【００９２】
すなわち、映像補正テーブル番号０から３までのいずれかを使用中に「カメラ方向」が「後向き」に切り替えられると、映像補正テーブルは番号４または５のみに切り替えることができる。
【００９３】
また、例えば、カメラ方向が「後向き」の場合には、自動的に、ユーザが選択できる映像補正テーブルから、図３のようにカメラ方向を考慮しない映像補正テーブルは外される。
【００９４】
つまり、図４の映像補正テーブルの場合には映像補正テーブル番号は「４」から「７」までの中から選択すればよいことになる。ここで、補正テーブル番号「４」を選択すると、シャープネス補正は「しない」になり、歪み補正の対象は「全体」になる。
【００９５】
このように、カメラ方向が「前向き」や「後向き」のような所定の条件の下で、歪み補正の対象を限定するために、例えば、カメラ方向を選択した際に選択できる歪み補正の対象を示す補正テーブルを設け、所定の条件を選択した際に、その補正テーブルを参照して歪み補正の対象を特定のものに限定するようにしてもよい。
【００９６】
また、この映像補正テーブル２は上記の映像補正テーブル１の説明の際に例示した歪み補正テーブルを含む。この歪み補正テーブルは歪み補正の対象を選択した際にそれに応じて選択される。
【００９７】
＜映像補正テーブル３＞
図５は、ユーザがカメラ切替キー１０７（図１）を押すごとに選択される映像補正テーブルのさらに他の一例を示す。この映像補正テーブルは、映像補正テーブル番号、シャープネス補正の要否、歪み補正の対象、カメラ方向およびＬＣＤ傾きの関係を定める。
【００９８】
図５に示す映像補正テーブルは、図４に示す映像補正テーブルとは、「ＬＣＤ傾き」、つまり、超広角カメラ１１２（図１）の仰角を考慮する点が異なる。ＬＣＤの傾斜角度は、ＬＣＤヒンジ動作１１４（図１）を行う機構およびＬＣＤヒンジ部１１５（図１）に設けられたスイッチ２２によって検知される。
【００９９】
「ＬＣＤ傾き」は、ＬＣＤヒンジ動作１１４によって、水平面内に配置された本体部１００ａを基準として、「９０度以上」、「７５度以上９０度未満」、「６０度以上７５度未満」および「６０度未満」の４段階を検出するように構成する。
【０１００】
図５で示したＬＣＤ傾きの欄では、「９０度以上」、「７５度以上９０度未満」、「６０度以上７５度未満」および「６０度未満」の４段階を用いていたが、それぞれを、０〜３の値で表現しても良い。
【０１０１】
それらの角度に対応して、それぞれ歪み補正のための超広角カメラ１１２（図１）の仰角が０度、１５度、３０度、４５度となる場合の座標変換テーブルを用意しておく。
【０１０２】
また、図４に示す映像補正テーブルと同様に、「カメラ方向」が「前向き」の場合は、すべての「歪み補正」を使用する。一方、「後向き」の場合は、人物以外を映すので「左右」の場合には歪み補正は使用しない。
【０１０３】
すなわち、映像補正テーブル番号０から７までを使用中に「カメラ方向」が「後向き」に切り替えられると、映像補正テーブルを番号１２から１９までのいずれかに切り替えられ、番号８から１１のいずれかを使用中に「後向き」に切り替えられると、映像補正テーブルの番号１２から１５までのいずれかに切り替えられる。
【０１０４】
一方、図５の映像補正テーブルにおいて、例えば、ＬＣＤの傾きが「７５度以上９０度未満」で、カメラ方向が「後向き」の場合には、ユーザは、自動的に、映像補正テーブル番号の「１３」か「１７」のどちらかを選択すればよく、多数のテーブル番号の中から選択する必要はない。
【０１０５】
つまり、ＬＣＤの傾きが変わるとカメラの傾きが変わるため映像補正の歪み補正の内容も変える必要がある。そのため、映像補正テーブル１において説明した歪み補正用のテーブルと同様に、カメラ映像補正テーブル保持部１３には、液晶表示部１０１の傾きに適した映像補正テーブルをあらかじめ作成して備えている。
【０１０６】
このため、ユーザがＬＣＤヒンジ動作１１４（図１）のように液晶表示部１０１を含む表示部１００ｂの傾きを変更すると、液晶表示部１０１の傾斜角度に対応した映像補正テーブルが自動的に選択される。
【０１０７】
以上のように、カメラの映像補正テーブルをＬＣＤ傾きやカメラ方向に応じて選択的または自動的に切り替えることによって、ビデオ会議に適した映像を簡易に提供できるようになる。
【０１０８】
この映像補正テーブル３も上記の映像補正テーブル１で例示した歪み補正テーブルや所定の条件下で歪み補正の対象を限定する補正テーブルを含む。
【０１０９】
＜ビデオ会議サーバおよびネットワークについて＞
再度、図２に示すように、ネットワーク３０には、各ビデオ会議端末装置１００，４０やビデオ会議サーバ５０が接続されている。ビデオ会議サーバ５０は、ビデオ会議室を制御するサーバで、ビデオ会議端末装置１００からビデオ会議室アドレスの開始要求を受け取ると、ビデオ会議室を生成してビデオ会議を開始できるようにする。
【０１１０】
ビデオ会議サーバ５０は、ビデオ会議室を開始すると、そのビデオ会議室に参加している全てのビデオ会議端末装置１００，４０から圧縮デジタル映像信号と圧縮デジタル音声信号とを受け取り、それぞれ伸張して一つの画面と一つの音声に合成し、それぞれ再び圧縮して、全てのビデオ会議端末に送り返す。
【０１１１】
これにより、各ビデオ会議端末装置１００，４０等は、各拠点で行われている会議の様子を映像および音声を通じて確認することができる。
【０１１２】
ビデオ会議サーバ５０は、ビデオ会議中に、あるビデオ会議端末装置１００，４０からビデオ会議の終了要求を受け取ると、その要求のあったビデオ会議端末装置１００，４０をビデオ会議室から切り離す。全てのビデオ会議端末装置１００，４０を切り離したら、ビデオ会議室を終了させる。
【０１１３】
ここで、ビデオ会議室とは、ビデオ会議端末装置１００，４０が設置される場所を示すのでは無く、ビデオ会議端末装置１００，４０同士（１対１または多地点）が接続されて会議が行われている仮想的な場を意味する。
【０１１４】
＜ビデオ会議伝送制御部について＞
ビデオ会議伝送制御部１５は、基本的に、次のようにビデオ会議の開始から終了までを制御する。
【０１１５】
（ビデオ会議の開始および進行）
ビデオ会議伝送制御部１５は、マンマシン制御部１８からビデオ会議室アドレスを受け取ると、ネットワーク制御部１６からネットワーク３０を経由してビデオ会議室アドレスの開始要求をビデオ会議サーバ５０に送る。
【０１１６】
これにより、ビデオ会議サーバ５０は、ビデオ会議室を生成してビデオ会議を開始し、ビデオ会議伝送制御部１５にビデオ会議開始完了応答を送る。
【０１１７】
ビデオ会議伝送制御部１５は、ビデオ会議サーバ５０からビデオ会議開始完了応答を受け取ると、マンマシン制御部１８にビデオ会議への切替信号を送る。
【０１１８】
マンマシン制御部１８は、ビデオ会議への切替信号を受け取ると、映像表示部１９を切り替えて、ビデオ会議伝送制御部１５から映像表示部１９に送信される表示データを全画面表示するようにする。この表示データにより、例えば、「接続が完了し、会議を始めます。」という表示を示す。
【０１１９】
ビデオ会議伝送制御部１５は、カメラ映像補正制御部１２からデジタル映像信号を受け取り、また、マイク入力部１７からデジタル音声信号を受け取って、これらの信号をネットワーク制御部１６によって圧縮し、ネットワーク３０を経由してビデオ会議サーバ５０に送信する。
【０１２０】
これと同時に、ビデオ会議伝送制御部１５は、ビデオ会議サーバ５０から圧縮デジタル映像信号および圧縮デジタル音声信号を、ネットワーク３０およびネットワーク制御部１６を介して受信するとともに伸張して、映像表示部１９にデジタル映像信号を送り、スピーカ出力部１４にデジタル音声信号を送る。
【０１２１】
このように、各拠点のビデオ会議端末装置１００，４０からの映像および音声が、各拠点のビデオ会議端末装置１００，４０へ送出されて、ビデオ会議が進行する。
【０１２２】
（ビデオ会議の終了）
ビデオ会議伝送制御部１５は、マンマシン制御部１８からビデオ会議終了要求信号を受け取ると、ネットワーク制御部１６およびネットワーク３０を介して、ビデオ会議サーバ５０にビデオ会議終了要求信号を送る。
【０１２３】
ビデオ会議サーバ５０は、ビデオ会議伝送制御部１５からビデオ会議終了要求信号を受け取ると、その要求のあったビデオ会議端末装置１００，４０のビデオ会議伝送制御部１５にビデオ会議終了完了応答を送るとともに、該当するビデオ会議室から、その要求のあったビデオ会議端末装置１００，４０を切り離す。
【０１２４】
ビデオ会議終了完了応答を受け取ったビデオ会議端末装置１００，４０では、ビデオ会議伝送制御部１５は、マンマシン制御部１８にユーザ操作画面への切替信号を送る。マンマシン制御部１８は、ユーザ操作画面への切替信号を受け取ると、映像表示部１９を切り替えて、マンマシン制御部１８からの表示データを全画面表示させる。この表示データにより、例えば、「切断が完了しました。」を表す。
【０１２５】
＜広角レンズカメラについて＞
（歪み補正を行わない場合）
広角レンズは取り込む範囲が広いが映像に歪みが生じるため、人物を対象とするビデオ会議においてそのままの映像を使用するのは適切ではない。図６に超広角カメラ１１２によって撮像した会議の映像例を示す。
【０１２６】
会議では、実際は、出席者の３人がテーブルの上に置かれたビデオ会議端末装置１００を囲んで背筋を伸ばして座っている。
【０１２７】
しかし、図６では、真ん中の出席者は、両脇の２人より極端に小さく表示されている。また、両脇の２人は、胴体上部から頭部にかけて、共に中央に向かって丸みを帯びて湾曲した形に映っている。言い換えると、両脇の２人は、胴体上部よりも頭部を前に出して猫背のような形になっているように見える。
【０１２８】
これは、広角レンズによる画像の歪みによる。このように、映像に歪みがあると、違和感が生じ、このまま長時間ビデオ会議を継続するのは心理的に難しい。
【０１２９】
（歪み補正の例）
図１１は、画像の歪み補正方法を実施する際の一例に係るフローチャートである。ビデオ会議端末装置１００のＲＯＭには、このフローチャートに示す手順を実行する映像の歪み補正プログラムが記憶されている。
【０１３０】
この映像の歪み補正プログラムは、コンピュータに、カメラレンズ１０を備える超広角カメラ１１２を用いてデジタル映像信号を得る手順と、該デジタル映像信号を得る手順によって得たデジタル映像信号に含まれる映像から少なくとも１つの領域を切り出す手順と、この少なくとも１つの領域を切り出す手順によって切り出された領域から所望の領域を選択するために、切り出される領域の歪み補正のための映像補正情報を切り替える手順と、この映像補正情報を切り替える手順によって選択された映像補正情報を、選択された所望の領域に対し適用して該領域の映像の歪み補正を行う手順と、この歪み補正を行う手順によって補正された領域の映像を表示する手順とを実行させるものである。
【０１３１】
ビデオ会議端末装置１００のＣＰＵは、ＲＯＭから上述したプログラムを読み出して実行して、図１１に示すフローチャートの手順を実行する。
【０１３２】
図１１において、まず、ＣＰＵは、カメラレンズ１０を備える超広角カメラ１１２を用いてデジタル映像信号を得る（ステップＳ１）。これにより、上述のように図６に示す画像が得られる。次に、ＣＰＵは、後述のように、デジタル映像信号の映像の歪み補正を行う（ステップＳ２からＳ５）。
【０１３３】
図７、図８、図９および図１０は、本発明の実施形態に係るビデオ会議端末装置１００を用いて図６の映像の歪み補正を行った例を示す。
【０１３４】
図７は、図６の映像例の中において出席者の３人が表示されている概略全体部分を切り出して歪み補正を行った映像の一例である。図７では、図６に比べると、両脇の２人の猫背が解消しており、また中央の人物が少し大きく表示されているのが分かる。
【０１３５】
図８は、図６の映像例の中央部分を切り出して歪み補正を行った映像の一例である。図８に示されているように、中央の者のみが大きく表示されるように歪み補正されている。これによると、中央の人物の表情等が良く分かる。
【０１３６】
図９は、図６の映像例の左側部分および右側部分を切り出してそれぞれに歪み補正を行って一画面に表示した歪み補正の一例である。これによると、両脇にいる２人も大きく表示されるので、２人の表情等が良く分かる。
【０１３７】
また、図１０は、図８および図９の画像のそれぞれを歪み補正して、人物が示されている画像の寸法を概略同一の大きさに揃えて並べて一画面として表示したものである。これによると、出席者の全員の表情が分かりやすい。
【０１３８】
上記の画像の歪み補正は、まず、図１１に示すように、ＣＰＵがデジタル映像信号を得るステップＳ１によって得たデジタル映像信号に含まれる映像から少なくとも１つの領域を切り出す（ステップＳ２）。
【０１３９】
ステップＳ２によって切り出された領域から所望の領域を選択するために、ＣＰＵが切り出される領域の歪み補正に適する映像補正テーブルを切り替える（ステップＳ３）。
【０１４０】
ＣＰＵは、ステップＳ３によって選択された映像補正テーブルを、選択された所望の領域に対し適用して該領域の映像の歪み補正を行う（ステップＳ４）。
【０１４１】
次に、ＣＰＵは、ステップＳ４によって補正された領域の映像を表示する（ステップＳ５）。このように、予め映像表示する領域を切り出すステップを用いる場合には、歪み補正テーブルは、矩形領域の４つの頂点が定められており、歪み補正テーブルは矩形領域の部分のみとなる。このようなプロセスは、映像外のデータを用いる場合には有用である。
【０１４２】
なお、図１１のステップＳ２では、まず、映像から少なくとも１つの領域を切り出すことを行っているが、次のようなステップで実行されても良い。つまり、ステップＳ２を削除して、次のプロセスで実行されても良い。ＣＰＵは、図１１のステップＳ３に代えて、ステップＳ３'を実行する。ＣＰＵは、デジタル映像信号を得るステップＳ１によって得たデジタル映像信号に含まれる映像に、カメラ切替キー１０７（図１）で指定された表示に対応する歪み補正に適する映像補正テーブルを切り替える（ステップＳ３'）。ＣＰＵは、図１１のステップＳ４に代えて、ステップＳ４'を実行する。ＣＰＵは、ステップＳ３'によって選択された映像補正テーブルを、ステップＳ１で得られたデジタル映像信号に含まれる全ての領域に対して、または、選択された所望の領域の映像信号に対し適用して該領域の映像の歪み補正を行う（ステップＳ４'）。ＣＰＵは、図１１のステップＳ５に代えて、ステップＳ５'を実行する。ＣＰＵは、ステップＳ４'によって補正された映像信号から、所望の領域の映像を表示する（ステップＳ５'）。
【０１４３】
このプロセスが実行される際には、歪み補正テーブルは、表示される変換後の画素と、変換前の光電変換デバイスのドットの関係が示されているので、歪み補正テーブルが自ずと変換後の表示を指定することになる。従って、ステップＳ２を削除することが可能となる。
【０１４４】
歪み補正の際には、詳細は後述の通り、ユーザが会議の状況に応じてカメラ切替キー１０７（図１）を押すことによって、例えば、順に、図７から図１０に示す画像に切り替わる際に、それぞれの画像に適した映像補正テーブルが用いられて行われる。
【０１４５】
このため、本発明では、カメラ映像補正テーブル保持部１３の映像補正テーブルに歪み補正用の座標変換テーブルを保存し、カメラ切替キー１０７（図１）に相当するカメラ表示切替キー２０（図２）、カメラ回転機構１１１（図１）が備えるカメラ方向スイッチ２１（図２）、ＬＣＤヒンジ動作１１４を行うためのＬＣＤヒンジ部１１５（図１）が備えるＬＣＤ傾きスイッチ２２（図２）の操作に伴う信号を利用して、カメラ映像補正制御部１２が、適切なカメラ映像補正テーブル保持部１３に記憶されているテーブルを切り替えるように構成されている。これにより、会議映像に適した映像補正を選択することができる。
【０１４６】
＜切替の例１（図３の映像補正テーブルを用いる場合）＞
この映像補正テーブルの切替の仕組みは、次の通りである。なお、この例では、図３の映像補正テーブルでは、カメラの方向およびＬＣＤの傾きは対象としないため、ビデオ会議端末装置には、図２のカメラ方向スイッチ２１と図１のカメラ回転機構１１１は設けてなく、カメラは固定されているものとする。
【０１４７】
会議の進行中において、ユーザがカメラ切替キー１０７を押すと、カメラ表示切替キー２０は、マンマシン制御部１８にカメラ切替信号を送信する。マンマシン制御部１８は、カメラ切替信号を受け取ると、カメラ映像補正切替信号をカメラ映像補正制御部１２に送る。このカメラ映像補正切替信号には、ユーザが切り替えたい補正のテーブル番号が含まれている。
【０１４８】
ここで、マンマシン制御部１８には、映像表示部１９で行った補正の映像補正テーブル番号を一時的に保存している。マンマシン制御部１８は、後述するように、カメラ映像補正制御部１２からビデオ会議伝送制御部１５に、映像補正後のデジタル映像データを送信する際に、併せて、映像補正テーブルの番号を受け取り、保持している。
【０１４９】
このため、マンマシン制御部１８は、カメラ表示切替キー２０からカメラ切替信号を受け取ると、保存されている映像補正テーブルの番号の次の番号を決める。この番号は、例えば、図３の映像補正テーブルを利用している場合は、映像補正テーブル番号を１つインクリメント（増加）し、それをテーブル番号の総数（図３の例示だと４）で除して、余りを映像補正テーブル番号として決定する。
【０１５０】
マンマシン制御部１８は、カメラ映像補正切替信号に含められている映像補正テーブルの番号を、カメラ映像補正制御部１２に送る。カメラ映像補正制御部１２は、例えば、図３に示す映像補正テーブルの番号を含む映像補正テーブル切替信号をカメラ映像補正テーブル保持部１３に送る。
【０１５１】
カメラ映像補正テーブル保持部１３は、映像補正テーブル切替信号に該当する映像補正テーブルのデータをカメラ映像補正制御部１２に送る。カメラ映像補正制御部１２は映像補正テーブルのデータに従って映像補正を行い、映像補正後のデジタル映像データをビデオ会議伝送制御部１５に送る。
【０１５２】
このように、ユーザが図１に示すカメラ切替キー１０７を押す度に、マンマシン制御部１８は、あらかじめ決めた順序、例えば図７に示す映像、図８に示す映像、図９に示す映像、さらに再度図７に示す映像を液晶表示部１０１に表示するためのカメラ切替信号をカメラ映像補正制御部１２に送る。
【０１５３】
選択対象となる映像補正テーブルの数が多い場合には、マンマシン制御部１８が、映像表示部１９に、ユーザに映像補正例のいくつかを表示して選択させることが望ましい。
【０１５４】
＜切替の例２（図４の映像補正テーブルを用いる場合）＞
図１に示すカメラ回転機構１１１は、超広角カメラ１１２を前向き（液晶表示部１０１と同じ向き）または後向き（液晶表示部１０１と反対向き）に切り替えるための機構である。カメラ回転機構１１１と表示部１００ｂとの間にヒンジが設けられていて、カメラ回転機構１１１が、回転可能となっている。
【０１５５】
例えば、カメラ前向きは、会議出席者を映すために使用する。このとき、ローカルの会議出席者はリモートの会議出席者を液晶表示部１０１の画面上で見ている。カメラ後向きは、会議出席者以外の映像、例えば会議の議題となっている、ホワイトボード、資料、製品、風景を映すために使用する。
【０１５６】
図４の映像補正テーブルでは、カメラ方向を考慮しているため、ユーザがカメラ回転機構１１１を操作した場合には、カメラの想定被写体に適した映像補正テーブルに自動的に切り替わる。
【０１５７】
これに伴い、図１のカメラ回転機構１１１では、超広角カメラ１１２を後向きにすると上下が反転するため、映像補正も上下反転するように座標変換する。例えば、超広角カメラ１１２がカメラ前向きの状態で図９の映像を表示しているときに、超広角カメラ１１２がカメラ後向きに切り替えられた時には、自動的に、映像の上下が反転されそれを補正対象とするように映像が切り替えられる。
【０１５８】
ユーザがカメラ回転機構１１１を回転すると、マンマシン制御部１８は、カメラ表示切替キー２０からカメラ方向信号を受け取る。この後の歪み補正の制御方法は、切り替える映像補正テーブルが異なる以外は、図３の映像補正テーブルを用いた場合と同様である。
【０１５９】
簡略化して述べると、ユーザが図１に示すカメラ切替キー１０７を押すと、カメラ表示切替キー２０は、マンマシン制御部１８にカメラ切替信号を送信する。また、マンマシン制御部１８は、カメラ回転機構１１１の状態を検知するカメラ方向スイッチ２１からカメラ方向信号を受信する。
【０１６０】
図１２は、カメラの仰角または方向を検出するステップを含む画像の歪み補正方法に係るフローチャートの一例を示す。図１１のフローチャートと比較して、図１２のフローチャートは、図１１とは、広角カメラの仰角または方向を検出するステップＳ１２を含む点が異なり、他のステップは同じである。
【０１６１】
ステップＳ１２は、上記の通り、広角カメラレンズを備える広角カメラを用いてデジタル映像信号を得るステップＳ１１の後に行われ、また、ユーザが図１に示すカメラ切替キー１０７を押したとしても、領域の切り出しステップＳ１３に移行する前に実行される。
【０１６２】
なお、上述の図１１にも示したように、ステップＳ１３では、まず、映像から少なくとも１つの領域を切り出すことを行っているが、ステップＳ１３以降は、次のようなステップで実行されても良い。つまり、ステップＳ１３のステップを削除する。
【０１６３】
そして、ＣＰＵは、図１２のステップＳ１４に代えて、ステップＳ１４'を実行する。つまり、ＣＰＵは、デジタル映像信号を得るステップＳ１１によって得たデジタル映像信号に含まれる映像に、カメラ切替キー１０７（図１）で指定された表示に対応する歪み補正に適する映像補正テーブルを切り替える（ステップＳ１４'）。
【０１６４】
ＣＰＵは、ステップＳ１５に代えて、ステップＳ１５'を実行する。つまり、ＣＰＵは、ステップＳ１４'によって選択された映像補正テーブルを、Ｓ１１で得られたデジタル映像信号に含まれる全ての領域に対して、または、選択された所望の領域の映像信号に対し適用して該領域の映像の歪み補正を行う（ステップＳ１５'）。
【０１６５】
ＣＰＵは、ステップＳ１６に代えて、ステップＳ１６'を実行する。つまり、ＣＰＵは、ステップＳ１５'によって補正された映像信号から、所望の領域の映像を表示する（ステップＳ１６'）。
【０１６６】
上述したステップＳ１２は、カメラレンズ１０の仰角およびカメラレンズ１０の撮影方向の少なくとも一方を検出するようになっている。この場合、映像補正テーブルが、カメラレンズ１０の仰角およびカメラレンズ１０の撮影方向の少なくとも一方の情報を含む映像補正テーブルを含んでいる。そして、カメラレンズ１０の仰角およびカメラレンズ１０の撮影方向の少なくとも一方の情報を含む映像補正テーブルのみを切替の対象とするようになっている。
【０１６７】
マンマシン制御部１８は、カメラ切替信号およびカメラ方向信号を受け取ると、カメラ映像補正切替信号をカメラ映像補正制御部１２に送る。このカメラ映像補正切替信号には、切り替えたい補正のテーブル番号の情報が含まれている。
【０１６８】
この時点では、マンマシン制御部１８には、映像表示部１９で行った補正の映像補正テーブル番号と、カメラ方向の情報を一時的に保存している。マンマシン制御部１８は、後述するように、カメラ映像補正制御部１２からビデオ会議伝送制御部１５に、映像補正後のデジタル映像データを送信する際に、映像補正テーブルの番号を受け取って保持しているからである。
【０１６９】
このため、マンマシン制御部１８は、カメラ表示切替キー２０からカメラ切替信号を受け取ると、まず、カメラ方向について変更がなされているかどうかを確認し、次に、保存されている映像補正テーブルの番号の次の番号を決める。
【０１７０】
つまり、番号を決めるにあたって、例えば、図４の映像補正テーブルを利用している場合には、図１３に示すフローチャートが実行される。
【０１７１】
ＣＰＵは、一時的に保持しているカメラの方向と、今回の信号で得られたカメラの方向とが相違しているか否かを判断する（ステップＳ２１）。
【０１７２】
カメラの方向が変更されていない場合には（ステップＳ２１；ＮＯ）、ＣＰＵは、映像補正テーブル番号をカメラ方向（前向きの場合は０番から３番）において１つインクリメントし（ステップＳ２４）、カメラ方向が関与するテーブル番号の総数（前向きの場合は４、後向きの場合は４）で除算し（ステップＳ２５）、余りに初期値を加えて（ステップＳ２６）、その値を映像補正テーブル番号として決定する（ステップＳ２３）。
【０１７３】
他方、カメラの方向が変更されている場合には（ステップＳ２１；ＹＥＳ）、ＣＰＵは、変更されたカメラの方向の初期値（前向きの場合は０番、後向きの場合は４番）を取得し（ステップＳ２２）、その初期値を映像補正テーブル番号として決定する（ステップＳ２３）。
【０１７４】
このように、次の映像補正テーブル番号が決定されると、マンマシン制御部１８は、映像補正テーブルの番号を含むカメラ映像補正切替信号をカメラ映像補正制御部１２に送る。次に、カメラ映像補正制御部１２は、例えば、図４に示す映像補正テーブルの番号を含む映像補正テーブル切替信号をカメラ映像補正テーブル保持部１３に送る。
【０１７５】
カメラ映像補正テーブル保持部１３は、受信した映像補正テーブル切替信号に該当する映像補正テーブルのデータをカメラ映像補正制御部１２に送る。カメラ映像補正制御部１２は、映像補正テーブルのデータに従って映像補正を行って映像補正後のデジタル映像データをビデオ会議伝送制御部１５に送る。
【０１７６】
このように、カメラ回転機構１１１によるカメラ方向のデータが追加された場合であっても、適切に映像補正テーブルを選択して映像の補正をすることが可能である。もし映像補正テーブルの数が多い場合には、マンマシン制御部１８が、映像表示部１９に映像補正例を表示してユーザに映像補正テーブルを選択させるようにしてもよい。
【０１７７】
＜切替の例３（図５の映像補正テーブルを用いる場合）＞
ＬＣＤヒンジ動作１１４を行わせるＬＣＤヒンジ部１１５は、ＬＣＤの傾きを調整する機構である。図１に示すビデオ会議端末装置１００では、表示部１００ｂに液晶表示部１０１と超広角カメラ１１２とが取り付けられている。
【０１７８】
このため、表示部１００ｂの傾斜がＬＣＤヒンジ動作１１４によって変わると、すなわち、ＬＣＤの傾きが変わると、超広角カメラ１１２の仰角が変わることになる。
【０１７９】
例えば、ＬＣＤが垂直に立っている（ＬＣＤが本体部１００ａから９０度の位置にある）状態では、超広角カメラ１１２は、水平方向（水平面に対し０度となる方向）を映していて仰角は０度である。ＬＣＤが本体部１００ａから７０度傾斜した位置にあり液晶表示部１０１が斜め上を向くと、超広角カメラ１１２は水平面から２０度上を向くことになる。
【０１８０】
このように超広角カメラ１１２が上を向くと映像補正の歪み補正の方法も変わってくる。そこで、本実施の形態では、ＬＣＤの傾きに応じた映像補正テーブルをあらかじめ用意しておき、ユーザがＬＣＤヒンジ機構を操作してＬＣＤの傾きを変更したら、そのＬＣＤの傾きに応じた映像補正テーブルに自動的に切り替える。
【０１８１】
つまり、ユーザが図１に示すカメラ切替キー１０７を押すと、カメラ表示切替キー２０は、マンマシン制御部１８にカメラ切替信号を送信する。また、マンマシン制御部１８は、カメラ回転機構１１１の状態を検知するカメラ方向スイッチ２１からカメラ方向信号を受信し、さらに、ＬＣＤヒンジ部１１５の状態を検知するＬＣＤ傾きスイッチ２２からＬＣＤ傾き信号を受信する。
【０１８２】
マンマシン制御部１８は、カメラ表示切替キー２０からカメラ切替信号を受け取ると、カメラ映像補正切替信号をカメラ映像補正制御部１２に送る。このカメラ映像補正切替信号には、切り替えたい補正のテーブル番号が含まれている。
【０１８３】
この時点では、マンマシン制御部１８には、映像表示部１９で行った補正の映像補正テーブル番号とカメラ方向の情報を一時的に保存している。マンマシン制御部１８は、後述するように、カメラ映像補正制御部１２からビデオ会議伝送制御部１５に、映像補正後のデジタル映像データを送信する際に、映像補正テーブルの番号を受け取って保持しているからである。
【０１８４】
このため、マンマシン制御部１８は、カメラ表示切替キー２０からカメラ切替信号を受け取ると、まず、ＬＣＤ傾きスイッチ２２からのＬＣＤ傾き信号からＬＣＤの傾き角度を決定する。
【０１８５】
次に、マンマシン制御部１８は、一次的に保存しているカメラ方向と、カメラ方向スイッチ２１から受信しているカメラ方向信号からカメラ方向について変更がなされているかどうかを確認する。
【０１８６】
次に、保存されている映像補正テーブルの番号の次の番号を決める。番号を決定するに当たって、例えば、図５の映像補正テーブルを利用している場合には以下のステップが実行される。
【０１８７】
なお、ここでの処理手順は、図１３に示すフローチャートに示す処理手順と同様であるので、図示は省略する。
【０１８８】
ＣＰＵは、一時的に保持しているカメラの方向と、今回の信号で得られたカメラの方向とが相違しているか否かを判断する（ステップＳ２１に相当）。
【０１８９】
カメラの方向が変更されていない場合には（ステップＳ２１；ＮＯに相当）、ＣＰＵは、映像補正テーブル番号をカメラ方向（前向きの場合は０番から１１番）において１つインクリメントし（ステップＳ２４に相当）、カメラ方向が関与するテーブル番号の総数（前向きの場合は１２、後向きの場合は８）で除して（ステップＳ２５に相当）、余りに初期値を加えて（ステップＳ２６に相当）、その値を映像補正テーブル番号として決定する（ステップＳ２３に相当）。
【０１９０】
他方、カメラの方向が変更されている場合には（ステップＳ２１；ＹＥＳに相当）、ＣＰＵは、変更されたカメラの方向の初期値（前向きの場合は０番、後向きの場合は１２番）を取得し（ステップＳ２２に相当）、その初期値を映像補正テーブル番号として決定する（ステップＳ２３に相当）。
【０１９１】
このように、次の映像補正テーブル番号が決定されると、マンマシン制御部１８は、映像補正テーブルの番号を含むカメラ映像補正切替信号とＬＣＤの傾き角度とをカメラ映像補正制御部１２に送る。
【０１９２】
次に、カメラ映像補正制御部１２は、例えば、図５に示した映像補正テーブルの番号と、ＬＣＤの傾き角度を含む映像補正テーブル切替信号とをカメラ映像補正テーブル保持部１３に送る。
【０１９３】
カメラ映像補正テーブル保持部１３は、次の処理ステップにおいて、所望の映像補正テーブル番号を取得し、映像補正テーブルのデータをカメラ映像補正制御部１２に送る。
【０１９４】
そして、ＣＰＵは、映像補正テーブル切替信号に含まれる映像補正テーブルの番号以上の中から、表示部１００ｂの角度が、映像補正テーブルのＬＣＤの傾き角度に当て嵌まる映像補正テーブルを探す。
【０１９５】
ただし、映像補正テーブルの該当番号が、カメラ方向の上限値（前向きは１１番まで、後向きは１９番まで）を超える場合は、ＣＰＵは、映像補正テーブルの番号を初期値（前向きは０番、後向きは１２番）に設定し直し、再度映像補正テーブルを探して、初期値以上のものでＬＣＤの傾き角度に当て嵌まる映像補正テーブルのデータを決定する。
【０１９６】
この後、カメラ映像補正制御部１２は、映像補正テーブルのデータに従って映像の歪み補正を行い、映像歪み補正後のデジタル映像データをビデオ会議伝送制御部１５に送る。
【０１９７】
このカメラ映像補正テーブル保持部１３における処理ステップの例示を示す。例えば、図５に示す映像補正テーブル番号４番（カメラ方向は前向き、ＬＣＤの傾き９３度）を利用し、その後、カメラの方向は前向きのままで、ＬＣＤの傾きを７０度に変更した場合を想定する。
【０１９８】
ステップＳ２１においては、カメラの方向は変更されていないので、ステップＳ２４に移行する。ステップＳ２４〜ステップＳ２６の処理の結果、マンマシン制御部１８が、カメラ映像補正制御部１２に送る情報は、映像補正テーブルの番号が「５」であり、ＬＣＤの傾きは「７０度」となる。
【０１９９】
そして、カメラ映像補正制御部１２は、カメラ映像補正テーブル保持部１３において、まず、映像補正テーブルの番号が「５」以上で、ＬＣＤの傾きが「７０度」に該当する映像補正テーブルがあるかどうかを確認する。この結果、ＣＰＵは、映像補正テーブルとして、「６」番のデータを取得する。
【０２００】
この他にも、他の実施プロセスが考えられる。例えば、上述のステップＳ２４以降の代わりに次のようなステップでも良い。
【０２０１】
まず、カメラ切替キー１０７の操作が行われる映像補正テーブル番号の初期値を取得する。次に、図５の補正変換テーブルにおいて、ＬＣＤ傾きの欄の角度状態に対して、０〜３の値を付与する。まず、初期値としては、映像補正テーブル番号を獲得する。その後は、この映像補正テーブル番号に４を加算していく。
【０２０２】
なお、カメラ方向のテーブル番号の総数の上限値を越えている場合は、テーブル番号の総数（前向きの場合は１２、後向きの場合は８）で除して、余りを映像補正テーブル番号として利用する。このステップであれば、ＬＣＤの傾きを考慮した形で映像補正テーブル番号を取得していくことが可能となる。
【０２０３】
このように、カメラの回転機構１１１が付加された場合であっても、適切に映像補正テーブルを選択し、補正することが可能である。映像補正テーブルの数が多い場合には、マンマシン制御部１８が、映像表示部１９に映像補正例を表示してユーザに選択させるようにすることが望ましい。
【０２０４】
上述した本実施の形態によると、（１）会議の状況や被写体に応じて、最適な映像の歪み補正が自動的に選択され、また、ユーザが選択することもできるので、広角カメラであっても、より臨場感のある映像を提供できる。
【０２０５】
（２）操作部のカメラ切替キー１０７で映像を見ながら映像補正を切り替えできるので、会議の状況や被写体に合わせて簡単に映像補正を切り替えることができる。
【０２０６】
（３）カメラ方向の切替の態様やＬＣＤの傾き角度に連動して自動的に映像の歪み補正の方法が切り替えられるので、ユーザに意識させることなく最適な映像を提供できる。
【０２０７】
＜他の実施の形態＞
（歪み補正の他の例）
上記の実施の形態では、カメラによって撮像された映像から所望の領域を切り出し、その切り出した領域に歪み補正を行った。しかし、本発明の実施形態は、これに限定されるものではなく、以下に説明するように、カメラによって撮像された映像に対し歪み補正を行い、その歪み補正を行った映像から所望の領域を切り出すようにしてもよい。
【０２０８】
図１４は、他の実施の形態に係る画像の歪み補正方法のフローチャートを示す。このフローチャートを実行するための歪み補正プログラムも、上記の第１の実施の形態と同様に、例えば、ビデオ会議端末装置１００のＲＯＭに記憶されている。
【０２０９】
歪み補正の概略を説明する。図１４のフローチャートに示すように、まず、操作者の入力により、ＣＰＵがカメラレンズ１０を有する超広角カメラ１１２によって画像を得る（ステップＳ３１）。
【０２１０】
次に、操作者の入力する指令に基づいてＣＰＵが、その画像に所定の歪み補正を行う（ステップＳ３２）。その歪み補正が行われると、操作者の入力する領域の指定に基づいて、ＣＰＵが、歪み補正が行われた画像から、指定された領域の切り出しを行う（ステップＳ３３）。
【０２１１】
次に、操作者がカメラ切替キー１０７によって映像表示番号を選択すると、その入力信号に基づいて、ＣＰＵが、切り出された領域の中から所定の領域を選択して（ステップＳ３４）、液晶表示部１０１にその所定の領域を表示する（ステップＳ３５）。
【０２１２】
各ステップをより具体的に説明する。
【０２１３】
ステップＳ３１では、操作者の入力により、ＣＰＵがカメラレンズ１０を有する超広角カメラ１１２によって、例えば図６や図１５の上側の画像に示す、歪んでいるデジタル画像を得る。その画像は、出席者の３人を表示しているが、画像は歪んでいて、中央の出席者が両脇の２人より極端に小さく表示され、両脇の２人が、胴体上部から頭部にかけて、共に中央に向かって丸みを帯びて湾曲した形に映っている。
【０２１４】
ステップＳ３２では、その表示された画像に歪み補正を行う。歪み補正の方法は、第１の実施の形態で行った歪み補正と同じ手順で実行される。
【０２１５】
映像補正テーブルには、上記の実施の形態の通り、歪み補正前の画素のアドレスと歪み補正後の画素のアドレスとの対応関係が規定されている。この対応関係に従って、カメラ映像補正制御部１２が、歪み補正前の画素を歪み補正後の画素のアドレスに移動する補正を行う。
【０２１６】
例えば、図１５の上側に、歪み補正を行っていない画像を示し、その下側に、歪み補正を行った画像における画素の対応関係を示す。上側の画像上に、アドレス１、２および３によって特定される３つの矩形の領域を示し、下側の画像上にも、アドレス１、２および３によって特定される３つの矩形の領域を示している。
【０２１７】
歪み補正の際には、カメラ映像補正制御部１２によって、上側の画像上のアドレス１、２および３によって特定される３つの矩形の領域が、それぞれ、矢印で示すように、下側の画像上のアドレス１、２および３によって特定される３つの矩形の領域に対応するように移動される。
【０２１８】
次に、ステップＳ３３では、カメラ映像補正制御部１２によって、歪み補正後の画像から所定の領域の切り出しが行われる。
【０２１９】
図１６に基づいて、領域の切り出し方法を説明する。切り出しは、例えば、上下左右の矢印キー１０４で、予め製造者が設定した切り出し領域毎に切り出せるようにしても良いし、上下左右矢印キー１０４によって液晶表示部１０１の画面上に表示されるカーソルで切り出し位置を指定し決定キー１０５で切り出しを実行することによって行われても良い。
【０２２０】
このとき、後述するように、画像の縦横の切り出し位置を特定する際に、縦横の所定の寸法比率に基づいて、例えば、縦方向の切り出し位置が特定されると、横方向の切り出し位置が自動的に算出されて特定されるようにしてもよい。
【０２２１】
領域の切り出しをするときには、最初に、図１６に示すように、画像の横方向の長さが各々均等にＬで示す長さになるように切り出し位置を指定して、その画像を３分割する。図１６の例では、製造者が予め３つの領域に切り出す場合について説明している。なお、図１６は図１５の下側に示す歪み補正後の画像と同じ画像である。
【０２２２】
次に、その３分割した画像の中の中央の画像から、縦横の寸法比率が３対４になる画像を切り出す。この比率は、液晶表示部１０１の画面サイズの比率に相当する。一般的に、表示装置は、３対４又は９対１６となっている。
【０２２３】
この切出しを具体的に説明する。中央の画像の横の長さはＬなので、縦の長さが３／４Ｌになるように画像の上下の部分を切り取る。この切り取りは、中央の画像の縦方向の中央の位置から上下の方向にそれぞれ３／８＊Ｌの位置で行うことが望ましい。このような位置で切り出すと、縦の長さが３／４＊Ｌとなるように切り出すことができる。この切り出した画像を切り出しエリア１に設定する。
【０２２４】
次に、図１６において３分割された画像の中の左側の画像については、画面サイズの横方向の半分のサイズになるように、つまり、縦横の比率が３対２になるようにする。左側の画像の横方向の長さはＬなので、縦の長さが３／２＊Ｌになるように画像の上下の部分を切り取る。この切り取りは、中央の画像の縦方向の中央の位置から上下の方向にそれぞれ３/４＊Ｌの位置で行うことが望ましい。この切り出した画像を切り出しエリア２に設定する。
【０２２５】
図１６において３分割された画像の中の右側の画像については、切り出しエリア２と同様に、縦横の比率が３対２になるように切り出しを行い、切り出した画像を切り出しエリア３に設定する。
【０２２６】
これらの切り出しにより、図１７に示すように、３か所の切り出した画像は、それぞれ、切り出しエリア１、切り出しエリア２および切り出しエリア３で囲まれた領域の画像になる。
【０２２７】
これらの切り出しエリア１、２および３の画像は、カメラ映像補正制御部１２の記憶部に保存することができる。
【０２２８】
ステップＳ３４では、操作者がカメラ切替キー１０７を押すごとに液晶表示部１０１に表示される映像表示番号を選択することができる。
【０２２９】
図１８は、切り出しエリア１、２および３の画像と映像表示番号との対応関係を示す。図１８の切り出し画像の「全体」は、切り出しを行っていない歪み補正後の画像を意味する。例えば、図１５の下側に示す歪み補正後の画像に相当する。
【０２３０】
図１８の切り出し画像の「中央」は、切り出しエリア１に示す画像を意味する。例えば、図８に示す画像に相当する。
【０２３１】
図１８の切り出し画像の「左右」は、切り出しエリア１および切り出しエリア２を組み合わせた画像を意味する。例えば、図９に示す画像に相当する。
【０２３２】
図１８の切り出し画像の「中央、左右」は、切り出しエリア１、切り出しエリア２および切り出しエリア３を組み合わせた画像を意味する。例えば、図１０に示す画像に相当する。
【０２３３】
映像表示番号０，１，２，３が、それぞれ、切り出し画像の「全体」、「中央」、「左右」、「中央、左右」に対応しており、カメラ切替キー１０７を切り替えることによって、映像表示番号を選択することができる。
【０２３４】
ステップＳ３５では、カメラ切替キー１０７を切り替えることによって、映像表示番号を選択すると、カメラ映像補正制御部１２の記憶部から、映像表示番号で特定される画像が読み出されて、液晶表示部１０１に表示される。
【０２３５】
このように、本実施形態であれば、予めカメラセンサ１１で獲得した画像に対して歪み補正を行い、切り出し領域を決定するため、切り出された領域の見た目が良くなる。また、全体画像と、切り出された領域との関係が認識しやすくなる。
【０２３６】
（マスク領域指定の例）
上記の第１のおよび他の実施の例に係る歪み補正では、切り出しエリアの形成方法に融通性がなく、また、画像から一部の領域を除く際に手間がかかることがある。このため、ここでは、画像の任意の位置を切り出したりマスクしたり（隠したり）するためにマスク領域を容易に特定できる他の例に係る歪み補正の方法について説明する。
【０２３７】
この実施の形態では、映像表示部１９がタッチパネルモジュールおよびタッチパネル制御部（図示せず）を備える。タッチパネルモジュールは、例えば、静電容量式のタッチパネルで、指やスタイラスによって入力をすることができる。
【０２３８】
また、カメラ映像補正制御部１２が、マスク領域に関するデータを格納することができる記憶部を備える。
【０２３９】
図１９は、ビデオ会議が開始された後に、マスク領域を形成するフローチャートを示す図である。
【０２４０】
最初に、ビデオ会議端末装置１００の前に座っている出席者が、メニューキー１０３、上下左右矢印キー１０４および決定キー１０５を操作して所定のコマンドを入力すると、ＣＰＵは、会議の相手側の出席者のビデオ会議端末装置に自己の映像を送信する前に、ビデオ会議端末装置１００の前に座っている出席者の画像を自己のビデオ会議端末装置１００の液晶表示部１０１に表示する（ステップＳ４１）。
【０２４１】
次に、操作者が、タッチパネル式の液晶表示部１０１に表示されている自己の画像上で、切り出す領域または隠す（マスクする）領域を指やスタイラスの先端によって指定するとタッチパネルモジュールからの信号に基づいて、ＣＰＵがマスクパターンを形成する（ステップＳ４２）。このとき、複数の領域を指定してもよい。
【０２４２】
図２０に基づいて具体的に説明すると、タッチパネル式の液晶表示部１０１に操作者側の画像２００が表示されている。操作者が、例えば指の先端によって、Ａ１のような円、Ａ２のような楕円およびＡ３のような５角形でそれぞれの領域を囲み、画像２００の中のそれらの領域以外の領域Ｍをキーの操作によってマスク領域として指定すると、ＣＰＵは領域Ｍをマスクパターンとして特定する。
【０２４３】
これにより、画像２００がビデオ会議の相手側のビデオ会議端末装置の表示画面に表示された場合には、領域Ａ１、Ａ２およびＡ３は表示されるが、画像２００においてそれらの領域以外の領域Ｍは表示されない。これによって、プライバシー保護が容易にかつ確実に行うことができるようになる。
【０２４４】
マスクパターンを新しく形成するのではなく、操作者が、メニューキー１０３、上下左右矢印キー１０４および決定キー１０５を操作して、ＣＰＵに、以前に記憶させておいたマスクパターンを呼び出させて画像上に表示させるようにしてもよい。
【０２４５】
マスクパターンの位置や形状が確定すると、ＣＰＵは、操作者が、マスクパターンをカメラ映像補正制御部１２の記憶部に保存するか否かを判断した入力を待つ（ステップＳ４３）。
【０２４６】
操作者が、マスクパターンをカメラ映像補正制御部１２の記憶部に保存しようとする場合には、マスクパターンに適切な名前を付して保存する入力をすることにより、ＣＰＵがそのマスクパターンをカメラ映像補正制御部１２の記憶部に保存する（ステップＳ４４）。
【０２４７】
次に、操作者から合成画像の形成を要求する入力があると、ＣＰＵは、保存したマスクパターンを読み出して操作者の画像と合成した画像を形成する（ステップＳ４５）。また、例えば、マスクパターンを今回のみ使用してマスクパターンの保存を行わない場合には、操作者から合成画像の形成を要求する入力があると、ＣＰＵは、マスクパターンを呼び出すことなく画面上に形成されているマスクパターンと操作者の画像とを合成した画像を形成する（ステップＳ４５）。
【０２４８】
次に、操作者の入力により、ＣＰＵは、ネットワーク３０を経由して、合成画像をビデオ会議の相手側の出席者のビデオ会議端末装置に送信する（ステップＳ４６）。
【０２４９】
その送信後、映している画像が変更された場合やマスクすべき対象が変わった場合には、再度ステップＳ４１からこのフローチャートの手順を実行する。
【０２５０】
本実施形態のように、切り出す領域を自由に変更させることができれば、プライバシーの問題や、表示のレイアウト等を柔軟に変更することができるようになる。
【０２５１】
（明るさ調整の例）
次に、上記のどの実施の例の歪み補正方法にも適用可能な切り出した画像の明るさ調整の例を説明する。例えば、図１７に示す切り出しエリア２が、切り出しエリア１および３と異なる明度を有する場合に、切り出しエリア２の明るさを調整することによってすべてのエリアの明度を合わせることができるという点で有用である。
【０２５２】
このような明るさ調整を行うため、ビデオ会議端末装置１００のカメラ映像補正テーブル保持部１３は、図２１に示す明るさ調整テーブルを備えることができる。
【０２５３】
図２１に示す明るさ調整テーブルは、３種類のテーブルを含んでおり、例えば、テーブル１は、明るさ基準エリア１の範囲を特定するためのＸＹ座標のＸ軸線方向の始点および終点とＹ軸方向の始点および終点とを表す座標値と、明るさ調整値１とを有する。ここで、Ｘ軸線方向は例えば表示画像の水平方向に対応し、Ｙ軸方向は垂直方向に対応する。
【０２５４】
明るさ基準エリア１は、明るさを調整する対象の切り出しエリアにおいて、明るさの基準とするエリアである。明るさ調整値１は、その明るさの基準とするエリアの明るさに対し、調整する明度の増減を示す値である。
【０２５５】
テーブル２およびテーブル３は、互いに、また、テーブル１が適用されるエリアとも異なるエリアを指定するとともに異なる明るさ調整値を有する。
【０２５６】
図２２は、明るさ調整のためのフローチャートを示す。
【０２５７】
最初に、操作者が、送信予定の画像に含まれる複数の切り出しエリアの画像を選択するキー入力を行うと、ＣＰＵは、カメラ映像補正制御部１２の記憶部からそれらの画像を読み出して液晶表示部１０１に表示する（ステップＳ５１）。
【０２５８】
次に、操作者が表示された切り出しエリアの画像を見て上下左右矢印キー１０４によって明るさ調整を行う切り出しエリアの画像を選択すると、ＣＰＵはステップＳ５２をステップＳ５３に進めて、画面上にその明るさ調整を行う切り出しエリアの画像を表示する。
【０２５９】
このとき、複数の切り出しエリアの画像が選択されると、ＣＰＵはこれらの複数の切り出しエリアの画像を表示部に表示する。
【０２６０】
操作者が明るさ調整を行うエリアを選択しない場合（例えば、画像を表示してから所定の時間経過するまで画像選択の入力信号がない場合）には、ＣＰＵは、送信予定の画像をそのままビデオ会議の相手側のビデオ会議端末装置に送信する（ステップＳ５８）。
【０２６１】
ステップＳ５３において、表示画面上に明るさ調整を行う切り出しエリアの画像が表示され、次に、操作者が明るさ調整テーブルを指定すると、ＣＰＵは、カメラ映像補正テーブル保持部１３からその指定されたテーブルを読み出す（ステップＳ５３）。
【０２６２】
図２３に、明るさ調整のために、液晶表示部１０１に表示された４つの切り出しエリアＡ１１、Ａ１２、Ａ１３、Ａ１４を示す。各エリアのそれぞれの領域Ｏ１１、Ｏ１２、Ｏ１３、Ｏ１４には出席者等が表示されているものとする。
【０２６３】
ここでは、エリアＡ１２の明るさを調整する場合を説明する。エリアＡ１２では、ステップＳ５４で指定された明るさ調整テーブルで特定されている明るさ基準エリアとして、明るさ基準エリアＲが特定されている。
【０２６４】
ＣＰＵは、明るさ基準エリアＲの明るさを、既に獲得している画像から輝度を検出し、その検出した輝度の値に対し、指定された明るさ調整テーブルで規定されている明るさ調整値を適用する。例えば、概念的に、明るさを最も暗い０段階から最も明るい１０までのように１０段階で表示する場合を想定する。検出した輝度の値が例えば７段階に相当する場合で、これに、明るさ調整の段階、例えば−２を適用すると、エリアＡ１２の調整すべき明るさは、段階５になる。ＣＰＵはこの段階の値に基づいて、エリアＡ１２の明るさ（輝度）を、この調整すべき明るさの段階の値に対応する輝度に変更する（ステップＳ５５）。
【０２６５】
次に、その明るさが調整されたエリアＡ１２の画像を液晶表示部１０１に表示する（ステップＳ５６）。
【０２６６】
操作者が再度、明るさの調整を行うためにキー操作により明るさ調整の画像を表示するとステップはステップＳ５７から再度ステップＳ５４に進み、ＣＰＵは、別の明るさ調整テーブルが指定される入力を待つ。
【０２６７】
一方、操作者が明るさ調整が成功したと判断して明るさ調整のメニュー画面から送信画面に映ると、処理は、ステップＳ５７からステップＳ５８に進む。ステップＳ５８では、送信対象として選択された複数の切り出しエリアの画像が液晶表示部１０１に表示され、操作者が画像送信の入力を行うと、ＣＰＵはそれらの画像を送信する。
【０２６８】
このように、この実施の形態に係る明るさ調整は、画像から切り出しを行った後に各切り出した画像に歪み補正を行った画像に対して行うことができ、また、画像に歪み補正を行った後に切り出し行った各画像に対して行うこともできる。このようにすることで、ある一つの画像から切り出された領域に対して、明るさの調整を行うことができる。例えば、切り出された領域毎に明暗が異なることで、表示の違和感が生じることが、本実施形態によれば軽減されることとなる。
【０２６９】
（リモート端末での歪み補正の例）
上記のどの実施の形態による映像の歪み補正も、例えば、ローカルのビデオ会議端末装置１００においてローカルのユーザによって操作されて実行されている。一方、ローカルのビデオ会議端末装置１００のカメラによって映された出席者を視認するのは、リモートのビデオ会議端末装置４０の液晶表示部を見ている出席者である。
【０２７０】
そこで、ローカルのビデオ会議端末装置１００のメニューキー１０３によって表示したいリモートのビデオ会議端末装置４０の画像を決定した後、例えば、リモートのビデオ会議端末装置４０のカメラ切替キーを利用することで、表示したいビデオ会議端末装置１００の映像の歪み補正を実行できるようにしてもよい。
【０２７１】
具体的には、メニューキー１０３によって、操作したいリモートのビデオ会議端末装置４０を選択して決定すると、ローカルのビデオ会議端末装置１００のマンマシン制御部１８は、そのリモートのビデオ会議端末装置４０を一意に識別する情報をビデオ会議サーバ５０から獲得する。
【０２７２】
ローカルのビデオ会議端末装置１００のマンマシン制御部１８は、操作したいビデオ会議端末装置４０を指定した後に、カメラ表示切替キー２０からカメラ切替信号を受け取ると、ローカルのビデオ会議端末装置１００自体への操作ではなく、指定されたリモートのビデオ会議端末装置４０への操作信号として読み替える。
【０２７３】
それにより、ローカルのビデオ会議端末装置１００のマンマシン制御部１８は、ビデオ会議伝送制御部１５に、ビデオ会議端末装置４０を一意に識別する情報とカメラ切替信号とを送信する。
【０２７４】
ローカルのビデオ会議端末装置１００のビデオ会議伝送制御部１５は、リモートのビデオ会議端末装置４０を一意に識別する情報に従って、ネットワーク制御部１６およびネットワーク３０を介して、カメラ切替信号を含む情報を、指定したリモートのビデオ会議端末装置４０に送信する。
【０２７５】
指定したリモートのビデオ会議端末装置４０においては、ネットワーク３０およびネットワーク制御部１６を介して、カメラ切替に関する情報が、ビデオ会議伝送制御部１５に通知されると、ビデオ会議伝送制御部１５は、マンマシン制御部１８に、それらのカメラ切替信号並びに、カメラ方向およびＬＣＤ傾きに関する情報を含む情報を送る。
【０２７６】
マンマシン制御部１８は、そのカメラ切替信号を自己のビデオ会議端末装置１００のカメラ切替信号等と同様に取り扱うので、既に説明した処理に従って、映像の歪み補正を行い、リモートのビデオ会議端末装置４０の液晶表示部に表示される映像は、リモートのビデオ会議端末装置のユーザが希望する態様となる。
【０２７７】
なお、リモートのビデオ会議端末装置４０から得られたカメラ切替に関する情報が、ビデオ会議伝送制御部１５に通知された際には、次のようなプロセスで実行されても良い。まず、図２で、ビデオ会議伝送制御部１５からカメラ映像補正制御部１２に向けてデータ通信をする二点鎖線で示す矢印が設けられる。すなわち、ビデオ会議伝送制御部１５から直接的にカメラ映像補正制御部１２に向けて制御を行えることとなる。
【０２７８】
そのような構成になれば、ビデオ会議伝送制御部１５は、それらのカメラ切替信号並びに、カメラ方向およびＬＣＤ傾きに関する情報を含む情報をカメラ映像補正制御部１２に送る（二点鎖線で示す）。カメラ映像補正制御部１２は、そのカメラ切替信号を自己のビデオ会議端末装置１００のカメラ切替信号等と同様に取り扱うことができる。
【０２７９】
すなわち、前述のマンマシン制御部１８を利用した場合と同様に、既に説明した処理に従って、映像の歪み補正を行い、リモートのビデオ会議端末装置４０の液晶表示部に表示される映像は、リモートのビデオ会議端末装置４０のユーザが希望する態様となる。
【符号の説明】
【０２８０】
１０  カメラレンズ（広角カメラレンズの一例）
１１  カメラセンサ
１２  カメラ映像補正制御部（第１制御部の一例）
１３  カメラ映像補正テーブル保持部（保持部の一例）
１４  スピーカ出力部
１５  ビデオ会議伝送制御部
１６  ネットワーク制御部（第２制御部の一例）
１７  マイク入力部
１８  マンマシン制御部
１９  映像表示部（情報表示部の一例）
２０  カメラ表示切替キー（操作部の一例）
２１  カメラ方向スイッチ（カメラ方向検知手段の一例）
２２  ＬＣＤ傾きスイッチ（ＬＣＤ傾き検知手段の一例）
２３  その他の操作キー
４０  リモートのビデオ会議端末装置
５０  ビデオ会議サーバ
１００  ローカルのビデオ会議端末装置
１０１  液晶表示部（情報表示部の一例）
１０５  決定キー
１０６  切断キー
１０７  カメラ切替キー（操作部の一例）
１１２  超広角カメラ（広角カメラの一例）
１１５  ＬＣＤヒンジ部
【先行技術文献】
【特許文献】
【０２８１】
【特許文献１】特許第４０４８５１１号
【図１】
0006303270.tif 000002
【図２】
0006303270.tif 000003
【図３】
0006303270.tif 000004
【図４】
0006303270.tif 000005
【図５】
0006303270.tif 000006
【図６】
0006303270.tif 000007
【図７】
0006303270.tif 000008
【図８】
0006303270.tif 000009
【図９】
0006303270.tif 000010
【図１０】
0006303270.tif 000011
【図１１】
0006303270.tif 000012
【図１２】
0006303270.tif 000013
【図１３】
0006303270.tif 000014
【図１４】
0006303270.tif 000015
【図１５】
0006303270.tif 000016
【図１６】
0006303270.tif 000017
【図１７】
0006303270.tif 000018
【図１８】
0006303270.tif 000019
【図１９】
0006303270.tif 000020
【図２０】
0006303270.tif 000021
【図２１】
0006303270.tif 000022
【図２２】
0006303270.tif 000023
【図２３】
0006303270.tif 000024