(57)【要約】【課題】広範囲の撮影エリアを複数のカメラ装置で撮影し、合成映像を生成する際、解像度や光学性能の異なるカメラ間の性能の差異を考慮し、複数のカメラ間の映像の画質をそろえて合成できるよう、カメラ装置の設置調整作業を効率化する方法並びに撮像装置を提供すること。【解決手段】映像合成に使用する撮像装置にて、映像合成に必要な画質を選定後、撮像装置の設置位置情報、被写界深度、分解能等の撮影パラメータから領域算出用パラメータを任意選択する。選定画質を満足する領域をパラメータごとに算出し、その算出領域を重ね合わせ、全てのパラメータにて選定画質を満足する領域を共通領域として求める。共通領域を用い、基準カメラの設置位置を決定後、隣接カメラの共通領域を取得、重畳表示させ、隣接カメラと基準カメラの共通領域を隙間なく配置するよう隣接カメラの設置位置を決定することで、画質差異のない合成映像の生成が可能となる。【選択図】図１
2018207430.tif 000002
【特許請求の範囲】
【請求項１】
複数の撮影手段により撮影され、
撮影パラメータを選択する撮影パラメータ選択手段と、
接続するレンズユニットの情報を取得するレンズ情報取得手段と、
撮像装置の設置情報を取得する設置情報取得手段と、
前記レンズ情報と前記設置情報と前記選択した撮影パラメータから指定した画質の基準を満たす領域を算出する撮影領域算出手段と、
算出した撮影領域を表示可能とする撮影領域表示手段と、
算出した撮影領域の領域情報を送出し、外部より複数のカメラにて算出された領域情報を取得することを可能とする撮影情報入出力手段と、
を有することを特徴とする撮像装置。
【請求項２】
前記撮影パラメータ選択手段にて使用する撮影パラメータは、合焦範囲、被写界深度、画角、解像度、ＭＴＦ、Ｓ／Ｎ、絞り値、収差、色温度であり、前記撮影パラメータのうち複数用いることを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記撮影領域算出手段にて算出した領域情報と外部より取得した領域情報を、前記撮影領域表示手段に重畳して表示することが可能なことを特徴とする請求項１又は請求項２に記載の撮像装置。
【請求項４】
前記撮影パラメータ選択手段にて選択したパラメータにおいて、前記撮影領域算出手段にて領域を算出し、その算出した個々の領域を前記撮影領域表示手段に表示することが可能なことを特徴とする請求項１乃至請求項３の何れか一項に記載の撮像装置。
【請求項５】
前記パラメータ選択手段にて選択した複数のパラメータにおいて、前記撮影領域算出手段にて領域を算出し、算出した領域を前記撮影領域表示手段に重畳表示することが可能なことを特徴とする請求項１乃至請求項４の何れか一項に記載の撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の撮像装置で撮影する映像を所定の画質で合成する際の、所定画質を持つ領域算出方法、並びに設置調整作業を効率化する撮像装置に関する。
【背景技術】
【０００２】
グランドや体育館等を用い競技するスポーツにおいて、その競技エリアを１つのカメラで撮影できる範囲を超えて、複数のカメラで分割して撮影し、その複数の撮影映像を１つの映像に合成し、ＴＶ放送コンテンツとして使用する場合がある。
【０００３】
特許文献１は、複数の視点位置から撮像した映像を用いてパノラマ映像を合成する際に、カメラの個体差によって生じる合成映像の色ずれを抑制し、ユーザ視点から見て違和感のない映像を合成するための色補正装置、色補正方法および色補正プログラムを提供している。これは撮影された映像を接合する際に、各映像間の色味を補正し、色調合わせる方法のみの記載である。
【０００４】
また、特許文献２は、広視野映像を撮影するためには、１台で撮影する場合には解像度の限界があるため、広視野撮影カメラと撮影範囲の一部分を拡大撮影する複数のマルチカメラの映像を用い、マルチカメラの映像を広視野撮影カメラに重ね合わせ合成する手法を提案している。この提案では、マルチカメラの映像を透視射影画像に変換し、２つの画像の位置関係、サイズ合わせを行っている。そして、広視野カメラとマルチカメラの視点位置の違いによるずれを公知のパターンマッチング手法を用い補正し、マルチカメラの画像を変形させ、マッチングさせることで広域の合成映像を生成させる方法を提案している。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特許第５５８８３９４号公報
【特許文献２】特開２００４−１３５０１９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、上記従来例では、複数の合成する映像間の色合いやサイズ、そして視野のずれ（ゆがみ）を合わせるのみであるため、使用するカメラやレンズについての言及がなく、以下のような問題点があった。
【０００７】
広範囲の撮影エリアを複数のカメラ装置で撮影し、合成映像を生成する場合、使用可能なカメラ、レンズによっては、多くのカメラを必要とする場合がある。このような場合、全て同じ性能のカメラ、レンズであれば良いが、カメラのセンサやレンズが異なるために解像度や光学性能の異なるカメラ装置が混在し設置する場合もある。
【０００８】
現在、このような撮影条件において、特性の異なる複数カメラにて撮影した映像を合成する場合、色味・画角・フォーカスが合うよう、従来例に示された方法や、モニター映像などを見ながら目視にて調整することは可能である。
【０００９】
しかし、解像感（分解能やＭＴＦ）、収差等のその他の多くの要因を考慮し、見た目の画質までも複数カメラ間でそろえて映像を合成する事は困難であり、また示されていない。そのため、複数カメラ間で画質の差異が生じ、合成境界が視聴者に認識されてしまうと言う課題が発生する。
【００１０】
本発明の目的は、複数カメラにて撮影した映像を合成する際に、その合成映像内にて、視聴者に合成境界が認識されないような、合成領域の算出や、複数カメラの効率的な設置方法を提供することにある。
【課題を解決するための手段】
【００１１】
上記の目的を達成するため、本発明に係る撮像装置は、
撮像条件を設定するための複数の撮影パラメータ設定手段を有する撮像光学系と、
前記複数の撮影パラメータから少なくともひとつのパラメータを選択する撮影パラメータ選択手段と、
前記撮像光学系の特性情報を取得する光学情報取得手段と、
撮像装置の設置情報を取得する設置情報取得手段と、
出力画像に必要とされる画質基準を設定するための画質設定手段と、
前記光学情報と前記設置情報と前記選択した撮影パラメータに基づき、画質設定手段にて設定した画質基準を満たす領域を算出する撮影領域算出手段と、
算出した撮影領域の境界を表示可能とする撮影領域表示手段と
算出した撮影領域の領域情報を送出し、外部より複数のカメラにて算出された領域情報を取得することを可能とする撮影情報入出力手段と、
を有することを特徴としている。
【発明の効果】
【００１２】
本発明に係る撮像装置によれば、合成時に必要とされる画質を満足する領域を表示装置に重畳表示することで、合成時に必要な領域を目視で可能とし、また、カメラ設置位置の最適な場所を決定することができる。
【図面の簡単な説明】
【００１３】
【図１】実施例１の撮像装置の機能ブロック図
【図２】実施例１の機能ブロック接続図
【図３】実施例１の機能ブロック図の制御のフローチャート
【図４】実施例１の領域の算出方法のフローチャート
【図５】実施例１の撮像装置のグラウンドや競技場で撮影時の設置状態を説明するイメージ図
【図６】実施例１の撮像装置のグラウンドや競技場で撮影時の設置状態を説明するイメージ図
【図７】実施例１の撮像装置の設置位置座標の算出方法を示す説明図
【図８】実施例１の画角の算出領域を示すイメージ図
【図９】実施例１の被写界深度の算出領域を示すイメージ図
【図１０】実施例１の分解能の算出領域を示すイメージ図
【図１１】実施例１のＭＴＦの算出領域を示すイメージ図
【図１２】実施例１の画角、被写界深度、分解能、МＴＦの算出領域より、求められた共通領域を示すイメージ図
【図１３】実施例１のＵＩ多重表示手段に表示されるカメラＡの共通領域のイメージ図
【図１４】実施例１の共通領域の位置情報（座標データ）の定義方法の説明図
【図１５】実施例１の共通領域の位置情報（座標データ）の定義方法の説明図
【図１６】実施例１の表示された共通領域を確認しながらのカメラ設置位置変更方法の説明図
【図１７】実施例１のカメラＡに隣接設置するカメラＢ、Ｃの配置イメージ図
【図１８】実施例１のＵＩ多重表示手段にカメラＢの共通領域が重畳表示されることを示すイメージ図
【図１９】実施例１のＵＩ多重表示手段にカメラＢ、カメラＣの共通領域が重畳表示されることを示すイメージ図
【図２０】実施例１のカメラＢ、カメラＣの設置位置の決定時に使用するＵＩ多重表示手段に表示される共通領域のイメージ図
【図２１】実施例２の撮像装置の機能ブロック図
【図２２Ａ】実施例２の機能ブロック図の制御のフローチャート
【図２２Ｂ】実施例２の機能ブロック図の制御のフローチャート
【図２３】実施例２の選択した撮影パラメータの表示パターンが表示されるＵＩ多重表示手段のイメージ図
【図２４】実施例２の選択した撮影パラメータの表示パターンが表示されるＵＩ多重表示手段のイメージ図
【図２５】実施例２の選択した撮影パラメータの表示パターンから算出された共通領域を示すＵＩ多重表示手段のイメージ図
【発明を実施するための形態】
【００１４】
以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。図１は、本発明の実施形態にかかわる撮像装置の機能ブロック図であり、図２は、本発明の実施形態にかかわる機能ブロック図である。
【００１５】
＜第１の実施形態＞
図１において、撮像装置１００はビデオカメラなどの撮影を行うことが可能な装置であり、撮像光学系２００は撮像装置１００に装着され、ズームレンズと、フォーカスレンズとアイリス機構とを有する。
【００１６】
映像合成装置３００は、複数の撮像装置が接続可能であり、それぞれの撮像装置で撮影された映像を取得し、撮影映像を合成し１つの映像とすることが可能な装置である。
【００１７】
次に、撮像装置１００の構成について説明する。
【００１８】
レンズ情報取得手段１０１は、撮像装置１００に接続された撮像光学系２００より、焦点距離、Ｆ値情報などを取得する。装置情報取得手段１０２は領域算出に必要なレンズ装置情報、撮像装置１００の設置情報、センサ情報等の装置情報を収集する。
【００１９】
画質設定手段１０３は、撮影領域を算出する際にその基準となる画質を設定する手段であり、撮影パラメータ選択手段１０４は領域算出に使用する撮影パラメータを選択する。
【００２０】
撮影領域算出手段１０５は、画質設定手段１０３で設定された基準となる画質と撮影パラメータ算出手段１０４で選択されたパラメータ、そして装置情報取得手段１０２より取得した装置情報より、各撮影パラメータごとに、画質を満足する領域を算出する。そして、複数の算出した領域を重ね合わせ、全てのパラメータにて画質を満足する領域を領域データとして求める。
【００２１】
領域パターン生成手段１０６は、撮影領域算出手段１０５にて算出した領域データを取得し、ビューア等の表示手段にて表示される撮影映像に、算出した領域データを合成可能とする領域パターンを生成する。
【００２２】
イメージセンサ１０７は、撮像光学系２００から入った光を電気信号に変換する。
【００２３】
画像処理手段１０８は、イメージセンサ１０７からの電気信号を受け取り、ビューア等の表示手段にて表示可能な映像信号に変換するための画像処理を行う。
【００２４】
映像出力手段１０９は、画像処理手段１０８からの映像信号を取得し、ＵＩ多重表示手段１１０や撮影情報入出力手段１１２へ映像信号を選択、出力する。
【００２５】
ＵＩ多重表示手段１１０は、映像出力手段１０９から取得した映像信号に、領域パターン生成手段１０６にて生成された領域パターンを合成し、表示可能な映像信号を出力する。
【００２６】
撮像装置制御手段１１１は、イメージセンサ１０７や画像処理手段１０８を制御し、取得した電気信号より、レンズ装置制御手段２０５に制御信号を送出する。
【００２７】
撮影情報入出力手段１１２は、外部に接続された映像合成装置との間にて、映像信号や指令信号、そして撮影領域情報等の入出力を司る。
【００２８】
設置情報取得手段１１３は、撮像装置１００の設置位置情報を外部より取得する。
【００２９】
レンズ情報送手段２０１は、撮像装置１００にレンズ情報、焦点距離、Ｆ値などを送出する。
【００３０】
フォーカスレンズ２０２は、ピント調節を行い、ズームレンズ２０３は画角調節を行うレンズである。アイリス２０４は絞りを調整する装置である。
【００３１】
レンズ装置制御手段２０５は、撮像装置制御手段１１１からの制御信号に基づいて、駆動手段２０６に駆動制御信号を創出し、フォーカスレンズ２０２、ズームレンズ２０３、アイリス２０４を駆動、制御する。
【００３２】
続いて図２において、映像合成装置３００は、接続される複数の撮像装置の設置位置情報を入力する手段を持ち、各撮像装置のイメージセンサや撮像光学系のスペック情報、設置位置情報を取得する。また、各撮像装置にて算出した領域データの情報（ピクセル）や算出時に選択された撮影パラメータの送受信が行われ、各撮像装置からのリクエストに応じた処理を行う。つまり、各撮像装置にて撮影された映像を取得し、映像の合成を行う装置である。
【００３３】
カメラＡ３０１、カメラＢ３０２、カメラＣ３０３は、映像合成装置３００に接続され、グランドや被写体等を撮影し、図１の機能ブロック図で示す機能を有するカメラ装置である。
【００３４】
次に、設置したい撮像装置において、その設置するための作業手法について、本実施例の一連の動作を元に、図３と図４の撮像装置１００のフローチャートを用いて説明する。
【００３５】
撮像装置１００は処理ステップＳ４００で処理を開始すると、まず処理ステップＳ４０１で、領域算出モードが選択されたかどうか確認する。領域算出モードとは、処理ステップＳ４０２にて詳細説明するが、カメラ（センサ）やレンズのスペック、撮像装置の設置位置の情報から、ある焦点距離における撮影範囲において、使用映像に必要な画質を満足する領域を算出するモードである。
【００３６】
処理ステップＳ４０１で領域算出モードが選択された場合、処理ステップＳ４０２に進み、領域算出ＳＵＢにて領域算出を行う。領域算出モードが選択されなかった場合、処理ステップＳ４１９に進み動作を終了する。
【００３７】
処理ステップＳ４０２における処理に関して、図４の領域算出サブルーチンのフローチャートを用いて説明する。
【００３８】
通常広いグラウンドや競技場にて、複数の撮像装置を用い、全体像を撮影をするような場合、スタンドの高いところや図５、図６のように、高いポールや櫓を準備し、その上からグラウンドを見下ろす形で設置されるのが一般的である。
【００３９】
設置したい撮像装置１００（ここではカメラＡ３０１とする）において、処理ステップＳ５００で処理を開始すると、処理ステップＳ５０１に進み、画質設定手段１０３にて、合成映像を生成する際に、必要とされる画質条件を選定する。画質条件とは、撮影された映像範囲において、解像感（分解能やＭＴＦ）、収差等のその他の多くの要因を考慮し、その画質満足する範囲のレベルをあらわすものであり、ＨＤ（２Ｋ）、３Ｋ、４Ｋと言った表記を選択する形でも良いし、解像可能な被写体サイズであらわしても良い。
【００４０】
画質設定手段１０３にて、画質条件を選定した後、処理ステップＳ５０２に進み、選定された画質条件を満足する領域を算出するために必要な撮影パラメータ（被写界深度、画角、センサ分解能、ＭＴＦ等）を撮像装置１００に設けられている、ＵＩ多重表示手段１１０に表示し提示する。
【００４１】
そして、処理ステップＳ５０３に進み、撮影者が、処理ステップＳ５０２にて提示した撮影パラメータに対し、撮影パラメータを追加、削除するかどうかを確認を行う。追加削除する場合は、処理ステップＳ５０４に進み、撮影パラメータ選択手段１０４にて、撮影パラメータの追加・削除を行う。
【００４２】
以下に代表的な撮影パラメータを挙げる。これらに特定されるものではなく、その他の要素を撮影パラメータとして追加してもよい。
【００４３】
・合焦位置
・被写界深度
・画角
・センサ分解能（解像度）
・絞り値による解像度変化
・Ｓ／Ｎ比
・ＭＴＦ
・収差
・明るさ
・色温度
処理ステップＳ５０５に進み、選択された撮影パラメータを取得する。
【００４４】
そして処理ステップＳ５０６に進み、選択した撮影パラメータにて、領域算出を行うために、必要な情報を、装置情報取得手段１０２にて取得する。装置情報取得手段１０２は、撮像装置１００に搭載されているイメージセンサ１０７よりカメラ情報を取得し、レンズ情報取得手段１０１から、撮像光学系２００よりレンズ情報送信手段２０１を介して取得したレンズ情報を取得する。そして、撮像装置１００に接続される映像合成装置３００より、撮像装置１００の設置位置情報を取得する。
【００４５】
取得するカメラ情報、レンズ情報、設置位置情報は以下の通りである。
カメラ情報・・・イメージセンササイズ（水平、垂直）、センサ画素ピッチ、センサ画素数、許容錯乱円
レンズ情報・・・Ｆ値、焦点距離、被写体距離（合焦距離）
設置位置情報・・設置高さ、基準点からの設置座標、設置角度、
である。
【００４６】
設置位置情報として、基準点からの設置座標とあるが、これは設置する複数カメラの設置位置情報を映像合成装置３００にて取得保存するものであり、映像合成装置３００での映像合成時や、撮像装置からの自身の設置位置情報の取得や、隣接カメラの情報取得のリクエスト時に使用する。
【００４７】
また、その設置座標のは、撮影するグランドや競技場などに図７のような基準Оｒ（０，０）を設け、その基準点からの設置距離から、設置座標Ｃａ（ｘ，ｙ）を算出する。
【００４８】
一例として図７の形の、設置座標の算出方法を示したが、基準点は任意の位置でよく、また、設置する複数の撮像装置の設置位置が判別できる手法であればよく、その手法は問わないでよい。
【００４９】
上記撮影パラメータにおいて、領域算出の際に必要な情報の一部を示すと、表１となる。
【００５０】
【表１】
2018207430.tif 000003
処理ステップＳ５０７に進み、取得したカメラ情報、レンズ情報、設置位置情報から、選択した各撮影パラメータの領域を撮影領域算出手段１０５にて算出する。本実施例では、一例として、処理ステップＳ５０５にて取得した撮影パラメータが、画角、被写界深度、分解能（解像度）、ＭＴＦとして、説明する。
【００５１】
領域の算出の際、処理ステップＳ５０１にて、選定された画質条件から、画角、被写界深度、分解能（解像度）、ＭＴＦの各撮影パラメータのＯＫ／ＮＧを判断する基準を設け、その基準をもとにＯＫ判断とされた領域が求める領域となる。
【００５２】
取得した各撮影パラメータ画角、被写界深度、分解能（解像度）、ＭＴＦ、それぞれ個別に、選定した画質を満足する領域を算出する。
【００５３】
まず、画角における領域を、取得した情報センササイズ、被写体距離、焦点距離、設置高さを用い、算出する。画角の算出領域は、図８のような点線の範囲となる。基本的には、撮影領域全体となるが、映像として使用可能領域を規定するため、算出する。
【００５４】
次に被写界深度における領域を、取得した情報  Ｆ値、被写体距離、焦点距離、設置高さ、許容錯乱円を用い、算出する。被写界深度の算出領域は、図９のような点線の範囲となる。ベストフォーカス位置に置かれた補被写体がレンズ位置に対して前後に移動しても、フォーカスの再調整することなく、所定の画質を維持できる範囲を表すものである。
【００５５】
次に分解能（解像度）における領域を、取得した情報センササイズ、被写体距離、焦点距離、設置高さ、センサ画素数を用い、算出する。分解能（解像度）の算出領域は、図１０のような点線の範囲となる。分解能とは「センサの１画素が被写体の何ｍｍに相当するか」であり、選定した画質条件から、被写体の細部において、判別が必要なサイズを求め、その条件に満足する被写体距離の範囲を表すものである。
【００５６】
次にＭＴＦにおける領域を、取得した情報  Ｆ値、焦点距離と光軸中心からの像高を用い、算出する。ＭＴＦの算出領域は、図１１のような点線の範囲となる。ＭＴＦとは、レンズの結像性能を表し、物体のコントラストをどの程度忠実に像として再現できるかを表したものであり、画像中心からの距離において、選定した画質を満足するレンズのコントラストや解像力の範囲を表すものである。取得した各撮影パラメータである画角、被写界深度、分解能（解像度）、ＭＴＦの領域の算出が終了したのち、処理ステップＳ５０８に進み、算出した各撮影パラメータの領域を重ね合わせ、全ての要素が満足する領域を算出する。
【００５７】
図１２のように、画角、被写界深度、分解能、МＴＦの領域算出にて、算出されたエリア（範囲）を重ね合わせることで、全ての撮影パラメータが、選定した画質を満足する領域を求めることができる。本実施例ではこの算出された領域を共通領域と呼ぶこととする。
【００５８】
処理ステップＳ５０８の処理が終了すると、領域算出サブルーチンの処理が終了し、処理ステップＳ４０３に進む。
【００５９】
処理ステップ４０３では、領域算出サブルーチンで算出した各撮影パラメータの算出領域を保存する。そして処理ステップ４０４に進み、処理ステップＳ５０８で算出した  全ての撮影パラメータの算出領域を重ねあわせ算出した共通領域を保存する。
【００６０】
次に、処理ステップＳ４０５に進む。処理ステップ４０５では、算出した共通領域を撮像装置１００に設けられた表示手段であるＵＩ多重表示手段１１０に表示するか確認する。撮像装置１００に設けられたＵＩ多重表示手段１１０では、撮像光学系２００を通して、イメージセンサ１０７に結像した光が映像信号に変換され、映像出力手段１０９を介し、撮影映像として表示される。
【００６１】
算出した共通領域をＵＩ多重表示手段１１０に表示させる場合には、処理ステップ４０６に進み、領域パターン生成手段１０６にて、撮影領域算出手段１０５にて算出された共通領域を元に、ＵＩ多重表示手段１１０にて表示可能な表示パターンを生成する。
【００６２】
処理ステップＳ４０７に進み、生成した表示パターンを元に図１３のように、ＵＩ多重表示手段１１０の表示されている撮影映像に重ね合わせ、表示する。共通領域を表示する位置は、映像合成装置３００から取得した撮像装置１００の設置位置と撮影映像の表示範囲における算出した共通領域の位置から算出し表示する。つまり、算出した共通領域の位置情報を、図１４のように、前述のフィールド上の基準点Ｏｒ（０，０）からの撮像装置１００が撮影し映し出す撮影映像範囲の頂点の座標情報Ｃ（ｘ，ｙ）を求め、基準点Ｏｒからの絶対位置を決定する。そして、撮影映像内のピクセル情報から共通領域が占めている範囲を図１５のようにＰ１（Ｘａ１，Ｙ１）〜Ｐｚｚ（Ｘｂｚｚ，Ｙｚｚ）の座標データとして定義する。
【００６３】
次処理ステップＳ４０８に進み、表示された共通領域の表示パターンを確認し、カメラＡ３０１に設置位置を決定する。本実施例では設置方法の例を示し、発明の説明とする。設置する方法は任意で有り、この方法に限定されるものではない。
【００６４】
まず図１３のＵＩ多重表示手段１１０に表示された共通領域がフィールドのどの部分を網羅しているが確認する。たとえばフィールドの競技を行うコート全体を複数のカメラで隙間なく撮影するためには、コートの端であるコーナーから順番に設置していく必要がある。そのため、表示されている領域を見ながら、図１６に示すように共通領域がコーナーを覆うようにカメラＡ３０１の設置位置を変更する。設置位置の変更時、状況に応じて、再度共通領域の算出を行う（処理ステップＳ４０９）。
【００６５】
カメラＡ３０１の設置位置が決定した場合、処理ステップＳ４１０に進み、図１７のようにカメラＡ３０１に隣接したカメラであるカメラＢ３０２やカメラＣ３０３のそれぞれの算出領域である共通領域を基準としているカメラＡ３０１のＵＩ多重表示手段１１０に表示させるか確認する。
【００６６】
現在、カメラＡ３０１である撮像装置１００のＵＩ多重表示手段１１０には、カメラＡ３０１にて、選定した画質を満足する共通領域が表示されているが、フィールド全体を隙間なく撮影するためには、隣接カメラであるカメラＢ３０２、カメラＣ３０３の設置位置を決める必要がある。そのため、処理ステップＳ４１０でカメラ設置を続ける場合は、処理ステップＳ４１１に進み、行わない場合には、処理ステップＳ４２０に進む。
【００６７】
処理ステップＳ４１１では、図１や図２にて示すように、撮像装置１００であるカメラＡ３０１に接続されている映像合成装置３００に対し、隣接カメラにて共通領域の算出をしてもらうために、領域算出を依頼する指定カメラの情報を撮影情報入出力手段１１２を介し、送信する。ここでは指定カメラをカメラＢ３０２、カメラＣ３０３とする。
【００６８】
処理ステップＳ４１２に進み、映像合成装置３００に対し、共通領域の算出をしてもらうために必要な指定撮影パラメータを送信する。この撮影パラメータは、カメラＡ３０１にて領域算出を行った際に選定、取得した撮影パラメータであり、カメラＡ３０１にて共通領域を算出した際に使用した撮影パラメータと同一のものである。
【００６９】
処理ステップＳ４１３に進み、映像合成装置３００にて、処理ステップＳ４１１にて指定されたカメラに対し、処理ステップＳ４１２にて取得した撮影パラメータでの領域算出を依頼する。依頼された撮像装置、例えばカメラＢ３０２とすると、カメラＢ３０２は、映像合成装置３００より、指定された撮影パラメータを受け取る。この撮影パラメータは前述のカメラＡ３０１での領域算出の際に使用した撮影パラメータと同一の、画角、被写界深度、分解能（解像度）、ＭＴＦとなる。この撮影パラメータを受け取った、カメラＢ３０２は、処理ステップＳ４０２の領域算出サブルーチンと同様の処理を行い、カメラＢ３０２における共通領域を算出する。
【００７０】
そして、処理ステップＳ４１４にて、映像合成装置３００は、指定カメラにて算出した領域情報を取得する。ここではカメラＢ３０２より、算出した共通領域の情報を取得する。ここで取得する情報は、前述の処理ステップＳ４０７にて説明した共通領域の位置情報である。
【００７１】
映像合成装置３００にて指定カメラの共通領域の位置情報を取得が完了したら、ステップＳ４１５に進み、映像合成装置３００は、取得した指定カメラが算出した領域情報を依頼を受け取った撮像装置に対し、送信する。ここでは、カメラＢ３０２にて算出された共通領域の位置情報をカメラＡ３０１に送信する。
【００７２】
処理ステップＳ４１６に進み、共通領域の位置情報を受け取った撮像装置１００は、その情報を元に、ＵＩ多重表示手段１１０に表示可能な表示パターンを生成する。
【００７３】
そして処理ステップＳ４１７に進み、表示パターンをもとに、撮像装置１００のＵＩ多重表示手段１１０に、その表示パターンを表示する。つまり、図１８のように、カメラＢ３０２にて、算出された共通領域が、カメラＡ３０１の表示装置に重畳表示可能な表示パターンに変換、生成され、カメラＡ３０１の表示装置上に重ねて表示されることになる。
【００７４】
次に、処理ステップＳ４１８に進み、他の隣接カメラの算出領域を追加表示をするか確認を行う。さらに追加で、隣接する撮像装置が算出する共通領域をＵＩ多重表示手段１１０に重畳表示させたい場合は、処理ステップＳ４１１に戻り、再度、カメラを指定し、領域算出を映像合成装置３００に依頼する。
【００７５】
もう、追加表示の必要がない場合は、処理ステップＳ４１９にすすむ。ここでは、隣接するカメラＣ３０３が算出する共通領域の位置情報が必要であるため、処理ステップＳ４１１へ戻り、前述のカメラＢ３０２と同様の処理を行い、カメラＣ３０３にて算出された共通領域の位置情報を映像合成装置３００から取得する。取得した情報を元に表示パターンを生成し、カメラＡ３０１のＵＩ多重表示手段１１０に、その表示パターンを図１９のように重畳表示する。
【００７６】
隣接するカメラがカメラＢ３０２、カメラＣ３０３の２台であるとしたので、処理ステップＳ４１８より、処理ステップＳ４１９に進む。処理ステップＳ４１９では、ＵＩ多重表示手段１１０に表示されたカメラＡ３０１、カメラＢ３０２、カメラＣ３０３の領域表示を確認しながら、各撮像装置であるカメラＢ３０２、カメラＣ３０３の設置位置を決定する。
【００７７】
図２０に示すように、設置位置を決めたカメラＡ３０１を基準に、カメラＢ３０２、カメラＣ３０３の共通領域の位置を確認しながら、各カメラの共通領域にてフィールドを隙間なくカバーできるよう、設置位置を決定する。カメラＢ３０２、カメラＣ３０３の設置位置変更時、状況に応じて、再度共通領域の算出をおこなう。
【００７８】
各カメラの設置位置が決定したら、処理ステップＳ４２０に進み、表示手段であるＵＩ多重表示手段１１０上での領域表示を終了するか確認する。そのまま表示をする場合、処理ステップＳ４０９に戻る。領域表示を終了する場合、処理ステップＳ４２１に進み、表示手段  であるＵＩ多重表示手段１１０上での領域表示を終了する。
【００７９】
実施例１での説明では、カメラＡ３０１、カメラＢ３０２、カメラＣ３０３をピックアップをし、説明したが、算出した共通領域から、隣接するカメラの設置手法について説明した。
【００８０】
しかし、広いグラウンドや競技場を、さらに多くの複数カメラにて撮影し、フィールド全体を１つの映像として、選定した画質以上の合成映像として生成するためには、カメラＢ３０２、カメラＣ３０３に続くカメラも、同様の方法で設置位置を決定する必要がある。その場合は、処理ステップＳ４１１から、処理ステップＳ４１７を繰り返し行い、各カメラの共通領域を表示装置であるＵＩ多重表示手段１１０上にて確認し、各カメラにて算出した共通領域でグラウンドや競技場全体をで隙間なくカバーしていく。そして、全体のカバーが完了したら、映像合成装置３００にて、各カメラの設置位置情報、各カメラにて算出した共通領域の位置情報を元に、各カメラから取得した映像から、合成する映像範囲を切り出し、合成映像を生成することが可能となる。
【００８１】
＜第２の実施形態＞
図２１に本発明のブロック図を示す。
【００８２】
本実施形態において、撮像装置１００、撮像光学系２００の基本的な構成は第１の実施形態と同様である。第１の実施形態と同等の部分については同じ番号を与え、説明は省略する。
【００８３】
また、図２２Ａ、図２２Ｂは、第２の実施形態に係るフローチャートである。本フローチャートにおいて、図３と同一又は同様の処理が行われるステップには同一の符号を付し、その説明を省略する。
【００８４】
本発明の特徴となるところは、共通領域の算出に使用される撮影パラメータの中から、表示装置に表示させたい撮影パラメータを個別に表示、非表示の選択ができ、多重表示が可能となるところにある。そして、選択した領域を重ね合わせ共通領域を算出し、その領域を重畳表示を可能にでき、撮影パラメータを取捨選択することによる共通領域範囲の差異を表示装置上で確認することができるところにある。
【００８５】
処理ステップＳ６０１において、表示手段であるＵＩ多重表示手段１１０に算出領域を表示させるか確認する。表示させない場合は、処理ステップＳ４２１に進み、処理を終了する。
【００８６】
表示させる場合は、処理ステップＳ６０２に進み、撮影パラメータから算出された選定した画質を満足する領域の表示パターンを表示させるか？確認する。表示させない場合は、処理ステップＳ４０６に進み、共通領域の表示パターンを生成する。表示させる場合は、処理ステップＳ６０３に進み、各撮影パラメータの表示パターンを生成する。第１の実施形態を設定を引き継ぐと、選択された撮影パラメータのは、画角、被写界深度、分解能、МＴＦであり、その算出した領域の表示パターンを生成することとなる。
【００８７】
処理ステップＳ６０４に進み、表示パターン選択手段１１４にて、ＵＩ多重表示手段１１０上に表示パターンを表示する撮影パラメータを選択する。表示パターン選択手段１１４では、領域算出サブルーチン内の処理ステップＳ５０５にて取得された撮影パラメータから任意に取捨選択が可能となっている。
【００８８】
処理ステップＳ６０５に進み、選択した撮影パラメータの表示パターンを、表示手段であるＵＩ多重表示手段１１０上に重畳表示させる。
【００８９】
表示パターン選択手段１１４にて、画角、被写界深度、分解能、МＴＦの全てを選択した場合は、図２３のように、Ｐ１：画角、Ｐ２：分解能、Ｐ３：ＭＴＦ、Ｐ４：被写界深度の各撮影パラメータの算出された領域が表示される。
【００９０】
Ｐ２：分解能、Ｐ３：МＴＦだけを選択すると、図２４のような表示となる。
【００９１】
処理ステップＳ６０６に進み、表示パターン選択手段１１４にて選択した撮影パラメータの表示パターンより、重なり合う共通領域を算出する。そして処理ステップＳ６０７にて、算出した共通領域を、ＵＩ多重表示手段１１０上に重畳表示を行う。
【００９２】
図２３、図２４にて撮影パラメータの領域表示されている、ＵＩ多重表示手段１１０上に、それぞれ図２５のように共通領域を表示させることが可能である。
【００９３】
処理ステップＳ６０８に進み、表示する撮影パラメータを再選択するか確認する。再選択する場合は、処理ステップＳ６０４に戻り、表示パターン選択手段１１４での撮影パラメータの選択処置に戻る。再選択しない場合には、処理ステップＳ４０８に進み、表示パターンを確認し、カメラＡ３０１の設置位置を決定する。
【００９４】
以上のように、第１の実施例では、選択した撮影パラメータから算出し得られた領域を全てを用いて、共通領域を算出し、カメラの設置位置の決定に使用する形である。
【００９５】
それに対し、第２の実施例では、選択した撮影パラメータから算出し得られた領域から、表示手段に表示可能な表示パターンを生成し、表示パターン選択手段で表示させたい撮影パラメータの取捨選択を可能としている。そして、選択した表示パターンを表示させ、その表示した領域の共通領域を算出をし、重畳表示させることで、撮影パラメータを選択しながら共通領域がどう変化するか確認しながら、設置作業が確認できるようになる。
【００９６】
＜その他の実施形態＞
以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。上述の実施形態の一部を適宜組み合わせてもよい。
【符号の説明】
【００９７】
１００  撮像装置、
１０１  レンズ情報取得手段、１０２  装置情報取得手段、１０３  画質設定手段、
１０４  撮影パラメータ選択手段、１０５  撮影領域算出選択手段、
１０６  領域パターン生成手段、１０７  イメージセンサ、１０８  画像処理手段、
１０９  映像出力手段、１１０  ＵＩ多重表示手段、１１１  撮像装置制御手段、
１１２  撮影情報入出力手段、１１３  設置情報取得手段、
１１４  表示パターン選択手段、２００  撮像光学系、
２０１  レンズ情報送信手段、２０２  フォーカスレンズ、
２０３  ズームレンズ、２０４  アイリス、２０５  レンズ装置制御手段、
２０６  駆動手段、３００  映像合成装置、３０１  カメラＡ、
３０２  カメラＢ、３０３  カメラＣ
【図１】
2018207430.tif 000004
【図２】
2018207430.tif 000005
【図３】
2018207430.tif 000006
【図４】
2018207430.tif 000007
【図５】
2018207430.tif 000008
【図６】
2018207430.tif 000009
【図７】
2018207430.tif 000010
【図８】
2018207430.tif 000011
【図９】
2018207430.tif 000012
【図１０】
2018207430.tif 000013
【図１１】
2018207430.tif 000014
【図１２】
2018207430.tif 000015
【図１３】
2018207430.tif 000016
【図１４】
2018207430.tif 000017
【図１５】
2018207430.tif 000018
【図１６】
2018207430.tif 000019
【図１７】
2018207430.tif 000020
【図１８】
2018207430.tif 000021
【図１９】
2018207430.tif 000022
【図２０】
2018207430.tif 000023
【図２１】
2018207430.tif 000024
【図２２Ａ】
2018207430.tif 000025
【図２２Ｂ】
2018207430.tif 000026
【図２３】
2018207430.tif 000027
【図２４】
2018207430.tif 000028
【図２５】
2018207430.tif 000029