(57)【要約】      （修正有）【課題】複数の撮像ユニットを備えた立体撮像装置において、撮像対象が微妙に異なっている場合でも、ホワイトバランスを安定的に揃える。【解決手段】立体撮像装置１０００は、第１の撮像ユニット１００および第２の撮像ユニット２００で撮像した左右の画像からなる立体画像を取得する立体撮像装置であって、第１の撮像ユニット１００で撮像した画像中の第１の白領域を判定する白領域判定部４と、第１の撮像ユニット１００で判定した第１の白領域と同一の被写体を示す第２の撮像ユニット２００で撮像された画像中の領域を検索し、第２の白領域とする白領域検索部７と、を備え、第２の撮像ユニット２００は、白領域検索部７の出力である第２の白領域情報を用いてホワイトバランス調整を行う。【選択図】図１
2012109697.tif 000002
【特許請求の範囲】
【請求項１】
第１の撮像ユニットおよび第２の撮像ユニットで撮像した左右の画像からなる立体画像を取得する立体撮像装置であって、
前記第１の撮像ユニットで撮像した画像中の第１の白領域を判定する白領域判定部と、
前記第１の撮像ユニットで判定した前記第１の白領域と同一の被写体を示す前記第２の撮像ユニットで撮像された画像中の領域を検索し、第２の白領域とする白領域検索部と、
を備え、
前記第２の撮像ユニットは、前記白領域検索部の出力である第２の白領域情報を用いてホワイトバランス調整を行う立体撮像装置。
【請求項２】
前記白領域検索部は、画像比較を行うことで同一の被写体を示す第２の白領域を検索する
請求項１に記載の立体撮像装置。
【請求項３】
前記白領域検索部は、距離情報、輻輳角情報およびステレオベース情報より、シフト量を演算することで、同一の被写体を示す第２の白領域を検索する
請求項１に記載の立体撮像装置。
【請求項４】
第１の撮像ユニットおよび第２の撮像ユニットで撮像した左右の画像からなる立体画像を取得する立体撮像装置であって、
前記第１の撮像ユニットで撮像した画像中の第１の白領域を判定する白領域判定部と、
前記第１の撮像ユニットの前記第１の白領域と同一の被写体を示す前記第２の撮像ユニットで撮像された画像中の領域を検索し、第２の白領域とする白領域検索修正部と、
前記第１の撮像ユニットの前記第１の白領域を修正する白領域修正部と、
を備え、
前記第２の撮像ユニットは、前記白領域検索修正部の出力である第２の白領域情報を用いてホワイトバランス調整を行い、前記第１の撮像ユニットは、前記白領域修正部の出力である第１の白領域修正情報にしたがって前記第１の白領域を修正し、ホワイトバランス調整を行う立体撮像装置。
【請求項５】
前記白領域検索修正部は、画像比較を行うことで同一の被写体を示す第２の白領域を検索するとともに、検索した前記第２の白領域と前記白領域判定部が出力する前記第１の白領域との相関関係が小さく、かつ前記第２の白領域が画面端に位置する場合に、前記白領域判定部の出力の領域サイズを画面中央寄りに縮小して、再度、前記第２の撮像ユニットの画像領域を検索する
請求項４記載の立体撮像装置。
【請求項６】
第１の撮像ユニットおよび第２の撮像ユニットを備えた立体撮像装置のホワイトバランス調整方法であって、
前記第１の撮像ユニットで撮像した画像中の第１の白領域を判定する白領域判定ステップと、
前記第１の撮像ユニットで判定した前記第１の白領域と同一の被写体を示す前記第２の撮像ユニットで撮像された画像中の領域を検索し、第２の白領域とする白領域検索ステップと、
前記白領域検索ステップの結果を用いて、前記第２の撮像ユニットにおけるホワイトバランス調整を行うホワイトバランス調整ステップと、
を含むホワイトバランス調整方法。
【請求項７】
第１の撮像ユニットおよび第２の撮像ユニットを備えた立体撮像装置のホワイトバランス調整方法であって、
前記第１の撮像ユニットで撮像した画像中の第１の白領域を判定する白領域判定ステップと、
前記第１の撮像ユニットの前記第１の白領域と同一の被写体を示す前記第２の撮像ユニットで撮像された画像中の領域を検索し、第２の白領域とする白領域検索修正ステップと、
前記第１の撮像ユニットの前記第１の白領域を修正する白領域修正ステップと、
前記白領域検索修正ステップの結果を用いて、前記第２の撮像ユニットにおけるホワイトバランス調整を行う第２のホワイトバランス調整ステップと、
前記白領域修正ステップの出力である第１の白領域修正情報にしたがって前記第１の白領域を修正した後、前記第１の撮像ユニットにおけるホワイトバランス調整を行う第１のホワイトバランス調整ステップと、
を含む自動ホワイトバランス調整方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は複数の撮像ユニットを備えて立体画像を撮像する立体撮像装置において、ホワイトバランスを自動であわせる自動ホワイトバランス調整機能に関するものである。
【背景技術】
【０００２】
左目の画像と右目の画像を独立に同期撮影して立体的な画像を得る立体画像（３Ｄ画像）の撮像装置に注目が集まっている。
【０００３】
特許文献１には、ステレオアダプタを用いた立体撮像装置において、ホワイトバランスエリアを通常モードとステレオモードとで切替可能に構成し、ステレオモード時にはＬ／Ｒのそれぞれの撮影範囲に対して、通常時と相対的に同じ関係の範囲にホワイトバランスエリアを切替することにより、ステレオアダプタによるケラレ部分の悪影響を防止する方法が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００２−２１８５０７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
複数の撮像ユニットを備えた立体撮像装置においては、それぞれの撮像ユニットごとに位置および向きが異なる。したがって、それぞれの撮影ユニットごとに撮影映像が微妙に異なるため、撮像ユニットごとに自動ホワイトバランス調整を実施した場合、異なる被写体でホワイトバランスを調整し、ホワイトバランスが撮像ユニットごとに異なってしまうという課題がある。
【０００６】
上記従来の技術であるステレオアダプタを用いたホワイトバランス調整方法では、複数の撮像ユニットを備えた立体撮像装置に適応できないという課題がある。
【課題を解決するための手段】
【０００７】
上記課題を解決するために、本発明の立体撮像装置は、第１の撮像ユニットおよび第２の撮像ユニットで撮像した左右の画像からなる立体画像を取得する立体撮像装置であって、前記第１の撮像ユニットで撮像した画像中の第１の白領域を判定する白領域判定部と、前記第１の撮像ユニットで判定した前記第１の白領域と同一の被写体を示す前記第２の撮像ユニットで撮像された画像中の領域を検索し、第２の白領域とする白領域検索部と、を備え、前記第２の撮像ユニットは、前記白領域検索部の出力である第２の白領域情報を用いてホワイトバランス調整を行う。
【発明の効果】
【０００８】
上記の構成によって、立体撮像装置は、第１および第２の撮像ユニットのホワイトバランスを安定的にそろえることができる。
【図面の簡単な説明】
【０００９】
【図１】実施の形態１における立体撮像装置の構成を示すブロック図
【図２】立体画像の原理を説明するための模式図
【図３】実施の形態１のホワイトバランス調整動作を説明するための模式図
【図４】実施の形態２における立体撮像装置の構成を示すブロック図
【図５】実施の形態２のホワイトバランス調整動作を説明するための模式図
【発明を実施するための形態】
【００１０】
以下、実施の形態における立体撮像装置を、図面を用いて詳細に説明する。
【００１１】
（実施の形態１）
（１．立体撮像装置の構成）
図１は、実施の形態１における立体撮像装置１０００の構成を示すブロック図である。
【００１２】
図１に示すように、立体撮像装置１０００は、第１の撮像ユニット１００と、第２の撮像ユニット２００と、白領域判定部４と、白領域画像データ検出部５と、ホワイトバランス調整部６と、白領域検索部７と、で構成されている。
【００１３】
第１の撮像ユニット１００および第２の撮像ユニット２００は、いずれも撮像部１とゲイン調整部２と、信号処理部３と、で構成されている。
【００１４】
撮像部１は、ＣＭＯＳ型イメージセンサなどの撮像素子およびアナログ／デジタル変換部を有し、被写体からの光を光電変換により電気信号に変換し、デジタル画像信号としてゲイン調整部２に出力する。ゲイン調整部２は、ＲＧＢのそれぞれのゲインを調整し、ホワイトバランスを調整する。信号処理部３は、ガンマ処理、輪郭強調処理、マトリクス処理などを実施する。
【００１５】
白領域判定部４は、第１の撮像ユニット１００の画像出力から白領域を判定し、第１の白領域情報（画像データ、画面位置、領域サイズ）を出力する。白領域の判定アルゴリズムは、従来の撮像装置（立体撮像装置でない２Ｄ撮像装置）と同様であり、説明を省略する。白領域検索部７は、第１の白領域情報を基に、第２の撮像ユニット２００の画像出力から第１の白領域と最も関連が深い第２の画像出力の領域を検索する。すなわち、第１の白領域情報の画面位置、領域サイズと同じ位置、同じサイズの第２の画像出力から周辺にわたって画像マッチングを行い、もっともマッチする画面位置を検索して第２の白領域情報として出力する。これにより、第１の撮像ユニット１００で判定した白領域と同じ被写体が映っている第２の撮像ユニット２００の領域を検索できる。
【００１６】
白領域画像データ検出部５は、白領域情報から白領域のＲＧＢ画像データをそれぞれ積算し、出力する。ホワイトバランス調整部６は検出されたＲＧＢのデータよりＧと同じレベルになるようにＲ，Ｂのゲインを算出し、そのレベルとなるようにＲ，Ｂのゲインを変更する。
【００１７】
（２．立体撮像装置の動作）
立体撮像装置１０００のホワイトバランス調整の動作および効果について、図１、図２および図３を用いて説明する。図２は、立体画像の原理を説明するための模式図である。図３は、実施の形態１のホワイトバランス調整動作を説明するための模式図である。
【００１８】
まず図２を用いて立体画像の原理について説明する。
【００１９】
図２において、左右の撮像部は、一定間隔（以下、ステレオベース）離して、光軸が交差するように配置されている。この左右の撮像部の光軸がなす角度を輻輳角、交差する位置を基準面と呼ぶ。ステレオベースは、平均的な成人の両目間隔である６５ｍｍ程度に設定されることが多いが、この間隔に限るものではない。
【００２０】
中央に配置された被写体であるりんごが、どのように見えるかを、りんごの位置ごとに示す。図２（ａ）に基準面より手前にりんごがある場合、図２（ｂ）に基準面にりんごがある場合、図２（ｃ）に基準面より奥側にりんごがある場合を示す。
【００２１】
図２（ａ）に示す基準面より手前にりんごがある場合は、Ｌ側の画像は中心より右側にりんごが映っており、Ｒ側の画像は中心より左側にりんごが映っている。これらＬ／Ｒ側の画像を、それぞれ人間の左目／右目に見せると、脳で合成され、手前に飛び出しているように見える。
【００２２】
また、図２（ｂ）に示す基準面にりんごがある場合は、Ｌ／Ｒ側とも中央にりんごが映っており、この場合、脳で合成されると基準面位置にすなわち表示装置がある位置に、りんごがあるように見える。
【００２３】
さらに、図２（ｃ）に示す基準面より奥側にりんごがある場合は、Ｌ側の画像は中心より左側にりんごが映っており、Ｒ側の画像は中心より右側にりんごが映っている。これらＬ／Ｒ側の画像を、それぞれ人間の左目／右目に見せると、脳で合成され、奥まって見える。
【００２４】
ここで重要な点は、被写体と基準面位置との相対的な位置関係により、Ｌ側、Ｒ側とも画面に対して被写体が映っている位置が移動する点である。
【００２５】
したがって、Ｌ側での被写体の映っている位置にＲ側も同じ被写体が映っているとは限らない。この点に注目しながら、実施の形態１でのホワイトバランス調整動作をさらに詳しく説明する。
【００２６】
図３にホワイトバランス調整を実施する場合のＬ／Ｒ側の画像の一例を示す。画面の中央付近に第１の白い被写体αと、画面左上付近に第２の白い被写体βが映っている。第１の白い被写体αの位置関係として、図３（ａ）に基準面より手前にある場合、図３（ｂ）に基準面にある場合、図３（ｃ）に基準面より奥側にある場合を示す。第２の白い被写体βはいずれも基準面より奥側にあるものとする。
【００２７】
まず第２の被写体βが基準面より奥側にあることより、Ｌ側の画像では、左側にシフトし、Ｒ側の画像では、右側にシフトした位置に映っている。このため、Ｌ側の画像では、第２の被写体βの全体が映っていないが、Ｒ側の画像では、第２の被写体βの全体が映っている状況になっている。
【００２８】
この状況で、ホワイトバランス調整を実施すると、まず、Ｌ側の画像出力より、白領域判定部４は、白い被写体が映っている位置および領域サイズおよび白領域の画像データを検出する。その結果、第１の白い被写体αが主に映っている水平方向２番目、垂直方向３番目のブロック領域が検出される。すなわち、白領域情報について、位置は、水平２番目、垂直３番目のブロック領域、領域サイズは、点線で示すブロックサイズ、画像データは、図３（ａ）では、第１の白い被写体αおよび白い被写体αの左側の映像部分となり、図３（ｂ）では、ほぼ第１の白い被写体α全体となり、図３（ｃ）では第１の白い被写体αおよび白い被写体αの右側の映像部分となる。
【００２９】
次に検出された第１の白領域情報（画面位置、領域サイズ、画像データ）を基に白領域検索部７は第２の画像出力のうち、第１の白領域情報と最も関連の深い画像を検索する。具体的には、白領域検索部７は、第１の白領域の領域サイズで、画像マッチング処理を第１の白領域画面位置周辺について検索を順次行い、最もマッチングする第２の画像に対する白領域情報（画面位置、領域サイズ、画像データ）を決定する。
【００３０】
すなわち、白領域検索部７は、図３（ａ）のＲ側では、Ｌ側位置より左へシフトした中央よりやや左側の白領域を、図３（ｂ）のＲ側では、Ｌ側と同じ中央の白領域を、図３（ｃ）のＲ側では、Ｌ側位置より右へシフトした中央やや右寄りの白領域を検出できる。
【００３１】
さらに、第１の撮像ユニット１００の白領域画像データ検出部５は、白領域判定部４が検出した第１の撮像ユニット１００用の白領域情報の画像データを積算して出力する。第２の撮像ユニット２００の白領域画像データ検出部５は、白領域検索部７が検出した第２の撮像ユニット２００用の白領域情報の画像データを積算して出力する。
【００３２】
第１の撮像ユニット１００および第２の撮像ユニット２００のホワイトバランス調整部６は、入力された画像データに基づき、ＲＧＢのレベルが等しくなるようにＲｃｈおよびＢｃｈのゲインを算出する。ゲイン調整部２はホワイトバランス調整部６で算出したゲインを基にゲイン調整を行い、上述の第１の白い被写体αが白くなり、ホワイトバランスの調整が完了する。
【００３３】
ここで重要なポイントは、第１の撮像ユニット１００と第２の撮像ユニット２００で同じ被写体の画像データを用いてホワイトバランスを調整することである。
【００３４】
すなわち、白い被写体αと基準面との位置関係により、Ｒ側では、Ｌ側と同じ画面位置に映っていない場合があるのを、Ｒ側は、画像マッチングで検索することで、白い被写体αの位置を調整し、安定したホワイトバランス調整動作を実現している。
【００３５】
すなわち、Ｌ側、Ｒ側ともそれぞれ独立に白い被写体を検索するホワイトバランス調整方法の場合では、図３の例では、Ｌ側は、第１の白い被写体αで、ホワイトバランスを調整し、Ｒ側は、第２の白い被写体βでホワイトバランスを調整する可能性がある。この場合、Ｌ側とＲ側でホワイトバランスが異なる結果となるが、本実施の形態の立体撮像装置１０００は、この問題点を解決できる。
【００３６】
また、図３の白い被写体βがない場合においても、例えば図３（ａ）の基準面より第１の白い被写体αが手前にある場合には、白い被写体αが映っている場所が微妙に異なるため、同じ水平２番目、垂直３番目のブロックの画像データでホワイトバランスを調整したとしても、それぞれＬ側は、第１の白い被写体αの左側の背景の画像の影響を少なからず受け、Ｒ側は、第１の白い被写体αの右側の背景の画像の影響を受けるため、精度の高いホワイトバランス調整が不可能となり、Ｌ側とＲ側でホワイトバランスが微妙に異なるといった結果となるが、本実施の形態の立体撮像装置１０００は、この問題点を解決できる。
【００３７】
（３．まとめ）
以上のように、本実施の形態にかかる立体撮像装置１０００は、第１の撮像ユニット１００および第２の撮像ユニット２００で撮像した左右の画像からなる立体画像を取得する立体撮像装置であって、第１の撮像ユニット１００で撮像した画像中の第１の白領域を判定する白領域判定部４と、第１の撮像ユニット１００で判定した第１の白領域と同一の被写体を示す第２の撮像ユニット２００で撮像された画像中の領域を検索し、第２の白領域とする白領域検索部７と、を備え、第２の撮像ユニット２００は、白領域検索部７の出力である第２の白領域情報を用いてホワイトバランス調整を行うことにより、第１の撮像ユニット１００および第２の撮像ユニット２００のホワイトバランスを安定的にそろえることができる。
【００３８】
なお、検索領域は、水平方向だけ検索しても、水平、垂直の両方向とも検索してもよい。水平、垂直の両方向とも検索すると、第１の撮像ユニット１００と第２の撮像ユニット２００の垂直ずれがあった場合でも、安定的にホワイトバランスを調整することができる。
【００３９】
また、さらに、測距センサなどからの距離情報、ステレオベース、輻輳角などの情報より、水平方向のシフト量をあらかじめ推測し、画像検索を行ってもよい。この場合、検索時間の大幅な短縮ができる。
【００４０】
また、画像マッチング処理は、いわゆる動きベクトル検出処理と処理内容が似通っているため、回路共用すると低コストなどの効果も期待できる。
【００４１】
なお、白領域判定部４、白領域画像データ検出部５、ホワイトバランス調整部６および白領域検索部７は、回路ブロックとして説明したが、マイコンなどのソフトウエア処理で実現してもよい。
【００４２】
なお、白領域を判定および検索する画像信号は、説明では、信号処理部３の出力を用いているが、ゲイン調整部２以降であれば、信号処理部３の入力もしくは、中間部分の画像信号を用いてもよい。
【００４３】
なお、本実施の形態では、２つの撮像ユニットを用いて立体画像を撮像する形態について説明したが、３つ以上の撮像ユニットを用いて、立体画像やマルチビュー画像を撮像する際にも適用可能である。この場合、ある撮像ユニットでホワイトバランス調整に用いられる白領域と同じ被写体を示す領域を、他の２つ以上の撮像ユニットでホワイトバランス調整を行う際の白領域として用いる。これにより、３つ以上の撮像ユニットを用いる場合も、撮像ユニット間でホワイトバランスを安定的にそろえることができる。
【００４４】
（実施の形態２）
（１．立体撮像装置の構成）
図４は、実施の形態２における立体撮像装置２０００の構成を示すブロック図である。
【００４５】
図４に示すように、立体撮像装置２０００は、第１の撮像ユニット１００と、第２の撮像ユニット２００と、白領域判定部４と、白領域画像データ検出部５と、ホワイトバランス調整部６と、白領域修正部８と、白領域検索修正部９と、で構成されている。
【００４６】
第１の撮像ユニット１００および第２の撮像ユニット２００は、いずれも撮像部１とゲイン調整部２と、信号処理部３と、で構成されており、実施の形態１と同一のブロックは同じ番号を用いている。
【００４７】
実施の形態１との相違は、第１の撮像ユニット１００用に、白領域判定部４と白領域画像データ検出部５との間に白領域修正部８が挿入されている点と、第２の撮像ユニット２００用の白領域検索部７の代わりに第１の白領域情報を修正する機能を追加した白領域検索修正部９が挿入されている点である。
【００４８】
白領域修正部８は、白領域判定部４の出力である第１の白領域候補情報（画像データ、画面位置、領域サイズ）を白領域検索修正部９の第１の白領域修正情報に基づいて修正し、第１の白領域確定情報として出力する。
【００４９】
白領域検索修正部９は、まず、第１の白領域候補情報を基に、第２の画像出力から第１の白領域と最も関連が深い第２の画像出力の領域を検索する。その結果、白領域検索修正部９は、最も関連が深い領域と第１の白領域候補情報との相関関係が小さく、かつ画面端に位置する場合は、領域サイズを縮小して、再度、最も関連の深い領域を検索し、第１の白領域候補情報との相関関係が十分に大きい、または画面端に位置しない白領域を検出し、第２の白領域判定情報として出力すると同時に第１の白領域修正情報を出力する。他のブロックは、実施の形態１と同様なので、説明は省略する。
【００５０】
（２．立体撮像装置の動作）
以上のように構成された実施の形態２における立体撮像装置２０００の動作について、特に変更部分の動作について、図５を用いて詳しく説明する。
【００５１】
図５は、実施の形態２のホワイトバランス調整動作を説明するための模式図である。白い被写体が画面の左側で、基準面より手前にある場合を図５（ｄ）に、白い被写体が画面の右側で、基準面より奥にある場合を図５（ｅ）に示す。図５（ｄ）では白い被写体が基準面より手前にあることから、白い被写体は、Ｌ側の画像では、画面に全体が映っているが、Ｒ側の画像では、さらに左側に映るため、被写体全体が映っていない状況になっている。
【００５２】
また、図５（ｅ）では白い被写体が基準面より奥にあることから、白い被写体は、Ｌ側の画像では画面に全体が映っているが、Ｒ側の画像では、さらに右側に映るため、被写体全体が映っていない状況になっている。
【００５３】
この状況で、ホワイトバランス調整を実施すると、まず、Ｌ側の画像出力より、白領域判定部４は、白い被写体が映っている位置および領域サイズおよび白領域の画像データを検出する。その結果、白い被写体が主に映っている水平方向１番目、垂直方向３番目のブロック領域が検出される。すなわち、図５（ｄ）では、白領域候補情報として、位置は、水平１番目、垂直３番目のブロック領域、領域サイズは、点線で示すブロックサイズ、画像データは、白い被写体および白い被写体の上側の映像部分となる。また、図５（ｅ）では、同様に、位置は、水平３番目、垂直３番目のブロック領域、領域サイズは、点線で示すブロックサイズ、画像データは、白い被写体および白い被写体の上側の映像部分となる。
【００５４】
次に検出された白領域候補情報（画面位置、領域サイズ、画像データ）を基に白領域検索修正部９は、第２の画像出力のうち、第１の白領域候補情報と最も関連の深い画像を検索する。具体的には、第１の白領域の領域サイズで、画像マッチング処理を第１の白領域画面位置周辺について順次行い、最もマッチングする第２の画像を検索するが、そもそもＲ側の画像には映っていない領域があるため、検索は画面端までシフトしても相関関係が小さい結果となる。相関関係の大小は、例えば、画像データ差分の積算値などで判定可能である。
【００５５】
この場合、最も関連が深い領域と第１の白領域候補情報との相関関係が小さく、かつ画面端に位置するため、白領域検索修正部９は、第１の白領域候補情報の領域サイズを縮小して、再度、最もマッチングする第２の画像を検索する。
【００５６】
例えば、白領域検索修正部９は、図５（ｄ）および図５（ｅ）とも水平方向のサイズを画面中央寄りの１／２にして再検索を実施する。その結果、Ｒ側画像においても、領域サイズを縮小した画像は、全て映っているため、相関関係が大きい第２の画像領域を検索できることになる。すなわち、白領域検索修正部９は、図５（ｄ）では、白い被写体の右側半分が映っている領域、図５（ｅ）では白い被写体の左側半分が映っている領域を第２の白領域判定情報として決定し、出力する。また、同時に白領域検索修正部９は、白領域修正部８に、第１の白領域候補情報から、領域サイズを画面中央寄りの１／２に修正した内容の第１の白領域修正情報を出力する。
【００５７】
白領域修正部８は、第１の白領域修正情報に基づき、第１の白領域候補情報を修正して、第１の白領域確定情報として出力する。
【００５８】
ここで実施の形態２に特有の重要なポイントは、第１の撮像ユニット１００に全体が映っているが、第２の撮像ユニット２００に全体が映っていない白い被写体があった場合でも、その領域を自動的に縮小することで、同じ被写体に対する画像データを用いてホワイトバランス調整ができることである。
【００５９】
すなわち、白い被写体の画面位置と基準面との位置関係により、Ｌ側で検出した白領域全体とマッチングするＲ側画像がない場合、Ｒ側でマッチング可能な領域サイズに縮小し、さらに、Ｌ側へ白領域サイズの修正を指示し、必ずＬ側、Ｒ側で同じ被写体に対して、ホワイトバランス調整を行うため、安定したホワイトバランス調整動作を実現できる立体撮像装置２０００を提供できる。
【００６０】
（３．まとめ）
以上のように、本実施の形態にかかる立体撮像装置２０００は、第１の撮像ユニット１００および第２の撮像ユニット２００で撮像した左右の画像からなる立体画像を取得する立体撮像装置であって、第１の撮像ユニット１００で撮像した画像中の第１の白領域を判定する白領域判定部４と、第１の撮像ユニット１００の第１の白領域と同一の被写体を示す第２の撮像ユニット２００で撮像された画像中の領域を検索し、第２の白領域とする白領域検索修正部９と、第１の撮像ユニット１００の第１の白領域を修正する白領域修正部８と、を備え、第２の撮像ユニット２００は、白領域検索修正部９の出力である第２の白領域情報を用いてホワイトバランス調整を行い、第１の撮像ユニット１００は、白領域修正部８の出力である第１の白領域修正情報にしたがって第１の白領域を修正し、ホワイトバランス調整を行うことにより、第１の撮像ユニット１００および第２の撮像ユニット２００のホワイトバランスを安定的にそろえることができる。
【００６１】
なお、白領域判定部４、白領域画像データ検出部５、ホワイトバランス調整部６、白領域修正部８および白領域検索修正部９は、回路ブロックとして説明したが、マイコンなどのソフトウエア処理で実現してもよい。
【００６２】
なお、白領域を判定および検索する画像信号は、説明では、信号処理部３の出力を用いているが、ゲイン調整部２以降であれば、信号処理部３の入力もしくは、中間部分の画像信号を用いてもよい。
【００６３】
なお、本実施の形態では、２つの撮像ユニットを用いて立体画像を撮像する形態について説明したが、３つ以上の撮像ユニットを用いて、立体画像やマルチビュー画像を撮像する際にも適用可能である。この場合、ある撮像ユニットでホワイトバランス調整に用いられる白領域と同じ被写体を示す領域を、他の２つ以上の撮像ユニットでホワイトバランス調整を行う際の白領域として用いる。これにより、３つ以上の撮像ユニットを用いる場合も、撮像ユニット間でホワイトバランスを安定的にそろえることができる。
【産業上の利用可能性】
【００６４】
本実施の形態にかかる立体撮像装置は、複数の撮像ユニットを備えた立体撮像装置において、同じ被写体からホワイトバランス調整を実施することで、複数の撮像ユニット間で、安定的にホワイトバランス調整をそろえることができ、放送用、業務用、およびコンシューマ用の立体撮像装置に適用することができ、有用である。
【符号の説明】
【００６５】
１０００、２０００  立体撮像装置
１００  第１の撮像ユニット
２００  第２の撮像ユニット
１  第１および第２の撮像部
２  ゲイン調整部
３  信号処理部
４  白領域判定部
５  白領域画像データ検出部
６  ホワイトバランス調整部
７  白領域検索部
８  白領域修正部
９  白領域検索修正部
【図１】
2012109697.tif 000003
【図４】
2012109697.tif 000004
【図２】
2012109697.tif 000005
【図３】
2012109697.tif 000006
【図５】
2012109697.tif 000007