(57)【要約】【課題】一方の撮像部に比べて他方の撮像部の方が画質が良い場合に、他方の撮像部を主撮像部として決定することにより、より画質の良い画像をより確実に得る。【解決手段】複数ある撮像部、例えば第１撮像部２および第２撮像部３から、単眼カメラ動作モード（２Ｄ撮影時）で使用する主撮像部を選択する機能を有する多眼撮像装置２０であって、第１撮像部２および第２撮像部３と、各撮像部２，３が持つ画質情報である各画像データを記憶する画質情報記憶部１０ａと、画質情報である各画像データから各撮像部２，３に対する画質判定情報であるＳＮ比を算出する判定情報計算部１０ｂと、この判定情報計算部１０ｂから算出された画質判定情報であるＳＮ比を記憶する判定情報記憶部１０ｃと、画質判定情報であるＳＮ比に基づいて単眼撮影時（２Ｄ撮影時）に使用する主撮像部を決定する撮像部切替制御部１０ｄとを備えている。【選択図】図３
2012227846.tif 000002
【特許請求の範囲】
【請求項１】
３Ｄ撮影用に少なくとも二つの撮像部が設けられ、２Ｄ撮影の場合に、該少なくとも二つの撮像部のいずれかを主撮像部と定めて用いる多眼撮像装置の内部および外部の少なくともいずれかに、該少なくとも二つの撮像部からの各画像データに基づいて画質判定情報を求め、該画質判定情報に基づいて画質が最もよい撮像部を該主撮像部として選択する制御部を有する多眼撮像装置。
【請求項２】
前記制御部は、前記少なくとも二つの撮像部からの各画像データを記憶する画質情報記憶部と、該画質情報記憶部からの各画像データに基づいて画質判定情報を算出する判定情報算出部と、該判定情報算出部で算出された画質判定情報を記憶する判定情報記憶部と、該判定情報記憶部からの判定情報に基づいて２Ｄ撮影時に使用する撮像部を前記主撮像部として決定する撮像部切替制御部とを有する請求項１に記載の多眼撮像装置。
【請求項３】
前記判定情報算出部は、前記画質情報記憶部からの各画像データの出力値から前記画質判定情報としてＳＮ比を算出する請求項２に記載の多眼撮像装置。
【請求項４】
前記判定情報算出部は、前記画質情報記憶部からの各画像データの出力値から前記画質判定情報としてシェーディング特性を算出する請求項２に記載の多眼撮像装置。
【請求項５】
前記判定情報算出部は、前記画質情報記憶部からの各画像データの出力値から前記画質判定情報として色シェーディング特性を算出する請求項２に記載の多眼撮像装置。
【請求項６】
前記画質情報記憶部は、前記少なくとも二つの撮像部のそれぞれに、輝度が一様な被写体が撮影された該少なくとも二つの撮像部からの各画像データを記憶する請求項２に記載の多眼撮像装置。
【請求項７】
前記画質情報記憶部は、前記少なくとも二つの撮像部のそれぞれに、輝度が一様な被写体が撮影された該少なくとも二つの撮像部からの各画像データの少なくとも２色以上のカラー信号の比を記憶する請求項２に記載の多眼撮像装置。
【請求項８】
前記撮像部切替制御部は、２Ｄ撮影時に、前記二つの撮像部のいずれを用いて撮影するかを、ユーザが外部からした選択指令に基づいて選択制御する機能を更に有する請求項２に記載の多眼撮像装置。
【請求項９】
前記二つの撮像部からの各画像データは、全有効画素領域、単一の一部有効画素領域および複数の一部有効画素領域のうちのいずれかの領域からの各画像データである請求項１、２、６および７のいずれかに記載の多眼撮像装置。
【請求項１０】
請求項１〜９の何れかに記載の多眼撮像装置を撮像部に用いた携帯情報端末装置。
【請求項１１】
前記少なくとも二つの撮像部の少なくともいずれかからの画像信号を表示用に所定の信号処理をした後の画像データに基づいて表示画面上に表示を行う表示装置を有する請求項１０に記載の携帯情報端末装置。
【請求項１２】
前記少なくとも二つの撮像部の少なくともいずれかからの画像信号を記録用に所定の信号処理した後の画像データを記録可能とするメモリ部を有する請求項１０に記載の携帯情報端末装置。
【請求項１３】
前記少なくとも二つの撮像部の少なくともいずれかからの画像信号を通信用に所定の信号処理をした後の画像データを通信処理可能とする通信部を有する請求項１０に記載の携帯情報端末装置。
【請求項１４】
３Ｄ撮影用の少なくとも二つの撮像部を用いて２Ｄ撮影を行う場合に、該少なくとも二つの撮像部のいずれかを主撮像部として用いる多眼撮像方法において、
制御部が、該少なくとも二つの撮像部からの各画像データに基づいて画質判定情報を求め、該画質判定情報に基づいて画質が最も良い撮像部を該主撮像部として選択する制御ステップを有する多眼撮像方法。
【請求項１５】
前記制御ステップは、前記少なくとも二つの撮像部からの各画像データを画質情報記憶部に記憶する画質情報記憶ステップと、判定情報算出部が、該画質情報記憶部からの各画像データに基づいて画質判定情報を算出する判定情報算出ステップと、該判定情報算出ステップで算出された画質判定情報を判定情報記憶部に記憶する判定情報記憶ステップと、撮像部切替制御部が、該判定情報記憶部からの判定情報に基づいて２Ｄ撮影時に使用する撮像部を前記主撮像部として決定する撮像部切替制御ステップとを有する請求項１４に記載の多眼撮像方法。
【請求項１６】
前記判定情報算出ステップは、前記画質情報記憶部からの各画像データの出力値から前記画質判定情報としてＳＮ比を算出する請求項１５に記載の多眼撮像方法。
【請求項１７】
前記判定情報算出ステップは、前記画質情報記憶部からの各画像データの出力値から前記画質判定情報としてシェーディング特性を算出する請求項１５に記載の多眼撮像方法。
【請求項１８】
前記判定情報算出ステップは、前記画質情報記憶部からの各画像データの出力値から前記画質判定情報として色シェーディング特性を算出する請求項１５に記載の多眼撮像方法。
【請求項１９】
前記画質情報記憶ステップは、前記少なくとも二つの撮像部のそれぞれに、輝度が一様な被写体が撮影された該少なくとも二つの撮像部からの各画像データを記憶する請求項１５に記載の多眼撮像方法。
【請求項２０】
前記画質情報記憶ステップは、前記少なくとも二つの撮像部のそれぞれに、輝度が一様で無彩色な被写体が撮影された該少なくとも二つの撮像部からの各画像データの少なくとも２色以上のカラー信号の比を記憶する請求項１５に記載の多眼撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、立体視を含む動画や静止画の映像・画像を生成可能とする多眼撮像装置および多眼撮像方法、この多眼撮像装置を撮像部に用いた例えばデジタルカメラやカメラ付き携帯電話装置などの携帯情報端末装置に関する。
【背景技術】
【０００２】
この種の従来の多眼撮像装置は、特に、二つ以上の光学系から取得される画像信号を合成して３Ｄ画像として撮像可能とするデジタルカメラなどに用いられ、この多眼撮像装置を撮像部に用いたカメラ付き携帯電話装置などの撮影機能付き携帯情報端末装置などに用いられる。この場合、「デジタルカメラ」とは、静止画を撮像するデジタルスチルカメラと、静止画および動画を撮像するデジタルビデオカメラを含むものとする。
【０００３】
複数の撮像部を持つ多眼撮像装置として、例えば３Ｄ（３次元）撮影やパノラマ撮影が可能な種々の多眼撮像装置が提案されている。このような従来の多眼撮像装置では、同一の複数の撮像部が左右に並んで配設され、各撮像部において同時に取得された複数の画像が３Ｄ合成処理されて立体視が可能な立体視画像やパノラマ画像が生成されている。
【０００４】
特許文献１には、３Ｄ（３次元）撮影用に二つの撮像光学系を備えた従来の一体型の複眼画像処理装置が開示されている。このように、３Ｄ（３次元）撮影が可能な従来の複眼画像処理装置において、通常の２Ｄ（２次元）撮影をする場合は、二つの撮像部のうち、予め決められた主撮像部のみを動作させて用いている。
【０００５】
３Ｄ（３次元）撮影が可能な従来の多眼撮像装置を撮像部に用いた従来の携帯情報端末装置において、この通常の２Ｄ（２次元）撮影時に予め決められた主撮像部のみを動作させる場合について図１０を用いて説明する。
【０００６】
図１０は、従来の多眼撮像装置を撮像部に用いた従来の携帯情報端末装置の要部構成例を示すブロック図である。
【０００７】
図１０において、従来の携帯情報端末装置１００は、光学レンズ、撮像素子およびＣＤＳ／ＡＧＣ／ＡＤＣなどが設けられ、２Ｄ（２次元）または３Ｄ（３次元）撮影を行う主撮像部１０１と、光学レンズ、撮像素子およびＣＤＳ／ＡＧＣ／ＡＤＣなどが設けられ、３Ｄ（３次元）撮影を行う副撮像部１０２と、３Ｄの場合には主撮像部１０１と副撮像部１０２からの左右の各画像信号が入力されてフレーム毎に３Ｄ合成されるかまたは、２Ｄの場合にフレーム毎に画像データを一時記憶するメモリ部１０３と、メモリ部１０３からの画像信号に対して所定の信号処理を行う信号処理部１０４と、信号処理部１０４からの画像信号に基づいて表示画面上に表示を行う表示装置１０５と、、副撮像部１０２に対して光学レンズを自動焦点駆動すると共に、撮像素子を駆動して撮像信号を読み出すレンズ駆動／撮像素子駆動部１０６と、主撮像部１０１に対して光学レンズを自動焦点駆動すると共に、撮像素子を駆動して撮像信号を読み出すレンズ駆動／撮像素子駆動部１０７と、信号処理部１０４からの画像信号を用いてレンズ駆動／撮像素子駆動部１０６、１０７の駆動を制御するシステムコントロール部１０８とを備えている。なお、１０９は側距装置であり、１１０は輻輳角制御機構である。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特開平１０−３２８４２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００９】
上記従来の構成では、３Ｄ（３次元）撮影用に二つの撮像部１０１、１０２が用意されている。これを２Ｄ（２次元）撮影に用いる場合には、二つの撮像部１０１、１０２のうちのいずれかの例えば主撮像部１０１に定めてその主撮像部１０１を用いている。その主撮像部１０１が予め決定されていると、製造ばらつきなどにより、主撮像部１０１に比べて副撮像部１０２の方が画質が良い場合であっても、予め決定されている主撮像部１０１でしか２Ｄ撮影をすることができないという問題を有していた。
【００１０】
本発明は、上記従来の問題を解決するもので、一方の撮像部に比べて他方の撮像部の方が画質が良い場合に他方の撮像部を主撮像部として決定することにより、より画質の良い画像をより確実に得ることができる多眼撮像装置および多眼撮像方法、この多眼撮像装置を撮像部に用いた例えばデジタルカメラやカメラ付き携帯電話装置などの携帯情報端末装置を提供することを目的とする。
【課題を解決するための手段】
【００１１】
本発明の多眼撮像装置は、３Ｄ撮影用に少なくとも二つの撮像部が設けられ、２Ｄ撮影の場合に、該少なくとも二つの撮像部のいずれかを主撮像部と定めて用いる多眼撮像装置の内部および外部の少なくともいずれかに、該少なくとも二つの撮像部からの各画像データに基づいて画質判定情報を求め、該画質判定情報に基づいて画質が最もよい撮像部を該主撮像部として選択する制御部を有するものであり、そのことにより上記目的が達成される。
【００１２】
また、好ましくは、本発明の多眼撮像装置における制御部は、前記少なくとも二つの撮像部からの各画像データを記憶する画質情報記憶部と、該画質情報記憶部からの各画像データに基づいて画質判定情報を算出する判定情報算出部と、該判定情報算出部で算出された画質判定情報を記憶する判定情報記憶部と、該判定情報記憶部からの判定情報に基づいて２Ｄ撮影時に使用する撮像部を前記主撮像部として決定する撮像部切替制御部とを有する。
【００１３】
さらに、好ましくは、本発明の多眼撮像装置における判定情報算出部は、前記画質情報記憶部からの各画像データの出力値から前記画質判定情報としてＳＮ比を算出する。
【００１４】
さらに、好ましくは、本発明の多眼撮像装置における判定情報算出部は、前記画質情報記憶部からの各画像データの出力値から前記画質判定情報としてシェーディング特性を算出する。
【００１５】
さらに、好ましくは、本発明の多眼撮像装置における判定情報算出部は、前記画質情報記憶部からの各画像データの出力値から前記画質判定情報として色シェーディング特性を算出する。
【００１６】
さらに、好ましくは、本発明の多眼撮像装置における画質情報記憶部は、前記少なくとも二つの撮像部のそれぞれに、輝度が一様な被写体が撮影された該少なくとも二つの撮像部からの各画像データを記憶する。
【００１７】
さらに、好ましくは、本発明の多眼撮像装置における画質情報記憶部は、前記少なくとも二つの撮像部のそれぞれに、輝度が一様な被写体が撮影された該少なくとも二つの撮像部からの各画像データの少なくとも２色以上のカラー信号の比を記憶する。
【００１８】
さらに、好ましくは、本発明の多眼撮像装置における撮像部切替制御部は、２Ｄ撮影時に、前記二つの撮像部のいずれを用いて撮影するかを、ユーザが外部からした選択指令に基づいて選択制御する機能を更に有する。
【００１９】
さらに、好ましくは、本発明の多眼撮像装置における二つの撮像部からの各画像データは、全有効画素領域、単一の一部有効画素領域および複数の一部有効画素領域のうちのいずれかの領域からの各画像データである。
【００２０】
本発明の携帯情報端末装置は、本発明の上記多眼撮像装置を撮像部に用いたものであり、そのことにより上記目的が達成される。
【００２１】
また、好ましくは、本発明の携帯情報端末装置において、前記少なくとも二つの撮像部の少なくともいずれかからの画像信号を表示用に所定の信号処理をした後の画像データに基づいて表示画面上に表示を行う表示装置を有する。
【００２２】
さらに、好ましくは、本発明の携帯情報端末装置において、前記少なくとも二つの撮像部の少なくともいずれかからの画像信号を記録用に所定の信号処理した後の画像データを記録可能とするメモリ部を有する。
【００２３】
さらに、好ましくは、本発明の携帯情報端末装置において、前記少なくとも二つの撮像部の少なくともいずれかからの画像信号を通信用に所定の信号処理をした後の画像データを通信処理可能とする通信部を有する。
【００２４】
本発明の多眼撮像方法は、３Ｄ撮影用の少なくとも二つの撮像部を用いて２Ｄ撮影を行う場合に、該少なくとも二つの撮像部のいずれかを主撮像部として用いる多眼撮像方法において、制御部が、該少なくとも二つの撮像部からの各画像データに基づいて画質判定情報を求め、該画質判定情報に基づいて画質が最も良い撮像部を該主撮像部として選択する制御ステップを有するであり、そのことにより上記目的が達成される。
【００２５】
また、好ましくは、本発明の多眼撮像方法における制御ステップは、前記少なくとも二つの撮像部からの各画像データを画質情報記憶部に記憶する画質情報記憶ステップと、判定情報算出部が、該画質情報記憶部からの各画像データに基づいて画質判定情報を算出する判定情報算出ステップと、該判定情報算出ステップで算出された画質判定情報を判定情報記憶部に記憶する判定情報記憶ステップと、撮像部切替制御部が、該判定情報記憶部からの判定情報に基づいて２Ｄ撮影時に使用する撮像部を前記主撮像部として決定する撮像部切替制御ステップとを有する。
【００２６】
さらに、好ましくは、本発明の多眼撮像方法における判定情報算出ステップは、前記画質情報記憶部からの各画像データの出力値から前記画質判定情報としてＳＮ比を算出する。
【００２７】
さらに、好ましくは、本発明の多眼撮像方法における判定情報算出ステップは、前記画質情報記憶部からの各画像データの出力値から前記画質判定情報としてシェーディング特性を算出する。
【００２８】
さらに、好ましくは、本発明の多眼撮像方法における判定情報算出ステップは、前記画質情報記憶部からの各画像データの出力値から前記画質判定情報として色シェーディング特性を算出する。
【００２９】
さらに、好ましくは、本発明の多眼撮像方法における画質情報記憶ステップは、前記少なくとも二つの撮像部のそれぞれに、輝度が一様な被写体が撮影された該少なくとも二つの撮像部からの各画像データを記憶する。
【００３０】
さらに、好ましくは、本発明の多眼撮像方法における画質情報記憶ステップは、前記少なくとも二つの撮像部のそれぞれに、輝度が一様で無彩色な被写体が撮影された該少なくとも二つの撮像部からの各画像データの少なくとも２色以上のカラー信号の比を記憶する。
【００３１】
上記構成により、以下、本発明の作用を説明する。
【００３２】
本発明においては、３Ｄ撮影用に少なくとも二つの撮像部が設けられ、２Ｄ撮影の場合に、少なくとも二つの撮像部のいずれかを主撮像部と定めて用いる多眼撮像装置において、少なくとも二つの撮像部からの各画像信号に基づいて画質判定情報を求め、画質判定情報に基づいて画質が最もよい撮像部を主撮像部として選択する制御部を有する。
【００３３】
これによって、一方の撮像部に比べて他方の撮像部の方が画質が良い場合に他方の撮像部を主撮像部として決定することにより、より画質の良い画像をより確実に得ることが可能となる。
【発明の効果】
【００３４】
以上により、本発明によれば、一方の撮像部に比べて他方の撮像部の方が画質が良い場合に他方の撮像部を主撮像部として決定することにより、より画質の良い画像をより確実に得ることができる。
【図面の簡単な説明】
【００３５】
【図１】本発明の実施形態１における多眼撮像装置を撮像部に用いた携帯情報端末装置の要部構成例を示すブロック図である。
【図２】図１の携帯情報端末装置における撮像部切替制御動作を説明するためのフローチャートである。
【図３】本発明の実施形態２における多眼撮像装置を撮像部に用いた携帯情報端末装置の要部構成例を示すブロック図である。
【図４】図３の携帯情報端末装置における撮像部切り替え制御動作を説明するためのフローチャートである。
【図５】画像データ位置の一例を示す撮像領域の平面図である。
【図６】本発明の実施形態３における多眼撮像装置を撮像部に用いた携帯情報端末装置の要部構成例を示すブロック図である。
【図７】図６の携帯情報端末装置における撮像部切替制御動作を説明するためのフローチャートである。
【図８】画像データ位置の他の一例を示す撮像領域の平面図である。
【図９】本発明の実施形態４における多眼撮像装置を撮像部に用いた携帯情報端末装置の要部構成例を示すブロック図である。
【図１０】従来の多眼撮像装置を撮像部に用いた従来の携帯情報端末装置の要部構成例を示すブロック図である。
【発明を実施するための形態】
【００３６】
以下に、本発明の多眼撮像装置を撮像部に用いた例えばデジタルカメラやカメラ付き携帯電話装置などの携帯情報端末装置の実施形態１〜４について図面を参照しながら詳細に説明する。
【００３７】
（実施形態１）
図１は、本発明の実施形態１における多眼撮像装置を撮像部に用いた携帯情報端末装置の要部構成例を示すブロック図である。
【００３８】
図１において、本発明の多眼撮像装置２０を撮像部に用いた携帯情報端末装置１は、３Ｄ撮影用に少なくとも二つの撮像部として第１撮像部２および第２撮像部３が設けられ、２Ｄ撮影の場合に、少なくとも二つの撮像部で画質が良い方を主撮像部と定めて用いるようになっている。
【００３９】
この携帯情報端末装置１は、光学レンズ、赤外線カットフィルタ、マイクロレンズ、撮像素子およびＣＤＳ／ＡＧＣ／ＡＤＣなどが設けられ、２Ｄ（２次元）および３Ｄ（３次元）のうちの少なくとも３Ｄ撮影を行う第１撮像部２と、光学レンズ、赤外線カットフィルタ、マイクロレンズ、撮像素子およびＣＤＳ／ＡＧＣ／ＡＤＣなどが設けられ、２Ｄ（２次元）および３Ｄ（３次元）のうちの少なくとも３Ｄ撮影を行う第２撮像部３と、第１撮像部２および第２撮像部３からの左右の各画像信号が入力されてフレーム毎に３Ｄ合成されるかまたは、第１撮像部２および第２撮像部３のいずれかからの２Ｄ画像信号が入力されて一時記憶されるメモリ部４と、メモリ部４からの各画像信号に対して所定の信号処理を行う信号処理部５と、信号処理部５からの画像信号に基づいて表示画面上に表示を行う表示装置６と、第２撮像部３に対して光学レンズをコントラストＡＦ方式などで自動焦点駆動すると共に、撮像素子を駆動して撮像信号を読み出すレンズ駆動／撮像素子駆動部７と、第１撮像部２に対して光学レンズをコントラストＡＦ方式などで自動焦点駆動すると共に、撮像素子を駆動して撮像信号を読み出すレンズ駆動／撮像素子駆動部８と、信号処理部５からの画像信号を用いてレンズ駆動／撮像素子駆動部７、８の駆動を制御するシステムコントロール部９と、第１撮像部２および第２撮像部３の各画像信号から、画質判定情報としてＳＮ比を求めて画質が良い方の撮像部を選択する制御部１０と、信号処理部５からの画像信号を通信用に所定の信号処理をした後に通信処理可能とする送受信装置などの通信部１１と、信号処理部５からの画像信号を記録用に所定の信号処理した後にデータ記録可能とする記録メディアなどのメモリ部１２（記憶部）と、システムコントロール部７に対して、２Ｄ撮影や３Ｄ撮影などの各モードの入力指令を行うための操作部１３とを備えている。
【００４０】
これらの第１撮像部２、第２撮像部３、メモリ部４、信号処理部５、レンズ駆動／撮像素子駆動部７、８、システムコントロール部９、制御部１０および操作部１３により多眼撮像装置２０が構成されている。これに表示装置６およびメモリ部１２が加わって例えばデジタルカメラなどの携帯情報端末装置１が構成される。また、さらに通信部１１が加わって例えばカメラ付き携帯電話装置などの別の携帯情報端末装置１が構成される。ここでは、携帯情報端末装置１として、カメラ付き携帯電話装置を示している。要するに、携帯情報端末装置１は、表示装置６、通信部１１およびメモリ部１２のうちの少なくともいずれかを有していればよい。
【００４１】
制御部１０は、第１撮像部２および第２撮像部３でそれぞれ撮影した各撮影画像データ（複数の画素データ）を記憶する画素データ記憶部などの画質情報記憶部１０ａと、画質情報記憶部１０ａに記憶した各撮影画像データから画質判定情報としてのＳＮ比を計算するための判定情報算出部１０ｂと、判定情報算出部１０ｂで計算した画質判定情報としてのＳＮ比を記憶する判定情報記憶部１０ｃと、判定情報記憶部１０ｃで記憶した画質判定情報としてのＳＮ比に基づいて、第１撮像部２および第２撮像部３のうちのどの撮像部を主撮像部にするかを決定する撮像部切替制御部１０ｄとを有し、第１撮像部２および第２撮像部３の各撮影画像データ（複数の画素データ）から、画質判定情報としてＳＮ比を求めて、ＳＮ比が大きい方、つまり画質が良い撮像部を２Ｄ撮影用に主撮像部として選択するように制御している。
【００４２】
操作部１３は、筐体の表面に各モード操作用の入力ボタンが設けられていてもよいし、表示装置６の表示画面がタッチパネルで構成されて各モード入力エリアが設けられていてもよい。これらの各モードの入力ボタンや入力エリアを用いて各モード入力を行うことができる。
【００４３】
画質情報記憶装置１０ａは、画質判定情報としてのＳＮ比を算出するための、第１撮像部２および第２撮像部３においてそれぞれの全有効画素における各撮影画像データ（複数の画素データ）のＲＧＢデータを製造工程で予め記憶する。
【００４４】
判定情報算出部１０ｂは、画質情報記憶装置１０ａで記憶した各撮影画像データ（複数の画素データ）から、画像データの平均値を標準偏差で割った値に対数を取ってＳＮ比を算出し、判定情報算出部１０ｂで算出した画質判定情報として各撮像部２，３の各ＳＮ比を判定情報記憶部１０ｃに記憶する。
【００４５】
撮像部切り替え制御部１０ｄは、判定情報算出部１０ｂで算出された各撮像部２，３の画質判定情報である各ＳＮ比を比較し、判定情報値である各ＳＮ比がより高い撮像部を画質の良い主撮像部（第１撮像部２または第２撮像部３）として決定し、この決定した主撮像部を単眼モード時（２Ｄ撮影時）に使用するように制御が為される。
【００４６】
上記構成により、以下、その動作について説明する。
【００４７】
図２は、図１の携帯情報端末装置における撮像部切替制御動作を説明するためのフローチャートである。
【００４８】
図２に示すように、まず、ステップＳ１において、製造工程または出荷検査工程で明るさ（または輝度）と色が一様な被写体、例えば全面真っ白な被写体を第１撮像部２および第２撮像部３で同時に撮影する。その後、第１撮像部２および第２撮像部３で撮影した各撮影画像データ（複数の画素データ）から全有効画素分（１フレーム）の画像データを画質情報記録部１０ａに記録する。
【００４９】
次に、ステップＳ２において画質情報記録部１０ａに記録した各撮影画像データから、判定情報算出部１０ｂがＳＮ比を算出する。続いて、ステップＳ３において、ステップＳ２で算出したＳＮ比を画質判定情報とし、この画質判定情報であるＳＮ比を判定情報記憶装置１０ｃに記録する。σＳを画像データの平均値、σＮを標準偏差とすると、ＳＮ比は以下の式で算出できる。このＳＮ比は大きければ大きいほどノイズがなく画質が良いことになる。
【００５０】
2012227846.tif 000003
さらに、ステップＳ４において、ステップＳ３で記憶した画質判定情報であるＳＮ比に基づいて、第１撮像部２および第２撮像部３のうちのどの撮像部を主撮像部にするかを決定する。つまり、切り替え制御部１０ｄが、第１撮像部２のＳＮ比と第２撮像部３のＳＮ比とを比較し、単眼撮影モード時（２Ｄ撮影時）に判定情報であるＳＮ比が一番大きい値を持つ第１撮像部２および第２撮像部３のいずれかの撮像部を主撮像部として使用することにより撮像部切替処理を行う。
【００５１】
以上により、本実施形態１によれば、３Ｄ撮影用に少なくとも二つの撮像部が設けられ、２Ｄ撮影の場合に、少なくとも二つの撮像部２，３のいずれかを主撮像部と定めて用いる多眼撮像装置２０において、少なくとも二つの撮像部２，３からの各画像信号に基づいて画質判定情報を求め、画質判定情報に基づいて画質が最もよい撮像部を主撮像部として選択する制御部１０を有している。
【００５２】
即ち、複数ある撮像部、例えば第１撮像部２および第２撮像部３から、単眼カメラ動作モード（２Ｄ撮影時）で使用する主撮像部を選択する機能を有する多眼撮像装置２０であって、第１撮像部２および第２撮像部３と、各撮像部２，３が持つ画質情報である各画像データを記憶する画質情報記憶部１０ａと、画質情報である各画像データから各撮像部２，３に対する画質判定情報であるＳＮ比を算出する判定情報計算部１０ｂと、この判定情報計算部１０ｂから算出された画質判定情報であるＳＮ比を記憶する判定情報記憶部１０ｃと、画質判定情報であるＳＮ比に基づいて単眼撮影時（２Ｄ撮影時）に使用する主撮像部を決定する撮像部切替制御部１０ｄとを備えている。
【００５３】
これによって、各撮像部２，３により各撮影画像データが得られ、各画像データから判定情報計算部１０ｂによって各撮影部２，３に対する画質判定情報であるＳＮ比が算出される。次に、判定情報記憶部１０ｃによって画質判定情報であるＳＮ比が記憶される。その後、記憶された画質判定情報であるＳＮ比に基づいて撮像部切替制御部１０ｄによって単眼カメラ動作モード時（２Ｄ撮影時）に適切な撮像部切替えが行われる。
【００５４】
このように、製造工程によって各撮像部２，３間で画質に差がある場合であっても、各撮像部２，３に対して画質情報である各画像データが記憶され、この画質情報から判定情報であるＳＮ比が算出され、この判定情報であるＳＮ比に基づいて撮像部切り替えが行われるため、各撮像部２，３の画質を比較してよい方を主撮像部として、単眼撮影時（２Ｄ撮影時）に、ノイズがより少ない高画質の画像データを得ることができる。したがって、各撮像部２，３のばらつきによるノイズなどの画質の劣化を防ぐことができる。
【００５５】
なお、本実施形態１では、第１撮像部２および第２撮像部３の各全有効画素領域におけるＲＧＢデータを製造工程で画質情報記憶部１０ａに予め記憶し、判定情報算出部１０ｂが、画質情報記憶部１０ａに記憶した全有効画素の各画像データから画質判定情報としてＳＮ比を計算するように構成したが、全有効画素における各画像データに限らず、第１撮像部２および第２撮像部３の各全有効画素領域のうちの、第１撮像部２および第２撮像部３で同一の中央領域であってもよい。この場合、第１撮像部２および第２撮像部３の各同一中央領域における各画像データのＲＧＢデータを製造工程で画質情報記憶部１０ａに予め記憶し、判定情報算出部１０ｂが、画質情報記憶部１０ａに記憶した同一中央領域の各画像データから画質判定情報としてＳＮ比を計算するようにしてもよい。この同一中央領域は、第１撮像部２および第２撮像部３で同一位置であるが、極端な話、隣接４画素または隣接９画素程度の少ない各画像データから画質判定情報としてＳＮ比を計算するようにしてもよい。要するに、この場合、二つの撮像部２，３からの各画像データは、全有効画素領域、単一の一部有効画素領域および複数の一部有効画素領域からの各画像データである。
【００５６】
なお、本実施形態１では、第１撮像部２および第２撮像部３の各画像データから、画質判定情報としてＳＮ比を求めて画質が良い方の撮像部を主撮像部として選択し、２Ｄ撮影時にその選択した画質が良い方の撮像部を用いて撮影するように制御する制御部１０を設けたが、これに限らず、解像度検査用のチャート図等を第１撮像部２および第２撮像部３により同時に撮影し、第１撮像部２および第２撮像部３からの各画像データから、何処まで細かく見えるかを解像度検査をして画質が良い方の撮像部を主撮像部として選択し、２Ｄ撮影時にその選択した画質が良い方の撮像部を用いて撮影するように制御する制御部を設けてもよい。
【００５７】
（実施形態２）
上記実施形態１では、画質判定情報としてＳＮ比を用いて画質が良い方の撮像部を主撮像部として選択する場合について説明したが、本実施形態２では、画質判定情報として、画面中央と画面周辺部との明るさ（または輝度）の違いを示すシェーディング特性を用いてその違いがより小さい、つまり画質が良い方の撮像部を主撮像部として選択する場合について説明する。
【００５８】
図３は、本発明の実施形態２における多眼撮像装置を撮像部に用いた携帯情報端末装置の要部構成例を示すブロック図である。なお、図３では、図１の構成部材と同一の作用効果を奏する構成部材には同一の部材番号を付して説明する。
【００５９】
図３において、本発明の多眼撮像装置２０Ａを撮像部に用いた携帯情報端末装置１Ａで、  上記実施形態１の場合と異なるのは、上記実施形態１の制御部１０に代えて、第１撮像部２および第２撮像部３の画面中央と画面周辺部との各画像信号から、画質判定情報として、画面中央と画面周辺部との明るさ（または輝度）の差を示すシェーディング特性を求めて画質が良い方の撮像部を選択する制御部１０Ａを備えたことである。
【００６０】
これらの第１撮像部２、第２撮像部３、メモリ部４、信号処理部５、レンズ駆動／撮像素子駆動部７、８、システムコントロール部９、制御部１０Ａおよび操作部１３により多眼撮像装置２０Ａが構成されている。これに表示装置６およびメモリ部１２が加わって例えばデジタルカメラなどの携帯情報端末装置１Ａが構成される。また、さらに、通信部１１が加わって例えばカメラ付き携帯電話装置などの別の携帯情報端末装置１Ａが構成される。ここでは、携帯情報端末装置１Ａとして、カメラ付き携帯電話装置を示している。要するに、携帯情報端末装置１Ａは、表示装置６、通信部１１およびメモリ部１２のうちの少なくともいずれかを有していればよい。
【００６１】
制御部１０Ａは、第１撮像部２および第２撮像部３でそれぞれ撮影した各撮影画像データから、画面中央と画面周辺部の複数の画素からなる各撮影画像データを記憶する画素データ記憶部などの画質情報記憶部１０ａ１と、画質情報記憶部１０ａに記憶した画面中央と画面周辺部の各撮影画像データから、画質判定情報として、画面中央と画面周辺部との明るさ（または輝度）の差を示すシェーディング特性を計算するための判定情報算出部１０ｂ１と、判定情報算出部１０ｂ１で計算した画質判定情報としての明るさ（または輝度）のシェーディング特性を記憶する判定情報記憶部１０ｃ１と、判定情報記憶部１０ｃ１で記憶した画質判定情報としてのシェーディング特性に基づいて、第１撮像部２および第２撮像部３のうちのどの撮像部を主撮像部にするかを決定する撮像部切替制御部１０ｄ１とを有し、第１撮像部２および第２撮像部３の画面中央と画面周辺部の各撮影画像データ（複数の画素データ）から、画質判定情報として、明るさ（または輝度）のシェーディング特性を求めて、明るさ（または輝度）のシェーディング特性が小さい方、つまり画質の良い撮像部を２Ｄ撮影用に主撮像部として選択するように制御している。
【００６２】
画質情報記憶装置１０ａ１は、画質判定情報として、明るさ（または輝度）のシェーディング特性を算出するための、第１撮像部２および第２撮像部３においてそれぞれの全有効画素のうちの画面中央と画面周辺部とにおける複数の画素からなる各撮影画像データのカラー信号の平均値を製造工程で予め記憶しておく。
【００６３】
判定情報算出部１０ｂ１は、画質情報記憶装置１０ａ１で記憶した画面中央と画面周辺部の各平均値から比（画面中央／画面周辺）を取って、明るさ（または輝度）の違いを示すシェーディング特性を計算し、判定情報算出部１０ｂ１で算出した画質判定情報として各撮像部２，３のシェーディング特性を画質判定情報として判定情報記憶部１０ｃ１に記憶する。
【００６４】
撮像部切り替え制御部１０ｄ１は、判定情報算出部１０ｂ１で算出された各撮像部２，３の各シェーディング特性を比較し、判定情報値である各シェーディング特性がより小さい、つまり各平均値の比が小さい撮像部を画質の良い主撮像部（第１撮像部２または第２撮像部３）として決定し、この決定した主撮像部を単眼モード時（２Ｄ撮影時）に使用するように制御が為される。
【００６５】
この場合、画面中央と画面周辺部の各シェーディング特性は、画面中央の各画像データの平均値と、画面周辺部の各画像データの平均値との差を取ってその差が最も小さい方の撮像部を画質の良い主撮像部（第１撮像部２または第２撮像部３）として決定してもよい。また、画面中央と画面周辺部の各シェーディング特性は、画面中央の画像データの明るさ（または輝度値）と、これに対応した画面周辺部の画像データの明るさ（または輝度値）との差をカラー信号別に取り、その差が最も悪い値同士を比較して、最も小さい値の方の撮像部を画質の良い主撮像部（第１撮像部２または第２撮像部３）として決定してもよい。
【００６６】
上記構成により、以下、その動作について説明する。
【００６７】
図４は、図３の携帯情報端末装置１Ａにおける撮像部切替制御動作を説明するためのフローチャートである。
【００６８】
図４に示すように、まず、ステップＳ１１において、製造工程または製品出荷検査工程で明るさ（または輝度）と色が一様な被写体、例えば全面真っ白な被写体を第１撮像部２および第２撮像部３で同時に撮影する。その後、第１撮像部２および第２撮像部３で撮影した各撮影画像データ（複数の画素データ）のうち、図５のような撮影画面全体の画面中心領域Ａと、周辺角領域Ｂについて、定点毎における各画素の画像データの出力値を求め、この定点毎の画像データの出力値を画質情報記録部１０ａ１に記録する。
【００６９】
次に、ステップＳ１２において画質情報記録部１０ａ１に記録した各撮影画像データから、判定情報算出部１０ｂ１が画面中心領域Ａと周辺角領域Ｂとの明るさ（または輝度）の差を示すシェーディング特性を算出する。続いて、ステップＳ１３において、ステップＳ１２で算出した明るさ（または輝度）のシェーディング特性を画質判定情報とし、この画質判定情報である明るさ（または輝度）のシェーディング特性を判定情報記憶装置１０ｃ１に記録する。
【００７０】
画面中心領域Ａの各中心画素からの画像データの平均値をＲｃ、Ｇｒｃ、Ｂｃ、Ｇｂｃ、周辺角領域Ｂの周辺画素からの画像データの平均値をＲｐ、Ｇｒｐ、Ｂｐ、Ｇｂｐ、画面中心領域Ａの各中心画素からの画像データの平均値をＡｖｅ＿ｃ、周辺角領域Ｂの周辺画素からの画像データの平均値をＡｖｅ＿ｐとし、下記の式から明るさ（または輝度）のシェーディング特性Ｓ１を算出する。
Ａｖｅ＿ｃ  ＝  Ａｖｅ（Ｇｒｃ，  Ｒｃ，  Ｂｃ，  Ｇｂｃ）
Ａｖｅ＿ｐ  ＝  Ａｖｅ（Ｇｒｐ，  Ｒｐ，  Ｂｐ，  Ｇｂｐ）
Ｓ１  ＝  Ａｖｅ＿ｃ  ／  Ａｖｅ＿ｐ
なお、各シェーディング特性は、画面中央の各画像データの平均値と、画面周辺部の各画像データの平均値との差をシェーディング特性Ｓ１とする場合は以下の式で算出する。
Ｓ１  ＝  Ａｖｅ＿ｃ  −  Ａｖｅ＿ｐ
また、画面中央の画像データの明るさ（または輝度値）と、これに対応した画面周辺部の画像データの明るさ（または輝度値）との差をカラー信号別に取り、その差が最も悪い値をシェーディング特性Ｓ１とする場合は、以下の式で算出する。
Ｓ１  ＝  Ｍａｘ（Ｇｒｃ−Ｇｒｐ，Ｒｃ−Ｒｐ，Ｂｃ−Ｂｐ，Ｇｂｃ−Ｇｂｐ）
ただし、Ａｖｅ（）は平均値、Ｍａｘ（）は最大値（最も悪い値）を示す。
その後、ステップＳ１４において、上記のように算出された判定情報であるシェーディング特性Ｓ１を基に、撮像部切替制御部１０ｄ１によって、各撮像部２，３の判定情報であるシェーディング特性Ｓ１を比較し、単眼撮影モード（２Ｄ撮影時）には判定情報であるシェーディング特性Ｓ１が一番小さい値を持つ画質の良い撮像部を主撮像部として選択するように撮像部切り替え処理が行われる。
【００７１】
以上により、本実施形態２によれば、判定情報算出部１０ｂ１が、画質情報記憶部１０ａ１からの各画素データの出力値から画質判定情報として明るさ（輝度）のシェーディング特性を算出し、この算出した各シェーディング特性を比較してその値が最も小さい撮像部を、画質が良い主撮像部として決定することにより、より画質の良い画像をより確実に得ることができる。したがって、各撮像部２，３のばらつきによるシェーディングなどの画質の劣化を防ぐことができる。
【００７２】
（実施形態３）
上記実施形態２では、画質判定情報として、画面中央と画面周辺部との明るさ（輝度）の差を示すシェーディング特性を用いてその差が少ない、つまり画質が良い方の撮像部を主撮像部として選択する場合について説明したが、本実施形態３では、画質判定情報として、画面中央と画面周辺部とで各色毎の出力値の差（色のばらつき）を示す色シェーディング特性を用いてその各色毎の出力値の差（色のばらつき）が少ない、つまり画質が良い方の撮像部を主撮像部として選択する場合について説明する。
【００７３】
図６は、本発明の実施形態３における多眼撮像装置を撮像部に用いた携帯情報端末装置の要部構成例を示すブロック図である。なお、図６では、図１の構成部材と同一の作用効果を奏する構成部材には同一の部材番号を付して説明する。
【００７４】
図６において、本発明の多眼撮像装置２０Ｂを撮像部に用いた携帯情報端末装置１Ｂで、  上記実施形態２の場合と異なるのは、上記実施形態２の制御部１０Ａに代えて、第１撮像部２および第２撮像部３の画面中央と画面周辺部との各画像信号から、画質判定情報として、画面中央と画面周辺部との各色毎の出力値の差（色のばらつき）を示す色シェーディング特性を求めて画質が良い方の撮像部を選択する制御部１０Ｂを備えたことである。
【００７５】
これらの第１撮像部２、第２撮像部３、メモリ部４、信号処理部５、レンズ駆動／撮像素子駆動部７、８、システムコントロール部９、制御部１０Ｂおよび操作部１３により多眼撮像装置２０Ｂが構成されている。これに表示装置６およびメモリ部１２が加わって例えばデジタルカメラなどの携帯情報端末装置１Ｂが構成される。また、さらに、通信部１１が加わって例えばカメラ付き携帯電話装置などの別の携帯情報端末装置１Ｂが構成される。ここでは、携帯情報端末装置１Ｂとして、カメラ付き携帯電話装置を示している。要するに、携帯情報端末装置１Ｂは、表示装置６、通信部１１およびメモリ部１２のうちの少なくともいずれかを有していればよい。
【００７６】
制御部１０Ｂは、第１撮像部２および第２撮像部３でそれぞれ撮影した各撮影画像データ（複数の画素データ）から、画面中央と画面周辺部の各撮影画像データ（複数の画素データ）を記憶する画素データ記憶部などの画質情報記憶部１０ａ２と、画質情報記憶部１０ａに記憶した画面中央と画面周辺部の各撮影画像データから、画質判定情報として、画面中央と画面周辺部との各色毎の出力値の差（色のばらつき）を示す色シェーディング特性を計算するための判定情報算出部１０ｂ２と、判定情報算出部１０ｂ２で計算した画質判定情報としての各撮像部の色シェーディング特性を記憶する判定情報記憶部１０ｃ２と、判定情報記憶部１０ｃ２で記憶した画質判定情報としての色シェーディング特性に基づいて、第１撮像部２および第２撮像部３のうちのどの撮像部を主撮像部にするかを決定する撮像部切替制御部１０ｄ２とを有し、第１撮像部２および第２撮像部３の画面中央と画面周辺部の各撮影画像データ（複数の画素データ）から、画質判定情報として、各色毎の明るさの差として色シェーディング特性を求めて、色シェーディング特性が小さい方、つまり画質の良い撮像部を２Ｄ撮影用に主撮像部として選択するように制御している。
【００７７】
画質情報記憶装置１０ａ２は、画質判定情報として、各色毎の出力値の差（色のばらつき）のシェーディング特性を算出するための、第１撮像部２および第２撮像部３においてそれぞれの全有効画素（１フレーム）のうちの画面中央と画面周辺部とにおける各撮影画像データ（複数の画素データ）のＲＧＢデータの比（Ｒ／Ｇ，Ｂ／Ｇ）を製造工程で予め記憶しておく。
【００７８】
判定情報算出部１０ｂ２は、画質情報記憶装置１０ａ２で記憶した画面中央と画面周辺部の各撮影画像データ（複数の画素データ）から、画面中央の各画像データの明るさの平均値と、画面周辺部の各画像データの明るさの平均値との差を各色毎に取り、最も良い色と悪い色の値の差を色シェーディング特性として計算し、判定情報算出部１０ｂ２で算出した画質判定情報として各撮像部２，３の各色毎の出力値の差（色のばらつき）を示す色シェーディング特性を画質判定情報として判定情報記憶部１０ｃ２に記憶する。
【００７９】
撮像部切替制御部１０ｄ２は、判定情報算出部１０ｂ２で算出された各撮像部２，３の各色シェーディング特性を比較し、判定情報値である各色シェーディング特性がより小さい撮像部を画質の良い主撮像部（第１撮像部２または第２撮像部３）として決定し、この決定した主撮像部を単眼モード時（２Ｄ撮影時）に使用するように制御が為される。
【００８０】
この場合、画面の片側に色シェーディングが発生する可能性を考慮して、各色シェーディング特性は、各色毎に画面周辺部の画像データの出力値（またはレベル）と、対角線上のもう一方の画面周辺部の画像データの出力値（またはレベル）との差を取り、その差が最も悪い色の値を各撮像部の色シェーディング特性とし、色シェーディング特性がより小さい方の撮像部を画質の良い主撮像部（第１撮像部２または第２撮像部３）として決定してもよい。
【００８１】
上記構成により、以下、その動作について説明する。
【００８２】
図７は、図６の携帯情報端末装置１Ｂにおける撮像部切替制御動作を説明するためのフローチャートである。なお、図７では、図１の構成部材と同一の作用効果を奏する構成部材には同一の部材番号を付して説明する。
【００８３】
図７に示すように、まず、ステップＳ２１において、製造工程または製品出荷検査工程で明るさ（または輝度）が一様で無彩色な被写体を第１撮像部２および第２撮像部３で同時に撮影する。その後、第１撮像部２および第２撮像部３で撮影した各撮影画像データ（複数の画素データ）のうち、図８のような撮影画面全体の画面中心領域Ａの光学中心画素と、点対称位置にある周辺角領域Ｃの周辺画素について、定点毎における各画素の画像データの出力値を求め、この画像データの出力値を画質情報記録部１０ａ２に記録する。
【００８４】
次に、ステップＳ２２において、画質情報記録部１０ａ２に記録した画面中央と画面周辺部の各撮影画像データから、判定情報算出部１０ｂ２が、画面中央と画面周辺部とで各色毎の出力値（レベル）の差を示す色シェーディング特性を算出して画質判定情報とする。続いて、ステップＳ２３において、ステップＳ２２で算出した色シェーディング特性を画質判定情報とし、この画質判定情報である色シェーディング特性を判定情報記憶装置１０ｃ２に記録する。
【００８５】
画面中央（中心画素）の画像データの出力値をＲｃ、Ｇｒｃ、Ｂｃ、Ｇｂｃ、画面周辺部（周辺画素）の画像データの出力値をＲｐ１、Ｇｒｐ１、Ｂｐ１、Ｇｂｐ１、点対称位置の周辺画素の出力値をＲｐ２、Ｇｒｐ２、Ｂｐ２、Ｇｂｐ２とし、画素毎にＲとＢの比率Ｒｃ／Ｇｒｃ、Ｂｃ／Ｇｂｃ、Ｒｐ１／Ｇｒｐ１、Ｂｐ１／Ｇｂｐ１、Ｒｐ２／Ｇｒｐ２、Ｂｐ２／Ｇｂｐ２をそれぞれ算出する。
下記の式から各画素毎の色シェーディング特性Ｓ２を算出する。ただし、Ａｖｅ（）は平均値、Ｍａｘ（）は最大値（最も悪い値）、Ｍｉｎ（）は最小値（最も良い値）を示す。
【００８６】
ＡｖｅＲｐ１  ＝  Ａｖｅ（Ｒｐ１／Ｇｒｐ１）−Ａｖｅ（Ｒｃ／Ｇｒｃ）
ＡｖｅＲｐ２  ＝  Ａｖｅ（Ｒｐ２／Ｇｒｐ２）−Ａｖｅ（Ｒｃ／Ｇｒｃ）
ＡｖｅＢｐ１  ＝  Ａｖｅ（Ｂｐ１／Ｇｂｐ１）−Ａｖｅ（Ｂｃ／Ｇｂｃ）
ＡｖｅＢｐ２  ＝  Ａｖｅ（Ｂｐ２／Ｇｂｐ２）−Ａｖｅ（Ｂｃ／Ｇｂｃ）
Ｄｉｓ＿Ｐ１  ＝  Ｍａｘ（ＡｖｅＲｐ１，ＡｖｅＢｐ１）−  Ｍｉｎ（ＡｖｅＲｐ１，ＡｖｅＢｐ１）
Ｄｉｓ＿Ｐ２  ＝  Ｍａｘ（ＡｖｅＲｐ２，ＡｖｅＢｐ２）−  Ｍｉｎ（ＡｖｅＲｐ２，ＡｖｅＢｐ２）
Ｓ２  ＝  Ｍａｘ（Ｄｉｓ＿Ｐ１，Ｄｉｓ＿Ｐ２）
なお、画面周辺部の対角線上の２点の画像データの差を取り、その差が最も悪い色の値を色シェーディング特性Ｓ２とする場合は、以下の式で算出する。
【００８７】
Ｄｉｓ＿Ｒ  ＝  Ｍａｘ（ＡｖｅＲｐ１，ＡｖｅＲｐ２）−  Ｍｉｎ（ＡｖｅＲｐ１，ＡｖｅＲｐ２）
Ｄｉｓ＿Ｂ  ＝  Ｍａｘ（ＡｖｅＢｐ１，ＡｖｅＢｐ２）−  Ｍｉｎ（ＡｖｅＢｐ１，ＡｖｅＢｐ２）
Ｓ２  ＝  Ｍａｘ（Ｄｉｓ＿Ｒ，Ｄｉｓ＿Ｂ）
その後、ステップＳ２４において、上記によって算出された判定情報である色シェーディング特性Ｓ２を基に、撮像部切替制御部１０ｄ２によって、各撮像部２，３の判定情報である色シェーディング特性Ｓ２を比較し、単眼撮影モード（２Ｄ撮影時）には判定情報である色シェーディング特性Ｓ２が一番小さい値を持つ画質の良い撮像部を主撮像部として使用することにより撮像部切り替え処理が行われる。
【００８８】
以上により、本実施形態３によれば、判定情報算出部１０ｂ２が、画質情報記憶部１０ａ２からの各画素データの出力値から画質判定情報として各色毎の色シェーディング特性を算出し、この算出した各色シェーディング特性を比較して、その値が最も小さい撮像部を画質が良い主撮像部として決定することにより、より画質の良い画像をより確実に得ることができる。したがって、各撮像部２，３のばらつきによる色シェーディングなどの画質の劣化を防ぐことができる。
【００８９】
なお、上記実施形態１では、画質判定情報としてＳＮ比を用いて画質が良い方の撮像部を主撮像部として選択する場合について説明し、上記実施形態２では、画質判定情報として、画面中央と画面周辺部との明るさ（輝度）の差を示すシェーディング特性を用いてその差が少ない、つまり画質が良い方の撮像部を主撮像部として選択する場合について説明し、本実施形態３では、画質判定情報として、画面中央と画面周辺部とで各色毎の出力値（レベル）の差を示す色シェーディング特性を用いてその各色毎の出力値（レベル）の差が少ない、つまり画質が良い方の撮像部を主撮像部として選択する場合について説明したが、これらに限らず、画質判定情報として、ＳＮ比、解像度、シェーディング特性および色シェーディング特性のうちの少なくとも２項目を用いて画質が良い方の撮像部を主撮像部として選択する場合についても本発明を適用することができる。
【００９０】
（実施形態４）
上記実施形態１〜３では、製造時または製造後の出荷検査時などに、第１撮像部２および第２撮像部３のうち、画質判定情報を用いて画質が良い方の撮像部を主撮像部として選択する場合について説明したが、本実施形態４では、これに加えて、単眼撮影モード（２Ｄ撮影時）に第１撮像部２および第２撮像部３のいずれを用いて撮影するかをユーザが強制的に選択可能とするユーザ選択モードを有する場合について説明する。
【００９１】
図９は、本発明の実施形態４における多眼撮像装置を撮像部に用いた携帯情報端末装置の要部構成例を示すブロック図である。なお、図９では、図１の構成部材と同一の作用効果を奏する構成部材には同一の部材番号を付して説明する。
【００９２】
図９において、本発明の多眼撮像装置２０Ｃを撮像部に用いた携帯情報端末装置１Ｃで、  上記実施形態１の場合と異なるのは、上記実施形態１の制御部１０の撮像部切替制御部１０ｄの機能、即ち、判定情報算出部１０ｂで算出された各撮像部２，３の画質判定情報である各ＳＮ比を比較し、判定情報値である各ＳＮ比がより高い撮像部を画質の良い主撮像部（第１撮像部２または第２撮像部３）として決定し、この決定した主撮像部を単眼モード時（２Ｄ撮影時）に使用するように制御が為されるが、この機能に加えて、単眼撮影モード（２Ｄ撮影時）に第１撮像部２および第２撮像部３のいずれを用いて撮影するかをユーザが強制的に選択可能とするユーザ選択モードを有することである。このユーザ選択モードは、操作部１３Ｃからの操作入力によりシステムコントロール部９を介して制御部１０Ｃの撮像部切替制御部１０ｄ３を制御して、第１撮像部２および第２撮像部３のいずれかをユーザが強制的に選択可能とするモードである。
【００９３】
これらの第１撮像部２、第２撮像部３、メモリ部４、信号処理部５、レンズ駆動／撮像素子駆動部７、８、システムコントロール部９、制御部１０Ｃおよび操作部１３Ｃにより多眼撮像装置２０Ｃが構成されている。これに表示装置６およびメモリ部１２が加わって例えばデジタルカメラなどの携帯情報端末装置１Ｃが構成される。また、さらに通信部１１が加わって例えばカメラ付き携帯電話装置などの別の携帯情報端末装置１Ｃが構成される。ここでは、携帯情報端末装置１Ｃとして、カメラ付き携帯電話装置を示している。要するに、携帯情報端末装置１Ｃは、表示装置６、通信部１１およびメモリ部１２のうちの少なくともいずれかを有していればよい。
【００９４】
したがって、本実施形態４によれば、製造工程によって各撮像部２，３間で画質に差があっても、各撮像部２，３に対して画質情報である各画像データが記憶され、この画質情報から判定情報であるＳＮ比が算出され、この判定情報であるＳＮ比に基づいて撮像部切り替えが行われるため、各撮像部２，３の画質を比較して良い方を主撮像部として、単眼撮影時（２Ｄ撮影時）に、ノイズがより少ない高画質の画像データを得ることができる。これは上記実施形態１の効果と同様であるが、これに加えて、単眼撮影時（２Ｄ撮影時）に撮像部２，３のうちの画質の良い方を主撮像部として使用するうちに経年変化などで画質が悪くなった場合にも、ユーザが自らの意思で強制的に他の撮像部を選択することができて、別の撮像部に代えることで画質の劣化を解消することができる。また、撮影状況によって使用する判定情報を切り替えることによって（例えば暗時モードではノイズが目立つためＳＮ比、風景モードでは色を強めに出すため色シェーディングを判定情報に採用する等）、より適切な撮像部を選択し、高画質の画像データを得ることができる。
【００９５】
なお、本実施形態４では、このユーザ選択モードを、画質判定情報としてＳＮ比を求めた上記実施形態１に適用したが、これに限らず、このユーザ選択モードを、画質判定情報としてシェーディングを求めた上記実施形態２に適用してもよい。また同様に、このユーザ選択モードを、画質判定情報として色シェーディングを求めた上記実施形態３に適用してもよい。
【００９６】
なお、上記本実施形態１〜４では、画質情報と判定情報はデジタルカメラ内の各記憶部に記憶されている場合について説明したが、これに限らず、この画質情報をデジタルカメラ以外の場所（デジタルカメラ外の記憶装置）に予め記憶させておき、これを用いて画質の良い撮像部切替処理を行うように構成してもよい。要するに、３Ｄ撮影用に少なくとも二つの撮像部２，３が設けられ、２Ｄ撮影の場合に、少なくとも二つの撮像部２，３のいずれかを主撮像部と定めて用いる多眼撮像装置の内部および外部の少なくともいずれかに、少なくとも二つの撮像部２，３からの各画像データに基づいて画質判定情報を求め、画質判定情報に基づいて画質が最も良い撮像部を主撮像部として選択する制御部１０、１０Ａ〜１０Ｃのいずれかを有している。また、前述したが、解像度検査用のチャート図を第１撮像部２および第２撮像部３により同時に撮影し、第１撮像部２および第２撮像部３からの各画像データから、何処まで細かく見えるかを解像度検査する判定情報算出部、解像度検査結果を記憶する判定情報記憶部を多眼撮像装置の外部に設けて、多眼撮像装置の内部の撮像部切替制御部により、画質が良い方の撮像部を主撮像部として選択し、２Ｄ撮影時にその選択した画質が良い方の撮像部を用いて撮影するように制御する。
【００９７】
なお、上記本実施形態１〜４では、特に説明しなかったが、画質情報は輝度および色が一様な被写体を撮影して記憶されているが、判定情報の性質によって被写体や撮影条件を変更してもよい。
【００９８】
なお、上記本実施形態１〜４では、特に説明しなかったが、ＲＧＢ各色について画質情報を記憶し、判定情報を算出し、ＲＧＢ全ての色を判定対象に撮像部切替処理を行っているが、そのうち１色または２色のみ、例えばＲのみまたはＧのみまたはＲ，Ｂのみなどで判定してもよい。
【００９９】
なお、上記本実施形態１で最終的に説明し、更に説明するが、記憶する画質情報（各画像データ）は画面全体としているが、これに限らず、任意の限定された位置の画素データを記憶してもよい。要するに、二つの撮像部２，３からの各画像データは、全有効画素領域、単一の一部有効画素領域および複数の一部有効画素領域のいずれかの領域からの各画像データである。
【０１００】
なお、上記本実施形態２では、記憶する画質情報は図５のように限定した場所の画素領域における複数の画素データ（各画像データ）に設定しているが、これに限らず、全撮像領域（全画面）中の任意の位置（領域）の画素データ（各画像データ）を画質情報記憶部に記憶してもよい。
【０１０１】
なお、上記本実施形態３では、記憶する画質情報は図８のように対角線上の画素位置（２箇所）に設定しているが、これに限らず、撮影画像上で点対称になる任意の位置（領域）およびその領域内の複数の定点の画素データ（各画像データ）を画質情報記憶部に記憶してもよい。
【０１０２】
なお、上記本実施形態２、３では、記憶する画質情報は複数の画素の出力値を平均して判定情報を算出しているが、一または複数の一部有効画素領域の任意の数の画素データ（各画像データ）から判定情報を算出してそれを判定情報記憶部に記憶してもよい。
【０１０３】
なお、上記本実施形態２では、明るさ（または輝度）のシェーディング特性として画面中央と周辺領域の各画像データ（画素データ）の平均値の比を算出したが、これに限らず、別の式で明るさ（または輝度）のシェーディング特性を算出してもよい。
【０１０４】
なお、上記本実施形態３では、各色毎の色シェーディング特性として画面中央と周辺領域の各画像データ（画素データ）の平均値のばらつきから算出したが、これに限らず、別の式で色シェーディング特性を算出してもよい。
【０１０５】
なお、上記本実施形態１〜３では、上記各画像データ（画素データ）は、撮像素子からの撮像信号、撮像信号を信号処理した画像信号、輝度信号、ＲＧＢ信号、またはＲＧＢ以外の色信号でもかまわない。
【０１０６】
なお、上記本実施形態１〜４では、制御部１０、１０Ａ〜１０Ｃは、システムコントロール部９の外部に設けたが、これに限らず、制御部１０、１０Ａ〜１０Ｃをそれぞれ、システムコントロール部９の内部に設けてもよい。
【０１０７】
以上のように、本発明の好ましい実施形態１〜４を用いて本発明を例示してきたが、本発明は、この実施形態１〜４に限定して解釈されるべきものではない。本発明は、特許請求の範囲によってのみその範囲が解釈されるべきであることが理解される。当業者は、本発明の具体的な好ましい実施形態１〜４の記載から、本発明の記載および技術常識に基づいて等価な範囲を実施することができることが理解される。本明細書において引用した特許、特許出願および文献は、その内容自体が具体的に本明細書に記載されているのと同様にその内容が本明細書に対する参考として援用されるべきであることが理解される。
【産業上の利用可能性】
【０１０８】
本発明は、立体視を含む動画や静止画の映像・画像を生成可能とする多眼撮像装置および多眼撮像方法、この多眼撮像装置を撮像部に用いた例えばデジタルカメラやカメラ付き携帯電話装置などの携帯情報端末装置の分野において、一方の撮像部に比べて他方の撮像部の方が画質が良い場合に他方の撮像部を主撮像部として決定することにより、より画質の良い画像をより確実に得ることができる。
【符号の説明】
【０１０９】
１、１Ａ、１Ｂ、１Ｃ  携帯情報端末装置
２  第１撮像部
３  第２撮像部
４  メモリ部
５  信号処理部
６  表示装置
７、８  レンズ駆動／撮像素子駆動部
９  システムコントロール部
１０、１０Ａ、１０Ｂ、１０Ｃ  制御部
１０ａ、１０ａ１、１０ａ２  画質情報記憶部
１０ｂ、１０ｂ１、１０ｂ２  判定情報算出部
１０ｃ、１０ｃ１、１０ｃ２  判定情報記憶部
１０ｄ、１０ｄ１、１０ｄ２、１０ｄ３  撮像部切替制御部
１１  通信部
１２  メモリ部
１３  操作部
２０、２０Ａ、２０Ｂ、２０Ｃ  多眼撮像装置
【図１】
2012227846.tif 000004
【図２】
2012227846.tif 000005
【図３】
2012227846.tif 000006
【図４】
2012227846.tif 000007
【図５】
2012227846.tif 000008
【図６】
2012227846.tif 000009
【図７】
2012227846.tif 000010
【図８】
2012227846.tif 000011
【図９】
2012227846.tif 000012
【図１０】
2012227846.tif 000013