(57)【要約】【課題】  撮影画角の異なる複数の撮像系を利用して、精度の高い測距を行うことができるようにする。また、複数の撮像系間に生ずるパララックスの補正を、簡単な構成で実現できるようにする。【解決手段】  互いに異なる撮影画角で撮影された各撮像系１０Ａ，１０Ｂ，１０Ｃによる撮影画像が、画角に関して互いに同一の撮影条件で撮影された画像となるように、各撮像系１０Ａ，１０Ｂ，１０Ｃからの各撮像信号を補正し、補正後の各撮像信号に基づいて、各撮像系１０Ａ，１０Ｂ，１０Ｃによる各撮影画像同士の相関演算を行い、その相関値に基づいて、被写体までの距離を算出する。算出された距離の情報に基づいて、パララックスの補正を行う。【選択図】      図１
2005099265.tif 000002
【特許請求の範囲】
【請求項１】
互いに撮影画角の異なる第１および第２の撮像系を少なくとも備え、前記第１および第２の撮像系により、同一被写体を互いに異なる撮影画角で撮影し、前記各撮像系からの撮像信号を選択的に切り替えて出力することにより、複数の撮影倍率で撮影を行うようになされた撮像装置であって、
互いに異なる撮影画角で撮影された前記第１の撮像系による撮影画像と前記第２の撮像系による撮影画像とが、画角に関して互いに同一の撮影条件で撮影された画像となるように、前記各撮像系からの各撮像信号を補正する画像補正手段と、
前記補正後の各撮像信号に基づいて、前記各撮像系による各撮影画像同士の相関演算を行い、その相関値に基づいて、被写体までの距離を算出する演算手段と、
前記演算手段により算出された距離の情報に基づいて、前記各撮像系間に生ずるパララックスが補正されるように、前記各撮像系により得られた各撮影画像を補正するパララックス補正手段と
を備えたことを特徴とする撮像装置。
【請求項２】
前記各撮像系はそれぞれ、
単焦点レンズと、前記単焦点レンズによる被写体像に応じた撮像信号を出力する撮像素子とを有し、
前記各撮像系における各単焦点レンズは、同一被写体側に向けて互いに近接して配置され、互いに焦点距離が異なるものである
ことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記各撮像系はそれぞれ、
単焦点レンズと、前記単焦点レンズによる被写体像に応じた撮像信号を出力する撮像素子とを有し、
前記各撮像系における各単焦点レンズは、同一被写体側に向けて互いに近接して配置され、
前記各撮像系における各撮像素子は、それぞれ互いに画角の異なる被写体像が入射するように互いに画素サイズが異なるものである
ことを特徴とする請求項１に記載の撮像装置。
【請求項４】
前記各撮像系はそれぞれ、
単焦点レンズと、前記単焦点レンズによる被写体像に応じた撮像信号を出力する撮像素子とを有し、
前記各撮像系における各単焦点レンズは、同一被写体側に向けて互いに近接して配置され、
前記各撮像系における各撮像素子は、それぞれ互いに画角の異なる被写体像が入射するように互いに画素数が異なるものである
ことを特徴とする請求項１に記載の撮像装置。
【請求項５】
前記画像補正手段は、
前記各撮像系による各撮影画像同士が、画角に関して互いに同一の撮影条件で撮影された画像となるように、前記各撮像系のうち相対的に広角側の撮像系からの撮像信号に対して、信号の間引きを行うと共に、相対的に望遠側の撮像系からの撮像信号に対して、信号の間引きもしくは平均化を行う
ことを特徴とする請求項１ないし４のいずれか１項に記載の撮像装置。
【請求項６】
前記撮像信号に対して信号処理を施して、電子的に被写体像の大きさを変化させる電子ズーム処理手段をさらに備え、
前記電子ズーム処理手段による電子ズーム処理を行うことにより、少なくとも１つの前記撮像系による撮影倍率を変えるようにした
ことを特徴とする請求項１ないし５のいずれか１項に記載の撮像装置。
【請求項７】
互いに撮影画角の異なる第１および第２の撮像系を少なくとも備え、前記第１および第２の撮像系により、同一被写体を互いに異なる撮影画角で撮影し、前記各撮像系からの撮像信号を選択的に切り替えて出力することにより、複数の撮影倍率で撮影を行うようになされた撮像装置を用いた測距方法であって、
互いに異なる撮影画角で撮影された前記第１の撮像系による撮影画像と前記第２の撮像系による撮影画像とが、画角に関して互いに同一の撮影条件で撮影された画像となるように、前記各撮像系からの各撮像信号を補正するステップと、
前記補正後の各撮像信号に基づいて、前記各撮像系による各撮影画像同士の相関演算を行い、その相関値に基づいて、被写体までの距離を算出するステップと
を含むことを特徴とする測距方法。
【請求項８】
前記撮像装置における各撮像系はそれぞれ、
単焦点レンズと、前記単焦点レンズによる被写体像に応じた撮像信号を出力する撮像素子とを有し、
前記各撮像系における各単焦点レンズは、同一被写体側に向けて互いに近接して配置され、互いに焦点距離が異なるものである
ことを特徴とする請求項７に記載の測距方法。
【請求項９】
前記撮像装置における各撮像系はそれぞれ、
単焦点レンズと、前記単焦点レンズによる被写体像に応じた撮像信号を出力する撮像素子とを有し、
前記各撮像系における各単焦点レンズは、同一被写体側に向けて互いに近接して配置され、
前記各撮像系における各撮像素子は、それぞれ互いに画角の異なる被写体像が入射するように互いに画素サイズが異なるものである
ことを特徴とする請求項７に記載の測距方法。
【請求項１０】
前記各撮像信号を補正するステップにおいて、
前記各撮像系による各撮影画像同士が、画角に関して互いに同一の撮影条件で撮影された画像となるように、前記各撮像系のうち相対的に広角側の撮像系からの撮像信号に対して、信号の間引きを行うと共に、相対的に望遠側の撮像系からの撮像信号に対して、信号の間引きもしくは平均化を行う
ことを特徴とする請求項７ないし９のいずれか１項に記載の測距方法。
【請求項１１】
前記撮像装置は、前記撮像信号に対して信号処理を施して、電子的に被写体像の大きさを変化させる電子ズーム処理手段をさらに備え、
前記電子ズーム処理手段による電子ズーム処理を行うことにより、少なくとも１つの前記撮像系による撮影倍率を変えるようになされている
ことを特徴とする請求項７ないし１０のいずれか１項に記載の測距方法。
【請求項１２】
互いに撮影画角の異なる第１および第２の撮像系を少なくとも備え、前記第１および第２の撮像系により、同一被写体を互いに異なる撮影画角で撮影し、前記各撮像系からの撮像信号を選択的に切り替えて出力することにより、複数の撮影倍率で撮影を行うようになされた撮像装置における撮像方法であって、
互いに異なる撮影画角で撮影された前記第１の撮像系による撮影画像と前記第２の撮像系による撮影画像とが、画角に関して互いに同一の撮影条件で撮影された画像となるように、前記各撮像系からの各撮像信号を補正するステップと、
前記補正後の各撮像信号に基づいて、前記各撮像系による各撮影画像同士の相関演算を行い、その相関値に基づいて、被写体までの距離を算出するステップと、
算出された距離の情報に基づいて、前記各撮像系間に生ずるパララックスが補正されるように、前記各撮像系により得られた各撮影画像を補正するステップと
を含むことを特徴とする撮像方法。
【請求項１３】
前記撮像装置は、前記撮像信号に対して信号処理を施して、電子的に被写体像の大きさを変化させる電子ズーム処理手段をさらに備え、
前記電子ズーム処理手段による電子ズーム処理を行うことにより、少なくとも１つの前記撮像系による撮影倍率を変えるようになされている
ことを特徴とする請求項１２に記載の撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、測距機能を備えた撮像装置に関し、特に、カメラ付き携帯電話、ＰＤＡ（Personal Digital Assistant）等の小型の情報端末機器に用いて好適な撮像装置および撮像方法、ならびにその撮像装置を用いた測距方法に関する。
【背景技術】
【０００２】
近年、ＣＣＤ（Charge Coupled Device：電荷結合素子）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）などの固体撮像素子を用いて電子的に画像を撮影、記録するデジタルスチルカメラが急速に普及している。また携帯電話の高機能化に伴い、小型の撮像モジュールを搭載したカメラ付き携帯電話も急速に普及してきている。これらの機器に用いられる撮像素子は、近年、小型化および高画素化が進んでおり、それに伴って、撮影レンズにも、高い解像性能と共に構成のコンパクト化が求められている。
【０００３】
デジタルスチルカメラ等においてズーム機能を実現する方法としては、光学ズーム方式と電子ズーム方式とがある。光学ズーム方式は、撮影レンズとしてズームレンズを搭載し、光学的に撮影倍率を変えるものである。電子ズーム方式は、信号処理により電子的に被写体像の大きさを変えるようにしたものである。一般に、光学ズーム方式の方が、電子ズーム方式よりも高い解像性能を得ることができる。このため、高い解像性能で広角から望遠まで広範囲な撮影倍率を得るためには、光学ズーム方式の方が好ましい。その一方で、光学ズーム方式により高い解像性能で広範囲な撮影倍率を実現するためには、レンズ枚数が多くなり、小型化の点で不利である。
【０００４】
携帯電話等の情報端末機器にズーム機能を持たせた撮像装置としては、例えば以下の特許文献１に記載のものがある。ところで、デジタルスチルカメラ等には、オートフォーカス機能やフラッシュの光量制御などに用いるために、測距機能を備えたものがある。撮像装置における測距に関する従来技術としては、例えば以下の特許文献２に記載のものがある。特許文献２には、複数の受光レンズによる被写体像をそれぞれ光電変換し、それによって得られた複数の像信号が示す像のずれ量に基づいて、被写体距離を算出し、撮影レンズの合焦を行う技術が開示されている。
【特許文献１】特願２００３−２７１４５０号
【特許文献２】特許第２７４３５５１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
カメラ付き携帯電話等の小型の情報端末機器においては、従来、コストや小型化の点で単焦点の撮影レンズを用いたものが一般的であるが、最近の高機能化、多機能化に伴い、ズーム機能への要求がある。しかしながら、カメラ付き携帯電話等で用いられている撮影レンズは、通常３枚程度であり、高性能な光学ズーム方式を実現するにはレンズ枚数が少ない。レンズ枚数を増やすことにより、高性能な光学ズーム方式を実現することも可能であるが、その場合、構成の複雑化や大型化を招くので好ましくない。また、ズームレンズを搭載すると、レンズの可動部分が多くなり、そのための移動機構が必要になってくる。このため、構成の複雑化を招くと共に、機械的な強度を保つことが難しくなり、堅牢性の点で不利となる。
【０００６】
一方、ズームレンズを用いずに電子ズーム方式によりズーム機能を実現した場合、像の拡大率が大きくなるほど解像度が劣化するので、高い解像性能を保ったまま広角から望遠まで広範囲な撮影倍率を得ることは難しい。上述したように近年では、カメラ付き携帯電話等においても、搭載される撮像素子の高画素化が進んでいるため、高い解像性能を保ったまま、広角から望遠まで広範囲な撮影を行うことができる装置の開発が望まれる。
【０００７】
そこで、本願出願人のうち１の出願人は、互いに撮影画角の異なる複数の撮像系を備え、各撮像系により、同一被写体を互いに異なる撮影画角で撮影し、各撮像系からの撮像信号を選択的に切り替えて出力することにより、複数の撮影倍率で撮影を行うようになされた新規な撮像装置を提案している（特許文献１）。各撮像系は、例えば同一被写体側に向けて互いに近接して配置された、互いに焦点距離の異なる複数の単焦点レンズと、複数の単焦点レンズに対応して設けられ、各単焦点レンズによる被写体像に応じた撮像信号をそれぞれ出力する複数の撮像素子とを備えて構成される。この新規な撮像装置によれば、ズームレンズを搭載することなく、簡単な構成で、撮像素子の高画素化に対応したズーム機能を実現できる。また、単焦点レンズを用いることで、ズームに関するレンズの移動機構が不要となり、ズームレンズを用いた場合に比べて、構造的に強度を上げることができ、堅牢性を保ちやすくなる。さらに、電子ズーム処理を併用し、各撮像系間で撮影倍率を変えるようにした場合には、より広範囲な撮影倍率でのズーム撮影が可能となる。
【０００８】
しかしながら、複数の撮像系により同一の被写体を撮影する場合、各撮像系の光軸が一致していないために、各撮像系間でパララックスと呼ばれる被写体像のずれが発生してしまう。従って、このパララックスの補正を行うことが望ましい。この場合、パララックスは被写体距離が近いほど大きく発生するので、撮像装置に測距機能を持たせ、被写体距離に応じて画像の補正を行うことが考えられる。しかしながら、特に、カメラ付き携帯電話等の小型の撮像装置に測距専用の光学系を設けることは、構成の複雑化や大型化を招くので好ましくない。
【０００９】
そこで、各撮像系からの撮影画像を測距のために利用することが考えられる。しかしながら、上記特許文献２に記載されているような従来の測距技術では、一般に、各撮像系で画角などに関して同一の撮影条件であることを前提としているため、画角などの撮影条件が異なる複数の撮像系を備えた装置には、ただちに利用することができない。精度の高い測距を行うためには、例えば画角などに関して互いに同一の撮影条件となるように、各撮像系間の画像を補正する必要がある。
【００１０】
本発明はかかる問題点に鑑みてなされたもので、その第１の目的は、撮影画角の異なる複数の撮像系を利用して、精度の高い測距を行うことができるようにした撮像装置および撮像方法、ならびに測距方法を提供することにある。
本発明の第２の目的は、撮影画角の異なる複数の撮像系間に生ずるパララックスの補正を、簡単な構成で実現できるようにした撮像装置および撮像方法を提供することにある。
【課題を解決するための手段】
【００１１】
本発明による撮像装置は、互いに撮影画角の異なる第１および第２の撮像系を少なくとも備え、第１および第２の撮像系により、同一被写体を互いに異なる撮影画角で撮影し、各撮像系からの撮像信号を選択的に切り替えて出力することにより、複数の撮影倍率で撮影を行うようになされた撮像装置であって、互いに異なる撮影画角で撮影された第１の撮像系による撮影画像と第２の撮像系による撮影画像とが、画角に関して互いに同一の撮影条件で撮影された画像となるように、各撮像系からの各撮像信号を補正する画像補正手段と、補正後の各撮像信号に基づいて、各撮像系による各撮影画像同士の相関演算を行い、その相関値に基づいて、被写体までの距離を算出する演算手段と、演算手段により算出された距離の情報に基づいて、各撮像系間に生ずるパララックスが補正されるように、各撮像系により得られた各撮影画像を補正するパララックス補正手段とを備えたものである。
【００１２】
本発明による撮像装置において、画像補正手段は、例えば、各撮像系による各撮影画像同士が、画角に関して互いに同一の撮影条件で撮影された画像となるように、各撮像系のうち相対的に広角側の撮像系からの撮像信号に対して、信号の間引きを行うと共に、相対的に望遠側の撮像系からの撮像信号に対して、信号の間引きもしくは平均化を行うものである。
【００１３】
本発明による測距方法は、互いに撮影画角の異なる第１および第２の撮像系を少なくとも備え、第１および第２の撮像系により、同一被写体を互いに異なる撮影画角で撮影し、各撮像系からの撮像信号を選択的に切り替えて出力することにより、複数の撮影倍率で撮影を行うようになされた撮像装置を用いた測距方法であって、互いに異なる撮影画角で撮影された第１の撮像系による撮影画像と第２の撮像系による撮影画像とが、画角に関して互いに同一の撮影条件で撮影された画像となるように、各撮像系からの各撮像信号を補正するステップと、補正後の各撮像信号に基づいて、各撮像系による各撮影画像同士の相関演算を行い、その相関値に基づいて、被写体までの距離を算出するステップとを含むものである。
【００１４】
本発明による測距方法において、各撮像信号を補正するステップは、例えば、各撮像系による各撮影画像同士が、画角に関して互いに同一の撮影条件で撮影された画像となるように、各撮像系のうち相対的に広角側の撮像系からの撮像信号に対して、信号の間引きを行うと共に、相対的に望遠側の撮像系からの撮像信号に対して、信号の間引きもしくは平均化を行うものである。
【００１５】
本発明による撮像方法は、互いに撮影画角の異なる第１および第２の撮像系を少なくとも備え、第１および第２の撮像系により、同一被写体を互いに異なる撮影画角で撮影し、各撮像系からの撮像信号を選択的に切り替えて出力することにより、複数の撮影倍率で撮影を行うようになされた撮像装置における撮像方法であって、互いに異なる撮影画角で撮影された第１の撮像系による撮影画像と第２の撮像系による撮影画像とが、画角に関して互いに同一の撮影条件で撮影された画像となるように、各撮像系からの各撮像信号を補正するステップと、補正後の各撮像信号に基づいて、各撮像系による各撮影画像同士の相関演算を行い、その相関値に基づいて、被写体までの距離を算出するステップと、算出された距離の情報に基づいて、各撮像系間に生ずるパララックスが補正されるように、各撮像系により得られた各撮影画像を補正するステップとを含むものである。
【００１６】
ここで、本発明による撮像装置および撮像方法、ならびに測距方法において、各撮像系はそれぞれ、単焦点レンズと、単焦点レンズによる被写体像に応じた撮像信号を出力する撮像素子とを有していても良い。この場合、各撮像系における各単焦点レンズは、例えば、同一被写体側に向けて互いに近接して配置され、互いに焦点距離が異なるもので構成される。この場合、各単焦点レンズが互いに焦点距離が異なることにより、各撮像系で異なる画角による被写体像が得られる。
【００１７】
また、各撮像系における各撮像素子は、例えば、それぞれ互いに画角の異なる被写体像が入射するように互いに画素サイズが異なるもので構成されていても良い。なお、「互いに画素サイズが異なる」とは、例えば、各撮像素子における画素ピッチを変えることにより、各撮像素子の画素全体の大きさが異なっていることをいう。各撮像素子の画素数が同じであるものとすると、撮像素子として、相対的に画素サイズの大きいものを用いた場合には、相対的に画素サイズの小さいものを用いた場合に比べて、広角の被写体像が得られる。
【００１８】
また、各撮像系における各撮像素子は、例えば、それぞれ互いに画角の異なる被写体像が入射するように互いに画素数が異なるもので構成されていても良い。なお、「互いに画素数が異なる」とは、例えば、各撮像素子における画素ピッチが同一で、各撮像素子における画素数が異なり、各撮像素子の画素全体の大きさが異なっていることをいう。各撮像素子における画素ピッチが同じであるものとすると、撮像素子として、相対的に画素数の大きいものを用いた場合には、相対的に画素数の小さいものを用いた場合に比べて、広角の被写体像が得られる。
【００１９】
また、本発明による撮像装置および撮像方法、ならびに測距方法において、撮像装置が、撮像信号に対して信号処理を施して、電子的に被写体像の大きさを変化させる電子ズーム処理手段をさらに備え、電子ズーム処理手段による電子ズーム処理を行うことにより、少なくとも１つの撮像系による撮影倍率を変えるようにしても良い。電子ズーム処理を併用することにより、より広範囲な撮影倍率での撮影が可能となる。特に、電子ズーム処理により、各撮像系間において撮影倍率を連続的に変えることで、よりスムーズなズーム撮影が可能となる。
【００２０】
本発明による撮像装置および撮像方法、ならびに測距方法では、互いに撮影画角の異なる第１および第２の撮像系により、同一被写体が互いに異なる撮影画角で撮影される。そして、第１の撮像系による撮影画像と第２の撮像系による撮影画像とが、画角に関して互いに同一の撮影条件で撮影された画像となるように、各撮像系からの各撮像信号が補正される。補正後の各撮像信号に基づいて、各撮像系による各撮影画像同士の相関演算が行われ、その相関値に基づいて、被写体までの距離が算出される。
【００２１】
各撮像信号の補正としては、例えば、各撮像系による各撮影画像同士が、画角に関して互いに同一の撮影条件で撮影された画像となるように、各撮像系のうち相対的に広角側の撮像系からの撮像信号に対して、信号の間引きが行われると共に、相対的に望遠側の撮像系からの撮像信号に対して、信号の間引きもしくは平均化が行われる。
【００２２】
算出された距離の情報は、例えば各撮像系間に生ずるパララックスの補正に利用される。その他にも、距離の情報を例えばフラッシュ光量制御に利用するようにしても良い。
【００２３】
なお、本発明による撮像装置および撮像方法、ならびに測距方法において、撮像系は、２つに限らず３以上あっても良い。その場合、３以上の撮像系からの各撮像信号をすべて用いて被写体までの距離を算出するようにしても良いし、一部の撮像系からの各撮像信号を用いて被写体までの距離を算出するようにしても良い。また例えば、３つの撮像信号を用いて距離を算出する場合、第１〜第３の撮像系による各撮影画像同士の相関演算をすべて同時に行っても良いし、例えば第１，第２の撮像系による各撮影画像同士の第１の相関値と、例えば第２，第３の撮像系による各撮影画像同士の第２の相関値とを別々に算出し、さらにそれら第１，第２の相関値に基づいて、距離の算出を行うようにしても良い。３以上の撮像系による各撮影画像同士の相関を調べることで、２つの撮像系の場合に比べて距離の算出の精度を高めることができる。
【発明の効果】
【００２４】
本発明による撮像装置および撮像方法、ならびに測距方法によれば、互いに異なる撮影画角で撮影された第１の撮像系による撮影画像と第２の撮像系による撮影画像とが、画角に関して互いに同一の撮影条件で撮影された画像となるように、各撮像系からの各撮像信号を補正し、補正後の各撮像信号に基づいて、各撮像系による各撮影画像同士の相関演算を行い、その相関値に基づいて、被写体までの距離を算出するようにしたので、撮影画角の異なる複数の撮像系を利用して、精度の高い測距を行うことができる。
【００２５】
特に、本発明による撮像装置および撮像方法では、算出された距離の情報に基づいて、各撮像系間に生ずるパララックスが補正されるように、各撮像系により得られた各撮影画像の補正を行うようにしたので、撮影画角の異なる複数の撮像系を利用して、精度の高い測距を行うことができると共に、撮影画角の異なる複数の撮像系間に生ずるパララックスの補正を、簡単な構成で実現できる。
【発明を実施するための最良の形態】
【００２６】
以下、本発明の実施の形態について図面を参照して詳細に説明する。
【００２７】
図１（Ａ），（Ｂ）は、本発明の一実施の形態に係る撮像装置を用いた情報端末機器の外観を示している。図２は、この情報端末機器の信号処理回路を示している。ここでは、情報端末機器として、折りたたみ式のカメラ付き携帯電話を示している。
【００２８】
このカメラ付き携帯電話は、上部筐体２Ａと下部筐体２Ｂとを備え、両者が図１（Ａ）の矢印方向に回動自在に構成されている。下部筐体２Ｂには、操作キー３やマイク４などが設けられている。上部筐体２Ａには、表示部５、スピーカ６、アンテナ７、撮像モジュール１０、およびズーム操作部１１などが設けられている。
【００２９】
表示部５は、ＬＣＤ（液晶パネル）やＥＬ（Electro-Luminescence）パネルなどの表示パネル５１（図２）によって構成されている。表示部５は、折りたたみ時に内面となる側に配置されている。この表示部５には、電話機能に関する各種メニュー表示のほか、撮像モジュール１０によって撮影された画像などを表示することが可能となっている。
【００３０】
ズーム操作部１１は、望遠側（Ｔ）および広角側（Ｗ）のいずれで撮影を行うかを指示するためのものであり、利用者によって操作される。
【００３１】
撮像モジュール１０は、例えば上部筐体２Ａの裏面側に配置されている。ただし、撮像モジュール１０を設ける位置は、これに限定されない。撮像モジュール１０は、このカメラ付き携帯電話は、同一の被写体を撮影可能な複数の撮像系１０Ａ，１０Ｂ，１０Ｃを撮像モジュール１０として備え、撮影倍率に応じて各撮像系１０Ａ，１０Ｂ，１０Ｃによる撮影画像を適宜切り替えて使用するようになっている。撮像系１０Ａ，１０Ｂ，１０Ｃは、図２に示したように、それぞれ撮像レンズ２５Ａ，２５Ｂ，２５Ｃとセンサ部２０Ａ，２０Ｂ，２０Ｃとを有している。撮像系１０Ａ，１０Ｂ，１０Ｃが、本発明における「撮像系」の一具体例に対応する。
【００３２】
各撮像系１０Ａ，１０Ｂ，１０Ｃは、同一被写体を撮影可能とするために、互いに近接して配置されている。より詳しくは、各撮像系１０Ａ，１０Ｂ，１０Ｃにおいて、各撮像レンズ２５Ａ，２５Ｂ，２５Ｃが、同一被写体側に向けて互いに近接して配置され、光軸が略一致するようにして配置されている。各撮像レンズ２５Ａ，２５Ｂ，２５Ｃは、機械的に干渉しない範囲内において、できるだけ近接して配置されていることが、各撮像レンズ間のパララックス（被写体像のずれ）を少なくする上で好ましい。また、各撮像レンズ２５Ａ，２５Ｂ，２５Ｃは、すべて固定部材であり、可動部分を含まない構成にすることが好ましい。これにより、レンズの移動機構が不要となり、機械的に構成が簡単になると共に、構造的に強度を上げることができ、堅牢性を保ちやすくなる。
【００３３】
各撮像レンズ２５Ａ，２５Ｂ，２５Ｃは、互いに焦点距離の異なる単焦点レンズ、例えば、焦点距離ｆが３５ｍｍ（広角用），７０ｍｍ（望遠用），５０ｍｍ（中間用）の単焦点レンズにより構成されている。各撮像レンズ２５Ａ，２５Ｂ，２５Ｃの焦点距離が互いに異なっていることにより、異なる画角による被写体像が得られるようなっている。各撮像レンズ２５Ａ，２５Ｂ，２５Ｃが、本発明における「単焦点レンズ」の一具体例に対応する。
【００３４】
図３（Ａ），（Ｂ）に、撮像レンズ２５Ａ，２５Ｂ，２５Ｃのうち、特に、広角側（焦点距離ｆ＝３５ｍｍ）と望遠側（焦点距離ｆ＝７０ｍｍ）の撮像レンズ２５Ａ，２５Ｂの具体例を示す。中間用の撮像レンズ２５Ｃについては図示を省略する。各例共に、光軸Ｚ１に沿って物体側から順に、絞りＧＳ、第１レンズＧ１および第２レンズＧ２が配設された２枚構成の単焦点レンズとなっている。ＣＧは、撮像素子を保護するカバーガラスである。各単焦点レンズは、それぞれ焦点距離ｆが３５ｍｍ，７０ｍｍにおいて最も良好な結像性能が得られるように最適化されている。
【００３５】
このカメラ付き携帯電話は、図２に示したように、信号処理回路として、センサ部２０Ａ，２０Ｂ，２０Ｃと、切替部２６と、ＤＳＰ（Digital Signal Processor）部３０とを備えている。
【００３６】
センサ部２０Ａ，２０Ｂ，２０Ｃは、センサ受光部２１Ａ，２１Ｂ，２１Ｃと、ＣＤＳ（Correlated Double Sampler）／ＡＧＣ（Automatic Gain Control）回路２２Ａ，２２Ｂ，２２Ｃと、Ａ／Ｄ（アナログ／デジタル）変換回路２３Ａ，２３Ｂ，２３Ｃと、ＴＧ（Timing Generetor）回路２４Ａ，２４Ｂ，２４Ｃとを有している。
【００３７】
センサ受光部２１Ａ，２１Ｂ，２１Ｃは、各撮像レンズ２５Ａ，２５Ｂ，２５Ｃに対応して設けられ、各撮像レンズ２５Ａ，２５Ｂ，２５Ｃによる被写体像に応じた撮像信号を出力するようになっている。センサ受光部２１Ａ，２１Ｂ，２１Ｃは、例えばＣＣＤやＣＭＯＳなどの撮像素子により構成されている。各センサ受光部２１Ａ，２１Ｂ，２１Ｃは、基本的に同一構成で構わない。すなわち、画素数および画素サイズが同一の撮像素子を用いることが可能である。各センサ受光部２１Ａ，２１Ｂ，２１Ｃが、本発明における「撮像素子」の一具体例に対応する。
【００３８】
ＣＤＳ／ＡＧＣ回路２２Ａ，２２Ｂ，２２Ｃは、センサ受光部２１Ａ，２１Ｂ，２１Ｃからの撮像信号に含まれるノイズを除去すると共に、その信号レベルが所定のレベルとなるように利得調整を行うための回路である。Ａ／Ｄ変換回路２３Ａ，２３Ｂ，２３Ｃは、ＣＤＳ／ＡＧＣ回路２２Ａ，２２Ｂ，２２Ｃを経た撮像信号をデジタル信号に変換するためのものである。ＴＧ回路２４Ａ，２４Ｂ，２４Ｃは、タイミング信号を生成し、センサ受光部２１Ａ，２１Ｂ，２１Ｃにおける撮像信号の読み出しタイミングを制御するためのものである。
【００３９】
切替部２６は、センサ部２０Ａ，２０Ｂ，２０Ｃからの撮像信号を選択的に切り替えて、ＤＳＰ部３０に出力するものである。切替部２６は、本発明における「切替手段」の一具体例に対応する。
【００４０】
なお、センサ部２０Ａ，２０Ｂ，２０Ｃからの信号をすべて、後述するＤＳＰ４０に入力し、ＤＳＰ４０の内部において信号の切り替えを行うような構成にすることも可能である。
【００４１】
ＤＳＰ部３０は、ＤＳＰ４０と、フラッシュメモリ３１と、外部メモリ３２と、ＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）３３と、電源３４と、パネル電源３５とを有している。
【００４２】
電源３４は、センサ部２０Ａ，２０Ｂ，２０ＣとＤＳＰ４０とに電力を供給するためのものである。パネル電源３５は、表示パネル５１を駆動する電力を供給するためのものである。
【００４３】
フラッシュメモリ３１は、表示パネル５１に表示する画像データなどを記憶するためのものである。外部メモリ３２は、撮影した画像データなどを記録するためのものであり、例えばスマートメディアなどを利用することができる。ＳＤＲＡＭ３３は、ＤＳＰ４０において各種画像処理を行うための演算用のメモリである。
【００４４】
ＤＳＰ４０は、センサ部２０Ａ，２０Ｂ，２０Ｃからの撮像信号に対して、電子ズーム処理を行うなど、各種のデジタル画像処理を行う機能を有している。ここで、「電子ズーム処理」とは、撮像信号に対して信号処理を施して、電子的に被写体像の大きさを変化させる処理のことをいう。ＤＳＰ４０が、本発明における「電子ズーム処理手段」の一具体例に対応する。
【００４５】
ＤＳＰ４０はまた、ＣＤＳ回路２２Ａ，２２Ｂ，２２ＣやＴＧ回路２４Ａ，２４Ｂ，２４Ｃなどの各回路の制御を行う機能を有している。ＤＳＰ４０はまた、デジタルＩ／Ｏ（Input/Output）回路４１およびパネルコントローラ４２を有し、表示パネル５１の制御を行うようになっている。
【００４６】
ＤＳＰ４０はまた、切替制御部４３を有している。切替制御部４３は、ズーム操作部１１からの操作信号に基づいて、切替部２６を制御し、撮像信号として、いずれのセンサ部２０Ａ，２０Ｂ，２０Ｃからの信号を採用するかを制御する機能を有している。
【００４７】
ＤＳＰ４０はさらに、測距部４４とパララックス補正部４５とを有している。測距部４４は、本発明における「画像補正手段」および「演算手段」の一具体例に対応する。パララックス補正部４５は、本発明における「パララックス補正手段」の一具体例に対応する。
【００４８】
測距部４４は、３つの撮像系１０Ａ，１０Ｂ，１０Ｃのうち、少なくとも２つの撮像系からの撮像信号を用いて被写体までの距離を算出する機能を有している。測距部４４は、各撮像系１０Ａ，１０Ｂ，１０Ｃによる撮影画像が、画角に関して互いに同一の撮影条件で撮影された画像となるように、各撮像系１０Ａ，１０Ｂ，１０Ｃからの各撮像信号を補正するようになっている。より具体的には、各撮像系１０Ａ，１０Ｂ，１０Ｃによる各撮影画像同士が画角に関して互いに同一の撮影条件となるように、各撮像系１０Ａ，１０Ｂ，１０Ｃのうち相対的に広角側の撮像系からの撮像信号に対して、信号の間引きを行うようになっている。測距部４４はまた、相対的に望遠側の撮像系からの撮像信号に対して、信号の間引きもしくは平均化を行うようになっている。
【００４９】
測距部４４はまた、補正後の各撮像信号に基づいて、各撮像系１０Ａ，１０Ｂ，１０Ｃによる各撮影画像同士の相関演算を行い、その相関値に基づいて、被写体までの距離を算出するようになっている。
【００５０】
なお図示しないが、測距部４４は、各撮像系１０Ａ，１０Ｂ，１０Ｃからの撮像信号を示す画像データを一時的に格納するための画像メモリなどを有している。
【００５１】
パララックス補正部４５は、測距部４４により算出された距離の情報に基づいて、各撮像系間に生ずるパララックスが補正されるように、各撮像系１０Ａ，１０Ｂ，１０Ｃにより得られた各撮影画像を補正する機能を有している。
【００５２】
測距部４４による測距の具体的な方法、およびパララックス補正部４５によるパララックス補正の具体的な方法については、後に詳述する。
【００５３】
次に、以上のように構成されたカメラ付き携帯電話の動作を説明する。
【００５４】
まず、撮影時の基本動作を説明する。このカメラ付き携帯電話では、互いに焦点距離の異なる複数の撮像レンズ２５Ａ，２５Ｂ，２５Ｃによって、複数の焦点距離による被写体像が得られる。センサ受光部２１Ａ，２１Ｂ，２１Ｃでは、各撮像レンズ２５Ａ，２５Ｂ，２５Ｃによる被写体像に応じた撮像信号を出力する。各センサ受光部２１Ａ，２１Ｂ，２１Ｃからの撮像信号は、ＣＤＳ／ＡＧＣ回路２２Ａ，２２Ｂ，２２Ｃによってノイズ除去処理などが施された後、Ａ／Ｄ変換回路２３Ａ，２３Ｂ，２３Ｃによって、デジタル信号に変換されて出力される。
【００５５】
切替部２６は、ＤＳＰ４０の切替制御部４３からの出力選択信号に基づいて、センサ部２０Ａ，２０Ｂ，２０Ｃからの撮像信号を選択的に切り替えて切替制御部４３に出力する。切替制御部４３は、ズーム操作部１１からの操作信号に基づいて、撮影倍率に応じて切替部２６に出力選択信号を出力し、切り替え制御を行う。
【００５６】
ＤＳＰ４０は、ズーム操作部１１からの操作信号に基づいて、撮影倍率に応じた電子ズーム処理を行う。なお、撮影倍率が各撮像レンズ２５Ａ，２５Ｂ，２５Ｃの焦点距離に対応する値のときには、電子ズーム処理を行う必要はない。
【００５７】
このように、このカメラ付き携帯電話では、撮影倍率に応じて各撮像系１０Ａ，１０Ｂ，１０Ｃによる撮像信号を適宜切り替えて使用する。また撮影倍率に応じて、各撮像系１０Ａ，１０Ｂ，１０Ｃからの撮像信号に対して電子ズーム処理を施す。
【００５８】
次に、このカメラ付き携帯電話における、各撮像レンズと撮影倍率との関係、および撮影倍率と電子ズーム処理との関係について説明する。３つの撮像レンズ２５Ａ，２５Ｂ，２５Ｃを用いた場合を説明する前に、まず、中間用の撮像レンズ２５Ｃを用いないで、広角と望遠用の２つの撮像レンズ２５Ａ，２５Ｂのみを用いた場合について説明する。
【００５９】
図４は、このカメラ付き携帯電話において、広角と望遠用の２つの撮像レンズ２５Ａ，２５Ｂを用いた場合における、各撮像レンズ２５Ａ，２５Ｂと撮影倍率との関係を示している。ここでは、撮像レンズ２５Ａ，２５Ｂとして、焦点距離ｆが３５ｍｍの単焦点レンズと７０ｍｍの単焦点レンズとを使用する例を示す。この場合、焦点距離ｆが３５ｍｍの単焦点レンズによって得られた撮像信号に対して、撮影倍率にして例えば１．０倍（焦点距離ｆで３５ｍｍ）を超えて１．４倍（焦点距離ｆで５０ｍｍ）までは電子ズーム処理を行う。また、焦点距離ｆが７０ｍｍの単焦点レンズによって得られた撮像信号に対して、撮影倍率にして例えば２．０倍を超えて３．０倍（焦点距離ｆで１０５ｍｍ）までは電子ズーム処理を行う。
【００６０】
ここで、各撮像レンズ２５Ａ，２５Ｂが、２００万画素の撮像素子に対応可能な解像度を有しているものとすると、撮影倍率が１．０倍のときと、撮影倍率が２．０倍（焦点距離ｆで７０ｍｍ）のときには、各撮像レンズ２５Ａ，２５Ｂにより直接的に２００万画素クラスの解像度が得られる。電子ズーム処理を行うことで、拡大率が高くなるほど画像が劣化するが、撮影倍率が１．０倍〜１．４倍までと２．０倍〜３．０倍までは、１００万画素の撮像素子に対応可能な解像度を保ったままズーム動作を行うことができる。なお、この例では、１００万画素の撮像素子を使用することを前提としているため、１．４倍〜２．０倍までの間でズームが行われない領域が存在しているが、撮像素子としてもっと低画素のものを使用する場合には、この領域においても電子ズーム処理を行い、すべての領域で連続的にズーム動作を行うことができる。
【００６１】
図５は、３つの撮像レンズ２５Ａ，２５Ｂ，２５Ｃを用いた場合における、各撮像レンズと撮影倍率との関係を示している。ここでは、撮像レンズ２５Ａ，２５Ｂ，２５Ｃとして、焦点距離ｆが３５ｍｍの単焦点レンズと７０ｍｍの単焦点レンズと５０ｍｍの単焦点レンズとを使用する例を示す。すなわち、図４の例に比べて５０ｍｍの単焦点レンズを追加したものである。
【００６２】
この場合、焦点距離ｆが３５ｍｍの単焦点レンズによって得られた撮像信号に対して、撮影倍率にして例えば１．０倍を超えて１．４倍未満のときに電子ズーム処理を行う。また、焦点距離ｆが５０ｍｍの単焦点レンズによって得られた撮像信号に対して、撮影倍率にして例えば１．４倍を超えて２．０倍未満のときに電子ズーム処理を行う。さらに、焦点距離ｆが７０ｍｍの単焦点レンズによって得られた撮像信号に対して、撮影倍率にして例えば２．０倍を超えて３．０倍までは電子ズーム処理を行う。
【００６３】
ここで、各撮像レンズ２５Ａ，２５Ｂ，２５Ｃが、２００万画素の撮像素子に対応可能な解像度を有しているものとすると、撮影倍率が１．０倍、１．４倍および２．０倍のときには、各撮像レンズ２５Ａ，２５Ｂ，２５Ｃにより直接的に２００万画素クラスの解像度が得られる。そして、電子ズーム処理を併用することで、撮影倍率が１．０倍〜３．０倍まで、１００万画素の撮像素子に対応可能な解像度を保ったまま、連続的にズーム動作を行うことができる。
【００６４】
このように、このカメラ付き携帯電話によれば、同一の被写体を、焦点距離の異なる撮像レンズ２５Ａ，２５Ｂ，２５Ｃを搭載した撮像系１０Ａ，１０Ｂ，１０Ｃによって撮影し、撮影倍率に応じて各撮像系１０Ａ，１０Ｂ，１０Ｃによる撮像信号を選択的に切り替えて使用するようにしたので、簡単な構成で、複数の撮影倍率での撮影を行うことができる。また、撮像レンズ２５Ａ，２５Ｂ，２５Ｃとして単焦点レンズを用いるようにしたので、ズームに関するレンズの移動機構が不要となり、ズームレンズを用いた場合に比べて、構造的に強度を上げることができ、堅牢性を保ちやすくなる。
【００６５】
また、電子ズーム処理を併用することにより、より広範囲の撮影倍率での撮影が可能となる。特に、電子ズーム処理により、各撮像レンズの各焦点距離間において撮影倍率を連続的に変えることで、連続的なズーム動作を行うことができる。このようにして、簡単な構成で、撮像素子の高画素化に対応したズーム機能を実現できる。
【００６６】
次に、測距部４４による測距の動作を説明する。
【００６７】
まず、測距の前段階として行う画像の補正について説明する。ここでは、説明を簡単にするために、広角用の撮像系１０Ａと望遠用の撮像系１０Ｂとによる撮影画像を用いて測距を行う場合を例に説明する。
【００６８】
図６（Ａ）は、広角用の撮像系１０Ａと望遠用の撮像系１０Ｂとにより、同一の被写体９０を撮影している状態を模式的に示している。撮像系１０Ａ，１０Ｂとしては、広角用の撮像レンズ２５Ａおよび望遠用の撮像レンズ２５Ｂと撮像素子としてのセンサ受光部２１Ａ，２１Ｂとを代表して図示している。広角用のセンサ受光部２１Ａの画素ピッチＳｗ１および全体の画素サイズＳｗは、望遠用のセンサ受光部２１Ｂの画素ピッチＳｔ１および全体の画素サイズＳｔと同じものとする。また、画素数もそれぞれ同じものとする。被写体９０は、中心を境界にして白色と黒色とのパターンで構成されているものとする。なお、例えば広角用の撮像系１０Ａを後側にずらすことにより、センサ受光部２１Ａ，２１Ｂが同一平面上に配置されていても良い。
【００６９】
図６（Ａ）に示したように、本実施の形態において、広角用の撮像系１０Ａと望遠用の撮像系１０Ｂとでは、撮像レンズ２５Ａ，２５Ｂによる異なる画角θ１，θ２での被写体像が、同一の大きさのセンサ受光部２１Ａ，２１Ｂに結像され、撮像信号として出力される。一方、後述するように、本実施の形態では、２つの撮影画像を示す各撮像信号のずれ量に基づいて測距を行う。このためには、２の撮像系による各撮影画像が、画角に関して互いに同一の撮影条件で撮影された画像となっている必要がある。このため、測距部４４では、各撮影画像が、画角に関して互いに同一の撮影条件で撮影された画像となるように画像の補正を行う。
【００７０】
図６（Ｂ）は、この画像の補正の概念を模式的に示したものである。測距部４４は、図６（Ｂ）に示したように、広角側のセンサ受光部２１Ａからの撮像信号に対しては、望遠側の撮影画角θ２と同等となるように、信号の間引き（画素領域の縮小）を行う。また、望遠側のセンサ受光部２１Ｂからの撮像信号に対しては、信号間引き後における広角側の画像の大きさ、解像度に合わせるために、信号の間引きもしくは画素の平均化を行う。
【００７１】
なお、ここでは２つの撮像系を例に説明したが、３つ以上の撮像系を同時に測定に用いることも可能である。この場合、最も望遠側の画角に合わせるように、それよりも広角側の他の撮像系からの撮像信号に対して、信号の間引きを行う。また、信号の間引き後の最も広角側の画像の大きさ、解像度に合わせるように、それよりも望遠側の他の撮像系からの撮像信号に対して、信号の間引きもしくは画素の平均化を行う。
【００７２】
また例えば、広角用の撮像系１０Ａと望遠用の撮像系１０Ｂとのペアと、望遠用の撮像系１０Ｂと中間用の撮像系１０Ｃのペアとで、それぞれ後述する相関値を別々に算出し、さらにそれら２つの相関値に基づいて、距離の算出を行うようにしても良い。３以上の撮像系による各撮影画像同士の相関を調べることで、２つの撮像系の場合に比べて距離の算出の精度を高めることができる。
【００７３】
次に、測距の具体例を説明する。ここでは、パッシブ方式による測距の例を説明する。センサ受光部２１Ａ，２１Ｂとして、例えばＣＭＯＳラインセンサが直線上に配列された複数のセル（受光素子）によって構成されているものとする。なお、ここでは上述した画角に関する画像の補正が既になされているものとして説明する。画角に関して補正がなされているので、撮像系として広角、望遠の区別はなくなるので、ここではセンサ受光部２１Ａ，２１Ｂを、その配置位置で区別し、右側センサ受光部２１Ａ、左側センサ受光部２１Ｂと呼ぶ。
【００７４】
右側センサ受光部２１Ａと左側センサ受光部２１Ｂとのそれぞれのセルには図中左側から順にセンサ番号１，２，３…２３３，２３４が付されるものとする。
また、右側センサ受光部２１Ａおよび左側センサ受光部２１Ｂの左右両側の例えば５つずつのセルは、ダミーのセルとして実際には使用されない。
【００７５】
右側センサ受光部２１Ａおよび左側センサ受光部２１Ｂの各セルからは受光した光量に応じた光信号（輝度信号）がセンサ番号と関連付けて測距部４４に順次出力される。測距部４４は、右側センサ受光部２１Ａおよび左側センサ受光部２１Ｂから得た各セルの輝度信号を各セル毎に積分（加算）し、各セル毎の輝度信号の積分値（光量の積分値）を取得する。なお、以下、単に積分値という場合には、輝度信号の積分値を示し、また、単に積分または積分処理という場合には輝度信号の積分値を得るための積分または積分処理を示すものとする。
【００７６】
また、測距部４４は、右側センサ受光部２１Ａと左側センサ受光部２１Ｂのそれぞれのセンサ領域内（全セル内）に設定されるピーク選択領域内において、いずれかのセルの積分値が所定値（積分終了値）に達したことを検出すると（所定の光量が得られた場合には、測距を行うのに十分なデータが得られたと判断して）、積分処理を終了する。なお、各セルの積分値として出力する値は、各セルの輝度信号の積分値を所定の基準値から減算した値であり、受光した光量が多い程、低い値を示す。以下において、基準値から輝度信号の積分値を減算した値を輝度信号の積分値という。
【００７７】
測距部４４は、右側センサ受光部２１Ａと左側センサ受光部２１Ｂとで撮像された画像（以下、センサ像ともいう）を取得する。そして、右側センサ受光部２１Ａと左側センサ受光部２１Ｂとのそれぞれのセンサ像の間で相関値演算を行い、それらのセンサ像のズレ量を求め、被写体９０までの距離を算出する（三角測量の原理）。
【００７８】
図７（Ａ），（Ｂ）は、被写体９０までの距離が近い場合のセンサ像を例示したものである。図８（Ａ），（Ｂ）は、被写体９０までの距離が遠い場合のセンサ像を例示したものである。被写体９０までの距離が近い場合、図７（Ａ）に示すように左側センサ受光部２１Ｂのセンサ番号８７〜１０１までの輝度信号の積分値は明るい値（５０）となり、センサ番号１０１〜１５０までは暗い値（２００）となる。また図７（Ｂ）に示すように、右側センサ受光部２１Ａについては、左側センサ受光部２１Ｂと異なる位置に設けられているため、センサ番号８５〜１３５までの輝度信号の積分値は明るい値（５０）となり、センサ番号１３６〜１４８までは暗い値（２００）となる。
【００７９】
これに対して、被写体９０までの距離が遠い場合（例えば略無限遠の場合）には、図８（Ａ）に示すように、左側センサ受光部２１Ｂのセンサ番号８７〜１１７までの光量の積分値は明るい値（５０）となり、センサ番号１１８〜１５０までは暗い値（２００）となる。一方、図８（Ｂ）に示すように、右側センサ受光部２１Ａは、左側センサ受光部２１Ｂとは異なる位置に設けられているものの被写体位置が遠距離に存在するために、センサ番号８５〜１１６までの光量の積分値は明るい値（５０）となり、センサ番号１１７〜１４８までは暗い値（２００）となる。この場合に測距部４４は、右側センサ受光部２１Ａと左側センサ受光部２１Ｂのセンサ像のズレ量がほとんどなく、被写体が略無限遠に存在すると判断することができる。これに対して、図７（Ａ），（Ｂ）に示したように被写体が近距離に存在する場合には、センサ像のズレ量が大きくなる。
【００８０】
定量的には、被写体距離は、右側センサ受光部２１Ａと左側センサ受光部２１Ｂとの間隔および各センサからレンズ２５Ａ，２５Ｂまでの距離、右側センサ受光部２１Ａおよび左側センサ受光部２１Ｂの各セルのピッチ（例えば１２μｍ）等を考慮して、センサ像のズレ量から算出することができる。
【００８１】
センサ像のズレ量は、右側センサ受光部２１Ａと左側センサ受光部２１Ｂのそれぞれのセンサ像の間で相関値演算を行うことにより求めることができる。例えば、右側センサ受光部２１Ａと左側センサ受光部２１Ｂのそれぞれに同じ数（総数ＷＯ）のセルを含むウインドウ領域を設定し、そのウインドウ領域内の各セルの番号ｉ（上記センサ番号ではなく、右側センサ受光部２１Ａと左側センサ受光部２１Ｂのそれぞれのウインドウ領域内において同じ配列（例えば右から順に１〜ＷＯ）で各セルに割り当てた番号）の輝度信号の積分値を右側センサ受光部２１ＡについてはＲ（ｉ）、左側センサ受光部２１ＢについてはＬ（ｉ）とする。このとき、相関値ｆは、
ｆ＝Σ｜Ｌ（ｉ）−Ｒ（ｉ）｜ （ｉ＝１〜ＷＯ）
となる。
【００８２】
そして、右側センサ受光部２１Ａと左側センサ受光部２１Ｂのウインドウ領域の相対的な位置関係（距離）を例えば１セルずつずらしながら、上記相関値ｆを求めると、相関値ｆが最小になるところが検出される。例えば、ウインドウ領域の基準となる相対的な位置関係（例えば、無限遠の被写体に対して最小の相関値ｆが得られる位置関係）に対して、右側センサ受光部２１Ａと左側センサ受光部２１Ｂのウインドウ領域が相対的に離れる方向にｎセル分ずらした場合の相関値をｆ（ｎ）とすると、最小の相関値ｆ（ｎ）が検出された際のｎがセンサ像のズレ量となる。
【００８３】
図９（Ａ），（Ｂ）に、この相関値演算の演算結果をグラフ化したものを示す。図９（Ａ）は、被写体距離が近い場合の例であり、相関値ｆ（ｎ）が近距離側で極小値になっていることが分かる。図９（Ｂ）は、被写体距離が遠い場合の例であり、相関値ｆ（ｎ）が遠距離側で極小値になっていることが分かる。
【００８４】
図１０は、以上の測距部４４による測距動作の流れを示している。測距部４４は、広角用の撮像系１０Ａと望遠用の撮像系１０Ｂとからのそれぞれの撮像信号を、図示しない画像メモリに画素データとして一時的に格納する。そして、それら各撮像系１０Ａ，１０Ｂの画素データを読み出す（ステップＳ１１，Ｓ１２）。このときに、図６（Ｂ）を用いて説明したように、広角側の画素データについては、画素データの間引きを行い、望遠側の画素データについては、画素データの間引きもしくは平均化を行う（ステップＳ１３）。そして、それら補正後の画素データを用いて、上述の相関演算を行い（ステップＳ１４）、測定対象となる主被写体までの距離を算出する（ステップＳ１５）。
【００８５】
次に、パララックス補正部４５によるパララックス補正の動作について説明する。
【００８６】
図１２は、各撮像系１０Ａ，１０Ｂ，１０Ｃの位置の違いにより発生するパララックス（被写体像のずれ）の発生の原理を示している。ここでは、画角θ１の広角用の撮像レンズ２５Ａ、画角θ２の望遠用の撮像レンズ２５Ｂ、および画角θ３の中間用の撮像レンズ２５Ｃが、右側から順に配置されている例を図示している。
【００８７】
このような光学系配置の場合、各撮像レンズ２５Ａ，２５Ｂ，２５Ｃ間で光軸１００Ａ，１００Ｂ，１００Ｃにずれが生じる。このため、各レンズで撮影される被写体像の中心位置がずれ、各レンズ間で被写体像のずれが生ずる。この被写体像のずれは、相対的に被写体距離が近いほど大きく発生する。すなわち、図１２における３つの被写体位置９０Ｔ，９０Ｍ，９０Ｗでは、被写体が遠方の位置９０Ｔにある場合には、被写体の撮影範囲全体に対して光軸のずれ量が相対的に小さいので、各レンズ間での被写体像のずれは比較的小さい。一方、被写体が近い位置９０Ｗにある場合には、被写体の撮影範囲全体に対して光軸のずれ量が相対的に大きくなるので、各レンズ間での被写体像のずれが相対的に大きくなる。
【００８８】
このようにパララックスの発生は、被写体距離が近いほど大きく発生するので、被写体距離に応じてパララックスの補正を行うことが望ましい。また、本実施の形態では、各撮像系１０Ａ，１０Ｂ，１０Ｃを切り替えて撮影倍率を変えるため、撮影倍率に応じてパララックスが発生する。次に、この撮影倍率に応じたパララックスの補正について説明する。
【００８９】
図１３（Ａ），（Ｂ），（Ｃ）は、各撮像系１０Ａ，１０Ｂ，１０Ｃに光軸１００のずれがなく、理想的なズーム撮影が行われた場合の被写体９０の見え方を模式的に示している。ここでは、広角用の撮像系１０Ａによる光学像を標準（撮影倍率の基準）とし、その画像に対して撮影倍率２倍に達する前までは電子ズームを行い（図１３（Ａ））、撮影倍率２倍からは中間用の撮像系１０Ｃに切り替えて、撮影倍率３倍に達する前までは電子ズームを行い（図１３（Ｂ））、さらに撮影倍率３倍からは望遠用の撮像系１０Ｂに切り替える（図１３（Ｃ））ものとする。図１３（Ａ）において、１０１Ｗ−１は、広角用の撮像系１０Ａによる標準倍率での撮影範囲を示し、１０１Ｗ−２は、電子ズームによる撮影倍率２倍での撮影範囲を示している。図１３（Ｂ）において、１０１Ｍ−１は、中間用の撮像系１０Ｃによる撮影倍率２倍での撮影範囲を示し、１０１Ｍ−２は、電子ズームによる撮影倍率３倍での撮影範囲を示している。図１３（Ｃ）において、１０１Ｔは、望遠用の撮像系１０Ｂによる撮影倍率３倍での撮影範囲を示している。
【００９０】
このように、各撮像系１０Ａ，１０Ｂ，１０Ｃ間に光軸１００のずれがない場合、各撮影倍率で被写体中心１１０と光軸１００とが一致しているので、各撮影倍率間でパララックスは発生しない。
【００９１】
しかしながら、実際には、各撮像系１０Ａ，１０Ｂ，１０Ｃの光軸１００Ａ，１００Ｂ，１００Ｃにずれがあるため、各撮影倍率間で基準の被写体中心１１０と各レンズで撮影される被写体像の中心位置がずれ、各レンズ間で被写体像のずれが生ずる。
【００９２】
図１４（Ａ），（Ｂ），（Ｃ）は、撮影倍率の違い（撮像系の違い）で発生するパララックスの発生とその補正の概念を模式的に示している。撮影倍率の切り替え動作は、図１３（Ａ），（Ｂ），（Ｃ）の場合と同様とする。図１４（Ａ）において、１０２Ｗ−１は、広角用の撮像系１０Ａによる標準倍率での撮影範囲を示し、１０２Ｗ−２は、電子ズームによる撮影倍率２倍での撮影範囲を示している。図１４（Ｂ）において、１０２Ｍ−１は、中間用の撮像系１０Ｃによる撮影倍率２倍での撮影範囲を示し、１０２Ｍ−２は、電子ズームによる撮影倍率３倍での撮影範囲を示している。図１４（Ｃ）において、１０２Ｔは、望遠用の撮像系１０Ｂによる撮影倍率３倍での撮影範囲を示している。
【００９３】
各光軸１００Ａ，１００Ｂ，１００Ｃの位置関係は、図１２に示した状態に対応しているものとする。この場合、望遠側の撮像系１０Ｂの光軸１００Ｂが、他の光軸１００Ａ，１００Ｃに対して中心に位置しているので、望遠側の状態（図１４（Ｃ））を基準に考える。広角側の状態（図１４（Ａ））では、広角側の光軸１００Ａが、望遠側の光軸１００Ｂに対して右側に位置しているので、基準の被写体中心１１０の位置が左側にずれることになる。このようなパララックスを補正するために、図示したように、その撮影画像の右側の領域を、光軸１００Ａのずれ量に応じてパララックス補正領域１０３Ｗとして切り取るような画像補正を行う。このような補正を行うことで、その補正後の画像中心は、本来の被写体中心１１０と一致することになり、これにより広角側でのパララックスが補正される。
【００９４】
逆に、中間の状態（図１４（Ｂ））では、光軸１００Ｃが、望遠側の光軸１００Ｂに対して左側に位置しているので、基準の被写体中心１１０の位置が右側にずれることになる。このようなパララックスを補正するために、図示したように、その撮影画像の左側の領域を、光軸１００Ｃのずれ量に応じてパララックス補正領域１０３Ｍとして切り取るような画像補正を行う。このような補正を行うことで、その補正後の画像中心は、本来の被写体中心１１０と一致することになり、これにより中間倍率でのパララックスが補正される。
【００９５】
このように、画像を一部切り取るような補正を行うために、実際の撮影範囲は一般的な撮影範囲よりも大きめに設定しておくことが望ましい。すなわち、補正後の画像の大きさが、一般的な撮影範囲による画像の大きさと同じになるように、あらかじめ撮影範囲を大きめに設定しておく必要がある。このように撮影範囲を大きめに設定しているため、望遠側の状態（図１４（Ｃ））では、撮影画像の両側の領域を、パララックス補正領域１０３Ｍとして切り取るような画像補正を行う。
【００９６】
なお、上述したようにパララックスの大きさは、被写体距離にも関係しているので、パララックス補正領域１０３Ｗ，１０３Ｍ，１０３Ｔの大きさは、被写体距離に応じて変えることが好ましい。
【００９７】
次に、図１１を参照しながら、以上の測距動作およびパララックス補正動作を伴う撮影動作の全体的な流れを説明する。
【００９８】
ここでは、初期の撮影倍率が広角端、すなわち広角用の撮像系１０Ａによる初期の光学倍率に設定されており（ステップＳ２１）、その状態からズーム操作部１１が操作され（ステップＳ２２；Ｙ）、そのズーム操作部１１の操作に応じて撮影倍率を広角側から望遠側へと変えて撮影する場合を例に説明する。初期状態でズーム操作部１１が操作されていない場合には（ステップＳ２２；Ｎ）、初期の撮影倍率が維持される。
【００９９】
ズーム操作部１１が操作されると（ステップＳ２２；Ｙ）、測距部４４による測距動作を開始する（ステップＳ２３）。測距部４４は、あらかじめ図示しないメモリ内に用意されているいくつかの距離の値の中から、測定結果に最も近い値を主被写体距離の値として呼び出す（ステップＳ２４）。測距部４４による測定結果の情報は、例えば測距部４４内の図示しないメモリや、パララックス補正部４５内の図示しないメモリなどに格納される。
【０１００】
またＤＳＰ４０は、ズーム操作部１１の操作に応じて電子ズーム処理を実行する（ステップＳ２５）。電子ズーム処理後の撮影倍率の情報は、パララックス補正部４５に出力され、例えばパララックス補正部４５内の図示しないメモリなどに格納され、パララックス補正時に随時呼び出される（ステップＳ２６）。パララックス補正部４５は、測距部４４による測定結果の情報と現在の撮影倍率の情報とに基づいて、図１４（Ａ）に示したような広角用のパララックス補正領域１０３Ｗを設定し、撮影画像を補正してパララックス補正を行う（ステップＳ２７）。ズーム操作部１１の操作が継続していない場合（ステップＳ２８；Ｎ）には、これで待機状態となる（ステップＳ４３）。
【０１０１】
一方、ズーム操作部１１の操作が継続している場合（ステップＳ２８；Ｙ）には、ＤＳＰ４０は、広角から中間用の撮像系１０Ｃに切り替える必要があるか否か判断し（ステップＳ２９）、切り替える必要がない場合（Ｎ）には、ステップＳ２３に戻り、広角用の撮像系１０Ａによる同様の撮影動作を行う。
【０１０２】
中間用の撮像系１０Ｃに切り替える必要がある場合（ステップＳ２９；Ｙ）、すなわち撮影倍率が中間域に達した場合には、ＤＳＰ４０は、中間用の撮像系１０Ｃによる撮影に切り替える。中間域での撮影動作（ステップＳ３０〜ステップＳ３６）は、基本的に広角側でのステップＳ２３〜ステップＳ２９の動作と同様である。すなわち、広角側と同様に、測距部４４による測距動作を行い（ステップＳ３０，Ｓ３１）、またＤＳＰ４０が、ズーム操作部１１の操作に応じた電子ズーム処理を実行する（ステップＳ３２）。そして、パララックス補正部４５が、測距部４４による測定結果の情報と現在の撮影倍率の情報とに基づいて、図１４（Ｂ）に示したような中間用のパララックス補正領域１０３Ｍを設定し、撮影画像を補正してパララックス補正を行う（ステップＳ３４）。ここで、ズーム操作部１１の操作が継続していない場合（ステップＳ３５；Ｎ）には、これで待機状態となる（ステップＳ４３）。
【０１０３】
一方、ズーム操作部１１の操作が継続している場合（ステップＳ３５；Ｙ）には、ＤＳＰ４０は、中間用から望遠用の撮像系１０Ｂに切り替える必要があるか否か判断し（ステップＳ３６）、切り替える必要がない場合（Ｎ）には、ステップＳ３０に戻り、中間用の撮像系１０Ｃによる同様の撮影動作を行う。
【０１０４】
望遠用の撮像系１０Ｂに切り替える必要がある場合（ステップＳ３６；Ｙ）、すなわち撮影倍率が望遠側に達した場合には、ＤＳＰ４０は、望遠用の撮像系１０Ｂによる撮影に切り替える。望遠側での撮影動作（ステップＳ３７〜ステップＳ４１）は、基本的に広角側でのステップＳ２３〜ステップＳ２７の動作と同様である。すなわち、広角側と同様に、測距部４４による測距動作を行い（ステップＳ３７，Ｓ３８）、またＤＳＰ４０が、ズーム操作部１１の操作に応じた電子ズーム処理を実行する（ステップＳ３９）。そして、パララックス補正部４５が、測距部４４による測定結果の情報と現在の撮影倍率の情報とに基づいて、図１４（Ｃ）に示したような望遠用のパララックス補正領域１０３Ｔを設定し、撮影画像を補正してパララックス補正を行う（ステップＳ４１）。なお、図示を省略しているが、ステップＳ４１の次に、ステップＳ２８と同様、ズーム操作部１１の操作が継続しているか否かの判断ステップがあっても良い。撮影倍率が望遠端（最高倍率）にまで達した場合（ステップＳ４２）には、これで待機状態となる（ステップＳ４３）。
【０１０５】
なお、図１１で示した処理の流れは一例であり、各処理を行うタイミングなどは、これに限定されるものではない。例えば測距を行うタイミングに関しては、所定間隔で定期的に測距を行うようなことも可能である。
【０１０６】
以上説明したように、本実施の形態によれば、互いに異なる撮影画角で撮影された各撮像系１０Ａ，１０Ｂ，１０Ｃによる撮影画像が、画角に関して互いに同一の撮影条件で撮影された画像となるように、各撮像系１０Ａ，１０Ｂ，１０Ｃからの各撮像信号を補正し、補正後の各撮像信号に基づいて、各撮像系１０Ａ，１０Ｂ，１０Ｃによる各撮影画像同士の相関演算を行い、その相関値に基づいて、被写体までの距離を算出するようにしたので、撮影画角の異なる複数の撮像系１０Ａ，１０Ｂ，１０Ｃを利用して、精度の高い測距を行うことができる。
【０１０７】
また、算出された距離の情報に基づいて、各撮像系間に生ずるパララックスが補正されるように、各撮像系１０Ａ，１０Ｂ，１０Ｃにより得られた各撮影画像の補正を行うようにしたので、撮影画角の異なる複数の撮像系間に生ずるパララックスの補正を、簡単な構成で実現できる。
【０１０８】
［変形例１］
以上の実施の形態では、各撮像レンズ２５Ａ，２５Ｂ，２５Ｃとして、焦点距離の異なる単焦点レンズを使用すると共に、各センサ受光部２１Ａ，２１Ｂ，２１Ｃとして、画素数および画素サイズが同一の撮像素子を用いた場合について説明した。
【０１０９】
図１５は、上記実施の形態で使用した撮像光学系を模式的に示している。なお以下では、説明を簡略化するために広角用と望遠用の２つの撮像系１０Ａ，１０Ｂの構成を代表して説明する。
【０１１０】
撮像レンズ２５Ａは、広角用の単焦点レンズであり、撮像レンズ２５Ｂは、望遠用の単焦点レンズである。広角用の撮像レンズ２５Ａの焦点距離ｆｗは、望遠用の撮像レンズ２５Ｂの焦点距離ｆｔに比べて小さい。広角用のセンサ受光部２１Ａの画素ピッチＳｗ１および全体の画素サイズＳｗは、望遠用のセンサ受光部２１Ｂの画素ピッチＳｔ１および全体の画素サイズＳｔと同じである。各センサ受光部２１Ａ，２１Ｂの画素数Ｍｗ，Ｍｔも同じである。すなわち、広角用の撮像系１０Ａと望遠用の撮像系１０Ｂとで以下のような関係がある。
【０１１１】
広角系：望遠系
画角      ；θ１＞θ２
焦点距離  ；ｆｗ＜ｆｔ
画素数    ；Ｍｗ＝Ｍｔ
画素ピッチ；Ｓｗ１＝Ｓｔ１
画素サイズ；Ｓｗ＝Ｓｔ
【０１１２】
しかしながら、画素サイズが異なる撮像素子を用いることにより、各撮像レンズ２５Ａ，２５Ｂ，２５Ｃとして、同一の焦点距離の単焦点レンズを用いて同様の撮像系を構成することが可能である。
【０１１３】
図１６は、本変形例に係る撮像系を示すものである。この撮像系は、全体の画素数Ｍｗ，Ｍｔを同じにしたまま、広角用のセンサ受光部７２Ｗの画素ピッチＳｗ１，画素サイズＳｗを、望遠用のセンサ受光部７２Ｔの画素ピッチＳｔ１，画素サイズＳｔに比べて大きくしたものである。
【０１１４】
このようなセンサ受光部７２Ｗ，７２Ｔを用いることで、広角系および望遠系で撮像レンズ７１Ｗ，７１Ｔの焦点距離ｆｗ，ｆｔを同じにしたとしても、各センサ受光部７２Ｗ，７２Ｔでは、互いに画角の異なる被写体像が得られ、結果的に図１５に示した光学系と等価的な撮像系を実現できる。すなわち、各センサ受光部７２Ｗ，７２Ｔの画素数Ｍｗ，Ｍｔが同じであれば、センサ受光部として、相対的に画素サイズの大きいものを用いた場合には、相対的に画素サイズの小さいものを用いた場合に比べて、広角の被写体像が得られる。電子ズーム処理についても、図１５の撮像系と同様に併用することができる。この変形例では、広角用の撮像系と望遠用の撮像系とで以下のような関係がある。
【０１１５】
広角系：望遠系
画角      ；θ１＞θ２
焦点距離  ；ｆｗ＝ｆｔ
画素数    ；Ｍｗ＝Ｍｔ
画素ピッチ；Ｓｗ１＞Ｓｔ１
画素サイズ；Ｓｗ＞Ｓｔ
【０１１６】
なお、図１６に示した撮像系において、さらに撮像レンズ７１Ｗ，７１Ｔの焦点距離ｆｗ，ｆｔを異ならせることも可能である（ｆｗ＜ｆｔにする）。すなわち、焦点距離の異なる単焦点レンズと、画素サイズの異なる撮像素子とを組み合わせた撮像系であっても良い。
【０１１７】
この変形例によれば、互いに画素サイズが異なる複数の撮像素子を用い、それらの撮像素子による撮像信号を、選択的に切り替えて出力することにより、焦点距離の異なる複数の単焦点レンズを用いた場合と同様に、複数の撮影倍率での撮影を行うことが可能となる。また、画素サイズの異なる撮像素子を用いていることで、撮像レンズとして同一の単焦点レンズを使用可能であり、撮像レンズの構成の共通化を図ることができる。
【０１１８】
本変形例に係る撮像系を用いた場合においても、測距部４４による測距を行う前段階として画像の補正を行う必要がある。
【０１１９】
図１７（Ａ）は、本変形例に係る撮像系により、同一の被写体９０を撮影している状態を模式的に示している。本変形例においても、広角用の撮像系と望遠用の撮像系とで、異なる画角θ１，θ２での被写体像がセンサ受光部７２Ｗ，７２Ｔに結像され、撮像信号として出力される。本変形例においても、２つの撮影画像を示す各撮像信号のずれ量に基づいて測距を行うためには、２つの撮像系による各撮影画像が、画角に関して互いに同一の撮影条件で撮影された画像となっている必要がある。このため、測距部４４では、各撮影画像が、画角に関して互いに同一の撮影条件で撮影された画像となるように画像の補正を行う。
【０１２０】
図１７（Ｂ）は、本変形例における画像の補正の概念を模式的に示したものである。測距部４４は、図１７（Ｂ）に示したように、広角側のセンサ受光部７２Ｗからの撮像信号に対しては、望遠側の撮影画角θ２と同等となるように、信号の間引き（画素領域の縮小）を行う。また、望遠側のセンサ受光部７２Ｔからの撮像信号に対しては、信号間引き後における広角側の画像の大きさ、解像度に合わせるために、画素の平均化を行う。
【０１２１】
その他の本変形例における測距動作やパララックス補正動作については、上記実施の形態と同様である。
【０１２２】
［変形例２］
以下、変形例１と同様に、広角用と望遠用の２つの撮像系の構成を代表して説明する。
【０１２３】
図１８（Ａ）は、本変形例に係る撮像系により、同一の被写体９０を撮影している状態を模式的に示している。本変形例の撮像系は、センサ受光部として、広角用と望遠用とで画素数の異なる撮像素子を用いたものである。すなわち、画素ピッチＳｗ１，Ｓｔ１を同一にしたまま、広角用のセンサ受光部７３Ｗの画素数Ｍｗを、望遠用のセンサ受光部７３Ｔの画素数Ｍｔよりも多くしたものである。画素ピッチが同一であるから、画素数が多い分、全体の画素サイズは広角用のセンサ受光部７３Ｗの方が大きくなる。
【０１２４】
このようなセンサ受光部７３Ｗ，７３Ｔを用いることで、広角系および望遠系で撮像レンズ７１Ｗ，７１Ｔの焦点距離ｆｗ，ｆｔを同じにしたとしても、各センサ受光部７３Ｗ，７３Ｔでは、互いに画角の異なる被写体像が得られ、結果的に図１５に示した光学系と等価的な撮像系を実現できる。電子ズーム処理についても、図１５の撮像系と同様に併用することができる。この変形例では、広角用の撮像系と望遠用の撮像系とで以下のような関係がある。
【０１２５】
広角系：望遠系
画角      ；θ１＞θ２
焦点距離  ；ｆｗ＝ｆｔ
画素数    ；Ｍｗ＞Ｍｔ
画素ピッチ；Ｓｗ１＝Ｓｔ１
画素サイズ；Ｓｗ＞Ｓｔ
【０１２６】
本変形例に係る撮像系を用いた場合においても、測距部４４による測距を行う前段階として画像の補正を行う必要がある。
【０１２７】
すなわち、図１８（Ａ）に示したように、本変形例においても、広角用の撮像系と望遠用の撮像系とで、異なる画角θ１，θ２での被写体像がセンサ受光部７３Ｗ，７３Ｔに結像され、撮像信号として出力される。本変形例においても、２つの撮影画像を示す各撮像信号のずれ量に基づいて測距を行うためには、２つの撮像系による各撮影画像が、画角に関して互いに同一の撮影条件で撮影された画像となっている必要がある。このため、測距部４４では、各撮影画像が、画角に関して互いに同一の撮影条件で撮影された画像となるように画像の補正を行う。
【０１２８】
図１８（Ｂ）は、本変形例における画像の補正の概念を模式的に示したものである。測距部４４は、図１８（Ｂ）に示したように、広角側のセンサ受光部７３Ｗからの撮像信号に対しては、望遠側の撮影画角θ２と同等となるように、信号の間引き（画素領域の縮小）を行う。望遠側のセンサ受光部７３Ｔからの撮像信号は、基本的にそのままで良い。
【０１２９】
その他の本変形例における測距動作やパララックス補正動作については、上記実施の形態と同様である。
【０１３０】
なお、本発明は、上記実施の形態および変形例に限定されず種々の変形実施が可能である。例えば、上記実施の形態では、カメラ付き携帯電話に本発明を適用した場合について説明したが、本発明は、ＰＤＡ等、その他の情報端末機器や、デジタルスチルカメラ等にも適用可能である。
【０１３１】
また、上記実施の形態では、各撮像系１０Ａ，１０Ｂ，１０Ｃによるすべての撮像信号に対して、電子ズーム処理を行う場合について説明したが、各撮像系１０Ａ，１０Ｂ，１０Ｃのうち、一部のものに対してのみ電子ズーム処理を行うようにしても良い。例えば、焦点距離ｆが３５ｍｍ，５０ｍｍ，７０ｍｍの３つの単焦点レンズを撮像レンズとして使用する場合において、焦点距離ｆが３５ｍｍ，５０ｍｍの２つの単焦点レンズによって得られた撮像信号に対してのみ、電子ズーム処理を行うようにすることも可能である。
【０１３２】
また、上記実施の形態では、測距の結果である距離の情報をパララックスの補正に利用する例について説明したが、距離の情報をその他のものに利用することも可能である。例えばフラッシュ装置を備えた撮像装置において、フラッシュの光量制御に利用するようにしても良い。また、例えばオートフォーカス機能を備えた撮像装置において、オートフォーカス制御に利用するようにしても良い。
【図面の簡単な説明】
【０１３３】
【図１】本発明の一実施の形態に係る撮像装置を用いた情報端末機器の一構成例を示す外観図である。
【図２】図１に示した情報端末機器における信号処理回路を示すブロック図である。
【図３】図１に示した情報端末機器に搭載される撮像レンズの概略構成を示す図である。
【図４】図１に示した情報端末機器において、２つの撮像レンズを用いた場合における、各撮像レンズと撮影倍率との関係を説明するための図である。
【図５】図１に示した情報端末機器において、３つの撮像レンズを用いた場合における、各撮像レンズと撮影倍率との関係を説明するための図である。
【図６】測距を行うための画像補正の概念を模式的に示した説明図である。
【図７】被写体が近距離にある場合のセンサ出力の一例を示す図である。
【図８】被写体が遠距離にある場合のセンサ出力の一例を示す図である。
【図９】測距における相関演算の結果の一例を示す図である。
【図１０】測距の動作を説明するための流れ図である。
【図１１】測距動作およびパララックス補正動作を伴う全体的な撮影動作を説明するための流れ図である。
【図１２】パララックス発生の原理を示す説明図である。
【図１３】各撮像系の光軸が一致している場合の被写体の見え方を示した説明図である。
【図１４】各撮像系の光軸が一致していない場合の被写体の見え方、およびパララックスの補正の概念を模式的に示した説明図である。
【図１５】焦点距離の異なる撮像レンズと画素サイズの同じ撮像素子とを用いた撮像光学系を説明するための模式図である。
【図１６】焦点距離の同じ撮像レンズと画素サイズの異なる撮像素子とを用いた、第１の変形例に係る撮像系を説明するための模式図である。
【図１７】第１の変形例に係る撮像系を用いて測距を行うための画像補正の概念を模式的に示した説明図である。
【図１８】第２の変形例に係る撮像系を用いて測距を行うための画像補正の概念を模式的に示した説明図である。
【符号の説明】
【０１３４】
５…表示部、１０（１０Ａ，１０Ｂ，１０Ｃ）…撮像系、１１…ズーム操作部、２０Ａ，２０Ｂ，２０Ｃ…センサ部、２１Ａ，２１Ｂ，２１Ｃ…センサ受光部、２５Ａ，２５Ｂ，２５Ｃ…撮像レンズ、２６…切替部、３０…ＤＳＰ部、４０…ＤＳＰ、４３…切替制御部、４４…測距部、４５…パララックス補正部、５１…表示パネル。
【図１】
2005099265.tif 000003
【図２】
2005099265.tif 000004
【図３】
2005099265.tif 000005
【図４】
2005099265.tif 000006
【図５】
2005099265.tif 000007
【図６】
2005099265.tif 000008
【図７】
2005099265.tif 000009
【図８】
2005099265.tif 000010
【図９】
2005099265.tif 000011
【図１０】
2005099265.tif 000012
【図１１】
2005099265.tif 000013
【図１２】
2005099265.tif 000014
【図１３】
2005099265.tif 000015
【図１４】
2005099265.tif 000016
【図１５】
2005099265.tif 000017
【図１６】
2005099265.tif 000018
【図１７】
2005099265.tif 000019
【図１８】
2005099265.tif 000020