(57)【要約】【課題】画像復元にかかる負荷を軽減でき、シャインプルーフによる画像歪みを抑止でき、深度を大幅に拡大することが可能な撮像装置を提供する。【解決手段】収差を発生させる収差制御機能を有する収差制御素子または収差制御面を含む収差制御光学系１１０と、光電変換機能を有する撮像素子１２０と、画像処理部１３０と、を有し、収差制御光学系と撮像素子において、撮像面ＩＳとレンズ主面ＭＳを平行ではない配置にする。【選択図】図１
2011133593.tif 000002
【特許請求の範囲】
【請求項１】
収差を発生させて光学的伝達関数（ＯＴＦ）を変調させる収差制御機能を有する収差制御部を含む収差制御光学系と、
前記収差制御光学系を通過した被写体像を撮像する撮像素子と、を有し、
前記収差制御光学系の光軸が前記撮像素子の撮像面に対して非直交である
撮像装置。
【請求項２】
前記撮像素子から出力される画像信号に対して画像処理を行う画像処理部を有し、
前記画像処理部は、
少なくとも収差制御機能によって変調された光学的伝達関数（ＯＴＦ）の復元処理を行う
請求項１に記載の撮像装置。
【請求項３】
前記画像処理部は
画像の歪みの補正をさらに行う
請求項２に記載の撮像装置。
【請求項４】
前記画像処理部は、
光学的伝達関数（ＯＴＦ）の復元処理を行った画像に歪みの補正を行う
請求項３に記載の撮像装置。
【請求項５】
前記収差制御素部は、
通常光学系のレンズ面に収差制御面を形成、もしくは通常光学系のレンズとは別の光学系である収差制御素子によって形成される
請求項１から４のいずれか一に記載の撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、深度拡張光学系を備えた撮像装置に関するものである。
【背景技術】
【０００２】
近年急峻に発展を遂げている情報のデジタル化に相俟って映像分野においてもその対応が著しい。
特に、デジタルカメラに象徴されるように撮像面は従来のフィルムに変わって固体撮像素子であるＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ），ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサが使用されているのが大半である。
【０００３】
このように、撮像素子にＣＣＤやＣＭＯＳセンサを使った撮像レンズ装置は、被写体の映像を光学系により光学的に取り込んで、撮像素子により電気信号として抽出するものであり、デジタルスチルカメラの他、ビデオカメラ、デジタルビデオユニット、パーソナルコンピュータ、携帯電話機、携帯情報端末（ＰＤＡ：Ｐｅｒｓｏｎａｌ  ＤｉｇｉｔａｌＡｓｓｉｓｔａｎｔ）、画像検査装置、自動制御用産業カメラ等に用いられている。
【０００４】
図１９は、一般的な撮像レンズ装置の構成および光束状態を模式的に示す図である。
この撮像レンズ装置１は、光学系２とＣＣＤやＣＭＯＳセンサ等の撮像素子３とを有する。
光学系は、物体側レンズ２１，２２、絞り２３、および結像レンズ２４を物体側（ＯＢＪＳ）から撮像素子３側に向かって順に配置されている。
【０００５】
撮像レンズ装置１においては、図１９に示すように、ベストフォーカス面を撮像素子面上に合致させている。
図２０（Ａ）〜（Ｃ）は、撮像レンズ装置１の撮像素子３の受光面でのスポット像を示している。
【０００６】
また、位相板により光束を規則的に分散し、デジタル処理により復元させ被写界深度の深い画像撮影を可能にする等の撮像装置が提案されている（たとえば非特許文献１，２、特許文献１〜５参照）。
また、伝達関数を用いたフィルタ処理を行うデジタルカメラの自動露出制御システムが提案されている（たとえば特許文献６参照）。
【０００７】
これらの技術深度拡張技術としては、たとえばカメラにおいてＦ値を絞ることで被写界深度を広げて固定ピントとしているものがある。
加えて、撮像面とレンズ主面を平行ではないように配置し、近距離にあるものと遠距離にあるものに同時に焦点をあわせるシャインプルーフの原理というものが存在する。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】ＵＳＰ６，０２１，００５
【特許文献２】ＵＳＰ６，６４２，５０４
【特許文献３】ＵＳＰ６，５２５，３０２
【特許文献４】ＵＳＰ６，０６９，７３８
【特許文献５】特開２００３−２３５７９４号公報
【特許文献６】特開２００４−１５３４９７号公報
【非特許文献】
【０００９】
【非特許文献１】“Wavefront Coding;jointly optimized optical and digital imaging systems”,Edward R.Dowski,Jr.,Robert H.Cormack,Scott D.Sarama.
【非特許文献２】“Wavefront Coding;A modern method of achieving high performance and/or low cost imaging systems”,Edward R.Dowski,Jr.,Gregory E.Johnson.
【発明の概要】
【発明が解決しようとする課題】
【００１０】
上記のように、深度拡張に関していくつかの実現方法が存在する。
ただし、実際にはこれらの技術には問題があり、カメラとしての性能を維持しながら、単一の技術で深度を拡張していくのは困難である。
【００１１】
たとえば、特許文献５に開示された技術において、位相面を用いた深度拡張では、深度拡張量を増やすと点像強度分布（ＰＳＦ：Ｐｏｉｎｔ−Ｓｐｒｅａｄ−Ｆｕｎｃｔｉｏｎ）も同時にボケが広がってしまい画像復元に大きな負荷がかかる。
【００１２】
シャインプルーフの原理では、深度の拡張量はレンズの主平面と撮像面のチルトに起因するので、画像が台形状に歪んでいってしまう。
【００１３】
本発明は、画像復元にかかる負荷を軽減でき、シャインプルーフによる画像歪みを抑止でき、深度を大幅に拡大することが可能な撮像装置を提供することにある。
【課題を解決するための手段】
【００１４】
本発明の第１の観点の撮像装置、収差を発生させて光学的伝達関数（ＯＴＦ）を変調させる収差制御機能を有する収差制御部を含む収差制御光学系と、前記収差制御光学系を通過した被写体像を撮像する撮像素子と、を有し、前記収差制御光学系の光軸が前記撮像素子の撮像面に対して非直交である。
【００１５】
好適には、前記撮像素子から出力される画像信号に対して画像処理を行う画像処理部を有し、前記画像処理部は、少なくとも収差制御機能によって変調された光学的伝達関数（ＯＴＦ）の復元処理を行う。
【００１６】
好適には、画像処理部は、画像の歪みの補正をさらに行う。
【００１７】
好適には、前記画像処理部は、光学的伝達関数（ＯＴＦ）の復元処理を行った画像に歪みの補正を行う。
【００１８】
好適には、前記収差制御素部は、通常光学系のレンズ面に収差制御面を形成、もしくは通常光学系のレンズとは別の光学系である収差制御素子によって形成される。
【発明の効果】
【００１９】
本発明によれば、画像復元にかかる負荷を軽減でき、シャインプルーフによる画像歪みを抑止でき、深度を大幅に拡大することができる。
【図面の簡単な説明】
【００２０】
【図１】本発明の実施形態に係る撮像装置の構成例を示すブロック図である。
【図２】本実施形態に係る収差制御光学系を形成する撮像レンズユニットの基本構成を示す図である。
【図３】本実施形態に係る収差制御光学系の球面収差発生量について説明するための図であって、撮像素子(センサ)を固定したときのセンサとＰＳＦとの関係を示す図である。
【図４】本実施形態に係る収差制御光学系の球面収差発生量について説明するための図であって、収差制御光学系を固定したときのセンサとＰＳＦとの関係を示す図である。
【図５】通常光学系および本実施形態に係る収差制御光学系のディフォーカスに対するＭＴＦの状態を示す図である。
【図６】高周波のＯＴＦ変動を抑えた収差制御光学系における任意の周波数でディフォーカスに対するＭＴＦが２分できることを示す図である。
【図７】低周波のＯＴＦ変動を抑えた収差制御光学系における任意の周波数でディフォーカスに対するＭＴＦが２分できることを示す図である。
【図８】絞り径の違いによる球面収差とディフォーカスＭＴＦ、および本光学系と通常光学系と深度を比較して示す図である。
【図９】球面収差カーブにおける変曲点の数の違いによる球面収差とディフォーカスＭＴＦを比較して示す図である。
【図１０】本実施形態において、撮像面と収差制御光学系の主面を傾けて固定することを補足して示す図である。
【図１１】シャルインプルーフの原理ついて説明するための図である。
【図１２】通常光学系のピント面（物体面）と被写界深度を示す図である。
【図１３】収差制御光学系のピント面（物体面）と被写界深度を示す図である。
【図１４】シャインプルーフ光学系のピント面（物体面）と被写界深度を示す図である。
【図１５】シャインプルーフと収差制御光学系を組み合わせた時のピント面（物体面）と被写界深度を示す図である。
【図１６】画像処理部のＰＳＦの復元に関する図である。
【図１７】画像処理部の台形歪み補正に関する図である。
【図１８】本発明の実施形態に係る撮像装置を最も適している監視カメラに応用した例を、通常光学系の場合を比較例として示す図である。
【図１９】一般的な撮像レンズ装置の構成および光束状態を模式的に示す図である。
【図２０】図１９の撮像レンズ装置の撮像素子の受光面でのスポット像を示す図であって、（Ａ）は焦点が０．２ｍｍずれた場合（Ｄｅｆｏｃｕｓ＝０．２ｍｍ）、（Ｂ）が合焦点の場合（Ｂｅｓｔ  ｆｏｃｕｓ）、（Ｃ）が焦点が−０．２ｍｍずれた場合（Ｄｅｆｏｃｕｓ＝−０．２ｍｍ）の各スポット像を示す図である。
【発明を実施するための形態】
【００２１】
以下、本発明の実施形態を添付図面に関連付けて説明する。
【００２２】
図１は、本発明の実施形態に係る撮像装置の構成例を示すブロックである。
【００２３】
本実施形態に係る撮像装置１００は、後で詳述するように、光学系に収差制御面、または収差制御素子を適用してボケの程度をコントロールし、そのボケは画像処理により復元する。本実施形態においては、収差制御素子により収差（本実施形態では非点収差）を意図的に発生させる。
本実施形態においては、収差制御光学系の光軸が撮像素子の撮像面に対して非直交である。
本実施形態に収差制御光学系において、撮像面とレンズ主面が平行ではない関係となるような配置構成が採用されている。
このとき、撮像面ＩＳ・レンズ主面ＭＳ・物面ＯＳが同一直線上で交わる。物面ＯＳがレンズ主面ＭＳと平行でないため、近距離にあるものと遠距離にあるものに同時に焦点を合わせることができる。
このシステムは一般的に、シャインプルーフカメラと呼ばれるが、本実施形態は一般的なシャインプルーフカメラに対して、収差制御光学系を用いることでさらに深度の拡張を図る。
なお、収差制御光学系を通ったＰＳＦは、固体撮像素子上で２画素以上に広がり、広がったＰＳＦを画像処理で復元を行う。
そして、本実施形態においては、画像処理において、光学的伝達関数（ＯＴＦ）の復元処理、換言するとＰＳＦの復元処理を行った画像に対して歪み、いわゆる台形歪みの補正を行う。
すなわち、本実施形態においては、収差制御光学系によってボケたＰＳＦとシャインプルーフの原理によって発生する台形歪みは画像処理系にて補正することで良好な画像を得ることができる。
【００２４】
撮像装置１００は、図１に示すように、収差制御光学系１１０、撮像素子１２０、および画像処理部１３０を有している。
【００２５】
図２は、本実施形態に係る収差制御光学系を形成する撮像レンズユニットの基本構成を示す図である。
収差制御光学系１１０は、被写体物体ＯＢＪを撮影した像を撮像素子１２０に供給する。また、収差制御光学系１１０Ａは、物体側から順に、第１レンズ１１１、第１レンズ１１２、第３レンズ１１３、絞り１１４、第４レンズ１１５、第５レンズ１１６が配置されている。
本実施形態の収差制御光学系１１０は、第４レンズ１１５と第５レンズ１１６が接合されている。すなわち、本実施形態の収差制御光学系１１０のレンズユニットは、接合レンズを含んで構成されている。
【００２６】
そして、本実施形態の収差制御光学系１１０は、収差を意図的に発生させる収差制御機能を有する収差制御面を適用した光学系として構成されている。
本実施形態においては、球面収差のみを発生させるために、収差制御面を挿入する必要がある。なお、収差制御効果は別素子の収差制御素子を挿入しても良い。
その例を示すと図２のようになり、通常の光学系に収差制御面(第３レンズＲ２面)を含んだ形となっている。
ここでいう収差制御面とは、収差制御素子の持つ収差制御効果をレンズ面に内包したものをいう。好適には収差制御面１１３ａは絞り１１４に隣接していることが好ましい。
【００２７】
収差制御面は、ディフォーカスＭＴＦのピークを２分することでアウトフォーカスにおけるＯＴＦの変化を緩和する。
従来から提案されている位相変調面の形状では、一つのピント位置に対して被写界深度を拡張しているため、アウトフォーカスまでＯＴＦの変化をなくそうとするとボカシ量が大きくなってしまい、画像復元に要するフィルターサイズも大きくなってしまう。
これに対して、本実施形態に係る収差制御面は、ピントを分割することにより復元に要するフィルターサイズも抑えて良好な画質を得ることができる。ピークを分割するためには、球面収差に変曲点を持たせる必要がある。
収差制御光学系についてさらに詳述する。
【００２８】
本実施形態の収差制御光学系１１０Ａの収差特性は、絞り１１４の口径が変化しても深度拡張効果（機能）を有する。
ここで、収差制御光学系１１０Ａは、絞り２１４の口径を変化させることで複数のＦ値が選択可能であり、選択可能なＦ値のいずれにおいても、収差制御素子または収差制御面の効果により深度拡張を行うことが可能である。
本実施形態の収差制御光学系１１０Ａの収差特性は、絞り１１４の有効径内に複数（２つ以上）の変曲点を有する。
さらに、本実施形態の収差制御光学系１１０Ａの収差特性は、絞り１１４が開放の口径の場合に光線が通過する領域から収差制御機能による深度拡張効果を有する最小の絞り径の場合に光線が通過する領域を除く領域で一つ以上の変曲点を有する。
換言すると、本実施形態の収差制御光学系１１０Ａの収差特性は、深度拡張作用を期待されるＦ値の中で、最も明るいＦ値の時に光線が通過する収差制御面の領域と最も暗いＦ値の時に光線が通過する収差制御面の領域の間で、一つ以上の変曲点を有する。
【００２９】
本実施形態の収差制御光学系１１０Ａにおいては、収差制御機能を有する収差制御面を内包する収差制御光学系を用いてＰＳＦを２画素以上にまたがるようにし、所定の周波数において偽解像しない主像面シフト領域でディフォーカスに対するＭＴＦ特性が２つ以上のピークを持つ深度拡張光学系として構成される。
一般的な光波面変調機能を用いた深度拡張光学系ではＭＴＦ特性において１つのピークの裾野を広げて深度を拡張するが、これではそれと引き換えにＭＴＦ特性のピーク値が下がってしまう。
本実施形態においては、収差制御機能を用いてピークを複数持つようにすることで、ピーク値の低下を抑えつつ深度拡張を実現できる。
球面収差を適切に制御することで画像復元処理を施さなくても深度拡張することができる。
具体的には、本実施形態の収差制御光学系１１０Ａは、主に球面収差を発生させる収差制御素子、または収差制御面によりディフォーカスに対するＭＴＦのピークを複数に分ける（ここでは２分する）ことでアウトフォーカスにおけるＯＴＦの変化を制御でき、深度を拡張することができる。そして、ピークを分割させるために、球面収差に変曲点を持たせる。
上述したように、球面収差に２つ以上の変曲点を適切に持たせることで複数の絞り口径の選択に対し、深度拡張を実現することができる。
そして、上述したように、深度拡張作用を期待されるＦ値の中で、最も明るいＦ値の時に光線が通過する収差制御面の領域と最も暗いＦ値の時に光線が通過する収差制御面の領域の間で、ひとつ以上の変曲点を有することが望ましい。
この構成を採用することにより、Ｆ値を変化させた場合でも効率よく深度拡張作用を得られる。
【００３０】
以下、この収差制御光学系１１０Ａの特徴的な構成、機能についてさらに詳述する。
【００３１】
図３(Ａ)、(Ｂ)および図４(Ａ)，(Ｂ)は、本実施形態に係る収差制御光学系の球面収差発生量について説明するための図である。図３は撮像素子(センサ)を固定したときのセンサとＰＳＦとの関係を示し、図４は収差制御光学系を固定したときのセンサとＰＳＦとの関係を示している。
【００３２】
たとえば、撮像素子１２０はある画素ピッチを有するセンサであるとする。その場合に、本実施形態では、球面収差を発生させてＰＳＦを１画素ＰＸＬより大きくする必要がある。
図３（Ａ）および図４（Ａ）に示すように、１画素ＰＸＬの中にＰＳＦが納まってしまうサイズで球面収差を発生させてもそれは通常の光学系と同じである。通常光学系では一般的にピント位置の中心ＰＳＦのサイズが最小となる。
これに対して、本実施形態に係る収差制御光学系１１０Ａでは、図３（Ｂ）に示すように、ＰＳＦはアウトフォーカスに限らずピント位置までも１画素ＰＸＬに収まらないサイズに制御される。
【００３３】
次に、収差制御光学系に適した撮像素子（センサ）選定について説明する。
たとえばあるＰＳＦサイズを持った収差制御光学系があるとすると、図４（Ｂ）に示すように、センサの画素ピッチがＰＳＦのサイズより小さいものを選ぶことが好ましい。
仮に画素ピッチがＰＳＦより大きいものを選んだとすると通常光学系と同じとなってしまい、そこがピントとなってしまう。よって、その場合、収差制御光学系の球面収差の効果を有効に得ることができない。
【００３４】
図５（Ａ）〜（Ｃ）は、通常光学系および本実施形態に係る収差制御光学系のディフォーカスに対するＭＴＦの状態を示す図である。
図５（Ａ）は通常光学系のディフォーカスに対するＭＴＦの状態を示し、図５（Ｂ）は本実施形態に係る収差制御光学系のディフォーカスに対するＭＴＦの状態を示し、図５(Ｃ)は１つのピークを拡大したディフォーカスに対するＭＴＦの状態を示している。
【００３５】
通常の光学系では、図５（Ａ）に示すように、ピント位置が一つで中心にある。両サイドにある二つ目の山は落ちきって反転しているため、偽解像となる。
そのため、解像する領域は網掛けで示す主像面シフト領域ＭＳＡＲとなる。通常光学系の１つのピークを深度拡張すると、図５(Ｃ)に示すように、ＭＴＦは大きく劣化してしまう。
【００３６】
そこで、本実施形態に係る収差制御光学系のディフォーカスに対するＭＴＦでは、図５(Ｂ)に示すように、通常光学系において一つのピークＰＫ１であったのを２つのピークＰＫ１１、ＰＫ１２に分割させている。
ＭＴＦは若干劣化するが、深度は２つに分割したことによって２倍程度に伸びていて、さらにひとつのピークを深度拡張するより劣化を抑えていることがわかる。
【００３７】
図６（Ａ）〜（Ｃ）および図７（Ａ）〜（Ｃ）は、本実施形態の収差制御光学系において、球面収差曲線（カーブ）によって任意の周波数でディフォーカスに対するＭＴＦが２分できることを説明する。
【００３８】
図６（Ａ）〜（Ｃ）は、高周波のＯＴＦ変動を抑えた収差制御光学系における任意の周波数でディフォーカスに対するＭＴＦが２分できることを示しており、図６（Ａ）が球面収差カーブを示し、図６（Ｂ）が低周波での主像面シフト領域エリアＭＳＡＲのＭＴＦのピークの状態を示し、図６（Ｃ）が高周波での主像面シフト領域エリアＭＳＡＲのＭＴＦのピークの状態を示している。
【００３９】
図７（Ａ）〜（Ｃ）は、低周波のＯＴＦ変動を抑えた収差制御光学系における任意の周波数でディフォーカスに対するＭＴＦが２分できることを示しており、図７（Ａ）が球面収差カーブを示し、図７（Ｂ）が低周波での主像面シフト領域エリアＭＳＡＲのＭＴＦのピークの状態を示し、図７（Ｃ）が高周波での主像面シフト領域エリアＭＳＡＲのＭＴＦのピークの状態を示している。
【００４０】
図７(Ａ)〜（Ｃ）からわかるように、低周波の深度を伸ばすためには、球面収差の振幅を大きくすれば良い。
振幅の大きさをコントロールすることによって任意の周波数のディフォーカスＭＴＦのピークを２分割することができる。つまり任意の周波数の深度を拡張することができる。
【００４１】
なお、本実施形態において、ディフォーカスに対する低周波および高周波とは次のように定義する。
使用する固体撮像素子（撮像素子１２０）の画素ピッチから決まるナイキスト周波数の半分以上の周波数を高周波、半分より低い周波数を低周波とする。
ただし、ナイキスト周波数は下記の通りに定義する。
ナイキスト周波数＝１／（固体撮像素子の画素ピッチ×２）
【００４２】
図８（Ａ）〜（Ｃ）は、絞り径の違いによる球面収差とディフォーカスＭＴＦ、および本光学系と通常光学系と深度を比較して示す図である。
図８（Ａ）は絞りを開放した状態を示し、図８（Ｂ）は絞りを中間に絞った状態を示し、図８（Ｃ）は絞りを最小に絞った状態を示している。
【００４３】
絞りを最も開放した状態では、図８（Ａ）に示すように、複数の変曲点を持つ絞り近傍の収差制御面において光線が通過するために、球面収差カーブにおいても複数の変曲点を持つ。
そこから絞りを狭めても、図８（Ｂ）および（Ｃ）に示すように、変曲点が少なくともひとつ以上残る状態まで深度拡張作用を持続できる。
【００４４】
以上では、主として球面収差曲線（カーブ）に２つの変曲点を持つ場合について説明したが、球面収差カーブに３つ以上の変曲点を持たせることも可能であり、３つ以上の変曲点を持たせる場合、以下に示すような利点がある。
【００４５】
２つ以下の変曲点では、像高に対する変曲点領域の割り振りが偏るために、深度拡張する際に周波数毎にピーク位置がずれる現象が生じてしまう。
こうしたケースの場合、物体距離ごとにＰＳＦに含まれる周波数成分の割合が異なるため、物体距離に対応するレンズの特性と合わせた画像処理が必要になる可能性がある。
そこで、球面収差カーブの変曲点を３つ以上とすることにより、ディフォーカスＭＴＦにおけるピークを複数持たせ、また、球面収差カーブの振幅量を中心部から周辺部にかけて徐々に大きくすることで、周波数制御のバランスをとった深度拡張を実現できる。
【００４６】
図９（Ａ）および（Ｂ）は、球面収差カーブにおける変曲点の数の違いによる球面収差とディフォーカスＭＴＦを比較して示す図である。
図９（Ａ）は変曲点の数が２つの場合を、図９（Ｂ）は変曲点の数が４つの場合を示している。
図９（Ａ）に示すように、変曲点２つでは、高周波と低周波でピーク位置が異なる。
これに対して、図９（Ｂ）に示すように、変曲点４つを適切な振幅量で配置した場合、ピークの位置が周波数によらず同じ位置になる。
すなわち、変曲点が４つの場合、周波数制御のバランスをとった深度拡張を実現できる。
【００４７】
撮像素子１２０は、たとえば図２に示すように、第５レンズ１１６側から、ガラス製の平行平面板（カバーガラス）１２１と、ＣＣＤあるいはＣＭＯＳセンサ等からなる撮像素子の撮像面１２２が順に配置されている。
収差制御光学系１１０Ａを介した被写体ＯＢＪからの光が、撮像素子１２０の撮像面１２２上に結像される。
なお、撮像素子１２０で撮像される被写体分散像は、収差制御面１１３ａにより撮像素子１２０上ではピントが合わず、深度の深い光束とボケ部分が形成された像である。
【００４８】
本実施形態において、固体撮像素子１２０は、シャインプルーフの原理を適用するためにレンズの主平面と平行にならないように傾けて固定される。
【００４９】
図１０（Ａ）および（Ｂ）は、撮像面と収差制御光学系（レンズ）１１０Ａの主面を傾けて固定することを補足して示す図である。
これは、言い換えれば、撮像素子１２０面と主面を相対的に傾けることを意味し、図１０（Ａ）に示すように、収差制御光学系１１０Ａに対して撮像素子１２０を傾ける、もしくは、図１０（Ｂ）に示すように、撮像素子１２０に対して収差制御光学系１１０Ａを傾けてもどちらでもよい。
【００５０】
そして、図１に示すように撮像素子１２０は、収差制御光学系１１０で取り込んだ像が結像され、結像１次画像情報を電気信号の１次画像信号ＦＩＭとして、たとえば図示しないアナログフロントエンド部０を介して画像処理部１３０に出力する。
【００５１】
画像処理部１３０は、復元部１３１、および補正部１３２を含んで構成されている。
収差制御光学系１１０を通ったＰＳＦは、固体撮像素子１２０上で２画素以上に広がっており、ＰＳＦ復元部１３１は、この広がったＰＳＦを画像処理で復元を行う。
補正部１３２は、復元部１３１画像処理において、光学的伝達関数（ＯＴＦ）の復元処理、換言するとＰＳＦの復元処理を行った画像に対して歪み、いわゆる台形歪みの補正を行う。
【００５２】
ここで重要なのは、画像処理の順番である。第１にＰＳＦの復元、第２に台形歪みの復元とすることを特徴としている。
理由としては、この順番が逆になると、台形歪みを補正する際にＰＳＦの形状も変化していまい、ボケの復元を単一のフィルタで行えなくなってしまうからである。ＰＳＦの復元がコンボリューション処理で行われるのに対し、台形歪みは、座標変換となる。
よって、前記記載の順番が好ましい。
【００５３】
次に、本実施形態におけるシャインプルーフを用いた全体的な作用を、図１１〜図１７に関連付けて説明する。
【００５４】
図１１は、シャルインプルーフの原理について説明するための図である。
図１１において、ＭＳはレンズ主面を、ＯＳは物体面を、ＩＳは撮像面を、それぞれ示している。
図１２は、通常光学系のピント面（物体面）と被写界深度を示す図である。
図１３は、収差制御光学系のピント面（物体面）と被写界深度を示す図である。
図１４は、シャインプルーフ光学系のピント面（物体面）と被写界深度を示す図である。
図１５はシャインプルーフと収差制御光学系を組み合わせた時のピント面（物体面）と被写界深度を示す図である。
図１６は、画像処理部のＰＳＦの復元に関する図である。
図１７は、画像処理部の台形歪み補正に関する図である。
【００５５】
シャインプルーフとは、図１１に示すように、撮像平面ＩＳとレンズの主面ＭＳとがあり、１つの直線で交わるとき、ピントがあう物面ＯＳもまた同じ直線で交わるというものである。図１１においては、この交わる部分を交差点ＣＰとして示している。
一般的に、撮像面ＩＳとレンズ主面ＭＳは、通常のカメラでは平行に取り付けられており、撮像面ＩＳとレンズ主面ＭＳが交わることはない。
この場合、図１２および図１３に示すように、カメラがピントを結ぶ物面は一定距離前方の平行平面となる。
ただし、図１３の例の方が、図１２の例に比べて、被写界深度が増していることが分かる。
【００５６】
しかし、撮像面ＩＳとレンズ主面ＭＳを平行ではない配置にすると、図１４に示すように、物面ＯＳは平行ではなくなる。このとき、撮像面ＩＳ・レンズ主面ＭＳ・物面ＯＳが同一直線上で交わるというのがシャインプルーフの原理である。
物面ＯＳがレンズ主面ＭＳと平行でないため、図１４および図１５に示すように、シャインプルーフカメラは近距離にあるものと遠距離にあるものに同時に焦点を合わせることができる。
本実施形態に関する図１５の場合、図１４に比較して被写界深度が大幅に拡大されている。
【００５７】
図１６（Ａ）および（Ｂ）は、画像処理部１３０の復元部１３１におけるＰＳＦの復元に関する処理を模式的に示している。
図１６（Ａ）に示すように、収差制御光学系１１０によって広がったＰＳＦはコンボリューションフィルターによって、図１６（Ｂ）に示すように復元される。
【００５８】
図１７（Ａ）および（Ｂ）は、画像処理部１３０の補正部１３２の台形歪み補正に関する処理を模式的に示している。
図１７（Ａ）に示すように、シャインプルーフによって歪んだ画像は座標変換によって、図１７（Ｂ）に示すように、補正される。
座標変換の際に、空いた隙間は画素補完処理を行うことによって解像感を損なうことなく補正することも可能である。
【００５９】
図１８（Ａ）および（Ｂ）は、本発明の実施形態に係る撮像装置を最も適している監視カメラに応用した例を、通常光学系の場合を比較例として示す図である。
図１８（Ａ）が比較例を示し、図１８（Ｂ）が本実施形態に係る撮像装置を適用した場合を示している。
【００６０】
通常の光学系ではピント位置近傍の人しか見えなかったのに対し、シャインプルーフ光学系では、奥の人まで判別できる。
これは、監視カメラ２００Ａは、主に人の顔を撮ることが多いという特性を活かした実施例である。
【００６１】
以上説明したように、本実施形態によれば、収差を発生させる収差制御機能を有する収差制御素子または収差制御面を含む収差制御光学系１１０と、光電変換機能を有する撮像素子１２０と、画像処理部１３０と、を有し、収差制御光学系と撮像素子において、撮像面ＩＳとレンズ主面ＭＳを平行ではない配置にする。このとき、撮像面ＩＳ・レンズ主面ＭＳ・物面ＯＳが同一直線上で交わる。物面ＯＳがレンズ主面ＭＳと平行でないため、近距離にあるものと遠距離にあるものに同時に焦点を合わせることができる。
このシステムは一般的に、シャインプルーフカメラと呼ばれるが、本実施形態は通常のシャインプルーフカメラに対して、収差制御光学系１１０を用いることでさらに深度の拡張を図ることができる。
そして、画像処理部１３０で、収差制御光学系よってボケたＰＳＦとシャインプルーフの原理によって発生する台形ひずみを補正することで良好な画像を得ることができる。
すなわち、本実施形態によれば、画像復元にかかる負荷を軽減でき、シャインプルーフによる画像歪みを抑止でき、深度を大幅に拡大することができる。
【符号の説明】
【００６２】
１００・・・撮像装置、１１０・・・収差制御光学系、１１１・・・第１レンズ、１１２・・・第２レンズ、１１３・・・第３レンズ、１１３ａ・・・収差制御面、１１４・・・絞り、１１５・・・第４レンズ、１１５・・・第５レンズ、１２０・・・撮像素子、１３０・・・画像処理部、１３１・・・復元部、１３２・・・補正部。
【図１】
2011133593.tif 000003
【図２】
2011133593.tif 000004
【図３】
2011133593.tif 000005
【図４】
2011133593.tif 000006
【図５】
2011133593.tif 000007
【図６】
2011133593.tif 000008
【図７】
2011133593.tif 000009
【図８】
2011133593.tif 000010
【図９】
2011133593.tif 000011
【図１０】
2011133593.tif 000012
【図１１】
2011133593.tif 000013
【図１２】
2011133593.tif 000014
【図１３】
2011133593.tif 000015
【図１４】
2011133593.tif 000016
【図１５】
2011133593.tif 000017
【図１６】
2011133593.tif 000018
【図１７】
2011133593.tif 000019
【図１８】
2011133593.tif 000020
【図１９】
2011133593.tif 000021
【図２０】
2011133593.tif 000022