(57)【特許請求の範囲】
【請求項１】
光電変換し光情報の蓄積を行い、１画面を構成するフィールド期間毎に繰り返し出力する光電変換手段と、
該光電変換手段からの出力を繰り返し処理して映像信号を繰り返し出力する信号処理手段と、
第１の輝度に対応した光蓄積時間および当該第１の輝度よりも低い第２の輝度に対応した光蓄積時間を算出する算出手段と、
前記算出手段により算出された第１、第２の光蓄積時間に対応して前記光電変換手段から繰り返し出力されるフィールド期間毎の互いに対応する光情報を、加算し画面合成することを繰り返す合成処理手段とを備え、
前記算出手段は、前記第１、第２の光蓄積時間をそれぞれの光蓄積時間に対応するフィールド期間毎の光情報に基づいて算出することを特徴とする撮像装置。
【請求項２】
光電変換し光情報の蓄積を行い、１画面を構成するフィールド期間毎に繰り返し光電変換手段から出力するステップと、
該光電変換手段からの出力を繰り返し処理して映像信号を繰り返し出力するステップと、
第１の輝度に対応した光蓄積時間および当該第１の輝度よりも低い第２の輝度に対応した光蓄積時間を算出するステップと、
前記算出された第１、第２の光蓄積時間に対応して前記光電変換手段から繰り返し出力されるフィールド期間毎の互いに対応する光情報を、加算し画面合成するステップとを備え、
前記光蓄積時間を算出するステップにおいて、前記第１、第２の光蓄積時間をそれぞれの光蓄積時間に対応するフィールド期間毎の光情報に基づいて算出することを特徴とする撮像方法。
【発明の詳細な説明】
【０００１】
【産業上の利用分野】
本発明は、例えば、逆光状態にて撮影する場合に用いて好適な階調制御機能を有する撮像装置に関するものである。
【０００２】
【従来の技術】
ビデオカメラ等で、被写体を撮像するに当たり、照度が強い逆光撮影の場合などでは、一画面中の階調は極めて広いものとなる。
【０００３】
ビデオカメラ等で用いられる、固体撮像素子等を用いた撮像装置は、このように広い階調をすべて映像信号に変換できるほどのダイナミックレンジ幅は有していないため、明るさのレベルの上下で各々クリップを発生してしまう。これは「白飛び」、「黒つぶれ」と呼ばれる現象で、一画面中で、極端に明るい部分や暗い部分の階調が表現できないものである。
【０００４】
特に、逆光撮影の場合などは、背景の明るさに比較して、主たる被写体が陰になって極端に暗くなるため、「黒つぶれ」を起こしてしまう。
【０００５】
この対策として、従来、ＢＬＣ（バック・ライト・コントロール）という露光量を増加して逆光補正を行う手法が用いられていた。以下、従来の手法による逆光補正について詳しく説明する。
【０００６】
まず、アイリスを用いた露光量調節機構におけるＢＬＣの動作について図２２に示した逆光補正回路構成図を参照して説明する。
【０００７】
光学系１０より入射した被写体よりの光線は、アイリス１１により光量制限されて、撮像素子１２上に結像する。結像状態に応じた光電変換信号が、撮像素子１２より出力され、信号処理回路１３にて映像信号化され、映像信号として出力される。
【０００８】
一方、自動露光量調節回路（以下ＡＥ回路という）１４にも上述の映像信号は供給されており、ＡＥ回路１４は、映像信号に応じたアイリス制御信号を発生する。ドライバー１６は、加算器１５経由でＡＥ回路１４からのアイリス制御信号を受けてｉｇメータ１７を駆動する駆動信号を発生させ、アイリスによる光量の自動調節を実現している。
【０００９】
上述した光量の自動調節の考え方においては、一般に、映像信号の輝度レベルの一画面分の積分値に応じて光量を調節するようにしているので、一画面全体の平均的な明るさだけに着目していることになる。そのため、逆光撮影の場合などは、非常に明るい背景に合わせて撮像素子１２への入射光量の調節が行われるため、主たる被写体が極端に暗くなって、「黒つぶれ」を起こしてしまう。
【００１０】
このような場合には、ＢＬＣをＯＮにして、撮影者が逆光補正指示を出す必要がある。図２２の回路構成図では、ＢＬＣスイッチ１９をＯＮにすることにより、補正信号発生器１８から、アイリスを「開」側へ向ける信号が、加算器１５を経てドライバー１６に供給される。ドライバー１６は、ｉｇメータ１７を開く方向に駆動し、撮像素子１２への入射光量が増加されて、逆光補正が行われる。
【００１１】
上記のようにＢＬＣスイッチ１９をＯＮにして、従来の手法による逆光補正を行うことにより、画像は、図３に示したＢＬＣ−ＯＦＦ（逆光補正前）の状態から、図４に示したＢＬＣ−ＯＮ（逆光補正後）の状態に変化する。図を見て分かる通り、ＢＬＣ−ＯＦＦでは、背景は良く写っているが、主たる被写体（富士山の表示板）は「黒つぶれ」を起こして、うまく写っていない。これに対し、ＢＬＣ−ＯＮでは、主たる被写体の階調が表現され良く写っている。
【００１２】
【発明が解決しようとする課題】
しかしながら、上記の従来例の撮像装置においては、図４を見れば分かる通り、逆光補正を行うことにより、撮像素子の受光量が多くなるため、主たる被写体は良く写るようになるものの、背景は、「白飛び」を起こしてうまく写すことができない。
【００１３】
即ち、従来の手法による逆光補正では、撮像素子のダイナミックレンジの制約から、上下どちらか一方のレベルで、クリップしてしまい、主たる被写体と背景の双方を良好に撮像することができないという問題点があった、
従って、本発明の撮像装置は、上記の問題点を解消するためになされたものであり、その目的とするところは、主たる被写体と背景の双方に良好な露光を実現でき、広い階調表現の可能な階調制御機能を有する撮像装置を提供することにある。
【００１４】
【課題を解決するための手段】
前記目的を達成するため、本発明では、撮像装置を次の（１）のとおりに、撮像方法を次の（２）のとおりに構成する。
（１）光電変換し光情報の蓄積を行い、１画面を構成するフィールド期間毎に繰り返し出力する光電変換手段と、
該光電変換手段からの出力を繰り返し処理して映像信号を繰り返し出力する信号処理手段と、
第１の輝度に対応した光蓄積時間および当該第１の輝度よりも低い第２の輝度に対応した光蓄積時間を算出する算出手段と、
前記算出手段により算出された第１、第２の光蓄積時間に対応して前記光電変換手段から繰り返し出力されるフィールド期間毎の互いに対応する光情報を、加算し画面合成することを繰り返す合成処理手段とを備え、
前記算出手段は、前記第１、第２の光蓄積時間をそれぞれの光蓄積時間に対応するフィールド期間毎の光情報に基づいて算出する撮像装置。
（２）光電変換し光情報の蓄積を行い、１画面を構成するフィールド期間毎に繰り返し光電変換手段から出力するステップと、
該光電変換手段からの出力を繰り返し処理して映像信号を繰り返し出力するステップと、
第１の輝度に対応した光蓄積時間および当該第１の輝度よりも低い第２の輝度に対応した光蓄積時間を算出するステップと、
前記算出された第１、第２の光蓄積時間に対応して前記光電変換手段から繰り返し出力されるフィールド期間毎の互いに対応する光情報を、加算し画面合成するステップとを備え、
前記光蓄積時間を算出するステップにおいて、前記第１、第２の光蓄積時間をそれぞれの光蓄積時間に対応するフィールド期間毎の光情報に基づいて算出する撮像方法。
【００１７】
【実施例】
以下、本発明に係る階調制御機能を有する撮像装置の実施例を説明する。
【００１８】
図１は、本発明の一実施例のブロック図であり、同図を参照して説明する。
【００１９】
被写体からの入射光はレンズ１０１を通り、光電変換する撮像素子を有する光電変換手段１０２上に結像される。この光電変換出力をＡＤ変換器１０３にてデジタル信号に変換し、デジタルカメラ信号処理回路１０４にて映像信号へと処理する。
【００２０】
この映像信号出力は、画像メモリ１０５へ一画面毎に格納される。ここでいう一画面とはフィールド（ＮＴＳＣなら２６２．５水平走査線）、または垂直解像度の劣化を防止するためにはフレーム（ＮＴＳＣなら５２５水平走査線）に相当する。この画像メモリ１０５からの出力は合成器１０６にて、先のカメラ信号処理回路１０４の出力と、ちょうど一画面分の時間差（ＮＴＳＣならば１／６０秒）を有する状態で画面合成され、出力される。
【００２１】
次に、上記の主信号系で最も階調を有効に表現させるべく、以下に述べるＡＥ（自動露光量調節）手段が機能している。
【００２２】
前記カメラ信号処理回路１０４の出力中の輝度情報に基づき、画像分析回路１０７にて２系統のＡＥ系を制御する。
【００２３】
２系統のＡＥ系は、ゲート１０８ａ，制御信号発生器１０９ａ及び光蓄積時間設定タイミング信号発生器１１０ａからなる明部用ＡＥ回路と、ゲート１０８ｂ，制御信号発生器１０９ｂ及び光蓄積時間設定タイミング信号発生器１１０ｂからなる暗部用ＡＥ回路である。
【００２４】
各々のタイミング信号は切換回路１１１にて、端子ａ側では明部用、端子ｂでは暗部用の光蓄積時間を設定する選択が、前記分析回路１０７にて制御されている。この選択結果は、ＣＣＤドライバー１１２を介してＣＣＤ１０２へ供給され、最適なシャッタースピード（光蓄積時間）を設定し、撮像系全体としてのダイナミックレンジの拡大を実現するものである。
【００２５】
次に、ドライバー１１２により制御される撮像素子１０２について、以下説明する。
【００２６】
撮像素子としては、ＣＣＤ，ＭＯＳ，ＢＡＳＩＳ等、光電変換の原理により、多くの方式がある。現在ビデオカメラ用としてもっとも一般的に用いられているＣＣＤを例にとり説明を進める。
【００２７】
ＣＣＤの中でもＦＴ型（フレームトランスファー型），ＩＴ型（インターライントランスファー型），ＦＩＴ型（フレームインターライントランスファー型）等の電荷読み出し方式の違いや、ＶＯＤ型等の不要電荷処理の違いによる半導体デバイス構造での分類がなされている。ここで、ＶＯＤとは縦形オーバーフロードレイン（Vertical Overflow Drain)の略称である。
【００２８】
まず、インターライントランスファー型（ＩＴ型）ＣＣＤの基本構造について説明すると同時に、ＣＣＤの基本動作のひとつである高速シャッター動作について説明する。
【００２９】
図１４の（ａ）はインターライントランスファー型（ＩＴ型）ＣＣＤの模式図で、４１は光電変換をするセンサ部（センシング手段）、４２は垂直転送レジスタ、４４は水平転送レジスタ、４５は出力アンプである。図中のＡ−Ａ’線に沿った断面及びポテンシャルを同図１４の（ｂ）に示す。
【００３０】
図１４の（ｂ）中、４６は画素分離用のチャネルストップ（ＣＳ）、４７はセンサ部４１に蓄積された電荷を垂直転送レジスタ４２に移すためのリードアウトゲート（ＲＯＧ）、４８はサブストレート、４９は酸化膜である。
【００３１】
高速シャッター時の動作を図１４及び図１５を参照して説明する。図１５は、標準テレビジョン信号の１フィールド分（例えばＮＴＳＣでは約１／６０秒）におけるタイミングチャートであり、φＲＯＧはリードアウトゲート４７に印加されるパルスで、論理レベル“Ｈ”のときに、リードアウトゲート４７のポテンシャルが下がり、センサ部４１の電荷を垂直転送レジスタ４２に移す。除去パルスφＳＵＢは、サブストレート４８に印加されるパルスであり、“Ｈ”のときにセンサ部４１に蓄積された電荷を、φＳＵＢ端子を通して外部に掃き出し除去する。
【００３２】
この例では図１５において、φＲＯＧが垂直帰線期間中にあり、φＳＵＢは、水平帰線期間中にある。時刻ｔ０でセンサ部４１の電荷を読み出した後、次の期間が始まるが、時刻ｔ１での水平帰線期間中に、φＳＵＢ＝“Ｈ”となるので、ｔ０からｔ１までの電荷はセンサ部４１には残っていない。時刻ｔ１からｔ２までの間はφＳＵＢ＝“Ｌ”なので、この期間の電荷はセンサ部４１に蓄積され、時刻ｔ２のφＲＯＧ＝“Ｈ”パルスで、垂直転送レジスタ２に移される。結局、この場合の露光時間は（ｔ２−ｔ１）となる。
【００３３】
このようにして、ＩＴ型ＣＣＤの高速シャッター動作が実現される。
【００３４】
次に、フレームインターライントランスファー型（ＦＩＴ型）ＣＣＤの動作について説明する。
【００３５】
図１６が、フレームインターライントランスファー型（ＦＩＴ型）ＣＣＤの模式図である。図１４（ａ）に示したインターライントランスファー型ＣＣＤとの相違点は記憶部６３があることである。記憶部６３の記憶セルの数は、センサ部（センシング手段）６１のセルの数と同じである。センサ部６１からの電荷は垂直転送レジスタ６２に移された後、垂直帰線期間中に記憶部６３に転送され、その後、所定のタイミングで水平転送レジスタ６４に移され、出力アンプ６５を通して読み出されて行く。
【００３６】
また、図１６のＡ−Ａ’線に沿う断面図及びポテンシャル図は、図１４の（ｂ）と同様であり、前述の電荷掃き出しの機構及びセンサ部６１から垂直転送レジスタ６２への電荷読出しの機構も同様である。以上がＦＩＴ型ＣＣＤの動作である。
【００３７】
次に、図１３に示すＶＯＤ型ＣＣＤイメージセンサの動作について説明する。上部矢印で示す被写体光を酸化層（ＳｉＯ2 ）３２及び暗電流低減のためのホール蓄積層経由でセンサ部３３のフォトダイオード（ＰＤ）で受け取る。センサ部以外へは不要光が入射しないようアルミ層（ＡＩ）３６にて遮光している。この遮光により、ＣＣＤとしての受光面積が有効活用されず、開口率が低下する。本実施例では、開口率低下を補うための集光レンズ３１を、各画素ごとに設けてある。
【００３８】
光電変換により発生した電荷は、垂直転送用Ｖ−ＣＣＤ（垂直転送レジスタ）３８に移され、二次元平面で、順次転送され、読み出しアンプより、電圧値として出力される。
【００３９】
各画素ごとにチャネルストップ部３９が設けられており、各画素で発生された電荷が混入しないように分離される。センサ部３３の下方にＰ層３４，Ｎ−ＳＵＢ層３５があり、この両層にかけるサブストレート・バイアス電位Ｖｓｕｂ３０により、不要電荷の処理を行う。
【００４０】
図１７は、ＶＯＤ型ＣＣＤの電荷排出動作をポテンシャル電位で示した模式図である。「ＣＨＡＲＧＥ」と示した線が光電荷の蓄積状態におけるポテンシャル電位図で、「ＤＩＳＣＨＡＲＧＥ」と示した線が不要電荷排出状態におけるポテンシャル電位図である。「ＣＨＡＲＧＥ」状態で電位図上部の凹部に電荷を蓄積する。「ＤＩＳＣＨＡＲＧＥ」状態で、ΔＶｓｕｂをサブストレート電圧Ｖｓｕｂに更に印加し、Ｖｓｕｂ＋ΔＶｓｕｂとして、前述の凹部を消減させ、蓄積された電荷を下部へ排出する。
【００４１】
ちなみに、不要電荷排出時に、再結合時間の長い不要電荷が下部より回り込んで垂直転送レジスタ３８へノイズとして混入するのを防ぐためにＰ層をＮ型Ｖ−ＣＣＤ下層に配してある。
【００４２】
図１８は、前記の高速シャッター動作時のＶｓｕｂ電位の変化をタイミングチャートで示したものである。まず、標準テレビジョン信号の１フィールド期間内において、（ｃ）に示すように、所定の時間間隔でＶｓｕｂ電荷をパルス的に変化させ、センサ部６１に蓄積された不要電荷の排出を所定の時間までくり返す。その後、１フィールド期間（１画面）の後半において光電荷蓄積を時間ｔだけ行い、（ｂ）に示した読み出しパルスにて、「ＨＩＧＨ」と示された蓄積電荷を画像情報として読み出す。このようにして、時間ｔの蓄積を行う高速シャッター効果が得られる。また、通常蓄積時を「ＮＯＲＭＡＬ」、高速シャッター動作時を「ＨＩＧＨ」として、電荷の蓄積の様子の違いを（ａ）に示した。
【００４３】
ちなみに、ＮＴＳＣ方式のテレビジョン信号として、（０〜ｔ１）＋（ｔ１〜ｔ２）＝１／６０秒とすると、図１５において、（ｔ１〜ｔ２）＝１／５００秒の場合、（０〜ｔ１）＝１／６０−１／５００÷１／６０秒とみなせる。
【００４４】
これは、カメラの露光では、通常、１／６０秒，１／１２５秒，１／２５０秒，１／５００秒という段階が、絞り換算で各々１ステップ（一絞り）に対応していることから考えると、（０〜ｔ１）で適正露光の被写体に対して、３絞り分だけ高輝度の被写体に対して適正な露光が（ｔ１〜ｔ２）により与えられることを示している。
【００４５】
ここで仮に、逆光状態において主たる被写体と背景部の間に、３絞り分の輝度差があるとする。（０〜ｔ１）時間中では、従来例のＢＬＣ−ＯＮの状態（逆光補正状態）に相当する画面が撮像され、主たる被写体は適正露光となり、背景部は、高輝度のためクリップしてしまう。（ｔ１〜ｔ２）時間中の露光では、従来例のＢＬＣ−ＯＦＦの状態（逆光補正されていない状態）に相当する画面が撮像され、主たる被写体よりも３絞り分明るい背景部が適正露光となり、主たる被写体はほとんど撮像されない。この（０〜ｔ１）時間中に蓄積される電荷と（ｔ１〜ｔ２）時間中に蓄積される電荷に対応した情報が、各画素毎に画像メモリを介して合成器により加算され、結果として、図２に示すように逆光の主被写体（富士山標）も、強い日射の背景も見事に表現された画面が得られる。
【００４６】
図７は高速シャッター（１／１２０と１／２５０を例示）と通常ＮＴＳＣフィールドレートの１／６０秒での光蓄積時の入力照度対出力信号のグラフである。
【００４７】
１／６０秒の時は、入力１００％で出力１００％となるようにリニアに対応付け、入力１００〜４００％が出力１００〜１５０％に対応するよう非線形に圧縮している。
【００４８】
１／１２０秒の時には、入力２００％で出力１００％となるようにし、２００〜８００％の入力には出力１００〜１５０％を対応付けた圧縮としている。
【００４９】
１／２５０秒の時には、同様に入力４００％が出力１００％に、入力４００〜１６００％が出力１００〜１５０％に対応付けられている。
【００５０】
図８は、暗部用の撮像に１／６０秒、明部用の撮像に１／２５０秒を用いた時の合成時の圧縮特性を示す。
【００５１】
図９は、明部用は同様に１／２５０秒で、暗部用に１絞り分シャッタースピードを上げた１／１２０秒の場合の合成圧縮特性である。
【００５２】
上記図８，図９から分かるように、合成することで暗部，明部ともに良好な階調を確保した特性に変換されている。
【００５３】
図１０に前記図９に示した合成処理に対応したＣＣＤの処理タイミングを示す。
【００５４】
ＡはＮＴＳＣのフィールド周期のタイミング
Ｂは奇偶各フィールド毎に、暗部，明部を担当するＡＥの各ループＡＥａ及びＡＥｂの入力信号切換タイミング
Ｃは暗部用光蓄積期間（各１／１２０秒）
Ｄは明部用光蓄積期間（各１／２５０秒）
Ｅは暗部用の光電変換信号の１画面部の読出し期間
Ｆは明部用の光電変換信号の１画面分の読出し期間
を各々示している。
【００５５】
ＣＣＤのインターレース読み出しについて説明する。
【００５６】
図１９にイメージセンサの２線加算読み出し処理に関する模式図を示す。
【００５７】
補色系のカラーフィルターを各光蓄積画素上に配した、カラーセンサを例に取り説明してゆく。色フィルターは、ホワイト，シアン，イエロー，グリーン（Ｗ，Ｃｙ，Ｙｅ，Ｇ）から成るモザイクフィルターである。ただし、Ｗ＝Ｒ＋Ｇ＋Ｂ，Ｃｙ＝Ｂ＋Ｇ，Ｙｅ＝Ｒ＋Ｇ，Ｒ＝赤，Ｇ＝緑，Ｂ＝青とする。
【００５８】
奇数フィールドの場合、輝度信号は、ＬＰＦを通すことにより得られる。式で表すと、各水平ライン毎に下記の通りと成り、
Ｙｎ＝（Ｗ＋Ｃｙ）＋（Ｇ＋Ｙｅ）＝２Ｒ＋４Ｇ＋２Ｂ      ……（１）
Ｙｎ＋１＝（Ｗ＋Ｙｅ）＋（Ｇ＋Ｃｙ）＝２Ｒ＋４Ｇ＋２Ｂ  ……（２）。
【００５９】
色信号は、隣接２画素の繰り返しフィルターの為、信号画素差分により得られる。式で表すと、各水平ライン毎に下記の通りと成り、
Ｃｎ＝（Ｗ＋Ｃｙ）−（Ｇ＋Ｙｅ）＝２（Ｂ−Ｇ）          ……（１）
Ｃｎ＋１＝（Ｗ＋Ｙｅ）−（Ｇ＋Ｃｙ）＝２（Ｒ−Ｇ）      ……（２）。
【００６０】
偶数フィールドの場合。輝度及び色信号は、上述と同等の処理により、奇数フィールド同様に得られる。ただし、図示した通り奇数フィールドと偶数フィールドで１ラインだけ垂直方向に読み出し画素の組合わせをシフトして処理し、擬似インターレースさせている。ちなみにＭｇ＝Ｒ＋Ｂである。この手法では、簡単に回路構成できるが垂直解像度が低下してしまう。
【００６１】
ＣＣＤのノンインターレース読み出しについて説明する。
【００６２】
図２０にイメージセンサの２線独立読み出し処理に関する模式図を示す。
【００６３】
補色系のカラーフィルターを各光蓄積画素上に配した、カラーセンサを例に取り説明してゆく。色フィルターは、ホワイト，シアン，イエロー，グリーン（Ｗ，Ｃｙ，Ｙｅ，Ｇ）から成るモザイクフィルターである。ただし、Ｗ＝Ｒ＋Ｇ＋Ｂ，Ｃｙ＝Ｂ＋Ｇ，Ｙｅ＝Ｒ＋Ｇ，Ｒ＝赤，Ｇ＝緑，Ｂ＝青とする。
【００６４】
奇数フィールドの場合、輝度信号は、ＬＰＦを通すことにより得られる。式で表すと、各水平ライン毎に下記の通りと成り、
Ｙｎ＝（Ｗ＋Ｇ）＝Ｒ＋２Ｇ＋Ｂ                          ……（１）
Ｙｎ＋１＝（Ｃｙ＋Ｙｅ）＝Ｒ＋２Ｇ＋Ｂ                  ……（２）。
【００６５】
色信号は、隣接２画素の繰り返しフィルターの為、２線独立読み出し後の信号加算を含めた画素差分処理により得られる。式で表すと、各水平ライン毎に下記の通りと成り、
Ｃｎ＝（Ｗ＋Ｃｙ）−（Ｇ＋Ｙｅ）＝２（Ｂ−Ｇ）          ……（１）
Ｃｎ＋１（Ｗ＋Ｙｅ）−（Ｇ＋Ｃｙ）＝２（Ｒ−Ｇ）        ……（２）。
【００６６】
偶数フィールドの場合。輝度及び色信号は、上述と同等の処理により、奇数フィールド同様に得られる。
【００６７】
このように、図示した通り奇数フィールドと偶数フィールドで各々独立して全ラインの信号を読み出すことで、非（ノン）インターレース化させている。そして、このノンインターレースの５２５本分の情報を毎フィールドごとに得ることで、画面合成後も５２５本の画像が得られるので、垂直解像度の低下は避けられる。
【００６８】
図２１は、ノンインターレースの（ａ）と（ｂ）各フィールド画を加算した画像を（ｃ）に示したが、動きのある被写体ではズレを生じることが判る。
【００６９】
次に、輝度ヒストグラムの例を示した図１１，図１２を参照して、本実施例による逆光補正効果と画像分析の関連について説明する。
【００７０】
ビデオカメラ等の自動露光調節機構は、通常、映像信号１画面分の輝度信号の積分値を、所定の値に近づけるようにアイリス等を制御している。そのため、図１１に示す輝度ヒストグラムの曲線イとロのように１画面内での明るさの分布が違っていても、１画面分の輝度信号の積分値が同じになる場合には、アイリスは同じように制御される。曲線イは、逆光撮影時に発生しやすい輝度発生頻度分布パターンであり、曲線ロは、順光撮影時に発生しやすい輝度発生頻度分布パターンである。
【００７１】
逆光補正のためにモード切替スイッチにより、ＢＬＣ−ＯＮ−ＭＯＤＥ（逆光補正モード）が選択されると、ＢＬＣスイッチがＯＮになり、曲線イから、図１２に示すような曲線ハへと変化する。「黒つぶれ」していた撮像信号の底上げをして全体に適正露光の目安である前述の所定の値に近づけたため、明部の撮像信号は高輝度クリップを起こし、発生頻度としては、明部へ偏ったパターンになっている。
【００７２】
次に、図１２の曲線ハの白飛び部分を図７〜図９に示した非線形処理により、適正露光状態へ変換する。その結果、順光状態に近い図１２（ニ）に示すような分布を有する画像が得られることとなる。
【００７３】
したがって、上述のような画像分析の特徴を利用し、図１に示すタイミング制御回路１１０ａ，１１０ｂによる蓄積時間制御を適宜行えば、ダイナミックレンジの広いＡＥ制御が可能となる。
【００７４】
以上、１画面全体の画像情報を元に、低輝度領域映像用の露光制御（上記第２のＡＥ系の制御）と高輝度領域映像用の露光制御（上記第１のＡＥ系の制御）を行う方法について述べたが、次に、上記の２つの露光制御に１画面内の別々の領域から切り出した映像信号をそれぞれ用いる方法について説明する。
【００７５】
図５に複数エリアに画像を分割した例を示す。本例は、縦横８×８から成る６４の等面積の分割である。この６４の画像分割を、逆光撮影時に適用した例を示したものが図６である。高輝度部分から、代表的な領域としてエリアＡ（分割ブロックＮｏ. １３，１４，１５，２１，２２，２３，２９，３０，３１）を選択し、低輝度部分から、代表的な領域として、エリアＢ（分割ブロックＮｏ．４３，４４，４５，５１，５２，５３，５９，６０，６１）を選択した。ここでは、エリアＡとエリアＢとでどちらも９ブロックと同ブロック数にしているが、異なるブロック数の場合には、おもみ付け係数にて補正すれば良い。
【００７６】
これらのエリアの信号を用いて、低輝度部分と高輝度部分について、それぞれ独立した露光量制御を行うことで、画面全体として、適切なダイナミックレンジに圧縮された映像信号が撮影可能となる。
【００７７】
上記のように、ブロック分割して露光量制御する実施例の構成は図１に示した回路構成例と同じであるが、画像分析回路の働きが、下記の通り異なる。撮像信号は、前述の輝度ヒストグラム分析手段等の画像分析回路１０７により分析され、低輝度と高輝度の出現頻度の高いエリアを上位から数ブロック選択する。その数ブロックのエリアの映像信号をもとに、該画像分析回路１０７にて、エリアＡとエリアＢに各々対応するゲート１０８ａとゲート１０８ｂをＯＮ−ＯＦＦするための制御信号を発生する。
【００７８】
このゲートにより選択された映像信号を用いて、露光制御回路ＡＥ−１（１０９ａ）とＡＥ−２（１０９ｂ）は各々、次のタイミング発生器１１０ａ，１１０ｂへの制御信号を発生する。簡単な例では、ＡＥ−１（１０９ａ）はｔ２を設定するためのもので、高輝度領域のためのシャッタースピードによるＡＥであり、ＡＥ−２（１０９ｂ）は低輝度領域のためのシャッタースピードによるＡＥである。もっとも簡単な例のみ示したが、他にも、ＡＥ手法は、数々あるので、これらの既存の手法を各々の領域の制御に利用することができる。
【００７９】
以上説明したように、現在主流になりつつあるＶＯＤ型ＣＣＤに簡単な制御処理回路を付加することで、ビデオカメラ撮影時の大きな問題点とされている逆光撮影時等に代表させる狭ダイナミックレンジを効果的に改善することが可能となる。
【００８０】
従来の補正時に白く飛んでしまい再現のできなかった背景部分までも主たる被写体と共に撮像可能となるもので、その効果は絶大なものである。
【００８１】
広い階調を圧縮するに当たり、１画面内で、輝度の低い部分と輝度の高い部分を画面分割により把握し、制御することで、安定した系が構成できる。具体的には、画面内で階調のレンジが変わった場合、例えば室内の人物と窓越しの風景を同時に撮っていて、室内に明かりをつけた場合に、明暗比が狭まり、圧縮比を変えるべくｔ２が変更されると、本来変化していない窓越しの風景の調子の方が変化してしまうが、本実施例の場合においては、エリアＢの系が独立してシャッタースピードを補正して対応するので、エリアＡに係わる露光の変更は抑えられ、極力不自然な変化にならないような系を実現できるという効果を有する。
【００８２】
更に、高輝度部のピークをＡＥの対象外とすることで、画面階調の極端な圧縮による不自然さを回避することもできる。
【００８３】
また、本発明は、その主旨を逸脱しない範囲で上記実施例を修正もしくは変形したものに適用可能である。例えば、光蓄積時間を２種類で説明したが３種類にしても良い。また縦形オーバーフロードレイン（ＶＯＤ）以外でも良い。
【００８４】
【発明の効果】
以上説明したように、本発明の階調制御機能を有する撮像装置においては、単位光蓄積時間毎に、光蓄積時間を長く設定して低輝度の被写体に適した露光を行わせる動作と、光蓄積時間を短く設定して高輝度の被写体に適した露光を行わせる動作を、各々行わせ、低輝度の被写体の露光動作については低輝度の被写体部分の画像情報をもとに、高輝度の被写体の露光動作については高輝度の被写体部分の画像情報をもとに、それぞれ制御することにより、低輝度の被写体と高輝度の被写体の双方に良好な露光を実現することができるという効果がある。
【００８５】
上記のように、アイリス等のメカニカルな部材を用いることなく、良好な、階調再現が可能になる。
【図面の簡単な説明】
【図１】  一実施例のブロック図である。
【図２】  一実施例の逆光撮影時の画像説明図である。
【図３】  従来の逆光補正前（黒つぶれ状態）の画像説明図である。
【図４】  従来の逆光補正後（白飛び状態）の画像説明図である。
【図５】  光画像領域を複数エリアに分割した実施例の説明図である。
【図６】  複数エリアに分割した実施例の逆光撮影時の説明図である。
【図７】  高速シャッターでの入力照度対出力信号の圧縮特性の説明図である。
【図８】  合成圧縮特性例の説明図である。
【図９】  合成圧縮特性例の説明図である。
【図１０】  合成圧縮に対応した実施例ＣＣＤの処理タイミングチャートである。
【図１１】  輝度ヒストグラムの説明図である。
【図１２】  輝度ヒストグラムの説明図である。
【図１３】  ＶＯＤ型ＣＣＤイメージセンサーの構成説明図である。
【図１４】  ＩＴ型ＣＣＤの構成説明図である。
【図１５】  ＩＴ型ＣＣＤのタイミングチャートである。
【図１６】  ＦＩＴ型ＣＣＤの構成説明図である。
【図１７】  ＶＯＤ型ＣＣＤの電荷排出動作説明図である。
【図１８】  ＶＯＤ型ＣＣＤの高速シャッター動作のタイミングチャートである。
【図１９】  イメージセンサーの２線加算読み出し処理説明図である。
【図２０】  イメージセンサーの２線独立読み出し処理説明図である。
【図２１】  移動被写体によるインターレース妨害の説明図である。
【図２２】  従来の撮像装置の露光調整機構を示すブロック図である。
【符号の説明】
１０１      レンズ
１０２      光電変換手段（撮像素子ＣＣＤ）
１０４      デジタルカメラ信号処理回路
１０５      画像メモリ
１０６      合成器
１０７      画像分析回路
１０８ａ，１０８ｂ  ゲート
１０９ａ，１０９ｂ  制御信号発生器
１１０ａ，１１０ｂ  光蓄積時間設定タイミング信号発生器
１１１      切換回路
１１２      ＣＣＤドライバ
【図１】
0003666900.tif 000002
【図２】
0003666900.tif 000003
【図３】
0003666900.tif 000004
【図４】
0003666900.tif 000005
【図５】
0003666900.tif 000006
【図６】
0003666900.tif 000007
【図７】
0003666900.tif 000008
【図８】
0003666900.tif 000009
【図９】
0003666900.tif 000010
【図１０】
0003666900.tif 000011
【図１１】
0003666900.tif 000012
【図１２】
0003666900.tif 000013
【図１３】
0003666900.tif 000014
【図１４】
0003666900.tif 000015
【図１５】
0003666900.tif 000016
【図１６】
0003666900.tif 000017
【図１７】
0003666900.tif 000018
【図１８】
0003666900.tif 000019
【図１９】
0003666900.tif 000020
【図２０】
0003666900.tif 000021
【図２１】
0003666900.tif 000022
【図２２】
0003666900.tif 000023