(57)【要約】      （修正有）【課題】画素配列における各画素に対する混色補正処理の精度を向上する。【解決手段】撮像装置は、複数の画素が行方向及び列方向に配列された画素配列と、前記画素配列から信号を読み出す読み出し手段と、前記画素配列における画素の位置に応じた前記画素への周辺画素から混入する信号成分に関する特性を示す混色特性情報を記憶する記憶手段と、前記画素配列における補正対象画素の位置と前記混色特性情報とに応じて前記補正対象画素へ周辺画素から混入する信号成分を補正するための補正係数を求め、前記読み出し手段により前記補正対象画素の周辺画素から読み出された信号と前記補正係数とを用いることにより、前記読み出し手段により前記補正対象画素から読み出された信号を補正する補正手段とを備える。【選択図】図２
2010130583.tif 000002
【特許請求の範囲】
【請求項１】
複数の画素が行方向及び列方向に配列された画素配列と、
前記画素配列から信号を読み出す読み出し手段と、
前記画素配列における画素の位置に応じた前記画素へ周辺画素から混入する信号成分に関する特性を示す混色特性情報を記憶する記憶手段と、
前記画素配列における補正対象画素の位置と前記混色特性情報とに応じて補正係数を求め、前記読み出し手段により前記補正対象画素の周辺画素から読み出された信号と前記補正係数とを用いることにより、前記読み出し手段により前記補正対象画素から読み出された信号を補正する補正手段と、
を備えたことを特徴とする撮像装置。
【請求項２】
前記混色特性情報は、
前記画素配列における画素の位置と、前記画素へ周辺画素から混入する信号成分を補正するように予め決定された前記補正係数とが、画素ごとに対応付けられた係数テーブルを含み、
前記補正手段は、前記画素配列における前記補正対象画素の位置と前記係数テーブルとに応じて前記補正係数を求める
ことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記混色特性情報は、
前記画素配列における行方向の画素の位置と、前記画素配列の光学中心を含む行の前記画素へ周辺画素から混入する信号成分を補正するように予め決定された係数とが対応付けられた行補正データと、
前記画素配列における列方向の画素の位置と、前記画素配列の光学中心を含む列の前記画素へ周辺画素から混入する信号成分を補正するように予め決定された係数とが対応付けられた列補正データと、
を含み、
前記補正手段は、前記画素配列における前記補正対象画素の行方向の位置及び前記行補正データに応じて、行方向の前記補正係数を求め、前記画素配列における前記補正対象画素の列方向の位置及び前記列補正データに応じて、列方向の前記補正係数を求める
ことを特徴とする請求項１に記載の撮像装置。
【請求項４】
前記混色特性情報は、
前記画素配列における画素の位置に対する、前記画素へ周辺画素から混入する信号成分を補正するように予め決定された前記補正係数の関係を示す関係式を含み、
前記補正手段は、前記画素配列における前記補正対象画素の位置と前記関係式とに応じて前記補正係数を求める
ことを特徴とする請求項１に記載の撮像装置。
【請求項５】
前記混色特性情報は、
前記画素配列における行方向の画素の位置に対する、前記画素配列の光学中心を含む行の前記画素へ周辺画素から混入する信号成分を補正するように予め決定された係数の関係を示す行関係式と、
前記画素配列における列方向の画素の位置に対する、前記画素配列の光学中心を含む列の前記画素へ周辺画素から混入する信号成分を補正するように予め決定された係数の関係を示す列関係式と、
を含み、
前記補正手段は、前記画素配列における前記補正対象画素の行方向の位置及び前記行関係式に応じて、行方向の前記補正係数を求め、前記画素配列における前記補正対象画素の列方向の位置及び前記列関係式に応じて、列方向の前記補正係数を求める
ことを特徴とする請求項１に記載の撮像装置。
【請求項６】
前記読み出し手段は、前記画素配列における一部の画素から信号を読み出し、
前記補正手段は、前記読み出し手段により読み出された１フレーム分の画像信号における前記補正対象画素に隣接した画素を、前記画素配列における前記補正対象画素の周辺画素として、前記読み出し手段により前記補正対象画素から読み出された信号を補正する
ことを特徴とする請求項１から５のいずれか１項に記載の撮像装置。
【請求項７】
前記読み出し手段は、前記画素配列における２以上の同色の画素の信号を加算して読み出し、
前記補正手段は、加算される前記２以上の画素の重心位置を、前記画素配列における前記補正対象画素の位置として、前記補正対象画素から前記読み出し手段により読み出された信号を補正する
ことを特徴とする請求項１から５のいずれか１項に記載の撮像装置。
【請求項８】
前記補正手段は、前記補正対象画素の周辺画素の位置と、前記周辺画素の位置に応じた前記周辺画素へ前記補正対象画素から混入する信号成分に関する特性を示す混色特性情報とに応じて第２の補正係数を求め、前記読み出し手段により前記補正対象画素の周辺画素から読み出された信号と前記補正係数と前記第２の補正係数とを用いることにより、前記読み出し手段により前記補正対象画素から読み出された信号を補正する
ことを特徴とする請求項１から７のいずれか１項に記載の撮像装置。
【請求項９】
前記記憶手段は、前記画素配列における画素の位置に応じた前記画素からの周辺画素へ漏れ出す信号成分に関する特性を示す第２の混色特性情報を記憶し、
前記補正手段は、前記画素配列における補正対象画素の位置と前記混色特性情報とに応じて補正係数を求め、前記画素配列における前記補正対象画素の位置と前記第２の混色特性情報とに応じて前記補正対象画素から周辺画素へ漏れ出す信号成分を補正するための第２の補正係数を求め、前記読み出し手段により前記補正対象画素の周辺画素から読み出された信号と前記補正係数と前記第２の補正係数とを用いることにより、前記読み出し手段により前記補正対象画素から読み出された信号を補正する
ことを特徴とする請求項１から７のいずれか１項に記載の撮像装置。
【請求項１０】
被写体を撮像することにより、画像データを生成する撮像装置と、
前記撮像装置から前記画像データを受けて、受けた前記画像データを処理する処理装置と、
を備え、
前記撮像装置は、
複数の画素が行方向及び列方向に配列された画素配列と、
前記画素配列から信号を読み出す読み出し手段と、
前記画素配列における画素の位置に応じた前記画素への周辺画素から混入する信号成分に関する特性を示す混色特性情報を記憶する記憶手段と、
前記読み出し手段により読み出された１フレーム分の画像信号に対して、前記画素配列における位置を対応付けるとともに、前記混色特性情報を付帯させることにより、前記画像データを生成する生成手段と、
を含み、
前記処理装置は、前記画像データに含まれた前記画素配列における補正対象画素の位置と前記混色特性情報とに応じて前記補正対象画素へ周辺画素から混入する信号成分を補正するための補正係数を求め、前記画像データにおける前記補正対象画素の周辺画素の信号と前記補正係数とを用いることにより、前記画像データにおける前記補正対象画素の信号を補正する
ことを特徴とする撮像システム。
【請求項１１】
複数の画素が行方向及び列方向に配列された画素配列と、前記画素配列から信号を読み出す読み出し手段と、前記画素配列における画素の位置に応じた前記画素への周辺画素から混入する信号成分に関する特性を示す混色特性情報を記憶する記憶手段とを有する撮像装置における信号の補正方法であって、
前記画素配列における補正対象画素の位置と前記混色特性情報とに応じて前記補正対象画素へ周辺画素から混入する信号成分を補正するための補正係数を求める第１のステップと、
前記読み出し手段により前記補正対象画素の周辺画素から読み出された信号と前記補正係数とを用いることにより、前記読み出し手段により前記補正対象画素から読み出された信号を補正する第２のステップと、
を備えたことを特徴とする撮像装置における信号の補正方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置、撮像システム、及び撮像装置における信号の補正方法に関する。
【背景技術】
【０００２】
従来のデジタルカメラやデジタルビデオカメラなどの撮像装置では、ＣＣＤイメージセンサやＣＭＯＳイメージセンサなどが撮像センサとして用いられている。
【０００３】
図１３に示す撮像センサＩＳは、複数の画素が行方向及び列方向に配列された画素配列ＰＡを備える。画素配列ＰＡにおける各画素Ｐ１〜Ｐ５は、光電変換部ＰＤ、カラーフィルタＣＦ、及びマイクロレンズＭＬを含む。各画素Ｐ１〜Ｐ５では、カラーフィルタＣＦ及びマイクロレンズＭＬと光電変換部ＰＤとの間の開ロ領域ＯＡが、配線層ＷＬにより規定されている。隣接する画素の光電変換部ＰＤは、素子分離領域ＩＲにより、互いに電気的に分離されている。光電変換部ＰＤ及び素子分離領域ＩＲは、半導体基板ＳＢ内に配されている。
【０００４】
図１３において、画素Ｐ１のカラーフィルタＣＦが第１の色の光を透過し、画素Ｐ２のカラーフィルタＣＦが第２の色の光を透過する場合を考える。画素Ｐ１に対する斜め入射光ＩＬ１のうち第１の色の光ＩＬ１’は、画素Ｐ１の開ロ領域ＯＡを通過した後、その一部ＩＬ１”が素子分離領域ＩＲを透過して隣接する画素Ｐ２の光電変換部ＰＤに到達することがある。この場合、画素Ｐ２の光電変換部ＰＤは、本来第２の色の光を受けるべきであるにも関わらず、隣接する画素から混入した第１の色の光ＩＬ１”を受けて第１の色の光ＩＬ１”に応じた信号を発生させてしまう。すなわち、隣接する画素同士の信号が干渉しあう、いわゆる混色と呼ばれる現象が発生することがある。
【０００５】
この混色の発生しやすさは、図１４に示すように、撮像装置における撮影レンズのＦ値（絞りの開ロ径）に応じて異なる。図１４（ｂ）に示す絞りの開口径の小さい場合に比べて、図１４（ａ）に示す絞りの開ロ径の大きい場合の方が、斜め入射光が隣接画素へ混入しやすくなっている。すなわち、撮影レンズのＦ値が小さくなるにしたがって絞りの開口径は大きくなり、斜め入射光の隣接画素への混入量は増大する傾向にある。
【０００６】
また、混色の発生しやすさは、図１５に示すように、撮像装置における撮影レンズの瞳距離に応じて異なる。図１５（ａ）に示す瞳距離の長い場合に比べて、図１５（ｂ）に示す瞳距離の短い場合の方が、斜め入射光が隣接画素へ混入しやすくなっている。すなわち、瞳距離が短くなるにしたがって、斜め入射光の隣接画素への混入量は増大する傾向にある。
【０００７】
図１６に示すように、画素Ｐ２の光電変換部ＰＤは、画素Ｐ２への入射光ＩＬ２のうち画素Ｐ２のカラーフィルタＣＦを透過した第２の色の光ＩＬ２’を受けて、受けた第２の色の光ＩＬ２’に応じた電荷（信号）を発生させる。さらに、図１４又は図１５に示す理由により隣接する画素Ｐ１から第１の色の光ＩＬ１”を受けた画素Ｐ２の光電変換部ＰＤは、図１６に示すように、第１の色の光ＩＬ１”に応じた電荷（信号）を発生させてしまう。これにより、画素Ｐ２の光電変換部ＰＤが第２の色の光ＩＬ２’に応じた信号に加えて第１の色の光ＩＬ１”に応じた信号を発生させるので、混色が発生する。
【０００８】
また、混色の発生しやすさは、図１６及び図１７に示すように、光電変換部ＰＤに入射する光の色によっても異なる。これは、光電変換部ＰＤにおける光が電荷に変換される位置の半導体基板ＳＢ表画からの深さが、その光の波長によって異なる事に起因する。すなわち、波長の短い光に比べ、波長の長い光のほうが光電変換部ＰＤにおける深い位置で光電変換される事に起因する。
【０００９】
ここで、図１６に示す画素Ｐ１のカラーフィルタＣＦが赤色（Ｒ）の光を透過させ、画素Ｐ２のカラーフィルタＣＦが緑色（Ｇ）の光を透過させ、図１７に示す画素Ｐ６のカラーフィルタＣＦが青色（Ｂ）の光を透過させるものとする。
【００１０】
図１６に示すように、赤色（Ｒ）の光のカラーフィルタＣＦを通過した光は、他の色（Ｇ，Ｂ）のカラーフィルタＣＦを通過した光に比べ、光電変換部ＰＤにおける深い位置で光電変換される。このため、赤色（Ｒ）の光ＩＬ１’は、入射すべき画素Ｐ１の光電変換部ＰＤを通過し、その一部ＩＬ１”が隣接する画素Ｐ２の光電変換部ＰＤに入射してしまいやすい。隣接する画素Ｐ２の光電変換部ＰＤに入射した光ＩＬ１”は、そこで光電変換されるため、入射すべき画素Ｐ１の電荷（信号）とならずに隣接画素Ｐ２の信号に対する混色成分を発生させる。
【００１１】
一方、図１７に示したように、青色（Ｂ）のカラーフィルタＣＦを通過した光ＩＬ６’は、他の色（Ｒ，Ｇ）のカラーフィルタＣＦを通過した光ＩＬ１’、ＩＬ２’に比べ、光電変換部ＰＤにおける浅い位置で光電変換される。このため、画素Ｐ６に光線ＩＬ６が斜めに入射したとしても、隣接する画素Ｐ７の光電変換部ＰＤに到達する前に、画素Ｐ６の光電変換部ＰＤで光電変換される傾向にある。すなわち、青色（Ｂ）の光ＩＬ６’は、入射すべき画素Ｐ６の光電変換部ＰＤを通り抜けて隣接画素Ｐ７まで到達してしまうようなことは起こりにくいので、隣接画素Ｐ７の信号に対する混色成分を発生させにくい。
【００１２】
また、図１８に示すように、半導体基板ＳＢにおける深い位置では、隣接する画素の光電変換部ＰＤが、素子分離領域ＩＲによる電気的な分離が不十分である。このため、画素Ｐ１の光電変換部ＰＤにおける深い位置に蓄積されている電荷（信号）は、半導体基板ＳＢにおける深い位置で、隣接画素Ｐ２，Ｐ４の光電変換部ＰＤに拡散して混入する。この半導体基板ＳＢ内部でのクロストークも混色の原因となる。
【００１３】
このクロストークによる混色の発生しやすさは、図１９及び図２０に示すように、光電変換部ＰＤに入射する光の色によって異なる。
【００１４】
図１９に示すように、赤色（Ｒ）のカラーフィルタＣＦを通過した光ＩＬ１’は、他の色（Ｇ，Ｂ）のカラーフィルタＣＦを通過した光に比べ、光電変換部ＰＤにおける深い位置で光電変換され蓄積される。このため、赤色（Ｒ）の光ＩＬ１’に応じて画素Ｐ１の光電変換部ＰＤに蓄積された電荷（信号）は、半導体基板ＳＢにおける深い位置、すなわち素子分離領域ＩＲより深い領域を通って、隣接画素Ｐ２，Ｐ４の光電変換部ＰＤに拡散しやすい。素子分離領域ＩＲより深い領域では、隣接する画素の光電変換部の間の電気的な分離が不十分であると考えられる。隣接する画素Ｐ２，Ｐ４の光電変換部ＰＤに拡散された電荷（信号）は、蓄積されているべき画素Ｐ１の電荷（信号）とならずに隣接画素Ｐ２，Ｐ４の信号に対する混色成分を発生させやすい。
【００１５】
一方、図２０に示したように、青色（Ｂ）のカラーフィルタＣＦを通過した光ＩＬ６’は、他の色（Ｒ，Ｇ）のカラーフィルタＣＦを通過した光に比べ、光電変換部ＰＤにおける浅い位置で光電変換される。このため、青色（Ｂ）の光ＩＬ６’に応じて画素Ｐ６の光電変換部ＰＤに蓄積された電荷（信号）は、半導体基板ＳＢにおける浅い位置、すなわち素子分離領域ＩＲに阻まれて、隣接画素Ｐ８の光電変換部ＰＤに拡散しにくい。青色（Ｂ）の光ＩＬ６’に応じて画素Ｐ６の光電変換部ＰＤに蓄積された電荷（信号）は、隣接画素Ｐ８の信号に対する混色成分を発生させにくい。
【００１６】
これらの混色によって、撮像センサから出力される画像信号が劣化するため、色再現性が悪化する。
【００１７】
特許文献１には、ベイヤ配列に従ったカラーフィルタ配列を有するＣＣＤ撮像素子において、特定色画素の信号から、当該特定色画素と隣接する特定色以外の画素の信号より算出した一定割合の信号成分を減算する混色補正を行うことが記載されている。
【００１８】
この補正処理では、注目画素に対して当該注目画素に隣接する複数の周囲画素から等方的に混色が起こる、即ち複数の周囲画素から同じ割合で信号成分が混入することを前提として、等方的に一定割合の信号成分を減算することとしている。
【００１９】
一方、特許文献２には、実際の固体撮像素子において、画素内又は画素周辺の配線パターンや電極のレイアウトに依存して、光電変換部の受光面が画素内における偏った位置に配されることが記載されている。これにより、画素の物理的な中心と画素の光学的な中心とが一致しないために、注目画素に対する周囲画素からの混色が方向性を持って起こるとされている。
【００２０】
それに対して、特許文献２では、左上、右上、左下、右下それぞれの周囲画素からの混色を補正するための補正パラメータＫａ，Ｋｂ，Ｋｃ，Ｋｄを互いに独立に変えることが提案されている。これにより、特許文献２によれば、周囲画素からの混色量に応じて方向性を持たせた混色補正処理を実現することができるとされている。
【特許文献１】特開２００４−１３５２０６号公報
【特許文献２】特開２００７−１４２６９７号公報
【発明の開示】
【発明が解決しようとする課題】
【００２１】
特許文献２には、混色補正処理を行うための補正回路が、通信Ｉ／Ｆを介して外部から供給された方向性選択の制御信号を受け、受けた方向性選択の制御信号に応じて補正パラメータＫａ，Ｋｂ，Ｋｃ，Ｋｄを互いに独立に変えることが記載されている。具体的には、通信Ｉ／Ｆを介して外部から供給された方向性選択の制御信号が０の場合、Ｋａ＝Ｋｂ＝Ｋ１、Ｋｃ＝Ｋｄ＝Ｋ２とする。方向性選択の制御信号が１の場合、Ｋａ＝Ｋｃ＝Ｋ１、Ｋｂ＝Ｋｄ＝Ｋ２とし、方向性選択の制御信号が２の場合、Ｋａ＝Ｋｄ＝Ｋ１、Ｋｂ＝Ｋｃ＝Ｋ２とする。特許文献２に記載の補正回路においては、固体撮像素子に配された複数の画素の、各々の信号に対して用いる補正パラメータＫａ，Ｋｂ，Ｋｃ，Ｋｄは、いずれの画素に対しても共通の値を持つようになっている。しかしながら、実際の撮像装置においては、センサ面内の画素配置によって、画素への入射光線の角度は厳密には異なっている。光線の入射角に応じて、注目画素に対する周辺画素からの混色量は異なるため、すなわち、各画素における混色量は、センサ面内における各々の画素の画素配置によって異なってしまう。このような、画面内で不均一に起こる混色に対して、特許文献２に記載の補正回路では、好適な補正を行うことができない。
【００２２】
本発明の目的は、画素配列における各画素に対する混色補正処理の精度を向上することにある。
【課題を解決するための手段】
【００２３】
本発明の第１側面に係る撮像装置は、複数の画素が行方向及び列方向に配列された画素配列と、前記画素配列から信号を読み出す読み出し手段と、前記画素配列における画素の位置に応じた前記画素への周辺画素から混入する信号成分に関する特性を示す混色特性情報を記憶する記憶手段と、前記画素配列における補正対象画素の位置と前記混色特性情報とに応じて前記補正対象画素へ周辺画素から混入する信号成分を補正するための補正係数を求め、前記読み出し手段により前記補正対象画素の周辺画素から読み出された信号と前記補正係数とを用いることにより、前記読み出し手段により前記補正対象画素から読み出された信号を補正する補正手段とを備えたことを特徴とする。
【００２４】
本発明の第２側面に係る撮像システムは、被写体を撮像することにより、画像データを生成する撮像装置と、前記撮像装置から前記画像データを受けて、受けた前記画像データを処理する処理装置とを備え、前記撮像装置は、複数の画素が行方向及び列方向に配列された画素配列と、前記画素配列から信号を読み出す読み出し手段と、前記画素配列における画素の位置に応じた前記画素への周辺画素から混入する信号成分に関する特性を示す混色特性情報を記憶する記憶手段と、前記読み出し手段により読み出された１フレーム分の画像信号に対して、前記画素配列における位置を対応付けるとともに、前記混色特性情報を付帯させることにより、前記画像データを生成する生成手段とを含み、前記処理装置は、前記画像データに含まれた前記画素配列における補正対象画素の位置と前記混色特性情報とに応じて前記補正対象画素へ周辺画素から混入する信号成分を補正するための補正係数を求め、前記画像データにおける前記補正対象画素の周辺画素の信号と前記補正係数とを用いることにより、前記画像データにおける前記補正対象画素の信号を補正することを特徴とする。
【００２５】
本発明の第３側面に係る撮像装置における信号の補正方法は、複数の画素が行方向及び列方向に配列された画素配列と、前記画素配列から信号を読み出す読み出し手段と、前記画素配列における画素の位置に応じた前記画素への周辺画素から混入する信号成分に関する特性を示す混色特性情報を記憶する記憶手段とを有する撮像装置における信号の補正方法であって、前記画素配列における補正対象画素の位置と前記混色特性情報とに応じて前記補正対象画素へ周辺画素から混入する信号成分を補正するための補正係数を求める第１のステップと、前記読み出し手段により前記補正対象画素の周辺画素から読み出された信号と前記補正係数とを用いることにより、前記読み出し手段により前記補正対象画素から読み出された信号を補正する第２のステップとを備えたことを特徴とする。
【発明の効果】
【００２６】
本発明によれば、画素配列における各画素に対する混色補正処理の精度を向上することができる。
【発明を実施するための最良の形態】
【００２７】
本明細書において、光の入射角とは、光の重心が光の入射面の法線となす角を指すものとする。
【００２８】
本発明者は、図２１に示すように、撮像センサＩＳ１００の各画素に入射する光線の入射角が、画素配列ＰＡ１００の光学中心ＰＣと画素配列ＰＡ１００における画素との位置関係によって異なることに着目した。本発明者は、混色の発生しやすさが、この各画素への光線の入射角の違い、すなわち画素配列ＰＡ１００における各画素の位置の違いによっても発生するのではないかと考えた。
【００２９】
しかし、図２１に示すように、画素のサイズ（ピッチ）が大きい撮像センサＩＳ１００では、画素配列ＰＡ１００の光学中心ＰＣに位置する画素Ｐ１と、光学中心ＰＣからシフトした位置にある画素Ｐ３とで大きな混色の違いが見られなかった。
【００３０】
ここで、画素Ｐ１は、小さな入射角（≒０°）をなす重心ＣＧ１を有する光を受け、画素Ｐ３は、大きな入射角をなす重心ＣＧ３を有する光を受ける。画素のサイズ（ピッチ）が大きいと、光学中心ＰＣからシフトした位置にある画素Ｐ３へ斜めに入射した光線（重心ＣＧ３）であっても、隣接画素Ｐ８まで到達しにくい。すなわち、画素配列ＰＡ１００における各画素の位置の差による混色の差は、各画素における混色の絶対量に対して充分に小さく、問題となるレベルにならない傾向にある。
【００３１】
一方、図２２に示すように、画素のサイズ（ピッチ）が小さい撮像センサＩＳ２００では、画素配列ＰＡ２００の光学中心ＰＣに位置する画素Ｐ１と、光学中心ＰＣからシフトした位置にある画素Ｐ１３とで大きな混色の違いが見られた。
【００３２】
ここで、画素Ｐ１は、小さな入射角をなす重心ＣＧ１を有する光を受け、画素Ｐ１３は、大きな入射角をなす重心ＣＧ３を有する光を受ける。画素のサイズ（ピッチ）が小さいと、光学中心ＰＣからシフトした位置にある画素Ｐ１３へ斜めに（大きな入射角で）入射した光線（重心ＣＧ３）は、隣接画素Ｐ１８まで到達しやすい。すなわち、画素配列ＰＡ２００における各画素の位置の差による混色の差は、各画素における混色の絶対量に対して無視できないレベルまで大きくなる傾向にある。
【００３３】
特に、近年は画素の微細化が進んでおり、画素のサイズが更に縮小化することで、図２２に示すように、画素配列ＰＡ２００における各画素の位置の差による混色の差がより大きくなると考えられる。このため、画素配列ＰＡ２００における各画素の位置の差による混色の差は、無視することのできない問題となり、色再現性に与える影響が大きくなると考えられる。
【００３４】
次に、本発明の第１実施形態に係る撮像装置１００を、図１を用いて説明する。図１は、本発明の第１実施形態に係る撮像装置１００の構成を示す図である。
【００３５】
撮像装置１００は、例えば、デジタルカメラ、デジタルビデオカメラである。撮像装置１００は、次の構成要素を備える。
【００３６】
光学系１は、レンズ１ａ及び絞り１ｂを含む。レンズ１ａは、入射した光を屈折させて、撮像センサ３の画素配列（撮像面）に被写体の像を形成する。絞り１ｂは、光路上においてレンズ１ａと撮像センサ３との間に設けられ、レンズ１ａを通過後に撮像センサ３へ導かれる光の量を調節する。
【００３７】
メカニカルシャッタ２は、光路上において光学系１と撮像センサ３との間に設けられ、撮像センサ３の露光を制御する。
【００３８】
撮像センサ３は、画素配列ＰＡ３００に形成された被写体の像を画像信号に変換する。すなわち、撮像センサ３は、被写体を撮像する。撮像センサ３は、その画像信号を画素配列ＰＡ３００から読み出して出力する。撮像センサ３は、例えば、ＣＭＯＳイメージセンサ、ＣＣＤイメージセンサである。
【００３９】
具体的には、図２に示すように、撮像センサ３は、画素配列ＰＡ３００、読み出し部（読み出し手段）３１、及びアンプ３２を含む。図２は、本発明の第１実施形態における撮像センサ３の構成を示す図である。
【００４０】
画素配列ＰＡ３００では、複数の画素が行方向及び列方向に配列されている。各画素は、光電変換部ＰＤ（図１３参照）を含む。光電変換部ＰＤは、光に応じた電荷（信号）を発生させて蓄積する。
【００４１】
読み出し部３１は、画素配列ＰＡ３００から信号を読み出す。すなわち、読み出し部３１は、画素配列ＰＡ３００の各画素の光電変換部ＰＤが蓄積した電荷（信号）を、又は電荷に応じた信号を、各画素から読み出す。読み出し部３１は、読み出した信号をアンプ３２へ供給する。読み出し部３１は、例えば、ＣＭＯＳイメージセンサにおける各画素から垂直信号線を介して信号を読み出す回路、ＣＣＤイメージセンサにおける垂直転送ＣＣＤ・水平転送ＣＣＤである。
【００４２】
アンプ３２は、供給された信号を増幅することにより、画像信号を生成して出力する。アンプ３２は、例えば、ＣＭＯＳイメージセンサにおける読み出し部３１から水平信号線を介して受けた信号を増幅する出力アンプ、ＣＣＤイメージセンサにおけるフローティングディフュージョンアンプである。
【００４３】
Ａ／Ｄ変換器４は、撮像センサ３から出力された画像信号（アナログ信号）を受ける。Ａ／Ｄ変換器４は、受けた画像信号（アナログ信号）を画像信号（デジタル信号）に変換して出力する。
【００４４】
タイミング信号発生回路５は、基準となるタイミング信号を発生させて駆動回路６へ供給する。
【００４５】
駆動回路６は、供給されたタイミング信号に同期して、光学系１、メカニカルシャッタ２、撮像センサ３、及びＡ／Ｄ変換器４をそれぞれ駆動する。
【００４６】
電源スイッチ（電源ＳＷ）１６は、ユーザから電源投入の指示を受け付ける。電源スイッチ１６は、受け付けた電源投入の指示をシステム制御部１３へ供給する。
【００４７】
第１スイッチ（ＳＷ１）１７は、ユーザから第１の指示を受け付ける。第１の指示は、例えば、焦点調節処理、露出制御処理、及びホワイトバランス処理を行わせるための指示である。第１スイッチ１７は、受け付けた第１の指示をシステム制御部１３へ供給する。
【００４８】
第２スイッチ（ＳＷ２）１８は、ユーザから第２の指示を受け付ける。第２の指示は、例えば、撮影処理を行わせるための指示である。第２スイッチ１８は、受け付けた第２の指示をシステム制御部１３へ供給する。
【００４９】
システム制御部１３は、撮像装置１００の各部を全体的に制御する。
【００５０】
例えば、システム制御部１３は、電源スイッチ１６から受けた電源投入の指示に応じて、各部を起動する。
【００５１】
例えば、システム制御部１３は、第１スイッチ１７から受けた第１の指示に応じて、焦点調節処理、露出制御処理、及びホワイトバランス処理を行うように、各部を制御する。
【００５２】
例えば、システム制御部１３は、第２スイッチ１８から受けた第２の指示に応じて、撮影処理を行うように、各部を制御する。
【００５３】
揮発性メモリ（ＲＡＭ）１５は、所定のデータを一時的に記臆している。例えば、揮発性メモリ１５は、システム制御部１３の作業領域として使用される。すなわち、システム制御部１３は、不揮発性メモリ１４に記憶されたプログラム、制御データ及び補正データを揮発性メモリ１５に転送して一時的に記憶させておき、各部を制御する際に適宜参照する。
【００５４】
不揮発性メモリ１４は、システム制御部１３で実行される制御方法を記載したプログラム、プログラムを実行する際に使用されるパラメータやテーブル等の制御データを記憶している。
【００５５】
また、不揮発性メモリ（記憶手段）１４は、混色補正処理に用いる情報、すなわち、第１の混色特性情報と第２の混色特性情報とを記憶している。
【００５６】
第１の混色特性情報は、画素配列ＰＡ３００における位置に応じた画素への周辺画素から混入する信号成分に関する特性を示す情報である。第１の混色特性情報は、第１の係数テーブルを含む。第１の係数テーブルは、画素配列ＰＡ３００における位置と、画素へ周辺画素から混入する信号成分を補正するように予め決定された第１の補正係数とが、画素ごとに対応付けられたテーブルである。
【００５７】
第２の混色特性情報は、画素配列ＰＡ３００における位置に応じた画素からの周辺画素へ漏れ出す信号成分に関する特性を示す情報である。第２の混色特性情報は、第２の係数テーブルを含む。第２の係数テーブルは、画素配列ＰＡ３００における位置と、画素から周辺画素へ漏れ出す信号成分を補正するように予め決定された第２の補正係数とが、画素ごとに対応付けられたテーブルである。
【００５８】
信号処理回路７は、Ａ／Ｄ変換器４から出力された画像信号（デジタル信号）を受ける。信号処理回路７は、受けた画像信号（デジタル信号）に対して、所定の信号処理を行う。
【００５９】
例えば、信号処理回路（補正手段）７は、読み出し部３１により画素配列ＰＡ３００における補正対象画素から読み出された信号を補正する混色補正処理を行う。
【００６０】
具体的には、信号処理回路７は、画素配列ＰＡ３００における補正対象画素の位置と第１の混色特性情報とに応じて補正対象画素へ周辺画素から混入する信号成分を補正するための第１の補正係数を求める。信号処理回路７は、画素配列ＰＡ３００における補正対象画素の位置と第１の係数テーブルとに応じて第１の補正係数を求める。
【００６１】
信号処理回路７は、画素配列ＰＡ３００における補正対象画素の位置と第２の混色特性情報とに応じて補正対象画素から周辺画素へ漏れ出す信号成分を補正するための第２の補正係数を求める。信号処理回路７は、画素配列ＰＡ３００における補正対象画素の位置と第２の係数テーブルとに応じて第２の補正係数を求める（第１のステップ）。
【００６２】
信号処理回路７は、読み出し部３１により補正対象画素の周辺画素から読み出された信号と第１の補正係数と第２の補正係数とを用いることにより、読み出し部３１により補正対象画素から読み出された信号を補正する（第２のステップ）。
【００６３】
信号処理回路７は、これらの信号処理を行うことにより、画像データを生成する。信号処理回路７は、生成した画像データを画像メモリ８又はシステム制御部１３へ供給する。あるいは、信号処理回路７は、生成した画像データを記録用の圧縮画像データに変換して、変換した圧縮画像データを記録回路１０へ供給する。あるいは、信号処理回路７は、生成した画像データを表示用の画像信号に変換して、変換した表示用の画像信号を表示回路１２へ供給する。
【００６４】
画像メモリ８は、信号処理回路７から供給された画像データを一時的に記憶している。
【００６５】
記録回路１０は、記録媒体９が着脱可能に接続される。記録回路１０は、信号処理回路７から供給された記録用の圧縮画像データを、接続された記録媒体９へ記録する。
【００６６】
表示回路１２は、信号処理回路７から供給された表示用の画像信号に応じた画像を画像表示装置１１に表示する。
【００６７】
このように、信号処理回路７が画素配列ＰＡ３００における補正対象画素の位置に応じて第１の補正係数と第２の補正係数とをそれぞれ求めるので、第１の補正係数と第２の補正係数とのそれぞれを補正対象画素の位置に応じた適切なものとすることができる。
【００６８】
また、信号処理回路７が補正対象画素の周辺画素から読み出された信号と第１の補正係数と第２の補正係数とを用いることにより、補正対象画素から読み出された信号を補正する。これにより、画素配列ＰＡ３００における補正対象画素の位置に応じた適切な補正を行うことができる。
【００６９】
したがって、画素配列ＰＡ３００における各画素の位置の差による混色の差が画像信号に応じた画像の色再現性に与える影響を低減できるので、画素配列における各画素に対する混色補正処理の精度を向上することができる。
【００７０】
次に、撮像装置１００における、メカニカルシャッタ２を使用した撮影処理における動作について説明する。
【００７１】
撮影処理における動作に先立ち、撮像装置１００の電源投入時等の、システム制御部１３の動作開始時において、不揮発性メモリ１４から必要なプログラム、制御データ及び補正データを揮発性メモリ１５に転送して記憶しておくものとする。
【００７２】
撮影処理の開始に伴い、システム制御部１３は、必要に応じて、各種のプログラムやデータを、不揮発性メモリ１４から揮発性メモリ１５に転送し、あるいは、直接不揮発性メモリ１４から読み出して使用する。
【００７３】
システム制御部１３は、撮影処理における露光処理を制御する。光学系１は、システム制御部１３からの制御信号により、絞り１ｂとレンズ１ａとを駆動して、適切な明るさに設定された被写体の像を撮像センサ３上に形成する。
【００７４】
メカニカルシャッタ２は、システム制御部１３からの制御信号により、必要な露光時間となるように撮像センサ３の動作に合わせて撮像センサ３を遮光するように駆動される。この時、撮像センサ３が電子シャッタ機能を有する場合は、メカニカルシャッタ２と併用して、必要な露光時間を確保してもよい。
【００７５】
撮像センサ３は、システム制御部１３により制御されるタイミング信号発生回路５が発生する動作パルスをもとにした駆動パルスで駆動され、被写体像を光電変換により電気信号に変換してアナログ画像信号として出力する。
【００７６】
撮像センサ３から出力されたアナログの画像信号は、システム制御部１３により制御されるタイミング信号発生回路５が発生する動作パルスにより、Ａ／Ｄ変換器４でデジタル画像信号に変換される。
【００７７】
システム制御部１３は、撮影処理における現像処理を制御する。これにより、信号処理回路７は、デジタル画像信号に対して、混色補正を含む各種補正、色変換、ホワイトバランス、ガンマ補正等の画像処理、解像度変換処理、画像圧縮処理等を行う。
【００７８】
画像メモリ８は、信号処理中のデジタル画像信号を一時的に記憶したり、信号処理されたデジタル画像信号である画像データを記憶したりするために用いられる。
【００７９】
システム制御部１３は、撮影処理における記録処理を制御する。これにより、信号処理回路７で信号処理された画像データや画像メモリ８に記憶されている画像データは、記録回路１０において記録媒体９に適したデータ（例えば、階層構造を持つファイルシステムデータ）に変換されて記録媒体９に記録される。
【００８０】
また、Ａ／Ｄ変換器４でデジタル画像信号に変換された画像データは、信号処理回路７で解像度変換処理を実施された後、表示回路１２において画像表示装置１１に適した信号（例えば、ＮＴＳＣ方式のアナログ信号等）に変換される。そして、画像表示装置１１に表示される。
【００８１】
ここで、信号処理回路７においては、システム制御部１３からの制御信号により信号処理をせずに、デジタル画像信号をそのまま画像データとして、画像メモリ８や記録回路１０に出力してもよい。
【００８２】
また、信号処理回路７は、システム制御部１３から要求があった場合に、信号処理の過程で生じたデジタル画像信号や画像データの情報、あるいは、それらから抽出された情報をシステム制御部１３に出力する。デジタル画像信号や画像データの情報としては、例えば、画像の空間周波数、指定領域の平均値、圧縮画像のデータ量等の情報がある。
【００８３】
記録回路１０は、システム制御部１３から要求があった場合に、記録媒体９の種類や空き容量等の情報をシステム制御部１３に出力する。
【００８４】
次に、撮像装置１００における、記録媒体９に画像データが記録されている場合の再生動作について説明する。
【００８５】
システム制御部１３は、第１スイッチ１７及び／又は第２スイッチ１８から、あるいは、他のスイッチ（図示せず）から、記録媒体９に記録された画像データの再生指示を受ける。システム制御部１３は、受けた再生指示に応じて、記録回路１０を制御する。
【００８６】
システム制御部１３からの制御信号により記録回路１０は、記録媒体９から画像データを読み出す。
【００８７】
システム制御部１３からの制御信号により信号処理回路７は、画像データが圧縮画像であった場合には、画像伸長処理を行い、画像メモリ８に記憶させる。画像メモリ８に記憶されている画像データは、信号処理回路７で解像度変換処理を実施された後、表示回路１２において画像表示装置１１に適した信号に変換されて画像表示装置１１に表示される。
【００８８】
次に、補正対象画素とその周辺画素との間で起きる混色を、図３を用いて説明する。図３は、補正対象画素とその周辺画素との間で起きる混色を模式的に表した図である。
【００８９】
特定の１画素（画素Ｘとする）に着目した場合を考える。画素Ｘから読み出される信号ＳｉｇＸは、理想の信号ＳｉｇＸ’と比べ、周辺画素へ漏れ出す信号成分ＳＣ１１〜ＳＣ１４の分だけレベルが減少し、周辺画素から混入する信号成分ＳＣ１〜ＳＣ４の分だけレベルが加算されたものである。
【００９０】
ここで、信号成分ＳＣ１１は、画素Ｘに対する第１の方向（例えば左）に隣接する画素Ｌへ、画素Ｘから漏れ出した信号成分である。信号成分ＳＣ１２は、画素Ｘに対する第２の方向（例えば右）に隣接する画素Ｒへ、画素Ｘから漏れ出した信号成分である。信号成分ＳＣ１３は、画素Ｘに対する第３の方向（例えば上）に隣接する画素Ｕへ、画素Ｘから漏れ出した信号成分である。信号成分ＳＣ１４は、画素Ｘに対する第４の方向（例えば下）に隣接する画素Ｄへ、画素Ｘから漏れ出した信号成分である。
【００９１】
また、信号成分ＳＣ１は、画素Ｘに対する第１の方向（例えば左）に隣接する画素Ｌから、画素Ｘへ混入した信号成分である。信号成分ＳＣ２は、画素Ｘに対する第２の方向（例えば右）に隣接する画素Ｒから、画素Ｘへ混入した信号成分である。信号成分ＳＣ３は、画素Ｘに対する第３の方向（例えば上）に隣接する画素Ｕから、画素Ｘへ混入した信号成分である。信号成分ＳＣ４は、画素Ｘに対する第４の方向（例えば下）に隣接する画素Ｄから、画素Ｘへ混入した信号成分である。
【００９２】
画素Ｘから所定の方向へ漏れ出した信号の量は、理想の信号ＳｉｇＸ’に対し一定の割合であるが、ここでは簡略化のため、信号ＳｉｇＸに対し一定の割合と考える。画素Ｘから各方向に隣接する画素に漏れ出す信号の、画素Ｘから読み出された信号ＳｉｇＸに対する割合を表す係数と、ＳｉｇＸとを乗算することによって、画素Ｘから周辺画素に漏れ出した成分の信号量を求めることが出来る。
【００９３】
また、周辺の画素から画素Ｘに混入する成分の信号量も同様に、隣接する各画素から画素Ｘに混入する信号の、周辺の各画素から読み出された信号に対する割合を表す係数と、周辺の各画素から読み出された信号とを乗算することによって求めることができる。
【００９４】
ここで、画素Ｘから読み出された信号をＳｉｇＸ、画素Ｘに対する第１の方向（例えば左）に隣接する画素Ｌから読み出された信号をＳｉｇＬとする。画素Ｘに対する第２の方向（例えば右）に隣接する画素Ｒから読み出された信号をＳｉｇＲとし、画素Ｘに対する第３の方向（例えば上）に隣接する画素Ｕから読み出された信号をＳｉｇＵとする。画素Ｘに対する第４の方向（例えば下）に隣接する画素Ｄから読み出された信号をＳｉｇＤとする。
【００９５】
また、画素Ｘから画素Ｌへ漏れ出す信号成分を補正するための係数を［ｘ１］とし、画素Ｌから画素Ｘへ混入する信号成分を補正するための係数を［ｌ２］とする。画素Ｘから画素Ｒへ漏れ出す信号成分を補正するための係数を［ｘ２］とし、画素Ｒから画素Ｘへ混入する信号成分を補正するための係数を［ｒ１］とする。画素Ｘから画素Ｕへ漏れ出す信号成分を補正するための係数を［ｘ３］とし、画素Ｕから画素Ｘへ混入する信号成分を補正するための係数を［ｕ４］とする。画素Ｘから画素Ｄへ漏れ出す信号成分を補正するための係数を［ｘ４］とし、画素Ｄから画素Ｘへ混入する信号成分を補正するための係数を［ｄ３］とする。
【００９６】
このとき、画素Ｘの信号ＳｉｇＸに含まれる混色成分が補正された理想の信号ＳｉｇＸ’は、次の数式１で求められる。
【００９７】
ＳｉｇＸ’＝ＳｉｇＸ＋ＳｉｇＸ＊（［ｘ１］＋［ｘ２］＋［ｘ３］＋［ｘ４］）−ＳｉｇＬ＊［ｌ２］−ＳｉｇＲ＊［ｒ１］−ＳｉｇＵ＊［ｕ４］−ＳｉｇＤ＊［ｄ３］・・・数式１
数式１に示されるように、画索の混色を補正するには、各画素の位置（座標）に対して［ｌ２］、［ｒ１］、［ｕ４］、及び［ｄ３］の４つの混色補正係数を対応づけて第１の混色特性情報とすればよい。また、各画素の位置（座標）に対して［ｘ１］、［ｘ２］、［ｘ３］、［ｘ４］の４つの混色補正係数を対応づけて第２の混色特性情報とすればよい。
【００９８】
あるいは、数式１から、画素Ｘから漏れ出す信号成分を補正するための係数をまとめることができる。このため、
［ｘ］＝［ｘ１］＋［ｘ２］＋［ｘ３］＋［ｘ４］・・・数式２
として、各画素の位置に対して、［ｘ］の１つの混色補正係数を対応づけて第２の混色特性情報としてもよい。
【００９９】
または、画素Ｘから見て、第１の方向に隣接する画素Ｌに漏れ出す信号成分であるＳｉｇＸ＊［ｘ１］は、画素Ｌから見ると、画素Ｘから混入する信号成分であり、理論上等価である。各画素の位置に対して、［ｘ１］、［ｘ２］、［ｘ３］、及び［ｘ４］の４つの混色補正係数を対応づけたものを、第１の混色特性情報とし、そこから及び第２の混色特性情報を導くものとしてもよい。信号処理回路７は、混色補正処理の際に、各画素の位置に対して、隣接する４画素の［ｘ１］、［ｘ２］、［ｘ３］、及び［ｘ４］の４つの混色補正係数のうちその画素に関連する４つの混色補正係数を対応付けて第２の混色特性情報として用いることになる。すなわち、各画素の位置に対して、［ｘ１］、［ｘ２］、［ｘ３］、及び［ｘ４］の４つの混色補正係数が対応づけられた係数テーブルを、上記の第１の係数テーブルとし、そこから上記の第２の係数テーブルを導くものとしてもよい。
【０１００】
この混色補正係数は、照射角を非常に絞った光源を用い、撮像センサの注目画素一画素に光を照射して、注目画素とその隣接画素の信号出力を予め測定することで求めることができる。ここで、画素Ｘやその隣接画素からの信号の漏れ出しの割合は、各画素への光線の入射角の成分によって変化するため、測定の際には、注目画素一画素に対して、照射する光の角度を変化させながら、複数の照射角で測定を行う必要がある。
【０１０１】
こうして測定された、画素Ｘに対する光の入射角と画素Ｘとその隣接画素の各々の信号量との関係に加えて、撮像装置の光学系から撮像センサへ入射する光線の角度と撮像センサ上の各画素と撮像装置の光学中心との位置関係をもとに、混色補正係数を求める。すなわち、画素配列における各画素の位置と、［ｘ１］、［ｘ２］、［ｘ３］、［ｘ４］、［ｌ２］、［ｒ１］、［ｕ４］、及び［ｄ３］の８つの混色補正係数とを対応付けて、係数テーブルを作成することができる。
【０１０２】
あるいは、混色補正係数は、シミュレーションに基づいて算出された理論値を元に決定してもよい。撮像センサ上の各画素と撮像装置の光学中心との位置関係、各画素への光線の入射角、画素のセルサイズ、画素ピッチ、カラーフィルタの高さ、撮像センサの内部構造などから、混色補正係数をシミュレーションに基づいて理論的に算出してもよい。
【０１０３】
次に、画素配列における画素の位置と混色補正係数との関係を、図２及び図４を用いて説明する。図２は、画素配列における画素Ｘ１〜Ｘ４及びその周辺画素を含む各画素の位置を示している。図４は、画素Ｘ１，Ｘ２及びその行方向の周辺画素のそれぞれへ入射する光を示している。
【０１０４】
図２及び図４に示すように、画素配列ＰＡ３００における光学中心ＰＣに対する左側に配置された画素Ｘ１では、光学中心ＰＣに位置する画素Ｘｃに比べて、係数［ｘ１］と係数［ｒ１］とが大きくなり、逆に係数［ｘ２］と係数［ｌ２］とが小さくなる。一方、画素Ｘ１では、係数［ｘ３］、［ｘ４］、［ｕ４］ｓ及び［ｄ３］は、光学中心ＰＣに位置する画素Ｘｃと同じである。
【０１０５】
図２及び図４に示すように、画素配列ＰＡ３００における光学中心ＰＣに対する右側に配置された画素Ｘ２では、光学中心ＰＣに位置する画素Ｘｃに比べて、係数［ｘ２］と係数［ｌ２］とが大きくなり、逆に係数［ｘ１］と係数［ｒ１］とが小さくなる。一方、画素Ｘ２では、係数［ｘ３］、［ｘ４］、［ｕ４］、及び［ｄ３］は、光学中心ＰＣに位置する画素Ｘｃと同じである。
【０１０６】
図２に示すように、画素配列ＰＡ３００における光学中心ＰＣに対する上側に配置された画素Ｘ３では、光学中心ＰＣに位置する画素Ｘｃに比べて、係数［ｘ３］と係数［ｄ３］とが大きくなり、逆に係数［ｘ４］と係数［ｕ４］とが小さくなる。一方、画素Ｘ３では、係数［ｘ１］、［ｘ２］、［ｌ２］及び［ｒ１］は、光学中心ＰＣに位置する画素Ｘｃと同じである。
【０１０７】
図２に示すように、画素配列ＰＡ３００における光学中心ＰＣに対する下側に配置された画素Ｘ４では、光学中心ＰＣに位置する画素Ｘｃに比べて、係数［ｘ４］と係数［ｕ４］とが大きくなり、逆に係数［ｘ３］と係数［ｄ３］とが小さくなる。一方、画素Ｘ４では、係数［ｘ１］、［ｘ２］、［ｌ２］、及び［ｒ１］は、光学中心ＰＣに位置する画素Ｘｃと同じである。
【０１０８】
このように、混色補正係数は、画素配列ＰＡ３００における各画素の光学中心ＰＣに対する位置関係に依存して、画素ごとに異なる値となる。そのため、全画面に渡って画像信号の混色を好適に補正するためには、全画素について、［ｘ１］、［ｘ２］、［ｘ３］、［ｘ４］、［ｌ２］、［ｒ１］、［ｕ４］、［ｄ３］の８つの係数を、各画素の位置と対応付けて係数テーブルとすることが好ましい。または、［ｘ］、［ｌ２］、［ｒ１］、［ｕ４］、［ｄ３］の５つの係数を、各画素の位置と対応付けて係数テーブルとしてもよい。あるいは、係数［ｘ１］、［ｘ２］、［ｘ３］、及び［ｘ４］の４つの係数を、各画素の位置と対応付けて係数テーブルとしてもよい。
【０１０９】
尚、本実施形態はベイヤ配列の撮像センサに関して述べたが、本発明の実施に当たっては、画素におけるカラーフィルタの配列はベイヤ配列に限らない。また、本実施形態は各画素について上下左右に隣接する画素との間に起こる混色について各々の補正係数を持たせるようにしたが、斜め方向に隣接する画素について補正係数を持たせるようにしてもよい。さらに、隣接する画素だけでなく、着目画素から所定の画素数だけ離れた画素との間に起こる混色を補正するための補正係数をあわせて持たせるようにしてもよい。
【０１１０】
次に、本発明の第２実施形態に係る撮像装置１００ｉについて説明する。以下では、第１実施形態と異なる部分を中心に説明する。
【０１１１】
撮像装置１００ｉの不揮発性メモリ１４ｉは、図５に示すように、第１の混色特性情報として、第１の係数テーブルの代わりに、第１の行補正データＲＤ１及び第１の列補正データＣＤ１を記憶している。第１の行補正データＲＤ１は、画素配列ＰＡ３００における行方向（水平方向）の位置と、画素配列ＰＡ３００の光学中心ＰＣを含む行の画素へ周辺画素から混入する信号成分を補正するように予め決定された係数とが対応付けられたデータである。第１の列補正データＣＤ１は、画素配列ＰＡ３００における列方向（垂直方向）の位置と、画素配列ＰＡ３００の光学中心ＰＣを含む列の画素へ周辺画素から混入する信号成分を補正するように予め決定された係数とが対応付けられたデータである。なお、図５は、本発明の第２実施形態における第１の混色特性情報及び第２の混色特性情報を示す図である。
【０１１２】
また、不揮発性メモリ１４ｉは、図５に示すように、第２の混色特性情報として、第２の係数テーブルの代わりに、第２の行補正データＲＤ２及び第２の列補正データＣＤ２を記憶している。第２の行補正データＲＤ２は、画素配列ＰＡ３００における行方向（水平方向）の位置と、画素配列ＰＡ３００の光学中心ＰＣを含む行の画素から周辺画素へ漏れ出す信号成分を補正するように予め決定された係数とが対応付けられたデータである。第２の列補正データＣＤ２は、画素配列ＰＡ３００における列方向（垂直方向）の位置と、画素配列ＰＡ３００の光学中心ＰＣを含む列の画素から周辺画素へ漏れ出す信号成分を補正するように予め決定された係数とが対応付けられたデータである。
【０１１３】
撮像装置１００ｉの信号処理回路７ｉは、画素配列ＰＡ３００における補正対象画素の行方向の位置と第１の行補正データＲＤ１とに応じて、行方向の第１の補正係数［ｒ１］、［ｌ２］を求める。信号処理回路７ｉは、画素配列ＰＡ３００における補正対象画素の列方向の位置と第１の列補正データＣＤ１とに応じて、列方向の第１の補正係数［ｕ４］、［ｄ３］を求める。
【０１１４】
また、撮像装置１００ｉの信号処理回路７ｉは、画素配列ＰＡ３００における補正対象画素の行方向の位置と第２の行補正データＲＤ２とに応じて、行方向の第２の補正係数［ｘ１］、［ｘ２］を求める。信号処理回路７ｉは、画素配列ＰＡ３００における補正対象画素の列方向の位置と第２の列補正データＣＤ２とに応じて、列方向の第２の補正係数［ｘ４］、［ｘ３］を求める。
【０１１５】
このように、不揮発性メモリ１４ｉは、第１の混色特性情報として、２次元的なデータである第１の係数テーブルの代わりに、それぞれ１次元的なデータである第１の行補正データＲＤ１及び第１の列補正データＣＤ１を記憶している。また、不揮発性メモリ１４ｉは、第２の混色特性情報として、２次元的なデータである第２の係数テーブルの代わりに、それぞれ１次元的なデータである第２の行補正データＲＤ２及び第２の列補正データＣＤ２を記憶している。これにより、第１の混色特性情報のデータ量及び第２の混色特性情報のデータ量を低減できる。
【０１１６】
例えば、混色補正係数を決定する際に、撮像装置の光学系から撮像センサへ入射する光線の角度に関わる要因として、撮像装置の光学系におけるレンズの絞りの開口径がある。そのため、光学系が変化しても画像信号の混色を好適に補正するためには、レンズの絞りのＦ値ごとに混色補正係数を変える必要がある。このとき、撮像装置は、レンズの絞りのＦ値ごとに、撮像センサの全画素について、画素ごとに異なる複数の混色補正係数を含む混値特性情報を記憶していることになり、混色特性情報のデータ量が膨大になってしまう。
【０１１７】
それに対して、本実施形態では、混色量が画素配列における光学中心からの距離で決まることに着目する。全画素についての混色補正係数をもとに、画素配列における光学中心に配された画素の属する画素行にある各画素の［ｘ１］、［ｘ２］、［ｌ２］、［ｒ１］の各混色補正係数を、［ｘ１］、［ｘ２］、［ｌ２］、［ｒ１］に対応する水平方向に一次元データ化する。また、撮像装置の光学中心に配された画素の属する画素列にある各画素の［ｘ３］、［ｘ４］、［ｕ４］、［ｄ３］の各々の混色補正係数を、［ｘ３］、［ｘ４］、［ｕ４］、［ｄ３］の各々に対応する垂直方向に一次元データ化する。不揮発性メモリ１４ｉが混色補正データ（一次元データ）を混色補正係数の代わりに記憶しておき、信号処理回路７ｉは、それらをもとに各画素に対応する混色補正係数を導出して補正を行っても良い。
【０１１８】
不揮発性メモリ１４ｉは、図６に示すように、一次元データと絞りのＦ値とのテーブルを記憶している。このテーブルから、信号処理回路７ｉは、撮影条件に合致するＦ値に対応する混色補正データ（一次元データ）を選択し、補正対象画素に対応する混色補正係数を得て、信号の補正を行うことができる。なお、図６は、本発明の第２実施形態における一次元データと絞りのＦ値とのテーブルを示す図である。
【０１１９】
あるいは、例えば、混色補正係数を決定する際に、撮像装置の光学系から撮像センサへ入射する光線の角度に関わる要因として、レンズの瞳距離がある。そのため、光学系が変化しても画像信号の混色を好適に補正するためには、レンズの瞳距離ごとに混色補正係数を変える必要がある。このとき、撮像装置は、レンズの瞳距離ごとに、撮像センサの全画素について、画素ごとに異なる複数の混色補正係数を持つことになり、混色特性情報のデータ量が膨大になってしまう。
【０１２０】
それに対して、本実施形態では、図７に示すように、不揮発性メモリ１４ｉが、一次元データと瞳距離とのテーブルを記憶している。このテーブルから、信号処理回路７ｉは、撮影条件に合致する瞳距離に対応する混色補正データ（一次元データ）を選択し、補正対象画素に対応する混色補正係数を得て、信号の補正を行うことができる。なお、図７は、本発明の第２実施形態における一次元データと瞳距離とのテーブルを示す図である。
【０１２１】
あるいは、例えば、混色補正係数を決定する際に、撮像装置の光学系から撮像センサへ入射する光線の角度に関わる要因として、光学系がレンズ１ａ（図１参照）に加えてズームレンズをさらに含む場合、ズームレンズのズーム位置がある。このズームレンズのズーム位置を変えることで、レンズ１ａ（図１参照）の絞りや瞳距離が変化してしまう。そのため、光学系が変化しても画像信号の混色を好適に補正するためには、レンズのズーム位置ごとに混色補正係数を変える必要がある。このとき、撮像装置は、レンズのズーム位置ごとに、撮像センサの全画素について、画素ごとに異なる複数の混色補正係数を持つことになり、混色特性情報のデータ量が膨大になってしまう。
【０１２２】
それに対して、本実施形態では、信号処理回路７ｉが、レンズのズーム位置に合致する絞りのＦ値と瞳距離とを求める。信号処理回路７ｉは、求めたＦ値に対応する混色補正データ（一次元データ）を図６に示すテーブルから選択し、求めた瞳距離に対応する混色補正データ（一次元データ）を図７に示すテーブルから選択する。信号処理回路７ｉは、該当する絞りにおける補正係数と、瞳距離における補正係数とを加算した上で、補正対象画素の信号の補正を行うことができる。
【０１２３】
なお、不揮発性メモリ１４ｉが、一次元データとズーム位置とのテーブル（図示せず）を記憶していてもよい。この場合、このテーブルから、信号処理回路７ｉは、撮影条件に合致するズーム位置に対応する混色補正データ（一次元データ）を選択し、補正対象画素に対応する混色補正係数を得て、信号の補正を行うことができる。
【０１２４】
あるいは、例えば、混色補正係数を決定する際に、撮像装置の光学系から撮像センサへ入射する光線の角度に関わる要因として、レンズ交換式の撮像装置などに本発明を適用する場合、装着される可能性のあるレンズの種類がある。この装着されるレンズの種類を変えることで、レンズ１ａ（図１参照）の絞りや瞳距離が変化してしまう。そのため、光学系が変化しても画像信号の混色を好適に補正するためには、装着されるレンズの種類ごとに混色補正係数を変える必要がある。このとき、撮像装置は、装着されるレンズの種類ごとに、撮像センサの全画素について、画素ごとに異なる複数の混色補正係数を持つことになり、混色特性情報のデータ量が膨大になってしまう。
【０１２５】
それに対して、本実施形態では、信号処理回路７ｉが、実際に装着されたレンズの種類に合致する絞りのＦ値と瞳距離とを求める。信号処理回路７ｉは、求めたＦ値に対応する混色補正データ（一次元データ）を図６に示すテーブルから選択し、求めた瞳距離に対応する混色補正データ（一次元データ）を図７に示すテーブルから選択する。信号処理回路７ｉは、該当する絞りにおける補正係数と、瞳距離における補正係数とを加算した上で、補正対象画素の信号の補正を行うことができる。
【０１２６】
なお、不揮発性メモリ１４ｉが、一次元データとレンズの種類とのテーブル（図示せず）を記憶していてもよい。この場合、このテーブルから、信号処理回路７ｉは、実際に装着されたレンズの種類に対応する混色補正データ（一次元データ）を選択し、補正対象画素に対応する混色補正係数を得て、信号の補正を行うことができる。
【０１２７】
あるいは、例えば、混色補正係数を決定する際に、撮像装置の光学系から撮像センサへ入射する光線の角度に関わる要因として、光電変換部へ入射する光の色がある。そのため、光学系が変化しても画像信号の混色を好適に補正するためには、光電変換部へ入射する光の色ごとに混色補正係数を変える必要がある。このとき、撮像装置は、光電変換部へ入射する光の色ごとに、撮像センサの全画素について、画素ごとに異なる複数の混色補正係数を持つことになり、混色特性情報のデータ量が膨大になってしまう。
【０１２８】
それに対して、本実施形態では、不揮発性メモリ１４ｉが、一次元データと光の色とのテーブルを記憶している。このテーブルから、信号処理回路７ｉは、補正対象画素のカラーフィルタの色に対応する図８に示すような補正データ（一次元データである行補正データ又は列補正データ）を選択する。例えば、信号処理回路７ｉは、補正対象画素がＲ画素（カラーフィルタの色が赤）であれば、図８に示す補正データｉを選択する。例えば、信号処理回路７ｉは、補正対象画素がＧ画素（カラーフィルタの色が緑）であれば、図８に示す補正データｉｉを選択する。例えば、信号処理回路７ｉは、補正対象画素がＢ画素（カラーフィルタの色が青）であれば、図８に示す補正データｉｉｉを選択する。これにより、信号処理回路７ｉは、補正対象画素に対応する混色補正係数を得て、信号の補正を行うことができる。なお、図８は、本発明の第２実施形態における色ごとの補正データを示す図である。
【０１２９】
次に、本発明の第３実施形態に係る撮像装置について説明する。以下では、第１実施形態と異なる部分を中心に説明する。
【０１３０】
本実施形態に係る撮像装置の不揮発性メモリは、図示しないが、第１の混色特性情報として、第１の係数テーブルの代わりに、第１の関係式を記憶している。第１の関係式は、画素配列における位置に対する、画素へ周辺画素から混入する信号成分を補正するように予め決定された第１の補正係数の関係を示す式である。
【０１３１】
また、不揮発性メモリは、図示しないが、第２の混色特性情報として、第２の係数テーブルの代わりに、第２の関係式を記憶している。第２の関係式は、画素配列における位置に対する、画素から周辺画素へ漏れ出す信号成分を補正するように予め決定された第２の補正係数の関係を示す式である。
【０１３２】
撮像装置の信号処理回路は、画素配列における補正対象画素の位置と第１の関係式とに応じて、第１の補正係数［ｒ１］、［ｌ２］、［ｕ４］、［ｄ３］を求める。
【０１３３】
また、撮像装置の信号処理回路は、画素配列における補正対象画素の位置と第２の関係式とに応じて、第２の補正係数［ｘ１］、［ｘ２］、［ｘ４］、［ｘ３］を求める。
【０１３４】
このように、不揮発性メモリは、第１の混色特性情報として、２次元的なデータである第１の係数テーブルの代わりに、０次元的なデータである第１の関係式を記憶している。また、不揮発性メモリは、第２の混色特性情報として、２次元的なデータである第２の係数テーブルの代わりに、０次元的なデータである第２の関係式を記臆している。これにより、第１の混色特性情報のデータ量及び第２の混色特性憶報のデータ量をさらに低減できる。
【０１３５】
なお、撮像装置の不揮発性メモリは、第１の混色特性情報として、第１の関係式の代わりに、第１の行関係式及び第１の列関係式を記憶していてもよい。第１の行関係式は、画素配列における行方向（水平方向）の位置に対する、画素配列の光学中心を含む行の画素へ周辺画素から混入する信号成分を補正するように予め決定された係数の関係を示す式である。第１の列関係式は、画素配列における列方向（垂直方向）の位置に対する、画素配列の光学中心を含む列の画素へ周辺画素から混入する信号成分を補正するように予め決定された係数の関係を示す式である。
【０１３６】
また、不揮発性メモリは、第２の混色特性情報として、第２の関係式の代わりに、第２の行関係式及び第２の列関係式を記憶している。第２の行関係式は、画素配列における行方向（水平方向）の位置に対する、画素配列の光学中心を含む行の画素から周辺画素へ漏れ出す信号成分を補正するように予め決定された係数の関係を示す式である。第２の列関係式は、画素配列における列方向（垂直方向）の位置に対する、画素配列の光学中心を含む列の画素から周辺画素へ漏れ出す信号成分を補正するように予め決定された係数の関係を示す式である。
【０１３７】
撮像装置の信号処理回路は、画素配列における補正対象画素の行方向の位置と第１の行関係式とに応じて、行方向の第１の補正係数［ｒ１］、［ｌ２］を求める。信号処理回路は、画素配列における補正対象画素の列方向の位置と第１の列関係式とに応じて、列方向の第１の補正係数［ｕ４］、［ｄ３］を求める。
【０１３８】
また、撮像装置の信号処理回路は、画素配列における補正対象画素の行方向の位置と第２の行関係式とに応じて、行方向の第２の補正係数［ｘ１］、［ｘ２］を求める。信号処理回路は、画素配列における補正対象画素の列方向の位置と第２の列関係式とに応じて、列方向の第２の補正係数［ｘ４］、［ｘ３］を求める。
【０１３９】
次に、本発明の第４実施形態に係る撮像装置１００ｊについて説明する。以下では、第１実施形態と異なる部分を中心に説明する。
【０１４０】
撮像装置１００ｊは、撮像センサ３ｊ及び信号処理回路７ｊを備える。
【０１４１】
撮像センサ３ｊは、図９に示すように、読み出し部３１ｊを含む。読み出し部３１ｊは、第１のモード（全画面モード）において、画素配列ＰＡ３００における全部の画素から信号を読み出し、第２のモード（間引きモード）において、画素配列ＰＡ３００における一部の画素から信号を読み出す。例えば、読み出し部３１ｊは、第２のモード（間引きモード）において、図９における黒色で示す画素から信号を読み出す。なお、図９は、本発明の第４実施形態における撮像センサ３ｊの構成を示す図である。
【０１４２】
このように画素配列ＰＡ３００から画素を間引いて、必要な所定の画素からの画像信号のみを読み出す『間引きモード』においては、画素配列ＰＡ３００上で隣接する画素からの信号が読み出されず、隣接する画素の信号を補正に用いることができない。そこで、第２のモード（間引きモード）では、読み出された画像信号上で隣り合う信号の出カレベルは、読み出されなかった隣接画素の信号の出力レベルにほぼ等しいと考え、次のような補正を行う。
【０１４３】
信号処理回路７ｊは、第２のモードにおいて、次のように補正を行う。信号処理回路７ｊは、読み出し部３１ｊにより読み出された１フレーム分の画像信号における補正対象画素に隣接した画素を、画素配列ＰＡ３００における補正対象画素の周辺画素として、補正対象画素から読み出された信号を補正する。例えば、信号処理回路７ｊは、画素Ｘの混色補正処理を行う際に、画素ＬＬ，ＲＲ，ＵＵ，ＤＤを画素Ｘの周辺画素として、画素Ｘの信号を補正する。
【０１４４】
具体的には、次のような補正を行う。画素Ｘから読み出される信号をＳｉｇＸとし、画素ＬＬから読み出される信号をＳｉｇＬＬとする。画素ＲＲから読み出される信号をＳｉｇＲＲとし、画素ＵＵから読み出される信号をＳｉｇＵＵとする。画素ＤＤから読み出される信号をＳｉｇＤＤとする。第１実施形態で述べた、画素Ｘに対応する混色補正係数である、画素Ｘから漏れ出す成分の補正を行う係数［ｘ１］、［ｘ２］、［ｘ３］、［ｘ４］、画素Ｘに隣接する画素から漏れ込む成分の補正を行う係数［ｌ２］、［ｒ１］、［ｕ４］、［ｄ３］を用いる。信号処理回路７ｊは、数式３に示す演算によって補正を行い、補正後の信号ＳｉｇＸ’を得る。
【０１４５】
ＳｉｇＸ’＝ＳｉｇＸ＋ＳｉｇＸ＊（［ｘ１］＋［ｘ２］＋［ｘ３］＋［ｘ４］）−ＳｉｇＬＬ＊［ｌ２］−ＳｉｇＲＲ＊［ｒ１］−ＳｉｇＵＵ＊［ｕ４］−ＳｉｇＤＤ＊［ｄ３］・・・数式３
次に、本発明の第５実施形態に係る撮像装置１００ｋについて説明する。以下では、第１実施形態と異なる部分を中心に説明する。
【０１４６】
撮像装置１００ｋは、撮像センサ３ｋ及び信号処理回路７ｋを備える。
【０１４７】
撮像センサ３ｋは、図１０（ａ）に示すように、読み出し部３１ｋを含む。読み出し部３１ｋは、第１のモード（全画面モード）において、画素配列ＰＡ３００における全部の画素から信号を読み出し、第３のモード（加算モード）において、画素配列ＰＡ３００における互いに近傍に位置する２以上の同色画素ごとに信号を加算して読み出す。例えば、読み出し部３１ｋは、第３のモード（加算モード）において、図１０（ａ）における黒色で示す同色の画素から信号を加算して読み出す。なお、図１０は、本発明の第５実施形態における撮像センサ３ｋの構成及び動作を示す図である。
【０１４８】
このように混色補正を行う以前に、撮像センサの各画素で生じた画素信号を、所定の画素数ずつ加算した上で画像信号を生成するような『加算モード』においては、撮像センサ上で同色の所定数の画素の信号が加算されて読み出される。このため、混色補正の対象となる画素に隣接する画素の信号をそのまま補正に用いることができない。そこで、第３のモード（加算モード）では、加算される画素から各々の隣接画素への信号の漏れ出し量は、加算される画素の重心に位置する画素から隣接画素への漏れ出し量とほぼ等価であると考え、次のような補正を行う。
【０１４９】
信号処理回路７ｋは、第３のモードにおいて、加算される２以上の画素の重心位置を、画素配列ＰＡ３００における補正対象画素の位置として、補正対象画素から読み出し部３１ｋにより読み出された信号を補正する。例えば、信号処理回路７ｋは、図１０（ａ）における黒色で示す画素の信号を加算平均して図１０（ｂ）に示す信号ＳｉｇＸＸを得る場合、黒色で示す画素の重心位置である画素Ｘの位置を補正対象画素の位置として、補正対象画素の信号ＳｉｇＸＸを補正する。
【０１５０】
具体的には、次のような補正を行う。図１０（ａ）の画素Ｘを含む、黒色で示した画素の信号を加算平均して、図１０（ｂ）の信号ＳｉｇＸＸを得るとする。図１０（ａ）の画素Ｌを含む、網点柄で示した画素の信号を加算平均して、図１０（ｂ）ＳｉｇＬＬを得るとする。図１０（ａ）の画素Ｒを含む、斜線柄で示した画素の信号を加算平均して、図１０（ｂ）ＳｉｇＲＲを得るとする。図１０（ａ）の画素Ｕを含む、横縞柄で示した画素の信号を加算平均して、図１０（ｂ）の信号ＳｉｇＵＵを得るとする。図１０（ａ）の画素Ｄを含む、格子柄で示した画素の信号を加算平均して、図１０（ｂ）の信号ＳｉｇＤＤを得るとする。第１実施形態で述べた、画素Ｘに対応する混色補正係数である、画素Ｘから漏れ出す成分の補正を行う係数［ｘ１］、［ｘ２］、［ｘ３］、［ｘ４］、画素Ｘに隣接する画素から漏れ込む成分の補正を行う係数［ｌ２］、［ｒ１］、［ｕ４］、［ｄ３］を用いる。信号処理回路７ｋは、数式４に示す演算によって補正を行い、補正後の信号ＳｉｇＸＸ’を得る。
【０１５１】
ＳｉｇＸＸ’＝ＳｉｇＸＸ＋ＳｉｇＸＸ＊（［ｘ１］＋［ｘ２］＋［ｘ３］＋［ｘ４］）−ＳｉｇＬＬ＊［ｌ２］−ＳｉｇＲＲ＊［ｒ１］−ＳｉｇＵＵ＊［ｕ４］−ＳｉｇＤＤ＊［ｄ３］・・・数式４
次に、本発明の第６実施形態に係る撮像装置１００ｐを含む撮像システム４００を、図１１を用いて説明する。図１１は、本発明の第６実施形態に係る撮像装置１００ｐを含む撮像システム４００の構成を示す図である。以下では、第１実施形態と異なる部分を中心に説明する。
【０１５２】
撮像システム４００は、撮像装置１００ｐ及び処理装置２００を備える。撮像装置１００ｐは、通信回線３００を介して処理装置２００に通信可能に接続されている。通信回線３００は、例えば、シリアルケーブルなどのシリアル通信可能な有線通信回線、ブルートゥースなどの無線通信回線である。処理装置２００は、例えば、パーソナルコンピュータである。撮像装置１００ｐは、通信回線３００を介して画像データを処理装置２００へ供給する。処理装置２００は、撮像装置１００ｐから画像データを受けて、受けた画像データを処理する。
【０１５３】
撮像装置１００ｐは、信号処理回路（生成手段）７ｐ及び通信インターフェース（Ｉ／Ｆ）１９ｐを備える。
【０１５４】
本実施形態においては、混色補正処理を撮像装置内部ではなく外部において行う。外部にて混色補正処理を行う場合には、補正を行うために必要な情報を、画像データに付帯して出力する必要がある。
【０１５５】
そこで、信号処理回路７ｐは、読み出し回路により読み出された１フレーム分の画像信号に対して、画素配列における位置を対応付けるとともに、第１の混色特性情報及び第２の混色特性情報を付帯させることにより、画像データを生成する（図１３参照）。信号処理回路７ｐは、生成した画像データを通信インターフェース１９ｐへ供給する。
【０１５６】
なお、信号処理回路７ｐは、画像信号（画像情報）に対して、レンズのＦ値、瞳距離、ズーム位置等の撮影条件に合致した混色補正係数（又は、混色補正データ、混色補正式）を付帯させればよい。また、信号処理回路７ｐは、レンズのＦ値、瞳距離、ズーム位置等の撮影条件に関する情報を画像信号（画像情報）に付帯させてもよい。
【０１５７】
通信インターフェース１９ｐは、供給された画像データを通信回線３００経由で処理装置２００へ送信する。
【０１５８】
処理装置２００は、通信インターフェース（Ｉ／Ｆ）２０２及び補正部２０１を備える。
【０１５９】
通信インターフェース２０２は、通信回線３００経由で撮像装置１００ｐから画像データを受信する。通信インターフェース２０２は、受信した画像データを補正部２０１へ供給する。
【０１６０】
補正部２０１は、図１２に示すように、画像データを通信インターフェース２０２から受ける。補正部２０１は、画像データにより示された画素配列における補正対象画素の位置と第１の混色特性情報とに応じて補正対象画素へ周辺画素から混入する信号成分を補正するための第１の補正係数を求める。補正部２０１は、画像データにより示された画素配列における補正対象画素の位置と第２の混色特性情報とに応じて補正対象画素から周辺画素へ漏れ出す信号成分を補正するための第２の補正係数を求める。補正部２０１は、画像データにおける補正対象画素の周辺画素の信号と第１の補正係数と第２の補正係数とを用いることにより、画像データにおける補正対象画素の信号を補正する。補正部２０１は、図１２に示すように、補正後の画像信号を後段へ出力する。なお、図１２は、本発明の第６実施形態における補正部２０１についてのデータフロー図である。
【図面の簡単な説明】
【０１６１】
【図１】本発明の第１実施形態に係る撮像装置１００の構成を示す図。
【図２】本発明の第１実施形態における撮像センサ３の構成を示す図。
【図３】補正対象画素とその周辺画素との間で起きる混色を模式的に表した図。
【図４】画素Ｘ１，Ｘ２及びその行方向の周辺画素のそれぞれへ入射する光を示す図。
【図５】本発明の第２実施形態における第１の混色特性情報及び第２の混色特性情報を示す図。
【図６】本発明の第２実施形態における一次元データと絞りのＦ値とのテーブルを示す図。
【図７】本発明の第２実施形態における一次元データと瞳距離とのテーブルを示す図。
【図８】本発明の第２実施形態における色ごとの補正データを示す図。
【図９】本発明の第４実施形態における撮像センサ３ｊの構成を示す図。
【図１０】本発明の第５実施形態における撮像センサ３ｋの構成及び動作を示す図。
【図１１】本発明の第６実施形態に係る撮像装置１００ｐを含む撮像システム４００の構成を示す図。
【図１２】本発明の第６実施形態における補正部２０１についてのデータフロー図。
【図１３】背景技術を説明するための図。
【図１４】背景技術を説明するための図。
【図１５】背景技術を説明するための図。
【図１６】背景技術を説明するための図。
【図１７】背景技術を説明するための図。
【図１８】背景技術を説明するための図。
【図１９】背景技術を説明するための図。
【図２０】背景技術を説明するための図。
【図２１】発明の着想を説明するための図。
【図２２】発明の着想を説明するための図。
【符号の説明】
【０１６２】
１００、１００ｉ、１００ｊ、１００ｋ、１００ｐ  撮像装置
２００  処理装置
４００  撮像システム
【図１】
2010130583.tif 000003
【図２】
2010130583.tif 000004
【図３】
2010130583.tif 000005
【図４】
2010130583.tif 000006
【図５】
2010130583.tif 000007
【図６】
2010130583.tif 000008
【図７】
2010130583.tif 000009
【図８】
2010130583.tif 000010
【図９】
2010130583.tif 000011
【図１０】
2010130583.tif 000012
【図１１】
2010130583.tif 000013
【図１２】
2010130583.tif 000014
【図１３】
2010130583.tif 000015
【図１４】
2010130583.tif 000016
【図１５】
2010130583.tif 000017
【図１６】
2010130583.tif 000018
【図１７】
2010130583.tif 000019
【図１８】
2010130583.tif 000020
【図１９】
2010130583.tif 000021
【図２０】
2010130583.tif 000022
【図２１】
2010130583.tif 000023
【図２２】
2010130583.tif 000024