(57)【要約】【課題】輪郭信号における緑−緑差異を防止し、ひずみが最小である輪郭信号を生成する、輪郭処理において使用するためのフィルタを提供すること。【解決手段】本発明は、デジタルイメージセンサに関し、特に、ＲＧＢベイヤーイメージセンサの輪郭信号における緑色の不均一性を防止する輪郭フィルタ（ＺＳＢ，７）に関する。フィルタにおけるフィルタ係数を設計するための一連の規則であって、これによって緑色の不均一性が防止される一連の規則が定義されている。【選択図】図６
2004519142.tif 000002
【特許請求の範囲】
【請求項１】
イメージを表すピクセル値の配列から輪郭情報を生成するための輪郭フィルタであって、当該配列が、ピクセルの第一および第二グループを有し、前記ピクセルの第一グループが、第一の色を有するフィルタによって光学的にフィルタリングされる前記イメージの一部を表し、かつ、前記ピクセルの第二グループが、１つ以上の第二の色を有する１つ以上のフィルタによって光学的にフィルタリングされる前記イメージの一部を表し、前記第一グループの各ピクセルが、垂直と水平の隣接ピクセルとして前記第二グループのピクセルを有し、当該フィルタが、
当該ピクセル値の配列を０交換された配列に変換するための手段であって、前記第二グループの前記ピクセルの前記ピクセル値を０によって置き換える、手段と、
当該０交換された配列を輪郭フィルタリングし、かつ当該輪郭情報を出力するための手段であって、当該フィルタリング手段が、
前記０交換された配列の各ピクセルに対して、前記ピクセルの配列の中に副配列を定義するための手段であって、前記フィルタリングするピクセルが、前記副配列内の所定のポジションに配置される、手段と、
前記フィルタリングするピクセルが前記ピクセルの第一グループのピクセルであるときに、前記フィルタリング手段において使用するためのフィルタ係数の第一配列と、前記フィルタリングするピクセルが前記ピクセルの第二グループのピクセルであるときに、前記フィルタリング手段において使用するためのフィルタ係数の第二配列であって、前記第一および第二配列が、前記副配列と同じ次元を有し、かつ、前記所定のポジションにおいて前記フィルタ係数が０であることを含む一連の規則を満たし、かつ、前記配列の前記フィルタ係数を、対角線上の係数の互いに交差しない複数のグループであって、前記配列の中央の係数に対して対称である互いに交差しないグループに分割するときに、各グループ内に、当該グループ内の残りのフィルタ係数の合計に等しいフィルタ係数が存在する、フィルタ係数の第一および第二配列と、
フィルタリングされたピクセル値を計算するための手段であって、当該計算が、フィルタ係数の当該第一または第二配列の各係数に、ピクセルの当該第一または第二グループのいずれかからの当該副配列内に対応的に配置されているピクセルを乗じ、かつ、各乗算の結果を加算し、ピクセルの当該副配列それぞれについてフィルタリングされたピクセル値を得る、手段と、
を有する、手段と、
を有する、輪郭フィルタ。
【請求項２】
イメージを表すピクセル値の配列から輪郭情報を生成するための輪郭フィルタであって、当該配列が、ピクセルの第一および第二グループを有し、前記ピクセルの第一グループが、第一の色を有するフィルタによって光学的にフィルタリングされる前記イメージの一部を表し、かつ、前記ピクセルの第二グループが、１つ以上の第二の色を有する１つ以上のフィルタによって光学的にフィルタリングされる前記イメージの一部を表し、前記第一グループの各ピクセルが、垂直と水平の隣接ピクセルとして前記第二グループのピクセルを有し、当該フィルタが、
当該ピクセル値の配列を０交換された配列に変換するための手段であって、前記第二グループの前記ピクセルの前記ピクセル値を０によって置き換える、手段と、
当該０交換された配列を輪郭フィルタリングし、かつ当該輪郭情報を出力するための手段であって、当該フィルタリング手段が、
前記０交換された配列の各ピクセルに対して、前記ピクセルの配列の中に副配列を定義するための手段であって、フィルタリングするピクセルが、前記副配列内の所定のポジションに配置される、手段と、
前記フィルタリングするピクセルが前記ピクセルの第一グループのピクセルであるときに、前記フィルタリング手段において使用するためのフィルタ係数の第一配列と、前記フィルタリングするピクセルが前記ピクセルの第二グループのピクセルであるときに、前記フィルタリング手段において使用するためのフィルタ係数の第二配列であって、前記第一および第二配列が、前記副配列と同じ次元を有し、かつ、当該フィルタ係数の配列の１行おきの行を有するサブグループにおける係数の合計が０でありかつ当該サブグループに含まれない各フィルタ係数が０と０．１の間であり望ましくは０であることを含む一連の規則を満たし、かつ、前記配列の前記フィルタ係数を、対角線上の係数の互いに交差しない複数のグループであって、前記配列の中央の係数に対して対称である互いに交差しないグループに分割するときに、各グループ内に、当該グループ内の残りのフィルタ係数の合計に等しいフィルタ係数が存在する、フィルタ係数の第一および第二配列と、
フィルタリングされたピクセル値を計算するための手段であって、当該計算が、フィルタ係数の当該第一または第二配列の各係数に、ピクセルの当該第一または第二グループのいずれかからの当該副配列内に対応的に配置されているピクセルを乗じ、かつ、各乗算の結果を加算し、ピクセルの当該副配列それぞれについてフィルタリングされたピクセル値を得る、手段と、
を有する、手段と、
を有する、輪郭フィルタ。
【請求項３】
当該副配列が、奇数の行と列を有し、かつ、当該フィルタリングするピクセルの当該所定のポジションが、当該副配列の中央である、請求項１または２による輪郭フィルタ。
【請求項４】
請求項１または２による輪郭フィルタであって、さらに、前記フィルタリングと平行して、欠けているカラーピクセルの補間を行うための手段を有する、輪郭フィルタ。
【請求項５】
請求項１または２による輪郭フィルタであって、さらに、前記第一および第二フィルタ係数それぞれを有する２つの個別のフィルタのノイズを一致させるための手段を有する、請求項１または２による輪郭フィルタ。
【請求項６】
前記一致させるための手段が、前記フィルタそれぞれのコアリングレベルを調整することによって一致処理を行うように適合化されている、請求項５による輪郭フィルタ。
【請求項７】
請求項１または２による輪郭フィルタにおいて、
前記ピクセルの第一グループが、前記ピクセル値の配列の各行および列の１つおきのピクセルから成り、
前記第一および第二フィルタ配列が、１つのフィルタ配列に結合され、
− 前記第一および第二配列が、同じ次元を有し、
− 前記第一および第二配列の各ポジションについて、前記所定のポジションを除き、前記第一および第二配列の少なくとも一方が、少なくとも実質的に０であるフィルタ係数を有し、
− 前記１つの配列が、前記第一および第二配列と同じ次元を有し、かつ、
− 前記１つの配列の各ポジションの前記フィルタ係数が、前記第一および第二配列の対応する係数の合計である、
輪郭フィルタ。
【請求項８】
請求項７による輪郭フィルタであって、
当該フィルタが、５ｘ２フィルタであって、当該フィルタの前記係数が、実質的に、
2004519142.tif 000031
によって定義される相互比を有する５ｘ２フィルタか、または、
５ｘ３フィルタであって、当該フィルタの前記係数が、実質的に、
2004519142.tif 000032
によって定義される相互比を有する５ｘ３フィルタか、または、
５ｘ５フィルタであって、当該フィルタの前記係数が、実質的に、
2004519142.tif 000033
によって定義される相互比を有する５ｘ５フィルタか、または、
５ｘ５フィルタであって、当該フィルタの前記係数が、実質的に、
2004519142.tif 000034
によって定義される相互比を有する５ｘ５フィルタか、または、
５ｘ５フィルタであって、当該フィルタの前記係数が、実質的に、
2004519142.tif 000035
によって定義される相互比を有する５ｘ５フィルタか、または、
５ｘ５フィルタであって、当該フィルタの前記係数が、実質的に、
2004519142.tif 000036
によって定義される相互比を有する５ｘ５フィルタであって、ｘが、実数であり、Ａ， Ｂ， Ｃ， Ｄ， Ｅ， Ｆ，
Ｇ， Ｈ， Ｉ， Ｊ， Ｋ， Ｌ， Ｍ， Ｎ， Ｏ， Ｐ， Ｑ， Ｒ， Ｓ， Ｔ， Ｕ， Ｖ， Ｘ， Ｙ， Ｚそれぞれの値が、
実質的にｘより小さく、望ましくは０と０．１
ｘの間である、５ｘ５フィルタである、
輪郭フィルタ。
【請求項９】
イメージを表すピクセル値の配列から輪郭情報を生成するための方法であって、当該配列が、ピクセルの第一および第二グループを有し、前記ピクセルの第一グループが、第一の色を有するフィルタによって光学的にフィルタリングされる前記イメージの一部を表し、かつ、前記ピクセルの第二グループが、１つ以上の第二の色を有する１つ以上のフィルタによって光学的にフィルタリングされる前記イメージの一部を表し、前記第一グループの各ピクセルが、垂直と水平の隣接ピクセルとして前記第二グループのピクセルを有し、当該方法が、
当該ピクセル値の配列を０交換された配列に変換するステップであって、前記第二グループの前記ピクセルの前記ピクセル値を０によって置き換える、ステップと、
当該０交換された配列を輪郭フィルタリングし、かつ当該輪郭情報を出力するステップであって、当該フィルタリングステップが、
前記０交換された配列の各ピクセルに対して、前記ピクセルの配列の中に副配列を定義するステップであって、フィルタリングするピクセルが、前記副配列内の所定のポジションに配置される、ステップと、
前記フィルタリングするピクセルが前記ピクセルの第一グループのピクセルであるときに、フィルタ係数の第一配列を使用し、前記フィルタリングするピクセルが前記ピクセルの第二グループのピクセルであるときに、フィルタ係数の第二配列を使用するステップであって、前記第一および第二配列が、前記副配列と同じ次元を有し、かつ、前記所定のポジションにおいて前記フィルタ係数が０であることを含む一連の規則を満たし、かつ、前記配列の前記フィルタ係数を、対角線上の係数の互いに交差しない複数のグループであって、前記配列の中央の係数に対して対称である互いに交差しないグループに分割するときに、各グループ内に、当該グループ内の残りのフィルタ係数の合計に等しいフィルタ係数が存在する、ステップと、
フィルタリングされたピクセル値を計算するステップであって、当該計算が、フィルタ係数の当該第一または第二配列の各係数に、ピクセルの当該第一または第二グループのいずれかからの当該副配列内に対応的に配置されているピクセルを乗じ、かつ、各乗算の結果を加算し、ピクセルの当該副配列それぞれについてフィルタリングされたピクセル値を得る、ステップと、
を有する、フィルタリングステップと、
を有する、方法。
【請求項１０】
イメージを表すピクセル値の配列から輪郭情報を生成するための方法であって、当該配列が、ピクセルの第一および第二グループを有し、前記ピクセルの第一グループが、第一の色を有するフィルタによって光学的にフィルタリングされる前記イメージの一部を表し、かつ、前記ピクセルの第二グループが、１つ以上の第二の色を有する１つ以上のフィルタによって光学的にフィルタリングされる前記イメージの一部を表し、前記第一グループの各ピクセルが、垂直と水平の隣接ピクセルとして前記第二グループのピクセルを有し、当該方法が、
当該ピクセル値の配列を０交換された配列に変換するステップであって、前記第二グループの前記ピクセルの前記ピクセル値を０によって置き換える、ステップと、
当該０交換された配列を輪郭フィルタリングし、かつ当該輪郭情報を出力するステップであって、当該フィルタリングステップが、
前記０交換された配列の各ピクセルに対して、前記ピクセルの配列の中に副配列を定義するステップであって、フィルタリングするピクセルが、前記副配列内の所定のポジションに配置される、ステップと、
前記フィルタリングするピクセルが前記ピクセルの第一グループのピクセルであるときに、フィルタ係数の第一配列を使用し、前記フィルタリングするピクセルが前記ピクセルの第二グループのピクセルであるときに、フィルタ係数の第二配列を使用するステップであって、前記第一および第二配列が、前記副配列と同じ次元を有し、かつ、当該フィルタ係数の配列の１行おきの行を有するサブグループにおける係数の合計が０でありかつ当該サブグループに含まれない各フィルタ係数が０と０．１の間であり望ましくは０であることを含む一連の規則を満たす、ステップと、
フィルタリングされたピクセル値を計算するステップであって、当該計算が、フィルタ係数の当該第一または第二配列の各係数に、ピクセルの当該第一または第二グループのいずれかからの当該副配列内に対応的に配置されているピクセルを乗じ、かつ、各乗算の結果を加算し、ピクセルの当該副配列それぞれについてフィルタリングされたピクセル値を得る、ステップと、
を有する、フィルタリングステップと、
を有する、方法。
【請求項１１】
コンピュータプログラムであって、当該プログラムがコンピュータ上で実行されるときに、請求項９または１０の前記ステップすべてを実行するように適合化されているコンピュータプログラムコードを有する、コンピュータプログラム。
【請求項１２】
請求項１１に記載のコンピュータプログラムを有するコンピュータ可読媒体。
【請求項１３】
カラーフィルタ配列を有するセンサと、請求項１に記載の輪郭フィルタ（７）とを有するカラーカメラ。
【発明の詳細な説明】
【０００１】
【発明が属する技術分野】
本発明は、デジタルイメージセンサに関し、特に、ＲＧＢベイヤーイメージセンサの輪郭信号における緑色の不均一性を防止する輪郭フィルタに関する。
【０００２】
【従来の技術】
デジタルカメラにおいては、レンズを用いてシーンから光情報を得る。この光情報は、光感知素子の配列を有するイメージセンサによって電子に変換される。デジタルＲＧＢスチールカメラを使用するときには、赤、緑、青の各色をカラー感知するのに３基のイメージセンサが使用される。カメラのコストとサイズの両方を低減するため、ＲＧＢベイヤーフィルタ配列を有する１基のイメージセンサを使用することが可能であり、この場合、センサの配列内の各ピクセルが所定のパターンにおいて赤、緑、または青を感知する。このパターンは、緑と赤の列と、緑と青の列とが交互に並ぶ。３色すべてを感知するのに１基のイメージセンサを使用するときには、イメージ全体を表示する前に、欠けているピクセルを再構築する必要がある。
【０００３】
ＲＧＢベイヤーセンサを使用するときには、緑色のピクセルに隣接するピクセルの色の違いが原因で、いわゆる緑色の不均一性（ｇｒｅｅｎ
ｎｏｎ−ｕｎｉｆｏｒｍｉｔｙ）または緑−緑差異（ｇｒｅｅｎ−ｇｒｅｅｎ ｄｉｆｆｅｒｅｎｃｅｓ）が発生する。「赤」列の垂直方向には、緑色のピクセルに隣接するピクセルは赤のみであり、「青」列においては、緑色に隣接するピクセルは青色のみである。センサの垂直方向の色分離の品質によっては、シリコン層における電子電荷またはカラーフィルタ内の光のクロストークに起因して、緑色のピクセルが赤色と青色のピクセルによって変調されることがある。その場合、この結果として、特定のカラーシーンにおいて列ごとの緑色の不均一性が生じる。
【０００４】
図１には、上記の説明による緑−緑差異の例と、赤色と青色のピクセルによる緑色の列ごとの変調がどのように現れるかが示されている。図１において、この差異は、標準字体のＧと、太字の斜体Ｇとして示されている。この差異は、特殊な再構築方法を使用して緑色のピクセルを再構築するときに、イメージ信号において補正できる。
【０００５】
再構築された緑色の信号における緑色の均一性を回復する方法について、以下に説明する。図２は、２行遅延（ｔｗｏ
ｒｏｗ ｄｅｌａｙｓ）によるＲＧＢ再構築の場合における、周囲の緑色のピクセルの定義（ｄｅｃｌａｒａｔｉｏｎ）、すなわち緑色が存在する（左）または存在しない（右）場合を示す。存在しない場合には、欠けている緑色のピクセルＧｃは、ＲＧＢ再構築フィルタの再構築された（ｓｍａｒｔ）緑色値である。緑色の不均一性の量は、イメージセンサの設計に依存する。Ｐｈｉｌｉｐｓ社のＦＴセンサの場合、最大値は緑色信号の振幅の約５％である。このレベルは、「Ｇｎｏｎｕｎｉｆｏｒｍｌｅｖｅｌ」において示され、カメラ処理のコアによって調整可能である必要がある。
【０００６】
以下は、緑色の均一性を回復するためのアルゴリズムである。
2004519142.tif 000003
【０００７】
このアルゴリズムの結果として、緑色の不均一性に起因する規則的なパターンが目に認識されず、かつ信号変動がＧｎｏｎｕｎｉｆｏｒｍｌｅｖｅｌを超える場合にも解像度が低下することなく、再構築された信号において緑色の均一性が回復する。Ｇｎｏｎｕｎｉｆｏｒｍｌｅｖｅｌレベル以下では、中央の緑色のピクセルは、存在する緑色のピクセルすべての平均の緑色値に置き換えられる。
【０００８】
輪郭フィルタリングは、イメージ処理のもうひとつの重要な部分であり、輪郭フィルタリングによって、イメージの輪郭情報から輪郭信号が得られる。その後、この信号を、再構築されたイメージ信号に適用することができ、これによってイメージの輪郭が増幅される。実際の使用においては、イメージの輪郭増幅により、イメージがよりシャープになる。
【０００９】
ＲＧＢベイヤーカラーフィルタ配列を有するデジタルスチールカラーカメラに、ＲＧＢ色再構築と平行して動作する二次元（２Ｄ）輪郭フィルタを設けることができる。この方法の利点は、ＲＧＢ信号の再構築後の輪郭処理が不要になることである。平行な輪郭処理は、特に低コストの用途において注目されている。二次元の輪郭信号用に余分な行遅延が不要であり、なぜなら、ＲＧＢ色再構築に適用されるのと全く同じ行遅延によって、緑色のみから輪郭信号が得られるためである。
【００１０】
従って、最良の結果を得るためには、上述されているように再構築されるデータにおいて緑色の均一性を回復する必要があるのみならず、平行な輪郭信号から緑色の不均一性を取り除く必要もある。
【００１１】
最初に、平行する輪郭処理の基本事項について説明する。ＲＧＢベイヤーイメージセンサ用の平行する輪郭フィルタリングの最も重要な側面は、いわゆる０交換器（ｚｅｒｏ
ｓｗｉｔｃｈ ｂｏｘ）である。連続するＲＧ信号、またはセンサの次の行におけるＧＢ信号が、欠けている色の位置が０である３つのＲＧＢ信号にデマルチプレクスされる。
【００１２】
従って、赤色の信号は次のようになる。
【００１３】
2004519142.tif 000004
青色の信号は次のようになる。
【００１４】
2004519142.tif 000005
緑色の信号は次のようになる。
【００１５】
2004519142.tif 000006
これらの各信号は、通常のラプラシアンフィルタを使用してフィルタリングできる。図３には、任意の５ｘ３輪郭信号の場合の中央の緑色のピクセルの有無とフィルタ係数の関係が示されている。図３の下段には、トータルの５ｘ３フィルタの係数が示されている。左上には、中央の緑色が存在しない場合の、０交換された５ｘ３の緑色パターンが示され、その下は、対応するフィルタ係数である。右上には、中央の緑色が存在する場合の、０交換された５ｘ３の緑色パターンが示され、その下は、対応するフィルタ係数である。
【００１６】
重要なことは、両方のフィルタを組み合わせることにより、輪郭信号におけるひずみが最小になることである。多くの場合、このことは、中央の緑が存在しない場合と中央の緑が存在する場合とで、正（または負）の係数の合計が等しくなるように係数を決めることによって達成することができる。
【００１７】
【課題を解決するための手段】
本発明の目的は、輪郭信号における緑−緑差異を防止する、輪郭処理において使用するためのフィルタを提供することであり、さらなる目的は、このフィルタが、ひずみが最小である輪郭信号をさらに生成することである。この目的のため、本発明は、独立請求項に定義されている輪郭フィルタリングを提供する。有利な実施例は、従属請求項に定義されている。
【００１８】
このコンテキストにおいては、当然ながら、ピクセル値の形式または順序は、任意のものでよい。重要な点は、イメージを表す配列となるようなピクセル値の順序と形式を使用できることである。
【００１９】
また、留意すべき点として、０交換は、正確に０である値との置換でなくてもよい。通常は、０でない残りのフィルタ係数の絶対値よりも実質的に小さい値であれば十分である。しかしながら、実際にはフィルタ係数として通常は１０未満の自然数が使用されるため、通常は値０が望ましい。
【００２０】
デジタルカメラにおいては、いわゆるベイヤーセンサが広く使用されていて、従って、フィルタは、ＲＧＢベイヤーセンサを有するＣＣＤセンサからフィルタ値の配列を受け取るための手段を有することが望ましい。実際には、フィルタがベイヤーセンサを有することができる。これに代えて、フィルタは、ＹｅＧＣｙベイヤーセンサを有するＣＣＤセンサからのフィルタ値の配列を受信するための手段を有することができる。
【００２１】
また、フィルタは、フィルタリングと平行して、欠けているカラーピクセルの補間を実行するための手段を有することもできる。このようにして、処理速度を下げることなく追加の機能が得られる。この補間プロセスは、例えば、第二の色のピクセル値の配列のポジションにおける第一の色の「量」（強度）が、第一グループのピクセル値から補間されるプロセスである。これに追加して、またはこれに代えて、第二グループのピクセルにおけるフィルタによって伝達されない光のそのピクセルにおける強度は、その色を伝達するフィルタに関連する他のピクセル値でもよい。従って、必要な行遅延が少なく、この結果として、必要なメモリの量が減少し、これによりコストが低減する。
【００２２】
望ましい実施例においては、それぞれ第一、第二フィルタ係数を有する２つの別個のフィルタのノイズが、一致するようにされている。これによって、第一および第二フィルタの両方を有するトータルのフィルタは、そのノイズ貢献が均一である。特定の実施例においては、ノイズは、フィルタそれぞれのコアリングレベル（ｃｏｒｉｎｇ
ｌｅｖｅｌ）を調整することによって一致するようにされる。
【００２３】
望ましい実施例においては、前記ピクセルの第一グループが、前記ピクセル値の配列の各行および列の１つおきのピクセルから成り、前記第一および第二フィルタ配列が、１つのフィルタ配列に結合され、前記第一および第二配列が、同じ次元を有し、前記第一および第二配列の各位置について、所定のポジションを除き、前記第一および第二配列の少なくとも一方が、少なくとも実質的に０であるフィルタ係数を有し、前記１つの配列が、第一および第二配列の次元に等しい次元を有し、かつ、前記１つの配列の各ポジションの前記フィルタ係数が、前記第一および第二配列の対応する係数の合計である。
【００２４】
このようにして、１つの配列を、配列の所定のポジションがフィルタリング対象のピクセルになるように配置した後、この１つの配列のフィルタ値に、対応するピクセル値を乗じ、最後に合計して、フィルタリングされたピクセル値が得られる。ここで明らかな点として、ピクセル値の配列が、ベイヤーセンサによって取得されたイメージの形式に対応する上記の形式を有するときには、このように１つの配列を使用することは、２つの配列を使用することと正確に一致する。
【００２５】
従属請求項に記載されている望ましいフィルタリング係数によって、緑−緑差異が回避される輪郭情報が与えられる。
【００２６】
本発明には、さらに、コンピュータプログラムであって、当該プログラムはコンピュータ上で実行されるときに、上記に述べられている方法の全ステップを実行するように適合化されているコンピュータプログラムコード手段を有するコンピュータプログラムと、コンピュータプログラムを有するコンピュータ媒体も、含まれる。
【００２７】
本発明の上記およびその他の観点は、以下に説明される実施例を参照しながら明確に解明されるであろう。
【００２８】
【発明を実施するための形態】
本発明によると、輪郭におけるひずみが最小であり緑−緑差異のない輪郭信号を達成するためには、平行な輪郭フィルタ係数を設計するときにいくつかの規則を満たす必要があることが判明した。フィルタは２つの部分、すなわち、中央の緑色が存在するときに、０交換された緑色をフィルタリングするフィルタ係数の第一配列と、中央の緑色が存在しないときに、０交換された緑色をフィルタリングするフィルタ係数の第二配列に分割することができる。
【００２９】
規則は、以下のとおりである。
【００３０】
１．  フィルタ係数の第一配列とフィルタ係数の第二配列の両方において、中央の係数がゼロである。後から、再構築処理経路の緑色の信号を使用することによって、中央の緑色のデータがフィルタに加えられる。中央の緑色は、上記に説明されているように、緑色の均一性が回復されている。
【００３１】
２．  フィルタ係数の第一および第二配列それぞれにおいて、対角線上の隣接するフィルタ係数を減算すると、貢献０になる。このことは、一般的な用語を用いて次のように表現することもできる。すなわち、配列のフィルタ係数を、対角線上の係数の互いに交差しない複数のグループであって、配列の中央の係数に対して対称である互いに交差しないグループに分割するとき、各グループ内の１つのフィルタ係数が、グループ内の残りのフィルタ係数の合計に等しい。
【００３２】
これにより平均化が行われ、その結果として、垂直な隣接ピクセルが赤色と青色である緑色のピクセルの緑−緑差異が排除される。
【００３３】
２つのフィルタ（中央の緑が存在する場合の１つと中央の緑が存在しない場合の１つ）を決めた後、最小のひずみを達成するために、両方のフィルタの組合せをチェックする必要がある。最初に、フィルタの振幅転送をチェックし、必要であれば、トータルの輪郭信号においてひずみが最小となるように適合化する。場合によっては、次に各フィルタのコアリングレベルを調整することによって、コアリングによるノイズ減少の量を一致させる必要がある。
【００３４】
フィルタ係数の設計において留意すべき点として、重要なのは係数間の比であり、従って、上記の規則を満たすフィルタに任意の因数を乗じることができる。
【００３５】
以下においては、上記の規則に従っていくつかのフィルタが設計され、テストされている。最初に、緑−緑差異のない、５ｘ２の１行の平行な輪郭フィルタの例が示されている。
【００３６】
緑色が存在しない場合の重み
2004519142.tif 000007
ｓｉｇｍａｗＣＲ＝４
緑色が存在する場合の重み
2004519142.tif 000008
ｓｉｇｍａｗＣＲ＝４
このフィルタにおいて、ｓｉｇｍａｗＣＲは、係数の合計の絶対値である。ほぼ均一な信号振幅を達成するために、輪郭フィルタの信号出力をこの値で除する必要がある。
【００３７】
図４に示されているように、このフィルタは、規則１と２を満たす。中央の緑色が存在する場合（左）と中央の緑色が存在しない場合（右）のフィルタ係数の両方において、中央の係数（黒いドットによって示されている位置）が存在しない。そして、中央の緑色が存在する場合と存在しない場合の両方のフィルタ係数において、対角線上の隣接する係数を減算すると貢献０（ｚｅｒｏ
ｃｏｎｔｒｉｂｕｔｉｏｎ）が得られる。図４において、真ん中のフィルタは、トータルのフィルタの係数を示す。
【００３８】
次いで、両方のフィルタの組合せが、ゾーンプレート（ｚｏｎｅ ｐｌａｔｅ）のシーンを利用してシミュレーションによってチェックされ、この結果として、ひずみが許容可能な最小限である２つのフィルタとなる。テストでは、垂直な輪郭が水平な輪郭よりも振幅がいくらか小さいことが示された。特定のカラーバーのシーンを使用してテストされた両方のフィルタのノイズ挙動は、個々のコアリングレベルが必要ないものであった。
【００３９】
以下には、緑−緑差異のない、５ｘ３の平行な輪郭フィルタの例が示されている。
【００４０】
緑色の存在しない場合の重み
2004519142.tif 000009
ｓｉｇｍａｗＣＲ＝１２
緑色が存在する場合の重み
2004519142.tif 000010
ｓｉｇｍａｗＣＲ＝８
両方のフィルタの係数の合計の絶対値（ｓｉｇｍａｗＣＲ）は、一致しない。従って、全重みを２４に適合化する必要があり、この結果として以下のフィルタ係数となる。
【００４１】
緑色の存在しない場合の重み。
【００４２】
2004519142.tif 000011
ｓｉｇｍａｗＣＲ＝２４
緑色が存在する場合の重み
2004519142.tif 000012
ｓｉｇｍａｗＣＲ＝２４
図５には、図４の場合と同じ状況を示すいくつかのフィルタが示されていて、規則２の適用／準拠がテストされている。規則２の適用／準拠に関し、緑色が存在しない場合のフィルタについては、この例においては垂直の隣接ピクセルが赤色であり係数が−２である３つのピクセルが、垂直の隣接ピクセルが青色（Ｂ）であり係数が−６である対角線上の１つのピクセルから減算される。結果は、規則２の要求どおり０であり、従って緑−緑差異が排除される。
【００４３】
中央の緑色が存在する場合のフィルタについては、垂直の隣接ピクセルが青色であり係数が−３である２つのピクセルが、垂直の隣接ピクセルが赤色（Ｒ）であり係数が−６である対角線上の１つのピクセルから減算される。この場合も、減算の結果は０である。
【００４４】
組合せをチェックすることにより、この独特の５ｘ３の平行な輪郭フィルタに問題があることが明らかになった。両方のフィルタの振幅の差が大きすぎ、ひずみを最小にするためには、緑色が存在しない場合にフィルタの何らかの適合化が必要である。さらに、コアリングによるノイズ減少量を等しくするための何らかの適合化も必要である。従って、緑色が存在しない場合については、最初にコアリングレベルを１．４倍に増大させ、次いで輪郭信号振幅を３倍にする必要がある。
【００４５】
ソフトウェアのコードにおいては、この結果は以下のようになる。
【００４６】
パラメータの宣言：
ｃｏｎｔｏｕｒ＊ ： 中央の緑色のない図５のラプラシアンフィルタを介しての平行な輪郭信号。ラプラシアン再構築ブロックとその０交換器を介して得られる。
【００４７】
ｃｏｎｔｏｕｒ＿ａ／ｐ ： 中央の緑色が存在しない場合（ｃｏｎｔｏｕｒ＿ａ）または存在する場合（ｃｏｎｔｏｕｒ＿ｐ）の、コアリングと利得の適合化後の輪郭信号。
【００４８】
ｃｏｒｉｎｇ ｌｅｖｅｌ ： 輪郭信号におけるノイズ減少用に調整されたコアリングレベル。
【００４９】
ｃｏｎｔｏｕｒ ： 輪郭出力信号。
【００５０】
輪郭処理には、以下が適用される。
【００５１】
2004519142.tif 000013
【００５２】
図６には、緑−緑差異のない、この特定のフィルタのブロック線図が示されている。ＲＧＢ入力信号ＲＧＢｉｎと、そのライン遅延された２つの信号とが、緑色の均一性／平行輪郭処理ブロック７．６によるＲＧＢ再構築処理に、０交換器ＺＳＢを介して適用される。この処理ブロック７．６は、ＲＧＢ出力信号Ｒｏ、Ｂｏ、Ｇｏと、輪郭信号ｃｏｎｔｏｕｒ＊と、緑色の有無選択信号ｓｅｌ−ｇとを供給する。再構築された緑色のＧｏは、上述されているように輪郭信号ｃｏｎｔｏｕｒ＊に加えられ、その結果が２本の並列分岐に適用される。緑色が存在しないときには、上側の分岐（１．４倍のコアリングブロック１．４＊ｃｏｒと３ｘ増幅器とを有する）の出力信号ｃｏｎｔｏｕｒ＿ａが選択される。緑色が存在するときには、下側の分岐（１倍のコアリングブロック１＊ｃｏｒと１ｘ増幅器）の出力信号ｃｏｎｔｏｕｒ＿ｐが選択される。この結果が、輪郭信号ｃｏｎｔを形成する。
【００５３】
ゾーンプレートのシーンの輪郭信号のみを使用することによって、水平の輪郭が垂直の輪郭より振幅が大きいが、ひずみが最小であることがわかる。留意すべき点として、どのような５ｘ３フィルタ（当然ながら緑−緑差異を防止することはできない）によっても、水平と垂直の輪郭振幅の間のこのような差異が生じる。
【００５４】
以下には、緑−緑差異のない、５ｘ５の平行な輪郭フィルタの例が示されている。
【００５５】
緑色が存在しない場合の重み
2004519142.tif 000014
ｓｉｇｍａｗＣＲ＝２４
緑色が存在する場合の重み
2004519142.tif 000015
ｓｉｇｍａｗＣＲ＝２４
係数の合計の絶対値（ｓｉｇｍａｗＣＲ）は、すでに適合化されている。
【００５６】
図７には、図４の場合と同じ状況を示すいくつかのフィルタが示されていて、規則２の適用／準拠がテストされている。規則２の適用／準拠に関し、緑色が存在しない場合には、緑−緑差異を排除するためには、対角線上の２つのピクセルの対で十分である。中央の緑色が存在する場合は、３つのピクセルのグループが規則２を満たす。垂直の隣接ピクセルが赤色であり係数が−２、−１であるピクセル対に対して、垂直の隣接ピクセルが青色であり係数が−３である１つのピクセルが対応する。この場合も、減算の結果は０である。
【００５７】
組合せをチェックすることにより、「緑色が存在しない」場合のフィルタのコアリングレベルと振幅を適合化する必要があることが明らかになった。コアリングレベルに１．２を乗じた後、輪郭信号に利得１．５が必要である。緑色が存在する場合のフィルタについては、これらの因数は１である。このブロック線図は図８に示されていて、行遅延の数と、結果としての処理ブロック７．８の適合化を除き、図６の線図に似ている。
【００５８】
この５ｘ５フィルタに、上述されているのと同じソフトウェアを適用できる。唯一の違いは、中央の緑色が存在しない場合におけるコアリングレベルと利得に関する違いである。
【００５９】
ゾーンプレートのシーンの輪郭信号のみを使用することによって、輪郭は水平方向と垂直方向に対称であることがわかる。
【００６０】
５ｘ５フィルタ構成用として、規則２を満たすために別の重み付け因数も可能である（この場合には緑色が存在しない場合）。この第二のフィルタは、最初のフィルタの場合と同じゾーンプレートのシーンを与える。この場合の「同じ」とは、差異が見られないことを意味する。
【００６１】
緑色が存在しない場合の重み
2004519142.tif 000016
ｓｉｇｍａｗＣＲ＝２４
緑色が存在する場合の重み
2004519142.tif 000017
ｓｉｇｍａｗＣＲ＝２４
係数の合計の絶対値（ｓｉｇｍａｗＣＲ）は、すでに２４に適合化されている。図９においては、図４の場合と同じ状況を示すいくつかのフィルタが示されていて、規則２の適用／準拠がテストされている。
【００６２】
この第二の５ｘ５フィルタの利点は、緑色が存在しないときにコアリングレベルの乗数が必要ないことである。最小のひずみのためには、「緑色が存在しない」場合の振幅のみに０．７を乗じる必要がある。この線図は図１０に示されていて、図１０はこの違いを除いて図８に一致する。
【００６３】
さらに別の第三の５ｘ５フィルタ構成が可能である。この構成は、最後の例として、規則２を適用する方法を示す目的で説明する。緑色が存在しない場合、この第三のフィルタの相対的な重みは、第二のフィルタと同じである。「緑色が存在する」場合の重みは、以下のように変更される。
【００６４】
緑色が存在しない場合の重み
2004519142.tif 000018
ｓｉｇｍａｗＣＲ＝１６
緑色が存在する場合の重み
2004519142.tif 000019
ｓｉｇｍａｗＣＲ＝１６
係数の合計の絶対値（ｓｉｇｍａｗＣＲ）はすでに１６に適合化されている。図１１においては、図４の場合と同じ状況を示すいくつかのフィルタが示されていて、規則２の適用／準拠がテストされている。
【００６５】
この第三の５ｘ５フィルタの利点は、利得の適合化の乗数が必要ないことである。ノイズ低減が等しくなるように、「緑色が存在する」場合のコアリングレベルのみに１．５を乗じる必要がある。図１２には、この第三の５ｘ５フィルタのブロック線図が示されている。コアリングレベルを除き、図１２は図８と図１０に一致する。
【００６６】
最後に、５ｘ５のエイリアシングなしの輪郭フィルタがテストされ、その係数は、「中央の緑色が存在しない」場合と「中央の緑色が存在する」場合の重み付け因数に分割される。
【００６７】
緑色が存在しないときには、以下の係数が適用される。
【００６８】
2004519142.tif 000020
ｓｉｇｍａｗＣＲ＝８
緑色が存在するときには、以下の係数が適用される。
【００６９】
2004519142.tif 000021
ｓｉｇｍａｗＣＲ＝８
係数の合計の絶対値（ｓｉｇｍａｗＣＲ）は、すでに適合化されている。
【００７０】
しかしながら、緑色が存在する場合のフィルタのみのシミュレーションにより、このフィルタによって緑−緑差異が排除されないことが明らかになる。なぜなら、垂直の隣接ピクセルが同じ色（赤または青）である緑色の位置には、０でない係数のみが存在している。図１３において、０でない係数は、垂直な隣接ピクセルが赤色である緑色の位置にのみ存在している。このことは、（シーンの低周波数部分において）該当する緑色のピクセルの誤差が同じであることを意味する。係数＋８と４つの係数−２の組合せにより、この誤差が排除され、出力信号における緑−緑差異差が０になる。
【００７１】
また、このことは、規則１と２を、中央に緑色が存在する場合のフィルタ構成の代替の規則に置き換えることができることを意味する。この代替の規則とは次のとおり。すなわち、垂直の隣接ピクセルが同じ第一の色である係数の合計が０であり、垂直の隣接ピクセルがこの第一の色と異なる第二の色である各フィルタ係数が０である。
【００７２】
このことは、一般的な用語を用いて次のように表現することもできる。すなわち、当該フィルタ係数の配列の１行おきの行を有するサブグループにおける係数の合計が０であり、かつ、当該サブグループに含まれない各フィルタ係数が０である。
【００７３】
図１３には、いくつかのフィルタが示されていて、この図を検討することによって、本発明による輪郭フィルタが上記の代替規則を満たすことを理解できる。これによって、エイリアシングと緑色の不均一性の両方を除去するフィルタが得られた。
【００７４】
イメージセンサのＲＧＢピクセルから導かれる、再構築ブロックにおけるほぼ白の輝度信号に対して、マトリクスとホワイトバランスのパラメータを考慮に入れる必要がある。マトリクスとホワイトバランスは再構築の後に位置するため、入力される赤色と青色に対して何らかの適合化が必要である。この目的のため、赤色と青色の振幅が緑色と一致し、その結果としてほぼ白の輝度信号Ｙｎになるように、パラメータＳｍａｒｔＧｃｎｔｒｌＲとＳｍａｒｔＧｃｎｔｒｌＢを使用して赤色と青色の振幅を制御する。
【００７５】
図１４を参照。赤色と青色のピクセルの場合には、このＹｎ信号に以下が適用される。
【００７６】
Ｙｎ［ｉ，ｊ］  ＝  ＳｍａｒｔＧｃｎｔｒｌＲ
＊ ｒｅｄ
Ｙｎ［ｉ＋１，ｊ＋１］  ＝
ＳｍａｒｔＧｃｎｔｒｌＲ ＊ ｂｌｕｅ
緑色のピクセルの場合には、Ｙｎは緑色と等しい。
【００７７】
Ｙｎ［ｉ＋１，ｊ］  ＝   ｇｒｅｅｎ
Ｙｎ［ｉ，ｊ＋１］  ＝   ｇｒｅｅｎ
図１５に示されている簡略的なブロック線図には、ＲＧＢの再構築とエイリアシングのない輪郭の再構築の後、マトリクスとホワイトバランスが続く。このブロック線図には、ＳｍａｒｔＧｃｎｔｒｌＲ／Ｂの計算のための以降に示すパラメータが定義されている。シーンからの光ＬＳは、レンズＬを通じてＲＧＢベイヤーセンサＳに渡される。センサＳからの出力信号は、ＣＤＳ（相関二重サンプリング（ｃｏｒｒｅｌａｔｅｄ
ｄｏｕｂｌｅ ｓａｍｐｌｉｎｇ））と、ＡＧＣ（自動利得制御）と、ＡＤＣ（アナログ−デジタル変換）の処理ブロック１に適用される。処理ブロック１の出力は、ＲＧＢ再構築および平行な輪郭処理のブロック３に適用される。処理ブロック３は、再構築されたＲＧＢ信号Ｒｉ、Ｇｉ、Ｂｉと、エイリアシングのない輪郭信号ＡＦＣとを出力する。再構築されたＲＧＢ信号Ｒｉ、Ｇｉ、Ｂｉは、信号Ｒｏ、Ｇｏ、Ｂｏを生成するマトリクス回路ＭＸに適用され、これらの信号Ｒｏ、Ｇｏ、Ｂｏが、ホワイトバランス回路ＷＢに適用され、出力信号Ｒｏ’、Ｇｏ’、Ｂｏ’が供給される。
【００７８】
すべてのＲＧＢベイヤーカラーセンサでは、その原色を、世界中のテレビとＰＣモニタにおいて見慣れているＥＢＵ原色に修正する必要がある。この修正は、マトリクスによって実現され、このマトリクスは９つの乗数を必要とする。
【００７９】
2004519142.tif 000022
Ｒｏ、Ｇｏ、Ｂｏは、マトリクスの出力ＲＧＢ信号であり、Ｒｉ、Ｇｉ、Ｂｉは、入力信号である。
【００８０】
マトリクスの後のホワイトバランス回路により、ＲＧＢ信号は次のようになる。
【００８１】
2004519142.tif 000023
この式において、ａｗｂＲとａｗｂＢは、ホワイトバランスパラメータである（Ｗｏｒｌｄ Ｇｒａｙ
Ａｓｓｕｍｐｔｉｏｎ法（ＷＧＡ）によると、ａｗｂＲ＝ｔｏｔａｌＧｒｅｅｎ／ｔｏｔａｌＲｅｄかつａｗｂＢ＝ｔｏｔａｌＧｒｅｅｎ／ｔｏｔａｌＢｌｕｅであり、このときｔｏｔａｌＲｅｄ、ｔｏｔａｌＧｒｅｅｎ、ｔｏｔａｌＢｌｕｅは、シーン全体にわたり測定されたＲＧＢ色の振幅の合計を表す）。両方の操作、すなわちマトリクスとホワイトバランスにより、必要な白が再現される。これにより、Ｒｏ’、Ｇｏ’、Ｂｏ’信号においては、ＥＢＵ色の再現が保証される。
【００８２】
適切なほぼ白の輝度信号Ｙｎの場合、この反対を行う必要がある。このため、いま、ＥＢＵ色空間に従う色とＤ６５白に等しい色温度とを有するシーンを考える。以下に示されている逆行列によって、センサの色空間が達成される。
【００８３】
2004519142.tif 000024
この式において、Ｒｉｉ、Ｇｉｉ、Ｂｉｉは、ＥＢＵシーンの色を表し、Ｒｉ、Ｇｉ、Ｂｉは、センサの色を表す。
【００８４】
輝度信号Ｙｎに関しては、逆行列の白の再現のみが必要であり、これは、それぞれの色のマトリクス係数の合計によって表される。
【００８５】
2004519142.tif 000025
さらに、シーンの色温度はＤ６５白である必要はない。任意の色温度を含めるには、行列係数の合計は、次のようになる。
【００８６】
2004519142.tif 000026
この式において、Ｘｐｒｅｓｅｔｇａｉｎ（Ｘ＝Ｒ、Ｇ、またはＢ）は、Ｄ６５白をその任意の色温度に移すための利得因数を表す（Ｄ６５白の場合には、すべてのＸｐｒｅｓｅｔｇａｉｎパラメータが１である）。
【００８７】
Ｙｎ［ｉ，ｊ］とＹｎ［ｉ＋１，ｊ＋１］において使用されるＳｍａｒｔＧｃｎｔｒｌＲ／Ｂパラメータには、以下が当てはまる（後の式を参照）。
【００８８】
2004519142.tif 000027
パラメータＳＧｉｗｂはノミネータ（ｎｏｍｉｎａｔｏｒ）として使用される。なぜなら緑色の振幅が基準と見なされるためであり、これはホワイトバランスにも当てはまる。
【００８９】
従って、上の式は、測定されたホワイトバランスパラメータａｗｂＲ／Ｂを使用できるように書くことができる。以下は公知である。
【００９０】
2004519142.tif 000028
従って、
2004519142.tif 000029
ＳＸｉｗｂ値は上のように分割されているので、パラメータＧｐｒｅｓｅｔｇａｉｎは重要でなく、なぜならＧｐｒｅｓｅｔｇａｉｎ／Ｇｐｒｅｓｅｔｇａｉｎ＝１であるためである。従って、次の式は、必要なＳＸｉｗｂ値を計算するのに十分である。
【００９１】
2004519142.tif 000030
従って、白のシーンカラーに対してＲＧＢ信号振幅が等しい輝度信号Ｙｎが利用可能になり、これによって、センサマトリクスとシーンの色温度が無関係になる。この信号Ｙｎは、エイリアシングのない輪郭フィルタに適用できる。
【００９２】
ここで生じる疑問として、Ｙｎに、赤色と青色のピクセルのＳｍａｒｔＧｃｎｔｒｌＲ／Ｂパラメータを含める必要が本当にあるか否かであり、その答えは、必要なパフォーマンスに依存する。エイリアシングのない輪郭フィルタの最良のパフォーマンスが必要な場合には、ＳｍａｒｔＧｃｎｔｒｌＲ／Ｂパラメータを適用する必要がある。いくらか低いパフォーマンスが受け入れられる場合、すなわち、ある程度のひずみが許容される場合には、ＳｍａｒｔＧｃｎｔｒｌＲ／Ｂパラメータを無視できる。
【００９３】
図１６は、ＲＧＢ再構築と平行する輪郭フィルタリングのブロック線図を示す。Ｙｎは、センサのマルチプレクスされたＲＧＢ信号であり、前処理ブロック５においてＲにＳｍａｒｔｃｎｔｒｌＲが乗じられ、かつＢにＳｍａｒｔｃｎｔｒｌＢが乗じられる。このＹｎ信号は、平行な輪郭用のみに使用され、その一方で、Ｙｎは、０交換器ＺＳＢを介して３色、すなわち赤
＝ Ｒ＊ＳｍａｒｔｃｎｔｒｌＲ、緑 ＝ Ｇ、青 ＝ Ｂ＊ＳｍａｒｔｃｎｔｒｌＢに分割される。次いで、ｓｍａｒｔ ｇｒｅｅｎを適用または適用しない、ただし必ず緑色の均一性の回復機能を有する従来のラプラシアンＲＧＢ再構築法が適用され、必要であれば、ＲＧＢ再構築と緑色の均一性および平行な輪郭処理のブロック７．１６おいて、ｓｍａｒｔｇｒｅｅｎを適用または適用せずに赤色と青色のフォルスカラー検出器が使用される。スマートグリーン（ｓｍａｒｔｇｒｅｅｎ１）が適用される場合には、メディアンフィルタにおけるいわゆるＲ／Ｂｃ信号はすでにＲ＊ＳｍａｒｔＧｃｎｔｒｌＲとＢ＊ＳｍａｒｔＧｃｎｔｒｌＢに適合する。
【００９４】
再構築された赤色と青色の信号を、除算器ＤｒとＤｂにおいてＳｍａｒｔＧｃｎｔｒｌＲとＳｍａｒｔＧｃｎｔｒｌＢによって除することによって、元の赤色と青色のセンサ振幅が回復される。このことは、通常に適用されるマトリクス、ホワイトバランス、ガンマ機能を維持できることを意味する。デジタル回路の設計においては、除数よりも乗数が望ましい。従って、除算器回路を避けるための最良の方法は、カメラのコンピュータに１／ＳｍａｒｔｃｎｔｒｌＲと１／ＳｍａｒｔｃｎｔｒｌＢを計算させることである。次いで、２本の個別の線を介して、これらの計算値を２つの乗数に渡すことができる。これにより、Ｒｏ振幅が、入力信号のＲ振幅に等しくなる（ＳｍａｒｔｃｎｔｒｌＲ
＊ Ｒ ＊ １／ＳｍａｒｔｃｎｔｒｌＲ ＝ Ｒ）。Ｂｏ振幅についても、全く同じことが当てはまる。
【００９５】
留意すべき点として、パラメータＳｍａｒｔｃｎｔｒｌＲ／Ｂは、写真を撮影する前の測定サイクルにおいて、またはビデオモードの場合には連続的な方法において求められている。
【００９６】
本発明は、望ましい実施例に関して説明されているが、本発明は、本出願に記載されている特定の形式に制限されることはない。逆に、そのような代替手段、変更、および同等物は、添付されている請求項によって定義される本発明の範囲内に合理的に含めることができるため、本発明の範囲に含まれる。請求項において、カッコ内の参照記号は、請求項を制限するものとは解釈されないものとする。語「有する」は、請求項に記載されている以外の要素またはステップの存在を除外するものではない。要素の前の冠詞「ａ」または「ａｎ」は、このような要素の複数の存在を除外するものではない。本発明は、いくつかの異なる要素を有するハードウェアによってと、適切にプログラムされたコンピュータによって実施できる。いくつかの手段を列挙しているデバイスの請求項においては、これらの手段のいくつかを、１つのハードウェア要素によって具体化できる。特定の方策が相異なる従属請求項に記載されているが、これらの方策の組合せを有利に使用できないことを意味するものではない。
【図面の簡単な説明】
【図１】ＲＧＢベイヤーイメージセンサにおける列ごとの変調の例を示す。
【図２】緑色の均一性を回復するときの、周囲の緑色のピクセルの定義を示す。
【図３】任意の５ｘ３輪郭信号の場合の、中央の緑色のピクセルの有無とフィルタ係数との関係の例を示す。
【図４】５ｘ２配列の場合の規則２の適用／準拠を示す。
【図５】５ｘ３配列の場合の規則２の適用／準拠を示す。
【図６】緑−緑差異のない５ｘ３の平行な輪郭フィルタのブロック線図を示す。
【図７】５ｘ５配列の場合の規則２の適用／準拠を示す。
【図８】緑−緑差異のない５ｘ５の平行な輪郭フィルタのブロック線図を示す。
【図９】２番目の５ｘ５配列の場合の規則２の適用／準拠を示す。
【図１０】緑−緑差異のない２番目の５ｘ５の平行な輪郭フィルタのブロック線図を示す。
【図１１】３番目の５ｘ５配列の場合の規則２の適用／準拠を示す。
【図１２】緑−緑差異のない３番目の５ｘ５の平行な輪郭フィルタのブロック線図を示す。
【図１３】５ｘ５配列の場合の拡張された規則２の適用／準拠を示す。
【図１４】ＲＧＢベイヤーの輝度ピクセルを示す。
【図１５】ＲＧＢベイヤーカラーカメラのＲＧＢと輪郭の再構築、マトリクス、ホワイトバランスを示す。
【図１６】ＲＧＢ再構築と平行する輪郭フィルタリングのブロック線図を示す。
【符号の説明】
３  処理ブロック
７．６、７．８、７．１６  処理ブロック
ＺＳＢ  ０交換器
【図１】
2004519142.tif 000037
【図２】
2004519142.tif 000038
【図３】
2004519142.tif 000039
【図４】
2004519142.tif 000040
【図５】
2004519142.tif 000041
【図６】
2004519142.tif 000042
【図７】
2004519142.tif 000043
【図８】
2004519142.tif 000044
【図９】
2004519142.tif 000045
【図１０】
2004519142.tif 000046
【図１１】
2004519142.tif 000047
【図１２】
2004519142.tif 000048
【図１３】
2004519142.tif 000049
【図１４】
2004519142.tif 000050
【図１５】
2004519142.tif 000051
【図１６】
2004519142.tif 000052
【国際公開パンフレット】
2004519142.tif 000053
2004519142.tif 000054
2004519142.tif 000055
2004519142.tif 000056
2004519142.tif 000057
2004519142.tif 000058
2004519142.tif 000059
2004519142.tif 000060
2004519142.tif 000061
2004519142.tif 000062
2004519142.tif 000063
2004519142.tif 000064
2004519142.tif 000065
2004519142.tif 000066
2004519142.tif 000067
2004519142.tif 000068
2004519142.tif 000069
2004519142.tif 000070
2004519142.tif 000071
2004519142.tif 000072
2004519142.tif 000073
2004519142.tif 000074
2004519142.tif 000075
2004519142.tif 000076
2004519142.tif 000077
2004519142.tif 000078
2004519142.tif 000079
2004519142.tif 000080
2004519142.tif 000081
2004519142.tif 000082
2004519142.tif 000083
2004519142.tif 000084
2004519142.tif 000085
2004519142.tif 000086
2004519142.tif 000087
【国際公開パンフレット（コレクトバージョン）】
2004519142.tif 000088
【国際調査報告】
2004519142.tif 000089
2004519142.tif 000090
2004519142.tif 000091