(57)【特許請求の範囲】
【請求項１】
被写体像をデジタル画像信号に変換し、前記デジタル画像信号をそれぞれ輝度信号および色信号に分離して処理して出力する信号処理装置において、
前記被写体像をデジタル画像信号に変換して出力する撮像手段と、
前記撮像手段により出力されたデジタル画像信号のうち前記処理されるべき色信号よりも広帯域な輝度信号の低輝度部もしくは高輝度部を検出する検出手段と、
前記検出手段により検出された低輝度部もしくは高輝度部に対応する色信号のレベルを制御して出力する色レベル制御手段と、
前記色レベル制御手段により出力された色信号をガンマ補正し、ガンマ補正された前記色信号を色差信号に処理して出力する色処理手段と、
前記広帯域な輝度信号の色成分のバランスを制御して出力する輝度色差補正手段と、
前記輝度色差補正手段により出力された輝度信号のアパーチャーを補正するとともにガンマ補正を行う輝度補正手段と、
を有し、
前記広帯域な輝度信号は前記色レベル制御手段と前記輝度色差補正手段の両方に並列に入力され、前記輝度色差補正手段は、前記色レベル制御手段が前記並列に入力された輝度信号に基づきレベルを制御して出力した色信号を用いて、前記並列に入力された輝度信号の色成分のバランスを制御して出力することを特徴とする信号処理装置。
【請求項２】
前記撮像手段から出力されたデジタル画像信号を色補間し、前記色レベル制御手段により制御されるべき色信号を出力する色補間手段と、
前記撮像手段から出力されたデジタル画像信号から、前記色補間手段により出力される色信号よりも広帯域な輝度信号を生成する生成手段と、をさらに有することを特徴とする請求項１に記載の信号処理装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、被写体像を画像信号に変換し、輝度信号および色差信号に処理する撮像出力の信号処理装置に関する。
【０００２】
【従来の技術】
従来、被写体像を画像信号に変換して、輝度信号および色差信号に処理する撮像出力の信号処理装置においては、図１３に示すような信号処理のブロックに従って処理されている。
【０００３】
受光された被写体像の映像は、ＣＣＤ１で電気信号に変換される。映像の電気信号は、Ａ／Ｄ変換回路２でアナログ信号からデジタル信号に変換される。変換されたデジタル信号は、色処理系５１と輝度信号系５２に分かれて処理されることになる。
【０００４】
色処理系５１では、Ａ／Ｄ変換回路２の出力するデジタル信号が色補間回路３において、ＣＣＤ１の各画素についてイエロー（Ｙｅ）、シアン（Ｃｙ）、マゼンダ（Ｍｚ）およびグリーン（Ｇ）からなる４色の補色信号で出力される。補色信号は、マトリクス回路４で、レッド（Ｒ）、グリーン（Ｇ）およびブルー（Ｂ）からなる純色に変換され、ＲＧＢ信号として出力される。次に、ＲＧＢ信号は、ガンマ補正回路６において、ＴＶモニター等に映し出すための映像信号にマッチングされ、色差マトリクス回路７で、色差信号に変換される。その後、色抑圧回路２０では、色差信号について低輝度部の色のノイズを除去するとともに飽和したＣＣＤ１の高輝度な色を含んだ画素の色を抑圧している。
【０００５】
また、色補間回路３等の色処理系５１の一連の処理により色の信号の帯域が制限される。つまり、Ａ／Ｄ変換回路２の出力するデジタル信号中の色の信号は、色処理系５１により帯域を制限される処理を施され、色差信号に変換されている。
【０００６】
一方、輝度処理系５２では、Ａ／Ｄ変換回路２の出力するデジタル信号が色キャリヤ除去回路８において、色キャリア成分を除去され、ほぼ無加工の輝度信号となる。次に、輝度信号は、アパーチャー補正回路１０において、高域部の特性が持ち上げられる。さらに、ガンマ補正回路１１において、色処理系５１と同様に、ガンマ補正される。その後、輝度色差補正回路９において、色処理系５１の色抑圧回路２０により色抑圧された色差信号を用いて、輝度信号中の色成分のバランスの補正を行い、最終的な輝度信号が出力される。
【０００７】
【発明が解決しようとする課題】
被写体の色温度がＣＣＤのカラーフィルターにあらかじめ設定された色温度に比べ大きくずれた場合、色の再現性だけではなく、輝度信号中の色成分のバランスが崩れることがある。このため、従来の撮像出力の信号処理装置では、低輝度部の色のノイズを除去するとともに飽和したＣＣＤ１の高輝度な色を含んだ画素の色を抑圧する色抑圧回路２０で処理をされた色差信号を用いて、輝度信号中の色成分のバランスを補正する輝度色差補正をしている。
【０００８】
しかしながら、上述のように、従来の撮像出力の信号処理装置では、色差信号を色抑圧回路２０で処理することは色処理系５１の最終段階で行われるため、輝度色差補正を輝度処理系５２の最終段で行ない、色処理系５１と輝度処理系５２の出力のタイミングを合わせている。従って、輝度処理系５２において、輝度信号がアパーチャー補正等される場合、輝度信号中の色成分のバランスが崩れた状態であることがあり、ＴＶモニター等で被写体像を再現する際に、著しい画質の劣化を生じる場合があった。
【０００９】
また、従来の信号処理装置の色処理系５１の処理手順のまま、輝度処理系５２において、アパーチャー補正やガンマ補正をする前に輝度色差補正を行う場合、色処理系５１と輝度処理系５２の出力のタイミングを合わせる関係上、色抑圧回路２０で処理をしていない信号で輝度色差補正を行うしかなく、この場合、低輝度部の色のノイズや飽和したＣＣＤ１の画素の高輝度な色を含んだ状態で輝度信号を処理することとなり、ＴＶモニター等で被写体像を再現する際に、飽和したＣＣＤ１の画素でとらえた画像が著しく劣化する場合等が生じる。
【００１０】
さらに、従来の信号処理装置の色処理系５１の処理手順のまま、色抑圧回路２０で処理した色差信号を用いて、輝度処理系５２のアパーチャー補正回路１０の前に輝度信号を輝度色差補正する場合、色処理系５１と輝度処理系５２の時間合わせのため、すなわち、アパーチャー補正回路１０の前の輝度信号と色抑圧回路２０で処理した色差信号のタイミングを合わせるため、輝度処理系５２に多くの余計なディレイ回路を必要とし、回路規模が大きくなってしまう。
【００１１】
本発明は上記事情に鑑みてなされたものであり、本発明は、色処理系と輝度処理系の時間合わせのためのディレイ回路を必要とすることなく、劣化していない画像を得る信号処理を可能とする信号処理装置を提供することを目的とする。
【００１２】
【課題を解決するための手段】
上記課題を解決するために、請求項１に係る本発明の信号処理装置は、被写体像をデジタル画像信号に変換し、前記デジタル画像信号をそれぞれ輝度信号および色信号に分離して処理して出力する信号処理装置において、前記被写体像をデジタル画像信号に変換して出力する撮像手段と、前記撮像手段により出力されたデジタル画像信号のうち前記処理されるべき色信号よりも広帯域な輝度信号の低輝度部もしくは高輝度部を検出する検出手段と、前記検出手段により検出された低輝度部もしくは高輝度部に対応する色信号のレベルを制御して出力する色レベル制御手段と、前記色レベル制御手段により出力された色信号をガンマ補正し、ガンマ補正された前記色信号を色差信号に処理して出力する色処理手段と、前記広帯域な輝度信号の色成分のバランスを制御して出力する輝度色差補正手段と、前記輝度色差補正手段により出力された輝度信号のアパーチャーを補正するともにガンマ補正を行う輝度補正手段と、を有し、前記広帯域な輝度信号は前記色レベル制御手段と前記輝度色差補正手段の両方に並列に入力され、前記輝度色差補正手段は、前記色レベル制御手段が前記並列に入力された輝度信号に基づきレベルを制御して出力した色信号を用いて、前記並列に入力された輝度信号の色成分のバランスを制御して出力することを特徴とする。
【００１８】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して詳細に説明する。
【００１９】
（実施の形態１）
図１は、本発明の第１の実施の形態に係る信号処理装置の概略を示すブロック図である。以下、各ブロックについて説明する。
【００２０】
１は、撮像手段たるＣＣＤであり、受光された映像を電気信号に変換して蓄積し、そのアナログ信号を出力する。ＣＣＤ１の受光部の表面にはカラーフィルターが設けられている。カラーフィルターには、例えば、イエロー（Ｙｅ）、シアン（Ｃｙ）、マゼンダ（Ｍｚ）およびグリーン（Ｇ）からなる補色系カラーフィルターや、レッド（Ｒ）、グリーン（Ｇ）およびブルー（Ｂ）からなる純色系カラーフィルターがあり、その配列などを組み合わせると様々な種類のＣＣＤを使用することができる。なお、本発明の第１の実施の形態に係る信号処理装置のＣＣＤ１では、例えば、図２に示すように、第ｎラインの画素３１、３２、３３および３４、また、第ｎ＋２の画素３９、４０、４１および４２において、２画素周期の配列でＹｅとＣｙのカラーフィルタの色を割り当て、第ｎ＋１ラインの画素３５、３６、３７および３８、また、第ｎ＋３の画素４３、４４、４５および４６において２画素周期の配列でＭｚとＧのカラーフィルタの色を割り当てている。すなわち、Ｙｅ、Ｃｙ、ＧおよびＭｚの色からなるカラーフィルターを割り当てた２画素周期の配列の補色系カラーフィルターを使用する。
【００２１】
２は、Ａ／Ｄ変換回路であり、ＣＣＤ１からのアナログ信号を任意ビットのデジタル信号に変換する。通常、このデジタル信号は１０ビット程度で出力される。
【００２２】
５１は、色処理系の一連の処理ブロックであり、最終的には色差信号を出力する。また、Ａ／Ｄ変換回路２の出力するデジタル信号中の色の信号の帯域を制限する処理を施す色処理手段である。色処理系５１には、３乃至７の各ブロックの処理が含まれる。
【００２３】
５２は、輝度処理系の一連の処理ブロックであり、最終的には輝度信号を出力する。輝度処理系５２には、８乃至１１の各ブロックの処理が含まれる。
【００２４】
次に、色処理系５１に含まれる各ブロックについて説明する。
【００２５】
３は、色補間回路であり、補色系カラーフィルターの各フィルターの色のデジタル信号を組み合わせて各画素毎に補色の４色（Ｙｅ，Ｃｙ，ＭｚおよびＧ）を組み合わせた色を作る補間により、補色信号を出力する。
【００２６】
４は、マトリクス回路であり、補色信号をマトリクス変換して、純色の３色（Ｒ，ＧおよびＢ）とし、ＲＧＢ信号を出力する。なお、カラーフィルターの分光感度特性や被写体の色温度等を考慮して、適宜、マトリクス係数を変えて最適のＲＧＢ信号を出力する。
【００２７】
５は、色レベル制御手段たる色抑圧回路であり、マトリクス回路４の出力するＲＧＢ信号から低輝度部の色ノイズを除去するとともに飽和したＣＣＤ１の高輝度な色を含んだ画素の色を抑圧することができる。つまり、輝度信号の低輝度部もしくは高輝度部を検出し、その色のレベルを制御することができ、これを色抑圧という。この回路の詳細については後述するが、この回路中には、図３に示すように検出手段たる輝度レベル検値回路７０が含まれている。
【００２８】
６は、ガンマ補正回路であり、ＲＧＢ信号について、例えば、入力１０ビットの信号を８ビットで出力するガンマ補正をする。
【００２９】
７は、色差マトリクス回路であり、ＲＧＢ信号を色差信号Ｒ−Ｙおよび色差信号Ｂ−Ｙに変換する。
【００３０】
次に、輝度処理系５２に含まれる各ブロックについて説明する。
【００３１】
８は、色キャリア除去回路であり、Ａ／Ｄ変換回路２からのデジタル信号をローパスフィルター等に通して、色キャリア成分を除去して輝度信号のみを出力する。
【００３２】
９は、輝度色差補正回路であり、被写体の色温度がＣＣＤ１のカラーフィルターにあらかじめ設定された色温度に比べ大きくずれている場合に輝度信号中の色成分のバランスも崩れてしまうので、これを色差信号で補正している。例えば、被写体の色温度がＣＣＤ１のカラーフィルターにあらかじめ設定された色温度に比べ低い場合に、信号処理装置により処理され再現された被写体の赤い部分の輝度成分が大きくなって色が浮いた感じを与えてしまうので、これを補正する。
【００３３】
１０は、アパーチャー補正手段たるアパーチャー補正回路であり、受光された映像がＣＣＤ１に到達する以前の図示しない光学ローパスフィルターや色キャリヤ除去回路８のローパスフィルター等で失われた高域の信号成分を補正する。
【００３４】
１１は、ガンマ補正回路であり、輝度信号について、例えば、入力１０ビットの信号を８ビットで出力するガンマ補正をする。ＴＶモニター等の逆ガンマ特性を補い、画面上でリニアーな映像を映し出すための補正回路である。また、ＴＶモニターだけでなく、プリンター出力やＪＰＥＧ圧縮するため、および高画質化のためにも重要な回路ブロックである。
【００３５】
ここで、色処理系５１と輝度処理系５２との間に位置する１２は、補正用マトリクス回路であり、色処理系５１の色抑圧回路５のＲＧＢ信号出力から輝度処理系５２の輝度色差補正回路９で使用する輝度色差補正用の色差信号を作るための回路である。
【００３６】
次に、本発明の第１の実施の形態に係る信号処理装置の色抑圧回路５について図３を参照して説明する。
【００３７】
色抑圧回路５は、輝度マトリクス回路６９、輝度レベル検値回路７０、乗算器６１乃至６４、加算器６５乃至６７、そして減算器６８から構成されている。
【００３８】
輝度マトリクス回路６９は、従来の信号処理装置の色抑圧回路にはなかった回路である。従来の色抑圧回路においては、図１４に示すように、輝度レベル検値回路７１で色ゲイン係数ｋを算出し、そして、入力信号である色差信号Ｒ−Ｙおよび色差信号Ｂ−Ｙのそれぞれに乗算器７２および７３で、色ゲイン係数ｋとを掛け合わせて、色差信号ｋ（Ｒ−Ｙ）および色差信号ｋ（Ｂ−Ｙ）を出力していることからも分かるように、色抑圧回路に入出力する信号が色差信号であった。しかしながら、本発明の第１の実施の形態の色抑圧回路５に入出力される信号はＲＧＢ信号であるため、ＲＧＢ信号を輝度信号Ｙにマトリクス変換する輝度マトリクス回路６９を導入している。
【００３９】
本発明の第１の実施の形態の輝度レベル検値回路７０は、図４に示すように、ローパスフィルター（ＬＰＦ）９１、コンパレーター９２および９３、低輝度傾き係数回路９４、高輝度傾き係数回路９５、リミッタ９７および９８、セレクタ９９から構成され、色抑圧回路５の内部で、入力される輝度信号Ｙに応じて色ゲイン係数ｋを出力する。
【００４０】
ローパスフィルター（ＬＰＦ）９１は、入力した輝度信号の帯域を制限する。このローパスフィルター（ＬＰＦ）９１の周波数特性は、色抑圧される色の信号の周波数帯域より広帯域か、もしくは同等となっている。色抑圧される色の信号より狭帯域の場合、色抑圧すべき色の信号だけでなくその周辺の色の信号をも抑圧してしまうためである。また、色抑圧される色の信号を、指定の画素だけでなくその周辺も含めて色抑圧する場合、ローパスフィルター（ＬＰＦ）９１は、対象とする画素を広げて周辺の画素の色抑圧を行う。従って、輝度部の検出のための信号の周波数帯域が色抑圧をする色差信号の周波数帯域より狭帯域とならないため、正しく飽和している画素を色抑圧することが可能となる。
【００４１】
コンパレーター９２は、基準値である低輝度部色ノイズ境界レベル（Ａ）と、ローパスフィルター（ＬＰＦ）９１の出力である輝度信号Ｙのレベルとを比較する。比較した結果、輝度信号Ｙのレベルが低輝度部色ノイズ境界レベル（Ａ）以上の場合、リミッタ９７を制御して、色ゲイン係数ｋを１とする。一方、輝度信号Ｙのレベルが低輝度部色ノイズ境界レベル（Ａ）以下の場合、ローパスフィルター（ＬＰＦ）９１の出力に低輝度部傾き係数回路９４において、低輝度部側の増加直線の傾きａの係数を掛け、リミッタ９７から出力する。この傾きａの係数が大きくて、輝度信号Ｙのレベルが低輝度部色ノイズ境界レベル（Ａ）に到達する前に色ゲイン係数ｋが１を超える場合、リミッタ９７を制御して色ゲイン係数を１に固定する。
【００４２】
コンパレーター９３は、基準値である高輝度部色抑圧境界レベル（Ｂ）とローパスフィルター（ＬＰＦ）９１との出力を比較する。比較した結果、輝度信号Ｙのレベルが高輝度部色抑圧境界レベル（Ｂ）以下の場合、セレクタ９９がリミッタ９７の出力側に選択され、色ゲイン係数ｋを１とする。一方、輝度信号Ｙのレベルが高輝度部色抑圧境界レベル（Ｂ）以上の場合、セレクタ９９がリミッタ９８の出力側に選択され、ローパスフィルター（ＬＰＦ）９１の出力に、高輝度部傾き係数回路９５で係数−ｂを掛けた信号とｋに相当するオフセット値を加算し、傾き−ｂの係数と加算器１００により、高輝度部側の減少直線を実現している。なお、リミッタ９８は、出力が負にならないようにしている。
【００４３】
従って、輝度レベル検値回路７０は、輝度信号Ｙのレベルから色ゲイン係数ｋを出力することができるが、その関係は図５に示すようになる。
【００４４】
輝度レベル検値回路７０は、低輝度部色ノイズ境界レベル（Ａ）までは、輝度信号のレベルが上昇すると色ゲイン係数ｋを直線的な傾きａの軌跡で増加させて算出し、低輝度部色のノイズを除去している。また、輝度レベル検値回路７０は、低輝度部色ノイズ境界レベル（Ａ）より、輝度信号のレベルが上昇すると色ゲイン係数ｋを一定の１にして算出するが、高輝度部色抑圧境界レベル（Ｂ）以上の輝度信号のレベルでは、輝度信号のレベルの上昇とともに色ゲイン係数ｋを直線的な傾き−ｂの軌跡で減少させて算出し、高輝度部の色を抑圧している。
【００４５】
次に、上記色抑圧回路５の動作について、図３を参照して説明する。
【００４６】
上述したように色抑圧回路５に入力される信号はＲＧＢ信号であり、輝度マトリクス回路６９において、ＲＧＢ信号を以下の式に導かれるマトリクス変換により輝度信号Ｙに変換し、色抑圧することができる。
【００４７】
【数１】
0004040171.tif 000002
式（１）より、式（２）が導かれる。
【００４８】
【数２】
0004040171.tif 000003
ここで、色ゲイン係数ｋを考慮して、以下の式（３）のようになる。
【００４９】
【数３】
0004040171.tif 000004
式（３）を展開すると、
Ｒ＝Ｙ＋ｋ（Ｒ−Ｙ）＝ｋＲ＋（Ｙ−ｋＹ）    …（４）
Ｇ＝Ｙ＋ｋ（Ｇ−Ｙ）＝ｋＧ＋（Ｙ−ｋＹ）    …（５）
Ｂ＝Ｙ＋ｋ（Ｂ−Ｙ）＝ｋＢ＋（Ｙ−ｋＹ）    …（６）
となる。
【００５０】
そこで、色抑圧回路５においては、図３に示すように、先ず、上述した輝度レベル検値回路７０において、輝度信号Ｙから色差信号を色抑圧するための係数である０から１の色ゲイン係数ｋが算出される。また、入力信号であるＲＧＢ信号のＲ信号、Ｇ信号およびＢ信号のそれぞれは、乗算器６１、６２および６３で、算出された色ゲイン係数ｋと掛け合わせられる。一方、輝度マトリクス回路６９において、入力信号であるＲＧＢ信号のＲ信号、Ｇ信号およびＢ信号からマトリクス変換された輝度信号Ｙは、乗算器６４で色ゲイン係数ｋと掛け合わされ、減算器６８でもとの輝度信号Ｙから減算され（Ｙ−ｋＹ）の出力を得る。従って、上述したようにｋ倍されたＲ信号、Ｇ信号およびＢ信号に、（Ｙ−ｋＹ）の出力を加算器６５、６６および６７で加えて、色抑圧したＲＧＢ信号とする。すなわち、上述した４式、５式および６式の最右辺が出力される。これらの色抑圧したＲＧＢ信号は、色ゲイン係数ｋが０に近づくにつれ、もとのＲＧＢ信号のレベルが減少して色が抑圧され、反対に色ゲイン係数ｋが１の場合は、もとのＲＧＢ信号のみになる。そこで、色抑圧回路５は、入力されるＲＧＢ信号の低輝度部の色のノイズを除去するとともに飽和したＣＣＤ１の高輝度な色を含んだ画素の色を抑圧することが可能となる。
【００５１】
次に、本発明の第１の実施の形態に係る信号処理装置の信号処理の作用について、図１を参照して説明する。
【００５２】
受光された被写体像の映像は、ＣＣＤ１で電気信号に変換され、Ａ／Ｄ変換回路２においてアナログ信号からデジタル信号に変換される。変換されたデジタル信号は、色処理系５１と輝度信号系５２に分かれて処理されることになる。
【００５３】
色処理系５１では、Ａ／Ｄ変換回路２の出力するデジタル信号が色補間回路３において、ＣＣＤ１の各画素についてイエロー（Ｙｅ）、シアン（Ｃｙ）、マゼンダ（Ｍｚ）およびグリーン（Ｇ）からなる４色の補色信号で出力される。補色信号は、マトリクス回路４で、レッド（Ｒ）、グリーン（Ｇ）およびブルー（Ｂ）からなる純色に変換され、ＲＧＢ信号として出力される。次に、色抑圧回路５において、輝度処理系５２の色キャリヤ除去回路８の輝度信号のレベルから低輝度部もしくは高輝度部を検出し、ＲＧＢ信号が低輝度部の色のノイズを除去されるとともに飽和したＣＣＤ１の高輝度な色を含んだ画素の色を抑圧される。そして、ガンマ補正回路６において、ＴＶモニター等に映し出すための映像信号にマッチングされ、色差マトリクス回路７で色差信号に変換され出力される。
【００５４】
また、色補間回路３等の色処理系５１の一連の処理により色の信号の帯域が制限される。つまり、Ａ／Ｄ変換回路２の出力するデジタル信号中の色の信号は、色処理系５１により帯域を制限される処理を施され、色差信号に変換されている。
【００５５】
一方、輝度処理系５２では、Ａ／Ｄ変換回路２の出力するデジタル信号が色キャリヤ除去回路８において、色キャリア成分が除去され、ほぼ無加工の輝度信号となる。次に、輝度信号は、輝度色差補正回路９において、輝度信号中の色成分のバランスを輝度色差補正用の色差信号で補正される。この輝度色差補正用の色差信号は、色抑圧回路５により処理されたＲＧＢ信号出力から補正用マトリクス回路１２のマトリクス変換によって作られた色差信号である。次に、輝度信号は、アパーチャー補正回路１０で高域部の特性が持ち上げられる。さらに、ガンマ補正回路１１において、色処理系５１と同様に、ガンマ補正され、最終的な輝度信号が出力される。
【００５６】
上述のように、本発明の第１の実施の形態では、輝度処理系５２のアパーチャー補正やガンマ補正の処理の前に、色抑圧回路５で処理したＲＧＢ信号からマトリクス変換した色差信号を用いて輝度色差補正の処理をしているので、色処理系５１と輝度処理系５２の出力のタイミングを合わせるディレイ回路を設ける必要がない。
【００５７】
このため、被写体の色温度がＣＣＤ１のカラーフィルターにあらかじめ設定された色温度に比べ大きくずれた場合においても、輝度信号中の色成分のバランスが崩れることなく、輝度処理系５２のアパーチャー補正やガンマ補正の処理をすることができる。
【００５８】
そこで、ＴＶモニター等で被写体像を再現する際に、著しい画質の劣化が生ずることはなく、高画質な映像信号を再現することができるようになる。
【００５９】
（実施の形態２）
図６は、本発明の第２の実施の形態に係る信号処理装置の概略を示すブロック図である。
【００６０】
本発明の第２の実施の形態に係る信号処理装置では、ＣＣＤ１、Ａ／Ｄ変換回路２、色補間回路３、マトリクス回路４、ガンマ補正回路６、色差マトリクス回路７、色キャリヤ除去回路８、輝度色差補正回路９、アパーチャー補正回路１０、ガンマ補正回路１１および補正用色差マトリクス回路１２の各ブロックは、第１の実施の形態に係る信号処理装置と同じであるが、色レベル制御手段たる色抑圧回路１３は、上述の本発明の第１の実施の形態と異なり、輝度信号の低輝度部もしくは高輝度部を検出し、色補間回路３の出力する補色のレベルを制御することができる点に特徴がある。つまり、本発明の第１の実施の形態に係る信号処理装置では、色処理系５１の中の色抑圧回路５は、マトリクス回路４からのＲＧＢ信号を処理してガンマ補正回路６へ出力しているのに対し、本発明の第２の実施の形態に係る信号処理装置では、色処理系５１の中の色抑圧回路１３は、色補間回路３からの補色信号を処理し、マトリクス回路４へ出力しており、この処理手順が第１の実施の形態と異なっており、その他は本発明の第１の実施の形態に係る信号処理と同じである。従って、ここでは特に色抑圧回路１３について、図７を参照して説明する。
【００６１】
上記色抑圧回路１３は、輝度マトリクス回路９１、輝度レベル検値回路７０、乗算器８１乃至８５、加算器８６乃至８９、そして減算器９０から構成されている。
【００６２】
輝度マトリクス回路９１は、色抑圧回路１３において入出力される信号が補色信号であり、この補色信号を輝度信号Ｙにマトリクス変換するために導入されている。
【００６３】
また、輝度レベル検値回路７０は、上述した本発明の第１の実施の形態と同じ回路である。
【００６４】
次に、上記色抑圧回路１３の動作について、図７を参照して説明する。
【００６５】
上述したように色抑圧回路１３に入力される信号は補色信号であり、輝度マトリクス回路９１において、補色信号を以下の式に導かれるマトリクス変換により輝度信号Ｙに変換し、色抑圧することができる。
【００６６】
【数４】
0004040171.tif 000005
式（７）および上述した式（２）から、式（８）が導かれる。
【００６７】
【数５】
0004040171.tif 000006
ここで、色ゲイン係数ｋを考慮して、以下の式（９）のようになる。
【００６８】
【数６】
0004040171.tif 000007
式（９）を展開すると、例えばＣｙについて、
Ｃｙ＝ｍ１１［Ｙ＋ｋ（Ｒ−Ｙ）］＋ｍ１２［Ｙ＋ｋ（Ｇ−Ｙ）］＋ｍ１３［Ｙ＋ｋ（Ｂ−Ｙ）］＝（ｍ１１＋ｍ１２＋ｍ１３）Ｙ−（ｍ１１＋ｍ１２＋ｍ１３）ｋＹ＋ｋ（ｍ１１Ｒ＋ｍ１２Ｇ＋ｍ１３Ｂ）＝（ｍ１１＋ｍ１２＋ｍ１３）（Ｙ−ｋＹ）＋ｋＣｙ
ここで、（ｍ１１＋ｍ１２＋ｍ１３）は成分比の合計なので１となる。従って、
Ｃｙ＝（Ｙ−ｋＹ）＋ｋＣｙ    …（１０）
となり、同様にＹｅ，Ｇ，Ｍｚについても、
Ｙｅ＝（Ｙ−ｋＹ）＋ｋＹｅ    …（１１）
Ｇ  ＝（Ｙ−ｋＹ）＋ｋＧ      …（１２）
Ｍｚ＝（Ｙ−ｋＹ）＋ｋＭｚ    …（１３）
となる。
【００６９】
そこで、色抑圧回路１３においては、図７に示すように、第１の実施の形態と同様に、先ず、輝度レベル検値回路７０において、輝度信号Ｙから色差信号を色抑圧するための係数である０から１の色ゲイン係数ｋが算出される。また、入力信号である補色信号のＣｙ信号、Ｙｅ信号、Ｍｚ信号およびＧ信号のそれぞれは、乗算器８１乃至８４で、算出された色ゲイン係数ｋと掛け合わせられる。一方、輝度マトリクス回路９１において、入力信号である補色信号のＣｙ信号、Ｙｅ信号、Ｍｚ信号およびＧ信号から変換された輝度信号Ｙは、乗算器８５で色ゲイン係数ｋと掛け合わされ、減算器９０でもとの輝度信号Ｙから減算され（Ｙ−ｋＹ）の出力を得る。従って、上述したようにｋ倍されたＣｙ信号、Ｙｅ信号、Ｍｚ信号およびＧ信号に、（Ｙ−ｋＹ）の出力を加算器８６乃至８９で加えて、色抑圧された補色信号とする。すなわち、上述した１０式乃至１３の右辺が出力される。これらの色抑圧された補色信号は、色ゲイン係数ｋが０に近づくにつれ、もとの補色信号のレベルが減少して色が抑圧され、反対に色ゲイン係数ｋが１の場合は、もとの補色信号のみになる。そこで、色抑圧回路１３は、入力される補色信号の低輝度部の色のノイズを除去するとともに飽和したＣＣＤ１の高輝度な色を含んだ画素の色を抑圧することが可能となる。
【００７０】
次に、本発明の第２の実施の形態に係る信号処理装置の信号処理の作用について図６を参照して説明するが、ここでは特に第１の実施の形態と異なる点について説明する。
【００７１】
色処理系５１では、色補間回路３においてＣＣＤ１の各画素について補色信号が出力される。本発明の第２の実施の形態の色抑圧回路１３では、補色信号が色抑圧され、色抑圧された補色信号は、マトリクス回路４で純色のＲＧＢ信号に変換され、以後、本発明の第１の実施の形態と同様に処理されて、色差信号が出力される。
【００７２】
また、輝度処理系５２でも、本発明の第１の実施の形態と同様に処理され輝度信号が出力されるが、本発明の第２の実施の形態の色抑圧回路１３の出力が補色信号であるので、マトリクス回路４において変換されたＲＧＢ信号から、補正用マトリクス回路１２でマトリクス変換した色差信号を用いて、輝度色差補正している。
【００７３】
上述のように、本発明の第２の実施の形態では、色処理系５１の中で色抑圧回路１３が色補間回路３からの補色信号を処理し、マトリクス回路４へ出力しているため、本発明の第１の実施の形態における色抑圧する領域よりもその領域を広げる必要がない。つまり、色処理系の早い段階で色抑圧の処理をしているので、不必要に色抑圧する領域を広げることなく、低輝度部の色のノイズを除去し、飽和したＣＣＤの画素の色を抑圧することができる。
【００７４】
また、本発明の第２の実施の形態では、本発明の第１の実施の形態と同様に、輝度処理系５２のアパーチャー補正やガンマ補正の処理の前に、色抑圧回路１３で処理した補正信号から、マトリクス変換した色差信号を用いて輝度色差補正の処理をしているので、色処理系５１と輝度処理系５２の出力のタイミングを合わせるディレイ回路を設ける必要がない。
【００７５】
このため、被写体の色温度がＣＣＤ１のカラーフィルターにあらかじめ設定された色温度に比べ大きくずれた場合においても、輝度信号中の色成分のバランスが崩れることなく、輝度処理系５２のアパーチャー補正やガンマ補正の処理をすることができる。
【００７６】
そこで、ＴＶモニター等で被写体像を再現する際に、著しい画質の劣化が生ずることはなく、高画質な映像信号を再現することができるようになる。
【００７７】
（実施の形態３）
図８は、本発明の第３の実施の形態の信号処理装置の概略を示すブロック図である。
【００７８】
本発明の第３の実施の形態に係る信号処理装置では、ＣＣＤ１、Ａ／Ｄ変換回路２、色補間回路３、マトリクス回路４、ガンマ補正回路６、色差マトリクス回路７、色キャリヤ除去回路８、輝度色差補正回路９、アパーチャー補正回路１０、ガンマ補正回路１１および補正用色差マトリクス回路１２の各ブロックは、第１の実施の形態に係る信号処理装置と同じであるが、色レベル制御手段たる色抑圧回路２１は、上述の本発明の実施の形態と異なり、輝度信号の低輝度部もしくは高輝度部を検出し、Ａ／Ｄ変換回路２の出力するデジタル信号の色のレベルを制御することができる点に特徴がある。従って、ここでは特に色抑圧回路２１について、図９を参照して詳細に説明する。
【００７９】
上記色抑圧回路２１は、図９に示すように、検出手段たるＣＣＤ出力飽和検値回路１２１、ディレイ回路１２２、輝度信号発生回路１２３、乗算器１２４および１２５、減算器１２６、そして加算器１２７とを有しており、低輝度部の色のノイズを除去するとともに飽和したＣＣＤ１の高輝度な色を含んだ画素の色を抑圧する回路である。色抑圧回路２１は、Ａ／Ｄ変換回路の出力するデジタル信号を入力信号として処理しており、このデジタル信号は、色の情報を時系列的に含んでいる。
【００８０】
また、入力信号がＡ／Ｄ変換回路の出力するデジタル信号であることから、色抑圧回路２１には、図７に示すような第２の実施の形態の色抑圧回路１３の４つの乗算器８１乃至８４は必要なく、同じ役割をする１つの乗算器１２４で十分である。
【００８１】
ＣＣＤ出力飽和検値回路１２１は、上述した本発明の第１の実施の形態の輝度レベル検値回路７０と同等の回路であり、入力信号のレベルに応じて、色抑圧係数ｋ１を出力する。すなわち、ＣＣＤ出力飽和検値回路１２１において、Ａ／Ｄ変換回路２の出力するデジタル信号のＣＣＤ１の画素の中から指定した画素の色のレベルに合わせて色抑圧係数ｋ１を算出し、出力する。
【００８２】
ＣＣＤ出力飽和検値回路１２１において、図５に示す輝度信号Ｙのレベル（横軸）と色ゲイン係数ｋ（縦軸）との上述した関係のように、低輝度部側では入力デジタル信号のレベルの上昇に合わせて色抑圧係数ｋ１が大きくなり、高輝度部側では入力デジタル信号のレベルの上昇に合わせて色抑圧係数ｋ１が小さくなる。従って、低輝度部側の色のノイズを除去するとともに飽和したＣＣＤ１の高輝度な色を含んだ画素の色を抑圧する色抑圧を同一の回路で行うことができる。
【００８３】
また、ディレイ回路１２２は、Ａ／Ｄ変換回路２の出力するデジタル信号をＣＣＤ出力飽和検値回路１２１の出力のタイミングに合わせて、時間を遅れさせる回路である。通常、フリップフロップ等が用いられている。
【００８４】
次に、輝度信号発生回路１２３は、ＣＣＤ１の画素の中から指定した画素と、その周囲の画素から輝度信号Ｙを作り出す回路である。つまり、この輝度信号Ｙは、ＣＣＤ出力飽和検値回路１２１で飽和を検値したＣＣＤ１の画素とその周囲の画素から輝度信号Ｙを作り出した場合、色抑圧が必要となる。例えば、図２に示すようなカラーフィルター配列のＣＣＤにおいて、Ｙｅのカラーフィルターを持つ画素４１が飽和した場合、画素４１の飽和の影響を受ける輝度信号は、画素３６，３７，４０および４１からなる輝度信号Ｙ１と、画素３７，３８，４１および４２からなる輝度信号Ｙ２と、画素４０，４１，４４および４５からなる輝度信号Ｙ３と、画素４１，４２，４５および４６からなる輝度信号Ｙ４の４つであり、この画素３６，３７，３８，４０，４１，４２，４４，４５および４６に対して同一の色抑圧係数ｋ１を掛けて色抑圧する必要がある。
【００８５】
輝度信号発生回路１２３は、図１０に示すように、１水平ラインデータ遅延回路１３１、乗算器１３２および１３３、ホールド加算回路１３４および１３５、加算器１３６、そして、セレクター１３７を有している。
【００８６】
１水平ラインデータ遅延回路１３１は、Ａ／Ｄ変換回路２の出力するデジタル信号の中で、ＣＣＤ１の１水平ライン分の画素データを遅らせることができ、ＳＲＡＭ等にＣＣＤ１の１水平ライン分の画素データを記憶して、読み出す回路等で構成されている。
【００８７】
セレクター１３７は、Ａ／Ｄ変換回路２の出力するデジタル信号が色の情報を時系列的に含んでいるため、乗算器１３２および１３３で乗算する場合の色の情報、つまり補色のＹｅ，Ｃｙ，ＧおよびＭｚのどれか一つに合わせて、ＲＧＢに変換するためのマトリクス係数を適宜最適になるように選択し、後述する式（１４）のマトリクス係数によりＡ／Ｄ変換回路２の出力するデジタル信号を輝度信号Ｙに変換するための回路である。
【００８８】
また、乗算器１３２および１３３は、図２に示すように水平方向に隣り合ったＣＣＤ１の画素のデータを乗算しており、ホールド加算回路１３４および１３５は、これらのデータを重み付けし、加算器１３６は、ホールド加算回路１３４からの信号とホールド加算回路１３５からの信号とを加えている。
【００８９】
従って、輝度信号発生回路１２３は、色の情報を時系列的に含んでいるＡ／Ｄ変換回路からのデジタル信号を、ＲＧＢ信号に変換し、その後、次の式（１４）に示されるように変換し、輝度信号Ｙを出力する動作をする。
【００９０】
【数７】
0004040171.tif 000008
ここで、上記色抑圧回路２１の動作について、図９を参照して説明する。
【００９１】
ディレイ回路１２２からタイミングを合わせて出力されたデジタル信号は、ＣＣＤ出力飽和検値回路１２１において、算出された色抑圧係数ｋ１を乗算器１２４で乗算される。また、輝度信号回路において発生した輝度信号Ｙは、色抑圧係数ｋ１を乗算器１２５で乗算し、減算器１２６においてもとの輝度信号Ｙから減算されることから、（Ｙ−ｋ１Ｙ）が出力される。従って、加算器１２７において演算結果が求まり、時系列的に色抑圧されたデジタル信号が出力される。
【００９２】
色抑圧したデジタル信号は、色抑圧係数ｋ１が０に近づくにつれ、もとのデジタル信号のレベルが減少して色が抑圧され、反対に色抑圧係数ｋ１が１の場合は、もとのデジタル信号のみになる。すなわち、デジタル信号の低輝度部の色のノイズを除去するとともに飽和したＣＣＤ１の高輝度な色を含んだ画素の色を抑圧することが可能となる。
【００９３】
次に、本発明の第３の実施の形態に係る信号処理装置の信号処理の作用について図８を参照して説明するが、ここでは特に第１の実施の形態と異なる点について説明する。
【００９４】
色処理系５１では、初めに、Ａ／Ｄ変換回路２のの出力するデジタル信号が、色抑圧回路２１により色抑圧され、色補間回路３において、ＣＣＤ１の各画素についてイエロー（Ｙｅ）、シアン（Ｃｙ）、マゼンダ（Ｍｚ）およびグリーン（Ｇ）からなる４色の補色信号で出力される。補色信号は、マトリクス回路４で、レッド（Ｒ）、グリーン（Ｇ）およびブルー（Ｂ）からなる純色に変換され、ＲＧＢ信号として出力される。次に、ガンマ補正回路６、色差マトリクス回路７で処理が行なわれて、色差信号Ｒ−Ｙおよび色差信号Ｂ−Ｙとなり出力される。
【００９５】
一方、輝度処理系５２では、本発明の第１の実施の形態のように、マトリクス回路４からのＲＧＢ信号から、補正用マトリクス回路１２で輝度色差補正信号を作り、色キャリア除去後の輝度信号に対して輝度色差補正を行い、その後アパーチャー補正とガンマ補正とをし、輝度信号を出力する。また、上述した色抑圧回路２１の回路中に輝度信号発生回路１２３があるため、色キャリヤ除去回路８の出力である輝度信号が色抑圧回路２１へ入力されていない。
【００９６】
上述のように、本発明の第３の実施の形態では、Ａ／Ｄ変換回路２の出力するデジタル信号により色抑圧している。色抑圧する処理を色処理系の初期段階で行うことにより、色処理系の一連の処理による帯域制限の影響を受ける前に色抑圧処理をすることができるので、飽和したＣＣＤの画素の影響が周囲に広がることはなく、ＴＶモニター等で被写体像を再現する際に、高画質な画像を得る正しい色処理をすることができる。
【００９７】
（実施の形態４）
本発明の第４の実施の形態に係る信号処理装置では、本発明の第３の実施の形態で述べた図８に示す色抑圧回路２１の代わりに、色補正回路を用いる場合について説明する。つまり、色抑圧係数ｋ１を掛けて色抑圧するのでなく、ＣＣＤの画素の飽和を検出した場合、飽和した画素の周囲の画素から補間することにより飽和画素を補正する。
【００９８】
従って、色補正回路の他のブロックの処理は、第３の実施の形態と同じであり、色補正回路について、以下説明することとする。
【００９９】
色補正回路の補間には、１次元および２次元のリニアー補間、または、補間するための画素の領域を広げて、ローパスフィルターの特性により補間等を行う場合がある。
【０１００】
先ず、１次元のリニアー補間を行う場合について説明する。
【０１０１】
図１１は、１次元のリニアー補間で色補正するのための色補正回路であり、ＣＣＤ出力飽和検出回路１４１、補間回路１４２およびセレクター１４３から構成されている。
【０１０２】
ＣＣＤ出力飽和検出回路１４１は、Ａ／Ｄ変換回路２の出力するデジタル信号の出力が飽和している場合に１を出力し、飽和していない場合に０を出力する。補間回路１４２は、ＣＣＤに飽和した画素がある場合、飽和したＣＣＤの画素の周囲にある同色の画素から飽和した画素を補うための回路であり、１次元のリニアー補間を用いた場合を示している。
【０１０３】
セレクター１４３は、ＣＣＤ出力飽和検出回路１４１の出力により切り替えられる。通常、Ａ／Ｄ変換回路２の出力するデジタル信号がそのまま出力されるように選択されているが、ＣＣＤに飽和した画素がある場合、セレクターが切り替わり、補間回路１４２から飽和した画素の補間されたデジタル信号が出力される。
【０１０４】
ここで、補間回路１４２は、ＣＣＤ１の同色の画素の間隔分の遅延量のディレイ回路１４４および１４７と、加算器１４５と、１／２回路１４６とを有している。また、１／２回路１４６は、具体的にはデータをローサイドバンド（ＬＳＢ）側に１ビットシフトする働きをする。従って、ＣＣＤの画素の飽和を検出した場合、飽和した画素の周囲の画素の信号を使用できるようになる。
【０１０５】
次に、補間用の画素の周囲領域を広げてローパスフィルター特性の補間を行う場合について説明する。
【０１０６】
補間用の画素の周囲領域を広げてローパスフィルター特性の補間を行う場合、１次元のリニアー補間で色補正するのための補間回路１４２とは、補間回路１５８が、図１２に示すように、ディレイ回路１５４、１５５、１５６、および１５７の４つを用い、係数回路１５１および１５２、そして加算器１５３、１５９および１６０から構成される点で異なっている。ここで、補間回路１５８の補間動作は、Ａ／Ｄ変換回路２の出力するデジタル信号の入力とディレイ回路１５７の出力を加算器１５９で加算し、ディレイ回路１５４とディレイ回路１５６の出力を加算器１６０で加算して、それぞれ係数回路１５１および１５２で所定の係数を乗算し、加算器１５３でそれぞれを加算することによる。つまり、補間回路１５８は、係数回路１５１および１５２の係数によりフィルター特性が定まるデジタルフィルターを構成している。なお、補間回路１５８以外は、図１１に示す１次元のリニアー補間を用いた場合と同じである。
【０１０７】
上述のように、本発明の第４の実施の形態では、ＣＣＤに飽和した画素がある場合、色抑圧する代わりに、飽和したＣＣＤの画素の周囲にある同色の画素から飽和した画素を補う処理をすることにより、色抑圧回路よりもゲート規模の小さい回路とすることができる。
【０１０８】
また、人の顔等の被写体像の場合、頭部や鼻の光を反射している高輝度部は、色抑圧よりも補間回路で処理した方がより自然な画像を再現することができる。
【０１０９】
【発明の効果】
上述したように、本発明によれば、色処理系と輝度処理系の出力のタイミングを合わせるディレイ回路を設けることなく、輝度処理系のアパーチャー補正やガンマ補正の前に、色抑圧回路で処理したＲＧＢ信号、補正信号、デジタル信号からマトリクス変換した色差信号を用いて、輝度色差補正をすることができる。
【０１１０】
このため、被写体の色温度がＣＣＤのカラーフィルターにあらかじめ設定された色温度に比べ大きくずれた場合においても、輝度信号中の色成分のバランスが崩れることなく、輝度処理系のアパーチャー補正やガンマ補正を処理することができる。
【０１１１】
従って、ＴＶモニター等で被写体像を再現する際に、著しい画質の劣化が生ずることはなく、高画質な映像信号を再現することができるようになる。
【０１１２】
なお、色抑圧の処理の代わりに飽和したＣＣＤの画素の周囲にある同色の画素から飽和した画素を補う処理をすることによっても同等の効果を得ることができる。また、人の顔等の被写体像の場合、頭部や鼻の光を反射している高輝度部は、色抑圧よりも補間回路で処理した方がより自然な画像を再現することができる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態に係る信号処理装置の概略の構成を示すブロック図である。
【図２】本発明の第１の実施の形態のＣＣＤの補色のカラーフィルターを説明するための図である。
【図３】本発明の第１の実施の形態の色抑圧回路について説明するための図である。
【図４】本発明の第１の実施の形態の輝度レベル検値回路について説明するための図である。
【図５】本発明の第１の実施の形態の輝度レベル検値回路の輝度信号Ｙのレベルから色ゲイン係数ｋを出力する関係について説明するための図である。
【図６】本発明の第２の実施の形態に係る信号処理装置の概略の構成を示すブロック図である。
【図７】本発明の第２の実施の形態の色抑圧回路について説明するための図である。
【図８】本発明の第３の実施の形態に係る信号処理装置の概略の構成を示すブロック図である。
【図９】本発明の第３の実施の形態の色抑圧回路について説明するための図である。
【図１０】本発明の第３の実施の形態の輝度信号発生回路について説明するための図である。
【図１１】本発明の第４の実施の形態の色補正回路について、１次元のリニアー補間を用いた場合を説明するための図である。
【図１２】本発明の第４の実施の形態の色補正回路について、補間用の画素の周囲領域を広げてローパスフィルター特性の補間を行う場合を説明するための図である。
【図１３】従来の信号処理装置の概略の構成を示すブロック図である。
【図１４】従来の色抑圧回路について説明するための図である。
【符号の説明】
１    ＣＣＤ
２    Ａ／Ｄ変換回路
３    色補間回路
４    マトリクス回路
５、１３、２０、２１    色抑圧回路
６、１１    ガンマ補正回路
７    色差マトリクス回路
８    色キャリヤ除去回路
９    輝度色差補正回路
１０    アパーチャー補正回路
１２    補正用マトリクス回路
６９    輝度マトリクス回路
７０、７１    輝度レベル検値回路
９１    ローパスフィルター
９４    低輝度部傾き係数回路
９５    高輝度部傾き係数回路
９７、９８    リミッタ
９９、１３７    セレクター
１２１    ＣＣＤ出力飽和検値回路
１２２    ディレイ回路
１２３    輝度信号発生回路
１３１    １水平ライン遅延回路
１４１    ＣＣＤ出力飽和検出回路
１４４、１４７、１５４、１５５、１５６、１５７    ディレイ回路
【図１】
0004040171.tif 000009
【図２】
0004040171.tif 000010
【図３】
0004040171.tif 000011
【図４】
0004040171.tif 000012
【図５】
0004040171.tif 000013
【図６】
0004040171.tif 000014
【図７】
0004040171.tif 000015
【図８】
0004040171.tif 000016
【図９】
0004040171.tif 000017
【図１０】
0004040171.tif 000018
【図１１】
0004040171.tif 000019
【図１２】
0004040171.tif 000020
【図１３】
0004040171.tif 000021
【図１４】
0004040171.tif 000022