(57)【特許請求の範囲】
【請求項１】
撮影画像を示す３原色の第１の色信号、第２の色信号及び第３の色信号を取得する色信号取得部と、
前記取得した第１の色信号、第２の色信号及び第３の色信号と、前記第１の色信号、第２の色信号及び第３の色信号にそれぞれ対応する第１の係数であって、標準の第１の輝度信号を生成する前記第１の係数とを使用して前記第１の輝度信号を生成する第１の輝度信号生成部と、
前記取得した第１の色信号、第２の色信号及び第３の色信号と、前記第１の色信号、第２の色信号及び第３の色信号にそれぞれ対応する第２の係数であって、前記第１の係数のうちのターゲット色に対応する係数の重みを低下させた第２の係数とを使用して第２の輝度信号を生成する第２の輝度信号生成部と、
前記生成した前記第１の輝度信号と前記第２の輝度信号とに基づいて前記ターゲット色の輝度が制御された第３の輝度信号を生成する第３の輝度信号生成部と、
を備えた画像処理装置。
【請求項２】
前記生成した前記第１の輝度信号又は前記第２の輝度信号の大きさに応じた混合率を取得する混合率取得部を備え、
前記第３の輝度信号生成部は、前記混合率取得部により取得した混合率に基づいて前記第１の輝度信号と前記第２の輝度信号とを加重平均し、前記第３の輝度信号を生成する請求項１に記載の画像処理装置。
【請求項３】
前記混合率取得部は、前記生成した前記第１の輝度信号又は前記第２の輝度信号が大きい程、前記第２の輝度信号の前記第１の輝度信号に対する比率を低くし、前記生成した前記第１の輝度信号又は前記第２の輝度信号が小さい程、前記第２の輝度信号の前記第１の輝度信号に対する比率を高くする前記混合率を取得する請求項２に記載の画像処理装置。
【請求項４】
前記混合率取得部は、前記生成した前記第１の輝度信号又は前記第２の輝度信号が大きい程、前記第２の輝度信号の前記第１の輝度信号に対する比率を高くし、前記生成した前記第１の輝度信号又は前記第２の輝度信号が小さい程、前記第２の輝度信号の前記第１の輝度信号に対する比率を低くする前記混合率を取得する請求項２に記載の画像処理装置。
【請求項５】
前記混合率取得部は、前記第１の輝度信号又は前記第２の輝度信号の大きさと前記混合率との関係を示すテーブル又は関係式を使用して、前記第１の輝度信号又は前記第２の輝度信号の大きさに応じた混合率を取得する請求項２から４のいずれか１項に記載の画像処理装置。
【請求項６】
前記混合率取得部は、前記ターゲット色に対応する前記テーブル又は前記関係式を使用して、前記第１の輝度信号又は前記第２の輝度信号の大きさに応じた混合率を取得する請求項５に記載の画像処理装置。
【請求項７】
前記ターゲット色の色相の重みが大きく、前記ターゲット色から色相が離れる程、重みが小さい補正係数を設定する補正係数設定部と、
前記第１の色信号、第２の色信号及び第３の色信号から色相を算出する色相算出部と、
前記色相算出部により算出された色相に応じて前記補正係数設定部から対応する補正係数を取得する補正係数取得部と、
前記第３の輝度信号生成部は、前記混合率取得部により取得した混合率及び前記補正係数取得部により取得した補正係数に基づいて前記第１の輝度信号と前記第２の輝度信号とを加重平均し、前記第３の輝度信号を生成する請求項２から６のいずれか１項に記載の画像処理装置。
【請求項８】
前記ターゲット色を設定するターゲット色設定部と、
前記ターゲット色設定部により設定されたターゲット色に対応する係数の重みを低下させた前記第２の係数を算出し、又は前記第２の係数を記憶する記憶部から前記設定されたターゲット色に対応する前記第２の係数を読み出す第２の係数取得部と、を備え、
前記第２の輝度信号生成部は、前記取得した第１の色信号、第２の色信号及び第３の色信号と、前記第２の係数取得部により取得した前記第２の係数とを使用して前記第２の輝度信号を生成する請求項１から７のいずれか１項に記載の画像処理装置。
【請求項９】
前記ターゲット色設定部は、ｎを２以上の整数とすると、ｎ個のターゲット色を同時に設定可能であり、
前記第２の係数取得部は、前記ターゲット色設定部により前記ｎ個のターゲット色が同時に設定されると、前記ｎ個の各ターゲット色に対応するｎ個の前記第２の係数を取得し、
前記第２の輝度信号生成部は、前記取得した第１の色信号、第２の色信号及び第３の色信号と、前記ｎ個の第２の係数とに基づいてｎ個の輝度信号を生成し、前記ｎ個の輝度信号のうちの最小の輝度信号を前記第２の輝度信号とする請求項８に記載の画像処理装置。
【請求項１０】
前記第１の輝度信号又は前記第２の輝度信号の大きさと混合率との関係を示すテーブル又は関係式であって、前記ｎ個の各ターゲット色に対応するｎ個の前記テーブル又は前記関係式のうちから、前記最小の輝度信号が前記ｎ個の各ターゲット色のいずれに対応するかに応じた前記テーブル又は前記関係式を使用して、前記第１の輝度信号又は前記第２の輝度信号の大きさに応じた混合率を取得する混合率取得部を備え、
前記第３の輝度信号生成部は、前記混合率取得部により取得した混合率に基づいて前記第１の輝度信号と前記第２の輝度信号とを加重平均し、前記第３の輝度信号を生成する請求項９に記載の画像処理装置。
【請求項１１】
前記第３の輝度信号生成部は、前記第１の輝度信号よりも前記第２の輝度信号が高い場合には、前記第１の輝度信号を出力する請求項１から１０のいずれか１項に記載の画像処理装置。
【請求項１２】
前記第１の色信号、第２の色信号及び第３の色信号にそれぞれ対応する前記第２の係数の総和は、１である請求項１から１１のいずれか１項に記載の画像処理装置。
【請求項１３】
前記撮影画像を示す３原色の第１の色信号、第２の色信号及び第３の色信号は、ガンマ変換後の色信号である請求項１から１２のいずれか１項に記載の画像処理装置。
【請求項１４】
撮影光学系及び撮像素子を含む撮像部と、
請求項１から１３のいずれか１項に記載の画像処理装置と、を備え、
前記色信号取得部は、前記撮像部により撮影された前記撮影画像を示す３原色の第１の色信号、第２の色信号及び第３の色信号を取得する撮像装置。
【請求項１５】
撮影画像を示す３原色の第１の色信号、第２の色信号及び第３の色信号を取得するステップと、
前記取得した第１の色信号、第２の色信号及び第３の色信号と、前記第１の色信号、第２の色信号及び第３の色信号にそれぞれ対応する第１の係数であって、標準の第１の輝度信号を生成する前記第１の係数とを使用して前記第１の輝度信号を生成するステップと、
前記取得した第１の色信号、第２の色信号及び第３の色信号と、前記第１の色信号、第２の色信号及び第３の色信号にそれぞれ対応する第２の係数であって、前記第１の係数のうちのターゲット色に対応する係数の重みを低下させた第２の係数とを使用して第２の輝度信号を生成するステップと、
前記生成した前記第１の輝度信号と前記第２の輝度信号とに基づいて前記ターゲット色の輝度が制御された第３の輝度信号を生成するステップと、
を含む画像処理方法。
【請求項１６】
撮影画像を示す３原色の第１の色信号、第２の色信号及び第３の色信号を取得する機能と、
前記取得した第１の色信号、第２の色信号及び第３の色信号と、前記第１の色信号、第２の色信号及び第３の色信号にそれぞれ対応する第１の係数であって、標準の第１の輝度信号を生成する前記第１の係数とを使用して前記第１の輝度信号を生成する機能と、
前記取得した第１の色信号、第２の色信号及び第３の色信号と、前記第１の色信号、第２の色信号及び第３の色信号にそれぞれ対応する第２の係数であって、前記第１の係数のうちのターゲット色に対応する係数の重みを低下させた第２の係数とを使用して第２の輝度信号を生成する機能と、
前記生成した前記第１の輝度信号と前記第２の輝度信号とに基づいて前記ターゲット色の輝度が制御された第３の輝度信号を生成する機能と、
をコンピュータに実行させる画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は画像処理装置、撮像装置、画像処理方法及び画像処理プログラムに係り、特に撮影画像内の所望の色の輝度を制御する技術に関する。
【背景技術】
【０００２】
近年、イメージセンサの性能向上により、高感度低ノイズのイメージセンサが開発されている。【０００３】
高感度を実現させるには、イメージセンサの赤（Ｒ）、緑（Ｇ）、青（Ｂ）の波長域にそれぞれ分光感度を有するＲＧＢ素子のうちのＲ素子の感度をアップさせる手法が一般的である。【０００４】
しかしながら、Ｒ素子の感度をアップさせると赤系の被写体の輝度と彩度が上がり、明るく高彩度になりやすくなる。例えば、赤い花を撮影した場合など、明るい側かつ高彩度側に色が偏り、コントラストが低く立体感及び質感が損なわれてしまうという問題がある。【０００５】
この問題を解決するため、イメージセンサのＲＧＢ素子から出力されるＲＧＢ信号値に、3x3の係数マトリクスを乗算するリニアマトリクス処理を行う手法がある。【０００６】
この手法は、以下の［数１］式及び［数２］式に示す通り、出力Ｒ信号(OutR)を作成する際に、入力Ｒ信号(InR)に入力Ｇ信号(InG)と入力Ｂ信号(InB)を混合することにより、出力Ｒ信号(OutR)の輝度、彩度及び色相を調整する手法である。【０００７】
［数１］  OutR = (CoefR × InR) + (CoefG × InG) + (CoefB × InB)
［数２］  CoefR + CoefG + CoefB = 1 
（ただし、CoefR、CoefG、CoefBは係数）
また、特許文献１には、色補正されたＲＧＢ信号から第１輝度信号と色差信号を生成し、色補正されていないＲＧＢ信号から第２輝度信号を生成し、これらの第１輝度信号と第２輝度信号とを所定の比率で合成して輝度信号を生成して出力することにより、画像の色再現性の低下を抑制しつつ、ノイズを低減する画像処理装置が記載されている。【０００８】
即ち、第１輝度信号は、色補正されたＲＧＢ信号から生成されているため、色再現性はよいが、色補正によりノイズが増加するという特徴がある。一方、第２輝度信号は、色補正前のＲＧＢ信号から生成されているため、色再現性は低下するが、ノイズの増加は抑制されるという特徴がある。特許文献１に記載の発明は、上記の特徴を有する第１輝度信号と第２輝度信号とを所定の比率で合成して輝度信号を生成することにより、画像の色再現性の低下を抑制しつつ、ノイズを低減するようにしている。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２０１６−５８９４１号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
とろこで、ＲＧＢ信号値に3x3の係数マトリクスを乗算する手法（リニアマトリクス処理）は、下記の通り輝度、彩度及び色相が連動して変化するため、輝度、彩度及び色相のすべてを両立させることが困難である。【００１１】
CoefG > 0の場合：赤系被写体の彩度は下がるが輝度が上がる。【００１２】
CoefG < 0の場合：赤系被写体の輝度は下がるが彩度が上がる。【００１３】
CoefB > 0の場合：赤系被写体の輝度は下がるが色相がマゼンタ味になる。【００１４】
CoefB < 0 の場合：赤系被写体の輝度が上がり色相がオレンジ味になる。【００１５】
一方、特許文献１に記載の発明は、画像の色再現性の低下を抑制しつつ、ノイズを低減することができる輝度信号を生成する技術であり、撮影画像内の所望の色の輝度を制御する技術に関するものではない。【００１６】
本発明はこのような事情に鑑みてなされたもので、撮影画像内の所望の色の輝度を制御することができ、かつ色に影響が生じないようにすることができる画像処理装置、撮像装置、画像処理方法及び画像処理プログラムを提供することを目的とする。
【課題を解決するための手段】
【００１７】
上記目的を達成するために本発明の一の態様に係る画像処理装置は、撮影画像を示す３原色の第１の色信号、第２の色信号及び第３の色信号を取得する色信号取得部と、取得した第１の色信号、第２の色信号及び第３の色信号と、第１の色信号、第２の色信号及び第３の色信号にそれぞれ対応する第１の係数であって、標準の第１の輝度信号を生成する第１の係数とを使用して第１の輝度信号を生成する第１の輝度信号生成部と、取得した第１の色信号、第２の色信号及び第３の色信号と、第１の色信号、第２の色信号及び第３の色信号にそれぞれ対応する第２の係数であって、第１の係数のうちのターゲット色に対応する係数の重みを低下させた第２の係数とを使用して第２の輝度信号を生成する第２の輝度信号生成部と、生成した第１の輝度信号と第２の輝度信号とに基づいてターゲット色の輝度が制御された第３の輝度信号を生成する第３の輝度信号生成部と、を備える。【００１８】
本発明の一の態様によれば、標準の第１の輝度信号と、第１の輝度信号に対してターゲット色に対応する輝度信号の値が低くなる第２の輝度信号とを生成し、これらの第１の輝度信号と第２の輝度信号とに基づいてターゲット色の輝度が制御された第３の輝度信号を生成するようにしている。第１の輝度信号と第２の輝度信号との混合率を調整することで、所望のターゲット色の輝度の制御が可能であり、色（彩度及び色相）への影響が生じないようにすることができる。尚、ターゲット色が高彩度である程、第１の輝度信号と第２の輝度信号との差が大きくなり、混合率の調整によりターゲット色の輝度を大きく変化させることができる。【００１９】
本発明の他の態様に係る画像処理装置において、生成した第１の輝度信号又は第２の輝度信号の大きさに応じた混合率を取得する混合率取得部を備え、第３の輝度信号生成部は、混合率取得部により取得した混合率に基づいて第１の輝度信号と第２の輝度信号とを加重平均し、第３の輝度信号を生成することが好ましい。【００２０】
本発明の更に他の態様に係る画像処理装置において、混合率取得部は、生成した第１の輝度信号又は第２の輝度信号が大きい程、第２の輝度信号の第１の輝度信号に対する比率を低くし、生成した第１の輝度信号又は第２の輝度信号が小さい程、第２の輝度信号の第１の輝度信号に対する比率を高くする混合率を取得することができる。この場合、第１の輝度信号又は第２の輝度信号の変化よりも第３の輝度信号の変化が大きくなり、ターゲット色の輝度コントラストを向上させることができる。【００２１】
本発明の更に他の態様に係る画像処理装置において、混合率取得部は、生成した第１の輝度信号又は第２の輝度信号が大きい程、第２の輝度信号の第１の輝度信号に対する比率を高くし、生成した第１の輝度信号又は第２の輝度信号が小さい程、第２の輝度信号の第１の輝度信号に対する比率を低くする混合率を取得することができる。この場合、第１の輝度信号又は第２の輝度信号の変化よりも第３の輝度信号の変化が小さくなり、ターゲット色の輝度コントラストを低下させることができる。【００２２】
本発明の更に他の態様に係る画像処理装置において、混合率取得部は、第１の輝度信号又は第２の輝度信号の大きさと混合率との関係を示すテーブル又は関係式を使用して、第１の輝度信号又は第２の輝度信号の大きさに応じた混合率を取得することが好ましい。尚、テーブル又は関係式は、予め設定されたものでもよいし、撮影画像ごとに算出したものでもよい。【００２３】
本発明の更に他の態様に係る画像処理装置において、混合率取得部は、ターゲット色に対応するテーブル又は関係式を使用して、第１の輝度信号又は第２の輝度信号の大きさに応じた混合率を取得することが好ましい。これにより、ターゲット色に対応する混合率を取得することができ、ターゲット色に応じた輝度の制御ができる。【００２４】
本発明の更に他の態様に係る画像処理装置において、ターゲット色の色相の重みが大きく、ターゲット色から色相が離れる程、重みが小さい補正係数を設定する補正係数設定部と、第１の色信号、第２の色信号及び第３の色信号から色相を算出する色相算出部と、色相算出部により算出された色相に応じて補正係数設定部から対応する補正係数を取得する補正係数取得部と、第３の輝度信号生成部は、混合率取得部により取得した混合率及び補正係数取得部により取得した補正係数に基づいて第１の輝度信号と第２の輝度信号とを加重平均し、第３の輝度信号を生成することが好ましい。これにより、より精度高くターゲット色の色相を設定することができ、ターゲット色の色相に対応する輝度のみを制御することができる。【００２５】
本発明の更に他の態様に係る画像処理装置において、ターゲット色を設定するターゲット色設定部と、ターゲット色設定部により設定されたターゲット色に対応する係数の重みを低下させた第２の係数を算出し、又は第２の係数を記憶する記憶部から設定されたターゲット色に対応する第２の係数を読み出す第２の係数取得部と、を備え、第２の輝度信号生成部は、取得した第１の色信号、第２の色信号及び第３の色信号と、第２の係数取得部により取得した第２の係数とを使用して第２の輝度信号を生成することが好ましい。これにより、輝度を制御するターゲット色を設定することができ、第２の輝度信号は、第１の輝度信号に対して、輝度を制御するターゲット色（設定されたターゲット色）に対応する輝度信号の値が低くなる第２の輝度信号を生成することができる。【００２６】
本発明の更に他の態様に係る画像処理装置において、ターゲット色設定部は、ｎを２以上の整数とすると、ｎ個のターゲット色を同時に設定可能であり、第２の係数取得部は、ターゲット色設定部によりｎ個のターゲット色が同時に設定されると、ｎ個の各ターゲット色に対応するｎ個の第２の係数を取得し、第２の輝度信号生成部は、取得した第１の色信号、第２の色信号及び第３の色信号と、ｎ個の第２の係数とに基づいてｎ個の輝度信号を生成し、ｎ個の輝度信号のうちの最小の輝度信号を第２の輝度信号とすることが好ましい。【００２７】
ターゲット色設定部により複数（２以上であるｎ個）のターゲット色を同時に設定することができ、複数のターゲット色が同時に設定されると、複数のターゲット色の輝度を制御するために使用する第２の輝度信号を、ターゲット色ごとに生成することができる。【００２８】
本発明の更に他の態様に係る画像処理装置において、第１の輝度信号又は第２の輝度信号の大きさと混合率との関係を示すテーブル又は関係式であって、ｎ個の各ターゲット色に対応するｎ個のテーブル又は関係式のうちから、最小の輝度信号がｎ個の各ターゲット色のいずれに対応するかに応じたテーブル又は関係式を使用して、第１の輝度信号又は第２の輝度信号の大きさに応じた混合率を取得する混合率取得部を備え、第３の輝度信号生成部は、混合率取得部により取得した混合率に基づいて第１の輝度信号と第２の輝度信号とを加重平均し、第３の輝度信号を生成することが好ましい。【００２９】
複数のターゲット色を同時に制御するために使用する第２の輝度信号がターゲット色ごとに生成されると、更にターゲット色ごと混合率を取得して、ターゲット色ごとに輝度が制御された第３の輝度信号を生成することができる。これにより、複数のターゲット色の輝度をそれぞれ制御することができる。【００３０】
本発明の更に他の態様に係る画像処理装置において、第３の輝度信号生成部は、第１の輝度信号よりも第２の輝度信号が高い場合には、第１の輝度信号を出力することが好ましい。これにより、ターゲット色以外の色の輝度が制御されないようにすることができる。【００３１】
本発明の更に他の態様に係る画像処理装置において、第１の色信号、第２の色信号及び第３の色信号にそれぞれ対応する第２の係数の総和は、１であることが好ましい。これにより、無彩色の輝度を変化させずに、ターゲット色の輝度を制御することができる。【００３２】
本発明の更に他の態様に係る画像処理装置において、撮影画像を示す３原色の第１の色信号、第２の色信号及び第３の色信号は、ガンマ変換後の色信号であることが好ましい。【００３３】
本発明の更に他の態様に係る撮像装置は、撮影光学系及び撮像素子を含む撮像部と、上述した画像処理装置と、を備え、色信号取得部は、撮像部により撮影された撮影画像を示す３原色の第１の色信号、第２の色信号及び第３の色信号を取得する。【００３４】
本発明の更に他の態様に係る画像処理方法は、撮影画像を示す３原色の第１の色信号、第２の色信号及び第３の色信号を取得するステップと、取得した第１の色信号、第２の色信号及び第３の色信号と、第１の色信号、第２の色信号及び第３の色信号にそれぞれ対応する第１の係数であって、標準の第１の輝度信号を生成する第１の係数とを使用して第１の輝度信号を生成するステップと、取得した第１の色信号、第２の色信号及び第３の色信号と、第１の色信号、第２の色信号及び第３の色信号にそれぞれ対応する第２の係数であって、第１の係数のうちのターゲット色に対応する係数の重みを低下させた第２の係数とを使用して第２の輝度信号を生成するステップと、生成した第１の輝度信号と第２の輝度信号とに基づいてターゲット色の輝度が制御された第３の輝度信号を生成するステップと、を含む。【００３５】
本発明の更に他の態様に係る画像処理プログラムは、撮影画像を示す３原色の第１の色信号、第２の色信号及び第３の色信号を取得する機能と、取得した第１の色信号、第２の色信号及び第３の色信号と、第１の色信号、第２の色信号及び第３の色信号にそれぞれ対応する第１の係数であって、標準の第１の輝度信号を生成する第１の係数とを使用して第１の輝度信号を生成する機能と、取得した第１の色信号、第２の色信号及び第３の色信号と、第１の色信号、第２の色信号及び第３の色信号にそれぞれ対応する第２の係数であって、第１の係数のうちのターゲット色に対応する係数の重みを低下させた第２の係数とを使用して第２の輝度信号を生成する機能と、生成した第１の輝度信号と第２の輝度信号とに基づいてターゲット色の輝度が制御された第３の輝度信号を生成する機能と、をコンピュータに実行させる。
【発明の効果】
【００３６】
本発明によれば、撮影画像内の所望の色の輝度を制御することができ、かつ色に影響が生じないようにすることができる。
【図面の簡単な説明】
【００３７】
【図１】本発明に係る撮像装置の実施形態を示す斜視図
【図２】図１に示した撮像装置の背面図
【図３】図１に示した撮像装置の内部構成の実施形態を示すブロック図
【図４】図３に示した撮像装置の画像処理部の実施形態を示す要部ブロック図
【図５】ガンマ補正処理部によりガンマ補正される入出力特性（ガンマ特性）の一例を示すグラフ
【図６】第１の実施形態の輝度及び色差変換処理部を示すブロック図
【図７】図６に示した輝度及び色差変換処理部により実施される画像処理方法の第１の実施形態を示すフローチャート
【図８】第２の実施形態の輝度及び色差変換処理部を示すブロック図
【図９】第１の輝度信号「Ｙ１」の大きさと混合率「Ratio」との関係の一例を示すグラフ
【図１０】第１の輝度信号「Ｙ１」、第２の輝度信号「Ｙ２」、及び第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とを加重平均して生成した第３の輝度信号「Ｙ」を示すグラフ
【図１１】図８に示した輝度及び色差変換処理部により実施される画像処理方法の第２の実施形態を示すフローチャート
【図１２】第３の実施形態の輝度及び色差変換処理部を示すブロック図
【図１３】図１２に示した輝度及び色差変換処理部により実施される画像処理方法の第３の実施形態を示すフローチャート
【図１４】第４の実施形態の輝度及び色差変換処理部を示すブロック図
【図１５】ターゲット色の色相「Ｈ」が赤の場合に設定される、色相「Ｈ」(Ｈ：０〜３６０°)と補正係数「Ｃ」（Ｃ：０〜１．０）との関係を示すグラフ
【図１６】図１４に示した輝度及び色差変換処理部により実施される画像処理方法の第４の実施形態を示すフローチャート
【図１７】第５の実施形態の輝度及び色差変換処理部を示すブロック図
【図１８】図１７に示した輝度及び色差変換処理部により実施される画像処理方法の第５の実施形態を示すフローチャート
【図１９】第６の実施形態の輝度及び色差変換処理部を示すブロック図
【図２０】第１の輝度信号「Ｙ１」の大きさと混合率「Ratio」との関係の他の例を示すグラフ
【図２１】図１９に示した輝度及び色差変換処理部により実施される画像処理方法の第６の実施形態を示すフローチャート
【図２２】スマートフォンの外観を示す斜視図
【図２３】スマートフォンの構成を示すブロック図
【図２４】各種色空間の関係を示す図
【発明を実施するための形態】
【００３８】
以下、添付図面に従って本発明に係る画像処理装置、撮像装置、画像処理方法及び画像処理プログラムの好ましい実施の形態について説明する。
【００３９】
［撮像装置］
図１及び図２はそれぞれ本発明に係る撮像装置の実施形態を示す斜視図及び背面図である。この撮像装置１０は、レンズを通った光を撮像素子で受け、デジタル信号に変換して静止画又は動画の画像データとしてメモリカードに記録するデジタルカメラ、又はデジタルビデオカメラである。
【００４０】
図１に示すように撮像装置１０は、その正面に撮影レンズ（撮影光学系）１２、ストロボ１等が配設され、上面にはシャッタボタン２、電源／モードスイッチ３、及びモードダイヤル４等が配設されている。一方、図２に示すように、カメラ背面には、液晶モニタ３０、ズームボタン５、十字ボタン６、ＭＥＮＵ／ＯＫボタン７、再生ボタン８、及びＢＡＣＫボタン９等が配設されている。
【００４１】
撮影レンズ１２は、沈胴式のズームレンズで構成されており、電源／モードスイッチ３によってカメラのモードを撮影モードに設定することにより、カメラ本体から繰り出される。ストロボ１は、主要被写体に向けてストロボ光を照射するものである。
【００４２】
シャッタボタン２は、いわゆる「半押し（Ｓ１  ＯＮ）」と「全押し（Ｓ２  ＯＮ）」とからなる２段ストローク式のスイッチで構成され、撮影準備指示部として機能するとともに、画像の記録指示部として機能する。
【００４３】
撮像装置１０は、撮影モードとして静止画撮影モードが選択され、シャッタボタン２が「半押し」されると、ＡＦ／ＡＥ制御を行う撮影準備動作を行い、シャッタボタン２が「全押し」されると、静止画の撮像及び記録を行う。
【００４４】
また、撮像装置１０は、撮影モードとして動画撮影モードが選択され、シャッタボタン２が「全押し」されると、動画の録画を開始し、シャッタボタン２が再度「全押し」されると、録画を停止して待機状態にする。
【００４５】
電源／モードスイッチ３は、撮像装置１０の電源をＯＮ／ＯＦＦする電源スイッチとしての機能と、撮像装置１０のモードを設定するモードスイッチとしての機能とを併せ持っており、「ＯＦＦ位置」と「再生位置」と「撮影位置」との間をスライド自在に配設されている。撮像装置１０は、電源／モードスイッチ３をスライドさせて、「再生位置」又は「撮影位置」に合わせることにより、電源がＯＮになり、「ＯＦＦ位置」に合わせることにより、電源がＯＦＦになる。そして、電源／モードスイッチ３をスライドさせて、「再生位置」に合わせることにより、「再生モード」に設定され、「撮影位置」に合わせることにより、「撮影モード」に設定される。
【００４６】
モードダイヤル４は、撮像装置１０の撮影モードを設定する撮影モード設定手段として機能し、このモードダイヤル４の設定位置により、撮像装置１０の撮影モードが様々なモードに設定される。例えば、静止画撮影を行う「静止画撮影モード」、動画撮影を行う「動画撮影モード」等である。
【００４７】
液晶モニタ３０は、撮影モード時のライブビュー画像の表示、再生モード時の静止画又は動画の表示を行うとともに、メニュー画面の表示等を行うことでグラフィカルユーザーインターフェースの一部として機能する。
【００４８】
ズームボタン５は、ズームを指示するズーム指示手段として機能し、望遠側へのズームを指示するテレボタン５Ｔと、広角側へのズームを指示するワイドボタン５Ｗとからなる。撮像装置１０は、撮影モード時に、このテレボタン５Ｔとワイドボタン５Ｗとが操作されることにより、撮影レンズ１２の焦点距離が変化する。また、再生モード時に、このテレボタン５Ｔとワイドボタン５Ｗとが操作されることにより、再生中の画像が拡大又は縮小する。
【００４９】
十字ボタン６は、上下左右の４方向の指示を入力するマルチファンクションボタンであり、メニュー画面から項目を選択したり、各メニューから各種設定項目の選択を指示したりするボタン（カーソル移動操作手段）として機能する。左／右キーは再生モード時のコマ送り（順方向／逆方向送り）ボタンとして機能する。
【００５０】
ＭＥＮＵ／ＯＫボタン７は、液晶モニタ３０の画面上にメニューを表示させる指令を行うためのメニューボタンとしての機能と、選択内容の確定及び実行などを指令するＯＫボタンとしての機能とを兼備した操作ボタンである。
【００５１】
これらの十字ボタン６、ＭＥＮＵ／ＯＫボタン７及び液晶モニタ３０は、後述するように輝度を制御するターゲット色を設定するターゲット色設定部として機能する。
【００５２】
再生ボタン８は、撮影記録した静止画又は動画を液晶モニタ３０に表示させる再生モードに切り替えるためのボタンである。
【００５３】
ＢＡＣＫボタン９は、入力操作のキャンセルや一つ前の操作状態に戻すことを指示するボタンとして機能する。
【００５４】
［撮像装置の内部構成］
図３は撮像装置１０の内部構成の実施形態を示すブロック図である。
【００５５】
図３に示すように撮像装置１０は、撮像した画像をメモリカード５４に記録するもので、装置全体の動作は、中央処理装置（ＣＰＵ：Central Processing Unit）４０によって統括制御される。
【００５６】
撮像装置１０には、シャッタボタン２、電源／モードスイッチ３、モードダイヤル４、テレボタン５Ｔ、ワイドボタン５Ｗ、十字ボタン６、ＭＥＮＵ／ＯＫボタン７、再生ボタン８、及びＢＡＣＫボタン９等の操作部３８が設けられている。この操作部３８からの信号はＣＰＵ４０に入力され、ＣＰＵ４０は入力信号に基づいて撮像装置１０の各回路を制御し、例えば、センサ駆動部３２による撮像素子（イメージセンサ）１６の駆動制御、シャッタ駆動部３３によるメカシャッタ（機械的シャッタ）１５の駆動制御、絞り駆動部３４による絞り１４の駆動制御、及びレンズ駆動部３６により撮影レンズ１２の駆動制御を司る他、撮影動作制御、画像処理制御、画像データの記録／再生制御、及び液晶モニタ３０の表示制御などを行う。
【００５７】
電源／モードスイッチ３により撮像装置１０の電源がＯＮされると、図示しない電源部から各ブロックへ給電され、撮像装置１０の駆動が開始される。
【００５８】
撮影レンズ１２、絞り１４、メカシャッタ１５等を通過した光束は、ＣＭＯＳ(Complementary Metal-Oxide Semiconductor)型のカラーイメージセンサである撮像素子１６に結像される。尚、撮像素子１６は、ＣＭＯＳ型に限らず、ＸＹアドレス型、又はＣＣＤ（Charge Coupled Device）型のカラーイメージセンサでもよい。
【００５９】
撮像素子１６は、赤（Ｒ）、緑（Ｇ）又は青（Ｂ）のカラーフィルタが所定のパターン配列（ベイヤー配列、ＧストライプＲ／Ｇ完全市松、Ｘ−Ｔｒａｎｓ（登録商標）配列、ハニカム配列等）でマトリクス状に配置された複数の素子によって構成され、各素子はマイクロレンズ、Ｒ、Ｇ、又はＢのいずれかのカラーフィルタ及びフォトダイオードを含んで構成される。尚、Ｒ、Ｇ、又はＢのカラーフィルタを有する素子を、それぞれＲ画素、Ｇ画素、又はＢ画素という。
【００６０】
撮像装置１０は、動作モードが静止画の撮影モードに設定されると、画像の撮像を開始させ、ライブビュー画像を液晶モニタ３０に表示させる。ライブビュー画像の表示時には、ＣＰＵ４０は、ＡＦ（Autofocus）処理部４２及びＡＥ（Auto Exposure)検出部４４による演算結果に基づいてＡＦ及びＡＥを実行させる。
【００６１】
ＡＦ処理部４２は、コントラストＡＦ処理又は位相差ＡＦ処理を行う部分である。コントラストＡＦ処理を行う場合には、連続して撮像された画像中のＡＦ領域内の画像の高周波成分を抽出し、この高周波成分を積分することにより合焦状態を示すＡＦ評価値を算出する。ＣＰＵ４０は、ＡＦ処理部４２により算出されたＡＦ評価値に基づいて、ＡＦ評価値が極大となるレンズ位置に撮影レンズ１２内のフォーカスレンズを移動させることによりＡＦ制御（コントラストＡＦ）を行う。
【００６２】
また、撮像素子１６が位相差画素を有する場合、ＡＦ処理部４２は、例えば、ＡＦ領域の一対の複数の位相差画素の各出力データに基づいて、位相差データ（例えば、一対の位相差画素の各出力データの差分絶対値の積算値）を算出し、算出した位相差データに基づいて撮影レンズ１２によるピント位置と撮像素子１６の結像面との光軸方向のずれ量（デフォーカス量）を算出する。ＣＰＵ４０は、ＡＦ処理部４２により算出されたデフォーカス量に基づいて、デフォーカス量がゼロになるレンズ位置に撮影レンズ１２内のフォーカスレンズを移動させることによりＡＦ制御（位相差ＡＦ）を行う。
【００６３】
ＡＥ検出部４４は、画面全体のＧ画素の信号（Ｇ信号）を積算し、又は画面中央部と周辺部とで異なる重みづけをしたＧ信号を積算し、その積算値をＣＰＵ４０に出力する。ＣＰＵ４０は、ＡＥ検出部４４から入力する積算値により被写体の明るさ（撮影Ｅｖ値）を算出し、この撮影Ｅｖ値に基づいて絞り１４のＦ値及び撮像素子１６の電子シャッタ（シャッタ速度）を所定のプログラム線図にしたがって決定し、決定したＦ値及びシャッタ速度にしたがって絞り１４のＦ値及び撮像素子１６の電子シャッタ機能を制御して適正な露光量を得る。
【００６４】
そして、シャッタボタン２の「全押し」があると、ＣＰＵ４０は、メモリカード５４に記録する静止画又は動画の撮像を開始させる。
【００６５】
また、ＲＯＭ４７は、カメラ制御プログラム、撮像素子１６の欠陥情報、画像処理等に使用する各種のパラメータやテーブルが記憶されているＲＯＭ（Read Only Memory）、又はＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）である。本例では、このＲＯＭ４７に、ＲＧＢ画素に対応するＲＧＢ信号からターゲット色の輝度を算出するために使用する係数（第２の係数）等が記憶されている。尚、第２の係数の詳細については後述する。
【００６６】
静止画又は動画の撮像時に撮像素子１６から出力されるＲＧＢ信号（モザイク画像信号）は、画像入力コントローラ２２からメモリ(SDRAM：Synchronous Dynamic Random Access Memory)４８に入力し、一時的に記憶される。
【００６７】
メモリ４８に一時的に記憶されたＲＧＢ信号（ＲＡＷデータ）は、画像処理部２４により適宜読み出され、ここで、オフセット補正処理、ホワイトバランス補正処理、デモザイク処理、ガンマ補正処理、輝度及び色差変換処理等の信号処理が行われる。尚、画像処理部２４の詳細については後述する。
【００６８】
画像処理部２４により処理された画像データは、ＶＲＡＭ（Video RAM）５０に入力される。ＶＲＡＭ５０には、それぞれが１コマ分の画像を表す画像データを記録するＡ領域とＢ領域とが含まれている。ＶＲＡＭ５０において１コマ分の画像を表す画像データがＡ領域とＢ領域とで交互に書き換えられる。ＶＲＡＭ５０のＡ領域及びＢ領域のうち、画像データが書き換えられている方の領域以外の領域から、書き込まれている画像データが読み出される。
【００６９】
ＶＲＡＭ５０から読み出された画像データは、ビデオエンコーダ２８においてエンコーディングされ、カメラ背面に設けられている液晶モニタ３０に出力され、これによりライブビュー画像が連続的に液晶モニタ３０の表示画面上に表示される。
【００７０】
圧縮伸張処理部２６は、静止画又は動画の記録時に、画像処理部２４により処理され、一旦メモリ４８に格納された輝度信号(Ｙ)及び色差信号(Ｃｂ),(Ｃｒ)に対して圧縮処理を施す。静止画の場合には、例えばJPEG(Joint Photographic coding Experts Group)形式で圧縮し、動画の場合には、例えばH.264形式で圧縮する。圧縮伸張処理部２６により圧縮された圧縮画像データは、メディアコントローラ５２を介してメモリカード５４に記録される。
【００７１】
また、圧縮伸張処理部２６は、再生モード時にメディアコントローラ５２を介してメモリカード５４から得た圧縮画像データに対して伸張処理を施す。メディアコントローラ５２は、メモリカード５４に対する圧縮画像データの記録及び読み出しなどを行う。
【００７２】
＜画像処理＞
図４は、図３に示した撮像装置１０の画像処理部２４の実施形態を示す要部ブロック図である。
【００７３】
図４に示すように、画像処理部２４は、主としてオフセット補正処理部６１、ＷＢ（White Balance）補正処理部６２、デモザイク処理部６３、ガンマ補正処理部６４、及び輝度及び色差変換処理部６５を有している。
【００７４】
図４において、オフセット補正処理部６１は、撮像素子１６から取得される画像処理前のＲＡＷデータ（ＲＧＢのモザイク状のＲＧＢ信号（ＲＧＢの色信号）を、点順次で入力する。尚、ＲＡＷデータは、例えば、ＲＧＢ毎に１２ビット（０〜４０９５）のビット長を有するデータ（１画素当たり２バイトのデータ）である。
【００７５】
オフセット補正処理部６１は、入力するＲＧＢの色信号に含まれる暗電流成分を補正する処理部であり、撮像素子１６上の遮光画素から得られるオプティカルブラック（ＯＢ）の信号値を、ＲＧＢの色信号から減算することによりＲＧＢの色信号のオフセット補正を行う。
【００７６】
オフセット補正されたＲＧＢの色信号は、ＷＢ補正処理部６２に加えられる。ＷＢ補正処理部６２は、ＲＧＢの色毎に設定されたＷＢゲインを、それぞれＲＧＢの色信号に乗算し、ＲＧＢの色信号のホワイトバランス補正を行う。ＷＢゲインは、例えば、ＲＧＢの色信号に基づいて光源種が自動的に判定され、あるいは手動による光源種が選択され、判定又は選択された光源種に適したＷＢゲインが設定される。しかし、ＷＢゲインの設定方法は、これに限らず、他の公知の方法により設定することができる。
【００７７】
デモザイク処理部６３は、単板式の撮像素子１６のカラーフィルタ配列に対応したモザイク画像から画素毎に全ての色情報を算出するデモザイク処理（「同時化処理」ともいう）を行う部分であり、例えば、ＲＧＢの３色のカラーフィルタからなる撮像素子の場合、ＲＧＢからなるモザイク画像から画素毎にＲＧＢ全ての色情報を算出する。即ち、デモザイク処理部６３は、点順次のＲＧＢの色信号（モザイクデータ）から同時化されたＲＧＢ３面の色信号「Ｒ,Ｇ,Ｂ」を生成する。
【００７８】
デモザイク処理されたＲＧＢの色信号「Ｒ,Ｇ,Ｂ」は、ガンマ補正処理部６４に加えられる。
【００７９】
ガンマ補正処理部６４は、入力する色信号「Ｒ,Ｇ,Ｂ」を対数化処理によるガンマ補正処理を行い、ディスプレイ装置により画像が自然に再現されるように色信号「Ｒ,Ｇ,Ｂ」に対して非線な階調補正処理を行う。
【００８０】
図５は、ガンマ補正処理部６４によりガンマ補正される入出力特性（ガンマ特性）の一例を示すグラフである。本例では、ガンマ補正処理部６４は、１２ビット（０〜４０９５）の色信号「Ｒ,Ｇ,Ｂ」に対し、ガンマ特性に対応するガンマ補正を行い、８ビット（０〜２５５）の色信号「Ｒ,Ｇ,Ｂ」を生成する。ガンマ補正処理部６４は、例えば、ＲＧＢ毎のルックアップテーブルにより構成することができ、ＲＧＢの色毎にそれぞれ対応するガンマ補正を行うことが好ましい。尚、ガンマ補正処理部６４は、入力データに対して、トーンカーブに沿った非線形な階調補正を行うものを含む。
【００８１】
ガンマ補正処理部６４によりガンマ補正（ガンマ変換）された、撮影画像を示す３原色の第１の色信号、第２の色信号及び第３の色信号（色信号「Ｒ1,Ｇ1,Ｂ1」）は、輝度及び色差変換処理部６５に加えられ、ここで、色信号「Ｒ1,Ｇ1,Ｂ1」から第１の輝度信号
「Ｙ１」、及び色差信号「Ｃｒ,Ｃｂ」に変換される。ガンマ補正処理部６４又は輝度及び色差変換処理部６５は、本発明に係る３原色の色信号を取得する色信号取得部として機能する。
【００８２】
＜輝度及び色差変換処理＞
以下、本発明に係る画像処理装置に対応する輝度及び色差変換処理部６５の第１の実施形態から第５の実施形態について説明する。
【００８３】
［第１の実施形態］
図６は、第１の実施形態の輝度及び色差変換処理部６５−１を示すブロック図である。
【００８４】
図６に示す輝度及び色差変換処理部６５−１は、主として第１の輝度信号生成部を含む輝度及び色差変換処理部７０と、第２の輝度信号生成部７２と、第３の輝度信号生成部７４とから構成されている。
【００８５】
ガンマ変換後の３原色の色信号「Ｒ1,Ｇ1,Ｂ1」は、それぞれ輝度及び色差変換処理部７０及び第２の輝度信号生成部７２に出力される。
【００８６】
輝度及び色差変換処理部７０は、入力するガンマ変換後の色信号「Ｒ1,Ｇ1,Ｂ1」に基づいて、標準の第１の輝度信号「Ｙ１」と色差信号「Ｃｒ,Ｃｂ」とを生成する。
【００８７】
ここで、第１の輝度信号「Ｙ１」とは、３原色の色信号「Ｒ1,Ｇ1,Ｂ1」に対して、標準の係数（第１の係数）による重み付け加算により生成される輝度信号をいい、色信号「Ｒ1,Ｇ1,Ｂ1」に対する第１の係数を、Kr1,Kg1,Kb1とすると、第１の輝度信号「Ｙ１」は、次式により算出される。
【００８８】
［数３］
Ｙ１＝（Kr1 × Ｒ1 ）＋（Kg1 ×Ｇ1 ）＋（Kb1 ×Ｂ1 ）
標準テレビ放送向けの規格である BT.601 では、ガンマ変換後の色信号「Ｒ1,Ｇ1,Ｂ1」に対する第１の係数「Kr1,Kg1,Kb1」として、以下の係数を使用している。
【００８９】
［数４］
Kr1 ＝ 0.299
［数５］
Kg1 ＝ 0.587
［数６］
Kb1 ＝ 0.114
［数７］
Kr1 ＋ Kg1 ＋ Kb1 ＝ 1.000
また、色差信号「Ｃｒ,Ｃｂ」は、BT.601 では、次式により算出される。
【００９０】
［数８］
Ｃｒ＝0.713 ×（Ｒ1 − Ｙ1) ＝ 0.500 × Ｒ1 − 0.419 × Ｇ1 − 0.081 × Ｂ1
［数９］
Ｃｂ＝0.713 ×（Ｂ1 − Ｙ1) ＝−0.169 × Ｒ1 − 0.331 × Ｇ1 ＋ 0.500 × Ｂ1
尚、ＨＤＴＶ（High-definition television）向けの規格であるBTA S-001Bでは、第１の係数「Kr1,Kg1,Kb1」として、［数４］式から［数６］式に示した第１の係数とは異なる係数が使用されている。
【００９１】
輝度及び色差変換処理部７０の第１の輝度信号生成部は、ガンマ変換後の色信号「Ｒ1,Ｇ1,Ｂ1」と第１の係数「Kr1,Kg1,Kb1」とに基づいて［数３］式から第１の輝度信号「Ｙ１」を算出し、算出した第１の輝度信号「Ｙ１」を第３の輝度信号生成部７４に出力する。
【００９２】
また、輝度及び色差変換処理部７０は、［数７］式及び［数８］式に基づいてガンマ変換後の色信号「Ｒ1,Ｇ1,Ｂ1」から色差信号「Ｃｒ,Ｃｂ」を算出する。
【００９３】
第２の輝度信号生成部７２は、ガンマ変換後の色信号「Ｒ1,Ｇ1,Ｂ1」から第２の輝度信号「Ｙ２」を生成する部分であり、第１の係数「Kr1,Kg1,Kb1」とは異なる第２の係数
「Kr2,Kg2,Kb2」を使用し、次式により第２の輝度信号(Ｙ２)を算出する。
【００９４】
［数１０］
Ｙ２＝（Kr2 × Ｒ1 ）＋（Kg2 ×Ｇ1 ）＋（Kb2 ×Ｂ1 ）
ここで、第２の係数「Kr2,Kg2,Kb2」としては、色信号「Ｒ1,Ｇ1,Ｂ1」にそれぞれ対応する第１の係数「Kr1,Kg1,Kb1」のうち、撮影画像内の輝度を制御しようとする所望の色（ターゲット色）に対応する係数の重みを低下させた係数（第２の係数）が使用される。
【００９５】
また、第２の係数「Kr2,Kg2,Kb2」は、重みを低下させた係数以外の係数の重みを上げ、第２の係数「Kr2,Kg2,Kb2」の総和が１になるようにすることが好ましい。
【００９６】
例えば、赤系のターゲット色の輝度を制御する場合、第２の係数「Kr2,Kg2,Kb2」のうちの赤の色信号「Ｒ1」に対応する係数「Kr2」の重みを、第１の係数「Kr1,Kg1,Kb1」のうちの係数「Kr1」よりも下げ、他の色の色信号「Ｇ1,Ｂ1」に対応する係数「Kg2,Kb2」の両方又は一方の重みを、係数「Kg1,Kb1」よりも上げる。ターゲット色が赤系の場合の第２の係数「Kr2,Kg2,Kb2」の数値例を、［数１１］式〜［数１３］式に示す。
【００９７】
［数１１］
Kr2 ＝ Kr1 / 2 ＝ 0.150                      ………（Kr1よりも重みを下げる）
［数１２］
Kg2 ＝ Kg1 ×（1-Kr2）/ (Kg1 + Kb1) ＝ 0.712   ……（Kg1よりも重みを上げる）
［数１３］
Kb2 ＝ Kb1 ×（1-Kr2）/ (Kg1 + Kb1) ＝ 0.138   ……（Kb1よりも重みを上げる）
［数１４］
Kr2 ＋ Kg2 ＋ Kb2 ＝ 1.000
［数４］式〜［数６］式に示した第１の係数「Kr1,Kg1,Kb1」で第１の輝度信号「Ｙ１」を算出し、［数１１］式〜［数１３］式に示した第２の係数「Kr2,Kg2,Kb2」で第２の輝度信号「Ｙ２」を算出した場合、第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とは以下の関係になる。
【００９８】
(1) 赤系被写体ではＹ１＞Ｙ２であり、赤系以外ではＹ１＜Ｙ２となる。
【００９９】
(2) 高彩度な赤（「Ｒ1,Ｇ1,Ｂ1」の「Ｒ1」が支配的な被写体）では、Ｙ１とＹ２との差分が大きく、低彩度な赤では、Ｙ１とＹ２との差が小さい。無彩色では、Ｙ１＝Ｙ２となる。
【０１００】
尚、［数１１］式〜［数１３］式に示した数値例は、ターゲット色が赤系の場合の第２の係数「Kr2,Kg2,Kb2」であるが、ターゲット色が赤系以外の場合には、そのターゲット色に対応する第２の係数「Kr2,Kg2,Kb2」が使用される。
【０１０１】
例えば、緑系のターゲット色に対応する第２の係数「Kr2,Kg2,Kb2」は、第２の係数「Kr2,Kg2,Kb2」のうちの緑の色信号(Ｇ1)に対応する係数「Kg2」の重みを、第１の係数「Kr1,Kg1,Kb1」のうちの係数「Kg1」よりも下げる。
【０１０２】
青系のターゲット色に対応する第２の係数「Kr2,Kg2,Kb2」は、第２の係数「Kr2,Kg2,Kb2」のうちの青の色信号(Ｂ1)に対応する係数「Kb2」の重みを、第１の係数「Kr1,Kg1,Kb1」のうちの係数「Kb1」よりも下げる。
【０１０３】
また、黄系のターゲット色に対応する第２の係数「Kr2,Kg2,Kb2」は、第２の係数「Kr2,Kg2,Kb2」のうちの赤、緑の色信号「Ｒ1,Ｇ1」に対応する係数「Kr2,Kg2」の重みを、第１の係数「Kr1,Kg1,Kb1」のうちの係数「Kr1,Kg1」よりも下げる。
【０１０４】
シアン系のターゲット色に対応する第２の係数「Kr2,Kg2,Kb2」は、第２の係数「Kr2,Kg2,Kb2」のうちの緑、青の色信号「Ｇ1,Ｂ1」に対応する係数「Kg2,Kb2」の重みを、第１の係数「Kr1,Kg1,Kb1」のうちの係数「Kg1,Kb1」よりも下げる。
【０１０５】
マゼンタ系のターゲット色に対応する第２の係数「Kr2,Kg2,Kb2」は、第２の係数「Kr2,Kg2,Kb2」のうちの赤、青の色信号「Ｒ1,Ｂ1」に対応する係数「Kr2,Kb2」の重みを、第１の係数「Kr1,Kg1,Kb1」のうちの係数「Kr1, Kb1」よりも下げる。
【０１０６】
第２の輝度信号生成部７２は、ガンマ変換後の３原色の色信号「Ｒ1,Ｇ1,Ｂ1」と、上記のようにターゲット色に対応する第２の係数「Kr2,Kg2,Kb2」とを使用して、［数１０］式により第２の輝度信号「Ｙ２」を算出し、算出した第２の輝度信号「Ｙ２」を第３の輝度信号生成部７４に出力する。
【０１０７】
第３の輝度信号生成部７４は、輝度及び色差変換処理部７０（第１の輝度信号生成部）から入力する第１の輝度信号「Ｙ１」と、第２の輝度信号生成部７２から入力する第２の輝度信号「Ｙ２」とに基づいてターゲット色の輝度が制御された第３の輝度信号「Ｙ」を生成する。
【０１０８】
ところで、第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とは、以下の関係を有する。
【０１０９】
(1) ターゲット色に対応する第２の輝度信号「Ｙ２」は、第１の輝度信号「Ｙ１」よりも低くなる。
【０１１０】
(2) 第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とは、高彩度なターゲット色に対応する輝度信号ほど差が大きくなり、低彩度なターゲット色に対応する輝度信号ほど差が小さくなる。
【０１１１】
したがって、第３の輝度信号生成部７４は、第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とにより、「高彩度なターゲット色」に対応する第１の輝度信号「Ｙ１」、第２の輝度信号「Ｙ２」を判別することができ、例えば「高彩度なターゲット色」に対して輝度が制御された第３の輝度信号「Ｙ」を生成することができる。また、「高彩度なターゲット色」に対して輝度を制御することにより、「高彩度なターゲット色」だけ輝度コントラストを向上させ、又は抑制された第３の輝度信号「Ｙ」を生成することができる。
【０１１２】
そして、第１の実施形態の輝度及び色差変換処理部６５−１は、第３の輝度信号生成部７４により生成された第３の輝度信号「Ｙ」と、輝度及び色差変換処理部７０により生成された色差信号「Ｃｒ,Ｃｂ」とを後段の信号処理部に出力する。例えば、第３の輝度信号「Ｙ」は、輪郭強調処理を行う輪郭強調回路に出力され、色差信号「Ｃｒ,Ｃｂ」は、色調補正を行う色差マトリクス回路に出力される。
【０１１３】
［画像処理方法の第１の実施形態］
図７は、上記輝度及び色差変換処理部６５−１により実施される画像処理方法の第１の実施形態を示すフローチャートである。
【０１１４】
図７において、図６に示した輝度及び色差変換処理部６５−１は、ガンマ変換後のＲＧＢの３原色の色信号「Ｒ1,Ｇ1,Ｂ1」は、ガンマ補正処理部６４（図４）から取得する（ステップＳ１０）。
【０１１５】
輝度及び色差変換処理部７０に含まれる第１の輝度信号生成部は、標準の第１の係数「Kr1,Kg1,Kb1」（例えば、［数４］式〜［数６］式に示した係数）を用いて、ステップＳ１０で取得した色信号「Ｒ1,Ｇ1,Ｂ1」から第１の輝度信号「Ｙ１」を生成する（ステップＳ１２）。
【０１１６】
また、第２の輝度信号生成部７２は、輝度を制御するターゲット色に対応して設定された第２の係数「Kr2,Kg2,Kb2」（例えば、赤系のターゲット色の場合には、［数１１］式〜［数１３］式に示した係数）を用いて、ステップＳ１０で取得した色信号「Ｒ1,Ｇ1,Ｂ1」から第２の輝度信号「Ｙ２」を生成する（ステップＳ１４）。
【０１１７】
第３の輝度信号生成部７４は、ステップＳ１２及びＳ１４でそれぞれ生成された第１の輝度信号「Ｙ１」及び第２の輝度信号「Ｙ２」の信号値に応じて、ターゲット色の輝度が制御された第３の輝度信号「Ｙ」を生成する（ステップＳ１６）。
【０１１８】
これにより、ターゲット色の輝度が制御された第３の輝度信号を生成することができる。例えば、第１の輝度信号と第２の輝度信号との混合率を調整することで、特定の色相かつ高彩度な被写体の輝度の制御が可能であり、また、色差信号「Ｃｒ,Ｃｂ」は変化しないため、色（彩度及び色相）への影響が生じないようにすることができる。
【０１１９】
［第２の実施形態］
図８は、第２の実施形態の輝度及び色差変換処理部６５−２を示すブロック図である。尚、図８において、図６に示した第１の実施形態の輝度及び色差変換処理部６５−１と共通する部分には同一の符号を付し、その詳細な説明は省略する。
【０１２０】
図８に示す第２の実施形態の輝度及び色差変換処理部６５−２は、第１の実施形態の輝度及び色差変換処理部６５−１と比較して混合率取得部７６が追加され、かつ第３の輝度信号生成部７４−２により生成される具体的な第３の輝度信号が相違する。
【０１２１】
図８において、輝度及び色差変換処理部７０に含まれる第１の輝度信号生成部により生成された標準の第１の輝度信号「Ｙ１」は、第３の輝度信号生成部７４−２及び混合率取得部７６に加えられる。
【０１２２】
混合率取得部７６は、入力する第１の輝度信号「Ｙ１」の大きさに応じた混合率「Ratio」を取得し、取得した混合率「Ratio」を第３の輝度信号生成部７４−２に出力する。
【０１２３】
図９は、第１の輝度信号「Ｙ１」の大きさと混合率「Ratio」との関係の一例を示すグラフである。
【０１２４】
第１の輝度信号「Ｙ１」は８ビットの信号であるため、第１の輝度信号「Ｙ１」の大きさは「０〜２５５」の範囲内の信号値であり、また、混合率「Ratio」は「０〜１」の変域を有している。また、本例では、第１の輝度信号「Ｙ１」が「０」及びその近傍の信号値に対する混合率「Ratio」は「１」であり、第１の輝度信号「Ｙ１」の大きさに比例して混合率「Ratio」は小さくなり、第１の輝度信号「Ｙ１」が「２５５」及びその近傍の信号値に対する混合率「Ratio」は「１」である。
【０１２５】
混合率取得部７６は、図９のグラフに示した第１の輝度信号「Ｙ１」と混合率「Ratio」との関係が記憶されたテーブル（ルックアップテーブル）を参照して、入力する第１の輝度信号「Ｙ１」の大きさに対応する混合率「Ratio」をテーブルから読み出し、又は図９のグラフに示した第１の輝度信号「Ｙ１」と混合率「Ratio」との関係を示す関係式を使用して、入力する第１の輝度信号「Ｙ１」の大きさに対応する混合率「Ratio」を算出し、テーブルから読み出し又は関係式から算出した混合率「Ratio」を第３の輝度信号生成部７４−２に出力する。
【０１２６】
尚、第１の輝度信号「Ｙ１」と混合率「Ratio」との関係を示すテーブル又は関係式は、撮像装置１０のＲＯＭ４７に予め記憶されているものを使用することができる。また、撮影画像ごとに第１の輝度信号「Ｙ１」と混合率「Ratio」との関係を算出して、テーブル又は関係式を生成してもよい。例えば、撮影画像の輝度のヒストグラムを作成し、作成したヒストグラムに基づいて混合率「Ratio」を「１」にする第１の輝度信号「Ｙ１」の範囲、混合率「Ratio」を「０」にする第１の輝度信号「Ｙ１」の範囲、及び混合率「Ratio」を「１〜０」の範囲で線形に変化させる範囲をそれぞれ決定し、第１の輝度信号「Ｙ１」と混合率「Ratio」との関係を示すテーブル又は関係式を生成する。
【０１２７】
また、本例の混合率取得部７６は、第１の輝度信号「Ｙ１」の大きさに応じた混合率「Ratio」を取得するが、これに限らず、第２の輝度信号生成部７２により生成された第２の輝度信号「Ｙ２」を入力し、第２の輝度信号「Ｙ２」の大きさに応じた混合率「Ratio」を取得するようにしてもよい。
【０１２８】
第３の輝度信号生成部７４−２は、混合率取得部７６から加えられる混合率「Ratio」
に基づいて、輝度及び色差変換処理部７０から入力する第１の輝度信号「Ｙ１」と、第２の輝度信号生成部７２から入力する第２の輝度信号「Ｙ２」とを、次式により加重平均し、第３の輝度信号「Ｙ」を生成する。
【０１２９】
［数１５］
Ｙ=Ｙ１×（1-Ratio）+ Ｙ２× Ratio
［数１６］
０≦ Ratio ≦１
図１０は、第１の輝度信号「Ｙ１」、第２の輝度信号「Ｙ２」、及び第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とを加重平均して生成した第３の輝度信号「Ｙ」を示すグラフである。
【０１３０】
図１０に示すように、ターゲット色に対応する第２の輝度信号「Ｙ２」は、第１の輝度信号「Ｙ１」よりも低くなり、また、第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とは、高彩度なターゲット色に対応する輝度信号ほど差が大きくなり、低彩度なターゲット色に対応する輝度信号ほど差が小さくなる。
【０１３１】
そして、第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とを、図９に示す混合率「Ratio」を使用して、［数１５］式により加重平均して生成した第３の輝度信号「Ｙ」は、図１０に示すように一般的な従来の第１の輝度信号「Ｙ１」と比較して被写体の明るさの変化に対する輝度信号の変化（明暗差）が大きくなる。即ち、第２の輝度信号「Ｙ２」は、第１の輝度信号「Ｙ１」よりも傾きが急峻になり、輝度コントラストが高くなる。
【０１３２】
尚、第１の輝度信号「Ｙ１」に対する第２の輝度信号「Ｙ２」の比率を示す混合率「Ratio」は、第１の輝度信号「Ｙ１」が大きいほど小さくなり、第１の輝度信号「Ｙ１」が小さいほど大きくなる場合（図９の例）に限らず、第１の輝度信号「Ｙ１」が大きいほど大きくなり、第１の輝度信号「Ｙ１」が小さいほど小さくなるようにしてもよい。後者の混合率「Ratio」の場合、第２の輝度信号「Ｙ２」は、第１の輝度信号「Ｙ１」よりも傾きが緩やかになり、輝度コントラストが低くなる。また、混合率「Ratio」は、第１の輝度信号「Ｙ１」の変化に対して線形に変化する場合に限らず、非線形に変化するものでもよい。
【０１３３】
また、混合率取得部７６は、第１の輝度信号「Ｙ１」と混合率「Ratio」との関係を示すテーブル又は関係式に基づいて、第１の輝度信号「Ｙ１」に対応する混合率「Ratio」
を取得するが、ターゲット色ごとに異なるテーブル又は関係式を使用して第１の輝度信号「Ｙ１」に対応する混合率「Ratio」を取得するようにしてもよい。この場合、第３の輝度信号生成部７４−２は、ターゲット色に応じて輝度の制御方法が異なる第３の輝度信号「Ｙ」を生成することができる。
【０１３４】
［画像処理方法の第２の実施形態］
図１１は、上記輝度及び色差変換処理部６５−２により実施される画像処理方法の第２の実施形態を示すフローチャートである。尚、図１１において、図７に示した第１の実施形態と共通するステップには同一のステップ番号を付し、その詳細な説明は省略する。
【０１３５】
図１１に示す第２の実施形態の画像処理方法は、第１の輝度信号「Ｙ１」及び第２の輝度信号「Ｙ２」を生成するまでの処理は、第１の実施形態と同じである。
【０１３６】
混合率取得部７６は、ステップＳ１２により生成した第１の輝度信号「Ｙ１」（又はステップＳ１４により生成した第２の輝度信号「Ｙ２」）と、第１の輝度信号「Ｙ１」（又は第２の輝度信号「Ｙ２」）と混合率「Ratio」との関係を示すテーブル又は関係式とに基づいて第１の輝度信号「Ｙ１」（又は第２の輝度信号「Ｙ２」）の信号の大きさに応じた混合率「Ratio」を取得する（ステップＳ２０）。
【０１３７】
第３の輝度信号生成部７４−２は、ステップＳ１２及びＳ１４でそれぞれ生成された第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とを、ステップＳ２０により取得した混合率「Ratio」に応じて加重平均し、第３の輝度信号「Ｙ」を生成する（ステップＳ２２）。
【０１３８】
これにより、ターゲット色の輝度が制御された第３の輝度信号を生成することができ、また、色（彩度及び色相）への影響が生じないようにすることができる。
【０１３９】
［第３の実施形態］
図１２は、第３の実施形態の輝度及び色差変換処理部６５−３を示すブロック図である。尚、図１２において、図８に示した第２の実施形態の輝度及び色差変換処理部６５−２と共通する部分には同一の符号を付し、その詳細な説明は省略する。
【０１４０】
図１２に示す第３の実施形態の輝度及び色差変換処理部６５−３は、第２の実施形態の輝度及び色差変換処理部６５−２と比較して第３の輝度信号生成部７４−３が相違する。
【０１４１】
図１２に示す第３の輝度信号生成部７４−３は、輝度信号比較器７５を更に備えている。輝度信号比較器７５は、輝度及び色差変換処理部７０から入力する第１の輝度信号「Ｙ１」と、第２の輝度信号生成部７２から入力する第２の輝度信号「Ｙ２」とを比較し、第１の輝度信号「Ｙ１」よりも第２の輝度信号「Ｙ２」が高い場合には、第１の輝度信号「Ｙ１」をそのまま第３の輝度信号「Ｙ」として出力する。
【０１４２】
第１の輝度信号「Ｙ１」よりも第２の輝度信号「Ｙ２」が高くなる場合の、第１の輝度信号「Ｙ１」及び第２の輝度信号「Ｙ２」は、ターゲット色の色相に対応する輝度信号ではないからである。そして、第１の輝度信号「Ｙ１」よりも第２の輝度信号「Ｙ２」が高くなる場合、第１の輝度信号「Ｙ１」をそのまま第３の輝度信号「Ｙ」として出力することにより、ターゲット色以外の色相に対応する輝度信号が変動しないように（輝度の制御がされないように）する。
【０１４３】
一方、第３の輝度信号生成部７４−３は、輝度信号比較器７５により第１の輝度信号「Ｙ１」が第２の輝度信号「Ｙ２」以下と判別されると、第２の実施形態と同様に第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とを、混合率取得部７６により取得された混合率「Ratio」に応じて加重平均して第３の輝度信号「Ｙ」を生成し、生成した第３の輝度信号「Ｙ」を出力する。
【０１４４】
これにより、ターゲット色の色相に対応する輝度のみを制御することができる。
【０１４５】
［画像処理方法の第３の実施形態］
図１３は、上記輝度及び色差変換処理部６５−３により実施される画像処理方法の第３の実施形態を示すフローチャートである。尚、図１３において、図１１に示した第２の実施形態と共通するステップには同一のステップ番号を付し、その詳細な説明は省略する。
【０１４６】
図１３に示す第３の実施形態の画像処理方法は、ステップＳ３０及びステップＳ３２の処理が追加されている点で、第２の実施形態と相違する。
【０１４７】
ステップＳ３０では、ステップＳ１２により生成された第１の輝度信号「Ｙ１」とステップＳ１４により生成された第２の輝度信号「Ｙ２」とが比較され、第１の輝度信号「Ｙ１」が第２の輝度信号「Ｙ２」よりも高い場合（「Yes」の場合）には、ステップＳ２０に遷移させる。そして、輝度及び色差変換処理部６５−３は、第２の実施形態と同様にして第３の輝度信号「Ｙ」を生成する（ステップＳ２０、Ｓ２２）。
【０１４８】
一方、第１の輝度信号「Ｙ１」が第２の輝度信号「Ｙ２」よりも高くない場合（「No」の場合）には、ステップＳ３２に遷移させる。
【０１４９】
ステップＳ３２では、第１の輝度信号「Ｙ１」、第２の輝度信号「Ｙ２」及び混合率「Ratio」から第３の輝度信号「Ｙ」を生成せずに、第１の輝度信号「Ｙ１」をそのまま第３の輝度信号「Ｙ」として出力する。
【０１５０】
これにより、ターゲット色以外の色相の輝度が制御されず、ターゲット色の輝度のみが制御された第３の輝度信号を生成することができ、また、色（彩度及び色相）への影響が生じないようにすることができる。
【０１５１】
［第４の実施形態］
図１４は、第４の実施形態の輝度及び色差変換処理部６５−４を示すブロック図である。尚、図１４において、図１２に示した第３の実施形態の輝度及び色差変換処理部６５−３と共通する部分には同一の符号を付し、その詳細な説明は省略する。
【０１５２】
図１４に示す第４の実施形態の輝度及び色差変換処理部６５−４は、第３の実施形態の輝度及び色差変換処理部６５−３と比較して色相算出部７８、補正係数取得部８０及び補正係数設定部８２が追加され、かつ第３の輝度信号生成部７４−４による第３の輝度信号「Ｙ」の生成方法が相違する。
【０１５３】
図１４において、色相算出部７８にはガンマ変換後の色信号「Ｒ1,Ｇ1,Ｂ1」が加えられており、色相算出部７８は、入力する色信号「Ｒ1,Ｇ1,Ｂ1」に基づいて画素ごとに色相「Ｈ」を算出する。色相「Ｈ」は、色相(Hue)、彩度(Saturation Chroma)、及び明度(Value Lightness Brightness)の３つの成分からなるＨＳＶ色空間における色相(Hue)であり、ＲＧＢ色空間の色信号「Ｒ1,Ｇ1,Ｂ1」から公知の変換式により算出することができる。また、色相「Ｈ」は、ガンマ変換後の色信号「Ｒ1,Ｇ1,Ｂ1」を、Ｌ*ａ*ｂ*色空間に変換し、ａ*ｂ*の値から取得することができる。尚、色相「Ｈ」は、ＨＳＶ色空間では０〜３６０°の範囲で変化する角度として表され、例えば、赤の色相「Ｈ」は０°である。
【０１５４】
色相算出部７８により算出された色相「Ｈ」は、補正係数取得部８０に出力される。
【０１５５】
補正係数設定部８２は、ターゲット色の色相の重みが大きく、ターゲット色から色相が離れる程、重みが小さい補正係数を設定する部分である。
【０１５６】
図１５は、ターゲット色の色相「Ｈ」が赤の場合に設定される、色相「Ｈ」(Ｈ：０〜３６０°)と補正係数「Ｃ」（Ｃ：０〜１．０）との関係を示すグラフである。補正係数設定部８２は、図１５のグラフに対応するテーブル又は関係式をターゲット色ごとに有し、ターゲット色が設定されると、そのターゲット色に対応する補正係数（補正係数を示すテーブル又は関係式）を設定する。
【０１５７】
補正係数取得部８０は、色相算出部７８により算出された色相「Ｈ」に応じて補正係数設定部８２から対応する補正係数「Ｃ」を取得する。例えば、図１５に示すようにターゲット色が赤に設定されている場合、色相算出部７８により算出された色相「Ｈ」が０°（赤）のときには補正係数「Ｃ」として「１．０」を取得し、色相「Ｈ」が９０°〜２７０°の範囲のときには補正係数「Ｃ」として「０」を取得し、色相「Ｈ」が０°〜９０°及び２７０°〜３６０°の範囲のときは補正係数「Ｃ」として、色相「Ｈ」に応じた「０〜１．０」の範囲内の補正係数を取得する。
【０１５８】
即ち、補正係数取得部８０は、色相算出部７８から入力する色相「Ｈ」が、ターゲット色と一致する色相の場合には、補正係数「Ｃ」として最も大きい補正係数「１．０」を取得し、ターゲット色から色相「Ｈ」が離れるにしたがって補正係数「Ｃ」として小さい補正係数を取得する。
【０１５９】
補正係数取得部８０により取得された補正係数「Ｃ」は、第３の輝度信号生成部７４−４に出力される。
【０１６０】
第３の輝度信号生成部７４−４の他の入力には、第１の輝度信号「Ｙ１」、第２の輝度信号「Ｙ２」、及び混合率「Ratio」が加えられており、第３の輝度信号生成部７４−４は、第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とを、混合率「Ratio」及び補正係数「Ｃ」に基づいて加重平均して第３の輝度信号「Ｙ」を生成する。
【０１６１】
下記の［数１６］式は、第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とを、混合率「Ratio」及び補正係数「Ｃ」により加重平均し、第３の輝度信号「Ｙ」を算出する計算式の一例である。
【０１６２】
［数１６］
Ｙ=Ｙ１×（1-Ratio×Ｃ）+ Ｙ２×Ratio×Ｃ
第２の輝度信号「Ｙ２」を生成するための第２の係数「Kr2,Kg2,Kb2」だけは精度良くターゲット色の色相を設定するのは困難であるが、第４の実施形態によれば、より精度高くターゲットの被写体の色の色相を設定することができる。
【０１６３】
［画像処理方法の第４の実施形態］
図１６は、上記輝度及び色差変換処理部６５−４により実施される画像処理方法の第４の実施形態を示すフローチャートである。尚、図１６において、図１１に示した第２の実施形態と共通するステップには同一のステップ番号を付し、その詳細な説明は省略する。
【０１６４】
図１６に示す第４の実施形態の画像処理方法は、図１１に示した第２の実施形態のステップＳ２２の処理の代わりに、ステップＳ４０、ステップＳ４２及びステップＳ４４の処理を行う点で相違する。
【０１６５】
図１６において、色相算出部７８は、ガンマ変換後の色信号「Ｒ1,Ｇ1,Ｂ1」に基づいて画素ごとに色相「Ｈ」を算出（取得）する（ステップＳ４０）。
【０１６６】
補正係数取得部８０は、ステップＳ４０で取得された色相「Ｈ」に対応する補正係数「Ｃ」を取得する（ステップＳ４２）。この補正係数「Ｃ」は、入力する色信号「Ｒ1,Ｇ1,Ｂ1」に対応する色相「Ｃ」が、ターゲット色と一致する色相の場合には最も大きく、ターゲット色から色相「Ｈ」が離れるにしたがって小さくなる補正係数である。
【０１６７】
続いて、第３の輝度信号生成部７４は、ステップＳ１２及びＳ１４でそれぞれ生成された第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とを、ステップＳ２０及びステップＳ４０により取得した混合率「Ratio」及び補正係数「Ｃ」に応じて加重平均し（［数１６］式参照）、第３の輝度信号「Ｙ」を生成する（ステップＳ４４）。
【０１６８】
これにより、より精度高くターゲット色の色相を設定することができ、ターゲット色の輝度が制御された第３の輝度信号を生成することができ、また、色（彩度及び色相）への影響が生じないようにすることができる。
【０１６９】
［第５の実施形態］
図１７は、第５の実施形態の輝度及び色差変換処理部６５−５を示すブロック図である。尚、図１７において、図６に示した第１の実施形態の輝度及び色差変換処理部６５−１と共通する部分には同一の符号を付し、その詳細な説明は省略する。
【０１７０】
図１７に示す第５の実施形態の輝度及び色差変換処理部６５−５は、第１の実施形態の輝度及び色差変換処理部６５−１と比較してターゲット色設定部８４、及び第２の係数取得部８６が追加され、かつ第２の輝度信号生成部７２−５による第２の輝度信号「Ｙ２」の生成方法が相違する。
【０１７１】
図１７において、ターゲット色設定部８４は、ｎを２以上の整数とすると、ユーザ操作によりｎ個（ｎ色）のターゲット色を同時に設定することができるものである。ターゲット色設定部８４により設定されたｎ色のターゲット色を示す情報は、第２の係数取得部８６に出力される。
【０１７２】
第２の係数取得部８６は、ｎ色のターゲット色を示す情報に基づいて、ｎ色のターゲット色にそれぞれ対応するｎ個（ｎ組）の第２の係数「Kr2,Kg2,Kb2」を取得する。第２の係数「Kr2,Kg2,Kb2」は、ターゲット色の色ごとに予め準備されており、第２の係数取得部８６は、ｎ色のターゲット色が同時に設定されると、同時に設定されたｎ色のターゲット色にそれぞれ対応するｎ個の第２の係数「Kr2,Kg2,Kb2」を取得し、ｎ個の第２の係数
「Kr2,Kg2,Kb2」を第２の輝度信号生成部７２−５に出力する。
【０１７３】
第２の輝度信号生成部７２−５の他の入力には、ガンマ変換後の色信号「Ｒ1,Ｇ1,Ｂ1」が加えられており、第２の輝度信号生成部７２−５は、色信号「Ｒ1,Ｇ1,Ｂ1」とｎ個の第２の係数「Kr2,Kg2,Kb2」とに基づいて第２の輝度信号「Ｙ」の候補であるｎ個の輝度信号を生成し、ｎ個の輝度信号のうちの最小の輝度信号を第２の輝度信号「Ｙ２」として第３の輝度信号生成部７４に出力する。
【０１７４】
ターゲット色に対応する第２の係数「Kr2,Kg2,Kb2」は、ガンマ変換後の色信号「Ｒ1,Ｇ1,Ｂ1」がターゲット色に近い程、生成される輝度信号が小さくなる係数が設定されており、同時に生成されるｎ個の輝度信号のうちの最小の輝度信号は、ｎ個のターゲット色のうちのいずれかのターゲット色に対応するものとなるからである。
【０１７５】
第３の輝度信号生成部７４は、輝度及び色差変換処理部７０（第１の輝度信号生成部）から入力する第１の輝度信号「Ｙ１」と、第２の輝度信号生成部７２−５から入力する第２の輝度信号「Ｙ２」とに基づいてｎ色のターゲット色の輝度が制御された第３の輝度信号「Ｙ」を生成する。
【０１７６】
これにより、色相の異なる複数のターゲット色に対応する輝度を同時に制御することができる。
【０１７７】
［画像処理方法の第５の実施形態］
図１８は、上記輝度及び色差変換処理部６５−５により実施される画像処理方法の第５の実施形態を示すフローチャートである。尚、図１８において、図７に示した第１の実施形態と共通するステップには同一のステップ番号を付し、その詳細な説明は省略する。
【０１７８】
図１８に示す第５の実施形態の画像処理方法は、図７に示した第１の実施形態のステップＳ１４の処理の代わりに、ステップＳ５０及びステップＳ５２の処理を行う点で相違する。
【０１７９】
図１８において、第２の輝度信号生成部７２−５は、第２の係数取得部８６からｎ色のターゲット色にそれぞれ対応するｎ個の第２の係数「Kr2,Kg2,Kb2」を取得し、ガンマ変換後の色信号「Ｒ1,Ｇ1,Ｂ1」とｎ個の第２の係数「Kr2,Kg2,Kb2」とに基づいてｎ個の輝度信号を生成する（ステップＳ５０）。
【０１８０】
続いて、第２の輝度信号生成部７２−５は、生成したｎ個の輝度信号のうちの最小の輝度信号を第２の輝度信号「Ｙ２」として出力する（ステップＳ５２）。
【０１８１】
第３の輝度信号生成部７４は、ステップＳ１２及びステップＳ５２により取得される第１の輝度信号「Ｙ１」及び第２の輝度信号「Ｙ２」に基づいてｎ色のターゲット色の輝度が制御された第３の輝度信号「Ｙ」を生成する（ステップＳ１６）。
【０１８２】
これにより、色相の異なる複数のターゲット色に対応する輝度を同時に制御することができる。
【０１８３】
［第６の実施形態］
図１９は、第６の実施形態の輝度及び色差変換処理部６５−６を示すブロック図である。尚、図１９において、図１７に示した第５の実施形態の輝度及び色差変換処理部６５−５と共通する部分には同一の符号を付し、その詳細な説明は省略する。
【０１８４】
図１９に示す第６の実施形態の輝度及び色差変換処理部６５−６は、第５の実施形態の輝度及び色差変換処理部６５−５と比較して混合率取得部７６−６が追加され、かつ第２の輝度信号生成部７２−６及び第３の輝度信号生成部７４−２の機能が相違する。
【０１８５】
第２の輝度信号生成部７２−６は、第５の実施形態と同様に、色信号「Ｒ1,Ｇ1,Ｂ1」
とｎ個の第２の係数「Kr2,Kg2,Kb2」とに基づいて第２の輝度信号「Ｙ」の候補であるｎ個の輝度信号を生成し、ｎ個の輝度信号のうちの最小の輝度信号を第２の輝度信号「Ｙ２」として第３の輝度信号生成部７４に出力する点で第４の実施形態と共通する。第２の輝度信号生成部７２−６は、更に最小の輝度信号となった第２の輝度信号「Ｙ２」が、ｎ個のターゲット色のうちのいずれのターゲット色に対応するかを示す情報（ターゲット色の情報）を混合率取得部７６−６に出力する。尚、第２の輝度信号生成部７２−６は、ｎ個の輝度信号のうちの最小の輝度信号となった第２の輝度信号「Ｙ２」が、ｎ個の第２の係数「Kr2,Kg2,Kb2」のうちのいずれの第２の係数に基づいて生成したかが分かるため、最小の輝度信号となった第２の輝度信号「Ｙ２」に対応するターゲット色の情報を取得することができる。
【０１８６】
混合率取得部７６−６は、図８に示した第２の実施形態の混合率取得部７６と同様に、ターゲット色に対応するテーブル又は関係式であって、第１の輝度信号「Ｙ１」と混合率「Ratio」との関係を示すテーブル又は関係式を使用して、第１の輝度信号「Ｙ１」の大きさに応じた混合率「Ratio」を取得する。更に、本例の混合率取得部７６−６は、ターゲット色設定部８４によりｎ個のターゲット色が設定される場合、設定されたｎ個のターゲット色に対応するｎ個のテーブル又は関係式を使用して、ｎ個の混合率「Ratio」を取得する。そして、混合率取得部７６−６は、上記のようにして取得したｎ個の混合率「Ratio」のうちから、第２の輝度信号生成部７２−６から入力するターゲット色（第２の輝度信号生成部７２−６から出力される第２の輝度信号「Ｙ２」に対応するターゲット色）の情報に基づいて１つの混合率「Ratio」を選択し、選択した混合率「Ratio」を第３の輝度信号生成部７４−２に出力する。
【０１８７】
例えば、ターゲット色設定部８４により２つのターゲット色（第１のターゲット色及び第２のターゲット色）が設定された場合、混合率取得部７６−６は、第１のターゲット色に対応するテーブル又は関係式（例えば、図９のグラフに対応するテーブル又は関係式）と、第２のターゲット色に対応するテーブル又は関係式（例えば、図２０のグラフに対応するテーブル又は関係式）とを使用し、第１の輝度信号「Ｙ１」の大きさに応じた２つの混合率「Ratio」（第１の混合率「Ratio」と第２の混合率「Ratio」）を取得する。そして、第２の輝度信号生成部７２−６から第１のターゲット色に対応する第２の輝度信号「Ｙ２」が出力されている場合には、第１の混合率「Ratio」を第３の輝度信号生成部７４−２に出力し、第２のターゲット色に対応する第２の輝度信号「Ｙ２」が出力されている場合には、第２の混合率「Ratio」を第３の輝度信号生成部７４−２に出力する。
【０１８８】
尚、本例では、ターゲット色設定部８４によりｎ個のターゲット色が設定される場合、ｎ個のターゲット色に対応するテーブル又は関係式を使用して、ｎ個の混合率「Ratio」
を取得し、ｎ個の混合率「Ratio」のうちから、第２の輝度信号「Ｙ２」がいずれのターゲット色に対応するものであるかに応じた混合率「Ratio」を選択するようにした。しかし、本発明は、これに限らず、混合率取得部７６−６は、ターゲット色設定部８４によりｎ個のターゲット色が設定される場合、設定されたｎ個のターゲット色に対応するｎ個のテーブル又は関係式から、第２の輝度信号「Ｙ２」がいずれのターゲット色に対応するものであるかに応じて、いずれか１つのテーブル又は関係式を選択し、選択したテーブル又は関係式を使用して、第１の輝度信号「Ｙ１」の大きさに応じた混合率「Ratio」を取得するようにしてもよい。
【０１８９】
第３の輝度信号生成部７４−２は、第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とを、混合率取得部７６−６から入力する混合率「Ratio」に基づいて加重平均し、第３の輝度信号「Ｙ」を生成する。
【０１９０】
これにより、色相の異なる複数のターゲット色に対応する輝度を同時に制御することができ、かつターゲット色により異なる輝度の制御ができる。
【０１９１】
［画像処理方法の第６の実施形態］
図２１は、上記輝度及び色差変換処理部６５−６により実施される画像処理方法の第６の実施形態を示すフローチャートである。尚、図２１において、図１８に示した第５の実施形態と共通するステップには同一のステップ番号を付し、その詳細な説明は省略する。
【０１９２】
図２１に示す第６の実施形態の画像処理方法は、ステップＳ６０及びステップＳ６４の処理が追加され、また、ステップＳ１６の代わりにステップＳ２２の処理を行う点で、第５の実施形態と相違する。
【０１９３】
図２１において、混合率取得部７６−６は、ターゲット色設定部８４によりｎ個のターゲット色が設定される場合、設定されたｎ個のターゲット色に対応するｎ個のテーブル又は関係式を使用して、ステップＳ１２で取得した第１の輝度信号「Ｙ１」の大きさに応じてｎ個の混合率「Ratio」を取得する（ステップＳ６０）。
【０１９４】
第２の輝度信号生成部７２−５は、ガンマ変換後の色信号「Ｒ1,Ｇ1,Ｂ1」とｎ個のターゲット色に対応するｎ個の第２の係数「Kr2,Kg2,Kb2」によりｎ個の輝度信号を生成し、ｎ個の輝度信号のうちの最小の輝度信号を第２の輝度信号「Ｙ２」として出力するが（ステップＳ５２）、混合率取得部７６−６は、ステップＳ５２により生成された第２の輝度信号「Ｙ２」が、ｎ個のターゲット色のいずれに対応するかに応じてｎ個の混合率「Ratio」から対応する混合率「Ratio」を選択する（ステップＳ６４）。
【０１９５】
第３の輝度信号生成部７４−２は、ステップＳ１２及びＳ５２でそれぞれ生成された第１の輝度信号「Ｙ１」と第２の輝度信号「Ｙ２」とを、ステップＳ６４により取得した混合率「Ratio」に応じて加重平均し、第３の輝度信号「Ｙ」を生成する（ステップＳ２２）。
【０１９６】
これにより、色相の異なる複数のターゲット色に対応する輝度を同時に制御することができ、かつターゲット色により異なる輝度の制御ができる。
【０１９７】
＜変形例＞
上述の撮像装置１０は例示に過ぎず、他の構成に対しても本発明を適用することが可能である。各機能構成は、任意のハードウェア、ソフトウェア、或いは両者の組合せによって適宜実現可能である。例えば、上述の撮像装置１０の処理部（画像処理部２４、特に輝度及び色差変換処理部６５等）を含む画像処理装置、及び撮像装置１０の処理部における画像処理方法（ステップ、処理手順）をコンピュータに実行させる画像処理プログラム、そのような画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体（非一時的記録媒体）、或いはそのような画像処理プログラムをインストール可能な各種のコンピュータに対しても、本発明を適用することが可能である。
【０１９８】
また、本発明をコンピュータなどの外部の画像処理装置に適用する場合、外部の画像処理装置は、ＲＡＷデータ記録が可能な撮像装置からＲＡＷデータを取得し、取得したＲＡＷデータのＲＡＷ現像処理とともに、本発明に係る画像処理を行うことが好ましい。
【０１９９】
更に、本発明を適用可能な撮像装置の態様としては、図１に示した撮像装置１０には限定されず、例えば、カメラ機能を有する携帯電話機やスマートフォン、ＰＤＡ（Personal Digital Assistants）、及び携帯型ゲーム機等が挙げられる。以下、本発明を適用可能なスマートフォンの一例について説明する。
【０２００】
＜スマートフォンの構成＞
図２２は、撮像装置の一実施形態であるスマートフォンの外観を示す図である。
【０２０１】
図２２に示すスマートフォン１００は、平板状の筐体１０２を有し、筐体１０２の一方の面に表示部としての表示パネル１２１と、入力部としての操作パネル１２２とが一体となって形成される表示入力部１２０が設けられる。また、その筐体１０２は、スピーカ１３１と、マイクロホン１３２と、操作部１４０と、カメラ部１４１（撮像部）とを備える。尚、筐体１０２の構成はこれに限定されず、例えば、表示部と入力部とが独立して設けられる構成を採用したり、折り畳み構造やスライド機構を有する構成を採用することもできる。
【０２０２】
図２３は、図２２に示したスマートフォン１００の内部構成を示すブロック図である。図２３に示すように、スマートフォン１００の主たる構成要素として、無線通信部１１０と、表示入力部１２０と、通話部１３０と、操作部１４０と、カメラ部１４１と、記憶部１５０と、外部入出力部１６０（出力部）と、ＧＰＳ受信部１７０と、モーションセンサ部１８０と、電源部１９０と、主制御部１０１とを備える。また、スマートフォン１００の主たる機能として、基地局装置と移動通信網とを介した移動無線通信を行う無線通信機能を備える。
【０２０３】
無線通信部１１０は、主制御部１０１の指示に従って、移動通信網に接続された基地局装置との間で無線通信を行う。その無線通信が使用されて、音声データ及び画像データ等の各種ファイルデータや電子メールデータなどの送受信、及びウェブデータやストリーミングデータなどの受信が行われる。
【０２０４】
表示入力部１２０は、表示パネル１２１の画面上に配設された操作パネル１２２を備えたいわゆるタッチパネルであり、主制御部１０１の制御により、画像（静止画像及び動画像）や文字情報などを表示して視覚的にユーザに情報を伝達し、また表示した情報に対するユーザ操作を検出する。尚、操作パネル１２２を便宜上、タッチパネルとも称す。
【０２０５】
表示パネル１２１は、ＬＣＤ(Liquid Crystal Display)又はＯＥＬＤ(Organic Electro-Luminescence Display）などを表示デバイスとして用いる。操作パネル１２２は、表示パネル１２１の表示面上に表示される画像が視認可能な状態で設けられ、ユーザの指や尖筆によって操作される１又は複数の座標を検出するデバイスである。そのデバイスがユーザの指や尖筆によって操作されると、操作パネル１２２は、操作に起因して発生する検出信号を主制御部１０１に出力する。次いで、主制御部１０１は、受信した検出信号に基づいて、表示パネル１２１上の操作位置（座標）を検出する。
【０２０６】
図２２に例示されるスマートフォン１００の表示パネル１２１と操作パネル１２２とは一体となって表示入力部１２０を構成し、操作パネル１２２が表示パネル１２１を完全に覆うような配置となっている。その配置を採用した場合、操作パネル１２２は、表示パネル１２１外の領域についても、ユーザ操作を検出する機能を備えてもよい。換言すると、操作パネル１２２は、表示パネル１２１に重なる重畳部分についての検出領域（以下、「表示領域」という）と、それ以外の表示パネル１２１に重ならない外縁部分についての検出領域（以下、「非表示領域」という）とを備えていてもよい。
【０２０７】
尚、表示領域の大きさと表示パネル１２１の大きさとを完全に一致させてもよいが、両者を必ずしも一致させる必要はない。また、操作パネル１２２が、外縁部分及びそれ以外の内側部分の２つの感応領域を備えていてもよい。更に、その外縁部分の幅は、筐体１０２の大きさなどに応じて適宜設計されるものである。更にまた、操作パネル１２２で採用される位置検出方式としては、マトリクススイッチ方式、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式、及び静電容量方式などが挙げられ、いずれの方式が採用されてもよい。
【０２０８】
通話部１３０は、スピーカ１３１及びマイクロホン１３２を備え、マイクロホン１３２を通じて入力されたユーザの音声を主制御部１０１にて処理可能な音声データに変換して主制御部１０１に出力したり、無線通信部１１０或いは外部入出力部１６０により受信された音声データを復号してスピーカ１３１から出力したりする。また、図２２に示すように、例えば、スピーカ１３１及びマイクロホン１３２を表示入力部１２０が設けられた面と同じ面に搭載することができる。
【０２０９】
操作部１４０は、キースイッチなどを用いたハードウェアキーであって、ユーザからの指示を受け付ける。例えば、図２２に示すように、操作部１４０は、スマートフォン１００の筐体１０２の側面に搭載され、指などで押下されるとスイッチオン状態となり、指を離すとバネなどの復元力によってスイッチオフ状態となる押しボタン式のスイッチである。
【０２１０】
記憶部１５０は、主制御部１０１の制御プログラムや制御データ、ゲーム用のアプリケーションソフトウェア、本発明に係る画像処理プログラムを含む各種のアプリケーションソフトウェア、通信相手の名称や電話番号などを対応づけたアドレスデータ、送受信した電子メールのデータ、ウェブブラウジングによりダウンロードしたウェブデータ、及びダウンロードしたコンテンツデータ等を記憶し、またストリーミングデータなどを一時的に記憶する。
【０２１１】
また、記憶部１５０は、スマートフォン内蔵の内部記憶部１５１と着脱自在な外部メモリスロットを有する外部記憶部１５２とにより構成される。尚、記憶部１５０を構成する内部記憶部１５１及び外部記憶部１５２のそれぞれは、フラッシュメモリタイプ、ハードディスクタイプ、マルチメディアカードマイクロタイプ、カードタイプのメモリ、ＲＡＭ (Random Access Memory)、或いはＲＯＭ(Read Only Memory)などの格納媒体を用いて実現される。
【０２１２】
外部入出力部１６０は、スマートフォン１００に連結される全ての外部機器とのインターフェースの役割を果たし、通信等（例えば、ＵＳＢ（Universal Serial Bus）、ＩＥＥＥ１３９４など）又はネットワーク（例えば、ネットワーク、無線ＬＡＮ(Local Area Network)、ブルートゥース(Bluetooth)（登録商標）、ＲＦＩＤ(Radio Frequency Identification)、赤外線通信(Infrared Data Association：ＩｒＤＡ）、ＵＷＢ(Ultra Wideband)（登録商標）、ジグビー(ZigBee)（登録商標）など）により他の外部機器に直接的又は間接的に接続する。
【０２１３】
スマートフォン１００に連結される外部機器としては、例えば、有線／無線ヘッドセット、有線／無線外部充電器、有線／無線データポート、カードソケットを介して接続されるメモリカード(Memory card)やＳＩＭ(Subscriber Identity Module Card)／ＵＩＭ(User Identity Module Card)カード、オーディオ・ビデオＩ／Ｏ(Input/Output)端子を介して接続される外部オーディオ・ビデオ機器、有線／無線接続される外部オーディオ・ビデオ機器、スマートフォン、パーソナルコンピュータ、ＰＤＡ（Personal Digital Assistant）、及びイヤホンなどがある。外部入出力部１６０は、このような外部機器から伝送を受けたデータをスマートフォン１００の内部の各構成要素に伝達したり、スマートフォン１００の内部のデータが外部機器に伝送されたりするように構成されてもよい。
【０２１４】
ＧＰＳ受信部１７０は、主制御部１０１の指示に従って、ＧＰＳ衛星ＳＴ１、ＳＴ２〜ＳＴｎから送信されるＧＰＳ信号を受信し、受信した複数のＧＰＳ信号に基づく測位演算処理を実行し、スマートフォン１００の緯度、経度及び高度によって特定される位置情報（ＧＰＳ情報）を取得する。ＧＰＳ受信部１７０は、無線通信部１１０及び／又は外部入出力部１６０（例えば、無線ＬＡＮ）から位置情報を取得できる場合には、その位置情報を用いて位置を検出することもできる。
【０２１５】
モーションセンサ部１８０は、例えば、３軸の加速度センサなどを備え、主制御部１０１の指示に従って、スマートフォン１００の物理的な動きを検出する。スマートフォン１００の物理的な動きを検出することにより、スマートフォン１００の動く方向や加速度が検出される。その検出の結果は、主制御部１０１に出力される。
【０２１６】
電源部１９０は、主制御部１０１の指示に従って、スマートフォン１００の各部に、バッテリ（図示しない）に蓄えられる電力を供給する。
【０２１７】
主制御部１０１は、マイクロプロセッサを備え、記憶部１５０が記憶する制御プログラムや制御データに従って動作し、スマートフォン１００の各部を統括して制御する。また、主制御部１０１は、無線通信部１１０を通じて音声通信及びデータ通信を行うために、通信系の各部を制御する移動通信制御機能と、アプリケーション処理機能とを備える。
【０２１８】
アプリケーション処理機能は、記憶部１５０が記憶するアプリケーションソフトウェアに従って主制御部１０１が動作することにより実現される。アプリケーション処理機能としては、例えば、外部入出力部１６０を制御することで対向機器とデータ通信を行う赤外線通信機能や、電子メールの送受信を行う電子メール機能、及びウェブページを閲覧するウェブブラウジング機能の他、本発明に係る画像処理機能などがある。
【０２１９】
また、主制御部１０１は、受信データやダウンロードしたストリーミングデータなどの画像データ（静止画像や動画像のデータ）に基づいて、映像を表示入力部１２０に表示する等の画像処理機能を備える。また、画像処理機能には、図４等に示した画像処理部２４により行われる画像処理を含む。
【０２２０】
更に、主制御部１０１は、表示パネル１２１に対する表示制御と、操作部１４０や操作パネル１２２を通じたユーザ操作を検出する操作検出制御とを実行する。
【０２２１】
表示制御の実行により、主制御部１０１は、アプリケーションソフトウェアを起動するためのアイコンや、スクロールバーなどのソフトウェアキーを表示したり、或いは電子メールを作成するためのウィンドウを表示する。尚、スクロールバーとは、表示パネル１２１の表示領域に収まりきれない大きな画像などについて、画像の表示部分を移動する指示を受け付けるためのソフトウェアキーのことをいう。
【０２２２】
また、操作検出制御の実行により、主制御部１０１は、操作部１４０を通じたユーザ操作を検出したり、操作パネル１２２を通じて、上記アイコンに対する操作や、上記ウィンドウの入力欄に対する文字列の入力を受け付けたり、或いはスクロールバーを通じた表示画像のスクロール要求を受け付ける。
【０２２３】
更に、操作検出制御の実行により主制御部１０１は、操作パネル１２２に対する操作位置が、表示パネル１２１に重なる重畳部分（表示領域）に該当するか、或いはそれ以外の表示パネル１２１に重ならない外縁部分（非表示領域）に該当するかを判定し、操作パネル１２２の感応領域やソフトウェアキーの表示位置を制御するタッチパネル制御機能を備える。
【０２２４】
また、主制御部１０１は、操作パネル１２２に対するジェスチャ操作を検出し、検出したジェスチャ操作に応じて、予め設定された機能を実行することもできる。ジェスチャ操作とは、従来の単純なタッチ操作ではなく、指などによって軌跡を描いたり、複数の位置を同時に指定したり、或いはこれらを組み合わせて、複数の位置から少なくとも１つについて軌跡を描く操作を意味する。
【０２２５】
カメラ部１４１は、主制御部１０１の制御により、撮像によって得た画像データを例えばＪＰＥＧ（Joint Photographic Experts Group）などの圧縮した画像データに変換し、その画像データを記憶部１５０に記録したり、外部入出力部１６０や無線通信部１１０を通じて出力したりすることができる。図２２に示すようにスマートフォン１００において、カメラ部１４１は表示入力部１２０と同じ面に搭載されているが、カメラ部１４１の搭載位置はこれに限らず、表示入力部１２０が設けられる筐体１０２の表面ではなく筐体１０２の背面にカメラ部１４１が搭載されてもよいし、或いは複数のカメラ部１４１が筐体１０２に搭載されてもよい。尚、複数のカメラ部１４１が搭載されている場合には、撮像に供するカメラ部１４１を切り替えて単独のカメラ部１４１によって撮像が行われてもよいし、或いは複数のカメラ部１４１を同時に使用して撮像が行われてもよい。
【０２２６】
また、カメラ部１４１はスマートフォン１００の各種機能に利用することができる。例えば、カメラ部１４１で取得した画像が表示パネル１２１に表示されてもよいし、操作パネル１２２の操作入力手法の一つとして、カメラ部１４１で撮像取得される画像が利用されてもよい。また、ＧＰＳ受信部１７０が位置を検出する際に、カメラ部１４１からの画像が参照されて位置が検出されてもよい。更には、カメラ部１４１からの画像が参照されて、３軸の加速度センサを用いずに、或いは、３軸の加速度センサと併用して、スマートフォン１００のカメラ部１４１の光軸方向を判断することや、現在の使用環境を判断することもできる。勿論、カメラ部１４１からの画像をアプリケーションソフトウェア内で利用することもできる。
【０２２７】
その他、ＧＰＳ受信部１７０により取得された位置情報、マイクロホン１３２により取得された音声情報（主制御部等により、音声テキスト変換を行ってテキスト情報となっていてもよい）、及びモーションセンサ部１８０により取得された姿勢情報等などを静止画又は動画の画像データに付加して得られるデータを、記憶部１５０に記録したり、外部入出力部１６０や無線通信部１１０を通じて出力したりすることもできる。
【０２２８】
［その他］
本発明の実施形態では、３原色の色信号「ＲＧＢ」から変換される輝度信号「Ｙ」及び色差信号「Ｃｂ,Ｃｒ」の輝度信号「Ｙ」で本発明に係る制御を実施するようにしたが、これに限らず、例えば、Ｌ*ａ*ｂ*色空間における明度を示す「Ｌ*」で実施するようにしてもよい。
【０２２９】
図２４は各種色空間の関係を示す図である。ＲＧＢ色空間の色信号「Ｒ,Ｇ,Ｂ」は、ガンマ変換後の色信号「Ｒ1,Ｇ1,Ｂ1」と、ＹＣｂＣｒ変換用の3x3係数マトリクスとによるマトリクス演算により輝度信号及び色差信号「Ｙ,Ｃｂ,Ｃｒ」に変換される。
【０２３０】
一方、ＲＧＢ色空間の色信号「Ｒ,Ｇ,Ｂ」は、色信号「Ｒ,Ｇ,Ｂ」とＸＹＺ変換用の3x3の係数マトリクスとのマトリクス演算によりＸＹＺ色空間の値「Ｘ,Ｙ,Ｚ」に変換することができる。更にＸＹＺ色空間の値「Ｘ,Ｙ,Ｚ」は、変換式によりＬ*ａ*ｂ*色空間の３つの値「Ｌ*,ａ*,ｂ*」に変換することができる。
【０２３１】
＜本発明をＹＣｂＣｒのＹで実施する場合＞ 
この場合、本発明に係る第３の輝度信号「Ｙ」は、色差信号「Ｃｂ,Ｃｒ」の演算には関係しない。即ち、色差信号「Ｃｂ,Ｃｒ」は、ガンマ変換後の色信号「Ｒ1,Ｇ1,Ｂ1」と標準の3x3係数マトリクス（BT.601、BT.709などで規定されている係数マトリクス）とから算出した値である。
【０２３２】
色差信号としてＬ*ａ*ｂ*色空間のａ*とｂ*を使用する場合、色差信号「ａ*,ｂ*」は、本発明に係る第３の輝度信号「Ｙ」を使用して算出する。即ち、色差信号「ａ*,ｂ*」は、第３の輝度信号「Ｙ」を適用した「Ｙ,Ｃｂ,Ｃｒ」から、図２４に示した関係図の変換式を使用して算出する。
【０２３３】
＜本発明をＬ*ａ*ｂ*のＬ*で実施する場合＞
この場合、色差信号「Ｃｂ,Ｃｒ」の演算には、本発明に係る第３の輝度信号「Ｌ*」を使用して演算する。即ち、第３の輝度信号「Ｌ*」を適用した各値「Ｌ*,ａ*,ｂ*」から、図２４に示した関係図の変換式を使用して算出する。
【０２３４】
一方、色差信号としてＬ*ａ*ｂ*色空間のａ*とｂ*を使用する場合、本発明に係る第３の輝度信号「Ｌ*」は、色差信号「ａ*,ｂ*」の演算には関係しない。即ち、色差信号「ａ*,ｂ*」は、ＸＹＺ色空間の値「Ｘ,Ｙ,Ｚ」から変換式によりＬ*ａ*ｂ*色空間の値「Ｌ*,ａ*,ｂ*」に変換した値「ａ*,ｂ*」である。
【０２３５】
また、本発明は上述した実施形態に限定されず、第１の実施形態から第６の実施形態を適宜組み合わせたもの、その他、本発明の精神を逸脱しない範囲で種々の変形が可能であることは言うまでもない。
【符号の説明】
【０２３６】
１  ストロボ
２  シャッタボタン
３  電源／モードスイッチ
４  モードダイヤル
５  ズームボタン
５Ｔ  テレボタン
５Ｗ  ワイドボタン
６  十字ボタン
７  ＭＥＮＵ／ＯＫボタン
８  再生ボタン
９  ＢＡＣＫボタン
１０  撮像装置
１２  撮影レンズ
１４  絞り
１５  メカシャッタ
１６  撮像素子
２２  画像入力コントローラ
２４  画像処理部
２６  圧縮伸張処理部
２８  ビデオエンコーダ
３０  液晶モニタ
３２  センサ駆動部
３３  シャッタ駆動部
３４  絞り駆動部
３６  レンズ駆動部
３８  操作部
４０  ＣＰＵ
４２  ＡＦ処理部
４４  ＡＥ検出部
４７  ＲＯＭ
４８  メモリ
５０  ＶＲＡＭ
５２  メディアコントローラ
５４  メモリカード
６１  オフセット補正処理部
６２  ＷＢ補正処理部
６３  デモザイク処理部
６４  ガンマ補正処理部
６５  輝度及び色差変換処理部
６５−１〜６５−６、７０  輝度及び色差変換処理部
７２  第２の輝度信号生成部
７２−５、７２−６  第２の輝度信号生成部
７４、７４−２、７４−３、７４−４  第３の輝度信号生成部
７５  輝度信号比較器
７６、７６−６  混合率取得部
７８  色相算出部
８０  補正係数取得部
８２  補正係数設定部
８４  ターゲット色設定部
８６  第２の係数取得部
１００  スマートフォン
１０１  主制御部
１０２  筐体
１１０  無線通信部
１２０  表示入力部
１２１  表示パネル
１２２  操作パネル
１３０  通話部
１３１  スピーカ
１３２  マイクロホン
１４０  操作部
１４１  カメラ部
１５０  記憶部
１５１  内部記憶部
１５２  外部記憶部
１６０  外部入出力部
１７０  ＧＰＳ受信部
１８０  モーションセンサ部
１９０  電源部
【図１】
0006580801.tif 000002
【図２】
0006580801.tif 000003
【図３】
0006580801.tif 000004
【図４】
0006580801.tif 000005
【図５】
0006580801.tif 000006
【図６】
0006580801.tif 000007
【図７】
0006580801.tif 000008
【図８】
0006580801.tif 000009
【図９】
0006580801.tif 000010
【図１０】
0006580801.tif 000011
【図１１】
0006580801.tif 000012
【図１２】
0006580801.tif 000013
【図１３】
0006580801.tif 000014
【図１４】
0006580801.tif 000015
【図１５】
0006580801.tif 000016
【図１６】
0006580801.tif 000017
【図１７】
0006580801.tif 000018
【図１８】
0006580801.tif 000019
【図１９】
0006580801.tif 000020
【図２０】
0006580801.tif 000021
【図２１】
0006580801.tif 000022
【図２２】
0006580801.tif 000023
【図２３】
0006580801.tif 000024
【図２４】
0006580801.tif 000025