(57)【要約】【課題】  メラニン成分量およびヘモグロビン成分量に基づいて、簡易な演算により所望とするように肌色を補正できるようにする。【解決手段】  画像Ｓ０から肌色領域Ｆ０を抽出し、肌色領域Ｆ０のＲＧＢ色信号からなる肌色成分をメラニン成分量およびヘモグロビン成分量に変換する。メラニン成分量およびヘモグロビン成分量の変更の指示を受け付け、これに基づいてメラニン成分量およびヘモグロビン成分量を変更し、変更後のメラニン成分量およびヘモグロビン成分量をＲＧＢ色信号からなる肌色成分に変換して、肌色が補正された処理済み画像Ｓ１を得る。【選択図】          図１
2006041804.tif 000002
【特許請求の範囲】
【請求項１】
人物を含む画像の肌色成分を、多数の被験者の肌色に基づいて決定された、該肌色を構成する少なくとも１つの色素成分と肌色成分との関係に基づいて、該肌色を構成する少なくとも１つの色素成分に変換する変換手段と、
前記色素成分の変更の指示を受け付ける指示手段と、
該指示手段からの指示に応じて前記色素成分を変更し、該変更された色素成分を前記関係に基づいて変換して、補正された前記肌色成分を得る補正手段とを備えたことを特徴とする肌色補正装置。
【請求項２】
多数の被験者の肌色に基づいて決定された、該肌色を構成する少なくとも１つの色素成分の変更量と肌色成分の変更量との関係を記憶する記憶手段と、
人物を含む画像の肌色部分に対する前記色素成分の変更の指示を受け付ける指示手段と、
前記記憶手段に記憶された関係を参照して、前記指示手段から指示された前記色素成分の変更量に応じて前記肌色成分を変更して、補正された前記肌色成分を得る補正手段とを備えたことを特徴とする肌色補正装置。
【請求項３】
前記色素成分は、メラニン成分およびヘモグロビン成分の少なくとも１つからなることを特徴とする請求項１または２記載の肌色補正装置。
【請求項４】
人物を含む画像の肌色成分を、多数の被験者の肌色に基づいて決定された、該肌色を構成する少なくとも１つの色素成分と肌色成分との関係に基づいて、該肌色を構成する少なくとも１つの色素成分に変換し、
前記色素成分の変更の指示を受け付け、
該指示に応じて前記色素成分を変更し、該変更された色素成分を前記関係に基づいて変換して、補正された前記肌色成分を得ることを特徴とする肌色補正方法。
【請求項５】
人物を含む画像の肌色部分に対する前記色素成分の変更の指示を受け付け、
多数の被験者の肌色に基づいて決定された、該肌色を構成する少なくとも１つの色素成分の変更量と肌色成分の変更量との関係を参照して、前記指示された前記色素成分の変更量に応じて前記肌色成分を変更して、補正された前記肌色成分を得ることを特徴とする肌色補正方法。
【請求項６】
人物を含む画像の肌色成分を、多数の被験者の肌色に基づいて決定された、該肌色を構成する少なくとも１つの色素成分と肌色成分との関係に基づいて、該肌色を構成する少なくとも１つの色素成分に変換する手順と、
前記色素成分の変更の指示を受け付ける手順と、
該指示に応じて前記色素成分を変更し、該変更された色素成分を前記関係に基づいて変換して、補正された前記肌色成分を得る手順とを有することを特徴とする肌色補正方法をコンピュータに実行させるためのプログラム。
【請求項７】
人物を含む画像の肌色部分に対する前記色素成分の変更の指示を受け付ける手順と、
多数の被験者の肌色に基づいて決定された、該肌色を構成する少なくとも１つの色素成分の変更量と肌色成分の変更量との関係を参照して、前記指示された前記色素成分の変更量に応じて前記肌色成分を変更して、補正された前記肌色成分を得る手順とを有することを特徴とする肌色補正方法をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、人物を含む画像に含まれる肌色を補正する肌色補正装置および方法並びに肌色補正方法をコンピュータに実行させるためのプログラムに関するものである。
【背景技術】
【０００２】
人物の顔が含まれる画像における肌色を変更することにより、肌色に美白効果を加えたり、顔からシミ等を除去する美顔処理が行われている。例えば、特許文献１には顔を含む画像から肌色領域を抽出し、肌色領域をあらかじめ定められた目標とする肌色に補正する手法が提案されている。また、特許文献２には、入力されたカラー画像信号に基づいてファジィ推論を行うことにより、あらかじめ定義されたメンバーシップ関数の変位量を求め、この変位量だけあらかじめ定義されたメンバーシップ関数を変位させることにより、肌色を変更する手法が提案されている。
【０００３】
一方、人の肌色はメラニンの含量とヘモグロビンの含量とによって左右されることが知られている。褐色の肌はメラニン含量が多く、白い肌はヘモグロビン含量が少ない。また血色のよい肌はヘモグロビン、とくに酸素分圧の高いヘモグロビン含量が多く、血色の悪い肌はヘモグロビン含量が少なく、肌色が血液の循環の度合いにより違ってくることが知られている。
【０００４】
このため、皮膚の表面において反射した表面反射光成分と、皮膚の内部で反射した内部反射光成分とに分けて顔を含む画像を表す顔画像データを取得し、内部反射光成分から肌の色素成分として、メラニン成分量、ヘモグロビン成分量等を求め、メラニン成分量およびヘモグロビン成分量をあらかじめ定められた程度となるように変更する手法が提案されている（特許文献３参照）。
【０００５】
特許文献３にの手法は、非特許文献１，２に記載された手法に基づき、肌においてはメラニンおよびヘモグロビンが層状に分布し、その２成分が相互に独立してＬａｍｂｅｒｔ−Ｂｅｅｒの法則に基づいているというモデルにより、顔画像を独立成分分析によって解析し、メラニン成分およびヘモグロビン成分等の色素成分を算出する手法である。
【特許文献１】特開２００１−１８６３２３号公報
【特許文献２】特開平５−３２８１１８号公報
【特許文献３】特開２００２−２０００５０号公報
【非特許文献１】肌画像の独立成分分析に基づく顔色の変化予測、津村ら、１９９７年日本光学会講演予稿集３０ａＥ０２
【非特許文献２】肌の色素成分に基づく顔色合成とその評価、津村ら、カラーフォーラムＪＡＰＡＮ２０００第５〜８頁
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１から３の手法は、あらかじめ定められた色となるように肌色を補正するものであるため、肌色補正を行うユーザが所望とするように肌色を変更することはできないものであった。また、とくに特許文献３の手法は、画像ごとに独立成分分析等を行ってメラニン成分量およびヘモグロビン成分量を算出して肌色を補正しているため、肌色を補正する処理が非常に複雑なものとなっている。
【０００７】
本発明は上記事情に鑑みなされたものであり、メラニン成分量およびヘモグロビン成分量に基づいて、簡易な演算により所望とするように肌色を補正できるようにすることを目的とする。
【課題を解決するための手段】
【０００８】
本発明による第１の肌色補正装置は、人物を含む画像の肌色成分を、多数の被験者の肌色に基づいて決定された、該肌色を構成する少なくとも１つの色素成分と肌色成分との関係に基づいて、該肌色を構成する少なくとも１つの色素成分に変換する変換手段と、
前記色素成分の変更の指示を受け付ける指示手段と、
該指示手段からの指示に応じて前記色素成分を変更し、該変更された色素成分を前記関係に基づいて変換して、補正された前記肌色成分を得る補正手段とを備えたことを特徴とするものである。
【０００９】
本発明による第２の肌色補正装置は、多数の被験者の肌色に基づいて決定された、該肌色を構成する少なくとも１つの色素成分の変更量と肌色成分の変更量との関係を記憶する記憶手段と、
人物を含む画像の肌色部分に対する前記色素成分の変更の指示を受け付ける指示手段と、
前記記憶手段に記憶された関係を参照して、前記指示手段から指示された前記色素成分の変更量に応じて前記肌色成分を変更して、補正された前記肌色成分を得る補正手段とを備えたことを特徴とするものである。
【００１０】
なお、本発明による第１および第２の肌色補正装置においては、前記色素成分が、メラニン成分およびヘモグロビン成分の少なくとも１つからなることが好ましい。
【００１１】
本発明による第１の肌色補正方法は、人物を含む画像の肌色成分を、多数の被験者の肌色に基づいて決定された、該肌色を構成する少なくとも１つの色素成分と肌色成分との関係に基づいて、該肌色を構成する少なくとも１つの色素成分に変換し、
前記色素成分の変更の指示を受け付け、
該指示に応じて前記色素成分を変更し、該変更された色素成分を前記関係に基づいて変換して、補正された前記肌色成分を得ることを特徴とするものである。
【００１２】
本発明による第２の肌色補正方法は、人物を含む画像の肌色部分に対する前記色素成分の変更の指示を受け付け、
多数の被験者の肌色に基づいて決定された、該肌色を構成する少なくとも１つの色素成分の変更量と肌色成分の変更量との関係を参照して、前記指示された前記色素成分の変更量に応じて前記肌色成分を変更して、補正された前記肌色成分を得ることを特徴とするものである。
【００１３】
なお、本発明による第１および第２の肌色補正方法をコンピュータに実行させるためのプログラムとして提供してもよい。
【発明の効果】
【００１４】
本発明の第１の肌色補正装置および方法によれば、人物を含む画像の肌色成分が、多数の被験者の肌色に基づいて決定された、肌色を構成する少なくとも１つの色素成分と肌色成分との関係に基づいて、肌色を構成する少なくとも１つの色素成分に変換される。そして、色素成分の変更の指示に応じて色素成分が変更され、変更された色素成分が上記関係に基づいて変換されて、補正された肌色成分が得られる。このため、ユーザが所望とするように色素成分の変更の指示を行うことにより、画像の肌色を所望とするように補正することができる。また、肌色成分を多数の被験者の肌色に基づいて決定された関係に基づいて色素成分に変換しているため、画像ごとに肌色成分を色素成分に変換して肌色を補正しする場合と比較して演算量を低減でき、その結果、処理時間を短縮することができる。
【００１５】
本発明の第２の肌色補正装置および方法によれば、人物を含む画像の肌色成分に対する色素成分の変更の指示が受け付けられ、多数の被験者の肌色に基づいて決定された、肌色を構成する少なくとも１つの色素成分の変更量と肌色成分との変更量との関係が参照されて、色素成分の変更量に応じて肌色成分が変更されて、補正された肌色成分が得られる。このため、ユーザが所望とするように色素成分の変更の指示を行うことにより、画像の肌色を所望とするように補正することができる。また、多数の被験者の肌色に基づいて決定された、肌色を構成する少なくとも１つの色素成分の変更量と肌色成分の変更量との関係を参照して肌色成分を変更しているため、画像ごとに肌色成分を色素成分に変換して肌色を補正する場合と比較して演算量を大幅に低減でき、その結果、処理時間を大幅に短縮することができる。
【発明を実施するための最良の形態】
【００１６】
以下、図面を参照して本発明の実施形態について説明する。図１は本発明の第１の実施形態による肌色補正装置の構成を示す概略ブロック図である。図１に示すように、本実施形態による第１の肌色補正装置１は、肌色抽出部１１、変換部１３、補正部１５、入力部１７および表示部１９とを備える。
【００１７】
肌色領域抽出部１１は、人物の顔を含む画像を表す画像データＳ０（以下、画像についても参照符号Ｓ０を用いる）の入力を受けて、画像Ｓ０から顔の肌色領域を抽出する。具体的には、画像Ｓ０における肌色の画素からなる領域のうち、人物の顔の形状に類似する長円形状をなす領域を肌色領域Ｆ０として抽出する。なお、肌色領域Ｆ０を抽出する手法としてはこれに限定されるものではなく、機知の種々の手法を適用することができる。また、画像Ｓ０をモニタ等に表示し、オペレータがそれを見ながら肌色の部分を指定することにより肌色領域Ｆ０を抽出するようにしてもよい。このようにして肌色領域抽出部１１が抽出した肌色領域Ｆ０の画素値（すなわちＲＧＢ各色の信号値）が肌色成分となる。
【００１８】
変換部１３は、多数の被験者の肌色に基づいて決定された、肌色を構成する少なくとも１つの色素成分と肌色成分との関係に基づいて、肌色成分を肌色を構成する少なくとも１つの色素成分に変換する。
【００１９】
以下、変換部１３において行われる変換について詳細に説明する。
【００２０】
上記非特許文献１，２に記載されたように、皮膚を、表皮側の層にメラニン、真皮側の層にヘモグロビンを含むとした層状モデルとし、各成分が独立でＬａｍｂｅｒｔ−Ｂｅｅｒの法則に基づくとして、独立成分分析、主成分分析または因子分析を行うことにより、メラニン成分、ヘモグロビン成分とその相対係数（メラニン成分量、ヘモグロビン成分量）を算出できる。
【００２１】
肌色の色濃度ベクトルについて考えると、
Ｃ＝ｑ（１）・Ｃ（１）＋ｑ（２）・Ｃ（２）＋Ｃ（３）        （１）
Ｃ：ある座標における色濃度ベクトル
Ｃ（１）、Ｃ（２）：第１成分、第２成分色素の色成分ベクトル
ｑ（１）、ｑ（２）：第１成分、第２成分色素の相対係数
Ｃ（３）：皮膚構造や他の色素によって発生する定常ベクトル
で表すことができる。
【００２２】
一方、各画素におけるＲＧＢの色信号について色濃度ベクトルの各成分をｒ、ｇ、ｂとするとき、画素の色濃度ベクトルＣは、
Ｃ＝［−ｌｏｇｒ、−ｌｏｇｇ、−ｌｏｇｂ］            （２）
となる。
【００２３】
したがって、式（１）および（２）は下記の式（３）に示すように変形することができる。
【数１】
2006041804.tif 000003
【００２４】
ここで、独立成分分析、主成分分析または因子分析を行い、色成分ベクトルＣ（１）、Ｃ（２）およびその相対係数ｑ（１）、ｑ（２）を算出し、第１成分および第２成分をそれぞれメラニン成分およびヘモグロビン成分とすることにより、被験者の肌色におけるメラニン含量、ヘモグロビン含量を得ることができ、それを用いることにより、被験者の肌を評価することが可能である。
【００２５】
本発明の第１の実施形態による肌色補正装置１においては、多数の被験者の肌色に基づいてＣ（１）、Ｃ（２）、Ｃ（３）をあらかじめ求めることにより、式（３）におけるマトリクスＡを求め、さらにマトリクスＡの逆マトリクスであるマトリクスＢ（＝Ａ-1）を求めることにより、下記の式（４）に示すようにＲＧＢ色信号をメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）に変換するための関係式を生成し、これを変換部１３が記憶しておく。
【数２】
2006041804.tif 000004
【００２６】
そして変換部１３は上記式（４）を用いて、肌色領域Ｆ０の各画素におけるＲＧＢ色信号からなる肌色成分をメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）に変換する。
【００２７】
補正部１５は、後述するようにオペレータが入力部１７を用いて入力したメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更量に基づいて、肌色領域Ｆ０の各画素のメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）を変更する。例えば、後述する指示受付画面においてメラニン成分量ｑ（１）を０．２倍減少させ、ヘモグロビン成分量ｑ（２）を０．１倍増加させる指示が行われた場合には、変更後のメラニン成分量は０．８×ｑ（１）（＝ｑ′（１）とする）となり、変更後のヘモグロビン成分量は１．１×ｑ（２）（＝ｑ′（２）とする）となる。
【００２８】
補正部１５は上記式（３）を記憶しており、変更されたメラニン成分量ｑ′（１）およびヘモグロビン成分量ｑ′（２）を上記式（３）に基づいてＲＧＢ色信号に変換する。変換されたＲＧＢ色信号が補正された肌色成分となる。そして、肌色領域Ｆ０が補正された肌色成分からなる処理済み画像Ｓ１を表示部１９に表示する。
【００２９】
入力部１７は、キーボード、マウス等からなり、本実施形態による肌色補正装置１に各種指示を行う。具体的には、処理実行の指示、メラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更の指示、および最終的な出力の指示等を行う。
【００３０】
表示部１９は、本実施形態による肌色補正装置に関する各種表示を行う。具体的には、オペレータによるメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更の指示を受け付けるための指示受付画面を表示する。
【００３１】
図２は指示受付画面の例を示す図である。図２に示すように指示受付画面３０には、補正前の画像３０Ａ（すなわちＳ０）、補正後の画像３０Ｂ（すなわちＳ１）、メラニン成分量ｑ（１）の変更を指示するための指示バー３０Ｃ、ヘモグロビン成分量ｑ（２）の変更を指示するための指示バー３０Ｄ、指示バー３０Ｃの目盛りを指示するための矢印３０Ｅ、指示バー３０Ｄの目盛りを指示するための矢印３０Ｆ、およびメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更を確定する際にクリックする決定ボタン３０Ｇが表示されている。
【００３２】
指示バー３０Ｃ，３０Ｄにはそれぞれ１０個の目盛りが付与されており、中央の目盛りがメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更量が０であることに対応し、１目盛りについてメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更量が０．１倍増減することに対応する。
【００３３】
そして、オペレータは指示バー３０Ｃ，３０Ｄの矢印３０Ｅ，３０Ｆを入力部１７を用いて左右に移動させることにより、メラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更を指示する。具体的には、メラニン成分量ｑ（１）の変更を指示する指示バー３０Ｃの矢印３０Ｅを右に移動させるとメラニン成分量ｑ（１）が増加して、補正後の肌色が日焼けをしたようになり、左に移動させるとメラニン成分量ｑ（１）が減少して、補正後の肌色に美白効果を付与できる。また、ヘモグロビン成分量ｑ（２）の変更を指示する指示バー３０Ｄの矢印３０Ｆを右に移動させるとヘモグロビン成分量ｑ（２）が増加して、補正後の肌色の血色が良くなり（すなわち赤くなり）、左に移動させるとヘモグロビン成分量ｑ（２）が減少して、補正後の肌色の血色が悪くなる（すなわち青くなる）。
【００３４】
なお、補正部１５は、矢印３０Ｅ，３０Ｆが移動されるごとに処理済み画像Ｓ１を求め、これを補正後の画像３０Ｂとして指示受付画面３０に表示する。
【００３５】
次いで、第１の実施形態の動作について説明する。図３は第１の実施形態の動作を示すフローチャートである。オペレータが入力部１７を用いて処理開始の指示を行うことにより処理が開始され、表示部１９が図２に示す指示受付画面３０を表示する（ステップＳＴ１）。また、肌色抽出部１１が画像Ｓ０から肌色領域Ｆ０を抽出し（ステップＳＴ２）、変換部１３が肌色領域Ｆ０の画素値、すなわち肌色成分をメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）に変換する（ステップＳＴ３）。
【００３６】
続いて補正部１５が入力部１７を用いてのメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更の指示の受け付けの監視を開始し（ステップＳＴ４）、ステップＳＴ４が肯定されると、補正部１５が指示された変更量によりメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）を変更し、変更されたメラニン成分量ｑ′（１）およびヘモグロビン成分量ｑ′（２）を上記式（３）により変換して、補正された肌色成分を得る（ステップＳＴ５）。
【００３７】
そして、補正部１５が肌色領域Ｆ０が補正された肌色成分からなる処理済み画像Ｓ１を補正後の画像３０Ｂとして指示受付画面３０に表示する（ステップＳＴ６）。続いて、決定ボタン３０Ｇがクリックされたか否かの監視が開始され（ステップＳＴ７）、ステップＳＴ７が否定されるとステップＳＴ４に戻る。ステップＳＴ７が肯定されると補正部１５は処理済み画像Ｓ１を出力し（ステップＳＴ８）、処理を終了する。
【００３８】
このように、第１の実施形態においては、式（４）に示すように、多数の被験者の肌色に基づいて決定された、肌色を構成するメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）と肌色成分との関係に基づいて、肌色成分をメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）に変換し、変更されたメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）から式（３）を用いて、補正された肌色成分を得るようにしたため、ユーザが所望とするようにメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更の指示を行うことにより、画像Ｓ０の肌色を所望とするように補正することができる。また、肌色成分を多数の被験者の肌色に基づいて決定された関係に基づいてメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）に変換しているため、画像ごとに肌色成分をメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）に変換して肌色を補正する場合と比較して演算量を低減でき、その結果、処理時間を短縮することができる。
【００３９】
次いで、本発明の第２の実施形態について説明する。図４は本発明の第２の実施形態による肌色補正装置の構成を示す概略ブロック図である。図４に示すように、本発明の第２の実施形態による肌色補正装置２は、肌色抽出部２１、記憶部２３、補正部２５、入力部２７および表示部２９とを備える。
【００４０】
肌色領域抽出部２１、入力部２７および表示部２９は、第１の実施形態による肌色補正装置１の肌色領域抽出部１１、入力部１７および表示部１９と同一の機能を有する。
【００４１】
ここで、上記式（３）は、多数の被験者の肌色に基づいてあらかじめ求めたＣ（１）、Ｃ（２）、Ｃ（３）から得たマトリクスＡにより、メラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）を肌色成分に変換する式であり、式（４）はマトリクスＡの逆マトリクスであるマトリクスＢにより肌色成分をメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）に変換する式である。
【００４２】
したがって、式（３），（４）を用いることにより、メラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の単位当たりの変更量に応じた、肌色成分であるＲＧＢ色信号の変更量を求めることができ、これからメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更量と肌色成分の変更量との関係を求めることができる。例えば、メラニン成分量がａ１倍されると、ＲＧＢの各信号がそれぞれｃ１倍、ｄ１倍、ｅ１倍されるというような関係を求めることができる。
【００４３】
記憶部２３は、メラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更量と肌色成分の変更量との関係を、図５に示すように、メラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の単位変更倍率ａ１，ａ２に対するＲＧＢ各色信号の倍率ｃ１，ｃ２，ｄ１，ｄ２，ｅ１，ｅ２を規定したデータベースとして記憶しておく。
【００４４】
補正部２５は、オペレータが指示受付画面３０おいて入力部１７を用いて入力したメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更量に基づいて、記憶部２３が記憶したデータベースを参照して肌色領域Ｆ０の肌色成分を変更する。例えば、指示受付画面３０においてメラニン成分量を０．２倍減少させ、ヘモグロビン成分量を０．１倍増加させる指示が行われた場合には、変更後の肌色成分は下記の式（５）により求めることができる。
【００４５】
Ｒ１＝Ｒ０×０．８／ａ１×ｃ１＋１．１／ａ２×ｃ２
Ｇ１＝Ｇ０×０．８／ａ１×ｄ１＋１．１／ａ２×ｄ２      （５）
Ｂ１＝Ｂ０×０．８／ａ１×ｅ１＋１．１／ａ２×ｅ２
但し、Ｒ０，Ｇ０，Ｂ０：補正前のＲＧＢ色信号
Ｒ１，Ｇ１，Ｂ１：補正後のＲＧＢ色信号
そして、肌色領域Ｆ０が補正された肌色成分からなる処理済み画像Ｓ１を表示部２９に表示する。
【００４６】
次いで、第２の実施形態の動作について説明する。図６は第２の実施形態の動作を示すフローチャートである。オペレータが入力部２７を用いて処理開始の指示を行うことにより処理が開始され、表示部２９が図２に示す指示受付画面３０を表示する（ステップＳＴ１１）。また、肌色抽出部２１が画像Ｓ０から肌色領域Ｆ０を抽出する（ステップＳＴ１２）。
【００４７】
続いて、補正部２５が入力部２７を用いてのメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更の指示の受け付けの監視を開始し（ステップＳＴ１３）、ステップＳＴ１３が肯定されると、補正部２５が記憶部２３に記憶されたデータベースを参照して、変更されたメラニン成分量ｑ′（１）およびヘモグロビン成分量ｑ′（２）に対応するＲＧＢ色信号を算出することにより、補正された肌色成分を得る（ステップＳＴ１４）。
【００４８】
そして、補正部２５が肌色領域Ｆ０が補正された肌色成分からなる処理済み画像Ｓ１を補正後の画像３０Ｂとして指示受付画面３０に表示する（ステップＳＴ１５）。続いて、決定ボタン３０Ｇがクリックされたか否かの監視が開始され（ステップＳＴ１６）、ステップＳＴ１６が否定されるとステップＳＴ１３に戻る。ステップＳＴ１６が肯定されると補正部２５は処理済み画像Ｓ１を出力し（ステップＳＴ１７）、処理を終了する。
【００４９】
このように、第２の実施形態においては、多数の被験者の肌色に基づいて決定された、肌色を構成するメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更量と肌色成分の変更量との関係を規定したデータベースを参照して、メラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更量に応じた肌色成分の変更量を求め、この変更量により肌色成分を変更するようにしたため、ユーザが所望とするようにメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）の変更の指示を行うことにより、画像Ｓ０の肌色を所望とするように補正することができる。また、データベースを参照して肌色成分を変更しているため、画像ごとに肌色成分をメラニン成分量ｑ（１）およびヘモグロビン成分量ｑ（２）に変換して肌色を補正する場合と比較して演算量を大幅に低減でき、その結果、処理時間を大幅に短縮することができる。
【００５０】
なお、図７に示すように、上述した本発明の第１および第２の実施形態による肌色補正装置１，２をカメラ付き携帯電話４と通信可能なサーバ５に設けるようにしてもよい。この場合、カメラ付き携帯電話４において撮影により取得した顔を含む画像データを、メラニン成分量およびヘモグロビン成分量の変更量を表す情報とともにサーバ５に送信する。なお、変更量を表す情報としては、例えば「美白方向に＋３、血色が良くなる方向に＋２」等が挙げられる。そしてサーバ５においては、変更量を表す情報に基づいて、上記第１および第２の実施形態と同様に、送信された画像データにより表される画像における肌色成分を補正し、これにより得られた処理済み画像データをカメラ付き携帯電話４に送信する。これにより、カメラ付き携帯電話４においては、肌色が所望とするように補正された処理済み画像を再生することができる。
【００５１】
なお、上記第１および第２の実施形態においては、肌色成分をＲＧＢ色信号として求めているが、ＹＣｂＣＲ色空間、Ｌａｂ色空間等、ＲＧＢ色空間以外の色空間において肌色成分を求め、メラニン成分量およびヘモグロビン成分量との関係を求めるようにしてもよい。
【００５２】
以上、本発明の肌色補正装置について説明したが、コンピュータを、上記の肌色領域抽出部１１，２１、変換部１３、補正部１５，２５、入力部１７，２７、表示部１９，２９および記憶部２３に対応する手段として機能させ、図３および図６に示すような処理を行わせるプログラムも、本発明の実施形態の１つである。また、そのようなプログラムを記録したコンピュータ読取可能な記録媒体も、本発明の実施形態の１つである。
【図面の簡単な説明】
【００５３】
【図１】本発明の第１の実施形態による肌色補正装置の構成を示す概略ブロック図
【図２】指示受付画面の例を示す図
【図３】第１の実施形態の動作を示すフローチャート
【図４】本発明の第２の実施形態による肌色補正装置の構成を示す概略ブロック図
【図５】メラニン成分量およびヘモグロビン成分量を変更する単位変更倍率に対するＲＧＢ各色信号の倍率を示したデータベースを示す図
【図６】第２の実施形態の動作を示すフローチャート
【図７】本発明の実施形態による肌色補正装置をカメラ付き携帯電話と通信可能なサーバに設けた例を示す図
【符号の説明】
【００５４】
１，２    肌色補正装置
４    カメラ付き携帯電話
５    サーバ
１１，２１    肌色領域抽出部
１３    変換部
１５，２５    補正部
１７，２７    入力部
１９，２９    表示部１９
２３    記憶部
【図１】
2006041804.tif 000005
【図２】
2006041804.tif 000006
【図３】
2006041804.tif 000007
【図４】
2006041804.tif 000008
【図５】
2006041804.tif 000009
【図６】
2006041804.tif 000010
【図７】
2006041804.tif 000011