(57)【要約】      （修正有）【課題】顔の所定部位について、その質感を損なうことなく艶のある画像にすること。【解決手段】撮像装置は、画像取得部５１と、画像処理部５３と、マスク画像作成処理部５４と、調整画像作成処理部５５と、を備える。画像取得部５１は、顔画像を取得する。画像処理部５３は、画像取得部５１によって取得された顔画像の明るさを調整する。画像処理部５３は、顔に照射された光の反射状態に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、画像取得部５１によって取得された顔画像と、調整された顔画像を合成する。【選択図】図８
2019070871.tif 000002
【特許請求の範囲】
【請求項１】
顔画像を取得する取得手段と、
前記取得手段によって取得された顔画像の明るさを調整する調整手段と、
顔に照射された光の反射状態に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、前記取得手段によって取得された顔画像と、前記調整手段によって調整された顔画像を合成する合成手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
前記マップデータは更に、所定の色相値について透過度が調整されたものであることを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記マップデータは更に、前記所定の色相値の彩度及び明度について所定の重み付けを加えた透過度に調整されたものであることを特徴とする請求項２記載の画像処理装置。
【請求項４】
前記所定領域とは唇のある領域であることを特徴とする請求項１乃至３の何れかに記載の画像処理装置。
【請求項５】
顔画像を取得する取得処理と、
前記取得処理によって取得された顔画像の明るさを調整する調整処理と、
顔に照射された光の反射状態に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、前記取得処理によって取得された顔画像と、前記調整処理によって調整された顔画像を合成する合成処理と、
を含むことを特徴とする画像処理方法。
【請求項６】
コンピュータに
顔画像を取得する取得手段と、
前記取得手段によって取得された顔画像の明るさを調整する調整手段と、
顔に照射された光の反射状態に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、前記取得手段によって取得された顔画像と、前記調整手段によって調整された顔画像を合成する合成手段と、
を実現させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法及びプログラムに関する。
【背景技術】
【０００２】
従来より、顔画像における特定領域の色相、彩度、明度等を補正することが行われている。例えば、特許文献１には、顔画像における唇の艶を自然なものに補正する技術が開示されている。特許文献１の技術では、ストロボや環境光の状態に基づいて唇の部分を加工している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−６５２６９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述した特許文献１に開示された技術では、ストロボや環境光の状態を重視したグロス表現になるため、唇本来の質感が損なわれるおそれがある。
【０００５】
本発明は、このような状況に鑑みてなされたものであり、顔の所定部位について、その質感を損なうことなく艶のある画像にすることを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明の一態様の画像処理装置は、
顔画像を取得する取得手段と、
前記取得手段によって取得された顔画像の明るさを調整する調整手段と、
顔に照射された光の反射状態に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、前記取得手段によって取得された顔画像と、前記調整手段によって調整された顔画像を合成する合成手段と、
を備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、顔の所定部位について、その質感を損なうことなく艶のある画像にすることができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の画像処理装置の一実施形態に係る撮像装置１のハードウェアの構成を示すブロック図である。
【図２】本実施形態における調整画像の生成過程を説明するための模式図である。
【図３】色補正用マスク画像の作成例を示す模式図である。
【図４】色補正用ＨＵＥマップ作成処理に係るヒストグラム及び唇色レベルの重み付けテーブルを示す図である。
【図５】テカリ強調用マスク画像の作成例を示す模式図である。
【図６】テカリ強調用ＨＵＥマップ作成処理に係るヒストグラム及び唇テカリレベルの重み付けテーブルを示す図である。
【図７】固定マップの作成を説明するための模式図である。
【図８】図１の撮像装置１の機能的構成のうち、調整画像生成処理を実行するための機能的構成を示す機能ブロック図である。
【図９】図８の機能的構成を有する図１の撮像装置１が実行する調整画像生成処理の流れを説明するフローチャートである。
【図１０】調整画像生成処理のうち、色補正用マスク画像作成処理の流れを説明するフローチャートである。
【図１１】調整画像生成処理のうち、色補正画像作成処理の流れを説明するフローチャートである。
【図１２】調整画像生成処理のうち、テカリ強調用マスク画像作成処理の流れを説明するフローチャートである。
【図１３】調整画像生成処理のうち、テカリ強調画像作成処理の流れを説明するフローチャートである。
【発明を実施するための形態】
【０００９】
以下、本発明の実施形態について、図面を用いて説明する。
【００１０】
図１は、本発明の画像処理装置の一実施形態に係る撮像装置１のハードウェアの構成を示すブロック図である。
撮像装置１は、例えば、デジタルカメラとして構成される。
【００１１】
撮像装置１は、図１に示すように、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１１と、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）１２と、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）１３と、バス１４と、入出力インターフェース１５と、撮像部１６と、入力部１７と、出力部１８と、記憶部１９と、通信部２０と、ドライブ２１と、照明部２２と、を備えている。
【００１２】
ＣＰＵ１１は、ＲＯＭ１２に記録されているプログラム、又は、記憶部１９からＲＡＭ１３にロードされたプログラムに従って各種の処理を実行する。
【００１３】
ＲＡＭ１３には、ＣＰＵ１１が各種の処理を実行する上において必要なデータ等も適宜記憶される。
【００１４】
ＣＰＵ１１、ＲＯＭ１２及びＲＡＭ１３は、バス１４を介して相互に接続されている。このバス１４にはまた、入出力インターフェース１５も接続されている。入出力インターフェース１５には、撮像部１６、入力部１７、出力部１８、記憶部１９、通信部２０、ドライブ２１及び照明部２２が接続されている。
【００１５】
撮像部１６は、図示はしないが、光学レンズ部と、イメージセンサと、を備えている。
【００１６】
光学レンズ部は、被写体を撮影するために、光を集光するレンズ、例えばフォーカスレンズやズームレンズ等で構成される。
フォーカスレンズは、イメージセンサの受光面に被写体像を結像させるレンズである。ズームレンズは、焦点距離を一定の範囲で自在に変化させるレンズである。
光学レンズ部にはまた、必要に応じて、焦点、露出、ホワイトバランス等の設定パラメータを調整する周辺回路が設けられる。
【００１７】
イメージセンサは、光電変換素子や、ＡＦＥ（Ａｎａｌｏｇ  Ｆｒｏｎｔ  Ｅｎｄ）等から構成される。
光電変換素子は、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型の光電変換素子等から構成される。光電変換素子には、光学レンズ部から被写体像が入射される。そこで、光電変換素子は、被写体像を光電変換（撮像）して画像信号を一定時間蓄積し、蓄積した画像信号をアナログ信号としてＡＦＥに順次供給する。
ＡＦＥは、このアナログの画像信号に対して、Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換処理等の各種信号処理を実行する。各種信号処理によって、ディジタル信号が生成され、撮像部１６の出力信号として出力される。
このような撮像部１６の出力信号は、撮像画像のデータとしてＣＰＵ１１や図示しない画像処理部等に適宜供給される。
【００１８】
入力部１７は、各種釦等で構成され、ユーザの指示操作に応じて各種情報を入力する。
出力部１８は、ディスプレイやスピーカ等で構成され、画像や音声を出力する。
記憶部１９は、ハードディスク或いはＤＲＡＭ（Ｄｙｎａｍｉｃ  Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）等で構成され、各種画像のデータを記憶する。
通信部２０は、インターネットを含むネットワークを介して他の装置（図示せず）との間で行う通信を制御する。
【００１９】
ドライブ２１には、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等よりなる、リムーバブルメディア３１が適宜装着される。ドライブ２１によってリムーバブルメディア３１から読み出されたプログラムは、必要に応じて記憶部１９にインストールされる。また、リムーバブルメディア３１は、記憶部１９に記憶されている画像のデータ等の各種データも、記憶部１９と同様に記憶することができる。
照明部２２は、撮像部１６の周囲に円を描くように設置された８個のＬＥＤ（発光部材）と、当該撮像装置１において、この８個のＬＥＤとは離れた位置に設置された１個のＬＥＤとで構成される。これらのＬＥＤは、ライブビュー撮影時、画像記録時に、ユーザの操作に従って選択的に発光する。このように照明のための光線の到来方向を変更させて顔を撮影することで、人為的に陰影がコントロールされた顔画像を取得することができる。
【００２０】
このように構成される撮像装置１では、顔を撮影した画像に対して、肌に対して美白処理が施されていると共に、肌色と色相が近く美白処理によって色が薄くなる等の影響を受けた唇を適切に補正した画像（以下、「美白画像」という。）を生成することができる機能を有する。即ち、撮像装置１では、顔の肌に施された美白処理によって補正された唇の色を適切な色に補正して美白処理の効果を復元（軽減）することにより美白画像を生成する。
【００２１】
即ち、美白処理は、肌色領域に対してだけ施されるように対象箇所以外がマスクされるが、唇の色は肌色と色相が近く、肌色領域に含まれてしまうため、美白処理が施されてしまい、唇の色が薄くなる等の影響を受けてしまう。また、美白処理は、主に、彩度低減、明度アップ、青色方向への色相回転の３つの要素を補正することによって行われる。
このため、本実施形態の撮像装置１では、薄くなった唇の色に対して、３つの要素のうち、彩度低減のみを復元し、他の効果は維持するようにして、唇の色を適切な色に補正する。
【００２２】
美白画像は、本実施形態においては、まず、顔全体に対して美白処理を施し、その後、美白処理の影響を受けた唇に対して別途、適切な色に再現するための色補正を行って生成される。
更に、本実施形態においては、唇の艶感を向上させる処理として、唇のテカリを強調する補正を行う。このとき、唇領域の画像が有する本来のテカリを強調する処理（テカリ強調処理）を実行することにより、自然な唇の艶感を再現する。これにより、上述の美白画像に対し、唇の質感を損なうことなく艶感を向上させる調整を行った顔画像（以下、「調整画像」という。）が生成される。
【００２３】
図２２は、本実施形態における調整画像の生成過程画像の生成を説明するための模式図である。
本実施形態の調整画像は、図２に示すように、画像全体に対して美白処理を施した画像（以下、「元画像」という。）から唇を含む領域を切り出す。そして、唇を含む領域に対して、美白処理によって薄くなってしまった唇の色を適切な色に再現するように色補正の処理を施して画像（以下、「色補正画像」という。）を作成する。色補正画像は、唇以外の画像全体に対して色補正がされているため、唇のみに色補正の効果がでるように、唇以外をマスクする色補正用マスク画像を用いて、元画像と色補正画像とをαブレンドによる画像合成をして、唇のみが色補正された画像（以下、「唇色補正画像」という。）を作成する。マスク画像は、αブレンドによる画像合成の際にα値となる。
本実施形態では、更に、上述の唇色補正画像に対して、唇の艶感を向上させるためのテカリ強調処理を施す。テカリ強調処理においては、唇を含む領域に対して、唇の本来のテカリを強調する処理を施した画像（以下、「テカリ強調画像」という。）を作成する。テカリ強調画像は、唇以外の画像全体に対してテカリ強調がされているため、唇のみにテカリ強調の効果がでるように、唇以外をマスクするテカリ強調用マスク画像を用いて、唇色補正画像とテカリ強調画像とをαブレンドによる画像合成をして、唇のみがテカリ強調された画像（以下、「唇テカリ強調画像」という。）を作成する。
その後、作成した唇テカリ強調画像を元画像の切り出し位置に合成して、調整画像を生成する。
【００２４】
［色補正用マスク画像の作成］
図３は、色補正用マスク画像の作成例を示す模式図である。
本実施形態においては、美白処理により薄くなってしまった唇部分の色を再現する補正処理を施すために、唇に相当する領域に対応した色補正用マスク画像を生成する。
色補正用マスク画像は、図３に示すように、黒い部分ほど色補正画像の合成の割合が低く、白い部分ほど色補正画像の合成の割合が高いことを示している。本実施形態においては、唇の中心部分は色補正が強く施されており、唇の外縁に近い部分は、肌との影響を少なくするために色補正が強く施されるように構成される。
【００２５】
このような色補正用マスク画像は、まず、顔の器官の検出によって唇の位置を特定し、特定した唇の位置を含む領域におけるＨＳＶ色空間のピークとなる色相値に基づいて作成される。本実施形態の顔の器官検出では、図２に示すように、唇位置の特定等のために、少なくとも、上唇の中央の上下の２点Ｐ１，Ｐ２、下唇の中央の上下の２点Ｐ３，Ｐ４、唇の左右の端の２点Ｐ５，Ｐ６の合計６点の位置を検出する。
【００２６】
本実施形態においては、ＨＳＶ色空間のピークとなる色相値に基づいて生成された色補正用マスク画像に、鼻等の余計な部分を排除するために、予め唇の形状を模した固定マップを合成して、最終的なマスク画像を作成する。
【００２７】
具体的には、本実施形態の色補正用マスク画像は、元画像から唇を含む領域を切り出した画像（以下、「切り出し画像」という。）から、ＨＵＥマップを作成し、予め作成しておいた固定マップと合成して作成される。ＨＵＥマップと固定マップの合成では、ＨＵＥマップから空間的に不要な領域を除去するために、ＨＵＥマップと固定マップの最小値をとるようにする。
【００２８】
［ＨＵＥマップの作成］
ＨＵＥマップは、切り出し画像において唇の色に相当する箇所を特定したマップである。ＨＵＥマップは、まず、ＹＵＶ色空間の切り出し画像をＨＳＶ（色相：Ｈｕｅ，彩度：Ｓａｔｕｒａｔｉｏｎ・Ｃｈｒｏｍａ，明度：Ｖａｌｕｅ・Ｌｉｇｈｔｎｅｓｓ・Ｂｒｉｇｈｔｎｅｓｓ）色空間に変換する。その後、ノイズを除去するために、εフィルタでぼかした上で、ＨＳＶ変換後の画像を解析（ＨＳＶ解析処理）する。そして、ＨＳＶ解析処理の処理結果から算出した値をＨＵＥマップのマップ値として、ＨＵＥマップを作成する。
【００２９】
ＨＳＶ解析処理では、各画素におけるマップ値を決定するために、唇色レベルの重み付けを設定する。唇色レベルの重み付けは、ＨＳＶのチャネル別に作成したヒストグラムに基づいて設定される。
【００３０】
図４は、色補正用ＨＵＥマップ作成処理に係るヒストグラム及び唇色レベルの重み付けテーブルを示す図である。この色補正は、唇の色補正である。
唇色レベルの設定では、まず、図２に示す器官検出で検出した点Ｐ１〜Ｐ６から計測領域として上下の唇の中央付近に計測領域Ｒ１，Ｒ２を設定し、各計測領域におけるＨＳＶそれぞれのヒストグラムを作成する。なお、ヒストグラムの作成に係る唇における計測領域は、唇の色が取得可能な領域であれば、領域の数、種々の形状、位置、サイズであってもよい。
【００３１】
そして、図４（ａ）に示すようなＨＳＶそれぞれのヒストグラムの最頻値に対応して、図４（ｂ）に示すように唇色レベルの重み付けテーブルが設定される。Ｈのチャネルの場合には、最頻値を基準にしてプラスとマイナスに均等に重み付けが振り分けられ、最頻値から離れるほど重み付けが低くなるように設定される。また、Ｓ（Ｖ）のチャネルの場合には、ヒストグラムの最頻値を上方の左端（右端）の基準にして、ピーク値に所定の幅があり、かつ、１段目よりも２段目の方が勾配が緩やかとなる２段階の傾きとなるように、重み付けが設定される。
【００３２】
その後、各画素ごとにＨＳＶの各チャネル別に重み付けに応じて算出した唇色レベルを掛け合わせた結果をマップ値としてＨＵＥマップを作成する。
即ち、ＨＵＥマップのマップ値は、以下の式（１）により算出される。
ＨＵＥマップのマップ値（Ｍａｐ）＝Ｌｈ×Ｌｓ×Ｌｖ・・・（１）
なお、「Ｌｈ」はＨの唇色レベルを示し、「Ｌｓ」はＳの唇色レベルを示し、「Ｌｖ」はＶの唇色レベルを示す。
【００３３】
［テカリ強調用マスク画像の作成］
図５は、テカリ強調用マスク画像の作成例を示す模式図である。
本実施形態においては、唇の本来のテカリを強調する処理を施すために、唇に相当する領域に対応したマスク画像を生成する。
テカリ強調用マスク画像は、図５に示すように、黒い部分ほど色補正画像の合成の割合が低く、白い部分ほどテカリ強調画像の合成の割合が高いことを示している。本実施形態においては、唇のうち下唇の部分はテカリ強調が強く施されている。
【００３４】
このようなテカリ強調用マスク画像は、まず、顔の器官の検出によって唇の位置を特定し、特定した唇の位置を含む領域におけるＨＳＶ色空間のピークとなる色相値に基づいて作成される。本実施形態の顔の器官検出では、図２に示すように、唇位置の特定等のために、少なくとも、上唇の中央の上下の２点Ｐ１，Ｐ２、下唇の中央の上下の２点Ｐ３，Ｐ４、唇の左右の端の２点Ｐ５，Ｐ６の合計６点の位置を検出する。
【００３５】
本実施形態においては、ＨＳＶ色空間のピークとなる色相値に基づいて生成された暫定的なテカリ強調用マスク画像に、鼻等の余計な部分を排除するために、予め唇の形状を模した固定マップを合成して、最終的なテカリ強調用マスク画像を作成する。
【００３６】
具体的には、本実施形態のテカリ強調用マスク画像は、元画像から唇を含む領域を切り出した画像（切り出し画像）から、ＨＵＥマップを作成し、予め作成しておいた固定マップと合成して作成される。ＨＵＥマップと固定マップの合成では、ＨＵＥマップから空間的に不要な領域を除去するために、ＨＵＥマップと固定マップの最小値をとるようにする。
【００３７】
［ＨＵＥマップの作成］
ＨＵＥマップは、図３を参照して上述した、切り出し画像において唇の色に相当する箇所を特定したマップである。図５の場合における唇テカリレベルの重み付けも、ＨＳＶのチャネル別に作成したヒストグラムに基づいて設定される。
【００３８】
図６は、テカリ強調用ＨＵＥマップ作成処理に係るヒストグラム及び唇テカリレベルの重み付けテーブルを示す図である。
唇テカリレベルの設定では、まず、図２に示す器官検出で検出した点Ｐ１〜Ｐ６から計測領域として上下の唇の中央付近に計測領域Ｒ１，Ｒ２を設定し、各計測領域におけるＨＳＶそれぞれのヒストグラムを作成する。なお、ヒストグラムの作成に係る唇における計測領域は、唇のテカリが取得可能な領域であれば、種々の領域の数、形状、位置、サイズとすることができる。
【００３９】
そして、図６（ａ）に示すようなＨＳＶそれぞれのヒストグラムの最頻値に対応して、図６（ｂ）に示すように唇テカリレベルの重み付けテーブルが設定される。Ｈのチャネルの場合には、最頻値を基準にしてプラスとマイナスに均等に重み付けが振り分けられ、最頻値から離れるほど重み付けが低くなるように設定される。また、Ｓのチャネルの場合には、ヒストグラムの最頻値に到る以前まで重み付けが定常水準（飽和レベル）を維持し、ピーク値に到る直前からピーク値まで急峻に単調減少し、以降は零レベルを維持するように重み付けされる。また、Ｖのチャネルの場合には、ヒストグラムの最頻値に到る以前まで重み付けが零レベルを維持し、以降は飽和レベルに向けて急峻に単調増加している。
【００４０】
その後、各画素ごとにＨＳＶの各チャネル別に重み付けに応じて算出した唇テカリレベルを掛け合わせた結果をマップ値としてＨＵＥマップを作成する。
即ち、ＨＵＥマップのマップ値は、上述の式（１）により算出される。
【００４１】
［固定マップの作成］
図７は、固定マップの作成を説明するための模式図である。
【００４２】
固定マップは、一般的な顔において唇の形を模したマップで、色補正を行うにあたり予め作成されているマップである。
固定マップは、図７（ａ）に示すように、データから縮小サイズのマップを展開する。
そして、図７（ｂ）示すように、画像における唇の輪郭情報（本実施形態においては、２点Ｐ５，Ｐ６の位置）から唇の傾きの角度を算出して、当該角度に対応して固定マップを回転させる。
最後に、固定マップは、画像に対応するサイズに、リサイズして、ＨＵＥマップにおいて唇以外の部分を除去するために、ＨＵＥマップと合成されて使用される。合成に際しては、ＨＵＥマップと固定マップの最小値をとるようにする。
【００４３】
［色補正画像の作成］
色補正画像は、本実施形態においては、器官検出によって検出された左右の瞳の下方の肌領域から計測したＹＵＶ色空間のＶ値に応じて決定された補正強度により、切り出し画像を補正処理して作成される。なお、左右の瞳の下方の肌領域は、目の下のクマを避けた位置であり、顔において肌の色を最も表わしている位置として決定されたものであり、顔における肌の色を抽出可能な位置であれば種々の位置であってもよい。
なお、リップ等で元々の唇の色が濃い場合には、補正が効き過ぎないように、唇の画素のＶ値の補正を行う。
【００４４】
［唇色補正画像の作成］
唇色補正画像は、色補正画像と、切り出し画像とを、色補正用マスク画像に基づいて、αブレンドして画像合成して作成される。即ち、唇の領域のみに色補正が施され、それ以外の肌の部分は美白処理が施された唇色補正画像が生成される。
【００４５】
［テカリ強調画像の作成］
テカリ強調画像は、バイラテラルフィルタ（或いは他の平滑化フィルタ）によって、唇領域の肌を滑らかにする補正を実行した後、唇領域のテカリの画素数に応じたゲインをかけ、輝度を高める処理（テカリ強調）を実行することで作成される。このとき、例えば、画素の輝度成分にバイラテラルフィルタを適用することができる。また、例えば、唇領域のテカリの画素数（一例として、輝度が閾値以上の画素数）をカウントし、カウントされた画素数に応じたゲインをかけることができる。ただし、唇領域に占めるテカリの割合が大きい場合、過補正となることを抑制するために、画素数に応じたゲインを抑制することとしてもよい。
【００４６】
［唇テカリ強調画像の作成］
唇テカリ強調画像は、テカリ強調画像と、唇色補正画像とを、テカリ強調用マスク画像に基づいて、αブレンドして画像合成して作成される。即ち、唇のテカリ部分のみにテカリ強調が施され、それ以外の肌の部分は美白処理が施された唇テカリ強調画像が生成される。
【００４７】
図８は、図１の撮像装置１の機能的構成のうち、調整画像生成処理を実行するための機能的構成を示す機能ブロック図である。
調整画像生成処理とは、撮影された人の顔を含む画像に対して、美白処理及び唇の色補正処理を施すと共に、唇領域の画像が有する本来のテカリを強調するテカリ強調処理を施して調整画像を生成する一連の処理をいう。
【００４８】
テカリ強調画像生成処理を実行する場合には、図８に示すように、ＣＰＵ１１において、画像取得部５１と、顔検出部５２と、画像処理部５３と、マスク画像作成処理部５４と、調整画像作成処理部５５と、が機能する。
【００４９】
また、記憶部１９の一領域には、画像記憶部７１と、固定マップ記憶部７２と、が設定される。
【００５０】
画像記憶部７１には、撮像部１６から出力された画像のデータが記憶される。
固定マップ記憶部７２には、マスク画像の作成に用いる固定マップのデータが記憶される。なお、固定マップは、データ量削減のため、唇を模した円弧形状であるため、円弧を分割して４分の１にしたデータを記憶しておくようにしてもよい。この場合、処理時に円弧となるように固定マップを展開する。
【００５１】
画像取得部５１は、撮像部１６により撮像された画像に現像処理が行われた撮像画像のデータ、或いは画像記憶部７１から処理対象となる画像のデータを取得する。
【００５２】
顔検出部５２は、画像から顔を検出すると共に、検出した顔において顔を構成する各器官を検出する。顔検出部５２は、少なくとも、輪郭形状から、左右の瞳と、唇の器官を検出する。なお、顔検出部５２は、唇に関しては、少なくとも、上唇の中央の上下の２点Ｐ１，Ｐ２、下唇の中央の上下の２点Ｐ３，Ｐ４、唇の左右の端の２点Ｐ５，Ｐ６の合計６点の位置を検出する。顔検出及び各器官の検出は、既存の顔検出技術及び器官技術の公知の技術を用いる。また、顔検出及び各器官の検出は、輝度、輪郭抽出等、ＨＳＶ色空間の色情報とは異なる情報に基づく検出方法であればその検出方法は問わない。
【００５３】
画像処理部５３は、元画像に対して各種の画像処理を実行する。
具体的には、画像処理部５３は、例えば、主に、彩度低減、明度アップ、青色方向への色相回転の３点の要素の補正を行う美白処理を実行する。また、画像処理部５３は、図２に示すように、元画像から唇を含む領域を切り出す。また、画像処理部５３は、切り出した画像と、作成した色補正画像とを、作成した色補正用マスク画像に基づいて、αブレンドして画像合成する。その結果、唇色補正画像が作成される。
【００５４】
また、画像処理部５３は、唇色補正画像と、上述のように作成したテカリ強調画像とを、作成したテカリ強調用マスク画像に基づいて、αブレンドして画像合成する。その結果、唇テカリ強調画像が作成される。
また、画像処理部５３は、元の切り出し位置に唇テカリ強調画像を貼り付ける。その結果、調整画像が生成される。
【００５５】
マスク画像作成処理部５４は、唇の領域のみに補正が施された画像となるように、αブレンドに用いるマスク画像を生成する。本実施形態の場合、マスク画像作成処理部５４は上述の２種のマスク画像を生成する。１つは色補正用マスク画像であり、他の１つはテカリ強調用マスク画像である。
【００５６】
色補正用マスク画像の生成に際して、マスク画像作成処理部５４は、図３に示すように、切り出し画像のＹＵＶ色空間をＨＳＶ色空間に変換する。また、マスク画像作成処理部５４は、ノイズ除去を目的としてεフィルタで画像をぼかす処理を行う。
【００５７】
また、マスク画像作成処理部５４は、ＨＳＶ解析処理を実行する。ＨＳＶ解析処理では、上下の唇の中央付近に設定した計測領域Ｒ１，Ｒ２（図２参照）のＨＳＶの各チャネルでヒストグラムを作成する（図４（ａ）参照）。そして、作成したヒストグラムから算出する唇色レベルの重み付けを作成する（図４（ｂ）参照）。その後、作成した唇色レベルの重み付けに基づいて、上述した式（１）を用いて、各画素におけるＨＵＥマップのマップ値を算出する。算出した各画素のマップ値から色補正用ＨＵＥマップを作成する。
【００５８】
テカリ強調用マスク画像の生成に際して、マスク画像作成処理部５４は、図５に示すように、切り出し画像のＹＵＶ色空間をＨＳＶ色空間に変換する。更に、マスク画像作成処理部５４は、ＨＳＶ解析処理を実行する。ＨＳＶ解析処理では、上下の唇の中央付近に設定した計測領域Ｒ１，Ｒ２（図２参照）のＨＳＶの各チャネルでヒストグラムを作成する（図６（ａ）参照）。そして、作成したヒストグラムから算出する唇テカリレベルの重み付けを作成する（図６（ｂ）参照）。その後、作成した唇テカリレベルの重み付けに基づいて、上述した式（１）を用いて、各画素におけるＨＵＥマップのマップ値を算出する。算出した各画素のマップ値からテカリ強調用ＨＵＥマップを作成する。
【００５９】
また、マスク画像作成処理部５４は、図７（ａ）及び図７（ｂ）に示すように、固定マップ記憶部７２に記憶される固定マップを切り出し画像の唇に対応するように角度調整及びサイズ調整を行う。
【００６０】
また、マスク画像作成処理部５４は、図３に示すように、角度調整及びサイズ調整をした固定マップと作成した色補正用ＨＵＥマップとを合成する。この際、マスク画像作成処理部５４は、鼻等のＨＵＥマップから空間的な不要な領域を除去するために、色補正用ＨＵＥマップと固定マップの最小値をとるように合成する。合成の結果、色補正マスク画像が作成される。
【００６１】
更に、マスク画像作成処理部５４は、図５に示すように、角度調整及びサイズ調整をした固定マップと作成したテカリ強調用ＨＵＥマップとを合成する。この際、マスク画像作成処理部５４は、鼻等のＨＵＥマップから空間的な不要な領域を除去するために、テカリ強調用ＨＵＥマップと固定マップの最小値をとるように合成する。合成の結果、テカリ強調用マスク画像が作成される。
【００６２】
調整画像作成処理部５５は、切り出し画像に対して、色補正処理及びテカリ強調処理を実行する。
色補正処理に際して、調整画像作成処理部５５は、検出された左右の瞳の下方の肌領域のＶ値を計測する。そして、調整画像作成処理部５５は、切り出し画像に対して、計測したＶ値に応じて、色補正を行う。その結果、切り出し画像に対して色補正がされた色補正画像が作成される。
また、テカリ強調処理に際して、調整画像作成処理部５５は、上述の切り出し画像に対して、バイラテラルフィルタ（或いは他の平滑化フィルタ）によって、唇領域の肌を滑らかにする補正を実行する。このとき、例えば、画素の輝度成分にバイラテラルフィルタを適用することができる。また、調整画像作成処理部５５は、唇領域のテカリの画素数に応じたゲインをかけ、輝度を高める処理（テカリ強調処理）を実行する。このとき、調整画像作成処理部５５は、例えば、唇領域のテカリの画素数（一例として、輝度が閾値以上の画素数）をカウントし、カウントされた画素数に応じたゲインをかけることができる。ただし、唇領域に占めるテカリの割合が大きい場合、過補正となることを抑制するために、画素数に応じたゲインを抑制する。このような処理の結果、切り出し画像に対してテカリ強調されたテカリ強調画像が作成される。
【００６３】
図９は、図８の機能的構成を有する図１の撮像装置１が実行する調整画像生成処理の流れを説明するフローチャートである。この調整画像生成処理はテカリ強調画像生成処理を含む。
調整画像生成処理は、ユーザによる入力部１７への調整画像生成処理開始の操作により開始される。
調整画像生成処理開始の操作は、撮影指示操作であって、この撮影指示操作に応じて撮像部１６により撮像された画像に、現像処理が行われた撮像画像のデータに対して、引き続き調整画像生成処理を行ってもよく、また、画像記憶部７１に記憶されている撮像画像のデータを選択し、その選択された撮像画像のデータに対する調整画像生成処理開始の操作であってもよい。
【００６４】
ステップＳ１１において、画像取得部５１は、撮像部１６により撮像された画像に現像処理が行われた撮像画像のデータ、或いは画像記憶部７１から処理対象となる元画像を取得する。
【００６５】
ステップＳ１２において、顔検出部５２は、元画像において顔検出を行い、顔が検出されたか否かを判定する。
顔が検出されなかった場合には、ステップＳ１２においてＮＯと判定されて、調整画像生成処理は終了する。
顔が検出された場合には、ステップＳ１２においてＹＥＳと判定されて、処理はステップＳ１３に進む。
【００６６】
ステップＳ１３において、画像処理部５３は、元画像に対して美白処理を実行する。美白処理によって、元画像は、彩度低減、明度アップ、青色方向への色相回転されたものとなる。
【００６７】
ステップＳ１４において、顔検出部５２は、検出された顔の器官の検出を行う。その結果、少なくとも、元画像において左右の瞳と、唇の器官の位置が検出される。
【００６８】
ステップＳ１５において、画像処理部５３は、検出した唇を含む領域を切り出す。
【００６９】
ステップＳ１６において、マスク画像作成処理部５４は、色補正用マスク画像作成処理を実行する。色補正用マスク画像作成処理の実行の結果、αブレンド用の色補正用マスク画像が作成される。色補正用マスク画像作成処理の詳細については、後述する。
【００７０】
ステップＳ１７において、調整画像作成処理部５５は、色補正画像作成処理を実行する。色補正画像作成処理の実行の結果、切り出し画像に対して、薄くなった唇を適切な色にする色補正が行われた色補正画像が作成される。色補正画像作成処理の詳細については、後述する。
【００７１】
ステップＳ１８において、画像処理部５３は、切り出し画像と、作成した色補正画像とを、作成した色補正用マスク画像に基づいて、αブレンドして画像合成する。その結果、唇部分のみに色補正が施された唇色補正画像が作成される。
【００７２】
ステップＳ１９において、マスク画像作成処理部５４は、テカリ強調用マスク画像作成処理を実行する。テカリ強調用マスク画像作成処理の実行の結果、αブレンド用のテカリ強調用マスク画像が作成される。テカリ強調用マスク画像作成処理の詳細については、後述する。
【００７３】
ステップＳ２０において、調整画像作成処理部５５は、テカリ強調画像作成処理を実行する。テカリ強調画像作成処理の実行の結果、切り出し画像に対して、唇の本来のテカリを強調したテカリ強調画像が作成される。テカリ強調画像作成処理の詳細については、後述する。
【００７４】
ステップＳ２１において、画像処理部５３は、唇色補正画像と、作成したテカリ強調画像とを、作成したテカリ強調用マスク画像に基づいて、αブレンドして画像合成する。その結果、唇部分の質感が保たれ艶感が向上したテカリ強調画像が作成される。
【００７５】
ステップＳ２２において、画像処理部５３は、テカリ強調画像を元の切り出し位置に貼り付ける。その結果、肌に美白処理が施されていると共に、唇部分は適切な色に補正され、更に唇部分の艶感が向上した調整画像が生成される。
その後、調整画像生成処理が終了する。
【００７６】
図１０は、調整画像生成処理のうち、色補正用マスク画像作成処理の流れを説明するフローチャートである。
【００７７】
ステップＳ３１において、マスク画像作成処理部５４は、切り出し画像のＹＵＶ色空間をＨＳＶ色空間に変換する。
【００７８】
ステップＳ３２において、マスク画像作成処理部５４は、εフィルタでぼかす処理を行う。
【００７９】
ステップＳ３３において、マスク画像作成処理部５４は、ＨＳＶ解析処理を実行する。ＨＳＶ解析処理では、図２に示すように上下の唇の中央付近に設定した計測領域Ｒ１，Ｒ２のＨＳＶの各チャネルでヒストグラムを作成する（図４（ａ）参照）。そして、作成したヒストグラムから算出する唇色レベルの重み付けを設定する（図４（ｂ）参照）。唇色レベルの重み付けは、Ｈのチャネルの場合には、最頻値を基準にしてプラスとマイナスに均等に重み付けが振り分けられ、最頻値から離れるほど重み付けが低くなるように設定される。また、Ｓ（Ｖ）のチャネルの場合には、ヒストグラムの最頻値を上方の左端（右端）の基準にして、ピーク値に所定の幅があり、かつ、１段目よりも２段目の方が勾配が緩やかとなる２段階の傾きとなるように、重み付けが設定される。
【００８０】
ステップＳ３４において、マスク画像作成処理部５４は、色補正用ＨＵＥマップを作成する。色補正用ＨＵＥマップにおけるマップ値は、作成した唇色レベルの重み付けに基づいて、上述した式（１）を用いて算出する。
【００８１】
ステップＳ３５において、マスク画像作成処理部５４は、固定マップ記憶部７２に記憶される固定マップを切り出し画像の唇に対応するように角度調整及びサイズ調整を行う。
【００８２】
ステップＳ３６において、マスク画像作成処理部５４は、角度調整及びサイズ調整をした固定マップと作成した色補正用ＨＵＥマップとを合成する。この際、マスク画像作成処理部５４は、鼻等のＨＵＥマップから空間的に不要な領域を除去するために、色補正用ＨＵＥマップと固定マップの最小値をとるように合成する。合成の結果、色補正マスク画像が作成される。
【００８３】
図１１は、調整画像生成処理のうち、色補正画像作成処理の流れを説明するフローチャートである。
【００８４】
ステップＳ５１において、調整画像作成処理部５５は、検出された左右の瞳の下方の肌領域のＶ値を計測する。
【００８５】
ステップＳ５２において、調整画像作成処理部５５は、切り出し画像に対して、計測したＶ値に応じて、色補正を行う。その結果、切り出し画像に対して色補正がされた色補正画像が作成される。
【００８６】
図１２は、調整画像生成処理のうち、テカリ強調用マスク画像作成処理の流れを説明するフローチャートである。
【００８７】
ステップＳ７１において、マスク画像作成処理部５４は、切り出し画像のＹＵＶ色空間をＨＳＶ色空間に変換する。
【００８８】
ステップＳ７２において、マスク画像作成処理部５４は、ＨＳＶ解析処理を実行する。ＨＳＶ解析処理では、図２に示すように上下の唇の中央付近に設定した計測領域Ｒ１，Ｒ２のＨＳＶの各チャネルでヒストグラムを作成する（図６（ａ）参照）。そして、作成したヒストグラムから算出する唇テカリレベルの重み付けを設定する（図６（ｂ）参照）。唇テカリレベルの重み付けは、Ｈのチャネルの場合には、最頻値を基準にしてプラスとマイナスに均等に重み付けが振り分けられ、最頻値から離れるほど重み付けが低くなるように設定される。また、Ｓのチャネルの場合には、ヒストグラムの最頻値に到る以前まで重み付けが定常水準（飽和レベル）を維持し、ピーク値に到る直前からピーク値まで急峻に単調減少し、以降は零レベルを維持するように重み付けされる。また、Ｖのチャネルの場合には、ヒストグラムの最頻値に到る以前まで重み付けが零レベルを維持し、以降は飽和レベルに向けて急峻に単調増加するように重み付けされる。
【００８９】
ステップＳ７３において、マスク画像作成処理部５４は、テカリ強調用ＨＵＥマップを作成する。テカリ強調用ＨＵＥマップにおけるマップ値は、作成した唇テカリ強調レベルの重み付けに基づいて、上述した式（１）を用いて算出する。
【００９０】
ステップＳ７４において、マスク画像作成処理部５４は、固定マップ記憶部７２に記憶される固定マップを切り出し画像の唇に対応するように角度調整及びサイズ調整を行う。
【００９１】
ステップＳ７５において、マスク画像作成処理部５４は、角度調整及びサイズ調整をした固定マップと作成したテカリ強調用ＨＵＥマップとを合成する。この際、マスク画像作成処理部５４は、鼻等のＨＵＥマップから空間的に不要な領域を除去するために、テカリ強調用ＨＵＥマップと固定マップの最小値をとるように合成する。合成の結果、テカリ強調用マスク画像が作成される。
【００９２】
図１３は、調整画像生成処理のうち、テカリ強調画像作成処理の流れを説明するフローチャートである。
【００９３】
ステップＳ９１において、調整画像作成処理部５５は、バイラテラルフィルタ（或いは他の平滑化フィルタ）によって、唇領域の肌を滑らかにする補正を実行する。
【００９４】
ステップＳ９２において、調整画像作成処理部５５は、唇領域のテカリの画素数に応じたゲインをかけ、輝度を高める処理（テカリ強調処理）を実行する。このとき、唇領域に占めるテカリの割合が大きい場合、過補正となることを抑制するために、画素数に応じたゲインが抑制される。その結果、切り出し画像に対してテカリ強調されたテカリ強調画像が作成される。
【００９５】
種々の撮像装置では、ユーザが肌色を選択できる機能があり、例えば、顔の血色を良くする「ナチュラル」や顔の色を白くする「美白」が選択可能に構成される。ナチュラルでは、発色が良い色の再現になるので、唇の色も発色をよくすることができる。一方で美白では、肌色の彩度を低下させるため、唇色もそれに応じて、色が薄く血色の悪いものになる場合がある。
そこで、本実施形態の撮像装置１においては、人物を撮影した画像の輪郭を検出した結果を用いて、検出した顔領域から唇領域を抽出し、唇色を鮮やかにしたり、リップを塗ったように補正したりすることができる。唇色領域の抽出に際しては、ＨＳＶ色空間で表現される画像（ＨＳＶ画像）を解析し、ＨＳＶ画像からαブレンド用のマスク画像を作成する。補正する際は、ＹＵＶ色空間で表現される画像を解析し、ＹＵＶ（特にＶ）それぞれで補正することができる。
更に、本実施形態の撮像装置１においては、唇の本来のテカリを強調した唇テカリ強調画像が作成される。唇テカリ強調画像を元画像に合成することによって、艶感が向上した調整画像が得られる。
【００９６】
以上のように構成される撮像装置１は、画像取得部５１と、画像処理部５３と、マスク画像作成処理部５４と、調整画像作成処理部５５と、を備える。
画像取得部５１は、顔画像を取得する。
画像処理部５３は、画像内に含まれる人物の顔領域に対して、肌の色を白くする美白処理を施す。美白処理においては、顔画像の明るさが調整される。画像処理部５３は、更に、唇のテカリを適切に再現した唇テカリ強調画像を作成する。
マスク画像作成処理部５４は、美白処理が施される人物の顔領域内で、当該美白処理を軽減すべき部分を特定する。マスク画像作成処理部５４は、更に、唇のテカリを強調すべき部分を特定する。マスク画像作成処理部５４において特定される領域は、顔に照射された光の反射状態に基づいて特定される当該顔の所定領域である。この所定領域はマスク画像作成処理部５４において生成される色補正用マスクやテカリ強調用マスクによって遮蔽されない透過領域である。換言すれば、この透過領域を特定するマップデータによって規定される領域である。この所定領域について、上述のように取得された顔画像と、画像処理部５３によって調整画像を合成する。
調整画像作成処理部５５は、特定された唇のテカリを強調すべき部分に対して、テカリ強調を施す。
これにより、撮像装置１においては、唇の艶感が向上した顔画像である調整画像が作成される。
【００９７】
透過領域を特定するマップデータは、更に、所定の色相（ＨＵＥ）について透過度が調整されたものである。本実施形態では、透過領域を特定するマップデータに相当する色補正用マスク（図３、図４）及びテカリ強調用マスク（図５、図６）により透過度が調整される。
これにより、撮像装置１においては、美白処理及び色補正処理のみでは不足しがちな唇の艶感が向上した顔画像である調整画像が作成される。
【００９８】
また、透過領域を特定するマップデータは、更に、所定の色相値（ＨＳＶ）の彩度（Ｓ）及び明度（Ｖ）について所定の重み付けを加えた透過度が調整されたものである。本実施形態では、透過領域を特定するマップデータに相当する色補正用マスク（図３、図４）及びテカリ強調用マスク（図５、図６）により透過度が調整される。
これにより、撮像装置１においては、美白処理及び色補正処理のみでは不足しがちな唇の艶感が向上した顔画像である調整画像が作成される。
【００９９】
また、撮像装置１は、色補正用ＨＵＥマップ（図３）、テカリ補正ＨＵＥマップ（図５）、固定マップ（図７）により、所定領域として唇のある領域が特定される。
これにより、撮像装置１においては、唇の艶感が向上した顔画像である調整画像が作成される。
【０１００】
なお、本発明は、上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。
【０１０１】
上述の実施形態では、美白処理によって影響を受けた唇の色を適正な色に補正するように構成したがこれに限られない。特定した唇の領域に対して、唇の色を変化させるように補正してもよい。具体的には、異なるリップや口紅の色にしたり、リップ、口紅、グロス等を塗っていない唇に対して、リップ、口紅、グロス等を塗ってメイクアップしたり、血色の程度を調整したりしてもよい。この際、彩度を積極的に変化させてもよく、更に、明度や色相を変化させてもよい。
【０１０２】
また、上述の実施形態では、唇の領域を最初に特定して、顔全体に施す美白処理の際に、肌のマスクの領域として特定した唇の領域を指定するように構成してもよい。
【０１０３】
また、上述の実施形態では、本発明が適用される撮像装置１は、デジタルカメラを例として説明したが、特にこれに限定されない。
例えば、本発明は、美白処理機能を有する電子機器一般に適用することができる。具体的には、例えば、本発明は、ノート型のパーソナルコンピュータ、プリンタ、テレビジョン受像機、ビデオカメラ、携帯型ナビゲーション装置、携帯電話機、スマートフォン、ポータブルゲーム機等に適用可能である。
【０１０４】
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
換言すると、図８の機能的構成は例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が撮像装置１に備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは特に図８の例に限定されない。
また、１つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。
本実施形態における機能的構成は、演算処理を実行するプロセッサによって実現され、本実施形態に用いることが可能なプロセッサには、シングルプロセッサ、マルチプロセッサ及びマルチコアプロセッサ等の各種処理装置単体によって構成されるものの他、これら各種処理装置と、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ‐Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）等の処理回路とが組み合わせられたものを含む。
【０１０５】
一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。
【０１０６】
このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布される図１のリムーバブルメディア３１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。リムーバブルメディア３１は、例えば、磁気ディスク（フロッピディスクを含む）、光ディスク、又は光磁気ディスク等により構成される。光ディスクは、例えば、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ  Ｄｉｓｋ−Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ），ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｋ），Ｂｌｕ−ｒａｙ（登録商標）  Ｄｉｓｃ（ブルーレイディスク）等により構成される。光磁気ディスクは、ＭＤ（Ｍｉｎｉ−Ｄｉｓｋ）等により構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されている図１のＲＯＭ１２や、図１の記憶部１９に含まれるハードディスク等で構成される。
【０１０７】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的或いは個別に実行される処理をも含むものである。
【０１０８】
以上、本発明のいくつかの実施形態について説明したが、これらの実施形態は、例示に過ぎず、本発明の技術的範囲を限定するものではない。本発明はその他の様々な実施形態を取ることが可能であり、更に、本発明の要旨を逸脱しない範囲で、省略や置換等種々の変更を行うことができる。これら実施形態やその変形は、本明細書等に記載された発明の範囲や要旨に含まれると共に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【０１０９】
以下に、本願の出願当初の特許請求の範囲に記載された発明を付記する。
［付記１］
顔画像を取得する取得手段と、
前記取得手段によって取得された顔画像の明るさを調整する調整手段と、
顔に照射された光の反射状態に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、前記取得手段によって取得された顔画像と、前記調整手段によって調整された顔画像を合成する合成手段と、
を備えることを特徴とする画像処理装置。
［付記２］
前記マップデータは更に、所定の色相値について透過度が調整されたものであることを特徴とする付記１記載の画像処理装置。
［付記３］
前記マップデータは更に、前記所定の色相値の彩度及び明度について所定の重み付けを加えた透過度に調整されたものであることを特徴とする付記２記載の画像処理装置。
［付記４］
前記所定領域とは唇のある領域であることを特徴とする付記１乃至３の何れかに記載の画像処理装置。
［付記５］
顔画像を取得する取得処理と、
前記取得処理によって取得された顔画像の明るさを調整する調整処理と、
顔に照射された光の反射状態に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、前記取得処理によって取得された顔画像と、前記調整処理によって調整された顔画像を合成する合成処理と、
を含むことを特徴とする画像処理方法。
［付記６］
コンピュータに
顔画像を取得する取得手段と、
前記取得手段によって取得された顔画像の明るさを調整する調整手段と、
顔に照射された光の反射状態に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、前記取得手段によって取得された顔画像と、前記調整手段によって調整された顔画像を合成する合成手段と、
を実現させることを特徴とするプログラム。
【符号の説明】
【０１１０】
１・・・撮像装置，１１・・・ＣＰＵ，１２・・・ＲＯＭ，１３・・・ＲＡＭ，１４・・・バス，１５・・・入出力インターフェース，１６・・・撮像部，１７・・・入力部，１８・・・出力部，１９・・・記憶部，２０・・・通信部，２１・・・ドライブ，２２・・・照明部，３１・・・リムーバブルメディア，５１・・・画像取得部，５２・・・顔検出部，５３・・・画像処理部，５４・・・マスク画像作成処理部，５５・・・調整画像作成処理部，７１・・・画像記憶部，７２・・・固定マップ記憶部
【図１】
2019070871.tif 000003
【図２】
2019070871.tif 000004
【図３】
2019070871.tif 000005
【図４】
2019070871.tif 000006
【図５】
2019070871.tif 000007
【図６】
2019070871.tif 000008
【図７】
2019070871.tif 000009
【図８】
2019070871.tif 000010
【図９】
2019070871.tif 000011
【図１０】
2019070871.tif 000012
【図１１】
2019070871.tif 000013
【図１２】
2019070871.tif 000014
【図１３】
2019070871.tif 000015