(57)【要約】      （修正有）【課題】立体感のある顔画像の生成を容易にすること。【解決手段】撮像装置は、ＣＰＵ１１に画像取得部５１と、画像処理部５３と、を備える。画像取得部５１は、顔画像を取得する。画像処理部５３は、画像取得部５１によって取得された顔画像の明るさを調整する。画像処理部５３は、顔の立体形状に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、明るさを調整された顔画像同士を合成する。【選択図】図７
2019070872.tif 000002
【特許請求の範囲】
【請求項１】
顔画像を取得する取得手段と、
前記取得手段によって取得された顔画像の明るさを調整する調整手段と、
顔の立体形状に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、前記調整手段によって調整された顔画像同士を合成する合成手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
前記マップデータはさらに、光線の到来方向に基づいて前記顔を含む顔周囲の領域を透過領域とすることを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記調整手段は、前記顔画像を所定の度合いで明るくなるように、また、所定の度合いで暗くなるように前記顔画像を夫々調整し、前記合成手段はこれらの顔画像同士を合成することを特徴とする請求項２記載の画像処理装置。
【請求項４】
前記調整手段は、前記顔画像を所定の度合いで暗くし、更に輝度を下るように調整することを特徴とする請求項３記載の画像処理装置。
【請求項５】
前記顔画像において、前記光線の到来方向により暗くなる領域を指定する指定手段を更に備えたことを特徴とする請求項２乃至４の何れかに記載の画像処理装置。
【請求項６】
顔画像を取得する取得処理と、
前記取得処理によって取得された顔画像の明るさを調整する調整処理と、
顔の立体形状に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、前記調整処理によって調整された顔画像同士を合成する合成処理と、
を含むことを特徴とする画像処理方法。
【請求項７】
コンピュータに、
顔画像を取得する取得手段と、
前記取得手段によって取得された顔画像の明るさを調整する調整手段と、
顔の立体形状に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、前記調整手段によって調整された顔画像同士を合成する合成手段と、
を実現させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法及びプログラムに関する。
【背景技術】
【０００２】
従来より、画像内に含まれる人物の顔を補正する処理が利用されている。例えば、特許文献１には、人物の顔を印刷するにおいて、顔の立体感を強調するため、顔の鼻筋の辺りの画素を明るく、また、目頭から小鼻の辺りの画素を暗く補正する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−１９３７２９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、この公報に記載された技術では、印刷する度に補正領域を細かく設定する必要があった。
【０００５】
本発明は、このような状況に鑑みてなされたものであり、立体感のある顔画像の生成を容易にすることを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明の一態様の画像処理装置は、
顔画像を取得する取得手段と、
前記取得手段によって取得された顔画像の明るさを調整する調整手段と、
顔の立体形状に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、前記調整手段によって調整された顔画像同士を合成する合成手段と、
を備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、立体感のある顔画像の生成を容易にすることができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の画像処理装置の一実施形態に係る撮像装置のハードウェアの構成を示すブロック図である。
【図２】本実施形態における陰影強調画像の生成を説明するための模式図である。
【図３】シャドウマスク画像の作成を説明するための模式図である。
【図４】顔用のグラデーションマスク画像の作成を説明するための模式図である。
【図５】背景用のグラデーションマスク画像の作成を説明するための模式図である。
【図６】顔マスク画像のベース画像を示す模式図である。
【図７】図１の撮像装置の機能的構成のうち、陰影強調画像生成処理を実行するための機能的構成を示す機能ブロック図である。
【図８】図７の機能的構成を有する図１の撮像装置が実行する陰影強調画像生成処理の流れを説明するフローチャートである。
【図９】変形例１における顔マスク画像の作成を説明するための模式図である。
【図１０】撮影された画像に複数の人物が含まれている場合のグラデーションマスク画像の設定方法を示す模式図であり、図１０（ａ）は、向かって左の人物に影がかかっている場合、図１０（ｂ）は、向かって右の人物に影がかかっている場合を示している。
【発明を実施するための形態】
【０００９】
以下、本発明の実施形態について、図面を用いて説明する。
【００１０】
図１は、本発明の画像処理装置の一実施形態に係る撮像装置１のハードウェアの構成を示すブロック図である。
撮像装置１は、例えば、デジタルカメラとして構成される。
【００１１】
撮像装置１は、図１に示すように、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１１と、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）１２と、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）１３と、バス１４と、入出力インターフェース１５と、撮像部１６と、入力部１７と、出力部１８と、記憶部１９と、通信部２０と、ドライブ２１と、照明部２２と、を備えている。
【００１２】
ＣＰＵ１１は、ＲＯＭ１２に記録されているプログラム、または、記憶部１９からＲＡＭ１３にロードされたプログラムに従って各種の処理を実行する。
【００１３】
ＲＡＭ１３には、ＣＰＵ１１が各種の処理を実行する上において必要なデータ等も適宜記憶される。
【００１４】
ＣＰＵ１１、ＲＯＭ１２及びＲＡＭ１３は、バス１４を介して相互に接続されている。このバス１４にはまた、入出力インターフェース１５も接続されている。入出力インターフェース１５には、撮像部１６、入力部１７、出力部１８、記憶部１９、通信部２０、ドライブ２１及び、照明部２２が接続されている。
【００１５】
撮像部１６は、図示はしないが、光学レンズ部と、イメージセンサと、を備えている。
【００１６】
光学レンズ部は、被写体を撮影するために、光を集光するレンズ、例えばフォーカスレンズやズームレンズ等で構成される。
フォーカスレンズは、イメージセンサの受光面に被写体像を結像させるレンズである。ズームレンズは、焦点距離を一定の範囲で自在に変化させるレンズである。
光学レンズ部にはまた、必要に応じて、焦点、露出、ホワイトバランス等の設定パラメータを調整する周辺回路が設けられる。
【００１７】
イメージセンサは、光電変換素子や、ＡＦＥ（Ａｎａｌｏｇ  Ｆｒｏｎｔ  Ｅｎｄ）等から構成される。
光電変換素子は、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型の光電変換素子等から構成される。光電変換素子には、光学レンズ部から被写体像が入射される。そこで、光電変換素子は、被写体像を光電変換（撮像）して画像信号を一定時間蓄積し、蓄積した画像信号をアナログ信号としてＡＦＥに順次供給する。
ＡＦＥは、このアナログの画像信号に対して、Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換処理等の各種信号処理を実行する。各種信号処理によって、ディジタル信号が生成され、撮像部１６の出力信号として出力される。
このような撮像部１６の出力信号を撮像画像のデータとしてＣＰＵ１１や図示しない画像処理部等に適宜供給される。
【００１８】
入力部１７は、各種釦等で構成され、ユーザの指示操作に応じて各種情報を入力する。
出力部１８は、ディスプレイやスピーカ等で構成され、画像や音声を出力する。
記憶部１９は、ハードディスク或いはＤＲＡＭ（Ｄｙｎａｍｉｃ  Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）等で構成され、各種画像のデータを記憶する。
通信部２０は、インターネットを含むネットワークを介して他の装置（図示せず）との間で行う通信を制御する。
【００１９】
ドライブ２１には、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等よりなる、リムーバブルメディア３１が適宜装着される。ドライブ２１によってリムーバブルメディア３１から読み出されたプログラムは、必要に応じて記憶部１９にインストールされる。また、リムーバブルメディア３１は、記憶部１９に記憶されている画像のデータ等の各種データも、記憶部１９と同様に記憶することができる。
照明部２２は、撮像部１６の周囲に円を描くように設置された８個のＬＥＤ（発光部材）と、当該撮像装置１において、この８個のＬＥＤとは離れた位置に設置された１個のＬＥＤとで構成される。これらのＬＥＤは、ライブビュー撮影時、画像記録時に、ユーザの操作に従って選択的に発光する。このように照明のための光線の到来方向を変更させて顔を撮影することで、人為的に陰影がコントロールされた顔画像を取得することができる。
【００２０】
このように構成される撮像装置１では、ダイナミックレンジを拡大して撮影されたハイライト用画像と、ダイナミックレンジを拡大することなく撮影され、さらにガンマ補正されたシャドウ用画像とを用意し、陰影を強調するためのマスク画像（シャドウマスク画像）を用いてハイライト用画像とシャドウ用画像とをαブレンドすることにより、顔の立体感を適切に補正した画像（以下、「陰影強調画像」という。）を生成することができる機能を有する。このとき、シャドウマスク画像において、顔周辺と背景とで陰影のグラデーションを異なるものとすることで、より適切な陰影強調画像を生成することができる。
【００２１】
図２は、本実施形態における陰影強調画像の生成を説明するための模式図である。
本実施形態の陰影強調画像が生成される場合、図２に示すように、ダイナミックレンジを拡大して撮影されたハイライト用画像と、ダイナミックレンジを拡大することなく撮影され、さらにガンマ補正されたシャドウ用画像とが生成される。シャドウ用画像が生成される場合、ハイライト用画像の顔領域とシャドウ用画像の顔領域との明るさ（輝度）の差が小さいほど、ガンマ補正の強度が高く設定される。また、後述するように、顔用のグラデーションマスク画像と背景用のグラデーションマスク画像とを、顔領域を表す顔マスク画像に基づいて合成することで、陰影を強調するためのシャドウマスク画像が生成される。本実施形態において、シャドウマスク画像では、顔周辺と背景とでグラデーションが異なるものとされる。そのため、顔への陰影強調効果を強めると共に、自然な陰影の強調を行うことができる。そして、シャドウマスク画像を用いて、ハイライト用画像とシャドウ用画像とをαブレンドにより画像合成し、顔の立体感を適切に補正した陰影強調画像を作成する。シャドウマスク画像の各画素値は、αブレンドによる画像合成の際に、対応する各画素のα値となる。
【００２２】
［シャドウマスク画像の作成］
図３は、シャドウマスク画像の作成を説明するための模式図である。
【００２３】
シャドウマスク画像は、顔用のグラデーションマスク画像と背景用のグラデーションマスク画像とを、顔領域を表す顔マスク画像をα値としてαブレンドすることにより作成される。
【００２４】
［顔用のグラデーションマスク画像の作成］
図４は、顔用のグラデーションマスク画像の作成を説明するための模式図である。
顔用のグラデーションマスク画像が作成される場合、まず、ハイライト用画像において、顔の輪郭情報が検出される。ここでは、顔の輪郭情報として、両眼の間の点と顎先の点とを結ぶ顔の中心線、及び、両眼の外側に位置する顔の輪郭点とが検出される。
そして、検出された顔の輪郭情報に応じて、顔用のグラデーションの角度及び幅が決定され、顔用のグラデーションマスク画像のベース画像が作成される。
さらに、顔用のグラデーションマスク画像のベース画像に対して、バイラテラルフィルタによって平滑化処理が行われる。
平滑化処理が行われた結果、顔用のグラデーションマスク画像が作成される。
【００２５】
［背景用のグラデーションマスク画像の作成］
図５は、背景用のグラデーションマスク画像の作成を説明するための模式図である。
背景用のグラデーションマスク画像が作成される場合、まず、ハイライト用画像において、顔の輪郭情報が検出される。ここでは、顔の輪郭情報として、両眼の間の点と顎先の点とを結ぶ顔の中心線が検出される。
そして、検出された顔の輪郭情報に応じて、背景用のグラデーションの角度及び幅が決定され、背景用のグラデーションマスク画像のベース画像が作成される。
さらに、背景用のグラデーションマスク画像のベース画像に対して、バイラテラルフィルタによって平滑化処理が行われる。
平滑化処理が行われた結果、背景用のグラデーションマスク画像が作成される。
【００２６】
［顔マスク画像の作成］
シャドウマスク画像の作成において用いられる顔マスク画像は、予め記憶されている顔マスク画像のベース画像を、撮影された画像における顔の状態に応じて加工して作成される。
図６は、顔マスク画像のベース画像を示す模式図である。
顔マスク画像が作成される場合、まず、撮影された画像における顔検出が行われる。
そして、検出された顔の向きに応じて、グラデーション（ぼかし部）の縦横の向きが決定される。
さらに、検出された顔のサイズに応じて、グラデーション（ぼかし部）のサイズを変更する。
そして、顔検出によって検出された顔の位置に応じて、サイズが変更されたグラデーション（ぼかし部）を配置する。
この結果、顔マスク画像が作成される。
【００２７】
図７は、図１の撮像装置１の機能的構成のうち、陰影強調画像生成処理を実行するための機能的構成を示す機能ブロック図である。
陰影強調画像生成処理とは、ダイナミックレンジを拡大して撮影されたハイライト用画像と、ダイナミックレンジを拡大することなく撮影され、さらにガンマ補正されたシャドウ用画像とを、陰影を強調するためのシャドウマスク画像を用いてαブレンドすることにより、顔の立体感を適切に補正した陰影強調画像を生成する一連の処理をいう。
【００２８】
陰影強調画像生成処理を実行する場合には、図７に示すように、ＣＰＵ１１において、画像取得部５１と、顔検出部５２と、画像処理部５３と、マスク画像作成処理部５４と、が機能する。
【００２９】
また、記憶部１９の一領域には、画像記憶部７１と、ベース画像記憶部７２と、が設定される。
【００３０】
画像記憶部７１には、撮像部１６から出力された画像のデータが記憶される。
ベース画像記憶部７２には、顔マスク画像のベース画像のデータが記憶される。
【００３１】
画像取得部５１は、撮像部１６により撮像された画像に現像処理が行われた撮像画像のデータ、或いは画像記憶部７１から処理対象となる画像のデータを取得する。本実施形態において、画像取得部５１は、ダイナミックレンジを拡大して撮影された画像（ハイライト用画像）と、ダイナミックレンジを拡大することなく撮影された画像とを取得する。
【００３２】
顔検出部５２は、画像から顔を検出すると共に、検出した顔において顔を構成する各器官を検出する。また、顔検出部５２は、両眼の間の点と顎先の点とを結ぶ顔の中心線、及び、両眼の外側に位置する顔の輪郭点等を含む顔の輪郭情報を取得する。顔検出及び各器官を検出する場合、既存の顔検出技術及び器官検出技術を用いることができる。
【００３３】
画像処理部５３は、陰影強調画像の生成に関連する各種の画像処理を実行する。
具体的には、画像処理部５３は、ダイナミックレンジを拡大することなく撮影された画像に対して、ガンマ補正処理を実行する。このとき、画像処理部５３は、ハイライト用画像の顔領域とシャドウ用画像の顔領域との明るさ（輝度）の差が小さいほど、ガンマ補正の強度を高く設定してガンマ補正処理を実行する。また、画像処理部５３は、シャドウマスク画像を用いて、ハイライト用画像とシャドウ用画像とをαブレンドにより画像合成する。その結果、陰影強調画像が作成される。
なお、画像処理部５３は、主に、彩度低減、明度アップ、青色方向への色相回転の３点の要素の補正を行う美白処理を実行することとしてもよい。また、画像処理部５３は、バイラテラルフィルタ（或いは他の平滑化フィルタ）によって肌を滑らかにする補正を行う美肌処理を実行することとしてもよい。
【００３４】
マスク画像作成処理部５４は、顔用のグラデーションマスク画像を作成する。具体的には、マスク画像作成処理部５４は、ハイライト用画像において検出された顔の輪郭情報（両眼の間の点と顎先の点とを結ぶ顔の中心線、及び、両眼の外側に位置する顔の輪郭点）に応じて、顔用のグラデーションの角度及び幅を決定し、顔用のグラデーションマスク画像のベース画像を作成する。そして、マスク画像作成処理部５４は、顔用のグラデーションマスク画像のベース画像に対して、バイラテラルフィルタによって平滑化処理を行い、顔用のグラデーションマスク画像を作成する。
また、マスク画像作成処理部５４は、背景用のグラデーションマスク画像を作成する。具体的には、マスク画像作成処理部５４は、ハイライト用画像において検出された顔の輪郭情報（両眼の間の点と顎先の点とを結ぶ顔の中心線）に応じて、背景用のグラデーションの角度及び幅を決定し、背景用のグラデーションマスク画像のベース画像を作成する。そして、マスク画像作成処理部５４は、背景用のグラデーションマスク画像のベース画像に対して、バイラテラルフィルタによって平滑化処理を行い、背景用のグラデーションマスク画像を作成する。
また、マスク画像作成処理部５４は、顔マスク画像を作成する。具体的には、マスク画像作成処理部５４は、撮影された画像における顔の向きに応じて、グラデーション（ぼかし部）の縦横の向きを決定する。また、マスク画像作成処理部５４は、検出された顔のサイズに応じて、グラデーション（ぼかし部）のサイズを変更する。そして、マスク画像作成処理部５４は、顔検出によって検出された顔の位置に応じて、サイズが変更されたグラデーション（ぼかし部）を配置し、顔マスク画像を作成する。
さらに、マスク画像作成処理部５４は、顔用のグラデーションマスク画像と背景用のグラデーションマスク画像とを、顔領域を表す顔マスク画像をα値としてαブレンドすることにより、シャドウマスク画像を作成する。
【００３５】
図８は、図７の機能的構成を有する図１の撮像装置１が実行する陰影強調画像生成処理の流れを説明するフローチャートである。
美顔画像生成処理は、ユーザによる入力部１７への美顔画像生成処理開始の操作により開始される。
陰影強調画像生成処理開始の操作は、撮影指示操作とすることが可能であり、この撮影指示操作に応じて撮像部１６により撮像された画像を対象として、現像処理を行い、引き続き陰影強調画像生成処理を行うことができる。
【００３６】
ステップＳ１１において、画像取得部５１は、撮像部１６により撮像された画像に現像処理が行われた撮像画像のデータ、或いは画像記憶部７１から処理対象となる画像を取得する。このとき、画像取得部５１は、ダイナミックレンジを拡大して撮影された画像（ハイライト用画像）と、ダイナミックレンジを拡大することなく撮影された画像とを取得する。
【００３７】
ステップＳ１２において、顔検出部５２は、処理対象となる画像において顔検出を行い、顔が検出されたか否かを判定する。
顔が検出されなかった場合には、ステップＳ１２においてＮＯと判定されて、陰影強調画像生成処理は終了する。
顔が検出された場合には、ステップＳ１２においてＹＥＳと判定されて、処理はステップＳ１３に進む。
【００３８】
ステップＳ１３において、画像処理部５３は、ダイナミックレンジを拡大することなく撮影された画像に対して、ガンマ補正処理を実行する。このとき、画像処理部５３は、ハイライト用画像の顔領域とシャドウ用画像の顔領域との明るさ（輝度）の差が小さいほど、ガンマ補正の強度を高く設定してガンマ補正処理を実行する。
ステップＳ１４において、顔検出部５２は、検出された顔において顔を構成する各器官、及び、顔の輪郭情報（両眼の間の点と顎先の点とを結ぶ顔の中心線、及び、両眼の外側に位置する顔の輪郭点等）を取得する。
【００３９】
ステップＳ１５において、マスク画像作成処理部５４は、陰影強調画像生成処理で用いられるマスク画像（顔用のグラデーションマスク画像、背景用のグラデーションマスク画像、顔マスク画像及びシャドウマスク画像）を作成する。
【００４０】
ステップＳ１６において、画像処理部５３は、シャドウマスク画像を用いて、ハイライト用画像とシャドウ用画像とをαブレンドにより画像合成する。その結果、顔の立体感を適切に補正した陰影強調画像が生成される。
その後、陰影強調画像生成処理が終了する。
【００４１】
［変形例１］
上述の実施形態において、顔マスク画像を作成する場合、グラデーション（ぼかし部）の位置及びサイズを以下のように決定することとしてもよい。
図９は、変形例１における顔マスク画像の作成を説明するための模式図である。
変形例１において、顔マスク画像が作成される場合、顔検出枠の中心から頭部の方向へ、顔検出枠の高さに対して所定比率（例えば４０％）の位置に、顔マスク画像の中心座標が設定される。
また、顔マスク画像のサイズが、顔検出枠のサイズの２倍（例えば、縦方向が２倍）に設定される。
撮影画像全体の画角に対して、このように中心座標及びサイズが設定された顔マスク画像が作成され、このマスク画像を、図３におけるシャドウマスク画像の生成に用いることができる。
この場合、顔検出の結果取得される顔検出枠を利用して、より簡単に顔マスク画像を作成することができる。
【００４２】
［変形例２］
上述の実施形態において、撮影された画像に複数の人物が含まれている場合、背景用のグラデーションマスク画像におけるシャドウ領域に人物が包含されることを避けて、背景用のグラデーションの幅を決定することとしてもよい。
図１０は、撮影された画像に複数の人物が含まれている場合のグラデーションマスク画像の設定方法を示す模式図であり、図１０（ａ）は、向かって左の人物Ａに影がかかっている場合、図１０（ｂ）は、向かって右の人物Ｂに影がかかっている場合を示している。
図１０示すように、本変形例においては、影がかかっている人物を対象として、陰影強調画像生成処理を実行すると共に、影がかかっていない人物が背景用のグラデーションマスク画像におけるハイライト領域に含まれるように、背景用グラデーション画像が作成される。
これにより、一方の被写体の人物全体が暗い画像に補正されることを抑制できる。
【００４３】
以上のように構成される撮像装置１は、画像取得部５１と、画像処理部５３と、を備える。
画像取得部５１は、顔画像を取得する。
画像処理部５３は、画像取得部５１によって取得された顔画像の明るさを調整する。
画像処理部５３は、顔の立体形状に基づいて当該顔の所定領域を透過領域（αブレンド等により合成する領域）としたマップデータ（マスク画像）を用いて、明るさを調整された顔画像同士を合成する。
これにより、撮像装置１においては、顔の立体感を適切に補正した画像（陰影強調画像）を生成することができる。
【００４４】
マップデータはさらに、光線の到来方向に基づいて顔を含む顔周囲の領域を透過領域とする。
これにより、撮像装置１においては、光源からの光によって顔の陰影が強調された印象の画像を生成することができる。
【００４５】
画像処理部５３は、顔画像を所定の度合いで明るくなるように、また、所定の度合いで暗くなるように顔画像を夫々調整し、これらの顔画像同士を合成する。
これにより、顔画像に対して自然な陰影の強調を施すことができる。
【００４６】
また、撮像装置１は、マスク画像作成処理部５４を備える。
マスク画像作成処理部５４は、顔画像において、光線の到来方向により暗くなる領域を指定する。
これにより、顔画像に対して、任意の方向から光線が到来した状態を想定して、陰影の強調を行うことができる。
【００４７】
なお、本発明は、上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。
【００４８】
上述の実施形態では、ダイナミックレンジを拡大して撮影されたハイライト用画像と、ダイナミックレンジを拡大することなく撮影され、さらにガンマ補正されたシャドウ用画像とを用いて陰影強調画像を生成することとしたが、これに限られない。例えば、ダイナミックレンジを拡大することなく撮影された画像の明るさを高める補正を行った画像と、ダイナミックレンジを拡大することなく撮影された画像の明るさを低下させる補正を行った画像とを用いて陰影強調画像を生成することとしてもよい。
【００４９】
また、上述の実施形態において、シャドウマスク画像の内容は、シャドウマスク画像が陰影を強調する効果を創出するものとなれば、種々の形態に変更することが可能である。
【００５０】
また、上述の実施形態では、本発明が適用される撮像装置１は、デジタルカメラを例として説明したが、特にこれに限定されない。
例えば、本発明は、画像処理機能を有する電子機器一般に適用することができる。具体的には、例えば、本発明は、ノート型のパーソナルコンピュータ、プリンタ、テレビジョン受像機、ビデオカメラ、携帯型ナビゲーション装置、携帯電話機、スマートフォン、ポータブルゲーム機等に適用可能である。
【００５１】
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
換言すると、図７の機能的構成は例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が撮像装置１に備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは特に図７の例に限定されない。
また、１つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。
本実施形態における機能的構成は、演算処理を実行するプロセッサによって実現され、本実施形態に用いることが可能なプロセッサには、シングルプロセッサ、マルチプロセッサ及びマルチコアプロセッサ等の各種処理装置単体によって構成されるものの他、これら各種処理装置と、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ‐Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）等の処理回路とが組み合わせられたものを含む。
【００５２】
一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。
【００５３】
このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布される図１のリムーバブルメディア３１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。リムーバブルメディア３１は、例えば、磁気ディスク（フロッピディスクを含む）、光ディスク、または光磁気ディスク等により構成される。光ディスクは、例えば、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ  Ｄｉｓｋ−Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ），ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｋ），Ｂｌｕ−ｒａｙ（登録商標）  Ｄｉｓｃ（ブルーレイディスク）等により構成される。光磁気ディスクは、ＭＤ（Ｍｉｎｉ−Ｄｉｓｋ）等により構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されている図１のＲＯＭ１２や、図１の記憶部１９に含まれるハードディスク等で構成される。
【００５４】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的或いは個別に実行される処理をも含むものである。
【００５５】
以上、本発明のいくつかの実施形態について説明したが、これらの実施形態は、例示に過ぎず、本発明の技術的範囲を限定するものではない。本発明はその他の様々な実施形態を取ることが可能であり、さらに、本発明の要旨を逸脱しない範囲で、省略や置換等種々の変更を行うことができる。これら実施形態やその変形は、本明細書等に記載された発明の範囲や要旨に含まれると共に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【００５６】
以下に、本願の出願当初の特許請求の範囲に記載された発明を付記する。
［付記１］
顔画像を取得する取得手段と、
前記取得手段によって取得された顔画像の明るさを調整する調整手段と、
顔の立体形状に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、前記調整手段によって調整された顔画像同士を合成する合成手段と、
を備えることを特徴とする画像処理装置。
［付記２］
前記マップデータはさらに、光線の到来方向に基づいて前記顔を含む顔周囲の領域を透過領域とすることを特徴とする付記１記載の画像処理装置。
［付記３］
前記調整手段は、前記顔画像を所定の度合いで明るくなるように、また、所定の度合いで暗くなるように前記顔画像を夫々調整し、前記合成手段はこれらの顔画像同士を合成することを特徴とする付記２記載の画像処理装置。
［付記４］
前記調整手段は、前記顔画像を所定の度合いで暗くし、更に輝度を下るように調整することを特徴とする付記３記載の画像処理装置。
［付記５］
前記顔画像において、前記光線の到来方向により暗くなる領域を指定する指定手段を更に備えたことを特徴とする付記２乃至４の何れかに記載の画像処理装置。
［付記６］
顔画像を取得する取得処理と、
前記取得処理によって取得された顔画像の明るさを調整する調整処理と、
顔の立体形状に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、前記調整処理によって調整された顔画像同士を合成する合成処理と、
を含むことを特徴とする画像処理方法。
［付記７］
コンピュータに、
顔画像を取得する取得手段と、
前記取得手段によって取得された顔画像の明るさを調整する調整手段と、
顔の立体形状に基づいて当該顔の所定領域を透過領域としたマップデータを用いて、前記調整手段によって調整された顔画像同士を合成する合成手段と、
を実現させることを特徴とするプログラム。
【符号の説明】
【００５７】
１・・・撮像装置，１１・・・ＣＰＵ，１２・・・ＲＯＭ，１３・・・ＲＡＭ，１４・・・バス，１５・・・入出力インターフェース，１６・・・撮像部，１７・・・入力部，１８・・・出力部，１９・・・記憶部，２０・・・通信部，２１・・・ドライブ，２２・・・照明部，３１・・・リムーバブルメディア，５１・・・画像取得部，５２・・・顔検出部，５３・・・画像処理部，５４・・・マスク画像作成処理部，７１・・・画像記憶部，７２・・・固定マップ記憶部
【図１】
2019070872.tif 000003
【図２】
2019070872.tif 000004
【図３】
2019070872.tif 000005
【図４】
2019070872.tif 000006
【図５】
2019070872.tif 000007
【図６】
2019070872.tif 000008
【図７】
2019070872.tif 000009
【図８】
2019070872.tif 000010
【図９】
2019070872.tif 000011
【図１０】
2019070872.tif 000012