(57)【要約】【課題】ユーザの顔に合ったメイクを支援する。【解決手段】画像処理エンジン１３において、顔を構成する顔器官に応じたメイク枠情報を保持しておき、顔器官検出エンジン１２にて検出された顔器官の位置及び大きさに基づいてメイクを施す位置を特定し、特定された位置にその顔器官に応じたメイク枠情報が配置されるように、顔検出エンジン１１にて撮影画像から検出された顔画像にそのメイク枠情報を重ね合わせる。【選択図】図１
2013186801.tif 000002
【特許請求の範囲】
【請求項１】
撮影画像から顔画像を検出する顔検出手段と、
前記顔検出手段にて検出された顔画像から、顔を構成する顔器官を検出する顔器官検出手段と、
顔器官に応じたメイク支援情報を保持し、前記顔器官検出手段にて検出された顔器官の位置及び大きさに基づいてメイクを施す位置を特定し、当該位置に当該顔器官に応じたメイク支援情報が配置されるように、前記顔検出手段にて検出された顔画像に当該メイク支援情報を重ね合わせる画像重ね合わせ手段とを有する画像処理装置。
【請求項２】
請求項１に記載の画像処理装置において、
前記メイク支援情報は、メイクを施す領域を示す枠である画像処理装置。
【請求項３】
請求項１または請求項２に記載の画像処理装置において、
前記画像重ね合わせ手段は、前記メイク支援情報を、施すメイクの色に応じて顔器官毎に複数保持している画像処理装置。
【請求項４】
請求項１乃至３のいずれか１項に記載の画像処理装置において、
前記画像重ね合わせ手段は、前記メイク支援情報を、現在のメイクの状態に応じて顔器官毎に複数保持し、前記顔検出手段にて検出された顔画像について現在のメイクの状態を認識し、前記顔検出手段にて検出された顔画像に、前記認識されたメイクの状態に応じたメイク支援情報を重ね合わせる画像処理装置。
【請求項５】
請求項１乃至４のいずれか１項に記載の画像処理装置において、
前記顔検出手段は、撮影された静止画、動画、またはライブビューで表示される画像から顔画像を検出する画像処理装置。
【請求項６】
請求項１乃至５に記載の画像処理装置が搭載されたカメラ付き携帯端末。
【請求項７】
請求項１乃至５に記載の画像処理装置を有するサーバ装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、メイクを支援する画像処理装置に関する。
【背景技術】
【０００２】
メイクのお手本を参考にメイクをする際、テレビや雑誌等の媒体を見ながらメイクを行ったり、眉毛やチークのテンプレートを肌に直接当ててメイクを行ったりする必要がある。その際、自身の顔では実際にどの領域をメイクすればよいか分かりづらく、また、自分の顔に適したテンプレートが無い場合もあり、お手本を参考にメイクをするのは容易ではない。
【０００３】
ここで、お手本となるモデルの顔写真に基づいてテンプレート画像を生成し、このテンプレート画像をユーザの顔画像に重ね合わせてメイクを支援する技術が、例えば特許文献１に開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１１−８３９７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１に開示された技術においては、お手本となるモデルの顔写真に基づいて生成されたテンプレート画像を用いてメイクを支援するものであるため、ユーザの顔に合ったメイクを支援できるとは言いがたい。
【０００６】
本発明は、上述した技術が有する問題点に鑑みてなされたものであって、ユーザの顔に合ったメイクを支援することができる画像処理装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するために本発明は、
撮影画像から顔画像を検出する顔検出手段と、
前記顔検出手段にて検出された顔画像から、顔を構成する顔器官を検出する顔器官検出手段と、
顔器官に応じたメイク支援情報を保持し、前記顔器官検出手段にて検出された顔器官の位置及び大きさに基づいてメイクを施す位置を特定し、当該位置に当該顔器官に応じたメイク支援情報が配置されるように、前記顔検出手段にて検出された顔画像に当該メイク支援情報を重ね合わせる画像重ね合わせ手段とを有する。
【発明の効果】
【０００８】
以上説明したように本発明によれば、ユーザの顔に合ったメイクを支援することができる。
【図面の簡単な説明】
【０００９】
【図１】本発明の画像処理装置の実施の一形態を示す図である。
【図２】図１に示した画像処理装置の動作を説明するためのフローチャートである。
【図３】図１に示した画像処理装置の動作を説明するための図である。
【発明を実施するための形態】
【００１０】
以下に、本発明の実施の形態について図面を参照して説明する。
【００１１】
図１は、本発明の画像処理装置の実施の一形態を示す図である。
【００１２】
本形態は図１に示すように、カメラ付き携帯端末である携帯電話機１に搭載され、顔検出手段となる顔検出エンジン１１と、顔器官検出手段となる顔器官検出エンジン１２と、画像重ね合わせ手段となる画像処理エンジン１３とを有している。
【００１３】
顔検出エンジン１１は、携帯電話機１のカメラ２０にて撮影された被写体の撮影画像から顔画像を検出する。
【００１４】
顔器官検出エンジン１２は、顔検出エンジン１１にて検出された顔画像から、顔を構成する眉、目、口、鼻等の顔器官を検出する。
【００１５】
画像処理エンジン１３は、顔器官に応じたメイク支援情報となるメイク枠情報を保持し、顔器官検出エンジン１２にて検出された顔器官の位置及び大きさに基づいてメイクを施す位置を特定し、その位置に顔器官に応じたメイク枠情報が配置されるように、顔検出エンジン１１にて検出された顔画像にそのメイク枠情報を重ね合わせ、ディスプレイ３０に表示する。
【００１６】
以下に、上記のように構成された画像処理装置１０の動作について説明する。
【００１７】
図２は、図１に示した画像処理装置の動作を説明するためのフローチャートであり、図３は、図１に示した画像処理装置１０の動作を説明するための図である。
【００１８】
カメラ２０において撮影された被写体の撮影画像が画像処理装置１１にて取得されると（ステップ１）、まず、顔検出エンジン１１において、カメラ２０から取得された撮影画像から顔画像が検出される（ステップ２）。この顔画像の検出は、一般的な顔認識技術を用いて行うことが考えられる。また、画像処理装置１１にて取得される撮影画像は、カメラ２０にて撮影された静止画、動画、またはライブビューでディスプレイ３０に表示される画像のいずれであってもよい。
【００１９】
次に、顔器官検出エンジン１２において、顔検出エンジン１１にて検出された顔画像から顔器官が検出される（ステップ３）。図３（ａ）に示すように、顔画像２には、顔を構成する眉、目、口、鼻等の顔器官３が含まれており、顔器官検出エンジン１２においては、一般的な眉、目、口、鼻等の顔器官の形状とのパターンマッチングを行うことにより、顔器官を検出することが考えられる。
【００２０】
次に、画像処理エンジン１３において、顔器官検出エンジン１２にて検出された顔器官のそれぞれについて、図３（ｂ）に示すように、顔器官の端部の位置を示すことにより顔器官の位置及び大きさを示すこととなる器官点４が抽出され、この器官点４に基づいてメイクを施す位置が特定される（ステップ４）。
【００２１】
次に、画像処理エンジン１３において、顔検出エンジン１１にて検出された顔画像に、予め保持されたメイク枠情報が重ね合わされる（ステップ５）。画像処理エンジン１３においては、顔器官毎に、顔器官に応じたメイク枠情報を始めとしたメイクのお手本となるメイク支援情報が保持されている。そのため、例えば、頬に対してチークを塗るべき領域を示すメイク枠情報が保持されており、図３（ｃ）に示すように、このメイク枠情報によるメイク枠５が、顔画像２のうちステップ４にて特定された位置に重ね合わされる。
【００２２】
このようにメイク枠５が重ね合わされた顔画像２は、ディスプレイ３０に表示される（ステップ６）。なお、実際には、カメラ２０において撮影された被写体の撮影画像がディスプレイ３０に表示されている状態において上述した一連の処理が行われることになり、ディスプレイ３０に表示されている撮影画像にメイク枠５が描画されていくこととなる。そのため、カメラ２０にて撮影された撮影画像がライブビューでディスプレイ３０に表示される場合は、リアルタイムな処理となる。
【００２３】
これにより、ユーザは、ディスプレイ３０に表示されているユーザの顔画像２に重ね合わされたメイク枠５を用いてチークを塗ることで、お手本を参照しながらメイクを施すことができる。その他、眉、アイシャドウ、口紅等についても、同様に行われる。
【００２４】
このように、本形態においては、顔を構成する顔器官に応じたメイク枠情報を保持しておき、撮影画像から検出された顔器官の位置及び大きさに基づいてメイクを施す位置を特定し、特定された位置にその顔器官に応じたメイク枠情報が配置されるように、撮影画像から検出された顔画像にそのメイク枠情報を重ね合わせることにより、ユーザの顔に合ったメイクを支援することができる。
【００２５】
なお、本形態においては、メイク支援情報としてメイク枠情報を顔画像に重ね合わせているが、メイク支援情報としては、メイクを施す位置を特定可能なものであればメイク枠情報に限らない。また、これらメイクを施す位置を特定可能なメイク支援情報は、顔画像の特徴あるいは向きに応じて設定される。
【００２６】
また、メイク支援情報として、メイクを施す位置を特定可能なものに限らず、実際のメイクの状態を示すものとすれば、実際にメイクを行った状態のユーザの顔画像をディスプレイ３０に表示することができ、ユーザにとって似合うメイク／似合わないメイクを事前に認識させることができる。また、ユーザが普段使用していない色のメイクも抵抗なく試すことができるため、その後のメイクの幅を広げることも可能となる。
【００２７】
また、メイク枠情報等のメイク支援情報を、施すメイクの色に応じて変えてもよい。その場合、画像処理エンジン１３において、メイク支援情報を、施すメイクの色に応じて顔器官毎に複数保持しておき、例えば、ユーザが指定した色に応じたメイク支援情報を顔画像に重ね合わせることになる。
【００２８】
また、現在のユーザのメイクの状態に応じたメイク支援情報を顔画像に重ねることも考えられる。その場合、画像処理エンジン１３において、メイク支援情報を、現在のメイクの状態に応じて顔器官毎に複数保持しておき、顔検出エンジン１１にて検出された顔画像について現在のメイクの状態を認識し、顔検出エンジン１１にて検出された顔画像に、認識されたメイクの状態に応じたメイク支援情報を重ね合わせることになる。
【００２９】
なお、上述した画像処理装置１０は、図１に示したようなカメラ２０を有する携帯電話機１以外にも、デジタルカメラやＷｅｂカメラ、ＰＤＡ等、カメラ付き携帯端末に搭載することができ、また、通信回線に接続可能なサーバ装置に備えてもよい。
【符号の説明】
【００３０】
１    携帯電話機
２    顔画像
３    顔器官
４    器官点
５    メイク枠
１０    画像処理装置
１１    顔検出エンジン
１２    顔器官検出エンジン
１３    画像処理エンジン
２０    カメラ
３０    ディスプレイ
【図１】
2013186801.tif 000003
【図２】
2013186801.tif 000004
【図３】
2013186801.tif 000005