(57)【特許請求の範囲】
【請求項１】
被験者の顔を撮影するカメラ装置と、このカメラ装置により撮影された被験者の顔の画像を写す表示装置と、この表示装置に写し出された被験者の顔の画像に仮想的に化粧を施す手段とを備えた化粧アドバイスシステムであって、
化粧による顔の変化を表わす化粧データの画像が複数蓄積されたメモリを備え、
前記仮想的に化粧を施す手段は、前記メモリに蓄積された化粧データの画像のいずれかを選択し前記被験者の顔の画像に適合するように変形させて被験者の顔の画像と合成する手段を備え、
前記化粧データは、化粧を施したモデルの顔の画像を撮影し、この顔の画像から前記モデルの化粧前の顔部分の画像を除去して抽出された画像データである
化粧アドバイスシステム。
【請求項２】
前記化粧データの透過率を前記化粧データと被験者の画像とを合成する際に用いる請求項１記載の化粧アドバイスシステム。
【請求項３】
化粧データを異なる特徴を有する顔のタイプ別にそれぞれ分類して前記メモリに蓄積する手段を備えた請求項１または２記載の化粧アドバイスシステム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は化粧方法のアドバイスおよび化粧品選択のためのアドバイスに利用する。本発明は化粧品販売店の店頭に配置し販売員を援助する装置に利用する。
【０００２】
【従来の技術】
店頭における化粧品の販売には、従来より実演販売が広く行われている。その一般的な形態は、販売員が客である被験者の要望を聞き、化粧方法および化粧品を選択し、被験者の顔に実際に化粧を施すことにより行われる。実演販売は被験者の顔を用いて化粧を施すので、被験者にその効果を知らしめる上で有効な手段であるが、仕上がりが被験者の要望に沿わない場合には、化粧を落とし、再度、やり直すことが必要になる。
【０００３】
【発明が解決しようとする課題】
このように、従来の実演販売では、被験者に化粧を施したり化粧をやり直したりする時間が多くかかり、効率の良い販売を行うことが困難である。
【０００４】
そこで、被験者の顔の画像を表示装置に表示させ、コンピュータによる画像処理技術を駆使し、化粧のシミュレーションを行う方法が特開平１０−２１２９０号公報に開示されている。そこでは、被験者の顔の画像を表示装置に表示させておき、その肌の色を変化させることにより擬似的に化粧を施したときと同じ状態を作り出す。
【０００５】
しかし、この方法においても被験者と打合せを行いながら、表示装置に表示された顔の画像に化粧を施すのであるから、その手数は実際に被験者の顔に化粧を施す場合と比較してほとんど変わりはない。また、画面上の顔の画像に化粧を施すときには、実際に化粧を施すときと比較して使用する道具や手順が異なるために、違和感が生じることは否めない。
【０００６】
また、これらの方法では、販売員が被験者の要望を聞き、化粧を施すので、販売員と被験者とで感覚に相異があると、被験者の希望するものとは異なる化粧を販売員が施してしまうケースも生じる可能性がある。
【０００７】
本発明は、このような背景に行われたものであって、的確に化粧の仕上がり具合を把握することができる化粧アドバイスシステムを提供することを目的とする。本発明は、効率良く化粧品の販売を行うことができる化粧アドバイスシステムを提供することを目的とする。
【０００８】
【課題を解決するための手段】
本発明の第一の観点は化粧アドバイスシステムであって、被験者の顔を撮影するカメラ装置と、このカメラ装置により撮影された被験者の顔の画像を写す表示装置と、この表示装置に写し出された被験者の顔の画像に仮想的に化粧を施す手段とを備えた化粧アドバイスシステムである。
【０００９】
ここで、本発明の特徴は、化粧による顔の変化を表わす化粧データの画像が複数蓄積されたメモリを備え、前記仮想的に化粧を施す手段は、前記メモリに蓄積された化粧データの画像のいずれかを選択し前記被験者の顔の画像に適合するように変形させて被験者の顔の画像と合成する手段を備えたところにある。
【００１０】
すなわち、本発明では、まず、被験者は、モデルに化粧を施した写真により所望の化粧方法および化粧品を選択する。次に、被験者が選択したモデルの化粧データを被験者の顔の画像に合成することにより、被験者が化粧を施した場合の状態をシミュレートすることができる。
【００１１】
このとき、化粧データをそのまま被験者の顔の画像に合成することは困難であるから、この化粧データを被験者の顔の画像に適合するようにコンピュータにより変形する。
【００１２】
これにより、被験者は、化粧を施したモデルの写真等によりあらかじめ化粧の仕上がり具合を確認した上で、自分の顔にその化粧を施した場合の状態を確認することができるため、従来の実演販売のように、販売員と被験者との感覚の相異により被験者の希望するものとは異なる化粧を販売員が施してしまうことを回避することができる。したがって、的確に化粧の仕上がり具合を把握することできるとともに、効率良く化粧品の販売を行うことができる。
【００１３】
顔の画像処理の技術については、参考文献（一松信、村岡洋一監修、日本学際会議編「感性と情報処理」、電子情報通信学会論文誌、AUG,1997.Vol.J80-A NO.8,pp.1231-1249）に詳しい。
【００１４】
本発明においては、化粧データを異なる特徴を有する顔のタイプ別にそれぞれ分類して前記メモリに蓄積する手段を備えることが望ましい。すなわち、顔つき、顔の輪郭その他の要素にしたがって化粧データをあらかじめ分類してメモリに記憶しておくことにより、多数の化粧データの中から被験者の顔に適合する化粧データを速やかに選択することができる。
【００１５】
本発明の第二の観点は前記第一の観点における化粧データの作成方法であって、化粧を施したモデルの顔の画像を撮影し、この顔の画像から前記モデルの化粧前の顔部分の画像を除去した画像を化粧データとして抽出することを特徴とする。すなわち、化粧データとは、化粧による顔の変化を表わすデータであり、化粧を施したモデルの顔を撮影しておき、その画像から化粧前の顔の画像を差し引いた残りの画像を化粧データとする。
【００１６】
【発明の実施の形態】
発明の実施の形態を図１を参照して説明する。
【００１７】
本発明は化粧アドバイスシステムであって、被験者の顔を撮影するカメラ装置１と、このカメラ装置１により撮影された被験者の顔の画像を写す表示装置２と、この表示装置２に写し出された被験者の顔の画像に仮想的に化粧を施す手段である制御部３とを備えた化粧アドバイスシステムである。
【００１８】
ここで、本発明の特徴とするところは、化粧による顔の変化を表わす化粧データ画像が複数蓄積されたメモリ４を備え、制御部３は、メモリ４に蓄積された化粧データ画像のいずれかを選択し前記被験者の顔の画像に適合するように変形して被験者の顔の画像と合成するところにある。
【００１９】
次に、図２を参照して化粧データ画像と被験者の顔の画像とを合成する手順について説明する。被験者の顔を撮影してその化粧前の顔画像（Ａ−１）における肌の色のデータを抽出するとともにワイヤーフレーム（Ａ−２）を作成する。ワイヤーフレームについては既知の技術であり詳細な説明は省略するが、化粧前の顔画像上に配置された複数の特徴点を線で連結することにより得られる画像であり、顔の特徴を線と点で表わすことができる。
【００２０】
次に、メモリ４に蓄積された複数の化粧データ画像の中から被験者が所望するものを選択する。このとき、化粧データ画像を異なる特徴を有する顔のタイプ別にそれぞれ分類してメモリ４に蓄積しておくことにより、容易に選択を行うことができる。例えば、「大人顔でシャープ」、「大人顔でソフト」、「子供顔でシャープ」、「子供顔でソフト」と分類する。
【００２１】
選択された化粧データ画像（Ｂ−１）のワイヤーフレーム（Ｂ−２）を、被験者の化粧前の顔のワイヤーフレーム（Ａ−２）を参考にして被験者の化粧前の顔の画像に適合するように変形する（Ｃ−２）。変形された化粧データ画像のワイヤーフレームにしたがって化粧データ画像を変形する（Ｃ−１）。
【００２２】
このようにして作成された化粧データ画像（Ｃ−１）と被験者の化粧前の顔の画像とを合成し（＋）、被験者の化粧顔画像を得る（Ｄ）。
【００２３】
すなわち、化粧データ画像Ｍｓ（ｘ，ｙ）、被験者の化粧前の顔画像をＩ（ｘ，ｙ）、被験者の合成後の化粧顔をＯ（ｘ，ｙ）、透過率行列をＡ、単位行列をＥとし、各（ｘ，ｙ）は画像中の座標位置とするとき、
Ｏ（ｘ，ｙ）＝Ａ・Ｉ（ｘ，ｙ）＋（Ｅ−Ａ）・Ｍｓ（ｘ，ｙ）
として表わすことができる。
【００２４】
ワイヤーフレームによる変形合成の様子を図３に示す。左側のワイヤーフレームは化粧データ画像のワイヤーフレームであり、これを被験者の化粧前の顔画像のワイヤーフレームと一致させることにより右側の変形された化粧データ画像を得る。
【００２５】
図４は化粧データ画像の抽出を示す図である。化粧を施す前のモデルの顔画像を撮影し、その顔画像における肌の色のデータを抽出する（Ｅ−１）。また、モデルの化粧顔画像を撮影し、その化粧顔画像における肌の色のデータを抽出する（Ｆ−１）。化粧顔画像の肌の色のデータから化粧前の顔画像の肌の色のデータを減算し（−）、これにより化粧データ画像における肌の色のデータを得る（Ｇ）。
【００２６】
すなわち、化粧データ画像をＭｓ（ｘ，ｙ）、モデルの化粧顔画像をＯ0 （ｘ，ｙ）、モデルの化粧前の顔画像をＩ0 （ｘ，ｙ）、透過率行列をＡ0 、単位行列をＥとし、各（ｘ，ｙ）は画像中の座標位置とするとき、
Ｍｓ（ｘ，ｙ）＝（Ｅ−Ａ0 ）-1〔Ｏ0 （ｘ，ｙ）−Ａ0 ・Ｉ0 （ｘ，ｙ）〕
として表わすことができる。化粧データ画像Ｍｓ（ｘ，ｙ）は二次元的な発色パラメータを記述している。
【００２７】
このときモデルの化粧前の顔画像あるいは化粧顔画像に基づいて作成したワイヤーフレーム（Ｅ−２、Ｆ−２）は、図２に示した化粧顔の合成の際に利用する。
【００２８】
（実施例１）
女性モデル（２０代）のファンデーション塗布顔画像と化粧前の顔画像から抽出された化粧データ画像を用いて、被験者女性２名の化粧前の顔画像に基づく合成化粧顔を作成した。その際、ファンデーションの化粧データ画像の透過率行列を実測した値を用いた（Ａ＝０．７・Ｅ）。
【００２９】
（比較例１）
画像処理で作った一様な肌色で、透過率は実施例１と同一の半透明の画像フィルタを、実施例１と同じ被験者女性２名の化粧前の顔画像に処理し、化粧合成顔を作成した。被験者１および２に対して施した実際の化粧顔画像と上記合成化粧顔とを目視評価したところ、実施例１では、被験者１および２ともによく一致したが、比較例１では、被験者１については平面的に見え、被験者２については平面的な上に色味が違った。
【００３０】
（実施例２）
女性モデル（２０代）１名に、光沢の異なる２種類のファンデーションＡおよびＢを塗布し、それぞれの塗布顔画像と化粧前の顔画像から抽出された化粧データ画像を２種抽出し、これらを用いて被験者女性１名の化粧前の顔画像に基づく合成化粧顔を作成した。その際、ファンデーションの化粧データ画像の透過率行列を実測した値を用いた（Ａ＝０．７・Ｅ）。
【００３１】
（比較例２）
画像処理で作った光沢の異なる２種類の一様な肌色で、透過率は実施例２と同一の半透明の画像フィルタを、実施例２と同じ被験者女性１名の化粧前の顔画像に処理し、化粧合成顔を作成した。ファンデーションＡおよびＢに対して光沢感の違いが認知し得るか目視評価したところ、実施例２では違いがよくわかるのに対し、比較例２では、光沢の違いがわからない上に平面的に見えた。
【００３２】
（実施例３）
女性モデル（２０代）のファンデーション、アイシャドウ、チークの塗布顔と化粧前の顔から化粧データ画像を抽出し、これを用いて被験者女性２名の化粧前の顔画像に基づく合成化粧顔を作成した。化粧データ画像の透過率行列を実測した値を用いた（Ａ＝０．７・Ｅ）。
【００３３】
（比較例３）
画像処理で作った一様な肌色でアイシャドウ、チークに相当する部分に着色を施した、透過率は実施例３と同一の半透明の画像フィルタを、実施例３と同じ被験者女性２名の化粧前の顔画像に処理し、合成化粧顔を作成した。被験者１および２に対して、実際の化粧顔画像とそれら合成化粧顔とを目視評価したところ、実施例３では、被験者１および２ともによく一致したが、比較例３では、被験者１は平面的な上、艶感が異なり、被験者２は平面的な上、色味が異なった。
【００３４】
（実施例４）
化粧練習用のメイクアップドール（ビューラックス社製）のファンデーション、口紅、アイシャドウ、チークの塗布顔と化粧前の顔から化粧データ画像を抽出し、被験者女性２名の化粧前の顔画像を用いて合成化粧顔を作成した。化粧データ画像の透過率行列を実測した値を用いた（Ａ＝０．７・Ｅ）。
【００３５】
（比較例４）
画像処理で作った一様な肌色で口紅、アイシャドウ、チークに相当する部分に着色を施した、透過率は実施例４と同一の半透明の画像フィルタを、実施例４と同じ被験者女性２名の化粧前の顔画像に処理し、合成化粧顔を作成した。被験者１および２に対して、実際の化粧顔画像と、そられ合成化粧顔とを目視評価したところ、実施例４では、被験者１および２ともによく一致したが、比較例４では、被験者１は平面的な上、艶感が異なり、被験者２は平面的な上、色味が異なった。
【００３６】
【発明の効果】
以上説明したように、本発明によれば、的確に化粧の仕上がり具合を把握することができる。また、本発明の化粧アドバイスシステムを用いることにより店頭にて効率良く化粧品の販売を行うことができる。
【図面の簡単な説明】
【図１】本発明実施例の化粧アドバイスシステムの要部ブロック構成図。
【図２】化粧データ画像と被験者の顔の画像とを合成する手順を示す図。
【図３】ワイヤーフレームによる変形合成の様子を示す図。
【図４】化粧データ画像の抽出を示す図。
【符号の説明】
１  カメラ装置
２  表示装置
３  制御部
４  メモリ
【図１】
0004128680.tif 000002
【図２】
0004128680.tif 000003
【図３】
0004128680.tif 000004
【図４】
0004128680.tif 000005