(57)【要約】      （修正有）【課題】化粧巧拙に関する定量的評価を提供する。【解決手段】化粧巧拙スコア推定方法は、被験者の顔画像から推定した推定年齢帯、推定性別及び確率に基づいて被験者の化粧巧拙スコアを計算する。複数のサンプル顔画像を対象として推定年齢帯の代表値から所定値を減算した値の絶対値と、推定性別が女性であるとき第１値を、推定性別が男性であるとき第１値と異なる第２値を与えて第１、第２値に確率を示す百分率を乗算した値とを、説明変数、サンプル顔画像が素顔であるときには第１の化粧巧拙スコア値、サンプル顔画像が本人による化粧済みの顔を対象としたものであるときには第２の化粧巧拙スコア値、サンプル顔画像が専門家による化粧済みの顔を対象としたものであるときには第３の化粧巧拙スコア値を目的変数として与えて重回帰分析を適用して得られた重回帰式により、被験者の顔画像の推定年齢帯と推定性別と確率とから化粧巧拙スコアを計算する。【選択図】図３
2018142124.tif 000002
【特許請求の範囲】
【請求項１】
外部情報処理端末から被験者の顔画像のデータをコンピュータで受信する工程と、
前記被験者の顔画像のデータを前記コンピュータから外部画像処理装置に送信する工程と、
前記外部画像処理装置から前記被験者の推定年齢帯、推定性別及び前記推定性別が真である確率を前記コンピュータで受信する工程と、
前記推定年齢帯、前記推定性別及び前記確率に基づいて前記被験者の化粧巧拙スコアを前記コンピュータで計算する工程と、
前記外部情報処理端末に前記計算した化粧巧拙スコアを送信する工程とを有し、
前記化粧巧拙スコアを計算する工程においては、複数のサンプル顔画像を対象として前記推定年齢帯の代表値から所定値を減算した値の絶対値と、前記推定性別が女性であるとき第１値、前記推定性別が男性であるとき前記第１値と異なる第２値を与えて前記第１、第２値に前記確率を示す百分率を乗算した値とを説明変数、前記サンプル顔画像が化粧していない素顔を対象としたものであるときには第１の化粧巧拙スコア値、前記サンプル顔画像が本人又は専門家以外の者による化粧済みの顔を対象としたものであるときには第２の化粧巧拙スコア値及び前記サンプル顔画像が専門家による化粧済みの顔を対象としたものであるときには第３の化粧巧拙スコア値を目的変数として与えて重回帰分析を適用して得られた重回帰式により、前記被験者の顔画像に関する前記推定年齢帯と前記推定性別と前記確率とから前記化粧巧拙スコアを計算することを特徴とする化粧巧拙スコア推定方法。
【請求項２】
前記化粧巧拙スコアを計算する工程において、前記推定性別が女性であるときの前記第１値は１、前記推定性別が男性であるときの前記第２値はゼロであることを特徴とする請求項１記載の化粧巧拙スコア推定方法。
【請求項３】
前記絶対値に対する回帰係数は負の値であることを特徴とする請求項１記載の化粧巧拙スコア推定方法。
【請求項４】
前記化粧巧拙スコアを計算する工程において、前記推定年齢帯の代表値から前記所定値として２０〜３５歳の範囲から選択された年齢を減算することを特徴とする請求項１記載の化粧巧拙スコア推定方法。
【請求項５】
前記化粧巧拙スコアを計算する工程において、前記代表値として前記推定年齢帯の中央値から前記所定値を減算することを特徴とする請求項１記載の化粧巧拙スコア推定方法。
【請求項６】
前記外部情報処理端末に前記計算した化粧巧拙スコアとともに前記被験者の顔画像のデータを送信することを特徴とする請求項１記載の化粧巧拙スコア推定方法。
【請求項７】
前記外部情報処理端末に前記計算した化粧巧拙スコアとともに前記被験者の顔画像のデータ、前記被験者に関する過去の化粧巧拙スコア及び前記被験者に関する過去の顔画像のデータを送信することを特徴とする請求項１記載の化粧巧拙スコア推定方法。
【請求項８】
外部情報処理端末から被験者の顔画像のデータをコンピュータで受信する工程と、
前記被験者の顔画像を処理して前記被験者の推定年齢帯、推定性別及び前記推定性別が真である確率を前記コンピュータで推定する工程と、
前記推定年齢帯、前記推定性別及び前記確率に基づいて前記被験者の化粧巧拙スコアを前記コンピュータで計算する工程と、
前記外部情報処理端末に前記計算した化粧巧拙スコアを送信する工程とを有し、
前記化粧巧拙スコアを計算する工程においては、複数のサンプル顔画像を対象として前記推定年齢帯の代表値から所定値を減算した値の絶対値と、前記推定性別が女性であるとき第１値、前記推定性別が男性であるとき前記第１値と異なる第２値を与えて前記第１、第２値に前記確率を示す百分率を乗算した値とを説明変数、前記サンプル顔画像が化粧していない素顔を対象としたものであるときには第１の化粧巧拙スコア値、前記サンプル顔画像が本人又は専門家以外の者による化粧済みの顔を対象としたものであるときには第２の化粧巧拙スコア値及び前記サンプル顔画像が専門家による化粧済みの顔を対象としたものであるときには第３の化粧巧拙スコア値を目的変数として与えて重回帰分析を適用して得られた重回帰式により、前記被験者の顔画像に関する前記推定年齢帯と前記推定性別と前記確率とから前記化粧巧拙スコアを計算することを特徴とする化粧巧拙スコア推定方法。
【請求項９】
複数のサンプル顔画像からコンピュータで推定された推定年齢帯、推定性別及び前記推定性別が真である確率を説明変数とし、前記サンプル顔画像の化粧巧拙に応じて与えた化粧巧拙スコア値を目的変数として重回帰分析を適用して重回帰式を生成し、被験者の顔画像から前記コンピュータで推定された推定年齢帯、推定性別及び推定性別が真である確率を前記重回帰式に適用して前記被験者の化粧巧拙スコアを前記コンピュータで計算することを特徴とする化粧巧拙スコア推定方法。
【請求項１０】
請求項１乃至９のいずれか１項に記載の化粧巧拙スコア推定方法をコンピュータに実行させるプログラム。
【請求項１１】
外部情報処理端末から被験者の顔画像のデータを受信する第１受信部と、
前記被験者の顔画像のデータを外部画像処理装置に送信する第１送信部と、
前記外部画像処理装置から前記被験者の推定年齢帯、推定性別及び前記推定性別が真である確率を受信する第２受信部と、
前記推定年齢帯、前記推定性別及び前記確率に基づいて前記被験者の化粧巧拙スコアを計算する計算部と、
前記外部情報処理端末に前記計算した化粧巧拙スコアを送信する第２送信部とを有し、
前記計算部は、複数のサンプル顔画像を対象として前記推定年齢帯の代表値から所定値を減算した値の絶対値と、前記推定性別が女性であるとき第１値、前記推定性別が男性であるとき前記第１値と異なる第２値を与えて前記第１、第２値に前記確率を示す百分率を乗算した値とを説明変数、前記サンプル顔画像が化粧していない素顔を対象としたものであるときには第１の化粧巧拙スコア値、前記サンプル顔画像が本人又は専門家以外の者による化粧済みの顔を対象としたものであるときには第２の化粧巧拙スコア値及び前記サンプル顔画像が専門家による化粧済みの顔を対象としたものであるときには第３の化粧巧拙スコア値を目的変数として与えて重回帰分析を適用して得られた重回帰式により、前記被験者の顔画像に関する前記推定年齢帯と前記推定性別と前記確率とから前記化粧巧拙スコアを計算することを特徴とする化粧巧拙スコア推定装置。
【請求項１２】
外部情報処理端末から被験者の顔画像のデータを受信する受信部と、
前記被験者の顔画像を処理して前記被験者の推定年齢帯、推定性別及び前記推定性別が真である確率を推定する推定部と、
前記推定年齢帯、前記推定性別及び前記確率に基づいて前記被験者の化粧巧拙スコアを前記コンピュータで計算する計算部と、
前記外部情報処理端末に前記計算した化粧巧拙スコアを送信する送信部とを有し、
前記計算部は、複数のサンプル顔画像を対象として前記推定年齢帯の代表値から所定値を減算した値の絶対値と、前記推定性別が女性であるとき第１値、前記推定性別が男性であるとき前記第１値と異なる第２値を与えて前記第１、第２値に前記確率を示す百分率を乗算した値とを説明変数、前記サンプル顔画像が化粧していない素顔を対象としたものであるときには第１の化粧巧拙スコア値、前記サンプル顔画像が本人又は専門家以外の者による化粧済みの顔を対象としたものであるときには第２の化粧巧拙スコア値及び前記サンプル顔画像が専門家による化粧済みの顔を対象としたものであるときには第３の化粧巧拙スコア値を目的変数として与えて重回帰分析を適用して得られた重回帰式により、前記被験者の顔画像に関する前記推定年齢帯と前記推定性別と前記確率とから前記化粧巧拙スコアを計算することを特徴とする化粧巧拙スコア推定装置。
【請求項１３】
複数のサンプル顔画像から推定された推定年齢帯、推定性別及び前記推定性別が真である確率を説明変数とし、前記サンプル顔画像の化粧巧拙に応じて与えた化粧巧拙スコア値を目的変数として重回帰分析を適用して重回帰式を生成する手段と、
被験者の顔画像から推定された推定年齢帯、推定性別及び推定性別が真である確率を前記重回帰式に適用して前記被験者の化粧巧拙スコアを計算する手段とを具備することを特徴とする化粧巧拙スコア推定装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、化粧巧拙スコア推定方法、プログラム及び化粧巧拙スコア推定装置に関する。
【背景技術】
【０００２】
特許文献１には、素肌と化粧後の肌との特定帯域の分光反射スペクトルから化粧肌を評価する方法が開示されている。
【０００３】
しかし、化粧の巧拙に関する評価は、本人又は専門家等による官能評価に委ねられており、恣意的であり、その定量的な評価方法が確立されていないのが現状である。そのため、化粧方法や化粧品を変えても、本人の主観的評価や周囲の人の主観的評価からしか、その効果を判断することができない。例えば、デパートの化粧品販売員は、販売化粧品の効果を実感してもらうために、実際にその化粧品を使ってお客様の顔を化粧する場合がある。しかしながら、化粧前の顔に対して化粧後の顔を定量的に評価するものがないため、化粧された本人は化粧前の顔に対して化粧後の顔がよくなったように思っても、それがどれだけ良くなったかは本人が主観的に評価するしかない。そのため、化粧品販売員が実際に販売化粧品でお客様を化粧しながら、その効果を説明しても、お客様への訴求力は限定されてしまう。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１６−１５５７９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
目的は、化粧の巧拙に関する定量的評価を実現することにある。
【課題を解決するための手段】
【０００６】
本実施形態に係る化粧巧拙スコア推定方法は、外部情報処理端末から被験者の顔画像のデータをコンピュータで受信する工程と、前記被験者の顔画像のデータを前記コンピュータから外部画像処理装置に送信する工程と、前記外部画像処理装置から前記被験者の推定年齢帯、推定性別及び前記推定性別が真である確率を前記コンピュータで受信する工程と、前記推定年齢帯、前記推定性別及び前記確率に基づいて前記被験者の化粧巧拙スコアを前記コンピュータで計算する工程と、前記外部情報処理端末に前記計算した化粧巧拙スコアを送信する工程とを有する。前記化粧巧拙スコアを計算する工程においては、複数のサンプル顔画像を対象として前記推定年齢帯の代表値から所定値を減算した値の絶対値と、前記推定性別が女性であるとき第１値、前記推定性別が男性であるとき前記第１値と異なる第２値を与えて前記第１、第２値に前記確率を示す百分率を乗算した値とを説明変数、前記サンプル顔画像が化粧していない素顔を対象としたものであるときには第１の化粧巧拙スコア値、前記サンプル顔画像が本人又は専門家以外の者による化粧済みの顔を対象としたものであるときには第２の化粧巧拙スコア値及び前記サンプル顔画像が専門家による化粧済みの顔を対象としたものであるときには第３の化粧巧拙スコア値を目的変数として与えて重回帰分析を適用して得られた重回帰式により、前記被験者の顔画像に関する前記推定年齢帯と前記推定性別と前記確率とから前記化粧巧拙スコアを計算する。
【図面の簡単な説明】
【０００７】
【図１】図１は本実施形態に係る化粧巧拙スコア推定サーバを含む全体システムの構成を示す図である。
【図２】図２は本実施形態に係る化粧巧拙スコア推定サーバの構成を示す図である。
【図３】図３は本実施形態に係る化粧巧拙スコア推定サーバの処理を示すフローチャートである。
【図４】図４は本実施形態に係る化粧巧拙スコア推定サーバを含む全体システムにおけるデータ送受信のシーケンスを示す図である。
【図５】図５は図１のスマートフォンの表示例を示す図である。
【図６】図６は図１のスマートフォンの他の表示例を示す図である。
【発明を実施するための形態】
【０００８】
以下、図面を参照しながら本実施形態に係る化粧巧拙スコア推定サーバ２０を説明する。図１は本実施形態に係る化粧巧拙スコア推定サーバ２０を含む全体システムの構成を示す図である。化粧巧拙スコア推定サーバ２０に対して年齢帯・性別推定サーバ３０と複数のクライアント端末４０とがインターネットを含むネットワーク１０を介して相互にデータ等を送受信可能に接続される。クライアント端末４０はスマートフォン４０−１、タブレット端末４０−２・・・・、パソコン４０−ｎなどの情報処理装置をいう。
【０００９】
（構成）  
化粧巧拙スコア推定サーバ２０は、クライアント端末４０から送られた顔画像のデータに基づいて、その顔に対する化粧の巧拙品質を化粧巧拙スコア値として数値化するとともに、化粧巧拙スコア値をクライアント端末４０に返信するサービス（以下、化粧巧拙スコア推定サービスと称する）を提供する。このサービスを利用する利用者は、化粧後の顔を対象とした顔画像の化粧巧拙スコア値と化粧前の素顔を対象とした化粧巧拙スコア値とを比較することで、化粧の巧拙程度を数値で確認することができる。また、利用者は、自身による化粧の化粧巧拙スコア値を、専門家による化粧の化粧巧拙スコア値に比較することで、自身の化粧技能の向上に活用することができる。また利用者は、ある化粧品を使った化粧の化粧巧拙スコア値を、他の化粧品を使った化粧の化粧巧拙スコア値に比較することで、どちらの化粧品が自分に合っているかを客観的に判断することができる。
【００１０】
（化粧巧拙スコア推定サーバ２０の構成）  
図２は本実施形態に係る化粧巧拙スコア推定サーバ２０の構成を示す図である。本実施形態に係る化粧巧拙スコア推定サーバ２０は、通信装置２４、記憶装置２３、メモリ２２及びＣＰＵ２１を備える。通信装置２４はクライアント端末４０及び年齢帯・性別推定サーバ３０に対して各種データ等の通信を実行する。記憶装置２３は、「化粧巧拙スコア推定アプリケーション」等のサーバプログラムやＯＳ(Ｏｐｅｒａｔｉｏｎ  Ｓｙｓｔｅｍ)のデータを記憶する。メモリ２２は、プログラム、顔画像データを一時的に格納するワークエリア等として機能する。ＣＰＵ２１は、記憶装置２３に記憶された各種プログラムを実行することにより、各種の制御を行う。
【００１１】
（化粧巧拙スコア推定サーバ２０の処理）  
図３は本実施形態に係る化粧巧拙スコア推定サーバ２０の処理を示すフローチャートである。化粧巧拙スコア推定サーバ２０は、当該サービスを利用する利用者のクライアント端末４０から被験者の顔をディジタルカメラで撮影して得た顔画像データを受信する（Ｓ１１）。化粧巧拙スコア推定サーバ２０は、受信した顔画像のデータを年齢帯・性別推定サーバ３０に転送する（Ｓ１２）。年齢帯・性別推定サーバ３０は、顔画像のデータに基づいて、年齢帯・性別推定処理を実行し、顔画像から推定した年齢帯、その年齢帯が真である確率（年齢帯）、性別、その性別が真である確率（性別）を計算する。例えば、年齢帯・性別推定処理において、年齢帯・性別推定サーバ３０は、顔画像のデータに基づいて、顔を構成する目、鼻、口、おでこ、骨格等の形状的特徴や顔の皺、顔のシミ、顔のたるみなどの肌の特徴を総合的に解析し、顔画像の対象となった被験者の顔の年齢帯、その年齢帯が真である確率（年齢帯）、性別、その性別が真である確率（性別）を推定する。化粧巧拙スコア推定サーバ２０は、年齢帯・性別推定サーバ３０から被験者の顔の年齢帯、確率（年齢帯）、性別、確率（性別）を受信し（Ｓ１３）、受信した被験者の顔の年齢帯、確率（年齢帯）、性別、確率（性別）に基づいて被験者の顔の化粧巧拙スコア値を計算する（Ｓ１４）。この計算方法についての詳細は後述する。化粧巧拙スコア推定サーバ２０は、計算した化粧巧拙スコア値をクライアント端末４０に送信する（Ｓ１５）。なお、年齢帯・性別推定処理は、外部の年齢帯・性別推定サーバ３０で実行することに限定されることはなく、化粧巧拙スコア推定サーバ２０で実行するものであってもよい。また年齢帯・性別推定処理は、複数の外部の年齢帯・性別推定サーバ３０で実行し、様々な処理結果を収集し、いずれかの処理結果としての年齢帯、確率（年齢帯）、性別、確率（性別）を択一的に採用しても良いし、平均値や中央値としての年齢帯、確率（年齢帯）、性別、確率（性別）を採用してものよい。
【００１２】
（化粧巧拙スコアの計算式）  
（計算式の説明）
化粧巧拙スコア推定サーバ２０は、年齢帯・性別推定サーバ３０から受信した被験者の顔画像のデータから推定した被験者の顔の年齢帯、確率（年齢帯）、性別及び確率（性別）に基づいて、顔画像の対象となった被験者の顔の化粧巧拙スコア値を計算するための計算式のデータを記憶する。この計算式は、重回帰分析を適用した重回帰式（１）で与えられる。（１）式において、ｙは目的変数、ｘは説明変数、ｂは回帰係数、ａは回帰定数である。重回帰式（１）は、目的変数ｙを複数の説明変数ｘ（ｘ１、ｘ２・・・、ｘｎ）で推定する式である。
【００１３】
ｙ＝ａ＋(ｘ１×ｂ１＋ｘ２×ｂ２+・・・・＋ｘｎ×ｂｎ)      ・・・（１）
（説明変数の設定）  
本実施形態において、目的変数ｙは化粧巧拙スコア値である。説明変数ｘは、化粧巧拙スコア値を変動させる因子である。適切に説明変数ｘを設定した重回帰式（１）を用いることで、信頼性の高い化粧巧拙スコア値を得られる。本実施形態に係る化粧巧拙スコア推定方法は、化粧巧拙スコア値を推定するための重回帰式（１）に特徴がある。
【００１４】
一般的に、２０歳未満の女性は大人っぽく見られるように化粧を行い、年配の女性は若く見られるように化粧を行う。そこで、発明者は、化粧の目的は、女性は特定の年齢に見られる、又はそれに接近させることにあると推定した。顔年齢が特定の年齢に対してどれだけ近いかを定量化するための説明変数ｘ１を設定した。例えば、説明変数ｘ１は、顔画像から推定された年齢帯の代表値から所定値（特定の年齢）を減算した値の絶対値とした。説明変数ｘ１は、その値が小さいほど、顔画像から推定された顔年齢が所定の年齢に近いことを表している。この所定の年齢は、典型的には２０〜３５歳の範囲内から、採用試験場面、営業場面などの適用場面に応じて適宜選択される。一般的には、例えば２８歳に設定される。ここでは発明者は、若い女性も年配の女性も２８歳の年齢に近づくことを目標に化粧をすることを想定し、特定の年齢として「２８歳」を採用した。
【００１５】
また、一般的に、女性はより女性らしく見られることを目標に化粧を行う。そこで、発明者は、顔の女性らしさを定量化するための説明変数ｘ２を設定した。説明変数ｘ２は、顔画像から推定された性別が女性であるとき第１の性別値、男性であるとき第２の性別値を与えて、第１性別値又は第２性別値に対して、推定された性別が真である確率を示す百分率を乗算した値とした。
【００１６】
重回帰式（１）に上記で設定した説明変数ｘ１、ｘ２を代入することにより、次式（２）が得られる。  
[化粧巧拙スコア]＝ａ＋ｂ１×｜２８−年齢帯代表値｜＋ｂ２×｛性別値×確率（性別）｝  
・・・・（２）
化粧巧拙スコア推定サーバ２０は、年齢帯・性別推定サーバ３０により推定された被験者の顔画像の年齢帯、性別及び確率（性別）に基づいて決定した年齢帯代表値、性別値及び確率（性別）を（２）式に代入し、被験者の顔画像の化粧巧拙スコア値を計算することができる。なお、顔画像から推定された性別が女性であるとき第１の性別値は「１」、男性であるとき第２の性別値はゼロに設定した。これにより、顔画像から推定された性別が男性のとき、説明変数ｘ２はゼロを示す。一方、顔画像から推定された性別が女性のとき、性別が女性である確率が高いほど説明変数ｘ２は大きい値を示す。説明変数ｘ２は、その値が大きいほど、顔画像から推定した被験者の顔がより女性の傾向が強いことを表す。
【００１７】
（回帰係数と回帰定数の取得）  
化粧巧拙スコア推定サーバ２０は、複数のサンプル顔画像のデータを教師データ（訓練データ）として、重回帰分析することにより（１）式の回帰定数ａ、回帰係数ｂ１、ｂ２を計算する。サンプル顔画像の説明変数ｘ１、ｘ２は、サンプル顔画像を年齢帯・性別推定サーバ３０から得られるサンプル顔画像から推定された年齢帯、性別及び確率（性別）に基づいて計算される。サンプル顔画像の化粧巧拙スコア値は以下のように与えた。すなわち、サンプル顔画像が化粧していない素顔を対象としたものであるときには第１の化粧巧拙スコア値、サンプル顔画像が本人又は専門家以外の者による化粧済みの顔を対象としたものであるときには第２の化粧巧拙スコア値、及びサンプル顔画像が専門家による化粧済みの顔を対象としたものであるときには第３の化粧巧拙スコア値を与えた。第１、第２、第３の化粧巧拙スコア値は、この順で大きくなるように、典型的には、第１の化粧巧拙スコア値は「１」、第２の化粧巧拙スコア値は「３」、第３の化粧巧拙スコア値は「５」に設定した。なお、ここでは化粧巧拙スコア値（目的変数）の範囲を１〜５として与えたが、勿論この範囲に限定されることはなく、慣習上１００点満点で表現したいときは、化粧巧拙スコア値（目的変数）の範囲を０〜１００として与えればよいものである。この場合、重回帰分析処理において、第１の化粧巧拙スコア値を「２０」、第２の化粧巧拙スコア値は「６０」、第３の化粧巧拙スコア値は「１００」に設定することとなる。
【００１８】
以上説明した化粧巧拙スコア値ｙ、説明変数ｘ１、ｘ２が既知である複数のサンプル顔画像のデータに基づいて、重回帰分析により得られた回帰係数ｂ１は負の値を示し、回帰係数ｂ２は正の値を示す。これにより、説明変数ｘ１が小さく、説明変数ｘ２が大きいとき、化粧巧拙スコア値は高い値を示す。換言すると、顔画像の対象となった顔年齢が２８歳に近く、より女性らしいとき、化粧巧拙スコア値は高い値を示す。
【００１９】
重回帰分析が繰り返された結果、回帰定数ａは１．５以上で２．５以下の範囲内に収まり、好適値は１．９であり、最適値１．９５又はその近似値に収束することが確認された。同様に、回帰係数ｂ１は−０．１以上で−０．０５以下の範囲内に収まり、好適値は−０．０７であり、最適値−０．０７５又はその近似値に収束することが確認された。回帰係数ｂ２は２．０以上で２．８以下の範囲内に収まり、好適値は２．３であり、最適値２．３５又はその近似値に収束することが確認された。
【００２０】
（重回帰式（２）の効果説明｛実例｝）  
推定性別が「ＦＥＭＡＬＥ」のとき、性別値「１」を与えている。推定年齢帯が「００−１７」のとき、年齢帯代表値として推定年齢帯の最大値「１７」を与え、「１８−２４」のとき、年齢帯代表値として推定年齢帯の中央値「２１」を与えている。例えば、ある被験者の化粧前の顔を対象とした顔画像に基づいて推定された化粧巧拙スコアは「３．７０」、同一の被験者の化粧後の顔を対象とした顔画像に基づいて推定された化粧巧拙スコア値は「３．９９」となった。すなわち、化粧前後で被験者の顔の化粧巧拙スコア値が「０．２９」増加しており、これは、女性らしく見えるように化粧ができたこと、及び所定年齢例えば２８歳に近づいて見えるように化粧ができたことの少なくとも一方を示している。他の被験者に関しても同様に、化粧後の顔を対象とした顔画像の化粧巧拙スコア値が化粧前の顔を対象とした顔画像の化粧巧拙スコア値より増加する傾向を確認できた。以上説明したように、（２）式を用いた化粧巧拙スコア推定結果の実例から、化粧巧拙スコア値の計算式（２）の信頼性を確認することができた。
【００２１】
（全体システムの処理）  
図４は本実施形態に係る化粧巧拙スコア推定装置を含む全体システムにおけるデータ送受信のシーケンスを示す図である。図５は図１のスマートフォン４０−１の表示例を示す図である。図６は図１のスマートフォン４０−１の他の表示例を示す図である。本実施形態に係る化粧巧拙スコア推定サービスを利用する利用者は、スマートフォン４０−１で図示しないアプリケーションサーバから化粧巧拙スコア推定用のアプリケーションソフト（以下、化粧巧拙スコア推定アプリと省略する）をダウンロードし、新規ユーザ登録をする。新規ユーザ登録では、氏名、電話番号、ユーザＩＤ等のユーザ情報と、パスワード情報とが登録され、これらの情報は化粧巧拙スコア推定サーバ２０のデータベースに登録される。
【００２２】
スマートフォン４０−１の画面に表示されている化粧巧拙スコア推定アプリのアイコンが利用者によりタップされたのを契機に化粧巧拙スコア推定アプリが起動し（Ｓ２１）、ログイン画面が表示される。利用者は、ログイン画面上にユーザＩＤ、パスワードを入力し（Ｓ２２）、ログインボタンをタップする。それによりユーザＩＤ、パスワードがスマートフォン４０−１から化粧巧拙スコア推定サーバ２０に送信される。化粧巧拙スコア推定サーバ２０は、受信したユーザＩＤ及びパスワードを認証処理する（Ｓ２３）。化粧巧拙スコア推定サーバ２０は、受信したユーザＩＤ及びパスワードがデータベースに登録されているとき、認証コードをスマートフォン４０−１に送信する。認証コードを受信したスマートフォン４０−１の画面には、顔画像の選択画面が表示される（Ｓ２４）。この選択画面上の利用者の操作により顔画像が選択され（Ｓ２５）、選択された顔画像のデータがスマートフォン４０−１から化粧巧拙スコア推定サーバ２０に送信される。なお、顔画像の選択画面上の利用者の操作によりカメラが起動され、カメラにより撮影された顔画像がスマートフォン４０−１から化粧巧拙スコア推定サーバ２０に送信するようにしてもよい。ここでは、説明の便宜上、選択された顔画像は、現在の利用者の顔を対象とした顔画像とする。化粧巧拙スコア推定サーバ２０は、受信した顔画像のデータを年齢帯・性別推定サーバ３０に転送するとともに、メモリ２２に記憶する。年齢帯・性別推定サーバ３０は、受信した顔画像のデータに基づいて、年齢帯・性別推定処理を実行し、被験者の顔の年齢帯、その年齢帯が真である確率（年齢帯）、被験者の性別、被験者の性別が真である確率（性別）を計算する。年齢帯・性別推定サーバ３０は、計算した被験者の年齢帯、確率（年齢帯）、性別、確率（性別）のデータを化粧巧拙スコア推定サーバ２０に送信する。
【００２３】
化粧巧拙スコア推定サーバ２０は、受信した被験者の顔の年齢帯、確率（年齢帯）、性別、確率（性別）に基づいて説明変数ｘ１、ｘ２を計算し、（２）式に代入することにより被験者の顔の化粧巧拙スコア値を計算する。化粧巧拙スコア推定サーバ２０は、計算した化粧巧拙スコア値を、計算した対象の顔画像のデータとユーザＩＤとに関連付けて記憶装置２３に記憶する。これにより、記憶装置２３には、ユーザＩＤ毎の顔画像の履歴データと化粧巧拙スコアの履歴データとが蓄積される。化粧巧拙スコア推定サーバ２０は、現在の顔画像の化粧巧拙スコア値をスマートフォン４０−１に送信する。好ましくは現在の顔画像の化粧巧拙スコア値を、その推定に用いた現在の顔画像のデータとともに送信する。さらに好ましくは、現在の顔画像の化粧巧拙スコア値及び現在の顔画像のデータとともに、過去の顔画像の化粧巧拙スコア値及び過去の顔画像のデータを比較対象としてスマートフォン４０−１に送信する。過去の顔画像としては、直前の利用者の顔画像、予め利用者により設定された顔画像又は素顔の顔画像である。記憶装置２３に記憶される際、素顔の化粧巧拙スコア値、その推定に用いた素顔の顔画像のデータには素顔であることを特定するための識別子又はフラグが付帯される。
【００２４】
スマートフォン４０−１の化粧巧拙スコア推定アプリは、受信したデータに基づいて、過去の顔画像の化粧巧拙スコア値に対する現在の顔画像の化粧巧拙スコア値の増減値を計算する。これにより、図５に示すように、化粧巧拙スコア推定アプリにより、現在の利用者の顔を対象とした顔画像とその顔画像の化粧巧拙スコア値とともに、利用者の素顔を対象とした顔画像の化粧巧拙スコア値に対する増減値がスマートフォン４０−１に表示される。なお、図６に示すように、化粧巧拙スコア推定結果として、増減値の算出基準となった利用者の素顔を対象とした顔画像を表示するようにしてもよい。また、年齢帯・性別推定サーバ３０により推定された被験者の顔の年齢帯、確率（年齢帯）、性別、確率（性別）を表示するようにしてもよいし、説明変数ｘ１、ｘ２を表示するようにしてもよい。
【００２５】
（効果説明）  
利用者は、図５に示す化粧巧拙スコア推定結果から、化粧前の素顔を対象とした顔の化粧巧拙スコア値に対する化粧後の現在の顔を対象とした顔画像の化粧巧拙スコア値の増減値を視認することで、現在の化粧の巧拙程度を数値で確認することができる。また、増減値の算出基準となった過去の顔画像を現在の顔の化粧と異なる方法で化粧した顔画像に設定することで、利用者は、現在の化粧方法と、過去の化粧方法とのうち、どちらの化粧方法が自分に合っているかを客観的な数値として判断することができる。さらに、増減値の算出基準となった過去の顔画像を現在の化粧に使った化粧品と異なる化粧品で化粧した顔画像に設定することで、利用者は、現在使用している化粧品と、過去使用していた化粧品とのうち、どちらの化粧品が自分に合っているかを客観的な数値として判断することができる。
【００２６】
（変形例の説明）  
なお、本実施形態では、年齢帯・性別推定処理は外部の年齢帯・性別推定サーバ３０により実行されたが、年齢帯・性別推定処理を化粧巧拙スコア推定サーバ２０で実行できるよう、記憶装置２３に年齢帯・性別推定処理に関するプログラムを記憶させてもよい。
【００２７】
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
【符号の説明】
【００２８】
１０…ネットワーク（インターネット）、２０…化粧巧拙スコア推定サーバ、３０…年齢帯・性別推定サーバ、４０…クライアント端末。
【図１】
2018142124.tif 000003
【図２】
2018142124.tif 000004
【図３】
2018142124.tif 000005
【図４】
2018142124.tif 000006
【図５】
2018142124.tif 000007
【図６】
2018142124.tif 000008