(57)【要約】【課題】より低コストな構成で肌の表面状態を評価することができるようにする。【解決手段】撮像装置は、無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、無偏光発光部または偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、第１の偏光フィルタと第２の偏光フィルタの偏光方向は直交関係にある。撮像素子は、無偏光発光部により照射された被写体と、偏光発光部により照射された被写体を時分割で撮像し、その結果得られる無偏光画像と直交偏光画像を出力するように構成されている。本開示の技術は、例えば、肌の表面状態を評価する撮像装置等に適用できる。【選択図】図２
2015046698.tif 000002
【特許請求の範囲】
【請求項１】
無偏光成分の光を照射する無偏光発光部と、
第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、
前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子と
を備え、
前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向は直交関係にあり、
前記撮像素子は、前記無偏光発光部により照射された被写体と、前記偏光発光部により照射された被写体を時分割で撮像し、その結果得られる無偏光画像と直交偏光画像を出力するように構成されている
撮像装置。
【請求項２】
複数の前記無偏光発光部及び前記偏光発光部が、前記撮像素子を中心に、点対象に配置されている
請求項１に記載の撮像装置。
【請求項３】
複数の前記無偏光発光部及び前記偏光発光部が、前記撮像素子を中心に、円環状に配置されている
請求項１に記載の撮像装置。
【請求項４】
無偏光成分の光を照射する無偏光発光部と、
第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、
前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置が、
前記無偏光発光部により照射された被写体と、前記偏光発光部により照射された被写体を時分割で撮像し、無偏光画像と直交偏光画像を出力する
撮像装置の撮像方法。
【請求項５】
無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を取得し、前記無偏光画像と前記直交偏光画像から鏡面反射成分の画像である鏡面反射画像を生成する鏡面反射画像生成部を備える
画像処理装置。
【請求項６】
前記鏡面反射画像生成部は、
前記直交偏光画像にゲインを乗算するゲイン乗算部と、
前記無偏光画像から、前記ゲイン乗算後の前記直交偏光画像を減算し、第１の差分画像を生成する減算部と、
前記第１の差分画像を所定の範囲の輝度値にクリッピングするクリッピング部と
を有する
請求項５に記載の画像処理装置。
【請求項７】
前記鏡面反射画像生成部により生成された前記鏡面反射画像を用いて、肌のテカリを解析するテカリ解析部をさらに備える
請求項５に記載の画像処理装置。
【請求項８】
前記テカリ解析部は、
前記鏡面反射画像から、被評価者の皮脂量を示す画像であるテカリ画像を算出するテカリ画像算出部を有する
請求項７に記載の画像処理装置。
【請求項９】
前記テカリ解析部は、
前記鏡面反射画像から、被評価者の皮脂量を算出するテカリ量算出部を有する
請求項７に記載の画像処理装置。
【請求項１０】
前記テカリ解析部は、
前記テカリ量算出部により算出された前記皮脂量に基づいて、被評価者のテカリを評価するテカリ評価値を算出するテカリ評価部をさらに有する
請求項９に記載の画像処理装置。
【請求項１１】
前記テカリ解析部による被評価者の肌のテカリの解析結果を提示する結果提示部をさらに備え、
前記結果提示部は、前記解析結果として、被評価者の肌のテカリ画像と皮脂量を提示する
請求項７に記載の画像処理装置。
【請求項１２】
前記鏡面反射画像生成部の前段に設けられ、前記無偏光画像と前記直交偏光画像の輝度レベルを調整し、調整後の前記無偏光画像と前記直交偏光画像を前記鏡面反射画像生成部に供給する前処理部をさらに備える
請求項５に記載の画像処理装置。
【請求項１３】
無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を取得し、前記無偏光画像と前記直交偏光画像から鏡面反射成分の画像である鏡面反射画像を生成する
画像処理装置の画像処理方法。
【請求項１４】
無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を処理するコンピュータに、
前記無偏光画像と前記直交偏光画像から鏡面反射成分の画像である鏡面反射画像を生成する
処理を実行させるためのプログラム。
【請求項１５】
無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を取得し、前記無偏光画像と前記直交偏光画像から並行偏光成分の画像である並行偏光画像を生成する並行偏光画像生成部を備える
画像処理装置。
【請求項１６】
前記並行偏光画像生成部は、
ゲインを算出するゲイン算出部と、
前記直交偏光画像に前記ゲインを乗算するゲイン乗算部と、
前記無偏光画像から、前記ゲイン乗算後の前記直交偏光画像を減算し、第２の差分画像を生成する減算部と、
前記第２の差分画像に所定のオフセット値を加算するオフセット加算部と
を有する
請求項１５に記載の画像処理装置。
【請求項１７】
前記並行偏光画像生成部により生成された前記並行偏光画像を用いて、肌のきめを解析するきめ解析部をさらに備える
請求項１５に記載の画像処理装置。
【請求項１８】
前記並行偏光画像生成部の前段に設けられ、前記無偏光画像と前記直交偏光画像の輝度レベルを調整し、調整後の前記無偏光画像と前記直交偏光画像を前記並行偏光画像生成部に供給する前処理部をさらに備える
請求項１５に記載の画像処理装置。
【請求項１９】
無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を取得し、前記無偏光画像と前記直交偏光画像から並行偏光成分の画像である並行偏光画像を生成する
画像処理装置の画像処理方法。
【請求項２０】
無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を処理するコンピュータに、
前記無偏光画像と前記直交偏光画像から並行偏光成分の画像である並行偏光画像を生成する
処理を実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、撮像装置およびその撮像方法、画像処理装置およびその画像処理方法、並びに、プログラムに関し、特に、より低コストな構成で肌の表面状態を評価することができるようにする撮像装置およびその撮像方法、画像処理装置およびその画像処理方法、並びに、プログラムに関する。
【背景技術】
【０００２】
肌（皮膚）の表面状態、例えば、肌のテカリ量や肌のきめなどを解析する手法が研究されている。例えば、偏光フィルタを光源側とイメージセンサ側に用意し、並行偏光および直交偏光の状態を作って肌を撮影し、その差分を用いて肌のテカリ量を算出する方法がある（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−２７３７３７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述の方法を実現するためには、偏光フィルタを３枚（３種類）用意して、光源側に並行偏光および直交偏光の２種類の偏光が得られるように２枚設置し、イメージセンサ側に残りの１枚を設置する必要がある。あるいは、偏光フィルタを２枚（２種類）用意して光源側とイメージセンサ側にそれぞれ１枚ずつ設置し、光源側かまたはイメージセンサ側のどちらかを９０度回転させて撮影する仕組みが必要である。したがって、より低コストに肌の表面状態を評価できる方法が望まれている。
【０００５】
本開示は、このような状況に鑑みてなされたものであり、より低コストな構成で肌の表面状態を評価することができるようにするものである。
【課題を解決するための手段】
【０００６】
本開示の第１の側面の撮像装置は、無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向は直交関係にあり、前記撮像素子は、前記無偏光発光部により照射された被写体と、前記偏光発光部により照射された被写体を時分割で撮像し、その結果得られる無偏光画像と直交偏光画像を出力するように構成されている。
【０００７】
本開示の第１の側面の撮像装置の撮像方法は、無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置が、前記無偏光発光部により照射された被写体と、前記偏光発光部により照射された被写体を時分割で撮像し、無偏光画像と直交偏光画像を出力する。
【０００８】
本開示の第１の側面においては、撮像装置において、無偏光発光部により照射された被写体と、偏光発光部により照射された被写体が時分割で撮像され、無偏光画像と直交偏光画像が出力される。
【０００９】
本開示の第２の側面の画像処理装置は、無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を取得し、前記無偏光画像と前記直交偏光画像から鏡面反射成分の画像である鏡面反射画像を生成する鏡面反射画像生成部を備える。
【００１０】
本開示の第２の側面の画像処理装置の画像処理方法は、無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を取得し、前記無偏光画像と前記直交偏光画像から鏡面反射成分の画像である鏡面反射画像を生成する。
【００１１】
本開示の第２の側面のプログラムは、無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を処理するコンピュータに、前記無偏光画像と前記直交偏光画像から鏡面反射成分の画像である鏡面反射画像を生成する処理を実行させるためのものである。
【００１２】
本開示の第２の側面においては、無偏光画像と直交偏光画像から鏡面反射成分の画像である鏡面反射画像が生成される。
【００１３】
本開示の第３の側面の画像処理装置は、無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を取得し、前記無偏光画像と前記直交偏光画像から並行偏光成分の画像である並行偏光画像を生成する並行偏光画像生成部を備える。
【００１４】
本開示の第３の側面の画像処理装置の画像処理方法は、無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を取得し、前記無偏光画像と前記直交偏光画像から並行偏光成分の画像である並行偏光画像を生成する。
【００１５】
本開示の第３の側面のプログラムは、無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を処理するコンピュータに、前記無偏光画像と前記直交偏光画像から並行偏光成分の画像である並行偏光画像を生成する処理を実行させるためのものである。
【００１６】
本開示の第３の側面においては、無偏光画像と直交偏光画像から並行偏光成分の画像である並行偏光画像が生成される。
【００１７】
なお、プログラムは、伝送媒体を介して伝送することにより、又は、記録媒体に記録して、提供することができる。
【００１８】
撮像装置及び画像処理装置は、独立した装置であっても良いし、１つの装置を構成している内部ブロックであっても良い。
【発明の効果】
【００１９】
本開示の第１乃至第３の側面によれば、より低コストな構成で肌の表面状態を評価することができるようにする。
【００２０】
なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
【図面の簡単な説明】
【００２１】
【図１】本開示に係る撮像システムの第１の実施の形態を示すブロック図である。
【図２】撮像装置の鏡筒部分を示す図である。
【図３】前処理部が行う前処理の概要を示す図である。
【図４】鏡面反射画像生成部の詳細構成例を示すブロック図である。
【図５】クリッピング部が行うクリッピング処理の処理内容を説明する図である。
【図６】テカリ画像算出部が行う処理内容を説明する図である。
【図７】テカリ評価部内に記憶されているテカリ評価値算出テーブルの例を示す図である。
【図８】評価結果提示画面の例を示す図である。
【図９】評価結果提示画面のその他の例を示す図である。
【図１０】撮像システムの第１の実施の形態による肌のテカリ評価処理を説明するフローチャートである。
【図１１】本開示に係る撮像システムの第２の実施の形態を示すブロック図である。
【図１２】並行偏光画像生成部の詳細構成例を示すブロック図である。
【図１３】第１の実施の形態と第２の実施の形態の処理の違いについて説明する図である。
【図１４】第１の実施の形態と第２の実施の形態の処理の違いについて説明する図である。
【図１５】きめ解析部の詳細構成例を示すブロック図である。
【図１６】表皮画像処理部および表皮パターン検出部の機能構成例を示すブロック図である。
【図１７】後天的要素解析部の機能構成例を示すブロック図である。
【図１８】撮像システムの第２の実施の形態による肌のきめ評価処理を説明するフローチャートである。
【図１９】きめ解析処理の詳細を説明するフローチャートである。
【図２０】表皮画像処理の詳細を説明するフローチャートである。
【図２１】表皮パターン検出処理の詳細を説明するフローチャートである。
【図２２】後天的要素解析処理の詳細を説明するフローチャートである。
【図２３】皮丘領域のサイズのヒストグラムの例を示す図である。
【図２４】表皮サイズ分布解析部が有する正規化カーブの例を示す図である。
【図２５】表皮形状分布解析処理１の詳細を説明するフローチャートである。
【図２６】表皮形状分布解析部が有する正規化カーブの例を示す図である。
【図２７】表皮形状分布解析処理２の詳細を説明するフローチャートである。
【図２８】参照形状の例を説明する図である。
【図２９】きめ評価結果の提示例を示す図である。
【図３０】きめ評価結果のその他の提示例を示す図である。
【図３１】本開示に係る撮像システムの第３の実施の形態を示すブロック図である。
【図３２】本開示に係る撮像システムの第４の実施の形態を示すブロック図である。
【図３３】本開示に係るコンピュータの一実施の形態の構成例を示すブロック図である。
【発明を実施するための形態】
【００２２】
以下、本開示を実施するための形態（以下、実施の形態という）について説明する。なお、説明は以下の順序で行う。
１．第１の実施の形態（肌のテカリを評価する撮像システム）
２．第２の実施の形態（肌のきめを評価する撮像システム）
３．第３の実施の形態（肌のテカリときめを評価する撮像システム）
４．第４の実施の形態（サーバで画像処理を行う撮像システム）
【００２３】
＜１．第１の実施の形態＞
＜撮像システムのブロック図＞
図１は、本開示に係る撮像システムの第１の実施の形態を示すブロック図である。
【００２４】
図１の撮像システム１は、撮像装置１１、画像処理装置１２、および表示装置１３により構成され、肌画像を撮像し、肌の表面状態として肌のテカリを評価するシステムである。
【００２５】
撮像装置１１は、被評価者の肌の画像を撮像し、その結果得られた肌画像を画像処理装置１２に供給する。より具体的には、撮像装置１１は、肌画像として、無偏光画像ITと直交偏光画像IPVの２種類（２枚）の画像を撮像し、画像処理装置１２に供給する。
【００２６】
図２は、撮像装置１１の鏡筒部分を示す図である。
【００２７】
撮像装置１１の鏡筒部４１に、複数の発光部４２が円環状に配置されており、鏡筒部４１の中央部にイメージセンサ４３が配置されている。イメージセンサ４３は、例えば、CMOS（Complementary Metal Oxide Semiconductor）イメージセンサやCCD(Charge Coupled Device)などの撮像素子で構成され、その前面には、偏光フィルタが配置されている。
【００２８】
発光部４２には、無偏光成分の光を被評価者の肌に照射する無偏光発光部４２Aと、所定の偏光成分の光を被評価者の肌に照射する偏光発光部４２Bとがある。無偏光発光部４２Aは、白色の光を発するLED (Light Emitting Diode）光源を有する。一方、偏光発光部４２Bは、白色の光を発するLED光源と、その前面に配置された偏光フィルタとを有する。偏光発光部４２Bに配された偏光フィルタと、イメージセンサ４３に配された偏光フィルタの偏光方向は、直交するように取り付けられている。
【００２９】
無偏光発光部４２Aと偏光発光部４２Bのそれぞれは、図２に示されるように、イメージセンサ４３に対して、点対象に配置されている。
【００３０】
また、図２の例では、無偏光発光部４２Aと偏光発光部４２Bが、それぞれ４つずつ配置されているが、無偏光発光部４２Aと偏光発光部４２Bの個数は、この例に限られない。それぞれ少なくとも２つの無偏光発光部４２Aと偏光発光部４２Bが点対象に配置されていれば良く、また、それぞれ６つ以上の無偏光発光部４２Aと偏光発光部４２Bが点対象に配置されていてもよい。
【００３１】
なお、明るさのムラをなくするため、無偏光発光部４２Aと偏光発光部４２Bのそれぞれを点対象に配置し、無偏光発光部４２Aと偏光発光部４２Bの個数を合わせるのが望ましいが、それ以外の配置としてもよい。
【００３２】
初めに、被写体としての被評価者の肌を無偏光発光部４２Aにより発光させた状態で第１の偏光方向（水平方向）の偏光フィルタを介してイメージセンサ４３が被評価者の肌の撮像を行うことにより、撮像装置１１は、被評価者の肌の無偏光画像ITを生成して、画像処理装置１２に供給する。
【００３３】
次に、偏光発光部４２Bが第２の偏光方向（垂直方向）の偏光フィルタを介して発光させた状態でイメージセンサ４３が被評価者の肌の撮像を行うことにより、撮像装置１１は、被評価者の肌の直交偏光画像IPVを生成して、画像処理装置１２に供給する。
【００３４】
これにより、偏光フィルタを３枚（３種類）用意して、光源側に並行偏光および直交偏光の２種類の偏光が得られるように２枚設置し、イメージセンサ側に残りの１枚を設置する場合と比べて、偏光フィルタが２種類で済む。
【００３５】
また、偏光フィルタを２枚（２種類）用意して光源側とイメージセンサ側にそれぞれ１枚ずつ設置し、光源側かまたはイメージセンサ側のどちらかを９０度回転させて撮影する場合と比べて、回転させる機能が省略できる。
【００３６】
したがって、本技術によれば、より低コストな構成で肌の表面状態を評価するために必要な肌画像を得ることができるので、低コストな構成で肌の表面状態を評価することができる。
【００３７】
なお、無偏光発光部４２Aによる撮像と、偏光発光部４２Bによる撮像の順番は逆でもよい。すなわち、撮像装置１１は、無偏光発光部４２Aによる撮像と、偏光発光部４２Bによる撮像を時分割で実行し、無偏光画像ITと直交偏光画像IPVを生成できればよい。
【００３８】
また、第１の偏光方向と第２の偏光方向は直交関係があれば、イメージセンサ４３側及び偏光発光部４２B側のそれぞれの偏光方向は限定されない。
【００３９】
図１に戻り、画像処理装置１２は、前処理部２１、鏡面反射画像生成部２２、テカリ解析部２３、および評価結果提示部２４により構成される。また、テカリ解析部２３は、テカリ画像算出部３１、テカリ量算出部３２、及びテカリ評価部３３で構成される。
【００４０】
前処理部２１には、撮像装置１１で撮像された２枚（２種類）の肌画像、すなわち、無偏光画像ITと直交偏光画像IPVが、撮像装置１１から供給される。
【００４１】
前処理部２１は、撮像装置１１から供給された無偏光画像ITと直交偏光画像IPVに対して、後段での処理を行いやすくするための前処理を行う。具体的には、前処理部２１は、輝度レベル（平均輝度）が最適な値になるように２枚の画像の輝度レベルを調整する。
【００４２】
＜前処理部２１の概要＞
図３は、前処理部２１が行う前処理の概要を示す図である。
【００４３】
前処理部２１は、取得された画像の輝度値の平均値をsrc_avg、画像の平均輝度として合わせたいレベルを標準値std_valとすると、調整前の画像の所定の画素の輝度値src_valを、以下の式により調整後の画像の輝度値dst_valに調整する。
dst_val=src_val+(std_val-src_avg)
【００４４】
より具体的には、前処理部２１は、無偏光画像ITの画素（x,y）の調整前の輝度値IT（x,y）から、調整後の輝度値ITP（x,y）を、次式（１）により求める。
【数１】
2015046698.tif 000003
【００４５】
また、前処理部２１は、直交偏光画像IPVの画素（x,y）の調整前の輝度値IPV（x,y）から、調整後の輝度値IPVP（x,y）を、次式（２）により求める。
【数２】
2015046698.tif 000004
【００４６】
式（１）及び式（２）内の分数の分母のNは、無偏光画像ITまたは直交偏光画像IPVの画素数を表す。なお、標準値std_valは、固定値として予め設定されて入力されている。
【００４７】
前処理部２１は、前処理後の無偏光画像ITP及び直交偏光画像IPVPを、鏡面反射画像生成部２２に供給する。また、前処理部２１は、前処理後の無偏光画像ITPを、評価結果提示部２４にも供給する。
【００４８】
鏡面反射画像生成部２２は、前処理部２１から供給される前処理後の無偏光画像ITP及び直交偏光画像IPVPを用いて、鏡面反射成分の画像である鏡面反射画像ISを生成し、テカリ画像算出部３１とテカリ量算出部３２に供給する。
【００４９】
＜鏡面反射画像生成部２２の構成＞
図４は、鏡面反射画像生成部２２の詳細構成例を示すブロック図である。
【００５０】
鏡面反射画像生成部２２は、ゲイン乗算部５１、減算部５２、及び、クリッピング部５３により構成される。
【００５１】
ゲイン乗算部５１は、以下の式（３）に従って、直交偏光画像IPVPに対して、ゲインGainPPを乗算し、ゲイン乗算後の直交偏光画像IPVP,Gを得る。
【数３】
2015046698.tif 000005
【００５２】
ここで、ゲインGainPPは、無偏光画像ITの平均輝度を、直交偏光画像IPVの平均輝度に合わせるための値が設定されるが、本実施の形態では、前処理部２１により２枚の画像の平均輝度が同一となるように既に調整されているため、GainPP=1.0とすることができる。
【００５３】
換言すれば、前処理部２１は省略することもでき、その場合には、無偏光画像ITの平均輝度を、直交偏光画像IPVの平均輝度に合わせるためのゲインGainPPが、他のブロックで算出されるか、または、外部から入力され、式（３）により直交偏光画像IPVPに対して乗算される。また、ゲインGainPPは、後述する第２の実施の形態における式（６）により求められる値を採用してもよい。
【００５４】
減算部５２は、無偏光画像ITPから、ゲイン乗算後の直交偏光画像IPVP,Gを減算し、差分画像IDiff1を生成する。すなわち、減算部５２は、無偏光画像ITPの各画素に対して次式（４）の演算を行う。
【数４】
2015046698.tif 000006
【００５５】
式（４）により、画像の変動成分、例えば、表面の微細構造、鏡面反射成分などを抽出することができる。
【００５６】
クリッピング部５３は、減算部５２で算出された差分画像IDiff1に対して、画像が適切な範囲に収まるようにクリッピングするクリッピング処理を行い、クリッピング処理後の画像を、鏡面反射画像ISとして出力する。
【００５７】
図５は、クリッピング部５３が行うクリッピング処理の処理内容を表す変換テーブルを示している。図５の横軸は、差分画像IDiff1の画素（x,y）の輝度値IDiff1(x,y)を表し、縦軸は、クリッピング処理後の鏡面反射画像ISの輝度値IS(x,y)を表す。
【００５８】
図５に示されるように、クリッピング部５３は、減算部５２の差分演算により生じた負の輝度値を０に設定する処理を行う。
【００５９】
以上のように、鏡面反射画像生成部２２は、前処理部２１から供給される前処理後の無偏光画像ITP及び直交偏光画像IPVPを用いて鏡面反射画像ISを算出し、テカリ画像算出部３１とテカリ量算出部３２に供給する。
【００６０】
＜テカリ解析部２３の構成＞
図１に戻り、テカリ解析部２３は、鏡面反射画像生成部２２から供給される鏡面反射画像ISを用いて、肌のテカリを解析する。
【００６１】
テカリ画像算出部３１は、鏡面反射画像生成部２２から供給される鏡面反射画像ISから、テカリ画像IGを算出する。テカリ画像IGは、被評価者の皮脂量を示す画像である。
【００６２】
図６は、鏡面反射画像ISの画素（x,y）の輝度値IS(x,y)に対してテカリ画像算出部３１が行う処理内容を示す図である。図６の横軸は、鏡面反射画像ISの画素（x,y）の輝度値IS(x,y)を表し、縦軸は、テカリ画像IGの画素（x,y）の輝度値IG(x,y)を表す。
【００６３】
図６に示されるように、テカリ画像算出部３１は、鏡面反射画像ISの輝度値Is_th_minから輝度値Is_th_maxまでの範囲を、０から２５５の輝度値にマッピングすることにより、テカリ画像IGを算出する。
【００６４】
図１に戻り、テカリ量算出部３２は、鏡面反射画像生成部２２から供給される鏡面反射画像ISから、テカリ量（皮脂量）Gloss_valを算出する。テカリ量Gloss_valは、次式（５）により算出される。
【数５】
2015046698.tif 000007
【００６５】
式（５）において、分母のNは、鏡面反射画像ISの画素数を表す。従って、テカリ量Gloss_valは、鏡面反射画像ISの平均輝度によって求めることができる。
【００６６】
テカリ画像算出部３１により算出されたテカリ画像IGと、テカリ量算出部３２により算出されたテカリ量Gloss_valは、テカリ評価部３３に供給される。
【００６７】
テカリ評価部３３は、内部に記憶されているテカリ評価値算出テーブルを用いて、テカリ量算出部３２により算出されたテカリ量Gloss_valから、テカリ評価値Gloss_evalを算出する。
【００６８】
図７は、テカリ評価部３３内に記憶されているテカリ評価値算出テーブルの例を示している。
【００６９】
テカリ評価値算出テーブルは、例えば、図７に示されるように、テカリ量Gloss_valが第１の値gloss_val_th_min未満である場合にはテカリ評価値Gloss_evalとして０を割り当て、第１の値gloss_val_th_min以上第２の値gloss_val_th_max以下のテカリ量Gloss_valに対して０ないし１００のテカリ評価値Gloss_evalを割り当て、第２の値gloss_val_th_maxより大きいテカリ量Gloss_valに対しては１００のテカリ評価値Gloss_evalを割り当てるテーブルである。これにより、テカリ量Gloss_valが、０から１００までのいずれかの値をとるテカリ評価値Gloss_evalに変換される。なお、テカリ評価値算出テーブルは、図７の例に限られない。
【００７０】
テカリ評価部３３は、テカリ評価値算出テーブルに基づいて算出したテカリ評価値Gloss_evalを、テカリ画像算出部３１から供給されたテカリ画像IGとともに、評価結果提示部２４に供給する。
【００７１】
評価結果提示部２４は、前処理部２１から供給される前処理後の無偏光画像ITPと、テカリ評価部３３から供給されるテカリ評価値Gloss_evalとテカリ画像IGを用いて、被評価者の肌のテカリの状態の評価結果を示す情報を、表示装置１３に表示させる。
【００７２】
表示装置１３は、LCD(Liquid Crystal Display)や有機EL(Electro Luminescence)ディスプレイなどで構成され、評価結果提示部２４から供給される画像信号に基づいて、所定の画像を表示する。
【００７３】
なお、表示装置１３は、画像処理装置１２の一部として備えられるものでもよいし、携帯電話機などの携帯情報端末やテレビジョン受像機など、表示機能以外の機能を含む装置であってもよい。換言すれば、表示機能を少なくとも有する任意の種類の装置を表示装置１３として利用することができる。
【００７４】
＜評価結果提示画面の例＞
図８と図９を参照して、評価結果提示部２４により表示装置１３に表示される評価結果提示画面の例について説明する。
【００７５】
図８は、テカリ評価値Gloss_evalを用いた被評価者の肌のテカリの状態の評価結果を提示する評価結果提示画面の例を示している。
【００７６】
図８の評価結果提示画面６０は、メッセージ提示部６１、水分量提示部６２、油分量提示部６３、及び肌状態マップ提示部６４を有する。
【００７７】
メッセージ提示部６１には、予め用意されている複数のメッセージのなかから、被評価者の油分量と水分量に応じて選択された所定のメッセージが表示される。図８の例では、「最もトラブルを起こしやすい肌状態です。積極的な保湿力ケアでトラブル回避！」のメッセージが表示されている。
【００７８】
水分量提示部６２には、被評価者の水分量の測定結果が表示される。被評価者の水分量は、例えば、静電容量方式で肌の水分量を測定する水分量測定器（測定部）で測定され、評価結果提示部２４に供給される。図８の例では、水分量として「０」が表示されている。
【００７９】
油分量提示部６３には、被評価者の油分量の測定結果が表示される。テカリ評価部３３から供給されたテカリ評価値Gloss_evalが被評価者の油分量として油分量提示部６３に表示される。図８の例では、油分量として「５１」が表示されている。
【００８０】
肌状態マップ提示部６４は、被評価者の油分量と水分量の状態を、油分量を横軸、水分量を縦軸とした２次元マップで表す。肌状態は、２次元マップの各象限に対応して「ノーマル肌」、「オイリー肌」、「オイリードライ肌」、または「乾燥肌」に分けられる。具体的には、肌状態は、水分量が50未満でかつ油分量が50未満であれば「乾燥肌」に分類され、水分量が50未満でかつ油分量が50以上であれば「オイリードライ肌」に分類され、水分量が50以上でかつ油分量が50未満であれば「ノーマル肌」に分類され、水分量が50以上でかつ油分量が50以上であれば「オイリー肌」に分類される。そして、２次元マップ上の被評価者の油分量と水分量の位置に、被評価者の肌状態を示す「あなた」の文字が表示されている。
【００８１】
図９は、被評価者の肌のテカリの状態の評価結果を提示する評価結果提示画面のその他の例を示している。
【００８２】
図９の評価結果提示画面７０は、テカリ評価値提示部７１、メッセージ提示部７２、および肌画像提示部７３を有する。
【００８３】
テカリ評価値提示部７１には、テカリ評価部３３から供給されたテカリ評価値Gloss_evalが表示される。図９は、テカリ評価部３３から供給されたテカリ評価値Gloss_evalが75と算出された場合の例であり、テカリ評価値提示部７１には「テカリ評価値：75/100」が表示されている。
【００８４】
メッセージ提示部７２には、予め用意されている複数のメッセージのなかから、被評価者のテカリ評価値Gloss_evalに応じて選択された所定のメッセージが表示される。図９の例では、「テカリが目立つ状態です。皮脂を抑えるケアを心がけましょう。」のメッセージが表示されている。
【００８５】
肌画像提示部７３には、前処理部２１から供給された前処理後の無偏光画像ITPに、テカリ評価部３３から供給されたテカリ画像IGを重畳させた画像が表示される。テカリ画像IGは、テカリが目立つ領域ほど高輝度となっているので、被評価者は肌の表面状態を容易に把握することができる。
【００８６】
＜肌のテカリ評価処理＞
次に、図１０のフローチャートを参照して、撮像システム１の第１の実施の形態による肌のテカリ評価処理について説明する。
【００８７】
初めに、ステップＳ１において、撮像装置１１は、肌画像を撮像する。すなわち、撮像装置１１は、無偏光発光部４２Aと偏光発光部４２Bを時分割で発光させて被評価者の肌を撮像することにより、無偏光画像ITと直交偏光画像IPVの２種類（２枚）の画像を生成し、その結果得られた撮像画像を画像処理装置１２に供給する。
【００８８】
ステップＳ２において、前処理部２１は、撮像装置１１から供給された無偏光画像ITと直交偏光画像IPVに対して、後段での処理を行いやすくするための前処理を行う。具体的には、前処理部２１は、画像の平均輝度が最適な値になるように、式（１）および式（２）による輝度値の調整を行う。前処理後の無偏光画像ITＰと直交偏光画像IPVPは、鏡面反射画像生成部２２に供給され、前処理後の無偏光画像ITＰについては評価結果提示部２４にも供給される。
【００８９】
ステップＳ３において、鏡面反射画像生成部２２のゲイン乗算部５１は、上述した式（３）に従って、直交偏光画像IPVPに対してゲインGainPPを乗算する。ゲイン乗算後の直交偏光画像IPVP,Gは、減算部５２に供給される。
【００９０】
ステップＳ４において、減算部５２は、直交偏光画像IPVから、ゲイン乗算後の直交偏光画像IPVP,Gを減算し、差分画像IDiff1を生成する。すなわち、減算部５２は、直交偏光画像IPVの各画素に対して上述した式（４）の演算を行う。
【００９１】
ステップＳ５において、クリッピング部５３は、減算部５２で算出された差分画像IDiff1に対して、画像が適切な範囲に収まるようにクリッピングするクリッピング処理を行う。そして、クリッピング部５３は、クリッピング処理後の画像を、鏡面反射画像ISとして、テカリ画像算出部３１とテカリ量算出部３２に出力する。
【００９２】
ステップＳ６において、テカリ解析部２３のテカリ画像算出部３１は、鏡面反射画像生成部２２から供給された鏡面反射画像ISから、テカリ画像IGを算出する。より具体的には、テカリ画像算出部３１は、図６に示したように、鏡面反射画像ISの輝度値Is_th_minから輝度値Is_th_maxまでの範囲を、０から２５５の輝度値にマッピングすることにより、テカリ画像IGを算出する。
【００９３】
ステップＳ７において、テカリ解析部２３のテカリ量算出部３２は、鏡面反射画像生成部２２から供給された鏡面反射画像ISから、上述した式（５）によりテカリ量Gloss_valを算出する。
【００９４】
ステップＳ８において、テカリ解析部２３のテカリ評価部３３は、テカリ画像算出部３１により算出されたテカリ量Gloss_valに基づいてテカリの評価を行う。具体的には、テカリ評価部３３は、図７に示したテカリ評価値算出テーブルを用いて、テカリ量Gloss_valからテカリ評価値Gloss_evalを算出する。算出されたテカリ評価値Gloss_evalは、テカリ画像算出部３１から供給されたテカリ画像IGとともに、テカリ評価部３３から評価結果提示部２４に供給される。
【００９５】
ステップＳ９において、評価結果提示部２４は、被評価者の肌のテカリの状態の評価結果を表示装置１３に表示させる。より具体的には、評価結果提示部２４は、前処理部２１から供給される前処理後の無偏光画像ITPと、テカリ評価部３３から供給されるテカリ評価値Gloss_evalとテカリ画像IGなどを用いて、図８の評価結果提示画面や、図９の評価結果提示画面を表示装置１３に表示させる。
【００９６】
以上により、肌のテカリ評価処理が終了する。
【００９７】
上述した肌のテカリ評価処理によれば、撮像装置１１で得られた無偏光画像ITと直交偏光画像IPVを用いて肌の表面状態を評価することができるので、低コストな構成で肌の表面状態を評価することができる。
【００９８】
上述した第１の実施の形態によれば、撮像装置１１で得られた無偏光画像ITと直交偏光画像IPVを２値化せずにテカリ量を評価するため、情報が欠落することなく、より正確に、肌の表面状態を評価することができる。
【００９９】
＜２．第２の実施の形態＞
＜撮像システムのブロック図＞
次に、撮像システムの第２の実施の形態について説明する。
【０１００】
図１１は、本開示に係る撮像システムの第２の実施の形態を示すブロック図である。
【０１０１】
なお、図１１においては、上述した第１の実施の形態と対応する部分については同一の符号を付してあり、その説明は適宜省略する。
【０１０２】
図１１の撮像システム１は、第１の実施の形態と同様、撮像装置１１、画像処理装置１２、および表示装置１３により構成されるが、画像処理装置１２の一部の構成が第１の実施の形態と異なる。
【０１０３】
即ち、第２の実施の形態では、画像処理装置１２が、前処理部２１、並行偏光画像生成部８１、きめ解析部８２、及び評価結果提示部８３により構成される。これにより、画像処理装置１２は、被評価者の肌の表面状態として、肌のきめを評価する。
【０１０４】
並行偏光画像生成部８１は、前処理部２１から供給される、前処理後の無偏光画像ITＰと直交偏光画像IPVPを用いて、並行偏光成分の画像である並行偏光画像IPPを生成し、きめ解析部８２に供給する。
【０１０５】
きめ解析部８２は、並行偏光画像生成部８１で算出された並行偏光画像IPPを用いて、被評価者の肌のきめを解析するきめ解析処理を実行し、その結果得られる解析結果を、評価結果提示部８３に供給する。
【０１０６】
評価結果提示部８３は、きめ解析部８２から供給される解析結果を用いて、被評価者の肌のきめの状態の評価結果を示す情報を、表示装置１３に表示させる。
【０１０７】
＜並行偏光画像生成部８１の構成＞
図１２は、並行偏光画像生成部８１の詳細構成例を示すブロック図である。
【０１０８】
並行偏光画像生成部８１は、ゲイン算出部９１、ゲイン乗算部９２、減算部９３、およびオフセット加算部９４により構成される。
【０１０９】
前処理部２１から供給された前処理後の無偏光画像ITＰは、ゲイン算出部９１と減算部９３に入力され、前処理後の直交偏光画像IPVPは、ゲイン算出部９１とゲイン乗算部９２に入力される。
【０１１０】
ゲイン算出部９１は、ゲイン乗算部９２が直交偏光画像IPVPに対して乗算するゲインGainPPを算出する。このゲインGainPPは下記の考えに基づいて求めることができる。すなわち、無偏光画像ITＰは、２色性反射モデルによると表面反射成分と内部反射成分から成る。表面反射成分は表面の微細構造および鏡面反射成分を含んでおり、比較的高域成分が支配的であるのに対し、内部反射画像は肌内部の色を表すため、低域成分が支配的である。そのため、以下の式（６）で算出されるゲインGainPPを求めることで、表面反射成分の画像を得ることができる。
【０１１１】
【数６】
2015046698.tif 000008
【０１１２】
式（６）のargmax｛｝は、｛｝内の計算値が最大になる変数を求める関数であり、式（６）は、局所コントラストContrast(△d(x,y))の総和が最大となるようなゲインGainPPを算出することを表す。
【０１１３】
ここで、△d(x,y)は、以下の式（７）で与えられ、減算部９３で行われる減算の処理内容を、ゲインGainPPを未知数として表した式である。
【数７】
2015046698.tif 000009
【０１１４】
局所コントラストContrast(△d(x,y))としては、△d(x,y)に対して微分フィルタを適用し、その応答を局所コントラストとする方法を採用して、以下の式（８）で与えられる。
【数８】
2015046698.tif 000010
【０１１５】
式（８）によれば、３×３の微分フィルタを水平方向と垂直方向の方向別に２種類用意し、水平方向と垂直方向でそれぞれ畳み込み演算を行って絶対値を取った値を加算した値により、局所コントラストContrast(△d(x,y))が求められる。なお、式（８）の△Dは、減算部９３で行われる減算処理後の差分画像の領域に対応する△d(x,y)の集合全体を表し、丸（○）のなかにバツ（×）を表した記号は、畳み込み演算を表す。なお、局所コントラストContrast(△d(x,y))は、式（８）以外の方法で計算してもよい。
【０１１６】
算出されたゲインGainPPは、ゲイン算出部９１からゲイン乗算部９２に供給される。
【０１１７】
ゲイン乗算部９２は、以下の式（９）に従って、前処理後の直交偏光画像IPVPに対して、ゲイン算出部９１で算出されたゲインGainPPを乗算し、ゲイン乗算後の直交偏光画像IPVP,Gを算出して減算部９３に供給する。
【数９】
2015046698.tif 000011
【０１１８】
減算部９３は、次式（１０）に従って、無偏光画像ITPから、ゲイン乗算後の直交偏光画像IPVP,Gを減算し、差分画像IDiff2を生成して、オフセット加算部９４に供給する。
【数１０】
2015046698.tif 000012
【０１１９】
オフセット加算部９４は、減算部９３から供給される差分画像IDiff2にオフセット値std_valを加算することにより並行偏光画像IPPを算出する。すなわち、オフセット加算部９４は、次式（１１）の演算を行う。算出された並行偏光画像IPPは、きめ解析部８２に供給される。
【数１１】
2015046698.tif 000013
【０１２０】
＜第１の実施の形態と第２の実施の形態の違い＞
図１３と図１４を参照して、第１の実施の形態と第２の実施の形態の処理の違いについて説明する。
【０１２１】
図１３は、上述した第１の実施の形態における鏡面反射画像ISの算出の概念を示す図である。
【０１２２】
図１３のグラフの横軸は、画像の所定の一ラインの画素位置ｘを表し、縦軸は、画素位置ｘにおける輝度値（画素値）を表す。
【０１２３】
被評価者の肌に光を照射して反射されてくる光の成分には、肌の表面で反射されてくる表面反射成分と、肌の内部に一旦侵入して内部で反射されてくる内部反射成分とがある。全反射成分は、表面反射成分と内部反射成分のいずれをも含む反射成分である。
【０１２４】
全反射成分は、無偏光発光部４２Aを発光させて撮像して得られる無偏光画像ITとして取得することができ、内部反射成分は、偏光発光部４２Bを発光させて撮像して得られる直交偏光画像IPVとして取得することができる。
【０１２５】
第１の実施の形態の画像処理装置１２は、全反射成分である無偏光画像ITから、内部反射成分である直交偏光画像IPVを減算することにより、図１３において実線で示される表面反射成分である鏡面反射画像ISを算出している。ここで算出された鏡面反射画像ISのうち、図１３において斜線を付して示される正の領域が、肌のテカリの部分に相当する。
【０１２６】
これに対して、図１４は、第２の実施の形態における並行偏光画像IPPの算出の概念を示す図である。
【０１２７】
第２の実施の形態の並行偏光画像生成部８１は、全反射成分である無偏光画像ITから、内部反射成分である直交偏光画像IPVを減算することにより得られる表面反射成分にオフセット値std_valを加算して全反射成分等と同一の輝度レベルに調整することで、表面反射成分である並行偏光画像IPPを算出している。表面反射成分を全反射成分などと同一輝度レベルに調整するためのオフセット値は全反射成分（無偏光画像IT）と内部反射成分（直交偏光画像IPV）の平均値に相当するものであるが、無偏光画像ITと直交偏光画像IPVは前処理部２１により標準値std_valに輝度値が調整されているので、オフセット値として標準値std_valを利用することができる。
【０１２８】
＜きめ解析部８２の構成＞
図１５は、きめ解析部８２の詳細構成例を示すブロック図である。
【０１２９】
きめ解析部８２は、表皮画像処理部１０１、表皮パターン検出部１０２、後天的要素解析部１０３、及び、きめ評価部１０４により構成される。
【０１３０】
表皮画像処理部１０１には、並行偏光画像生成部８１で算出された並行偏光画像IPPが供給される。なお、以下では、並行偏光画像IPPを表皮画像とも称して説明を行う。
【０１３１】
表皮画像処理部１０１は、補正やノイズ除去等の所定の画像処理を表皮画像に施し、画像処理後の表皮画像を、表皮パターン検出部１０２および後天的要素解析部１０３に供給する。
【０１３２】
表皮パターン検出部１０２は、皮丘または皮溝により表皮に形成されている表皮画像内の表皮のパターン（以下、表皮パターンと称する）を検出し、検出結果（以下、表皮パターン検出結果と称する）を後天的要素解析部１０３に供給する。
【０１３３】
後天的要素解析部１０３は、画像処理後の表皮画像、および、表皮パターン検出結果に基づいて、肌のきめの状態を示す要素のうち後天的な要素の解析を行う。後天的要素解析部１０３は、解析結果をきめ評価部１０４に供給する。
【０１３４】
きめ評価部１０４は、後天的要素解析部１０３による解析結果に基づいて、被評価者の肌のきめの状態を評価し、評価結果を評価結果提示部８３（図１１）に供給する。
【０１３５】
＜表皮画像処理部１０１および表皮パターン検出部１０２の構成＞
図１６は、表皮画像処理部１０１および表皮パターン検出部１０２の機能構成例を示すブロック図である。
【０１３６】
表皮画像処理部１０１は、画像補正部１２１、単一チャネル抽出部１２２、および、ノイズ除去部１２３を含むように構成される。また、表皮パターン検出部１０２は、２値化部１３１およびラベリング処理部１３２を含むように構成される。
【０１３７】
画像補正部１２１は、表皮画像の歪み補正や縮小等の所定の画像補正を行い、補正後の表皮画像を単一チャネル抽出部１２２に供給する。
【０１３８】
単一チャネル抽出部１２２は、補正した表皮画像から所定のチャネルの信号成分を抽出し、抽出した信号成分からなる表皮画像（以下、単一チャネル表皮画像と称する）をノイズ除去部１２３に供給する。
【０１３９】
ノイズ除去部１２３は、単一チャネル表皮画像のノイズを除去し、ノイズ除去後の単一チャネル表皮画像（以下、ノイズ除去表皮画像と称する）を、表皮パターン検出部１０２の２値化部１３１および後天的要素解析部１０３に供給する。
【０１４０】
２値化部１３１は、ノイズ除去表皮画像に対して２値化処理を行い、得られた２値化画像（以下、２値化表皮画像と称する）をラベリング処理部１３２に供給する。
【０１４１】
ラベリング処理部１３２は、２値化表皮画像に対してラベリング処理を行うことにより、表皮パターンを検出する。より具体的には、ラベリング処理部１３２は、表皮画像内の皮丘の領域（以下、皮丘領域と称する）を表皮パターンとして検出する。また、ラベリング処理部１３２は、表皮画像内の皮丘領域の数をカウントする。そして、ラベリング処理部１３２は、皮丘領域および皮丘数の検出結果を示す表皮パターン検出結果を後天的要素解析部１０３に供給する。
【０１４２】
＜後天的要素解析部１０３の構成例＞
図１７は、後天的要素解析部１０３の機能構成例を示すブロック図である。
【０１４３】
後天的要素解析部１０３は、表皮サイズ分布解析部１５１、表皮形状分布解析部１５２、表皮形状分布解析部１５３、および、表皮方向性解析部１５４を含むように構成される。
【０１４４】
表皮サイズ分布解析部１５１は、表皮パターンのサイズの分布を解析する。より具体的には、表皮サイズ分布解析部１５１は、皮丘領域のサイズの分布を解析し、皮丘領域のサイズの均一性を表す表皮サイズ分布評価値を算出する。表皮サイズ分布解析部１５１は、算出した表皮サイズ分布評価値をきめ評価部１０４に供給する。
【０１４５】
表皮形状分布解析部１５２は、表皮パターンの形状の分布を解析する。より具体的には、表皮形状分布解析部１５２は、皮丘領域の形状の分布を解析し、皮丘領域の形状の均一性を表す表皮形状分布評価値を算出する。表皮形状分布解析部１５２は、算出した表皮形状分布評価値をきめ評価部１０４に供給する。
【０１４６】
表皮形状分布解析部１５３は、表皮形状分布解析部１５２とは異なる観点で、表皮パターンの形状の分布を解析する。より具体的には、表皮形状分布解析部１５３は、各皮丘領域と所定の参照形状とを比較し、各参照形状に近い形状を有する皮丘領域の割合を示す表皮形状分布情報を求める。表皮形状分布解析部１５３は、求めた表皮形状分布情報をきめ評価部１０４に供給する。
【０１４７】
表皮方向性解析部１５４は、表皮パターンの方向性を解析する。より具体的には、表皮方向性解析部１５４は、ノイズ除去表皮画像に対して、例えば、0度、45度、90度、135度の４方向のエッジフィルタを適用することにより、皮丘領域のエッジ方向の分布を解析し、皮丘領域のエッジ方向の分布の均一性を表す表皮方向性評価値を算出する。表皮方向性解析部１５４は、算出した表皮方向性評価値を、きめ評価部１０４に供給する。
【０１４８】
なお、皮丘のサイズ、形状、エッジ方向は、加齢、健康状態、肌の手入れ等により後天的に変化する。従って、表皮サイズ分布評価値、表皮形状分布評価値、表皮形状分布情報、および、表皮方向性評価値は、肌のきめの状態の後天的性質を評価するための指標となる。
【０１４９】
＜肌のきめ評価処理＞
次に、図１８のフローチャートを参照して、撮像システムの第２の実施の形態による肌のきめ評価処理について説明する。
【０１５０】
初めに、ステップＳ２１において、撮像装置１１は、肌画像を撮像する。すなわち、撮像装置１１は、無偏光発光部４２Aと偏光発光部４２Bを時分割で発光させて被評価者の肌を撮像することにより、無偏光画像ITと直交偏光画像IPVの２種類（２枚）の画像を生成し、その結果得られた撮像画像を画像処理装置１２に供給する。
【０１５１】
ステップＳ２２において、前処理部２１は、撮像装置１１から供給された無偏光画像ITと直交偏光画像IPVに対して、後段での処理を行いやすくするための前処理を行う。具体的には、前処理部２１は、画像の平均輝度が最適な値になるように、式（１）および式（２）による輝度値の調整を行う。前処理後の無偏光画像ITＰと直交偏光画像IPVPは、並行偏光画像生成部８１に供給される。
【０１５２】
ステップＳ２３において、並行偏光画像生成部８１のゲイン算出部９１は、ゲイン乗算部９２が直交偏光画像IPVPに対して乗算するゲインGainPPを算出する。
【０１５３】
ステップＳ２４において、ゲイン乗算部９２は、前処理後の直交偏光画像IPVPに対して、ゲイン算出部９１で算出されたゲインGainPPを乗算し、ゲイン乗算後の直交偏光画像IPVP,Gを減算部９３に供給する。具体的には、ゲイン乗算部９２は、上述した式（９）の演算を行う。
【０１５４】
ステップＳ２５において、減算部９３は、無偏光画像ITPから、ゲイン乗算後の直交偏光画像IPVP,Gを減算し、差分画像IDiff2を生成して、オフセット加算部９４に供給する。すなわち、減算部９３は、無偏光画像ITPの各画素に対して、上述した式（１０）の演算を行う。
【０１５５】
ステップＳ２６において、オフセット加算部９４は、式（１１）に従って、差分画像IDiff2にオフセット値std_valを加算することにより、並行偏光画像IPPを生成する。そして、オフセット加算部９４は、生成した並行偏光画像IPPを、きめ解析部８２に供給する。
【０１５６】
ステップＳ２７において、きめ解析部８２は、ステップＳ２６で生成された並行偏光画像IPP（表皮画像）を用いて、被評価者の肌のきめを解析するきめ解析処理を実行し、その結果得られる解析結果を、評価結果提示部８３に供給する。ステップＳ２７のきめ解析処理の詳細は、図１９以降で後述する。
【０１５７】
ステップＳ２８において、評価結果提示部８３は、きめ解析部８２から供給される解析結果を用いて、被評価者の肌のきめの状態の評価結果を示す情報を、表示装置１３に表示させ、処理を終了する。
【０１５８】
＜きめ解析処理＞
図１９は、図１８のステップＳ２７におけるきめ解析処理の詳細なフローチャートを示している。
【０１５９】
この処理では、初めに、ステップＳ４１において、表皮画像処理部１０１は、補正やノイズ除去等の所定の画像処理を、表皮画像としての並行偏光画像IPPに施す表皮画像処理を行う。表皮画像処理の詳細は、図２０を参照して後述する。
【０１６０】
ステップＳ４２において、表皮パターン検出部１０２は、皮丘または皮溝により表皮に形成されている表皮画像内の表皮パターンを検出し、検出結果である表皮パターン検出結果出力する表皮パターン検出処理を行う。表皮パターン検出処理の詳細は、図２１を参照して後述する。
【０１６１】
ステップＳ４３において、後天的要素解析部１０３は、画像処理後の表皮画像、および、表皮パターン検出結果に基づいて、肌のきめの状態を示す要素のうち後天的な要素の解析を行う後天的要素解析処理を行う。後天的要素解析処理の詳細は、図２２を参照して後述する。
【０１６２】
ステップＳ４４において、きめ評価部１０４は、後天的要素解析部１０３による解析結果に基づいて、被評価者の肌のきめの状態を評価し、評価結果として、きめ評価値を算出する。算出されたきめ評価値は評価結果提示部８３に供給され、きめ解析処理は終了して、処理は、図１８に戻り、ステップＳ２８に進む。
【０１６３】
以上のようにして、肌のきめの状態を示す後天的要素であるきめの均一性、および、皮丘の形状に基づいて、肌のきめの状態を評価することができる。その結果、より正確に肌のきめの状態を評価することができる。
【０１６４】
＜表皮画像処理＞
次に、図２０のフローチャートを参照して、図１９のステップＳ４１における表皮画像処理の詳細について説明する。
【０１６５】
ステップＳ６１において、画像補正部１２１は、画像の補正を行う。例えば、表皮画像の周縁部には、シェーディング歪みやレンズ歪みなどが発生していると考えられる。そこで、画像補正部１２１は、例えば、表皮画像に対してシェーディング補正やレンズ歪補正を行ったり、表皮画像の中央の領域を切り出したりする。
【０１６６】
また、画像補正部１２１は、例えば、処理コストを下げるために、補正後の画像を縮小する。
【０１６７】
なお、以下、特に断りのない限り、補正後の表皮画像のサイズを縦160画素×横120画素とする。
【０１６８】
画像補正部１２１は、補正後の表皮画像を単一チャネル抽出部１２２に供給する。
【０１６９】
ステップＳ６２において、単一チャネル抽出部１２２は、補正した表皮画像から所定のチャネルの信号成分を抽出する。例えば、単一チャネル抽出部１２２は、補正した表皮画像からＢ（Blue）チャネルの信号成分を抽出する。そして、単一チャネル抽出部１２２は、抽出した信号成分からなる単一チャネル表皮画像をノイズ除去部１２３に供給する。
【０１７０】
ステップＳ６３において、ノイズ除去部１２３は、単一チャネル表皮画像のノイズを除去する。例えば、ノイズ除去部１２３は、単一チャネル表皮画像に対して平滑化フィルタを適用する。
【０１７１】
より具体的には、ノイズ除去部１２３は、例えば、ランダムノイズや、皮丘、皮溝上のテクスチャ成分を除去するために、単一チャネル表皮画像に対してエッジ保存型平滑化フィルタを適用する。このエッジ保存型平滑化フィルタには、例えば、kernelサイズが３×３画素、σspace＝15、σcolor＝15のバイラテラルフィルタが用いられる。
【０１７２】
次に、ノイズ除去部１２３は、例えば、汗腺などの影響による高輝度領域や鏡面反射成分を除去するために、単一チャネル表皮画像に対して孤立点除去フィルタを適用する。この孤立点除フィルタには、例えば、３×３画素のメディアンフィルタが用いられる。
【０１７３】
なお、これらのノイズ除去の処理は撮影環境や撮像装置１１の性能に大きく依存するため、それらに応じて、適用するフィルタ、パラメータなどを適宜変更することが望ましい。
【０１７４】
そして、ノイズ除去部１２３は、ノイズ除去後の単一チャンネル表皮画像であるノイズ除去表皮画像を、表皮パターン検出部１０２の２値化部１３１、および、後天的要素解析部１０３の表皮方向性解析部１５４に供給する。
【０１７５】
以上で表皮画像処理は終了し、図１９のきめ解析処理に戻る。
【０１７６】
＜表皮パターン検出処理＞
次に、図２１のフローチャートを参照して、図１９のステップＳ４２における表皮パターン検出処理の詳細について説明する。
【０１７７】
ステップＳ７１において、２値化部１３１は、２値化処理を行う。具体的には、２値化部１３１は、一様な光源下において、表皮画像の明るい領域は手前にある皮丘、暗い領域は奥にある皮溝であるという前提のもと、皮丘、皮溝のセグメンテーションを行うために、ノイズ除去表皮画像を２値化する。そして、２値化部１３１は、ノイズ除去表皮画像を２値化して得られた２値化表皮画像をラベリング処理部１３２に供給する。
【０１７８】
ステップＳ７２において、ラベリング処理部１３２は、２値化表皮画像に対して、外側から４連結または８連結によるラベリング処理を行う。ここで、ラベリング処理部１３２は、最も外側の白の輪郭で囲まれる領域を１つの領域として検出し、その内側に黒色の領域や、白の輪郭で囲まれる領域が存在しても無視する。これにより、例えば、皮丘の内側の凹み等により暗くなる領域が無視され、皮丘領域を正確に検出することが可能になる。
【０１７９】
なお、以下、ラベリング処理によりラベルが付与された領域をラベリング領域と称する。
【０１８０】
また、一般的な人の肌において、皮溝の間隔は0.25〜0.5mmとされる。皮丘の形状が三角形または四角形が多いことを考慮すると、皮丘の面積は0.031〜0.25mm2程度になると考えられる。
【０１８１】
そこで、ラベリング処理部１３２は、撮像装置１１のイメージセンサ４３のサイズ等に基づいて、表皮画像における皮丘のサイズの適正範囲を求める。そして、ラベリング処理部１３２は、検出したラベリング領域の中から、求めた適正範囲内のサイズの領域を皮丘領域として検出する。
【０１８２】
また、ラベリング処理部１３２は、検出した皮丘領域の数を、皮丘数Nridgeとしてカウントする。
【０１８３】
そして、ラベリング処理部１３２は、皮丘領域および皮丘数Nridgeの検出結果を示す表皮パターン検出結果を、後天的要素解析部１０３の表皮サイズ分布解析部１５１、表皮形状分布解析部１５２、および、表皮形状分布解析部１５３に供給する。
【０１８４】
以上で表皮パターン検出処理は終了し、図１９のきめ解析処理に戻る。
【０１８５】
＜後天的要素解析処理＞
次に、図２２のフローチャートを参照して、図１９のステップＳ４３における後天的要素解析処理の詳細について説明する。
【０１８６】
ステップＳ８１において、表皮サイズ分布解析部１５１は、表皮パターンのサイズの分布を解析する。
【０１８７】
具体的には、まず、表皮サイズ分布解析部１５１は、皮丘領域のサイズのヒストグラムを作成する。図２３は、皮丘領域のサイズ（面積）のヒストグラムの例を示している。図内の横軸は、皮丘領域のサイズを示し、縦軸はヒストグラムの各ビンの度数frqnを示している。
【０１８８】
次に、表皮サイズ分布解析部１５１は、次式（１２）により、皮丘領域のサイズの平均値Havgを算出する。
【０１８９】
【数１２】
2015046698.tif 000014
【０１９０】
なお、ｎは各ビンの中央値を示している。
【０１９１】
また、表皮サイズ分布解析部１５１は、次式（１３）により、皮丘領域のサイズの分散Hvarを算出する。
【０１９２】
【数１３】
2015046698.tif 000015
【０１９３】
さらに、表皮サイズ分布解析部１５１は、図２４に示される正規化カーブにより、分散Hvarを0から1の範囲内に正規化した表皮サイズ分布評価値Eevalsizeを算出する。ここで、図中、Size_th_minおよびSize_th_maxは、それぞれ正規化カーブを決定する閾値である。
【０１９４】
表皮サイズ分布評価値Eevalsizeは、皮丘領域のサイズの分散Hvarが小さくなるほど大きくなる。すなわち、表皮サイズ分布評価値Eevalsizeは、皮丘領域のサイズのバラツキが小さくなるほど大きくなる。従って、表皮サイズ分布評価値Eevalsizeは、皮丘領域のサイズの均一性を表す指標となる。
【０１９５】
表皮サイズ分布解析部１５１は、表皮サイズ分布評価値Eevalsizeをきめ評価部１０４に供給する。
【０１９６】
ステップＳ８２において、表皮形状分布解析部１５２は、表皮形状分布解析処理１を行う。
【０１９７】
＜表皮形状分布解析処理１＞
ここで、図２５のフローチャートを参照して、ステップＳ８２の表皮形状分布解析処理１の詳細について説明する。
【０１９８】
ステップＳ１０１において、表皮形状分布解析部１５２は、基準領域を選択する。すなわち、表皮形状分布解析部１５２は、まだ基準領域に設定していない皮丘領域を１つ選択し、基準領域に設定する。
【０１９９】
ステップＳ１０２において、表皮形状分布解析部１５２は、比較領域を選択する。すなわち、表皮形状分布解析部１５２は、まだ基準領域との形状の比較を行っていない皮丘領域を１つ選択し、比較領域に設定する。
【０２００】
ステップＳ１０３において、表皮形状分布解析部１５２は、基準領域と比較領域の形状の相違度を算出する。
【０２０１】
例えば、表皮形状分布解析部１５２は、基準領域と比較領域の形状をHuモーメント不変量により数値化し、その数値化した値に基づいて、基準領域と比較領域の形状の相違度を算出する。相違度の算出方法は特に限定されないが、基準領域と比較領域の形状が近いほど、相違度は小さくなる。
【０２０２】
なお、Huモーメント不変量の詳細については、例えば、「M-K. Hu. "Visual pattern recognition by moment invariants", IRE Trans.action on Information Theory, 1962年2月, Volume 8、pp. 179-187」に記載されている。
【０２０３】
ステップＳ１０４において、表皮形状分布解析部１５２は、相違度を積算する。すなわち、表皮形状分布解析部１５２は、これまでの各皮丘領域の相違度の積算値に、新たに算出した相違度を加算する。
【０２０４】
ステップＳ１０５において、表皮形状分布解析部１５２は、基準領域と比較していない皮丘領域が残っているか否かを判定する。基準領域と比較していない皮丘領域が残っていると判定された場合、処理はステップＳ１０２に戻る。
【０２０５】
その後、ステップＳ１０５において、基準領域と比較していない皮丘領域が残っていないと判定されるまで、ステップＳ１０２乃至Ｓ１０５の処理が繰り返し実行される。
【０２０６】
一方、ステップＳ１０５において、基準領域と比較していない皮丘領域が残っていないと判定された場合、処理はステップＳ１０６に進む。
【０２０７】
ステップＳ１０６において、表皮形状分布解析部１５２は、基準領域に設定していない皮丘領域が残っているか否かを判定する。基準領域に設定していない皮丘領域が残っていると判定された場合、処理はステップＳ１０１に戻る。
【０２０８】
その後、ステップＳ１０６において、基準領域に設定していない皮丘領域が残っていないと判定されるまで、ステップＳ１０１乃至Ｓ１０６の処理が繰り返し実行される。これにより、全ての皮丘領域の組み合わせについて相違度が算出され、さらに、相違度の累積加算値が算出される。
【０２０９】
一方、ステップＳ１０６において、基準領域に設定していない皮丘領域が残っていないと判定された場合、処理はステップＳ１０７に進む。
【０２１０】
ステップＳ１０７において、表皮形状分布解析部１５２は、次式（１４）により、相違度の平均Diffavgを算出する。
【０２１１】
【数１４】
2015046698.tif 000016
【０２１２】
なお、Ri、Rjは、それぞれラベルｉおよびラベルｊの皮丘領域を表す。従って、式（１４）の右辺の分母は、全ての皮丘領域の組み合わせの形状の相違度の累積加算値となる。また、Ncompは、次式（１５）により求められ、皮丘領域の形状の比較数を表す。
【０２１３】
【数１５】
2015046698.tif 000017
【０２１４】
ステップＳ１０８において、表皮形状分布解析部１５２は、評価値を算出する。具体的には、表皮形状分布解析部１５２は、図２６に示される正規化カーブにより、相違度の平均Diffavgを0から1の範囲内に正規化した表皮形状分布評価値Eevalshapeを算出する。ここで、図中、Shape_th_minおよびShape_th_maxは、それぞれ正規化カーブを決定する閾値である。
【０２１５】
表皮形状分布評価値Eevalshapeは、皮丘領域の形状の相違度の平均Diffavgが小さくなるほど大きくなる。すなわち、表皮形状分布評価値Eevalshapeは、皮丘領域の形状のバラツキが小さくなるほど大きくなる。従って、表皮形状分布評価値Eevalshapeは、皮丘領域の形状の均一性を表す指標となる。
【０２１６】
表皮形状分布解析部１５２は、表皮形状分布評価値Eevalshapeをきめ評価部１０４に供給する。
【０２１７】
その後、表皮形状分布解析処理１は終了する。
【０２１８】
図２２に戻り、ステップＳ８３において、表皮形状分布解析部１５３は、表皮形状分布解析処理２を行う。
【０２１９】
＜表皮形状分布解析処理２＞
ここで、図２７のフローチャートを参照して、ステップＳ８３の表皮形状分布解析処理２の詳細について説明する。
【０２２０】
ステップＳ１２１において、表皮形状分布解析部１５３は、参照形状を選択する。
【０２２１】
皮丘の形状は、一般的に三角形、または菱形が理想的とされている。一方、二股以上に分かれているような形状、細長い形状のものは、理想的でないと考えられる。
【０２２２】
そこで、表皮形状分布解析部１５３は、例えば、図２８に示されるShape0乃至Shape3を参照形状に設定する。参照形状Shape0およびShape1は、それぞれ三角形および菱形とされ、理想的な皮丘の形状に近い。一方、参照形状Shape2およびShape3は、二股に分かれた形状および細長い形状であり、理想的でない皮丘の形状に近い。
【０２２３】
そして、表皮形状分布解析部１５３は、まだ皮丘領域との比較を行っていない参照形状を１つ選択する。
【０２２４】
ステップＳ１２２において、表皮形状分布解析部１５３は、比較領域を選択する。すなわち、表皮形状分布解析部１５２は、まだ参照形状との比較を行っていない皮丘領域を１つ選択し、比較領域に設定する。
【０２２５】
ステップＳ１２３において、表皮形状分布解析部１５３は、参照形状と比較領域の形状の相違度を算出する。なお、ここでの相違度の算出には、上述した図２５のステップＳ１０３における、皮丘領域の基準領域と比較領域の相違度の算出と同様の方法が用いられる。
【０２２６】
ステップＳ１２４において、表皮形状分布解析部１５３は、相違度を積算する。すなわち、表皮形状分布解析部１５３は、現在の参照形状に対する各皮丘領域の相違度のこれまでの積算値に、新たに算出した相違度を加算する。
【０２２７】
ステップＳ１２５において、表皮形状分布解析部１５３は、現在の参照形状と比較していない皮丘領域が残っているか否かを判定する。現在の参照形状と比較していない皮丘領域が残っていると判定された場合、処理はステップＳ１２２に戻る。
【０２２８】
その後、ステップＳ１２５において、現在の参照形状と比較していない皮丘領域が残っていないと判定されるまで、ステップＳ１２２乃至Ｓ１２５の処理が繰り返し実行される。
【０２２９】
一方、ステップＳ１２５において、現在の参照形状と比較していない皮丘領域が残っていないと判定された場合、処理はステップＳ１２６に進む。
【０２３０】
ステップＳ１２６において、表皮形状分布解析部１５３は、比較していない参照形状が残っているか否かを判定する。比較していない参照形状が残っていると判定された場合、処理はステップＳ１２１に戻る。
【０２３１】
その後、ステップＳ１２６において、比較していない参照形状が残っていないと判定されるまで、ステップＳ１２１乃至Ｓ１２６の処理が繰り返し実行される。これにより、次式（１６）に示されるように、各参照形状について、各皮丘領域との形状の相違度の累積加算値Diffiが算出される。
【０２３２】
【数１６】
2015046698.tif 000018
【０２３３】
なお、Siは、IDの値がiの参照形状を表す。
【０２３４】
一方、ステップＳ１２６において、比較していない参照形状が残っていないと判定された場合、処理はステップＳ１２７に進む。
【０２３５】
ステップＳ１２７において、表皮形状分布解析部１５３は、皮丘領域の形状の割合を算出する。具体的には、表皮形状分布解析部１５３は、次式（１７）により、皮丘領域の形状の割合を示す表皮形状分布情報ShapeRatioiを算出する。
【０２３６】
【数１７】
2015046698.tif 000019
【０２３７】
ここで、NRSは参照形状の総数を表している。
【０２３８】
従って、表皮形状分布情報ShapeRatioiは、IDの値がiの参照形状に近い形状を有する皮丘領域の割合を示す。
【０２３９】
表皮形状分布解析部１５２は、表皮形状分布情報ShapeRatioiをきめ評価部１０４に供給する。
【０２４０】
その後、表皮形状分布解析処理２は終了する。
【０２４１】
図２２に戻り、ステップＳ８４において、表皮方向性解析部１５４は、ノイズ除去表皮画像に対して、例えば、0度、45度、90度、135度の４方向のエッジフィルタを適用することにより、表皮パターンの方向性を解析する。より具体的には、表皮方向性解析部１５４は、皮丘領域のエッジ方向が４方向に均一に分布していない場合に１よりも小さな値をとるような、皮丘領域のエッジ方向の分布の均一性を表す表皮方向性評価値Eevaldirectionを算出する。
【０２４２】
以上で後天的要素解析処理が終了し、処理は図１９のきめ解析処理に戻り、次のステップＳ４４のきめ評価部１０４によるきめ評価値の算出に進む。
【０２４３】
＜きめ評価値の算出＞
そこで、次に、きめ評価部１０４が行う、きめ評価値の算出について詳しく説明する。
【０２４４】
例えば、きめ評価部１０４は、次式（１８）により、きめ評価値eval1totalを算出する。
【０２４５】
eval1total＝Eevalsize×Eevalshape×Eevaldirection  ・・・（１８）
【０２４６】
きめ評価値eval1totalは、皮丘のサイズの均一性、皮丘の形状の均一性、皮丘の方向の分布の均一性がそれぞれ高いほど、すなわち、きめが全体的に整っているほど（きめの均一性が高いほど）大きくなる。また、皮丘のサイズの均一性、皮丘の形状の均一性、皮丘の方向の分布の均一性は、加齢、健康状態、手入れの状態等により後天的に変化する。従って、きめ評価値eval1totalは、後天的に変化する肌のきめの均一性を評価する指標となる。
【０２４７】
このきめの均一性は、きめの細かさと同様に、肌の美観に大きく影響する。すなわち、きめが細かくても、きめが全体的に整っていなければ、肌の見た目が悪くなる一方、きめが細かくなくても、きめが全体的に整っていれば、肌の見た目が良くなる。
【０２４８】
また、きめ評価値eval1totalの代わりに、あるいは、きめ評価値eval1totalとともに、次式（１９）により、きめ評価値eval2totalを算出するようにしてもよい。
【０２４９】
eval2total＝Eevalsize×Eevalshape×Eevaldirection×ShapeRatioideal  ・・・（１９）
【０２５０】
ShapeRatioidealは、例えば、次式（２０）により算出される。
【０２５１】
ShapeRatioideal＝ShapeRatio0×ShapeRatio1  ・・・（２０）
【０２５２】
ShapeRatio0は図２８の三角形の参照形状Shape0に対するShapeRatioであり、ShapeRatio1は図２８の菱形の参照形状Shape1に対するShapeRatioである。すなわち、ShapeRatioidealは、皮丘領域が理想的な形状とされる三角形または菱形の形状を有する割合を示している。
【０２５３】
従って、eval2totalは、きめの均一性に加えて、理想的な形状の皮丘の割合が高いほど大きくなる。ゆえに、きめ評価値eval2totalは、きめ評価値eval1totalと比較して、肌のきめ状態に影響を与える後天的な要素をより詳細に評価する指標となる。
【０２５４】
そして、きめ評価部１０４は、肌のきめの状態の評価結果を評価結果提示部８３に供給する。このとき、きめ評価部１０４は、きめ評価値eval1totalおよびきめ評価値eval2totalだけでなく、それらの算出に用いた各評価値も評価結果提示部８３に供給する。
【０２５５】
＜きめ評価結果の提示例＞
評価結果提示部８３によるきめ評価結果の提示例について説明する。
【０２５６】
例えば、評価結果提示部８３は、図２９に示される画面を表示装置１３に表示させる。この例では、前回と今回の皮丘のサイズの均一性、皮丘の形状の均一性、皮丘の方向の分布の均一性、並びに、きめの細かさの評価値を個々に比較して示すレーダチャートが示されている。このレーダチャートの値には、表皮サイズ分布評価値Eevalsize、表皮形状分布評価値Eevalshape、表皮方向性評価値Eevaldirection、皮丘数評価値Eevalnumが、それぞれ用いられる。
【０２５７】
また、この例では、前回と今回の肌のきめの状態の総合判定の変化が示されている。この総合判定値は、例えば、表皮サイズ分布評価値Eevalsize、表皮形状分布評価値Eevalshape、表皮方向性評価値Eevaldirection、及び皮丘数評価値Eevalnumを総合評価して得られたきめ評価値eval3totalを、前回のきめ評価値eval3totalと比較した結果から、表示される。
【０２５８】
これにより、被評価者は、自分の肌の状態を瞬時に知ることができ、なおかつ、前回の評価時からの変化も知ることができる。
【０２５９】
また、図３０に示されるように、表皮形状分布情報ShapeRatioiに基づいて、皮丘の形状の分布を示す円グラフを、あわせて提示するようにしてもよい。
【０２６０】
以上のようにして、きめ解析部８２によるきめ解析処理では、肌のきめの状態の後天的性質と先天的性質を分けて評価することができる。また、後天的性質と先天的性質の両方に基づいて、より詳細に肌のきめの状態を評価することができる。
【０２６１】
上述した肌のきめ解析処理によれば、撮像装置１１で得られた無偏光画像と直交偏光画像を用いて肌の表面状態を評価することができるので、低コストな構成で肌の表面状態を評価することができる。
【０２６２】
＜３．第３の実施の形態＞
＜撮像システムのブロック図＞
図３１は、本開示に係る撮像システムの第３の実施の形態を示すブロック図である。
【０２６３】
第３の実施の形態の撮像システム１は、上述した第１の実施の形態における肌のテカリを評価する機能と、上述した第２の実施の形態における肌のきめを評価する機能の両方を兼ね備えるシステムである。
【０２６４】
したがって、図３１の画像処理装置１２は、前処理部２１、鏡面反射画像生成部２２、テカリ解析部２３、および評価結果提示部２４と、並行偏光画像生成部８１、きめ解析部８２、及び評価結果提示部８３とを有する。
【０２６５】
第３の実施の形態の画像処理装置１２は、撮像装置１１から供給される無偏光画像ITと直交偏光画像IPVの２種類（２枚）の画像を用いて、肌のテカリを評価する処理と、肌のきめを評価する処理の両方を実行することができる。
【０２６６】
また、第３の実施の形態の画像処理装置１２は、操作者の選択指示や初期設定等に従って、肌のテカリを評価する処理と、肌のきめを評価する処理のいずれか一方を実行することもできる。
【０２６７】
画像処理装置１２の各構成および動作については、上述した第１及び第２の実施の形態と同様であるので、その説明は省略する。
【０２６８】
＜４．第４の実施の形態＞
＜撮像システムのブロック図＞
図３２は、本開示に係る撮像システムの第４の実施の形態を示すブロック図である。
【０２６９】
上述した第１乃至第３の実施の形態は、撮像装置１１と近距離に配置された画像処理装置１２が、ケーブル等を介して画像信号を取得し、画像処理する形態であるが、画像処理装置１２が行う機能をクラウドサーバ等に行わせることも可能である。
【０２７０】
図３２に示される撮像システム１は、上述した画像処理装置１２が行う機能をクラウドサーバに行わせるようにした構成例を示している。
【０２７１】
第４の実施の形態の撮像システム１は、撮像装置２０１とサーバ２０２とを含んで構成される。
【０２７２】
撮像装置２０１は、撮像部２２１、送受信部２２２、および表示部２２３を有する。サーバ２０２は、送受信部２４１と画像処理部２４２を有する。
【０２７３】
撮像部２２１は、上述した撮像装置１１と同様の機能を有し、肌画像として、無偏光画像ITと直交偏光画像IPVの２種類（２枚）の画像を撮像し、送受信部２２２に供給する。
【０２７４】
送受信部２２２は、撮像部２２１から供給される２枚の画像を、LAN（ローカルエリアネットワーク）やインターネットなどのネットワークを介して、サーバ２０２に送信する。  
【０２７５】
また、送受信部２２２は、サーバ２０２から送信されてくる、肌のテカリ評価結果、または、肌のきめ評価結果を示す情報を受信し、表示部２２３に供給する。
【０２７６】
表示部２２３は、送受信部２２２から供給される情報に基づいて、肌のテカリ評価結果、または、肌のきめ評価結果を表示する。
【０２７７】
サーバ２０２の送受信部２４１は、撮像装置２０１の送受信部２２２から送信されてくる無偏光画像ITと直交偏光画像IPVの２種類の画像を受信し、画像処理部２４２に供給する。
【０２７８】
また、送受信部２４１は、画像処理部２４２で画像処理することにより得られた肌のテカリ評価結果、または、肌のきめ評価結果を示す情報を取得し、撮像装置２０１に送信する。
【０２７９】
画像処理部２４２は、上述した第１乃至第３の実施の形態のいずれかの画像処理装置１２と同様の機能を有し、無偏光画像ITと直交偏光画像IPVの２種類の画像に基づいて、肌のテカリ評価、または、肌のきめ評価を行う。
【０２８０】
上述した説明では、第１乃至第３の実施の形態の画像処理装置１２の機能の全てを、サーバ２０２の画像処理部２４２に行わせるようにしたが、サーバ２０２に行わせる処理内容は適宜決定することができる。すなわち、サーバ２０２は画像処理装置１２の機能の一部を行うものでもよく、その場合、撮像装置１１側の画像処理と、サーバ２０２側の画像処理の分担は、任意に決定することができる。
【０２８１】
＜コンピュータの構成例＞
上述した一連の画像処理は、ハードウエアにより実行することもできるし、ソフトウエアにより実行することもできる。一連の処理をソフトウエアにより実行する場合には、そのソフトウエアを構成するプログラムが、コンピュータにインストールされる。ここで、コンピュータには、専用のハードウエアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどが含まれる。
【０２８２】
図３３は、上述した一連の画像処理をプログラムにより実行するコンピュータのハードウエアの構成例を示すブロック図である。
【０２８３】
コンピュータにおいて、CPU（Central Processing Unit）３０１，ROM（Read Only Memory）３０２，RAM（Random Access Memory）３０３は、バス３０４により相互に接続されている。
【０２８４】
バス３０４には、さらに、入出力インタフェース３０５が接続されている。入出力インタフェース３０５には、入力部３０６、出力部３０７、記憶部３０８、通信部３０９、及びドライブ３１０が接続されている。
【０２８５】
入力部３０６は、キーボード、マウス、マイクロホンなどよりなる。出力部３０７は、ディスプレイ、スピーカなどよりなる。記憶部３０８は、ハードディスクや不揮発性のメモリなどよりなる。通信部３０９は、ネットワークインタフェースなどよりなる。ドライブ３１０は、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア３１１を駆動する。
【０２８６】
以上のように構成されるコンピュータでは、CPU３０１が、例えば、記憶部３０８に記憶されているプログラムを、入出力インタフェース３０５及びバス３０４を介して、RAM３０３にロードして実行することにより、上述した一連の画像処理が行われる。
【０２８７】
コンピュータでは、プログラムは、リムーバブルメディア３１１をドライブ３１０に装着することにより、入出力インタフェース３０５を介して、記憶部３０８にインストールすることができる。また、プログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して、通信部３０９で受信し、記憶部３０８にインストールすることができる。その他、プログラムは、ROM３０２や記憶部３０８に、あらかじめインストールしておくことができる。
【０２８８】
本明細書において、フローチャートに記述されたステップは、記載された順序に沿って時系列的に行われる場合はもちろん、必ずしも時系列的に処理されなくとも、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで実行されてもよい。
【０２８９】
なお、本明細書において、システムとは、複数の構成要素（装置、モジュール（部品）等）の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、１つの筐体の中に複数のモジュールが収納されている１つの装置は、いずれも、システムである。
【０２９０】
本開示の実施の形態は、上述した実施の形態に限定されるものではなく、本開示の要旨を逸脱しない範囲において種々の変更が可能である。
【０２９１】
例えば、上述した複数の実施の形態の全てまたは一部を組み合わせた形態を採用することができる。
【０２９２】
例えば、本開示は、１つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。
【０２９３】
また、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。
【０２９４】
さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。
【０２９５】
なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、本明細書に記載されたもの以外の効果があってもよい。
【０２９６】
なお、本開示は以下のような構成も取ることができる。
（１）
無偏光成分の光を照射する無偏光発光部と、
第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、
前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子と
を備え、
前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向は直交関係にあり、
前記撮像素子は、前記無偏光発光部により照射された被写体と、前記偏光発光部により照射された被写体を時分割で撮像し、その結果得られる無偏光画像と直交偏光画像を出力するように構成されている
撮像装置。
（２）
複数の前記無偏光発光部及び前記偏光発光部が、前記撮像素子を中心に、点対象に配置されている
前記（１）に記載の撮像装置。
（３）
複数の前記無偏光発光部及び前記偏光発光部が、前記撮像素子を中心に、円環状に配置されている
前記（１）または（２）に記載の撮像装置。
（４）
無偏光成分の光を照射する無偏光発光部と、
第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、
前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置が、
前記無偏光発光部により照射された被写体と、前記偏光発光部により照射された被写体を時分割で撮像し、無偏光画像と直交偏光画像を出力する
撮像装置の撮像方法。
（５）
無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を取得し、前記無偏光画像と前記直交偏光画像から鏡面反射成分の画像である鏡面反射画像を生成する鏡面反射画像生成部を備える
画像処理装置。
（６）
前記鏡面反射画像生成部は、
前記直交偏光画像にゲインを乗算するゲイン乗算部と、
前記無偏光画像から、前記ゲイン乗算後の前記直交偏光画像を減算し、第１の差分画像を生成する減算部と、
前記第１の差分画像を所定の範囲の輝度値にクリッピングするクリッピング部と
を有する
前記（５）に記載の画像処理装置。
（７）
前記鏡面反射画像生成部により生成された前記鏡面反射画像を用いて、肌のテカリを解析するテカリ解析部をさらに備える
前記（５）または（６）に記載の画像処理装置。
（８）
前記テカリ解析部は、
前記鏡面反射画像から、被評価者の皮脂量を示す画像であるテカリ画像を算出するテカリ画像算出部を有する
前記（７）に記載の画像処理装置。
（９）
前記テカリ解析部は、
前記鏡面反射画像から、被評価者の皮脂量を算出するテカリ量算出部を有する
前記（７）または（８）に記載の画像処理装置。
（１０）
前記テカリ解析部は、
前記テカリ量算出部により算出された前記皮脂量に基づいて、被評価者のテカリを評価するテカリ評価値を算出するテカリ評価部をさらに有する
前記（９）に記載の画像処理装置。
（１１）
前記テカリ解析部による被評価者の肌のテカリの解析結果を提示する結果提示部をさらに備え、
前記結果提示部は、前記解析結果として、被評価者の肌のテカリ画像と皮脂量を提示する
前記（７）乃至（１０）のいずれかに記載の画像処理装置。
（１２）
前記鏡面反射画像生成部の前段に設けられ、前記無偏光画像と前記直交偏光画像の輝度レベルを調整し、調整後の前記無偏光画像と前記直交偏光画像を前記鏡面反射画像生成部に供給する前処理部をさらに備える
前記（５）乃至（１１）のいずれかに記載の画像処理装置。
（１３）
無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を取得し、前記無偏光画像と前記直交偏光画像から鏡面反射成分の画像である鏡面反射画像を生成する
画像処理装置の画像処理方法。
（１４）
無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を処理するコンピュータに、
前記無偏光画像と前記直交偏光画像から鏡面反射成分の画像である鏡面反射画像を生成する
処理を実行させるためのプログラム。
（１５）
無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を取得し、前記無偏光画像と前記直交偏光画像から並行偏光成分の画像である並行偏光画像を生成する並行偏光画像生成部を備える
画像処理装置。
（１６）
前記並行偏光画像生成部は、
ゲインを算出するゲイン算出部と、
前記直交偏光画像に前記ゲインを乗算するゲイン乗算部と、
前記無偏光画像から、前記ゲイン乗算後の前記直交偏光画像を減算し、第２の差分画像を生成する減算部と、
前記第２の差分画像に所定のオフセット値を加算するオフセット加算部と
を有する
前記（１５）に記載の画像処理装置。
（１７）
前記並行偏光画像生成部により生成された前記並行偏光画像を用いて、肌のきめを解析するきめ解析部をさらに備える
前記（１５）または（１６）に記載の画像処理装置。
（１８）
前記並行偏光画像生成部の前段に設けられ、前記無偏光画像と前記直交偏光画像の輝度レベルを調整し、調整後の前記無偏光画像と前記直交偏光画像を前記並行偏光画像生成部に供給する前処理部をさらに備える
前記（１５）乃至（１７）のいずれかに記載の画像処理装置。
（１９）
無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を取得し、前記無偏光画像と前記直交偏光画像から並行偏光成分の画像である並行偏光画像を生成する
画像処理装置の画像処理方法。
（２０）
無偏光成分の光を照射する無偏光発光部と、第１の偏光フィルタを介して所定の偏光成分の光を照射する偏光発光部と、前記無偏光発光部または前記偏光発光部により照射された被写体を第２の偏光フィルタを介して撮像する撮像素子とを備え、前記第１の偏光フィルタと前記第２の偏光フィルタの偏光方向が直交関係となっている撮像装置で撮像された無偏光画像と直交偏光画像を処理するコンピュータに、
前記無偏光画像と前記直交偏光画像から並行偏光成分の画像である並行偏光画像を生成する
処理を実行させるためのプログラム。
【符号の説明】
【０２９７】
１  撮像システム，  １１  撮像装置，  １２  画像処理装置，  １３  表示装置，  ２１  前処理部，  ２２  鏡面反射生成部，  ２３  テカリ解析部，  ３１  テカリ画像算出部，  ３２  テカリ量算出部，  ３３  テカリ評価部，  ２４  評価結果提示部，  ４１  鏡筒部，  ４２A  無偏光発光部，  ４２B  偏光発光部，  ４３  イメージセンサ，  ５１  ゲイン乗算部，  ５２  減算部，  ５３  クリッピング部，  ８１  並行偏光画像生成部，  ８２  きめ解析部，  ８３  評価結果提示部，  ９１  ゲイン算出部，  ９２  ゲイン乗算部，  ９３  減算部，  ９４  オフセット加算部，  ３０１  CPU，  ３０２  ROM，  ３０３  RAM，  ３０６  入力部，  ３０７  出力部，  ３０８  記憶部，  ３０９  通信部，  ３１０  ドライブ
【図１】
2015046698.tif 000020
【図２】
2015046698.tif 000021
【図３】
2015046698.tif 000022
【図４】
2015046698.tif 000023
【図５】
2015046698.tif 000024
【図６】
2015046698.tif 000025
【図７】
2015046698.tif 000026
【図８】
2015046698.tif 000027
【図９】
2015046698.tif 000028
【図１０】
2015046698.tif 000029
【図１１】
2015046698.tif 000030
【図１２】
2015046698.tif 000031
【図１３】
2015046698.tif 000032
【図１４】
2015046698.tif 000033
【図１５】
2015046698.tif 000034
【図１６】
2015046698.tif 000035
【図１７】
2015046698.tif 000036
【図１８】
2015046698.tif 000037
【図１９】
2015046698.tif 000038
【図２０】
2015046698.tif 000039
【図２１】
2015046698.tif 000040
【図２２】
2015046698.tif 000041
【図２３】
2015046698.tif 000042
【図２４】
2015046698.tif 000043
【図２５】
2015046698.tif 000044
【図２６】
2015046698.tif 000045
【図２７】
2015046698.tif 000046
【図２８】
2015046698.tif 000047
【図２９】
2015046698.tif 000048
【図３０】
2015046698.tif 000049
【図３１】
2015046698.tif 000050
【図３２】
2015046698.tif 000051
【図３３】
2015046698.tif 000052