(57)【特許請求の範囲】
【請求項１】
偏光が照射された人の顔の肌を、前記偏光の偏波方向と同一の方向の偏波成分を通過させる偏光フィルタを介して撮影して得られる平行偏光画像と、偏光が照射された前記人の顔の肌を、前記偏光の偏波方向と直交する方向の偏波成分を通過させる偏光フィルタを介して撮影して得られる直交偏光画像と、を取得する画像取得部と、
前記平行偏光画像と前記直交偏光画像との間の輝度の差分を示す差分画像を生成する差分画像生成部と、
前記差分画像を２値化して得られる、２値化差分画像を生成する２値化部と、
前記２値化差分画像に基づいて、前記人の顔の肌における光沢の度合いが高い光沢領域を検出する領域検出部と、
前記光沢領域の方が他の領域よりも低くなっている皺検出用の閾値を用いて、前記平行偏光画像から顔の皺の画像を検出する肌状態判定部と、
前記検出した顔の皺の画像を前記平行偏光画像に重畳して表示する判定結果提示部と、
を有する、
光沢判定装置。
【請求項２】
前記平行偏光画像の撮影に用いられた前記偏光、および、前記直交偏光画像の撮影に用いられた前記偏光は、前記人の顔の肌を同一の位置から照射する光であり、
前記平行偏光画像および前記直交偏光画像は、前記人の顔の肌を同一の位置から撮影して得られた画像である、
請求項１に記載の光沢判定装置。
【請求項３】
前記平行偏光画像および前記直交偏光画像が撮影された前記位置と同一の位置から前記人の顔の肌が撮影される際に用いられる、前記人の顔の肌に対する照明を、光沢状態に基づいて制御する照明制御部、を有する、
請求項２に記載の光沢判定装置。
【請求項４】
偏光が照射された人の顔の肌を、前記偏光の偏波方向と同一の方向の偏波成分を通過させる偏光フィルタを介して撮影して得られる平行偏光画像と、偏光が照射された前記人の顔の肌を、前記偏光の偏波方向と直交する方向の偏波成分を通過させる偏光フィルタを介して撮影して得られる直交偏光画像と、を取得するステップと、
前記平行偏光画像と前記直交偏光画像との間の輝度の差分を示す差分画像を生成するステップと、
前記差分画像を２値化して得られる、２値化差分画像を生成するステップと、
前記２値化差分画像に基づいて、前記人の顔の肌における光沢の度合いが高い光沢領域を検出するステップと、
前記光沢領域の方が他の領域よりも低くなっている皺検出用の閾値を用いて、前記平行偏光画像から顔の皺の画像を検出するステップと、
前記検出した顔の皺の画像を前記平行偏光画像に重畳して表示するステップと、
を有する、
光沢判定方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、顔等の光沢状態を判定する光沢判定装置および光沢判定方法に関する。
【背景技術】
【０００２】
物体の表面には、その表面の状態と照明の具合との兼ね合いにより、光沢が生じることがある。顔の場合、強い光沢は、「テカり」等と呼ばれる。
【０００３】
例えば、顔を撮影した画像から皺の有無等の肌状態を判定する場合、光沢の影響を考慮しないと、判定精度が低下することがある。また、逆に、肌に生じている光沢から、皮脂の度合い等の肌状態を判定することも可能である。したがって、光沢の強さや分布等の光沢の状態（以下「光沢状態」という）を判定することは、肌状態判定等を行う上で有益である。
【０００４】
そこで、対象物の光沢状態を判定する技術が、例えば、特許文献１〜特許文献３に記載されている。
【０００５】
特許文献１に記載の技術は、光沢状態の判定の対象となる物体（以下「対象物」という）を撮影した画像において、各画素の輝度値を算出する。そして、特許文献１に記載の技術は、周辺の主要な成分に対して輝度値が大幅に大きい領域を、光沢の度合いが高い領域（以下「光沢領域」という）と判定する。
【０００６】
また、特許文献２に記載の技術は、対象物を撮影した画像に、輝度値が所定の閾値以上である画素が存在する場合、当該画像に光沢領域が含まれていると判定する。
【０００７】
また、特許文献３に記載の技術は、対象物の表面に自然光を入射させたときの光の反射率である全反射率と、対象物の表面にＰ偏光を入射させたときのＳ偏光成分の光の反射率である１／４値拡散反射率とを、それぞれ測定する。そして、特許文献３に記載の技術は、全反射率から、１／４値拡散反射率を４倍した値を差し引いた値に基づいて、光沢の強さを判定する。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特開２００５−３２７００９号公報
【特許文献２】特開２０１０−２７３７３７号公報
【特許文献３】特開２００４−２１５９９１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００９】
しかしながら、特許文献１および特許文献２に記載の技術では、白色人種の肌等、表面の色が明るい対象物の場合、光沢領域を精度良くすることが難しい。また、特許文献３に記載の技術では、対象物の表面の向きに合わせてＰ偏光の入射方向を設定しなければならず、手間が掛かる。特に、特許文献３に記載の技術では、顔のように部分毎に表面の向きが異なる場合、部分毎にＰ偏光の入射方向を切り替えて反射率の測定を行わなければならず、膨大な手間および時間を要する。したがって、対象物の光沢状態を、簡単に精度良く判定することができる技術が望まれる。
【００１０】
本発明の目的は、対象物の光沢状態を、簡単に精度良く判定することができる光沢判定装置および光沢判定方法を提供することである。
【課題を解決するための手段】
【００１１】
本開示の光沢判定装置は、偏光が照射された対象物を、前記偏光の偏波方向と同一の方向の偏波成分を通過させる偏光フィルタを介して撮影して得られる平行偏光画像と、偏光が照射された前記対象物を、前記偏光の偏波方向と直交する方向の偏波成分を通過させる偏光フィルタを介して撮影して得られる直交偏光画像と、を取得する画像取得部と、前記平行偏光画像と前記直交偏光画像との間の輝度の差分を示す差分画像を生成する差分画像生成部と、前記差分画像に基づいて、前記対象物の光沢状態を判定する光沢判定部と、を有する。
【００１２】
本開示の光沢判定方法は、偏光が照射された対象物を、前記偏光の偏波方向と同一の方向の偏波成分を通過させる偏光フィルタを介して撮影して得られる平行偏光画像と、偏光が照射された前記対象物を、前記偏光の偏波方向と直交する方向の偏波成分を通過させる偏光フィルタを介して撮影して得られる直交偏光画像と、を取得するステップと、前記平行偏光画像と前記直交偏光画像との間の輝度の差分を示す差分画像を生成するステップと、前記差分画像に基づいて、前記対象物の光沢状態を判定するステップと、を有する。
【発明の効果】
【００１３】
本開示によれば、対象物の光沢状態を、簡単に精度良く判定することができる。
【図面の簡単な説明】
【００１４】
【図１】本発明の一実施の形態に係る光沢判定装置の外観および使用状態の一例を示す図
【図２】本実施の形態に係る光沢判定装置の構成の一例を示すブロック図
【図３】本実施の形態に係る光沢判定装置の動作の一例を示すフローチャート
【図４】本実施の形態における平行偏光画像の一例を示す図
【図５】本実施の形態における直交偏光画像の一例を示す図
【図６】本実施の形態における差分画像の一例を示す図
【図７】本実施の形態における２値化差分画像の一例を示す図
【図８】平行偏光画像を２値化した結果を示す参考図
【発明を実施するための形態】
【００１５】
以下、本発明の一実施の形態について、図面を参照して詳細に説明する。なお、本実施の形態、本発明に係る光沢判定装置を、ユーザの顔の肌状態を判定する装置に適用した場合の具体的態様の一例である。
【００１６】
＜外観および使用状態＞
図１は、本発明の一実施の形態に係る光沢判定装置１００の外観および使用状態の一例を示す図である。
【００１７】
図１に示すように、光沢判定装置１００は、例えば、卓上に立てて置くことが可能なタブレット型端末である。光沢判定装置１００は、板状の筐体１１０の主面に、偏光フィルタ付きライト１２０、偏光フィルタ付きカメラ１３０、タッチパネル付きディスプレイ１４０、を配置している。ユーザ２００は、タッチパネル付きディスプレイ１４０に数十センチメートル離隔して対向する位置等の所定位置に、顔２１０が位置するように、タッチパネル付きディスプレイ１４０の位置および自身の位置を調整して、光沢判定装置１００を使用する。
【００１８】
偏光フィルタ付きライト１２０は、例えば、複数のＬＥＤ（Light Emitting Diode）を内蔵した発光部と、水平方向の偏光成分を通過させる偏光フィルタと、を有する。偏光フィルタ付きライト１２０は、顔２１０が上記所定位置にある状態において、偏波方向が水平な偏光（以下、単に「偏光」という）を、顔２１０に照射する。なお、偏光フィルタは、取り外し可能であってもよい。
【００１９】
偏光フィルタ付きカメラ１３０は、例えば、デジタルカメラと、回転角度が調整可能な偏光フィルタと、を有する。偏光フィルタ付きカメラ１３０は、顔２１０が上記所定位置にある状態において、顔２１０を撮影する。なお、偏光フィルタは、通過する偏波成分の方向を、水平方向と、垂直方向との間で、切り替えることができる。すなわち、偏光フィルタ付きカメラ１３０は、対象物を、水平方向の偏波成分を通過させる偏光フィルタを介して撮影すると共に、垂直方向の偏波成分を通過させる偏光フィルタを介して撮影することができる。なお、偏光フィルタは、取り外し可能であってもよい。
【００２０】
タッチパネル付きディスプレイ１２０は、例えば、人の顔の大きさより一回り大きい液晶ディスプレイを有する。タッチパネル付きディスプレイ１２０は、ユーザ２００からの操作の受け付け、および、ユーザ２００に対する情報の表示を行う。
【００２１】
物体の表面における光の反射は、鏡面反射（表面反射）と拡散反射（内部反射）とに分類される。物体の表面に生じる光沢は、主に、かかる表面における光の鏡面反射に起因している。
【００２２】
偏光が物体の表面に入射するとき、鏡面反射ではその偏光性が維持されるが、拡散反射ではその偏光性は維持されない。したがって、偏光の偏光性が維持されているか否かによって、物体の表面からの光が、主に鏡面反射によるものであるのか、それとも主に拡散反射によるものであるのかを、判定することができる。
【００２３】
そこで、光沢判定装置１００は、偏光フィルタ付きカメラ１３０を用いて、反射光の、偏光と同一の偏波方向の成分の輝度と、偏光の偏波方向と直交する偏波方向の成分の輝度とを、それぞれ抽出する。そして、光沢判定装置１００は、光沢判定装置１００は、抽出結果の差分が大きい部分を、鏡面反射の度合いが高い部分、つまり、物体の表面の光沢の度合いが高い部分であると判定する。
【００２４】
なお、本実施の形態において、偏波方向が同一とは、厳密に同一である場合のみならず、４５度未満の偏波方向の角度差を含む概念とする。また、偏波方向が直交しているとは、厳密に直交している場合のみならず、直交する方向から４５度未満の角度差を含む概念とする。
【００２５】
＜装置の構成＞
次に、光沢判定装置１００の構成について説明する。
【００２６】
図２は、光沢判定装置１００の構成の一例を示すブロック図である。
【００２７】
図２において、光沢判定装置１００は、照明部３１０、撮影部３２０、画像取得部３３０、差分画像生成部３４０、光沢判定部３５０、肌状態判定部３６０、および判定結果提示部３７０を有する。
【００２８】
照明部３１０は、上述の偏光フィルタ付きライト１２０（図１参照）を含む。照明部３１０は、顔２１０の光沢状態の判定を行う際に、光沢状態判定の対象物である顔２１０に対して偏光を照射し、撮影部３２０に対して、光沢状態判定のための画像撮影（以降、「判定用撮影」という）を行うことを指示する。
【００２９】
撮影部３２０は、上述の偏光フィルタ付きカメラ１３０を含む。撮影部３２０は、判定用撮影を行うことを指示されたとき、まず、偏光フィルタが通過させる偏波成分の偏波方向が、顔２１０を照射する偏光の偏波方向と同一の方向（本実施の形態では、水平方向）となるようにして、撮影する。そして、撮影部３２０は、偏光フィルタが通過させる偏波成分の偏波方向が、顔２１０を照射する偏光の偏波方向と直交する方向（本実施の形態では、垂直方向）となるようにして、撮影する。なお、これらの撮影順序は、逆でもよい。そして、撮影部３２０は、撮影された２つの画像を、画像取得部３３０へ出力する。
【００３０】
なお、照明部３１０および撮影部３２０の動作は、画像取得部３３０により制御されてもよい。
【００３１】
画像取得部３３０は、入力された２つの画像を、平行偏光画像および直交偏光画像として取得する。そして、画像取得部３３０は、取得された２つの画像を、差分画像生成部３４０および肌状態判定部３６０へ出力する。また、画像取得部３３０は、取得された平行偏光画像を、肌状態判定部３６０へ出力する。
【００３２】
ここで、平行偏光画像とは、偏光が照射された顔２１０を、当該偏光の偏波方向と同一の方向（本実施の形態では、水平方向）の偏波成分を通過させる偏光フィルタを介して撮影して得られる画像である。また、直交偏光画像とは、偏光が照射された顔２１０を、当該偏光の偏波方向と直交する方向（本実施の形態では、垂直方向）の偏波成分を通過させる偏光フィルタを介して撮影して得られる画像である。
【００３３】
差分画像生成部３４０は、入力された平行偏光画像と直交偏光画像との間の輝度の差分を示す差分画像を生成する。より具体的には、差分画像生成部３４０は、平行偏光画像の基準画素の輝度値から、直交偏光画像の基準画素に対応する参照画素の輝度値を差し引いた値に基づいて、差分画像の基準画素に対応する対応画素の画素値を決定する。そして、差分画像生成部３４０は、生成した差分画像を、光沢判定部３５０へ出力する。
【００３４】
光沢判定部３５０は、入力された差分画像に基づいて、顔２１０の光沢状態を判定し、判定結果を、肌状態判定部３６０へ出力する。光沢判定部３５０は、２値化部３５１および領域検出部３５２を有する。
【００３５】
２値化部３５１は、差分画像を２値化して得られる、２値化差分画像を生成する。より具体的には、２値化部３５１は、差分画像の各画素値を所定の閾値（以下「２値化閾値」という）と比較して、各画素値を、平行偏光画像と直交偏光画像との間の輝度値の差分の絶対値が小さいことを示す「０」と、平行偏光画像と直交偏光画像との間の輝度値の差分の絶対値が大きいことを示す「１」のいずれかに変換する。そして、２値化部３５１は、生成された２値化差分画像を、領域検出部３５２へ出力する。
【００３６】
領域検出部３５２は、入力された２値化差分画像のうち、平行偏光画像と直交偏光画像との間の輝度値の差分が大きい領域（本実施の形態では、画素値が「１」の領域）を、光沢領域として検出する。そして、検出された光沢領域を示す情報（光沢状態の判定結果）を、肌状態判定部３６０へ出力する。
【００３７】
肌状態判定部３６０は、入力された平行偏光画像に対して、画像の陰影のエッジの強さを閾値と比較することにより皺を検出する。そして、肌状態判定部３６０は、検出された皺の領域を示す情報（肌状態の判定結果）と、入力された平行偏光画像とを、判定結果提示部３７０へ出力する。但し、肌状態判定部３６０は、入力された光沢状態の判定結果が示す光沢領域については、上記閾値を、他の領域よりも低くする。すなわち、肌状態判定部３６０は、光沢の度合いが高い領域では、皺が検出され易くなるようにする。
【００３８】
判定結果提示部３７０は、タッチパネル付きディスプレイ１４０を含む。判定結果提示部３７０は、入力された肌状態の判定結果（肌の状態に関する情報）を、ユーザ２００に対して提示する。例えば、判定結果提示部３７０は、皺の領域を示す皺領域画像を生成し、平行偏光画像に重畳して表示する。
【００３９】
なお、光沢判定装置１００は、図示しないが、例えば、ＣＰＵ（Central Processing Unit）、制御プログラムを格納したＲＯＭ（Read Only Memory）等の記憶媒体、ＲＡＭ（Random Access Memory）等の作業用メモリ、および通信回路を有する。この場合、上記した各部の機能は、ＣＰＵが制御プログラムを実行することにより実現される。
【００４０】
このような構成を有する光沢判定装置１００は、平行偏光画像と前記直交偏光画像との間の輝度の差分に基づいて、顔２１０の光沢状態を判定し、更に、光沢状態の判定結果に基づいて、肌状態に関する情報を提示することができる。
【００４１】
＜装置の動作＞
次に、光沢判定装置１００の動作について説明する。
【００４２】
図３は、光沢判定装置１００の動作の一例を示すフローチャートである。以下に説明する動作は、例えば、ユーザにより、肌状態判定の処理の開始を指示する所定の操作が行われる毎に開始される。
【００４３】
ステップＳ１１００において、画像取得部３３０は、照明部３１０および撮影部３２０を用いて、平行偏光画像および直交偏光画像を取得する。
【００４４】
図４は、平行偏光画像の一例を示す図である。また、図５は、直交偏光画像の一例を示す図である。
【００４５】
平行偏光画像は、照明部３１０の偏光の偏波方向に、撮影部３２０の偏光フィルタが通過させる光の偏波方向を一致させて、撮影された画像である。したがって、図４に示すように、平行偏光画像４１０では、鏡面反射が強い部分で、輝度が高くなる。
【００４６】
しかしながら、拡散反射の反射光にも、同一の偏波方向の成分が存在しており、更に、肌の色が明るい場合にも輝度は高くなる。また、周囲から到来する環境光にも、偏光と同一の偏波成分が含まれる。このため、平行偏光画像４１０の各部の輝度は、必ずしも、拡散反射の度合いを反映しているとはいえない。言い換えると、平行偏光画像４１０の各部分は、鏡面反射の度合い、拡散反射の度合い、肌の色の明るさ、および環境光に応じた輝度となる。
【００４７】
一方、直交偏光画像は、照明部３１０の偏光の偏波方向に、撮影部３２０の偏光フィルタが通過させる光の偏波方向を直交させて、撮影された画像である。したがって、図５に示すように、直交偏光画像４２０では、鏡面反射の影響をほぼ受けず、拡散反射の度合い、肌の色の明るさ、および環境光のみに応じた輝度となる。
【００４８】
画像取得部３３０は、できるだけ短い時間間隔で平行偏光画像および直交偏光画像が撮影されるように、照明部３１０および撮影部３２０を制御することが望ましい。顔の位置や向きがずれると、顔の各部の位置が平行偏光画像と直交偏光画像との間でずれ、光沢状態の判定精度が低下するからである。なお、画像取得部３３０は、平行偏光画像および直交偏光画像のそれぞれから、顔の目尻や口角等の顔部品の位置をパターンマッチング等により検出し、検出された顔部品の位置に基づいて、顔の各部の位置のずれが少なくなるように、平行偏光画像あるいは直交偏光画像を移動、回転、拡大縮小、あるいは変形させてもよい。
【００４９】
図３のステップＳ１２００において、差分画像生成部３４０は、平行偏光画像と直交偏光画像との間の輝度の差分を示す差分画像を生成する。
【００５０】
図６は、差分画像の一例を示す図である。ここでは、図４の平行偏光画像４１０および図５の直交偏光画像４２０から生成される差分画像を示す。
【００５１】
上述の通り、平行偏光画像４１０の各部分の輝度は、鏡面反射の度合い、拡散反射の度合い、肌の色の明るさ、および環境光に基づいているのに対し、直交偏光画像４２０の各部分の輝度は、拡散反射の度合い、肌の色の明るさ、および環境光のみに基づいている。したがって、図６に示すように、差分画像４３０は、主に、平行偏光画像４１０の各部分の輝度のうち、鏡面反射の成分を抽出して示す画像となる。
【００５２】
なお、差分画像生成部３４０は、差分画像を算出する際に、平行偏光画像の輝度値および直交偏光画像の輝度値に、所定の重み付けを行ってもよい。
【００５３】
図３のステップＳ１３００において、２値化部３５１は、差分画像を、２値化閾値を用いて２値化して、２値化差分画像を生成する。
【００５４】
図７は、２値化差分画像の一例を示す図である。ここでは、図５の差分画像４３０から生成される２値化差分画像を示す。
【００５５】
図７に示すように、２値化差分画像４４０では、差分画像４３０の画素値（輝度値）が２値化閾値以上の領域、つまり、平行偏光画像と直交偏光画像との間の輝度の差が大きい領域で、値「１」（図中、白領域で示す）となる。また、それ以外の領域、つまり、平行偏光画像と直交偏光画像との間の輝度の差が小さい領域で、値「０」（図中、黒領域で示す）となる。
【００５６】
図３のステップＳ１４００において、領域検出部３５２は、２値化差分画像から、光沢領域（本実施の形態では、画素値が「１」の領域）を、光沢領域として検出する。
【００５７】
ステップＳ１５００において、肌状態判定部３６０は、光沢領域に基づいて、顔２１０の肌状態を判定する。
【００５８】
そして、ステップＳ１６００において、判定結果提示部３７０は、肌状態の判定結果をユーザ２００に提示する。例えば、判定結果提示部３７０は、上述の皺領域画像を平行偏光画像に重畳した、判定結果画像を表示する。
【００５９】
このような動作により、光沢判定装置１００は、平行偏光画像と前記直交偏光画像との間の輝度の差分に基づいて、顔２１０の光沢状態を判定し、更に、光沢状態の判定結果に基づいて、肌状態に関する情報を提示することができる。
【００６０】
図８は、比較のために、図４に示す平行偏光画像４１０を２値化した場合の結果を示す図である。図８に示すように、平行偏光画像４１０を２値化した２値化平行偏光画像４６０は、図７に示す２値化差分画像４４０に比べると、より多くの領域で、画素値が高くなることが分かる。これは、拡散反射および肌の色の明るさといった、鏡面反射以外の輝度成分を除去することができていないためである。
【００６１】
＜本実施の形態の効果＞
以上のように、本実施の形態に係る光沢判定装置１００は、顔２１０の平行偏光画像および直交偏光画像を取得し、平行偏光画像と直交偏光画像との間の輝度の差分を示す差分画像を生成し、かかる差分画像に基づいて顔２１０の光沢状態を判定する。
【００６２】
これにより、光沢判定装置１００は、顔２１０を撮影した画像から、鏡面反射による成分を高精度に抽出することができ、顔２１０の光沢状態を精度良く判定することができる。また、光沢判定装置１００は、１回の照射における２つの画像の撮影と、画像データ処理のみによって、かかる判定を行うことができる。すなわち、光沢判定装置１００は、上述の高精度の光沢状態判定を、従来技術に比べて極めて簡単に実現することができる。
【００６３】
＜本実施の形態の変形例＞
なお、光沢判定装置１００の構成の一部は、ネットワーク上のサーバ等の外部装置に配置され、他の部分と離隔していてもよい。この場合、光沢判定装置１００は、かかる外部装置と通信を行うための通信部を備える必要がある。
【００６４】
また、照明部３１０、撮影部３２０、肌状態判定部３６０、および判定結果提示部３７０の一部または全部が、他の装置で実現される場合、光沢判定装置１００は、当該部分を、必ずしも有さなくてもよい。また、光沢判定装置１００は、光沢領域を判定しない場合、必ずしも、２値化部３５１および領域検出部３５２を有さなくてもよい。
【００６５】
（その他の変形例）
なお、平行偏光画像および直交偏光画像の取得手法は、上述の例に限定されない。例えば、光沢判定装置は、照明部において照明光の偏波方向を切り替え、偏光フィルタの角度が固定された撮影部において、各偏波方向の照明光にて撮影を行うように、構成されていてもよい。また、この場合において、顔の頬付近等、表面の向きがほぼ一定であるような部分を対象物とする場合、照明部は、対象物に対してＰ波偏光およびＳ波偏光を入射させるように構成されていてもよい。
【００６６】
また、光沢判定装置は、肌状態を提示するのではなく、判定された光沢状態に基づいて、その光沢状態が所望の状態となるように、照明を制御する照明制御部、を有してもよい。例えば、光沢判定装置は、個別に調光することが可能な複数の光源を備え、光源の点灯パターンを切り替えながら、各点灯パターンでの光沢領域の面積を取得する。そして、光沢判定装置は、光沢領域の面積が最小となる点灯パターンで照明を行った状態で、再度、偏光フィルタを用いずに、顔を撮影する。
【００６７】
また、光沢判定装置は、エッジ検出による皺検出処理以外の各種肌状態判定処理に、判定された光沢状態を活用してもよい。例えば、光沢判定装置は、光沢の度合いが高い領域を、皮脂の分泌の度合いが高い領域と判定する。
【００６８】
このように、光沢判定装置は、光沢状態の影響を受ける各種処理、あるいは、光沢状態と密接な関連を有する状態を推定する各種処理の精度を、高精度に判定された光沢状態に基づいて行うことによって向上させることができる。
【００６９】
また、判定の対象となる光沢状態は、上述の例に限定されない。例えば、光沢判定装置は、光沢状態として、差分画像そのものや、差分画像における領域毎の画素値の代表値を、判定してもよい。例えば、光沢判定装置は、撮影画像から唇領域を検出し、検出された唇領域における、平行偏光画像と直交偏光画像との間の輝度値の平均値を、光沢状態として検出してもよい。なお、この例の場合、光沢判定装置は、例えば、リップクリームの艶の効果の度合いを判定することができる。
【００７０】
また、光沢判定装置は、２値化閾値を、他の各種情報を入力し、入力された情報に応じて変更してもよい。例えば、光沢判定装置は、室温や湿度の測定値が乾燥し易い環境を示すとき、２値化閾値を下げて、光沢領域が検出され易くする。
【００７１】
また、偏光の偏波方向、照明手法、撮影手法、および肌状態判定結果の提示手法は、上述の例に限定されない。例えば、光沢判定装置は、通過させる偏波方向成分が互いに直交する偏光フィルタをそれぞれ備えた２つのカメラを近接して備え、これらのカメラで同時に撮影を行うことにより、平行偏光画像および直交偏光画像を同時に取得してもよい。また、光沢判定装置は、平行偏光画像および直交偏光画像を撮影するカメラとは別に、他の用途に用いられる画像を撮影するカメラを備えていてもよい。
【００７２】
また、光沢状態の判定の対象物は、人の顔に限定されない。例えば、光沢判定装置は、工業製品の光沢状態判定に用いられてもよい。
【００７３】
＜本開示のまとめ＞
本開示の光沢判定装置は、偏光が照射された対象物を、前記偏光の偏波方向と同一の方向の偏波成分を通過させる偏光フィルタを介して撮影して得られる平行偏光画像と、偏光が照射された前記対象物を、前記偏光の偏波方向と直交する方向の偏波成分を通過させる偏光フィルタを介して撮影して得られる直交偏光画像と、を取得する画像取得部と、前記平行偏光画像と前記直交偏光画像との間の輝度の差分を示す差分画像を生成する差分画像生成部と、前記差分画像に基づいて、前記対象物の光沢状態を判定する光沢判定部と、を有する。
【００７４】
なお、上記光沢判定装置において、前記差分画像生成部は、前記平行偏光画像の基準画素の輝度値から、前記直交偏光画像の前記基準画素に対応する参照画素の輝度値を差し引いた値に基づいて、前記差分画像の前記基準画素に対応する対応画素の画素値を決定し、前記光沢判定部は、前記差分画像を２値化して得られる、２値化差分画像を生成する２値化部と、前記２値化差分画像に基づいて、前記対象物の光沢の度合いが高い光沢領域を検出する領域検出部と、を有してもよい。
【００７５】
また、上記光沢判定装置において、前記２値化部は、前記光沢領域が所定の条件を満たすように、前記２値化差分画像を生成するための閾値を調整してもよい。
【００７６】
また、上記光沢判定装置において、前記平行偏光画像の撮影に用いられた前記偏光、および、前記直交偏光画像の撮影に用いられた前記偏光は、前記対象物を同一の位置から照射する光であり、前記平行偏光画像および前記直交偏光画像は、前記対象物を同一の位置から撮影して得られた画像であってもよい。
【００７７】
また、上記光沢判定装置において、前記対象物は、人の顔の肌であり、前記光沢状態と、前記平行偏光画像および前記直交偏光画像が撮影された前記位置と同一の位置から前記対象物を撮影して得られる画像と、に基づいて、前記肌の状態を判定する肌状態判定部と、判定された前記肌の状態に関する情報を提示する判定結果提示部と、を有してもよい。
【００７８】
また、上記光沢判定装置は、前記平行偏光画像および前記直交偏光画像が撮影された前記位置と同一の位置から前記対象物が撮影される際に用いられる、前記対象物に対する照明を、前記光沢状態に基づいて制御する照明制御部、を有してもよい。
【００７９】
本開示の光沢判定方法は、偏光が照射された対象物を、前記偏光の偏波方向と同一の方向の偏波成分を通過させる偏光フィルタを介して撮影して得られる平行偏光画像と、偏光が照射された前記対象物を、前記偏光の偏波方向と直交する方向の偏波成分を通過させる偏光フィルタを介して撮影して得られる直交偏光画像と、を取得するステップと、前記平行偏光画像と前記直交偏光画像との間の輝度の差分を示す差分画像を生成するステップと、前記差分画像に基づいて、前記対象物の光沢状態を判定するステップと、を有する。
【産業上の利用可能性】
【００８０】
本発明は、対象物の光沢状態を、簡単に精度良く判定することができる光沢判定装置および光沢判定方法として有用である。
【符号の説明】
【００８１】
１００  光沢判定装置
１１０  筐体
１２０  偏光フィルタ付きライト
１３０  偏光フィルタ付きカメラ
１４０  タッチパネル付きディスプレイ
３１０  照明部
３２０  撮影部
３３０  画像取得部
３４０  差分画像生成部
３５０  光沢判定部
３５１  ２値化部
３５２  領域検出部
３６０  肌状態判定部
３７０  判定結果提示部
【図１】
0006406606.tif 000002
【図２】
0006406606.tif 000003
【図３】
0006406606.tif 000004
【図４】
0006406606.tif 000005
【図５】
0006406606.tif 000006
【図６】
0006406606.tif 000007
【図７】
0006406606.tif 000008
【図８】
0006406606.tif 000009