(57)【要約】      （修正有）【課題】正面のカメラでユーザの異なる向きの顔を安定的に撮影できる肌分析装置を提供する。【解決手段】肌分析装置１０は、筐体１１と、筐体１１の主面に設けられたカメラ１０１及びディスプレイ１０２と、筐体１１の左端部及び右端部に、それぞれ、側端部が取り付けられた補助鏡２２ａ，ｂと、カメラ１０１にユーザの正面及び側面の顔画像を撮影させ、当該顔画像を用いてユーザの顔の肌を分析する制御部と、を備え、ディスプレイ１０２の主面と補助鏡２２ａ，ｂの主面とによって形成される内角θは、補助鏡２２ａ，ｂの何れかにユーザの正面の顔を映した状態で、カメラ１０１がユーザの側面の顔画像を撮影可能な角度である。【選択図】図４
2020088557.tif 000002
【特許請求の範囲】
【請求項１】
筐体と、
前記筐体の主面に設けられたカメラ及びディスプレイと、
前記筐体の左端部及び右端部に、それぞれ、側端部が取り付けられた補助鏡と、
前記カメラにユーザの正面及び側面の顔画像を撮影させ、当該顔画像を用いて前記ユーザの顔の肌を分析する制御部と、
を備え、
前記ディスプレイの主面と前記補助鏡の主面とによって形成される内角θは、前記補助鏡の何れかに前記ユーザの正面の顔を映した状態で、前記カメラが前記ユーザの側面の顔画像を撮影可能な角度である、
肌分析装置。
【請求項２】
前記ユーザの側面の顔画像を撮影可能な角度は、前記カメラから前記ユーザの両目を撮影可能な角度である、
請求項１に記載の肌分析装置。
【請求項３】
前記ユーザの側面の顔画像を撮影可能な角度は、前記カメラから前記ユーザの顔の手前と奥の両側の輪郭を撮影可能な角度である、
請求項１に記載の肌分析装置。
【請求項４】
前記ユーザの側面の顔画像を撮影可能な角度は、前記カメラから前記ユーザの両目と前記ユーザの顔の手前の耳から顎にかけての輪郭と、の両方を撮影可能な角度である、
請求項１に記載の肌分析装置。
【請求項５】
前記補助鏡には、当該補助鏡に正面の顔を映して目の位置を合わせるためのマーカーが設けられる、
請求項１から４の何れか１項に記載の肌分析装置。
【請求項６】
前記補助鏡は、前記筐体にヒンジによって連結され、前記ヒンジの軸を中心に前記内角θが小さくなる方向に可動する、
請求項１から４の何れか１項に記載の肌分析装置。
【請求項７】
前記補助鏡は、前記ユーザが前記カメラに対して横を向いた際に前記補助鏡に映る前記ユーザの正面の顔全体が収まる大きさである、
請求項１から４の何れか１項に記載の肌分析装置。
【請求項８】
前記カメラの高さ位置は、前記補助鏡の上端と下端の間である、
請求項７に記載の肌分析装置。
【請求項９】
前記補助鏡は、前記筐体内に収容される方向に可動する、
請求項７又は８に記載の肌分析装置。
【請求項１０】
前記カメラの近傍には、第１のライトが設けられ、
前記制御部は、前記正面の顔画像を撮影するとき、前記第１のライトを点灯させる、
請求項１から４の何れか１項に記載の肌分析装置。
【請求項１１】
前記補助鏡の近傍には、第２のライトが設けられ、
前記制御部は、前記側面の顔画像を撮影するとき、前記第２のライトを点灯させる、
請求項１から４の何れか１項に記載の肌分析装置。
【請求項１２】
前記第２のライトは、上下方向及び／又は左右方向を示す配置であり、
前記制御部は、前記側面の顔画像が所定の顔の向きからずれている場合、当該ずれを補正する方向に対応する前記第２のライトを点灯させる、
請求項１１に記載の肌分析装置。
【請求項１３】
前記制御部は、前記正面の顔画像を撮影するとき、前記カメラのフォーカスを両目に合わせ、前記側面の顔画像を撮影するとき、前記カメラのフォーカスを前記カメラに近い方の目に合わせる、
請求項１から４の何れか１項に記載の肌分析装置。
【請求項１４】
前記制御部は、前記正面の顔画像を撮影するとき、正面の顔の位置及びサイズを合わせるための正面用のガイドを前記ディスプレイに表示し、前記側面の顔画像を撮影するとき、側面の顔の位置及びサイズを合わせるための側面用のガイドを前記ディスプレイに表示する、
請求項１から４の何れか１項に記載の肌分析装置。
【請求項１５】
前記制御部は、前記顔画像の位置が前記ガイドの位置及びサイズに合っていない場合、前記顔画像の撮影を開始しない、
請求項１４に記載の肌分析装置。
【請求項１６】
前記制御部は、前記顔画像の位置が前記ガイドの位置及びサイズに合っているか否かに応じて、前記ガイドの態様を切り替える、
請求項１４に記載の肌分析装置。
【請求項１７】
前記制御部は、前記顔画像において髪の毛が額の領域にかかっていることを検出した場合、前記顔画像の撮影を開始しない、
請求項１から４の何れか１項に記載の肌分析装置。
【請求項１８】
前記制御部は、前記ディスプレイの左端部及び右端部の両方に、撮影開始を受け付ける撮影ボタンを表示する、
請求項１から４の何れか１項に記載の肌分析装置。
【請求項１９】
前記制御部は、前記ユーザの撮影中の顔画像と共に、前記ユーザの過去に撮影した顔画像を、前記ディスプレイに表示する、
請求項１から４の何れか１項に記載の肌分析装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、肌分析装置に関する。
【背景技術】
【０００２】
従来、ユーザの顔を複数の異なる方向から撮影した顔画像に基づき、顔の肌の状態を分析することが行われている。特許文献１には、カメラと照明装置を備えた可動撮影照明ユニットが顔の周りを回り、ユーザの顔を異なる方向から撮影する顔撮影装置が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−２１１５８１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１のように機械が動いてユーザの顔を異なる方向から撮影する装置は、設置面積が大きくなる傾向があり、例えばクリニックのような手狭な場所に設置することが難しい。
【０００５】
一方、ユーザに顔の向きを変えてもらい、正面のカメラで異なる向きの顔を撮影する装置は、設置面積を小さくすることができるものの、ユーザの顔を固定できないため、異なる向きの顔を安定的に撮影することが難しい。
【０００６】
本開示の非限定的な実施例は、正面のカメラでユーザの異なる向きの顔を安定的に撮影できる肌分析装置を提供することに資する。
【課題を解決するための手段】
【０００７】
本開示の一態様に係る肌分析装置は、筐体と、前記筐体の主面に設けられたカメラ及びディスプレイと、前記筐体の左端部及び右端部に、それぞれ、側端部が取り付けられた補助鏡と、前記カメラにユーザの正面及び側面の顔画像を撮影させ、当該顔画像を用いて前記ユーザの顔の肌を分析する制御部と、を備え、前記ディスプレイの主面と前記補助鏡の主面とによって形成される内角θは、前記補助鏡の何れかに前記ユーザの正面の顔を映した状態で、前記カメラが前記ユーザの側面の顔画像を撮影可能な角度である。
【０００８】
なお、これらの包括的または具体的な態様は、システム、方法、集積回路、コンピュータプログラム、または、記録媒体で実現されてもよく、システム、装置、方法、集積回路、コンピュータプログラムおよび記録媒体の任意な組み合わせで実現されてもよい。
【発明の効果】
【０００９】
本開示の一態様によれば、正面のカメラでユーザの異なる向きの顔を安定的に撮影できる。
【００１０】
本開示の一態様における更なる利点および効果は、明細書および図面から明らかにされる。かかる利点および／または効果は、いくつかの実施形態並びに明細書および図面に記載された特徴によってそれぞれ提供されるが、１つまたはそれ以上の同一の特徴を得るために必ずしも全てが提供される必要はない。
【図面の簡単な説明】
【００１１】
【図１】実施の形態１に係る肌分析装置の利用態様の例を示す図である。
【図２】実施の形態１に係る肌分析装置の利用手順の例を示すフローチャートである。
【図３】実施の形態１に係る肌分析装置の機能的な構成の例を示す図である。
【図４】実施の形態１に係る肌分析装置を正面から見た例を示す図である。
【図５】実施の形態１に係る、補助鏡部が開かれている肌分析装置を上から見た例を示す図である。
【図６】実施の形態１に係る、補助鏡部が閉じられている肌分析装置を上から見た例を示す図である。
【図７】正面の顔画像を撮影する場合の撮影ガイドＵＩ（User Interface）の例を示す図である。
【図８】右側面の顔画像を撮影する場合の撮影ガイドＵＩの例を示す図である。
【図９】左側面の顔画像を撮影する場合の撮影ガイドＵＩの例を示す図である。
【図１０】顔画像の撮影の画角を説明するための図である。
【図１１】実施の形態２に係る肌分析装置を正面から見た例を示す図である。
【図１２】実施の形態２に係る肌分析装置において補助鏡部が収用されていない場合の例を示す図である。
【図１３】実施の形態２に係る肌分析装置において補助鏡部が収容されている場合の例を示す図である。
【図１４】実施の形態３に係る肌分析装置を正面から見た例を示す図である。
【図１５】実施の形態３に係る肌分析装置の変形例を示す図である。
【図１６】本開示に係るハードウェア構成の例を示す図である。
【発明を実施するための形態】
【００１２】
以下、図面を適宜参照して、本発明の実施の形態について、詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。
【００１３】
（実施の形態１）
＜肌分析装置の利用例＞
図１は、肌分析装置の利用態様の例を示す。図２のフローチャートは、肌分析装置の利用手順の例を示す。次に、図１及び図２を参照して、肌分析装置の利用手順の一例を説明する。
【００１４】
ユーザ２は、図１に示すように、肌分析装置１０の前に座り、肌分析装置１０に対して肌分析の開始を指示する。肌分析装置１０は、この開始の指示を受けて、次の動作を開始する。
【００１５】
肌分析装置１０は、ディスプレイ１０２に、撮影ガイドＵＩ３００（図７、図８、図９参照）と、カメラ１０１で撮影中のユーザ２の顔画像（以下「撮影中顔画像」という）とを表示する（Ｓ１１）。撮影ガイドＵＩ３００は、ユーザ２の顔を適切に撮影できるように当該ユーザ２をガイドするためのＵＩである。なお、撮影ガイドＵＩ３００の詳細については後述する。
【００１６】
肌分析装置１０は、ユーザ２に対して正面を向くように指示し、当該ユーザ２の正面の顔画像を撮影する。また、肌分析装置１０は、ユーザ２に対して左を向くように指示し、当該ユーザ２の右側面の顔画像を撮影する。また、肌分析装置１０は、ユーザ２に対して右を向くように指示し、当該ユーザ２の左側面の顔画像を撮影する（Ｓ１２）。以下、撮影した顔画像を、「撮影後顔画像」という。なお、肌分析装置１０は、ユーザ２に対して顔の向きを変えるよう指示することに代えて、ユーザ２が座っている椅子Ｃを自動的に回転させて、ユーザ２の右側面及び左側面の顔画像を撮影してもよい。
【００１７】
肌分析装置１０は、撮影後顔画像に対して、顔部位の認識処理を行う（Ｓ１３）。顔部位とは、例えば、顔の輪郭、目、鼻、口、眉、及び、髪の毛の生え際など、顔において特徴的な部分である。なお、顔部位は、顔パーツ、顔器官、又は顔特徴部分などと表現されてもよい。
【００１８】
肌分析装置１０は、Ｓ１３にて認識した顔部位の位置などに基づいて、撮影後顔画像に肌分析を行う領域（以下「肌分析領域」という）を設定する（Ｓ１４）。
【００１９】
肌分析装置１０は、Ｓ１４にて設定した各肌分析領域に対して、肌分析を実行する（Ｓ１５）。
【００２０】
肌分析装置１０は、Ｓ１５にて実行した肌分析の結果を、ディスプレイ１０２に表示する（Ｓ１６）。
【００２１】
上述のとおり、ユーザ２は、肌分析装置１０を利用することにより、簡単に肌分析を受けることができる。以下、詳細に説明する。
【００２２】
＜肌分析装置の機能的な構成＞
次に、図３を参照して、肌分析装置１０の機能的な構成について説明する。
【００２３】
肌分析装置１０は、例えば、カメラ１０１、ディスプレイ１０２、スピーカー１０３、入力Ｉ／Ｆ１０４、記憶部１０５及び制御部１０６を備える。また、肌分析装置１０は、データベース９０に接続してよい。
【００２４】
カメラ１０１は、ユーザ２の顔を撮影する。なお、図１では、カメラ１０１が肌分析装置１０に内蔵されているが、カメラ１０１は肌分析装置１０とは別の装置であってもよい。この場合、カメラ１０１は、所定の有線通信又は無線通信を通じて、撮影した顔画像を肌分析装置１０へ送信する。
【００２５】
ディスプレイ１０２は、画像及び情報などを表示する。なお、図１では、ディスプレイ１０２が肌分析装置１０に内蔵されているが、ディスプレイ１０２は肌分析装置１０とは別の装置であってもよい。この場合、肌分析装置１０は、表示用のデータを、所定の有線通信又は無線通信を通じて、ディスプレイ１０２へ送信する。
【００２６】
スピーカー１０３は、音声を出力する。例えば、スピーカー１０３は、撮影開始及び撮影終了等を伝える音声を出力する。
【００２７】
入力Ｉ／Ｆ１０４は、ユーザ２からの指示を受け付ける。なお、肌分析装置１０は、複数の入力Ｉ／Ｆ１０４を備えてもよい。例えば、肌分析装置１０は、入力Ｉ／Ｆ１０４として、タッチパネル、マウス、キーボード、撮影指示用のボタン、及び音声入力用のマイクなどを備えてもよい。また、入力Ｉ／Ｆ１０４は、肌分析装置１０とは別の装置であってもよい。この場合、入力Ｉ／Ｆ１０４は、入力されたデータを、所定の有線通信又は無線通信を通じて、肌分析装置１０へ送信する。
【００２８】
記憶部１０５は、制御部１０６に使用されるデータを記憶する。記憶部１０５は、ＤＲＡＭ（Dynamic Random Access Memory）などの揮発性メモリであってもよいし、ＳＳＤ（Solid State Drive）などの不揮発性メモリであってもよい。或いは、記憶部１０５は、これらの組み合わせであってもよい。
【００２９】
制御部１０６は、例えばＣＰＵ（Central Processing Unit）であり、肌分析装置１０が有する機能を実現する。例えば、制御部１０６は、記憶部１０５に記憶されたコンピュータプログラムを実行することにより、後述する、撮影処理部２０１、顔部位認識部２０２、分析領域設定部２０３及び肌分析実行部２０４に係る機能を実現する。
【００３０】
撮影処理部２０１は、撮影ガイドＵＩ３００を生成し、ディスプレイ１０２に表示する。また、撮影処理部２０１は、撮影中顔画像を、リアルタイムにディスプレイ１０２に表示する。また、撮影処理部２０１は、ユーザの正面の顔画像、左側面の顔画像及び右側面の顔画像をそれぞれ撮影し、撮影後顔画像を生成する。
【００３１】
顔部位認識部２０２は、例えば、次の処理によって顔部位を認識する。すなわち、顔部位認識部２０２は、まず、公知の画像処理技術を用いて、顔画像から特徴点を抽出する。次に、顔部位認識部２０２は、その抽出した特徴点から、顔の輪郭、目、鼻、口、眉、及び髪の毛の生え際などの顔部位を認識する。なお、顔部位認識部２０２は、撮影後顔画像に限らず、撮影中顔画像に対しても顔部位の認識処理を行ってよい。
【００３２】
分析領域設定部２０３は、顔部位認識部２０２によって認識された顔部位の位置に基づいて、顔画像に少なくとも１つの肌分析領域を設定する。
【００３３】
肌分析実行部２０４は、分析領域設定部２０３によって顔画像に設定された各肌分析領域に対して、肌分析を実行する。例えば、肌分析実行部２０４は、顔画像における肌分析領域内に対して公知の画像処理を適用して、皺、シミ、及び／又は、毛穴などの量を分析する。
【００３４】
データベース９０は、各ユーザ２の顔画像と、当該顔画像の肌分析結果とを対応付けて管理する。なお、図３において、データベース９０は、肌分析装置１０とは別の装置であるが、データベース９０は、肌分析装置１０に内蔵されてもよい。
【００３５】
＜肌分析装置の物理的な構成＞
次に、図４、図５及び図６を参照して、実施の形態１に係る肌分析装置１０の物理的な構成について説明する。図４は、肌分析装置１０を正面から見た図の一例を示す。図５は、左補助鏡部１２ａ及び右補助鏡部１２ｂが開かれている肌分析装置１０を上から見た図の一例を示す。図６は、左補助鏡部１２ａ及び右補助鏡部１２ｂが閉じられている肌分析装置１０を上から見た図の一例を示す。ただし、図５及び図６では、上照明１３を省略している。
【００３６】
図４に示すように、肌分析装置１０は、筐体１１、左補助鏡部１２ａ、右補助鏡部１２ｂ、上照明１３、鏡（正面鏡）２１、カメラ１０１、及びディスプレイ１０２を備える。なお、左補助鏡部１２ａと右補助鏡部１２ｂとを区別しない場合は、補助鏡部１２と表現する。
【００３７】
筐体１１は、平板形状であり、ユーザ２側の主面に、正面鏡２１、カメラ１０１及びディスプレイ１０２を備える。ディスプレイ１０２は、正面鏡２１の内側に設けられる。或いは、ディスプレイ１０２は正面鏡２１と一体型の構成（例えばハーフミラーを備えるミラーディスプレイ）であってもよい。カメラ１０１は、ディスプレイ１０２の上方に設けられる。上照明１３は筐体１１の上端部に設けられる。上照明１３は複数のＬＥＤ（Light Emitting Diode）素子によって構成されてよい。
【００３８】
左補助鏡部１２ａは、平板形上であり、ユーザ２側の主面に、鏡（左補助鏡）２２ａ及び光源の一例である方向指示ＬＥＤ２３ａを備える。同様に、右補助鏡部１２ｂは、平板形上であり、ユーザ２側の主面に、鏡（右補助鏡）２２ｂ及び光源の一例である方向指示ＬＥＤ２３ｂを備える。なお、方向指示ＬＥＤ２３ａ、２３ｂの詳細については後述する。また、左補助鏡部１２ａの方向指示ＬＥＤ２３ａと右補助鏡部１２ｂの方向指示ＬＥＤ２３ｂとを区別しない場合は、方向指示ＬＥＤ２３と表現する。
【００３９】
図５に示すように、左補助鏡部１２ａの右側端部２９ａ、筐体１１の左端部に、ヒンジ３１ａによって連結される。左補助鏡部１２ａは、ヒンジ３１ａの軸を中心に、正面鏡２１に近づく方向と、正面鏡２１から離れる方向とに可動する。右補助鏡部１２ｂの左側端部２９ｂは、筐体１１の右端部に、ヒンジ３１ｂによって連結される。右補助鏡部１２ｂは、ヒンジ３１ｂの軸を中心に、正面鏡２１に近づく方向と、正面鏡２１から離れる方向とに可動する。
【００４０】
また、図６に示すように、左補助鏡部１２ａ及び右補助鏡部１２ｂは、左補助鏡部１２ａ及び右補助鏡部１２ｂを閉じたときに正面鏡２１が覆われるサイズ及び形状であってよい。すなわち、正面鏡２１、左補助鏡２２ａ及び右補助鏡２２ｂは、いわゆる三面鏡の構造を採る。これにより、肌分析装置１０を使用しないときに、正面鏡２１、左補助鏡２２ａ及び右補助鏡２２ｂを閉じて、鏡２１，２２ａ、２２ｂの露出を防止できる。よって、例えば、診療室においてレーザー治療を行う場合に、レーザーが鏡２１、２２ａ、２２ｂに反射するおそれを防止できる。
【００４１】
左補助鏡部１２ａを最大に開いたときの、左補助鏡２２ａの主面と正面鏡２１の主面とによって形成される角度（内角）θmaxは、ユーザ２が顔を左に向けて、左補助鏡２２ａに正面の顔を映したときに、ユーザ２の両目と顔の右側面の輪郭とが適切にカメラ１０１に映る角度である。ヒンジ３１ａは、角度θmaxにおいて左補助鏡部１２ａを固定するロック機構を備える。例えば、角度θmaxは、３５度〜５０度の間であり、好ましくは４０度である。なお、右補助鏡部１２ｂ及びヒンジ３１ｂも、左補助鏡部１２ａ及びヒンジ３１ａと同様の構造である。
【００４２】
また、左補助鏡部１２ａには、ユーザ２が左補助鏡２２ａに正面の顔を映したときに、その正面の顔の位置及び大きさを合わせるためのマーカー４０ａが設けられる。例えば、左補助鏡２２ａには、両目を合わせる位置を示すマーカー（以下「目マーカー」という）４１ａが設けられる。目マーカー４１ａは、カメラ１０１と同じ高さに設けられてよい。また、左補助鏡部１２ａには、目マーカー４１ａに加えて又はこれに代えて、顔の輪郭を合わせる位置を示すマーカー（以下「輪郭マーカー」という）（図示せず）が設けられてもよい。これにより、ユーザ２が左補助鏡部１２ａを向いて、両目及び／又は顔の輪郭をそれぞれ目マーカー４１ａ及び／又は輪郭マーカーに合わせることにより、右側面の顔画像を安定的に撮影できる。なお、右補助鏡部１２ｂにおける目マーカー４１ｂ及び輪郭マーカー（図示せず）についても同様である。
【００４３】
また、カメラ１０１が正面鏡２１の内側に設けられる場合、ユーザ２は、カメラ１０１の位置を視認することが難しい。そこで、カメラ１０１の近傍に光源の一例であるＬＥＤ５０を設け、制御部１０６は、撮影時に当該ＬＥＤ５０を点灯させる。これにより、ユーザ２は、撮影時にカメラ１０１の位置を視認でき、視線をカメラ１０１に向けることができる。
【００４４】
＜撮影ガイドＵＩ＞
次に、図７、図８及び図９を参照して、撮影ガイドＵＩ３００について説明する。図７は、正面の顔画像を撮影するときの撮影ガイドＵＩ３００の一例を示す図である。図８は、右側面の顔画像を撮影するときの撮影ガイドＵＩ３００の一例を示す図である。図９は、左側面の顔画像を撮影するときの撮影ガイドＵＩ３００の一例を示す図である。
【００４５】
撮影ガイドＵＩ３００は、例えば、撮影中顔画像領域３１０、過去顔画像領域３２０、撮影ボタン３３０、及び顔位置ガイド４００を有する。
【００４６】
撮影中顔画像領域３１０には、ユーザ２の撮影中顔画像が表示される。過去顔画像領域３２０には、同じユーザ２の過去に撮影した顔画像（以下「過去顔画像」という）が表示される。なお、過去顔画像は、データベース９０に格納されている。
【００４７】
撮影処理部２０１は、正面の顔画像を撮影する場合、同じユーザ２の正面の過去顔画像を過去顔画像領域３２０に表示する。同様に、撮影処理部２０１は、右側面の顔画像を撮影する場合、同じユーザ２の右側面の過去顔画像を過去顔画像領域３２０に表示し、左側面の顔画像を撮影する場合、同じユーザ２の左側面の過去顔画像を過去顔画像領域３２０に表示する。このように、撮影中顔画像と共に過去顔画像を表示することにより、ユーザ２は、顔を動かして、撮影中顔画像の位置、サイズ及び向きを、過去顔画像の位置、サイズ及び向きと共通するように調整できる。これにより、過去顔画像に対する肌分析結果と、撮影後顔画像に対する肌分析結果とを、より高い精度で比較することができる。
【００４８】
撮影処理部２０１は、撮影中顔画像領域３２０に、顔位置ガイド４００を表示する。顔位置ガイド４００は、顔の輪郭線のガイド４０１と、目の位置のガイド４０２、顔の中心線のガイド４０３とを含む。なお、顔の輪郭線のガイド４０１、目の位置のガイド４０２、及び顔の中心線のガイド４０３は、図７、図８及び図９に示すように、撮影する顔の向きに応じて異なる配置であってよい。
【００４９】
ユーザ２は、顔画像の撮影時に、撮影中顔画像の輪郭を顔の輪郭線のガイド４０１に合わせ、撮影中顔画像の目の位置を目の位置のガイド４０２に合わせ、撮影中顔画像の中心線（鼻筋）を顔の中心線のガイド４０３に合わせる。これにより、撮影処理部２０１は、肌分析を行うために適切な位置、サイズ及び向きの顔画像を撮影できる。
【００５０】
撮影処理部２０１は、撮影中顔画像が顔位置ガイド４００の位置、サイズ及び向きに合っているか否かを、顔位置ガイド４００の色によって示してもよい。例えば、撮影処理部２０１は、顔部位認識部２０２が顔部位の認識に成功し、かつ、撮影中顔画像が顔位置ガイド４００の位置、サイズ及び向きに合っている場合、顔位置ガイド４００の色を青色に切り替えてよい。また、撮影処理部２０１は、顔部位認識部２０２が顔部位の認識に成功し、かつ、撮影中顔画像が顔位置ガイド４００の位置、サイズ及び向きに合っていない場合、顔位置ガイド４００の色を赤色に切り替えてよい。また、撮影処理部２０１は、顔部位認識部２０２が顔部位の認識に失敗している場合、顔位置ガイド４００の色をオレンジ色に切り替えてよい。また、撮影処理部２０１は、撮影中顔画像が顔位置ガイド４００の位置、サイズ及び向きに合っていない場合、撮影を開始しなくてよい。これにより、肌分析に適切な顔画像を効率的に撮影できる。
【００５１】
また、撮影ボタン３３０は、撮影ガイドＵＩ３００内の左端部分と右端部分の両方に設けられる。これにより、医療従事者（例えば看護師）などが、肌分析装置１０の左側及び右側のどちらに位置する場合でも、カメラ１０１及びディスプレイ１０２とユーザ２の顔との間を遮ることなく、撮影ボタン３３０をタッチできる。なお、撮影ボタン３３０は、撮影ガイドＵＩ３００内の左端部分と右端部分の何れか一方に設けられ、当該撮影ボタン３３０の位置は、設定によって切り替え可能であってもよい。
【００５２】
＜方向指示ＬＥＤ＞
ユーザ２は、補助鏡２２を向いている間（つまり顔の側面の撮影時）、正面のディスプレイ１０２に表示される顔位置ガイド４００を見ることができない。補助鏡部１２の方向指示ＬＥＤ２３は、ユーザ２が補助鏡２２を見ているときに、顔の側面の撮影中顔画像が顔位置ガイド４００に合うように、当該ユーザ２に対して顔の向きをガイドするために用いられる。
【００５３】
次に、左補助鏡部１２ａに設けられた方向指示ＬＥＤ２３ａの動作の一例を説明する。なお、右補助鏡部１２ｂに設けられた方向指示ＬＥＤ２３ｂの動作についても同様である。
【００５４】
例えば、撮影処理部２０１は、顔の右側面の撮影中顔画像が上を向き過ぎている場合、下を示す方向指示ＬＥＤ２３ａＤを点灯（又は点滅）させる。つまり、ユーザ２に少し下を向くように指示する。撮影処理部２０１は、顔の右側面の撮影中顔画像が下を向き過ぎている場合、上を示す方向指示ＬＥＤ２３ａＵを点灯（又は点滅）させる。つまり、ユーザ２に少し上を向くように指示する。撮影処理部２０１は、顔の右側面の撮影中顔画像が左を向き過ぎている場合、右を示す方向指示ＬＥＤ２３ａＲを点灯（又は点滅）させる。つまり、ユーザ２に少し右を向くように指示する。撮影処理部２０１は、顔の右側面の撮影中顔画像が右を向き過ぎている場合、左を示す方向指示ＬＥＤ２３ａＬを点灯（又は点滅）させる。つまり、ユーザ２に少し左を向くように指示する。撮影処理部２０１は、顔の右側面の撮影中顔画像が適切な向きである場合、全ての方向指示ＬＥＤ２３ａＤ、２３ａＵ、２３ａＲ、２３ａＬを点灯（又は点滅）させる。つまり、ユーザ２に正しい向きであることを示す。
【００５５】
＜撮影開始時及び撮影完了時＞
次に、撮影開始時及び撮影完了時における撮影処理部２０１の動作の一例について詳細に説明する。
【００５６】
撮影処理部２０１は、顔の右側面の撮影直前、及び、顔の左側面の撮影直前に、スピーカー１０３から撮影開始を示す音声を出力してよい。これにより、撮影処理部２０１は、左又は右を向いていて、正面のディスプレイ１０２に表示されている撮影ガイドＵＩ３００を見ることが難しいユーザ２に、撮影開始を知らせることができる。また、撮影処理部２０１は、撮影完了後に、スピーカー１０３から撮影完了を示す音声を出力してもよい。
【００５７】
また、撮影処理部２０１は、補助鏡部１２に設けられた方向指示ＬＥＤ２３を用いて、撮影開始及び撮影完了を通知してもよい。例えば、撮影処理部２０１は、撮影直前に全ての方向指示ＬＥＤを点滅させ、撮影完了後に全ての方向指示ＬＥＤ２３を消灯させてもよい。
【００５８】
また、顔部位認識部２０２は、撮影中顔画像の額の領域に髪の毛がかかっているか否かを判定し、髪の毛がかかっていると判定した場合、髪の毛をまとめる指示を、撮影ガイドＵＩ３００に表示してもよい。また、この場合、撮影処理部２０１は、撮影を開始しなくてもよい。
【００５９】
また、撮影処理部２０１は、正面の顔を撮影する場合、カメラ１０１のフォーカスを両目の位置に合わせてよい。撮影処理部２０１は、右側面の顔を撮影する場合、カメラ１０１のフォーカスを右目（カメラ１０１に近い方の目）の位置に合わせてよい。撮影処理部２０１は、左側面の顔を撮影する場合、カメラ１０１のフォーカスを左目（カメラ１０１に近い方の目）の位置に合わせてよい。目は、顔の奥行きの中央付近に位置するため、このようにカメラ１０１のフォーカスを合わせることにより、肌分析に適切な顔画像を撮影することができる。
【００６０】
また、図１０に示すように、撮影処理部２０１は、顔のみが含まれる画角α１よりも広い画角α２で撮影してよい。そして、撮影処理部２０１は、その広い画角α２で撮影した画像５００から、顔画像が撮影されている領域５０１を抽出して、撮影後顔画像を生成してよい。これにより、例えば、撮影処理部２０１は、撮影後に、撮影後顔画像を過去顔画像に合うよう調整できる。
【００６１】
また、撮影処理部２０１は、同じ向きの顔画像を複数撮影する場合、複数の撮影後顔画像において顔のサイズ及び位置が共通になるように、各撮影後顔画像を補正してよい。例えば、撮影処理部２０１は、同じ向きの顔に対して、上照明１３から、横偏光の光を照射して第１の顔画像を、縦偏光の光を照射して第２の顔画像を、光の照射なしで第３の顔画像を撮影する。そして、撮影処理部２０１は、第１、第２及び第３の顔画像において、顔のサイズ及び／又は位置がずれている場合、これらが共通になるように、第１、第２及び第３の顔画像を補正する。なお、撮影処理部２０１は、公知のテンプレートマッチング技術によって、各撮影後画像の間のずれを検出してよい。
【００６２】
（実施の形態２）
図１１を参照して、実施の形態２に係る肌分析装置１０の物理的な構成例について説明する。図４に対する図１１の主な相違点は、補助鏡部１２のサイズが小さい点である。なお、実施の形態１と同様の構成要素については、説明を省略する場合がある。
【００６３】
図１１に示すように、肌分析装置１０は、筐体１１、左補助鏡部１２ａ、右補助鏡部１２ｂ、上照明１３、左照明１４ａ、右照明１４ｂ、正面鏡２１、カメラ１０１及びディスプレイ１０２を備える。なお、筐体１１、上照明１３、正面鏡２１、カメラ１０１及びディスプレイ１０２については、図４と同様であるので、説明を省略する。
【００６４】
左補助鏡部１２ａの右側端部２９ａは、筐体１１の左端部の、カメラ１０１の高さが左補助鏡２２ａの上端及び下端の間となる位置に取り付けられる。同様に、右補助鏡部１２ｂの左側端部２９ｂは、筐体１１の右端部の、カメラ１０１の高さが右補助鏡２２ｂの上端及び下端の間となる位置に取り付けられる。また、左補助鏡部１２及び右補助鏡部１２は、それぞれ、図５において説明した角度θmaxにて筐体１１に取り付けられる。
【００６５】
また、左補助鏡２２ａのサイズは、ユーザ２が顔を左に向けたときに、左補助鏡２２ａに映った正面の顔全体がほぼぴったり収まるサイズである。右補助鏡２２ｂのサイズについても同様である。言い換えれば、図１１において、左右の補助鏡２２の少なくとも１つは、ユーザ２がカメラ１０１に対して横を向いた際に補助鏡２２に映るユーザ２の正面の顔全体よりも大きく、その補助鏡２２の縦及び横の長さは、それぞれ、正面鏡２１の縦お及び横の長さよりも短い。
【００６６】
左照明１４ａは、筐体１１の左端部の、左補助鏡部１２ａよりも下方部分に設けられる。右照明１４ｂは、筐体１１の右端部の、右補助鏡部１２ｂよりも下方部分に設けられる。
【００６７】
なお、図１２及び図１３に示すように、補助鏡部１２は、スライド機構によって筐体１１内に収容可能であってもよい。これにより、肌分析装置１０を使用しないときに補助鏡部１２を筐体１１内に収容でき、診療室内の医療従事者又は受診者などが誤って補助鏡部１２を引っ掛けてしまうことを予防できる。
【００６８】
また、図１１に示すように、補助鏡２２は、水平軸５１１を中心に角度ψを調整可能であってもよい。これにより、補助鏡２２の面を、ユーザ２の顔の高さ位置に合わせて調整できる。
【００６９】
（実施の形態３）
図１４を参照して、実施の形態３に係る肌分析装置１０の物理的な構成例について説明する。図１１に対する図１４の主な相違点は、補助鏡部１２が筐体１１とは分離している点である。なお、実施の形態２と同様の構成要素については、説明を省略する場合がある。
【００７０】
図１４に示すように、肌分析装置１０は、筐体１１、左補助鏡部１２ａ、右補助鏡部１２ｂ、上照明１３、左照明１４ａ、右照明１４ｂ、台座１５、左支柱１６ａ、右支柱１６ｂ、正面鏡２１、カメラ１０１、及びディスプレイ１０２を備える。
【００７１】
筐体１１は、台座１５に固定される。筐体１１、上照明１３、正面鏡２１、カメラ１０１及びディスプレイ１０２については、図４と同様であるので、説明を省略する。
【００７２】
左支柱１６ａは、台座１５の、筐体１１の左側の位置に固定され、高さ方向に延びている。左補助鏡部１２ａは、正面鏡２１と、図５において説明した角度θmaxを形成するように、左支柱１６ａの上端部に固定される。右支柱１６ｂは、台座１５の、筐体１１の右側の位置に固定され、高さ方向に延びている。右補助鏡部１２ｂは、正面鏡２１と、図５において説明した角度θmaxを形成するように、右支柱１６ｂの上端部に固定される。
【００７３】
また、左補助鏡部１２ａは、カメラ１０１の高さ位置が左補助鏡２２ａの上端及び下端の間となるように、左支柱１６ａに固定されてよい。同様に、右補助鏡部１２ｂは、カメラ１０１の高さが右補助鏡２２ｂの上端及び下端の間となるように、右支柱１６ｂに固定されてよい。ただし、左補助鏡部１２ａ及び右補助鏡部１２ｂの高さは、これに限られず、例えば図１５に示すように、カメラ１０１の高さ位置よりも低くてもよい。
【００７４】
左照明１４ａ及び右照明１４ｂは、それぞれ、筐体１１の左端部及び右端部に設けられる。このように、図１１と比較して補助鏡部１２を筐体１１から分離することにより、筐体１１の左端部及び右端部に、図１１よりも長い左照明１４ａ及び右照明１４ｂを設けることができる。
【００７５】
＜本開示のまとめ＞
本開示では、肌分析装置１０は、筐体１１と、筐体１１の主面に設けられたカメラ１０１及びディスプレイ１０２と、筐体１１の左端部及び右端部に、それぞれ、側端部２９ａ、２９ｂが取り付けられた補助鏡部１２ａ、１２ｂと、カメラ１０１にユーザ２の正面及び側面の顔画像を撮影させ、当該顔画像を用いてユーザ２の顔の肌を分析する制御部１０６と、を備え、ディスプレイ１０２の主面と補助鏡部１２ａ、１２ｂの主面とによって形成される内角θは、補助鏡部１２ａ、１２ｂの何れかにユーザ２の正面の顔を映した状態で、カメラ１０１がユーザ２の側面の顔画像を撮影可能な角度である。例えば、内角θは５０度以下である。言い換えると、例えば、内角θは、カメラ１０１から少なくともユーザ２の両目を撮影可能な（両目が見える）角度であればよい。或いは、内角θは、カメラ１０１から、ユーザ２の顔の手前（近い側）と奥（遠い側）の両側の輪郭が撮影可能な角度であればよい。或いは、内角θは、カメラ１０１から、ユーザ２の顔の奧（遠い側）の頬の輪郭が鼻により隠れていない角度であればよい。或いは、内角θは、カメラ１０１から、ユーザ２の両目と、ユーザ２の顔の手前（近い方）の耳から顎にかけての輪郭と、の両方を撮影可能な角度であってよい。
【００７６】
当該構成によれば、ユーザ２が補助鏡２２ａ、２２ｂに対して正面の顔が映るように顔を向けることにより、正面のカメラ１０１で側面の顔画像を安定的に（つまりほぼ同じ向きで）撮影できる。これにより、今回撮影した顔画像の肌分析結果と、過去に撮影した顔画像の肌分析結果とを、より高い精度で比較することができる。
【００７７】
以上、本開示に係る実施形態について図面を参照して詳述してきたが、上述した肌分析装置１０の機能は、コンピュータプログラムにより実現され得る。
【００７８】
図１６は、各装置の機能をプログラムにより実現するコンピュータのハードウェア構成を示す図である。このコンピュータ２１００は、キーボード又はマウス、タッチパッドなどの入力装置２１０１、ディスプレイ１０２又はスピーカーなどの出力装置２１０２、ＣＰＵ（Central Processing Unit）２１０３、ＲＯＭ（Read Only Memory）２１０４、ＲＡＭ（Random Access Memory）２１０５、ハードディスク装置又はＳＳＤ（Solid State Drive）などの記憶装置２１０６、ＤＶＤ−ＲＯＭ（Digital Versatile Disk Read Only Memory）又はＵＳＢ（Universal Serial Bus）メモリなどの記録媒体から情報を読み取る読取装置２１０７、ネットワークを介して通信を行う通信装置２１０８を備え、各部はバス２１０９により接続される。
【００７９】
そして、読取装置２１０７は、上記各装置の機能を実現するためのプログラムを記録した記録媒体からそのプログラムを読み取り、記憶装置２１０６に記憶させる。あるいは、通信装置２１０８が、ネットワークに接続されたサーバ装置と通信を行い、サーバ装置からダウンロードした上記各装置の機能を実現するためのプログラムを記憶装置２１０６に記憶させる。
【００８０】
そして、ＣＰＵ２１０３が、記憶装置２１０６に記憶されたプログラムをＲＡＭ２１０５にコピーし、そのプログラムに含まれる命令をＲＡＭ２１０５から順次読み出して実行することにより、上記各装置の機能が実現される。
【００８１】
本開示はソフトウェア、ハードウェア、又は、ハードウェアと連携したソフトウェアで実現することが可能である。
【００８２】
上記実施の形態の説明に用いた各機能ブロックは、部分的に又は全体的に、集積回路であるＬＳＩとして実現され、上記実施の形態で説明した各プロセスは、部分的に又は全体的に、一つのＬＳＩ又はＬＳＩの組み合わせによって制御されてもよい。ＬＳＩは個々のチップから構成されてもよいし、機能ブロックの一部または全てを含むように一つのチップから構成されてもよい。ＬＳＩはデータの入力と出力を備えてもよい。ＬＳＩは、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。
【００８３】
集積回路化の手法はＬＳＩに限るものではなく、専用回路、汎用プロセッサ又は専用プロセッサで実現してもよい。また、ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Field Programmable Gate Array）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。本開示は、デジタル処理又はアナログ処理として実現されてもよい。
【００８４】
さらには、半導体技術の進歩または派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適用等が可能性としてありえる。
【産業上の利用可能性】
【００８５】
本開示の一態様は、顔を撮影するシステムに有用である。
【符号の説明】
【００８６】
１０  肌分析装置
１１  筐体
１２ａ  左補助鏡部
１２ｂ  右補助鏡部
１３  上照明
１４ａ  左照明
１４ｂ  右照明
１５  台座
１６ａ  左支柱
１６ｂ  右支柱
２１  正面鏡
２２ａ  左補助鏡
２２ｂ  右補助鏡
２３ａ、２３ｂ  方向指示ＬＥＤ
３１ａ、３１ｂ  ヒンジ
４０ａ、４０ｂ  マーカー
９０  データベース
１０１  カメラ
１０２  ディスプレイ
１０３  スピーカー
１０４  入力Ｉ／Ｆ
１０５  記憶部
１０６  制御部
２０１  撮影処理部
２０２  顔部位認識部
２０３  分析領域設定部
２０４  肌分析実行部
３００  撮影ガイドＵＩ
【図１】
2020088557.tif 000003
【図２】
2020088557.tif 000004
【図３】
2020088557.tif 000005
【図４】
2020088557.tif 000006
【図５】
2020088557.tif 000007
【図６】
2020088557.tif 000008
【図７】
2020088557.tif 000009
【図８】
2020088557.tif 000010
【図９】
2020088557.tif 000011
【図１０】
2020088557.tif 000012
【図１１】
2020088557.tif 000013
【図１２】
2020088557.tif 000014
【図１３】
2020088557.tif 000015
【図１４】
2020088557.tif 000016
【図１５】
2020088557.tif 000017
【図１６】
2020088557.tif 000018