(57)【要約】【課題】撮影に慣れていない人でも他の人と略同様に肌を撮影することができるとともに撮影に使うカメラの機種や外光の状況に撮影される画像の色が影響を受け難いコンバージョンレンズユニットおよび状態測定システムを提供する。【解決手段】スマートフォン１に取り付けられるコンバージョンレンズユニット１０は、コンバージョンレンズ１１と、肌２４に当接するとともに、開口部２０ｃを有する当接部２０ｂと、コンバージョンレンズ１０を囲み、開口部２０ｃ以外からの外光をマスターレンズに対して遮るレンズ筐体２０とを備える。レンズ筐体２０内で、肌２４が当接部２０ｂに当接した状態で開口部２０ｃからレンズ筐体２０の内側に臨む部分を照明する略白色のＬＥＤ１２と、三種類以上の基準色を備えたカラースケールとを備える。当接部２０ｂの当接面とカラースケール４１のスケール面との距離がコンバージョンレンズ１１の被写界深度の範囲となる距離以下となっている。【選択図】図２
2019028255.tif 000002
【特許請求の範囲】
【請求項１】
カメラを備えるとともに無線通信機能を有する携帯端末の前記カメラのマスターレンズの前に、被写体からの反射光を前記マスターレンズに導光するコンバージョンレンズのレンズ系を取り付けるためのコンバージョンレンズユニットであって、
前記レンズ系と、
前記被写体に当接するとともに、前記レンズ系の光軸が通る開口部を有する当接部と、
前記レンズ系を囲み、前記開口部以外からの外光を前記マスターレンズに対して遮る遮蔽部と、
前記遮蔽部内で、前記レンズ系の視野範囲の外側に配置され、前記被写体が前記当接部に当接した状態で前記被写体の前記開口部から前記遮蔽部の内側に臨む部分を照明する略白色の光源と、
前記遮蔽部内の前記視野範囲内に設けられ、三種類以上の基準色を備えたカラースケールとを備え、
前記当接部の前記被写体に当接する当接面と、前記カラースケールの前記基準色が表示されるスケール面との前記レンズ系の光軸方向に沿った距離が前記レンズ系の被写界深度の範囲となる距離以下となっていることを特徴とするコンバージョンレンズユニット。
【請求項２】
前記被写体表面の反射光から前記被写体表面の凹凸による影響を抑える反射光制御部を備えることを特徴とする請求項１に記載のコンバージョンレンズユニット。
【請求項３】
前記反射光制御部は、前記光源から前記被写体に向かう前記光源の光が透過する第1の偏光板と、前記被写体からマスターレンズに向かう前記被写体からの反射光が透過する第２偏光板とを備え、前記第１の偏光板の偏光方向と前記第２の偏光板の偏光方向が直交していることを特徴とする請求項２に記載のコンバージョンレンズユニット。
【請求項４】
請求項１から請求項３のいずれか１項に記載のコンバージョンレンズユニットと、前記コンバージョンレンズユニットの前記コンバージョンレンズが前に取り付けられる前記マスターレンズを有する前記カメラを備えるとともに無線通信機能を備える前記携帯端末と、
前記携帯端末または前記携帯端末と通信可能な外部機器に設けられ、前記カメラで撮影された前記被写体の画像の色補正を、前記画像に写った前記カラースケールの前記基準色に基づいて行う色補正部および色補正された前記画像上の前記被写体の色から前記被写体の状態を判定する状態判定手段とを備えることを特徴とする状態判定システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体のカラー画像を撮影する際に用いるコンバージョンレンズユニットおよび状態測定システムに関する。
【背景技術】
【０００２】
従来、化粧品会社の店舗等のスタッフが肌質測定用の専用機を使って、肌質、すなわち、肌の状態を測定していた。このような肌質測定には、肌を撮影し、撮影された画像から、肌のキメの状態や、毛穴の状態や、シミの状態や、肌の色の状態を測定するものが含まれる。自分の肌の状態を知りたいと思っている人は多くいると思われるが、店舗で肌質測定を行う人は必ずしも多くない。しかし、例えば、肌の色を考えた場合に、医者に掛かっていない多くの人の肌色データベースができれば、各個人の体調を把握し、より健康的な生活を目指す上で、極めて有用な知見が得られると考えられる。
例えば、肌色と健康状態の関係の例では、顏の肌が黄色いと肝機能による黄疸や糖化等の可能性が考えられ、顏の肌が赤いと肝機能障害などによる毛細血管拡張、更年期障害や糖尿病等の可能性が考えられ、顏の肌が青いと血液の循環が悪い可能性が考えられる。そのため、医者に掛かる前の方々から多くのデータを集めることができれば、健康状態の悪化に至る過程を具体的に検討するための指針となり、ひいては国民の健康増進にも寄与することが多くの医学者からも期待されている。
そこで、スマートフォンの内蔵カメラを用いて肌を撮影し、その画像をスマートフォンの無線通信機能で所定のサイトに送信して肌質を判断してもらうサービスが提案されている。ここで、肌をカラーで撮影する場合に、カメラの照明、イメージセンサ（撮像素子）、画像処理用集積回路等の特性や外光等の周囲の環境や光の表面反射の状態により、同じ被写体を撮影しても異なる色合いの写真となってしまうので、色を補正し、同一の色が略同じ色として出力される必要がある。特に、スマートフォンでは、様々な機種があるとともに、比較的短期間で各機種が新機種に更新されることから、例えば、肌質測定用の専用カメラを用意して使う場合に比較して撮影した画像の色合いを含む画質がユーザーによってばらばらの状態となる。
【０００３】
例えば、撮影によって画像の色がばらつく要因は、各カメラの撮像素子のカラーフィルタの違いに基づくものと、照明光のスペクトルの違いに基づくものと、カメラの画像処理の自動ホワイトバランスの方式の違いに基づくものと、肌表面の反射光の状態の違いに基づくものなどがあり、撮影段階で色を合わせることは困難である。
したがって、スマートフォンから肌画像の診断をしてくれるサイトにスマートフォンで撮影した肌の画像をそのまま送っても肌の色による判断は難しい。
【０００４】
そこで、カメラ内蔵の携帯電話に取り付けて被写体の拡大写真を撮影する拡大撮像用ユニットに、撮影された後の画像の色の補正を行うための複数種類の基準色を有する色見本を画像に写り込むように配置することが提案されている（例えば、特許文献１参照）。
また、スマートフォンのカメラの画像で肌状態の測定を行うために同じ被写体の色がいずれのスマートフォンでも略同じ色になるとともに、被写体の色が照明の状況が変わっても略同じになるように複数種類の基準色を備えたカラーフレームを肌と一緒に撮影し、撮影された画像上の基準色に基づいて色補正することが提案されている（例えば、非特許文献１参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特許第４１７５５０２号公報
【非特許文献】
【０００６】
【非特許文献１】手塚耕一、鈴木祥治、清水雅芳著「スマートフォンを用いた肌状態測定技術」雑誌ＦＵＪＩＴＳＵ、２０１３−１月号（ＶＯＬ．６４、ＮＯ．１）Ｐ．５９−６５
【発明の概要】
【発明が解決しようとする課題】
【０００７】
ところで、専門家ではない一般の人がスマートフォンの内蔵カメラで肌質測定用に肌を撮影する上では、誰が撮影しても略同じ撮影条件となるようにすることが好ましい。さらに、略定期的に撮影した場合に、いつでも略同じ撮影条件となるようにすることが好ましい。この場合には、スマートフォンのカメラに肌撮影用のレンズユニット（コンバージョンレンズユニット）を取り付け、前記レンズユニットに先端面が肌に接触し、撮影用のレンズ系の光軸が通る開口部を有する当接部と、当接部からカメラまで外光を遮る遮蔽部と、開口部から遮蔽部内に露出する肌を照明する光源とを設けることが好ましい。これにより、肌撮影時に誰が撮影しても肌から同じ距離で同じ照度で撮影することが可能となる。この場合に、例えば、複数の基準色を備えたカラースケールを遮蔽部内に肌の画像に写り込むように配置することで、色の補正が可能となる。
【０００８】
しかし、スマートフォンのカメラは、基本的にオートフォーカスとなっており、スマートフォン等のミラーレスデジタルカメラの自動焦点制御系は強い反射光によってコントラストが高くなっている箇所にピントを合わせようと働くことになる。遮蔽部内の撮影範囲にカラースケールを設けた場合に、肌色の濃さによっては、「顔の肌」よりも「カラースケール」からの反射光の方が、コントラストが高くなる場合がある。したがって、ピント位置が肌ではなく、カラースケールの光源に最も明るく照明された部分に合ってしまう虞がある。この場合に、被写体である肌に対して少しピントがずれてしまい、肌の画像の画質が低下し、肌状態の測定に支障がでる虞がある。
【０００９】
本発明は、前記事情に鑑みてなされたものであり、撮影に慣れていない人でも他の人と略同様に肌を撮影することができるとともに撮影に使うカメラの機種や外光の状況に撮影される画像の色が影響を受けにくいコンバージョンレンズユニットおよび状態測定システムを提供することを目的とする。
【課題を解決するための手段】
【００１０】
前記課題を解決するために、本発明のコンバージョンレンズユニットは、カメラを備えるとともに無線通信機能を有する携帯端末の前記カメラのマスターレンズの前に、被写体からの反射光を前記マスターレンズに導光するコンバージョンレンズのレンズ系を取り付けるためのコンバージョンレンズユニットであって、
前記レンズ系と、
前記被写体に当接するとともに、前記レンズ系の光軸が通る開口部を有する当接部と、
前記レンズ系を囲み、前記開口部以外からの外光を前記マスターレンズに対して遮る遮蔽部と、
前記遮蔽部内で、前記レンズ系の視野範囲の外側に配置され、前記被写体が前記当接部に当接した状態で前記被写体の前記開口部から前記遮蔽部の内側に臨む部分を照明する略白色の光源と、
前記遮蔽部内の前記視野範囲内に設けられ、三種類以上の基準色を備えたカラースケールとを備え、
前記当接部の前記被写体に当接する当接面と、前記カラースケールの前記基準色が表示されるスケール面との前記レンズ系の光軸方向に沿った距離が前記レンズ系の被写界深度の範囲となる距離以下となっていることを特徴とする。
【００１１】
このような構成によれば、当接部に被写体を当接させた状態で被写体の当接部の開口部から臨む部分を撮影することになるので、被写体をいつ誰が撮影しても被写体とカメラとの距離を同じにすることができ、かつ、遮蔽部で外光を遮断した状態で略白色の光源で被写体を照明するのでいつ誰が撮影しても被写体の照度等の照明の状況を同じにすることができる。このような状態でレンズ系の視野範囲にあるカラースケールのスケール面の基準色が被写体を撮影した画像に被写体とともに写り込むことになる。したがって、画像中には、被写体と基準色が写っており、写り込んだ基準色に基づいて被写体の色補正を行うことができる。これにより色補正後の画像において、いつ誰が撮影した被写体であっても同じ色は略同様の色となる。これにより、被写体の状態を色により判定することができる。例えば、被写体を肌とした場合に肌の色から肌の状態や健康状態を判定することができる。判定においては、例えば、肌の状態や、健康状態や、日焼けの状態等によって異なる肌の色を登録しておき、撮影された肌の色が登録されたどの色に近似するかで肌の状態や健康状態を判定することができる。
【００１２】
なお、コンバージョンレンズのレンズ系とは、フロント型のコンバージョンレンズとしてマスターレンズの前に配置される一つまたは複数のレンズである。また、レンズ系の視野範囲とは、レンズ系を通ってマスターレンズに至る光の空間における範囲であり、ここでは、コンバージョンレンズを取り付けたカメラの撮影画像に写る範囲であり、レンズ系の視野範囲内ならコンバージョンレンズを取り付けたカメラで撮影された画像に写り、視野範囲外なら写らない状態となる。したがって、光源は直接撮影画像に写り込むことはない。レンズ系の視野範囲内のカラースケールは、撮影画像に写り込むことになる。なお、カラースケールは、撮影画像に写り込む位置で開口部より外側に配置されて被写体の邪魔にならない位置に配置されることが好ましい。また、当接面とスケール面とは、レンズ系の光軸の方向に直交する面であることが好ましい。
【００１３】
前記被写界深度とは、写真の焦点が合っているように見える被写体側の距離の範囲のことである。 写真用レンズにおいては、ある一つの設定で厳密な意味でピントが合っている場所は、一つの平面上にしかないが、一定の許容量を認めることでその前後にも十分にはっきりと像を結んでいるといえる範囲があり、この範囲を被写界深度という。
【００１４】
本発明の前記構成において、前記被写体表面の反射光から前記被写体表面の凹凸による影響を抑える反射光制御部を備えることが好ましい。
このような構成によれば、撮影対象である被写体表面形状の凹凸などの影響を受けず、いわゆる無反射条件で観察することが可能となる。その場合、撮影対象並びにカラースケールの表面からの白っぽく見える反射光の影響をうけることなく、精度高く色較正を実施することができ、特に、鮮明な色情報を得ることができるので、肌に適用する場合は、非常に正確な色較正を実施することができる。なお、反射光制御部は、例えば、後述する偏光を用いるものであるが、屈折率マッチング用の撮影ゼリーを用いてもよいし、ダーモスコープで用いられる無影照明を用いてもよい。
【００１５】
本発明の前記構成において、前記反射光制御部は、前記光源から前記被写体に向かう前記光源の光が透過する第1の偏光板と、前記被写体からマスターレンズに向かう前記被写体からの反射光が透過する第２偏光板とを備え、前記第１の偏光板の偏光方向と前記第２の偏光板の偏光方向が直交していることが好ましい。
【００１６】
このような構成によれば、第１の偏光板で偏光された光が被写体表面で反射した反射光が第２の偏光板に向かうがこの反射光では偏光が維持され、第１の偏光板と偏光方向が直交する第２の偏光板を通れず、表面の凹凸による反射光を抑制できる。なお、光の一部は、例えば、被写体としての皮膚の表面よりわずかに内側に入り込んで反射し、肌の色を反映した反射光を生じることになり、反射光を抑制しても肌の色を写すことができる。
【００１７】
本発明の状態測定システムは、前記構成のコンバージョンレンズユニットと、前記コンバージョンレンズユニットの前記コンバージョンレンズが前に取り付けられる前記マスターレンズを有する前記カメラを備えるとともに無線通信機能を備える前記携帯端末と、
前記携帯端末または前記携帯端末と通信可能な外部機器に設けられ、前記カメラで撮影された前記被写体の画像の色補正を、前記画像に写った前記カラースケールの前記基準色に基づいて行う色補正部および色補正された前記画像上の前記被写体の色から前記被写体の状態を判定する状態判定手段とを備えることを特徴とする。
【００１８】
このような構成によれば、いつ誰が撮影しても被写体までの距離が同じで、被写体の照明の条件が同じでカラースケールが写り込むとともに被写体とカラースケールの両方にピントが合った画像を得ることができ、この画像をカラースケールで色較正して、被写体の状態を判定することができる。被写体の状態の判定には、例えば、被写体の状態毎の色のデータや画像を登録しておき、登録されたデータとの比較から判定することができる。
【発明の効果】
【００１９】
本発明によれば、いつ誰がどのカメラで撮影しても被写体を略同じ条件で撮影できるとともに撮影画像の色を同じ基準色に基づいて較正できるので、略同条件で被写体の状態を判定できる。
【図面の簡単な説明】
【００２０】
【図１】本発明の実施の形態の状態測定システム（肌質測定システム）を示すブロック図である。
【図２】同、コンバージョンレンズユニットの概略構造を示す図である。
【図３】同、カラースケールを示す正面図である。
【図４】同、コンバージョンレンズユニットの撮影範囲と撮像素子の関係を示す図である。
【図５】同、被写界深度の求め方を説明する図である。
【図６】同、コンバージョンレンズユニットのカラースケール部分を示す図である。
【図７】同、異なる例のカラースケールを示す正面図である。
【発明を実施するための形態】
【００２１】
本発明の実施の形態のコンバージョンレンズユニットおよび状態測定システムを説明する。
本実施の形態の状態測定システムである肌質測定システムは、図１に示すようにカメラ（マスターレンズ）２と無線通信装置（図示略）と演算処理装置としての制御手段３とを備える携帯端末としてのスマートフォン１と、当該スマートフォン１に取り付けられるコンバージョンレンズユニット１０とを備える。なお、コンバージョンレンズユニット１０を用いてスマートフォン１のカメラ２で撮影された画像の後述の色補正（色較正）や、肌質の判定等の処理をスマートフォン１の制御手段３で行うものとしてもよいし、スマートフォン１とデータ通信可能な外部機器として、例えば、インターネットに繋がれたサーバ（コンピュータシステム）に、上述の画像等のデータをスマートフォン１から送信し、サーバで色補正や肌質の判定を行うものとし、肌質の判定結果等をサーバからスマートフォン１に送信するものとしてもよい。この場合に各スマートフォン１から送信されるデータや、当該データに基づいてサーバ側で生成したデータをサーバで管理し、周知の認証処理の下にスマートフォン１からの要求に応じてスマートフォン１にデータを送信したり、肌質に関するデータを研究機関等に提供したりしてもよい。以下の説明では、色補正や肌質判定の処理をスマートフォン１で行うものとするが、画像撮影後の処理の一部または全部をサーバで行うものとしてもよい。
【００２２】
図１および図２に示すように、コンバージョンレンズユニット１０は、スマートフォン１のカメラ２のマスターレンズ（図示略）の前となる部分に装着されて被写体としての肌２４を接写するための２枚のレンズ１１ａ、１１ｂ（図２に図示）を有するレンズ系であるコンバージョンレンズ１１および撮影の照明用のＬＥＤ１２、１３を備えている。
【００２３】
なお、図１、図２において、コンバージョンレンズユニット１０は、コンバージョンレンズ１１を支持するバレル２０ａ（図２に図示）を備える後述のレンズ筐体２０の部分を除いた筐体１０ａの前面部分を図示せずに内部の電池１７、電源スイッチ１９等が実装される回路基板１６ｂが見える状態で図示している。
【００２４】
コンバージョンレンズユニット１０は、筐体１０ａを備え、筐体１０ａは、レンズ筐体２０を除いて、扁平な箱状に形成され、スマートフォン１のディスプレイ（図示略）が設けられた正面の反対側である背面のカメラ２のレンズ部分にコンバージョンレンズ１１を重ね合わせるように配置される。
【００２５】
この筐体１０ａのスマートフォン１への固定は、例えば、クリップ式やバンド式で行われる。クリップ式は、例えば、コンバージョンレンズユニット１０に、コンバージョンレンズユニット１０との間にスマートフォン１を挟み込むクリップ部材（図示略）を設けたものである。すなわち、コンバージョンレンズユニット１０と、このコンバージョンレンズユニット１０に固定されたクリップ部材との間に弾性力によりスマートフォン１を挟むものである。
【００２６】
この場合に、コンバージョンレンズユニット１０をスマートフォン１の背面に対して、許容範囲内で縦横に移動可能になっており、スマートフォン１の各機種のカメラ２の配置に対応可能になっている。
バンド式は、例えば、腕時計のバンドのように、コンバージョンレンズユニット１０にゴムバンド等の伸び縮みするバンド（図示略）を取り付け、スマートフォン１をバンド内に挿入することで、コンバージョンレンズユニット１０をスマートフォン１に奏略するものであり、この場合もコンバージョンレンズ１１をスマートフォン１の背面に対して縦横に移動可能になっている。
【００２７】
コンバージョンレンズユニット１０は、上述のコンバージョンレンズ１１およびＬＥＤ１２、１３と、ＬＥＤ１２を駆動するＬＥＤ駆動回路１４（図１に図示）と、ＬＥＤ１３を駆動するＬＥＤ駆動回路１５（図１に図示）とを備える。
また、コンバージョンレンズユニット１０は、コンバージョンレンズ１１が収納されるレンズ筐体２０を備える。レンズ筐体２０は、コンバージョンレンズ１１を支持するバレル２０ａを基端側（カメラ２に装着される側）に備え、先端面が肌２４の撮影時に肌２４に当接する当接部２０ｂとされ、当接部２０ｂが肌２４に当接した状態で外光を遮るようになっている。また、当接部２０ｂには、円形の開口部２０ｃが形成され、肌２４の開口部２０ｃに臨む部分が撮影されるようになっている。したがって、レンズ筐体２０は、レンズ系としてのコンバージョンレンズ１１を囲み、開口部２０ｃ以外からの外光をカメラ２のマスターレンズに対して遮る遮蔽部である。
【００２８】
図３〜図５に示すように、バレル２０ａは、レンズ１１ａおよびレンズ１１ｂからなるレンズ系であるコンバージョンレンズ１１を支持した状態で、レンズ筐体２０の基端部（カメラ２に装着される側の端部）内に固定されている。また、バレル２０ａの基端部には、後述の第２偏光板２２が設けられている。また、レンズ筐体２０内には、当接部２０ｂの開口部２０ｃに向けて撮影用の照明光を照射するＬＥＤ１２、１３を備えたＬＥＤ基板１２ａ（図１に図示）が支持されている。
【００２９】
ＬＥＤ１２,１３は、ＬＥＤ基板１２ａに設けられている。また、後述のように肌２４のキメを撮影するためのＬＥＤ１３が一つで、肌２４のシミを撮影するためのＬＥＤ１２が２つとされている。また、ＬＥＤ基板１２ａの２つのＬＥＤ１２の光は、後述の第１偏光板２１を通過して開口部２０ｃから肌２４を照らすようになっている。また、ＬＥＤ駆動回路１４、１５もＬＥＤ基板１２ａに設けられている。なお、ＬＥＤ駆動回路１４、１５が回路基板１６ｂに設けられていてもよい。
【００３０】
また、図１に示すように、コンバージョンレンズユニット１０は、筐体１０ａに固定された回路基板１６ｂ（図２に図示）に、ＬＥＤ駆動回路１４、１５、ＣＰＵ１６等に電力を供給する電池１７を備えた電源回路１８と、電源スイッチ１９を備える。
【００３１】
また、上述の二つのＬＥＤ１２、１３は、例えば、白色ＬＥＤであるが、完全な白である必要はない。また、二種類のＬＥＤ１２、１３は、肌のキメを撮影するためのＬＥＤ１３と、肌のシミと色を撮影するためのＬＥＤ１２であり、目的によって少しだけ白色からずらしてもよい。
【００３２】
また、シミ撮影用のＬＥＤ１２に第１偏光板２１が設けられ、コンバージョンレンズ１１と、カメラ２との間に第２偏光板２２が設けられている。これは、肌２４の表面より少し下にあるシミを撮影するためのもので、これら偏光板２１、２２により、ＬＥＤ１２で肌２４のシミを撮影する際の肌２４内部の反射光より、肌２４表面の反射光を大きく低減させ、シミが撮影され易くするものである。また、本実施の形態では、画像にカラースケール４１の基準色が撮影されるようになっており、後述のように基準色で撮影された画像の色を補正するが、この際に、肌およびカラースケールの表面反射が抑制された画像で補正を行うことで補正の精度を高めることができる。なお、第１偏光板２１と、第２偏光板２２では、偏光方向が直交している。ＬＥＤ１２の光は第１偏光板２１を通過して偏光され、この偏光は、肌２４で反射されても維持され、第２偏光板２２を通過困難な状態となる。それに対して肌２４内部で反射した光は、偏光がなくなり、第２偏光板２２を通過する。これにより、第１偏光板２１および第２偏光板２２は、肌２４表面の反射光からこの肌２４表面の細かな凹凸による影響を抑える反射光制御部となる。この反射光制御部により、例えば、肌２４の表面にＬＥＤ１２の光が白っぽく反射して見える状態となるのを防止できる。なお、偏光板２１、２２を設けなくてもよい。
【００３３】
図１および図２と、レンズ筐体２０の被写体側となる前部の拡大図である図６に示すように、レンズ筐体２０の当接部２０ｂの開口部２０ｃには、その周縁部に円環状のカラースケール４１が設けられている。当接部２０ｂの実質的な開口部２０ｃは、円環状のカラースケール４１の開口であり、コンバージョンレンズユニット１０を用いてカメラ２で撮影した場合に開口部２０ｃから臨む肌２４の周囲に円環状のカラースケール４１が写り込むようになっている。カラースケール４１は、コンバージョンレンズ１１の光軸に直交する平面に沿うように配置されており、光軸に直交している。このカラースケール４１のコンバージョンレンズ１１側の面が少なくとも３種類の基準色が配置されたスケール面となっている。
【００３４】
当接部２０ｂの肌に当接する当接面と、カラースケール４１のスケール面とのコンバージョンレンズ１１の光軸方向に沿った距離Ｌは、コンバージョンレンズ１１の被写界深度の範囲となる距離以下となっている。なお、この被写界深度の範囲となる距離Ｌは、コンバージョンレンズユニット１０を取り付けたスマートフォン１のカメラ２で肌２４とカラースケール４１とを撮影した際に、これらの両方にピントが合う範囲内の距離であればよい。なお、肌２４は、凸面となるように湾曲している可能性が高く、肌２４が当接部２０ｂの当接面よりカラースケール４１に近づく可能性があるので、それを考慮して、当接面からスケール面までの距離を補正してもよく、最終的に肌表面とスケール面とのコンバージョンレンズ１１の光軸に沿った距離が被写界深度の範囲内となっていればよい。
カラースケール４１は、図３に示すようにスケール面が三つの領域に分けられ、各領域がそれぞれ異なる基準色で着色された状態となっており、この例では三種類の基準色として例えば赤、緑、青が用いられている。なお、基準色はこれらに限られるものではなく、例えば、肌色に近い色等を用いてもよい。本実施の形態では、カラースケール４１に、赤の基準色領域４１Ｒと、緑の基準色領域４１Ｇと、青の基準色領域４１Ｂが設けられている。
【００３５】
このようなコンバージョンレンズユニット１０では、回路基板１６ｂのＣＰＵ１６の制御により、キメの撮影時にＬＥＤ１３を発光（点灯）させるとともにＬＥＤ１２を消灯したままの状態とし、シミの撮影時および肌の色の撮影時にＬＥＤ１２を発光させるとともにＬＥＤ１３を消灯したままとする。
【００３６】
スマートフォン１は、周知の通り携帯電話としての機能を有し、携帯電話回線を用いた通話が可能となっている。また、スマートフォン１は、図示しないディスプレイを有するとともに、携帯電話回線やＷｉＦｉによりインターネットに接続可能であり、インターネットを介してデータ通信が可能になっている。
【００３７】
また、スマートフォン１には、ＣＰＵ、ＲＯＭ、ＲＡＭ等を有する制御手段３を備え、プログラムとしてのアプリを実行可能になっている。また、制御手段３には、記憶装置としてのフラッシュメモリ４が接続されており、フラッシュメモリ４に記憶したデータを送信したり、受信したデータを記憶したりできる。
また、制御手段３は、カメラ２を制御して撮影（撮像）が可能であるとともに、撮像した画像データをフラッシュメモリ４に保存することができる。また、画像処理や画像解析用のアプリにより画像データの解析や処理が可能である。ここでは、画像のカラースケール４１を用いた色補正と補正された肌の色に基づく肌状態の判定が可能となっている。
カメラ２は、制御手段３に制御され、撮像素子を有し、静止画、動画の撮影が可能であり、例えば、３０ｆｐｓ等の設定されたフレームレートで画像を撮影する。
【００３８】
さらに、制御手段３は、ＬＥＤ１２,１３の点灯および消灯を検出する点消灯検出手段３ａと、点消灯検出手段３ａによってそれぞれのＬＥＤ１２,１３の点灯および消灯が検出された際に、カメラ２による撮影を制御する撮影制御手段３ｂと、この撮影制御手段３ｂによる制御によってカメラ２で撮影された撮影画像をＬＥＤ１２,１３に関連付けてスマートフォン１の画面に表示させる表示制御手段３ｃとを備えている。
【００３９】
また、制御手段３は、カメラ２で撮影された肌２４の画像の色補正を、画像に写ったカラースケール４１の基準色に基づいて行う色補正部および補正された画像上の肌の色から肌の状態を判定する状態判定手段として機能する。なお、色補正部および状態判定手段は、スマートフォン１ではなく、例えば、スマートフォン１とデータ通信可能な外部機器としてのサーバに配置してもよく、サーバは、例えば、インターネットを介してスマートフォン１とデータ通信が可能となっている。サーバは、インターネットを介してアクセスするスマートフォン１を認証した状態で、スマートフォン１からサーバにカメラ２で撮影された画像を送信し、サーバで色補正および肌の状態判定を行い、判定結果をスマートフォン１に送信する。
【００４０】
次に、本実施の形態におけるコンバージョンレンズ１１の被写界深度の求め方について説明する。当接部２０ｂの開口部２０ｃから臨む撮影対象の直径１０ｍｍ程度のエリアである撮像範囲４３をカメラ２の撮像素子の有効画素エリア４２上に結像させた場合の状態を図４に図示した。例えば、肌のキメ（１００μｍ程度以上のサイズ)を観察しようとする場合、撮影対象上で２０μｍ程度に相当した画素サイズが望ましいが、この画素サイズで直径１０ｍｍは約５００画素分に相当する。従って、スマホ撮像素子に求められる解像度はＶＧＡ(６４０×４８０)レベルで十分であり、市販されている通常のスマートフォン１のカメラ２(百万画素以上の高解像度撮像素子を有する)を利用することができる。また、電子ズーム機能等により、実際のスマートフォン１の撮像素子の画素サイズに関わらず、デジタル写真上の一画素サイズを２０μｍ程度に設定することが可能である。
撮像範囲４３の一画素サイズを２０μｍ程度に設定した場合、ピントが合っているといえる範囲は２０μｍ周期の微細パターン［１０μｍ幅のライン(黒)と１０μｍ幅のスペース(白)が１周期］を撮影した場合の変調度が５０％以上取れる範囲であると定義することができる。
撮像範囲４３の一画素サイズをＡμｍとする場合は、微細パターンの周期もＡμｍとすれば良い。このような被写界深度の範囲に基づいて上述のスケール面と当接面との距離Ｌが設定される。
【００４１】
図５に示すように、具体的な被写界深度の測定は、例えば、固定焦点にできるカメラ２を備えたスマートフォン１と、コンバージョンレンズ１１を有するコンバージョンレンズユニット１０と、上述の微細バターンが描かれたパネル４４と、コンバージョンレンズユニット１０が取り付けられたスマートフォン１に対してパネル４４をコンバージョンレンズ１１の光軸方向に移動させるとともに、コンバージョンレンズ１１に対してパネル４４の位置を計測可能な微動ステージ４５とを使用する。なお、パネル４４は、レンズ筐体２０の開口部２０ｃ内に移動可能となっている。また、カメラ２は、スマートフォン１以外のデジタルカメラであってもよい。パネル４４の位置を微動ステージ４５で移動させて撮影することを繰り返し、変調度が５０％以上のパネル４４の位置の範囲を求める。
【００４２】
次に画像のカラースケール４１を用いた色の較正方法を説明する。
なお、照明のスペクトルが略一定であれば、単純な較正で実用的な肌色検出が可能となり、本実施の形態では、外光を遮り光源としてのＬＥＤ１２の光で肌２４を照明するので、ＬＥＤ１２の特性に多少のばらつきがあっても、上述のように較正が可能である。なお、白色ＬＥＤには、白色光の発光方式が異なるものがあるが、主流は、青色ＬＥＤにより、黄色蛍光体を光らせて、青色光と黄色光との組み合わせで白色光を出力するものであり、黄色蛍光体の発光スペクトルは、緑の波長帯域と赤の波長帯域とにまたがる幅の広いピークを有するものとなっている。本実施の形態では、各コンバージョンレンズユニット１０に、上述の白色ＬＥＤを用いており、各コンバージョンレンズユニット１０を用いた撮影画像においては、照明のスペクトルが略一定となる。
【００４３】
まず、標準環境として、色較正済みカメラに、カラースケール４１を有するコンバージョンレンズユニット１０を取り付け、上述のように遮光された状態で肌２４（撮影対象物）を撮影する。撮影した写真から赤の基準色領域４１Ｒ、緑の基準色領域４１Ｇ、青の基準色領域４１Ｂの各領域内の平均強度較正値Ｐｒ０, Ｐｇ０, Ｐｂ０を算出し、予め当該較正値をサーバ（クラウド）またはスマートフォン１のアプリによりフラッシュメモリ４に格納しておく。この際には、撮影した肌２４とカラースケール４１の画像を赤、緑、青のＲＧＢ成分にそれぞれ分解した画像を作成し、ＲＧＢの各成分に分解した画像から各基準色領域４１Ｒ、４１Ｇ、４１Ｂを抽出する。次に、各基準色領域４１Ｒ、４１Ｇ、４１Ｂ内の平均強度Ｐｒ, Ｐｇ, Ｐｂを算出し、これを平均強度較正値Ｐｒ０, Ｐｇ０, Ｐｂ０とする。
【００４４】
次に、色較正の対象となる各スマートフォン１において、撮影した肌２４とカラースケール４１の画像を赤、緑、青のＲＧＢ成分にそれぞれ分解した画像を作成し、ＲＧＢの各成分に分解した画像から各基準色領域４１Ｒ、４１Ｇ、４１Ｂを抽出する。次に、各基準色領域４１Ｒ、４１Ｇ、４１Ｂ内の平均強度Ｐｒ, Ｐｇ, Ｐｂを算出する。
次に、撮影した画像を成分毎に正規化するため、赤色成分画像の各画素の赤色成分強度を(Ｐｒ０/Ｐｒ)倍する。同様に、緑色成分画像の各画素の緑色成分強度を(Ｐｇ０/Ｐｇ)倍するとともに、青色成分画像の各画素の青色成分強度を(Ｐｒ０/Ｐｒ)倍する。
次に、上述の方法により正規化した各色成分を合成し、正確な色補正済みの画像を得ることができる。なお、色の較正方法は、これに限られるものではなく、画像に写り込んだ基準色を利用する周知の較正方法を用いることができる。
【００４５】
上述のように本実施の形態では、ＬＥＤ１２からの光は第１偏光板２１を通って肌２４に照射され、この肌２４からのＬＥＤ１２の光に基づく反射光はコンバージョンレンズ１１を通るとともに第２偏光板２２を通ってカメラ２に至る。また、第１偏光板２１と第２偏光板２２とは、偏光方向が直交し、上述のように反射光のばらつきを抑制できる。したがって、肌２４の色から肌の状態を判定する場合には、ＬＥＤ１３ではなく、ＬＥＤ１２を点灯させて撮影した肌２４の画像を用い、画像に写り込んだカラースケール４１の基準色から色較正を行う。これにより、例えば、ＬＥＤ１２の光が光沢のある面を有する対象物で反射して、ＬＥＤ１２の反射光が対象物上に輝点として現れるような画像や、それに近い状態で対象物の一部が白っぽく写る画像となるのを防止し、肌の色を高精度で補正することが可能となるとともに、肌の色を高精度で取得可能となる。
【００４６】
以上のようにして取得された肌の色補正された画像から、例えば、色を示すＲＧＢ値等の色を示すデジタルデータを得る。この場合に、画像のＲＧＢ値等のデジタルデータの代表値として、例えば、画像の全体または主要部の各画素のＲＧＢ値の平均値や最頻値や中央値を用いたり、他の統計処理によって求められた代表値を用いたりしてもよい。また、例えば、肌の色のデータベースとして、例えば、肌の色としての各ＲＧＢ値に対して、肌の白さや黒さの度合いや、白以外の黄色、赤色等の度合いを示すレベルやコメントを登録しておき、肌の状態の判定処理として画像のＲＧＢ値の代表値に対応する各色のレベルやコメントを表示可能としてもよい。なお、データベースは、スマートフォン１のフラッシュメモリ４またはサーバのストレージに記憶されているものとする。また、肌の状態の判定処理をスマートフォン１で行ってもよいし、サーバで行ってもよい。
【００４７】
このような本実施の形態のコンバージョンレンズユニット１０および肌状態測定システムによれば、コンバージョンレンズユニット１０を用いてスマートフォン１のカメラ２で肌を撮影して得られた画像の肌の色から肌状態を判定する場合に、撮影された画像に三つ以上の基準色を有するカラースケール４１を写り込ませることで、基準色を用いて画像の色の較正を行うことができる。この場合に、スマートフォン１のカメラ２のオートフォーカス機能により、肌ではなくカラースケールにピントが合い、被写体としての肌２４からピントがはずれる虞があるが、本実施の形態では、肌２４に当接する当接部２０ｂの当接面と、カラースケール４１のスケール面とのコンバージョンレンズ１１の光軸方向に沿った距離が被写界深度の範囲内となっているので、オートフォーカスにより、カラースケール４１のスケール面にピントが合わされても被写体である肌２４にもピントが合った状態とすることができる。これにより、カラースケール４１を被写体とともに画像に写り込ませるものとした場合にオートフォーカスによりピントが被写体からずれるのを防止できる。
以上のことから撮影時に、本実施の形態のコンバージョンレンズユニット１０を用いることにより、いつ誰がどのスマートフォン１のカメラ２で撮影しても、被写体とカメラ２の距離が一定で、照明の状態が一定となり、かつ、カラースケール４１と肌２４の両方にピントがあった状態での撮影が可能となり、撮影された色の補正を簡単な方法で高精度に行うことができる。また、同じ色の被写体を撮影した場合に、いつ誰がどのスマートフォン１のカメラ２で撮影しても略同じ色の被写体の画像を得ることが可能となる。これにより、上述の画像から肌２４の色を求め、この肌２４の色から肌の状態を判定する際に、より精度の高い判定を行うことができる。
【００４８】
なお、本実施の形態では、被写体表面の反射光から前記被写体表面の凹凸による影響を抑える反射光制御部として、２つの偏光方向の異なる偏光板２１、２２が機能することになる。
また、被写体における直接的な反射を抑制する反射光制御部としては、偏光板を用いるもの以外に、上述の屈折率マッチング用の撮影ゼリーを用いてもよいし、ダーモスコープで用いられる無影照明を用いてもよい。また、カラースケール４１の形状は、図３に限られるものではなく、三種類以上の基準色が表示されたもので、被写体の必要部分の撮影を遮らず、被写体の近傍で、被写体に対して上述の被写界深度の範囲内に基準色があればよい。例えば、レンズ筐体２０の断面が正方形の場合に、図７に示す形状のカラースケール５１を用いてもよい。このカラースケール５１には、赤の基準色領域５１Ｒと、緑の基準色領域５１Ｇと、青の基準色領域５１Ｂが設けられており、カラースケール４１と同じ位置に配置されて、同様に使用される。また、被写体は肌２４に限られるものではなく、例えば、植物の葉や果実などの各種の生体であってもよく、色から成長度合いや熟し度合い等を判定可能である。
【符号の説明】
【００４９】
１      スマートフォン（無線通信機能を有する携帯端末）
２      カメラ
３      制御手段（色補正部、状態判定手段）
１０    コンバージョンレンズユニット
１１    コンバージョンレンズ
１１ａ  レンズ（レンズ系）
１１ｂ  レンズ（レンズ系）
１２    ＬＥＤ（光源）
２０    レンズ筐体（遮蔽部）
２０ｂ  当接部
２０ｃ  開口部
２１    第１偏光板（反射光制御部）
２２    第２偏光板（反射光制御部）
４１    カラースケール
【図１】
2019028255.tif 000003
【図２】
2019028255.tif 000004
【図３】
2019028255.tif 000005
【図４】
2019028255.tif 000006
【図５】
2019028255.tif 000007
【図６】
2019028255.tif 000008
【図７】
2019028255.tif 000009