(57)【要約】【課題】利用者に対し、適切な広告を提示することのできる広告提示システムを提供する。【解決手段】広告提示システムＳは、携帯情報端末１のカメラ１０で撮影された利用者の歯及び口唇を含む画像を認識する画像認識部２０と、その画像に基づき、歯の及び口唇の健康状態を認識する第１健康状態認識部２１及び第２健康状態認識部２２と、口唇の健康状態に基づいて広告を取得する広告取得部２３と、携帯情報端末１のディスプレイ１１に、広告とともに歯の健康状態を提示する情報提示部２４とを備える。【選択図】図２
2019133377.tif 000002
【特許請求の範囲】
【請求項１】
利用者の身体の画像から第１領域の画像及び第２領域の画像を認識する画像認識工程と、
認識された前記第１領域の画像に基づいて、前記第１領域に関する健康状態である第１健康状態を認識する第１健康状態認識工程と、
認識された前記第２領域の画像に基づいて、前記利用者の身体の前記第１領域以外の領域の健康状態である第２健康状態を認識する第２健康状態認識工程と、
認識された前記第２健康状態に基づいて、前記利用者に提示する広告を取得する広告取得工程と、
前記利用者に、取得された前記広告を提示した後に、又は、取得された前記広告を提示すると同時に、認識された前記第１健康状態を提示する情報提示工程とを備えていることを特徴とする広告提示方法。
【請求項２】
請求項１に記載の広告提示方法において、
前記第１領域は、前記利用者の歯、又は、口腔の内部の領域であり、
前記第２領域は、前記利用者の口唇、口唇の周囲肌、又は、舌であり、
前記第２健康状態は、前記口唇の状態、前記口唇の周囲の肌の状態、前記舌の状態、又は、前記口唇、前記口唇の周囲の肌及び前記舌の少なくとも１つから推測される前記利用者の身体の前記第１領域以外の領域の状態であることを特徴とする広告提示方法。
【請求項３】
請求項１又は請求項２に記載の広告提示方法において、
前記第１健康状態認識工程で、前記第１領域の画像に基づいて、前記第１健康状態を認識するととともに、前記第１健康状態の重症度を認識し、
第２健康状態認識工程で、前記第２領域の画像に基づいて、前記第２健康状態を認識するとともに、前記第２健康状態の重症度を認識し、
前記広告取得工程で、認識された前記第１健康状態に基づいて、前記利用者に提示する第１の広告を取得するとともに、認識された前記第２健康状態に基づいて、前記利用者に提示する第２の広告を取得し、
情報提示工程で、前記第１健康状態の重症度と前記第２健康状態の重症度とを対比して、該対比の結果に応じて、前記第１の広告及び前記第２広告の提示時間、又は、提示順序を決定し、前記第１の広告及び前記第２の広告を提示することを特徴とする広告提示方法。
【請求項４】
利用者の身体の画像から第１領域の画像及び第２領域の画像を認識する画像認識部と、
認識された前記第１領域の画像に基づいて、前記第１領域に関する健康状態である第１健康状態を認識する第１健康状態認識部と、
認識された前記第２領域の画像に基づいて、前記利用者の身体の前記第１領域以外の領域の健康状態である第２健康状態を認識する第２健康状態認識部と、
認識された前記第２健康状態に基づいて、前記利用者に提示する広告を取得する広告取得部と、
前記利用者に、取得された前記広告を提示させた後に、又は、取得された前記広告を提示すると同時に、認識された前記第１健康状態を提示する情報提示部とを備えていることを特徴とする広告提示システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、取得した利用者の画像に基づいて、その利用者に適した広告を提示するための広告提示方法、及び、広告提示システムに関する。
【背景技術】
【０００２】
従来、利用者の口腔の内部を撮影して画像を取得し、その取得した画像に基づいて利用者の口腔の内部の状態を診断し、その診断結果を利用者に通知する診断システムが知られている。この種の診断システムとしては、診断結果に応じて、又は、利用者からの要望に応じて、その利用者に対し、最寄りの病院の情報、治療のための処置及び器具の情報等の広告を提示するものが知られている（例えば、特許文献１参照。）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−２０５３３０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、特許文献１に記載のような従来の診断システムは、利用者の口腔の内部の状態を診断するものであるので、提示される広告も口腔に関するもののみとなっていた。そのため、提示される広告の内容が制限され、システムの提供者にとっては、多種の事業者から広告を募ることが難しいという問題があった。
【０００５】
一方、仮に提示される広告の内容を制限しなかった場合には、利用者に対して全く関係のない広告が提示されてしまうおそれがある。その結果、その広告を提示することで、その診断システムを使用する利用者に対し、ストレス、違和感を与えてしまうおそれがあった。
【０００６】
本発明は以上の点に鑑みてなされたものであり、利用者に対し、適切な広告を提示することのできる広告提示方法、及び、広告提示システムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の広告提示方法は、
利用者の身体の画像から第１領域の画像及び第２領域の画像を認識する画像認識工程と、
認識された前記第１領域の画像に基づいて、前記第１領域に関する健康状態である第１健康状態を認識する第１健康状態認識工程と、
認識された前記第２領域の画像に基づいて、前記利用者の身体の前記第１領域以外の領域の健康状態である第２健康状態を認識する第２健康状態認識工程と、
認識された前記第２健康状態に基づいて、前記利用者に提示する広告を取得する広告取得工程と、
前記利用者に、取得された前記広告を提示した後に、又は、取得された前記広告を提示すると同時に、認識された前記第１健康状態を提示する情報提示工程とを備えていることを特徴とする。
【０００８】
ここで、本発明における「第２健康状態」には、第２領域そのものに関する健康状態の他、第２領域の状態から推定できる利用者の身体の第１領域以外の領域に関する健康状態も含まれる。
【０００９】
例えば、第１領域が歯であり、第２領域が口唇である場合には、第２健康状態には、口唇に関する健康状態の他、口唇の状態に基づいて推定される歯以外の領域（例えば、舌、口腔の内部等）の健康状態であってもよい。また、「広告」は、画像又は動画による広告の他、音声による広告等、利用者に対し情報を報知し得る種々の広告を含む。
【００１０】
このように、本発明の広告提示方法では、第１領域に係る第１健康状態（すなわち、もともと利用者が診断を希望している領域の状態）が認識されるとともに、第１領域を撮影した画像に含まれる第２領域の画像に基づいて、第１領域以外の領域に係る第２健康状態についても認識される。そして、その第２健康状態に基づいて、利用者に提示する広告の取得が行われる。
【００１１】
これにより、利用者に対しては、利用者が診断を希望している第１領域に関する第１健康状態とともに、第２領域に関する広告が提示されるようになる。すなわち、この広告提示方法によって利用者に提示される広告は、この方法を実施するシステムの利用者が意識していないものでありながら（すなわち、第１領域に関しないものでありながら）、利用者にとって有用又は興味に合致する可能性が高いもの（すなわち、利用者にとって適切なもの）となる。
【００１２】
その結果、この広告提示方法を用いたシステムの提供者は、第１領域に関する事業を行っている事業者の他、第２領域に関する事業を行っている事業者からも、広く広告を募ることができるようになる。また、利用者に対しては、提示される広告が利用者にとって適切なものとなるので、広告を提示されたことによるストレス、違和感を与えにくくなる。
【００１３】
本発明の広告提示方法においては、
前記第１領域は、前記利用者の歯、又は、口腔の内部の領域であり、
前記第２領域は、前記利用者の口唇、口唇の周囲肌、又は、舌であり、
前記第２健康状態は、前記口唇の状態、前記口唇の周囲の肌の状態、前記舌の状態、又は、前記口唇、前記口唇の周囲の肌及び前記舌の少なくとも１つから推測される前記利用者の身体の前記第１領域以外の領域の状態であることが好ましい。
【００１４】
ここで、「口唇の周囲の肌」とは、例えば、顎、頬、首、耳、鼻等、歯又は口腔の内部の領域とともに撮影可能な領域の肌を指す。このように構成すると、画像を撮影する際に自然に第１領域と第２領域とを撮影することが可能となるので、本発明の広告提示方法を用いたシステムを使用する利用者に対し、ストレス、違和感をさらに与えにくくなる。
【００１５】
なお、本発明の広告提示方法において対象となる利用者の身体の領域の組み合わせは、カメラ等の画像取得部によって、同時に撮影可能な領域であればよい。例えば、上記の領域の他、目及び目の周囲の肌又は額の肌、手及び爪、髪の毛及び耳の周囲の肌等も含まれる。
【００１６】
本発明の広告提示方法においては、
前記第１健康状態認識工程で、前記第１領域の画像に基づいて、前記第１健康状態を認識するととともに、前記第１健康状態の重症度を認識し、
第２健康状態認識工程で、前記第２領域の画像に基づいて、前記第２健康状態を認識するとともに、前記第２健康状態の重症度を認識し、
前記広告取得工程で、認識された前記第１健康状態に基づいて、前記利用者に提示する第１の広告を取得するとともに、認識された前記第２健康状態に基づいて、前記利用者に提示する第２の広告を取得し、
情報提示工程で、前記第１健康状態の重症度と前記第２健康状態の重症度とを対比して、該対比の結果に応じて、前記第１の広告及び前記第２広告の提示時間、又は、提示順序を決定し、前記第１の広告及び前記第２の広告を提示することが好ましい。
【００１７】
ここで、「重症度」とは、例えば、健康状態に基づいて認識される値であり、例えば、病状の重さ等に基づいて定められる。重症度の大小は、システム設計者等が任意に定めることができる。
【００１８】
このように、複数種類の広告を提示し、且つ、その提示時間を重症度（すなわち、利用者に対する有用度）に応じて広告を提示時間、提示順序を決定するようにすると、提示される広告の内容を利用者にとってさらに適切なものにすることができる。
【００１９】
また、本発明の広告提示システムは、
利用者の身体の画像から第１領域の画像及び第２領域の画像を認識する画像認識部と、
認識された前記第１領域の画像に基づいて、前記第１領域に関する健康状態である第１健康状態を認識する第１健康状態認識部と、
認識された前記第２領域の画像に基づいて、前記利用者の身体の前記第１領域以外の領域の健康状態である第２健康状態を認識する第２健康状態認識部と、
認識された前記第２健康状態に基づいて、前記利用者に提示する広告を取得する広告取得部と、
前記利用者に、取得された前記広告を提示させた後に、又は、取得された前記広告を提示すると同時に、認識された前記第１健康状態を提示する情報提示部とを備えていることを特徴とする。
【図面の簡単な説明】
【００２０】
【図１】実施形態に係る広告提示システムの概略構成を示す模式図。
【図２】図１の広告提示システムの構成を示すブロック図。
【図３】図１の広告提示システムが行う処理を示すフローチャート。
【発明を実施するための形態】
【００２１】
以下、図面を参照して、実施形態に係る広告提示システムＳについて説明する。なお、本実施形態の広告提示システムＳは、本発明の広告提示システムを、利用者の歯の診断（健康状態の把握）を行うとともに、歯に関する広告、及び、口唇又は口唇の周囲の肌（具体的には、顎、頬、首、耳、鼻等の後述する携帯情報端末１のカメラ１０によって歯とともに撮影可能な領域の肌）に関する広告を提示するためのシステムとして用いたものである。
【００２２】
この広告提示システムＳは、歯、口唇又は口唇の周囲の肌に関して広告を行いたいと考えている事業者（例えば、歯ブラシ等の歯に関する商品、化粧品等のスキンケア用品等を取り扱う事業者）から提供された複数の広告のうちから、利用者に対して有用又は興味に合致する可能性が高いもの（すなわち、適切なもの）を取得して、利用者の歯の診断結果とともに、適切なタイミングで、利用者に対して提示するためのものである。
【００２３】
しかし、本発明の広告提示方法及び広告提示システムは、携帯情報端末のカメラ等によって、同時に撮影し得る複数の部位に関する健康情報及び広告を提示するためのものであるので、歯に関する広告、及び、口唇又は口唇の周囲の肌に関する広告を提示するためのシステムにのみ適用し得るものではない。
【００２４】
そのため、本発明の広告提示方法及び広告提示システムにおける身体の領域としては、例えば、歯及び口唇又は口唇の周囲の肌の他、目及び目の周囲の肌又は額の肌、手及び爪、髪の毛及び耳の周囲の肌等も含まれる。
【００２５】
なお、本実施形態における「広告」は、画像又は動画であるが、本発明における「広告」は、画像又は動画による広告の他、音声による広告等、利用者に対し情報を報知し得る種々の広告を含む。
【００２６】
まず、図１及び図２を参照して、広告提示システムＳの構成について説明する。
【００２７】
図１に示すように、広告表指示ステムＳは、システムの利用者等が所持するスマートフォン等の携帯情報端末１（情報処理端末）と、広告代理店等のシステムの提供者により設置されたサーバ２とによって構成されている。携帯情報端末１とサーバ２、及び、サーバ２と事業者用端末３とは、インターネット回線等を介して相互に情報通信可能に接続することによって構成されている。
【００２８】
携帯情報端末１は、画像を取得するためのカメラ１０（画像取得部）と、利用者に対して、後述する第１健康状態及び広告を含む情報を提示するディスプレイ１１（報知部）とを備えている。
【００２９】
カメラ１０は、利用者の歯（第１領域）とともに、口唇及び口唇の周囲の肌（第２領域）を撮影し、それらが同時に写り込んだ静止画を、２次元画像として取得可能に構成されている。
【００３０】
なお、本発明の画像取得部が取得する画像は、第１領域及び第２領域の画像を、後述する画像認識部２０が認識可能なものであればよい。例えば、２次元画像ではなく３次元画像でもよい。また、画像認識部が動画から静止画を切り出して認識可能なものである場合には、画像取得部は動画を撮影するものであってもよい。
【００３１】
図２に示すように、サーバ２は、実装されたハードウェア構成又はプログラムにより実現される機能として、画像認識部２０と、第１健康状態認識部２１と、第２健康状態認識部２２と、広告取得部２３と、情報提示部２４と、広告格納部２５とを備えている。
【００３２】
画像認識部２０は、カメラ１０が取得した画像に基づいて、利用者の身体の歯（第１領域）の画像、並びに、口唇及び口唇の周囲の肌（第２領域）の画像を認識する。
【００３３】
第１健康状態認識部２１は、画像認識部２０が認識した歯の画像に基づいて、利用者の歯の状態を認識し、その状態から推定できる歯に関する健康状態（第１健康状態）、及び、その重症度を認識する。
【００３４】
第２健康状態認識部２２は、画像認識部２０が認識した口唇及び口唇の周囲の肌の画像に基づいて、利用者の口唇及び口唇の周囲の肌の状態を認識し、その状態から推定できる口唇及び口唇の周囲の肌に関する健康状態（第２健康状態）、及び、その重症度を認識する。
【００３５】
ここで、「第２健康状態」には、第２領域そのものに関する健康状態の他、第２領域の状態から推定できる利用者の身体の第１領域以外の領域に関する健康状態も含まれる。
【００３６】
例えば、本実施形態の広告提示システムＳにおいては、第２領域が利用者の口唇及び口唇の周囲の肌であり、第２健康状態は、口唇及び口唇の周囲の肌に関する健康状態となっている。しかし、第２健康状態としては、歯（第１領域）、口唇及び口唇（第２領域）以外の利用者の身体の領域の健康状態を、口唇及び口唇の周囲の肌の状態に基づいて推定したものであってもよい。具体的には、口唇の状態に基づいて推定された舌、口腔の内部等の健康状態であってもよい。
【００３７】
なお、広告提示システムＳでは、第１健康状態認識部２１及び第２健康状態認識部２２は、予め得られているサンプル画像と画像認識部２０が認識した画像との比較によって、第１健康状態及び第２健康状態を認識している。
【００３８】
しかし、本発明における第１健康状態及び第２健康状態の認識は必ずしも画像の比較によって行う必要はなく、画像認識部が認識した画像に基づいて行われるものであればよい。例えば、通常は画像の比較によって健康状態を認識し、認識が困難な場合にのみ、医師に画像を送信して診断が行われるように構成してもよい。
【００３９】
また、ここで、「重症度」とは、例えば、健康状態に基づいて認識される値であり、例えば、病状の重さ等に基づいて定められる。重症度の大小は、システム設計者等が任意に定めることができる。本実施形態の広告表示システムＳでは、健康状態と重症度との関係を予め規定したデータテーブルを参照して、第１健康状態及び第２健康状態に関する重症度の値が認識される。
【００４０】
広告取得部２３は、第１健康状態認識部２１及び第２健康状態認識部２２によって認識された第１健康状態及び第２健康状態に基づいて、利用者に提示する歯に関する広告（第１の広告）、及び、口唇及び口唇の周囲の肌に関する広告（第２の広告）を取得する。
【００４１】
情報提示部２４は、歯の健康状態（第１健康状態）の重症度と口唇及び口唇の周囲の肌の健康状態（第２健康状態）の重症度とを対比するとともに、その対比結果に応じて、歯に関する広告（第１の広告）の提示時間、及び、口唇及び口唇の周囲の肌に関する広告（第２の広告）の提示時間を決定し、並びに、それらの提示順序を決定する。
【００４２】
また、情報提示部２４は、その決定内容に従って、携帯情報端末１のディスプレイ１１上にそれらの広告を提示した後、第１健康状態を提示する。
【００４３】
提示時間と重症度の対比結果の関係は、適宜設定して良い。例えば、重症度が大きいものほど提示時間を長くしてもよい。また、重症度が大きいものほど、後に提示するようにしてもよい。また、重症度が大きいものを繰り返し提示してもよい。
【００４４】
なお、広告提示システムＳでは、第１健康状態認識部２１及び第２健康状態認識部２２が、第１健康状態及び第２健康状態とともに、各々の重症度も認識している。これは、情報提示部２４が、その重症度（すなわち、利用者に対する有用度）に応じて、利用者に対して提示する各広告の提示時間及び提示順序を変動させるためである。
【００４５】
しかし、広告の提示時間が変動可能なものでない場合（例えば、広告が１種類しかない場合）等には、提示時間の変動を行うことはできないので、重症度を認識せず、重症度の比較を行わないように構成してもよい。
【００４６】
また、広告を提示する時間を変動させるための方法としては、広告が静止画のような径時変化のないものである場合には、単純に提示する時間を変動させればよい。また、広告が動画のような径時変化のあるものである場合には、広告の取得の際に、１つの健康状態に関して、時間の異なる複数の広告を取得しておき、その中から決定された提示時間に応じた長さの広告を選択するようにしてもよい。
【００４７】
また、重症度の比較の結果を、提示する時間の他、提示する領域に反映させてもよい。具体的には、ディスプレイ１１上の表示領域を分割して複数の広告を同時に表示するような場合には、重症度の高いものほど大きく表示するようにしてもよい。
【００４８】
広告格納部２５は、事業者の有する事業者用端末３からアップロードされた広告を格納する。なお、この広告格納部２５をサーバ２の外部（他のサーバ等）に設けてもよい。また、広告格納部２５を省略し、情報提示部２４が必要に応じて随時外部から広告を取得するようにしてもよい。
【００４９】
次に、図２及び図３を参照して、広告提示システムＳが行う処理（本発明の広告提示方法）について説明する。図３は、広告提示システムＳが行う処理を示すフローチャートである。
【００５０】
本実施形態の広告提示システムＳでは、診断結果及び広告を提示するための処理に先立ち、広告格納部２５に対して、事業者用端末３から提示対象となり得る複数の広告がアップロードされて格納されている。
【００５１】
広告提示システムＳが行う処理においては、まず、携帯情報端末１のカメラ１０が、利用者の歯（第１領域）とともに、口唇及び口唇の周囲の肌（第２領域）を撮影し、それらが同時に写り込んだ静止画を、２次元画像として取得する（図３／ＳＴＥＰ０１）。
【００５２】
次に、サーバ２の画像認識部２０が、カメラ１０が取得した画像に基づいて、利用者の身体の歯（第１領域）の画像、並びに、口唇及び口唇の周囲の肌（第２領域）の画像を認識する（図３／ＳＴＥＰ０２（画像認識工程））。
【００５３】
次に、サーバ２の第１健康状態認識部２１は、画像認識部２０が認識した歯の画像に基づいて、利用者の歯の状態を認識し、その状態から推定できる歯に関する健康状態（第１健康状態）、及び、その重症度を認識する（図３／ＳＴＥＰ０３（第１健康状態認識工程））。
【００５４】
次に、サーバ２の第２健康状態認識部２２は、画像認識部２０が認識した口唇及び口唇の周囲の肌の画像に基づいて、利用者の口唇及び口唇の周囲の肌の状態を認識し、その状態から推定できる口唇及び口唇の周囲の肌に関する健康状態（第２健康状態）、及び、その重症度を認識する（図３／ＳＴＥＰ０４（第２健康状態認識工程））。
【００５５】
次に、サーバ２の広告取得部２３は、第１健康状態認識部２１及び第２健康状態認識部２２によって認識された第１健康状態及び第２健康状態に基づいて、利用者に提示する歯に関する広告（第１の広告）、及び、口唇及び口唇の周囲の肌に関する広告（第２の広告）を取得する（図３／ＳＴＥＰ０５（広告取得工程））。
【００５６】
次に、サーバ２の情報提示部２４は、歯の健康状態の重症度と口唇及び口唇の周囲の肌の健康状態の重症度とを対比するとともに、その対比結果に応じて、第１の広告及び第２の広告の提示時間及び提示順序を決定する（図３／ＳＴＥＰ０６）。
【００５７】
次に、情報提示部２４は、携帯情報端末１のディスプレイ１１上に、それらの広告を順次提示した後、第１健康状態を提示して、今回の処理を終了する（図３／ＳＴＥＰ０７（情報提示工程））。
【００５８】
以上説明したように、広告提示システムＳでは、歯（第１領域）に係る第１健康状態（すなわち、もともと利用者が診断を希望している領域の状態）が認識されるとともに、第１領域を撮影した画像に含まれる口唇及び口唇の周囲の肌（第２領域）の画像に基づいて、第２領域に係る第２健康状態についても認識される。そして、その第２健康状態に基づいて、利用者に提示する広告の取得が行われる。
【００５９】
これにより、利用者に対しては、利用者が診断を希望している歯の健康状態である第１健康状態とともに、口唇及び口唇の周囲の肌に関する広告が提示されるようになる。すなわち、この広告提示システムＳによって利用者に提示される広告は、この方法を実施するシステムの利用者が意識していないものでありながら（すなわち、第１領域に関しないものでありながら）、利用者にとって有用又は興味に合致する可能性が高いものとなる。
【００６０】
その結果、この広告提示システムＳの提供者は、歯に関する事業を行っている事業者の他、口唇及び口唇の周囲の肌に関する事業を行っている事業者からも、広く広告を募ることができるようになる。また、利用者に対しては、提示される広告が利用者にとって適切なものとなるので、広告を提示されたことによるストレス、違和感を与えにくくなる。
【００６１】
以上、図示の実施形態について説明したが、本発明はこのような形態に限られるものではない。
【００６２】
例えば、上記実施形態では、広告表指示システムＳは、利用者の歯の診断を行うとともに、歯に関する広告、及び、口唇又は口唇の周囲の肌に関する広告を提示するためのシステムとして構成されている。これは、歯の撮影とともに、口唇及び口唇の周囲の肌の画像を取得することは比較的容易であるためである。
【００６３】
しかし、本発明の広告提示方法及び広告提示システムは、このような構成に限定されるものではなく、利用者の身体の第１領域及びその第１領域とともに撮影可能な第２領域について、健康状態の認識及び広告の提示を行うものであればよい。
【００６４】
例えば、第１領域を耳とし、第２領域を髪の毛としてもよい。また、第１健康状態を、歯、舌、又は、口腔の内部に関する状態とし、第２健康状態を、口唇及び口唇の周囲の肌の少なくとも一方から推測される状態（例えば、口腔の内部の状態）としてもよい。
【００６５】
また、上記実施形態では、第１健康状態に係る歯に関する第１の広告と、第２健康状態に係る口唇又は口唇の周囲の肌に関する第２の広告とを順次提示している。
【００６６】
しかし、本発明の広告提示方法及び広告提示システムは、このような構成に限定されるものではなく、少なくとも第１健康状態とともに、第２健康状態に係る広告を提示するものであればよい。
【００６７】
例えば、上記実施形態の広告提示システムＳと同様に、歯の診断とともに口唇又は口唇の周囲の肌の状態を認識するシステムである場合には、歯に係る広告（すなわち、第１の広告）を提示せず、口唇又は口唇の周囲の肌に関する広告（すなわち、第２の広告）のみを提示するように構成してもよい。このように構成した場合、歯の診断結果を提示すると同時に、口唇又は口唇の周囲の肌に関する広告を提示するように構成してもよい。また、第１健康状態とともに、２つ以上の第２健康状態を認識可能である場合には、２つ以上の第２の広告を提示するようにしてもよい。
【００６８】
また、上記実施形態では、本発明の広告提示方法を実施するための広告提示システムＳをサーバ２と携帯情報端末１とによって構成している。しかし、本発明の広告提示方法は、このように構成されたシステムのみによって構成し得るものではない。
【００６９】
例えば、撮影機能を有する情報処理端末を店頭等に設置して、その情報処理端末のみによってシステムを構成してもよいし、携帯情報端末に各処理部及び各情報格納部を設けて、その携帯情報端末のみによってシステムを構成してもよい。逆に、上記実施形態では１つのサーバによって行っていた健康状態の認識及び広告を取得という処理を、それぞれ独立した異なるサーバを用いて行うように構成してもよい。
【符号の説明】
【００７０】
１…携帯情報端末（情報処理端末）、２…サーバ、３…事業者用端末、１０…カメラ（画像取得部）、１１…ディスプレイ（報知部）、２０…画像認識部、２１…第１健康状態認識部、２２…第２健康状態認識部、２３…広告取得部、２４…情報提示部、２５…広告格納部。
【図１】
2019133377.tif 000003
【図２】
2019133377.tif 000004
【図３】
2019133377.tif 000005
【手続補正書】
【提出日】平成30年6月1日(2018.6.1)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像認識部が、利用者の身体の画像から第１領域の画像及び第２領域の画像を認識する画像認識工程と、
第１健康状態認識部が、認識された前記第１領域の画像に基づいて、前記第１領域に関する健康状態である第１健康状態を認識する第１健康状態認識工程と、
第２健康状態認識部が、認識された前記第２領域の画像に基づいて、前記利用者の身体の前記第１領域以外の領域の健康状態である第２健康状態を認識する第２健康状態認識工程と、
広告取得部が、認識された前記第２健康状態に基づいて、前記利用者に提示する広告を取得する広告取得工程と、
情報提示部が、前記利用者に、取得された前記広告を提示した後に、又は、取得された前記広告を提示すると同時に、認識された前記第１健康状態を提示する情報提示工程とを備え、
前記第１健康状態認識工程で、前記第１健康状態認識部が、前記第１領域の画像に基づいて、前記第１健康状態を認識するととともに、認識された前記第１健康状態及び予め得られている前記第１健康状態と重症度との関係を予め規定したデータテーブルを参照して、前記第１健康状態の重症度の値を認識し、
前記第２健康状態認識工程で、前記第２健康状態認識部が、前記第２領域の画像に基づいて、前記第２健康状態を認識するとともに、認識された前記第２健康状態及び予め得られている前記第２健康状態と重症度との関係を予め規定したデータテーブルを参照して、前記第２健康状態の重症度の値を認識し、
前記広告取得工程で、前記広告取得部が、認識された前記第１健康状態に基づいて、前記利用者に提示する第１の広告を取得するとともに、認識された前記第２健康状態に基づいて、前記利用者に提示する第２の広告を取得し、
前記情報提示工程で、前記情報提示部が、前記第１健康状態の重症度と前記第２健康状態の重症度とを対比して、該対比の結果に応じて、前記第１の広告及び前記第２の広告の提示時間、又は、提示順序を決定し、前記第１の広告及び前記第２の広告を提示することを特徴とする広告提示方法。
【請求項２】
請求項１に記載の広告提示方法において、
前記第１領域は、前記利用者の歯、又は、口腔の内部の領域であり、
前記第２領域は、前記利用者の口唇、口唇の周囲の肌、又は、舌であり、
前記第２健康状態は、前記口唇の状態、前記口唇の周囲の肌の状態、前記舌の状態、又
は、前記口唇、前記口唇の周囲の肌及び前記舌の少なくとも１つから推測される前記利用
者の身体の前記第１領域以外の領域の状態であることを特徴とする広告提示方法。
【請求項３】
利用者の身体の画像から第１領域の画像及び第２領域の画像を認識する画像認識部と、
認識された前記第１領域の画像に基づいて、前記第１領域に関する健康状態である第１健康状態を認識する第１健康状態認識部と、
認識された前記第２領域の画像に基づいて、前記利用者の身体の前記第１領域以外の領域の健康状態である第２健康状態を認識する第２健康状態認識部と、
認識された前記第２健康状態に基づいて、前記利用者に提示する広告を取得する広告取得部と、
前記利用者に、取得された前記広告を提示させた後に、又は、取得された前記広告を提示すると同時に、認識された前記第１健康状態を提示する情報提示部とを備え、
前記第１健康状態認識部は、前記第１領域の画像に基づいて、前記第１健康状態を認識するととともに、認識された前記第１健康状態及び予め得られている前記第１健康状態と重症度との関係を予め規定したデータテーブルを参照して、前記第１健康状態の重症度の値を認識し、
前記第２健康状態認識部は、前記第２領域の画像に基づいて、前記第２健康状態を認識するとともに、認識された前記第２健康状態及び予め得られている前記第２健康状態と重症度との関係を予め規定したデータテーブルを参照して、前記第２健康状態の重症度の値を認識し、
前記広告取得部は、認識された前記第１健康状態に基づいて、前記利用者に提示する第１の広告を取得するとともに、認識された前記第２健康状態に基づいて、前記利用者に提示する第２の広告を取得し、
前記情報提示部は、前記第１健康状態の重症度と前記第２健康状態の重症度とを対比して、該対比の結果に応じて、前記第１の広告及び前記第２の広告の提示時間、又は、提示順序を決定し、前記第１の広告及び前記第２の広告を提示することを特徴とする広告提示システム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
本発明の広告提示方法は、
画像認識部が、利用者の身体の画像から第１領域の画像及び第２領域の画像を認識する画像認識工程と、
第１健康状態認識部が、認識された前記第１領域の画像に基づいて、前記第１領域に関する健康状態である第１健康状態を認識する第１健康状態認識工程と、
第２健康状態認識部が、認識された前記第２領域の画像に基づいて、前記利用者の身体の前記第１領域以外の領域の健康状態である第２健康状態を認識する第２健康状態認識工程と、
広告取得部が、認識された前記第２健康状態に基づいて、前記利用者に提示する広告を取得する広告取得工程と、
情報提示部が、前記利用者に、取得された前記広告を提示した後に、又は、取得された前記広告を提示すると同時に、認識された前記第１健康状態を提示する情報提示工程とを備え、
前記第１健康状態認識工程で、前記第１健康状態認識部が、前記第１領域の画像に基づいて、前記第１健康状態を認識するととともに、認識された前記第１健康状態及び予め得られている前記第１健康状態と重症度との関係を予め規定したデータテーブルを参照して、前記第１健康状態の重症度の値を認識し、
前記第２健康状態認識工程で、前記第２健康状態認識部が、前記第２領域の画像に基づいて、前記第２健康状態を認識するとともに、認識された前記第２健康状態及び予め得られている前記第２健康状態と重症度との関係を予め規定したデータテーブルを参照して、前記第２健康状態の重症度の値を認識し、
前記広告取得工程で、前記広告取得部が、認識された前記第１健康状態に基づいて、前記利用者に提示する第１の広告を取得するとともに、認識された前記第２健康状態に基づいて、前記利用者に提示する第２の広告を取得し、
前記情報提示工程で、前記情報提示部が、前記第１健康状態の重症度と前記第２健康状態の重症度とを対比して、該対比の結果に応じて、前記第１の広告及び前記第２の広告の提示時間、又は、提示順序を決定し、前記第１の広告及び前記第２の広告を提示することを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
ここで、本発明における「第２健康状態」には、第２領域そのものに関する健康状態の他、第２領域の状態から推定できる利用者の身体の第１領域以外の領域に関する健康状態も含まれる。例えば、第１領域が歯であり、第２領域が口唇である場合には、第２健康状態には、口唇に関する健康状態の他、口唇の状態に基づいて推定される歯以外の領域（例えば、舌、口腔の内部等）の健康状態であってもよい。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
また、ここで、「広告」は、画像又は動画による広告の他、音声による広告等、利用者に対し情報を報知し得る種々の広告を含む。また、ここで、「重症度」とは、例えば、健康状態に基づいて認識される値であり、例えば、病状の重さ等に基づいて定められる。重症度の大小は、システム設計者等が任意に定めることができる。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
その結果、この広告提示方法を用いたシステムの提供者は、第１領域に関する事業を行っている事業者の他、第２領域に関する事業を行っている事業者からも、広く広告を募ることができるようになる。また、利用者に対しては、提示される広告が利用者にとって適切なものとなるので、広告を提示されたことによるストレス、違和感を与えにくくなる。
このように、複数種類の広告を提示し、且つ、その提示時間を重症度（すなわち、利用者に対する有用度）に応じて広告を提示時間、提示順序を決定するようにすると、提示される広告の内容を利用者にとってさらに適切なものにすることができる。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
本発明の広告提示方法においては、
前記第１領域は、前記利用者の歯、又は、口腔の内部の領域であり、
前記第２領域は、前記利用者の口唇、口唇の周囲の肌、又は、舌であり、
前記第２健康状態は、前記口唇の状態、前記口唇の周囲の肌の状態、前記舌の状態、又
は、前記口唇、前記口唇の周囲の肌及び前記舌の少なくとも１つから推測される前記利用
者の身体の前記第１領域以外の領域の状態であることが好ましい。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】削除
【補正の内容】
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】削除
【補正の内容】
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】削除
【補正の内容】
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
また、本発明の広告提示システムは、
利用者の身体の画像から第１領域の画像及び第２領域の画像を認識する画像認識部と、
認識された前記第１領域の画像に基づいて、前記第１領域に関する健康状態である第１健康状態を認識する第１健康状態認識部と、
認識された前記第２領域の画像に基づいて、前記利用者の身体の前記第１領域以外の領域の健康状態である第２健康状態を認識する第２健康状態認識部と、
認識された前記第２健康状態に基づいて、前記利用者に提示する広告を取得する広告取得部と、
前記利用者に、取得された前記広告を提示させた後に、又は、取得された前記広告を提示すると同時に、認識された前記第１健康状態を提示する情報提示部とを備え、
前記第１健康状態認識部は、前記第１領域の画像に基づいて、前記第１健康状態を認識するととともに、認識された前記第１健康状態及び予め得られている前記第１健康状態と重症度との関係を予め規定したデータテーブルを参照して、前記第１健康状態の重症度の値を認識し、
前記第２健康状態認識部は、前記第２領域の画像に基づいて、前記第２健康状態を認識するとともに、認識された前記第２健康状態及び予め得られている前記第２健康状態と重症度との関係を予め規定したデータテーブルを参照して、前記第２健康状態の重症度の値を認識し、
前記広告取得部は、認識された前記第１健康状態に基づいて、前記利用者に提示する第１の広告を取得するとともに、認識された前記第２健康状態に基づいて、前記利用者に提示する第２の広告を取得し、
前記情報提示部は、前記第１健康状態の重症度と前記第２健康状態の重症度とを対比して、該対比の結果に応じて、前記第１の広告及び前記第２の広告の提示時間、又は、提示順序を決定し、前記第１の広告及び前記第２の広告を提示することを特徴とする。