(57)【要約】 【課題】  スマートミラーディスプレイ装置を提供する。【解決手段】  前記スマートミラーディスプレイ装置は、ユーザーを撮影するカメラ部と、前記カメラ部において撮影されたユーザーの映像及びビューティ（ｂｅａｕｔｙ）コンテンツをディスプレイするディスプレイ部と、前記カメラ部において撮影されたユーザーの映像から前記ユーザーのビューティ状態を認識し、前記認識されたビューティ状態に少なくとも部分的に基づいて、前記ビューテコンテンツのサブビューティコンテンツを切り換える制御部と、を備え、前記ビューティコンテンツは、ユーザーに化粧の仕方に関する情報を提供するビューティクリエーター（ｂｅａｕｔｙ ｃｒｅａｔｏｒ）の映像を含み、一つ以上のサブビューティコンテンツを含む。【選択図】    図１
2019103772.tif 000002
【特許請求の範囲】
【請求項１】
スマートミラーディスプレイ装置であって、
ユーザーを撮影するカメラ部と、
前記カメラ部において撮影されたユーザーの映像及びビューティコンテンツをディスプレイするディスプレイ部と、
前記カメラ部において撮影されたユーザーの映像から前記ユーザーのビューティ状態を認識し、前記認識されたビューティ状態に少なくとも部分的に基づいて、前記ビューテコンテンツのサブビューティコンテンツを切り換える制御部と、
を備え、
前記ビューティコンテンツは、ユーザーに化粧の仕方に関する情報を提供するビューティクリエーターの映像を含み、一つ以上のサブビューティコンテンツを含む、スマートミラーディスプレイ装置。
【請求項２】
前記制御部は、前記ビューティコンテンツを、時間単位、化粧に伴う顔イメージの変化単位、化粧道具単位又は化粧スキル単位に応じて分離して前記一つ以上のサブビューティコンテンツを更に生成する、請求項１に記載のスマートミラーディスプレイ装置。
【請求項３】
前記ユーザーのビューティ状態は、前記ユーザーが前記サブビューティコンテンツに含まれている化粧段階を行ったか否かに関連する情報を含み、
前記制御部は、前記ユーザーの映像のイメージ変化値に基づいて、前記ユーザーのビューティ状態を認識し、前記認識されたビューティ状態に基づいて、前記ユーザーが前記サブビューティコンテンツに含まれている化粧段階を行ったか否かを判断し、前記ユーザーが前記サブビューティコンテンツに含まれている化粧段階を行った場合、次のサブビューティコンテンツをディスプレイすることを決定する、請求項１に記載のスマートミラーディスプレイ装置。
【請求項４】
前記制御部は、前記カメラ部において撮影されたユーザーの映像からユーザーの肌の状態を認識し、前記認識された肌の状態に少なくとも部分的に基づいて、前記ビューテコンテンツを更に選択する、請求項１に記載のスマートミラーディスプレイ装置。
【請求項５】
前記ユーザーから前記ユーザーのビューティ目標に対する入力を受信するためのユーザー入力部を更に備え、
前記制御部は、ユーザーから入力されたビューティ目標に対する入力に基づいて、前記ビューティ目標に対応するビューティコンテンツを更に選択する、 請求項１に記載のスマートミラーディスプレイ装置。
【請求項６】
前記ビューティ目標は、前記ユーザーの肌の状態、前記ユーザーのビューティ志向点、前記ユーザーが参加しようとする社会的なイベント及び前記ユーザーの個人情報のうちの少なくともいずれか一つに基づくビューティ目標である、請求項５に記載のスマートミラーディスプレイ装置。
【請求項７】
前記制御部に前記ユーザーの肌の状態を認識せしめるための情報を取得するための肌状態認識部を更に備える、請求項１に記載のスマートミラーディスプレイ装置。
【請求項８】
前記制御部は、前記カメラ部において撮影されたユーザーの映像から前記ユーザーの顔の各部を認識し、前記認識された各部に前記サブビューティコンテンツの化粧段階が適用されたか否かを判断する、請求項１に記載のスマートミラーディスプレイ装置。
【請求項９】
前記制御部は、前記カメラ部において撮影された前記ユーザーの映像を前記ユーザーの化粧段階に応じて保存し、保存された前記ユーザーの映像の共有有無を更に決定する、請求項１に記載のスマートミラーディスプレイ装置。
【請求項１０】
スマートミラーディスプレイ装置において行われるスマートミラーディスプレイ方法であって、
ユーザーの映像を撮影する段階と、
撮影されたユーザーの映像及びビューティコンテンツをディスプレイする段階と、
撮影されたユーザーの映像から前記ユーザーのビューティ状態を認識する段階と、
前記認識されたビューティ状態に少なくとも部分的に基づいて、前記ビューテコンテンツのサブビューティコンテンツを切り換える段階と、
を含み、
前記ビューティコンテンツは、ユーザーに化粧の仕方に関する情報を提供するビューティクリエーターの映像と、一つ以上のサブビューティコンテンツと、を含む、スマートミラーディスプレイ装置において行われるスマートミラーディスプレイ方法。
【請求項１１】
エンコードされた指令を含むコンピューターにて読取り可能な記憶媒体に記憶されたコンピュータープログラムであって、前記コンピュータープログラムは、コンピューティング装置の一つ以上のプロセッサーによって起動される場合、前記一つ以上のプロセッサーにスマートミラーディスプレイを提供するための以下の段階を行わせ、前記段階は、
ユーザーの映像を撮影する段階と、
撮影されたユーザーの映像及びビューティコンテンツをディスプレイする段階と、
撮影されたユーザーの映像から前記ユーザーのビューティ状態を認識する段階と、
前記認識されたビューティ状態に少なくとも部分的に基づいて、前記ビューテコンテンツのサブビューティコンテンツを切り換える段階と、
を含み、
前記ビューティコンテンツは、ユーザーに化粧の仕方に関する情報を提供するビューティクリエーターの映像を含み、一つ以上のサブビューティコンテンツを含む、コンピューターにて読取り可能な記憶媒体に記憶されたコンピュータープログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、スマートミラーディスプレイ装置に係り、更に詳しくは、ユーザーの映像と相互作用をすることのできるスマートミラーディスプレイ装置に関する。
【背景技術】
【０００２】
鏡の発明前にも、人間は、水辺に映った自分の姿を確認したがっていた。鏡の発明後には、人間は、鏡を通じて自分の姿を確認し、自分の姿をさらに美しく飾りたがっている。
【０００３】
美しくなりたがる人間の欲望は、様々な化粧の仕方、美しくなるための方法を誕生させた。最近には、動画共有プラットフォームなどにおいて美しくなるための方法に関する情報を提供するコンテンツが流行っている。
【０００４】
ユーザーは、美しくなるための方法に関する情報を提供するコンテンツを提供して、当該コンテンツに含まれている情報の適用を自分にも試みることができる。例えば、ユーザーは、ビューティクリエーター（ｂｅａｕｔｙ ｃｒｅａｔｏｒ）の化粧の仕方に関する動画コンテンツを真似して自分も同じ化粧の仕方を試みることができる。しかしながら、このような過程において、ビューティクリエーター及びユーザー間の熟練度の違いに起因して異なる結果が導き出される虞がある。
【０００５】
この理由から、ユーザーがビューティクリエーターの美しくなるための方法に関する情報を提供するコンテンツを手軽に真似することのできる装置へのニーズが存在する。
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明は、上述した事情に鑑みてなされたものであり、その目的は、ビューティクリエーターのビューティコンテンツをユーザーに手軽に試みさせるための装置を提供することである。
【課題を解決するための手段】
【０００７】
上述した目的を達成するための本発明の一実施形態により、スマートミラーディスプレイ装置が開示される。前記スマートミラーディスプレイ装置は、ユーザーを撮影するカメラ部と、前記カメラ部において撮影されたユーザーの映像及びビューティ（ｂｅａｕｔｙ）コンテンツをディスプレイするディスプレイ部と、前記カメラ部において撮影されたユーザーの映像から前記ユーザーのビューティ状態を認識し、前記認識されたビューティ状態に少なくとも部分的に基づいて、前記ビューテコンテンツのサブビューティコンテンツを切り換える制御部と、を備え、前記ビューティコンテンツは、ユーザーに化粧の仕方に関する情報を提供するビューティクリエーター（ｂｅａｕｔｙ ｃｒｅａｔｏｒ）の映像を含み、一つ以上のサブビューティコンテンツを含むことができる。
【０００８】
好ましくは、前記制御部は、前記ビューティコンテンツを、時間単位、化粧に伴う顔イメージの変化単位、化粧道具単位又は化粧スキル単位に応じて映像を分離して前記一つ以上のサブビューティコンテンツを更に生成することができる。
【０００９】
また、好ましくは、前記ユーザーのビューティ状態は、前記ユーザーが前記サブビューティコンテンツに含まれている化粧段階を行ったか否かに関連する情報を含み、前記制御部は、前記ユーザーの映像のイメージ変化値に基づいて、前記ユーザーのビューティ状態を認識し、前記認識されたビューティ状態に基づいて、前記ユーザーが前記サブビューティコンテンツに含まれている化粧段階を行ったか否かを判断し、前記ユーザーが前記サブビューティコンテンツに含まれている化粧段階を行った場合、次のサブビューティコンテンツをディスプレイすることを決定することができる。
【００１０】
更に、好ましくは、前記制御部は、前記カメラ部において撮影されたユーザーの映像からユーザーの肌の状態を認識し、前記認識された肌の状態に少なくとも部分的に基づいて、前記ビューテコンテンツを更に選択することができる。
【００１１】
更にまた、好ましくは、前記スマートミラーディスプレイ装置は、前記ユーザーから前記ユーザーのビューティ目標に対する入力を受信するためのユーザー入力部を更に備え、前記制御部は、ユーザーから入力されたビューティ目標に対する入力に基づいて、前記ビューティ目標に対応するビューティコンテンツを更に選択することができる。
【００１２】
更にまた、好ましくは、前記ビューティ目標は、前記ユーザーの肌の状態、前記ユーザーのビューティ志向点、前記ユーザーが参加しようとする社会的なイベント及び前記ユーザーの個人情報のうちの少なくともいずれか一つに基づくビューティ目標であり得る。
【００１３】
更にまた、好ましくは、前記スマートミラーディスプレイ装置は、前記制御部に前記ユーザーの肌の状態を認識せしめるための情報を取得するための肌状態認識部を更に備えることができる。
【００１４】
更にまた、好ましくは、前記制御部は、前記カメラ部において撮影されたユーザーの映像から前記ユーザーの顔の各部を認識し、前記認識された各部に前記サブビューティコンテンツの化粧段階が適用されたか否かを判断することができる。
【００１５】
更にまた、好ましくは、前記制御部は、前記カメラ部において撮影された前記ユーザーの映像を前記ユーザーの化粧段階に応じて保存し、保存された前記ユーザーの映像の共有有無を更に決定することができる。
【００１６】
本発明の他の実施形態により、スマートミラーディスプレイ装置において行われるスマートミラーディスプレイ方法が開示される。前記スマートミラーディスプレイ方法は、ユーザーの映像を撮影する段階と、撮影されたユーザーの映像及びビューティコンテンツをディスプレイする段階と、撮影されたユーザーの映像から前記ユーザーのビューティ状態を認識する段階と、前記認識されたビューティ状態に少なくとも部分的に基づいて、前記ビューテコンテンツのサブビューティコンテンツを切り換える段階と、を含み、前記ビューティコンテンツは、ユーザーに化粧の仕方に関する情報を提供するビューティクリエーターの映像を含み、一つ以上のサブビューティコンテンツを含むことができる。
【００１７】
本発明の更に他の実施形態により、エンコードされた指令を含むコンピューターにて読取り可能な記憶媒体に記憶されたコンピュータープログラムが開示される。前記コンピュータープログラムは、コンピューティング装置の一つ以上のプロセッサーによって起動される場合、前記一つ以上のプロセッサーにスマートミラーディスプレイを提供するための以下の段階を行わせ、前記段階は、ユーザーの映像を撮影する段階と、撮影されたユーザーの映像及びビューティコンテンツをディスプレイする段階と、撮影されたユーザーの映像から前記ユーザーのビューティ状態を認識する段階と、前記認識されたビューティ状態に少なくとも部分的に基づいて、前記ビューテコンテンツのサブビューティコンテンツを切り換える段階と、を含み、前記ビューティコンテンツは、ユーザーに化粧の仕方に関する情報を提供するビューティクリエーターの映像を含み、一つ以上のサブビューティコンテンツを含むことができる。
【発明の効果】
【００１８】
本発明は、ビューティクリエーターのビューティコンテンツをユーザーに手軽に試みさせるための装置を提供することができる。
【図面の簡単な説明】
【００１９】
【図１】本発明の一実施形態に係るスマートミラーディスプレイ装置のブロック構成図である。
【図２】本発明の一実施形態に係るスマートミラーディスプレイ装置においてディスプレイされる映像の例示である。
【図３】本発明の一実施形態によりスマートミラーディスプレイ装置において行われるスマートミラーディスプレイ方法の手順図である。
【図４】本発明の一実施形態に係るスマートミラーディスプレイ方法を実現するための手段を示すブロック構成図である。
【図５】本発明の一実施形態に係るスマートミラーディスプレイ方法を実現するためのモジュールを示すブロック構成図である。
【図６】本発明の一実施形態に係るスマートミラーディスプレイ方法を実現するための回路を示すブロック構成図である。
【図７】本発明の一実施形態に係るスマートミラーディスプレイ方法を実現するためのロジックを示すブロック構成図である。
【図８】本発明の一実施形態に係るコンピューティング装置のブロック構成図である。
【発明を実施するための形態】
【００２０】
以下、様々な実施形態が図面に基づいて説明される。本明細書において、様々な説明が本発明の理解を提供するために提示される。しかしながら、これらの実施形態は、このような具体的な説明なしにも実施可能であるということは明らかである。他の例において、公知の構造及び装置は、実施形態を説明し易くするためにブロック図の形で提供される。
【００２１】
本明細書において用いられるターミノロジ「コンポーネント」、「モジュール」、「システム」などは、コンピューターに関連するエンティティ、ハードウェア、ファームウェア、ソフトウェア、ソフトウェア及びハードウェアの組み合わせ、又はソフトウェアの起動を指し示す。例えば、コンポーネントは、プロセッサー上において起動される処理過程（ｐｒｏｃｅｄｕｒｅ）、プロセッサー、オブジェクト、起動スレッド、プログラム及び／又はコンピューターであってもよいが、これらに何等制限されない。例えば、コンピューティング装置において起動されるアプリケーション及びコンピューティング装置は、両方ともコンポーネントであってもよい。一つ以上のコンポーネントは、プロセッサー及び／又は起動スレッド内に常駐してもよく、一つのコンポーネントは一つのコンピューター内にローカル化されてもよく、二つ以上のコンピューターの間に分配されてもよい。また、これらのコンポーネントは、その内部に保存された様々なデータ構造を有する多種多様なコンピューターにて読取り可能な媒体から起動してもよい。コンポーネントは、例えば、一つ以上のデータパケットを有する信号（例えば、ローカルシステム、分散システムにおいて他のコンポーネントと相互作用をする一つのコンポーネントからのデータ及び／又は信号を用いて他のシステムとインターネットなどのネットワークを介して送受信されるデータ）に基づいて、ローカル及び／又は遠隔処理を用いて通信してもよい。
【００２２】
また、ターミノロジ「含む」及び／又は「備える」は、当該特徴及び／又は構成要素が存在することを意味するが、一つ以上の他の特徴、構成要素及び／又はこれらのグループの存在又は追加を排除しないものと理解されるべきである。なお、別途に断りのない限り、或いは、単数形態を指示することが文脈からみて明確ではない場合、本明細書及び特許請求の範囲において、単数は、一般に、「一つ又はそれ以上」を意味するものと解釈されるべきである。
【００２３】
提示された実施形態についての説明は、本発明の技術分野において通常の知識を有する者が本発明を利用又は実施できるように提供される。これらの実施形態に対する様々な変形は、本発明の技術分野において通常の知識を有する者にとって自明であり、ここで定義された通常の原理は、本発明の範囲を逸脱することなく他の実施形態に適用可能である。そのため、本発明は、ここで提示された実施形態に何ら限定されるものではなく、ここで提示された原理及び新たな特徴と一貫する最広義の範囲において解釈されるべきである。
【００２４】
図１は、本発明の一実施形態に係るスマートミラーディスプレイ装置のブロック構成図である。
【００２５】
スマートミラーディスプレイ装置１００は、カメラ部１１０と、肌状態認識部１２０と、ディスプレイ部１３０と、ユーザー入力部１４０と、制御部１５０と、通信部１６０及びメモリー１７０を備えていてもよい。図１に示すコンポーネントは、スマートミラーディスプレイ装置１００の構成の全部ではなく、スマートミラーディスプレイ装置１００は、必要に応じて、任意のコンポーネントを更に備えていてもよい。
【００２６】
カメラ部１１０は、一つ以上のカメラモジュールによって構成されてもよく、ユーザーの映像を撮影してもよい。カメラ部１１０は、任意のカメラモジュールを備えていてもよい。カメラ部１１０は、制御部１５０がユーザーのビューティ状態を認識できるようにユーザーの映像を撮影してもよい。なお、カメラ部１１０は、制御部１５０がユーザーの肌の状態を認識できるようにユーザーを撮影してもよい。ユーザーのビューティ状態は、サブビューティコンテンツに含まれている化粧段階を行ったか否かに関する情報を含む。例えば、ユーザーのビューティ状態は、ユーザーが化粧の仕方のどのような段階を行ったかに関する情報を含んでいてもよい。即ち、カメラ部１１０において撮影された撮影映像に基づいて、制御部１５０は、ユーザーが現在の目の化粧（目のメイク）を行ったか否か、頬紅（チーク）を付け終わったか否かなどのユーザーのビューティ状態を認識してもよい。上述した化粧段階に関する記載は単なる例示に過ぎず、本発明はこれに何等制限されない。
【００２７】
肌状態認識部１２０は、制御部１５０にユーザーの肌の状態を認識せしめるための情報を取得してもよい。例えば、肌状態認識部１２０は、カメラ部１１０において取得可能なユーザーの映像よりも拡大されたユーザーの肌の状態の映像を取得してもよい。また、肌状態認識部１２０は、肌の表面の荒れの度合い、ユーザーの肌のしっとりさの度合い、肌の肌理、肌の年齢などを制御部１５０が判断できるようにユーザーの肌の表面を拡大して撮影してもよい。更に、肌状態認識部１２０は、電気刺激を用いて肌の水分状態を測定してもよい。即ち、肌状態認識部１２０は、ユーザーの全般的な映像を撮影するカメラ部１１０よりも拡大された映像を用いて制御部１５０にユーザーの肌の状態を認識せしめてもよい。なお、肌状態認識部１２０は、映像だけではなく、肌の状態を判断するための任意の情報を取得してもよい。
【００２８】
ディスプレイ部１３０は、カメラ部において撮影されたユーザーの映像１３１及びビューティコンテンツ１３３をディスプレイしてもよい。ビューティコンテンツ１３３は、ユーザーに化粧の仕方に関する情報を提供するビューティクリエーター（ｂｅａｕｔｙ ｃｒｅａｔｏｒ）の映像を含む。ビューティコンテンツ１３３は、時間単位、化粧に伴う顔イメージの変化単位、化粧道具単位又は化粧スキル単位により分離されたサブビューティコンテンツを含んでいてもよい。図２は、本発明の一実施形態によりスマートミラーディスプレイ装置においてディスプレイされる映像の例示である。図２に基づいて説明すると、ディスプレイ部１３０は、ユーザーの映像１３１及びビューティ映像１３３をディスプレイしてもよい。図２は単なる例示に過ぎず、ディスプレイ部１３０は、ユーザーの映像１３１及びビューティ映像１３３を１枚の画面に一緒に表示してもよく、ユーザーの映像１３１又はビューティ映像１３３を互いに切り換えて表示してもよい。
【００２９】
ユーザー入力部１４０は、ユーザーからユーザーのビューティ目標に対する入力を受信してもよい。ビューティ目標は、ユーザーの肌の状態、ユーザーのビューティ志向点、ユーザーが参加しようとする社会的なイベント及びユーザーの個人情報のうちの少なくともいずれか一つに基づくビューティ目標であってもよい。ユーザーは、自分がしようとする化粧の仕方を選択するための任意の情報を入力してもよい。例えば、ユーザーは、自分の肌の状態が乾性肌であり、肌色のトーンが白いということをユーザー入力部を介して入力してもよい。制御部１５０は、この場合、乾性肌の白い肌色のトーンに似合うビューティコンテンツを選択してもよい。なお、例えば、ユーザーは、親友の結婚式への参加をビューティ目標として入力してもよい。
【００３０】
この場合、制御部１５０は、親友の結婚式への参加に適した化粧の仕方を含むビューティコンテンツを選択してもよい。また、ユーザーは、自分の年齢を入力してもよく、この場合、制御部１５０は、ユーザー年齢代に見合った化粧の仕方を含むビューティコンテンツを選択してもよい。更に、ユーザー入力部１４０は、サブビューティコンテンツを切り換えるための入力を受信してもよい。例えば、ユーザーが目の化粧（アイメイク）、頬の化粧（チークメイク）、唇の化粧（リップメイク）の順に行われるビューティコンテンツをディスプレイ部１３０で確認しながら化粧を真似する場合、ユーザーは、頬の化粧が自分にとって不要である場合、ユーザー入力部１４０を介して目の化粧に関連するサブビューティコンテンツをスキップ（ｓｋｉｐ）してもよい。ユーザー入力部１４０は、ユーザーのサブビューティコンテンツのスキップに関するユーザー入力を受信し、制御部１５０は、次のサブビューティコンテンツである唇の化粧をディスプレイすることを決定してもよい。
【００３１】
ユーザー入力部１４０は、タッチディスプレイ、キーボード、マウスなどの任意の入力装置を備えていてもよく、ジェスチャー入力もまた処理してもよい。例えば、ユーザーが化粧の最中に手を画面の左側から右側へと２回速やかに動かす場合、ユーザー入力部１４０は、当該ユーザーのジェスチャーがサブビューティコンテンツのスキップに関するジェスチャーであると認識してもよい。上述したユーザー入力部の具体的な構成及びジェスチャーは単なる例示に過ぎず、本発明はこれに何等制限されない。
【００３２】
制御部１５０は、一つ以上のコアを備えるプロセッサーによって構成されてもよく、コンピューティング装置の中央処理装置（ＣＰＵ：ｃｅｎｔｒａｌ  ｐｒｏｃｅｓｓｉｎｇ  ｕｎｉｔ）、汎用グラフィック処理装置（ＧＰＧＰＵ：ｇｅｎｅｒａｌ ｐｕｒｐｏｓｅ ｇｒａｐｈｉｃｓ ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）、テンソル処理装置（ＴＰＵ：ｔｅｎｓｏｒ ｐｒｏｃｅｓｓｉｎｇ ｕｎｉｔ）などのプロセッサーを備えていてもよい。制御部１５０は、メモリー１７０に記憶されたコンピュータープログラムを読み取って本発明の一実施形態に係るスマートミラーディスプレイ方法を行ってもよい。制御部１５０は、スマートミラーディスプレイ装置１００の全般的な動作を制御してもよい。
【００３３】
制御部１５０は、カメラ部１１０において撮影されたユーザーの映像からユーザーのビューティ状態を認識し、認識されたビューティ状態に少なくとも部分的に基づいて、ビューティコンテンツのサブビューティコンテンツを切り換えてもよい。ビューティコンテンツは、ユーザーに化粧の仕方に関する情報を提供するビューティクリエーター（ｂｅａｕｔｙ ｃｒｅａｔｏｒ）の映像を含み、一つ以上のサブビューティコンテンツを含んでいてもよい。ユーザーのビューティ状態は、ユーザーがサブビューティコンテンツに含まれている化粧段階を行ったか否かに関する情報を含んでいてもよい。例えば、ユーザーのビューティ状態は、ユーザーが化粧の仕方のどのような段階を行ったかに関する情報を含んでいてもよい。即ち、カメラ部１１０において撮影された撮影映像に基づいて、制御部１５０は、ユーザーが、現在、目の化粧を行ったか否か、頬紅を付け終わったか否かなどのユーザーのビューティ状態を認識してもよい。上述した化粧段階に関する記載は、単なる例示に過ぎず、本発明はこれに何等制限されない。
【００３４】
制御部１５０は、ユーザーの映像のイメージ変化値に基づいて、ユーザーのビューティ状態を認識し、認識されたビューティ状態に基づいて、ユーザーがサブビューティコンテンツに含まれている化粧段階を行ったか否かを判断し、ユーザーがサブビューティコンテンツに含まれている化粧段階を行った場合、次のサブビューティコンテンツをディスプレイすることを決定してもよい。例えば、ユーザーが目の化粧、頬の化粧、唇の化粧の順に行われるビューティコンテンツをディスプレイ部１３０で確認しながら化粧を真似する場合、制御部１５０は、カメラ部１１０において撮影されるユーザーの映像を認識して、ユーザーが目の化粧を完了したと判断される場合、頬の化粧に関連するサブビューティコンテンツをディスプレイすることを決定してもよい。
【００３５】
制御部１５０は、カメラ部１１０において撮影されたユーザーの映像からユーザーの顔の各部を認識し、認識された各部にサブビューティコンテンツの化粧段階が適用されたか否かを判断してもよい。制御部１５０は、まず、撮影された映像からユーザーの顔部を認識してもよい。制御部１５０は、イメージ処理技術、畳み込みニューラルネットワーク（ＣＮＮ：Ｃｏｎｖｏｌｕｔｉｏｎａｌ Ｎｅｕｒａｌ Ｎｅｔｗｏｒｋ）などのイメージプロセッシングアルゴリズムを用いてユーザーの顔の輪郭（ｅｄｇｅ）を認識してもよい。また、制御部１５０は、イメージプロセッシングアルゴリズムを用いて、顔の目、鼻、口、耳などの特徴部分を認識してもよい。制御部１５０は、顔の特徴部分間の位置関係に基づいて、顔の各部を認識してもよい。例えば、制御部１５０は、頬の化粧に関連するサブビューティコンテンツがディスプレイされる場合に、撮影されたユーザーの映像から頬部の色相の変更を認識し、これにより、ユーザーが頬の化粧を完了したか否かを感知して次のサブビューティコンテンツに切り換えることを決定してもよい。
【００３６】
制御部１５０は、ビューティコンテンツを分離して一つ以上のサブビューティコンテンツを生成してもよい。制御部１５０は、ビューティコンテンツを時間単位、化粧に伴う顔イメージの変化単位、化粧道具単位又は化粧スキル単位により分離してもよい。
【００３７】
制御部１５０は、ビューティコンテンツにイメージプロセッシングアルゴリズムを適用して、ビューティコンテンツのイメージを読み取って、当該フレームがどのような化粧段階を行うかを認識してもよい。例えば、制御部１５０は、ビューティコンテンツを３分単位で分割してサブビューティコンテンツを生成してもよい。このようにして分割されたサブビューティコンテンツは、時間が重要視される分野においてユーザーに化粧の仕方を訓練させるために使用可能である。例えば、芸能人のメイクアップを担当するメイクアップアーティストの場合、撮影の最中に芸能人の化粧をやり直すのに時間の制限がある。このようなメイクアップアーティストの場合、本発明の一実施形態の時間別に分離されたサブビューティコンテンツを真似しながら訓練して時間の制限下でメイクアップパフォーマンスを向上させることができる。制御部１５０は、化粧に伴う顔イメージの変化単位、例えば、目の化粧、頬の化粧、唇の化粧などにビューティコンテンツを分離して、サブビューティコンテンツを生成してもよい。また、制御部１５０は、ビューティコンテンツから化粧道具を認識して、化粧道具単位でビューティコンテンツを分離してもよい。例えば、制御部１５０は、マスカラを認識してマスカラを使用する段階、アイライナーを認識してアイライナーを使用する段階にビューティコンテンツを分離してもよい。更に、制御部１５０は、ビューティコンテンツから化粧スキルを認識して、化粧スキル単位でビューティコンテンツを分離してもよい。例えば、制御部１５０は、ビューティコンテンツから肌の水分光（ウォーターグロウ）のための化粧動作を認識してこれを単位としてビューティコンテンツを分離してもよい。上述したビューティコンテンツの分割単位の具体的な記載は単なる例示に過ぎず、本発明はこれに何等制限されない。
【００３８】
制御部１５０は、ユーザーの肌の状態に少なくとも部分的に基づいて、ビューティコンテンツを選択してもよい。制御部１５０は、カメラ部において撮影されたユーザーの映像、肌状態認識部１２０において取得された情報、ユーザー入力部１４０に入力されたユーザー入力のうちの少なくとも一つに少なくとも部分的に基づいて、ユーザーの肌の状態を判断してもよい。制御部１５０は、例えば、ユーザーの肌が乾性肌である場合、乾性肌に推奨可能な水分供給の化粧の仕方を含むビューティコンテンツをディスプレイすることを決定してもよい。また、制御部１５０は、例えば、ユーザーの肌色のトーンが浅黒いトーンである場合、ホワイトニングの化粧の仕方を含むビューティコンテンツをディスプレイすることを決定してもよい。更に、制御部１５０は、ユーザーが設定したビューティ目標に基づいて、これに対応するビューティコンテンツを選択してもよい。例えば、ユーザーが親友の結婚式に参加しようとする場合、制御部１５０は、結婚式への参加に適した化粧の仕方を含むビューティコンテンツを選択してもよい。更にまた、例えば、ユーザーが二重瞼のない目を有している場合、制御部１５０は、ユーザーのビューティ目標を「目もと強調」と認識して、目もとを強調する化粧の仕方が含まれているビューティコンテンツを選択してもよい。本発明は、上述した例示によって何等制限されない。
【００３９】
制御部１５０は、カメラ部１１０において撮影されたユーザーの映像をユーザーの化粧段階により保存することを決定してもよい。また、制御部１５０は、保存されたユーザーの映像の共有有無を決定してもよい。例えば、ユーザーがビューティコンテンツを見ながら化粧を行う場合、カメラ部１１０は、これを撮影してもよい。制御部１５０は、ユーザーが化粧を行う映像をメモリー１７０に保存することを決定してもよい。この場合、制御部１５０は、ユーザーが化粧を行う映像を、サブビューティコンテンツを作る基準と略同じ基準を適用して分割したり、編集点を設定したりしてもよい。制御部１５０は、ユーザーの入力などに基づいて保存された、ユーザーが化粧を行う映像を映像共有プラットフォームなどに共有することを決定してもよい。
【００４０】
通信部１６０は、本発明の一実施形態に係るスマートミラーディスプレイ方法を行うためのデータなどを他のコンピューティング装置、サーバーなどと送受信してもよい。通信部１６０は、ビューティクリエーターのビューティコンテンツ、ユーザーのビューティ映像など本発明の実施形態に必要なデータを他のコンピューティング装置、サーバーなどと送受信してもよい。例えば、通信部１６０は、ソーシャルネットワークサービス、動画共有プラットフォーム、例えば、ユーチューブ（ｙｏｕｔｕｂｅ）などからビューティコンテンツを受信してもよい。通信部１６０は、撮影されたユーザーのビューティ映像をソーシャルネットワークサービス、動画共有プラットフォームなどに送信してもよい。
【００４１】
メモリー１７０は、本発明の一実施形態に係るスマートミラーディスプレイ方法を行うためのコンピュータープログラムを記憶してもよく、記憶されたコンピュータープログラムは、制御部１５０のプロセッサーによって読み取られて駆動されてもよい。
【００４２】
スマートミラーディスプレイ装置１００は、ビューティコンテンツをディスプレイしてユーザーがこれを真似できるようにし、ビューティコンテンツをサブビューティコンテンツに分割してユーザーが段階別に真似できるようにしてもよい。また、本発明の一実施形態に係るスマートミラーディスプレイ装置１００は、ユーザーのビューティ状態を認識してサブビューティコンテンツを切り換えることにより、ユーザーが手軽にビューティコンテンツを真似できるようにしてもよい。更に、本発明の一実施形態に係るスマートミラーディスプレイ装置１００は、ユーザーのビューティ目標に応じて参考にできるビューティコンテンツを推奨して、ユーザーが自分のビューティ志向点による化粧の仕方を勉強できるようにしてもよい。
【００４３】
図２は、本発明の一実施形態によりスマートミラーディスプレイ装置においてディスプレイされる映像の例示である。
【００４４】
図２の（ａ）及び（ｂ）に示すように、ユーザーがスマートミラーディスプレイ装置１００の前方に位置すれば、スマートミラーディスプレイ装置１００は、ユーザーを撮影してユーザーの映像１３１を生成し、ユーザーの映像１３１をビューティコンテンツ１３３とともにディスプレイしてもよい。
【００４５】
同図に示すように、ディスプレイされているビューティコンテンツ１３３は、鼻にハイライト化粧を行う段階のサブビューティコンテンツであってもよい。このとき、制御部１５０は、ユーザーの映像１３１から鼻部２０１を認識してビューティコンテンツ１３３の鼻部２０３と比較してユーザーが当該サブビューティコンテンツの化粧段階を行ったか否かを認識してもよい。
【００４６】
制御部１５０は、ユーザーの映像１３１にイメージプロセッシングアルゴリズムを適用してユーザーの顔から鼻部２０１を認識してもよい。制御部１５０は、認識されたユーザーの顔の鼻部２０１の色相値の変化を感知して、ユーザーが当該サブビューティコンテンツに含まれている化粧段階を行ったか否かを感知してもよい。制御部１５０は、ユーザーが当該サブビューティコンテンツに含まれている化粧段階を行ったことを感知した場合、次のサブビューティコンテンツがディスプレイ部１３０に表示されるようにサブビューティコンテンツを切り換えてもよい。
【００４７】
図２に示すスマートミラーディスプレイ装置１００及びこれによって表示される映像は単なる例示に過ぎず、本発明はこれに何等制限されない。
【００４８】
図３は、本発明の一実施形態によりスマートミラーディスプレイ装置において行われるスマートミラーディスプレイ方法の手順図である。
【００４９】
スマートミラーディスプレイ装置１００は、ユーザーの映像を撮影してもよい（Ｓ３１０段階）。スマートミラーディスプレイ装置１００は、ユーザーのビューティ状態を認識できるようにユーザーを撮影してユーザー映像を生成してもよい。
【００５０】
スマートミラーディスプレイ装置１００は、撮影されたユーザーの映像及びビューティ映像をディスプレイしてもよい（Ｓ３２０段階）。ビューティコンテンツ１３３は、ユーザーに化粧の仕方に関する情報を提供するビューティクリエーター（ｂｅａｕｔｙ ｃｒｅａｔｏｒ）の映像を含む。ビューティコンテンツ１３３は、時間単位、化粧に伴う顔イメージの変化単位、化粧道具単位又は化粧スキル単位により分離されたサブビューティコンテンツを含んでいてもよい。
【００５１】
スマートミラーディスプレイ装置１００は、撮影されたユーザーの映像からユーザーのビューティ状態を認識してもよい（Ｓ３３０段階）。ユーザーのビューティ状態は、ユーザーがサブビューティコンテンツに含まれている化粧段階を行ったか否かに関連する情報を含んでいてもよい。例えば、ユーザーのビューティ状態は、ユーザーが化粧の仕方のどのような段階を行ったかに関する情報を含んでいてもよい。即ち、スマートミラーディスプレイ装置１００において撮影された撮影映像に基づいて、スマートミラーディスプレイ装置１００は、ユーザーが現在目の化粧を行ったか否か、頬紅を付け終わったか否かなどのユーザーのビューティ状態を認識してもよい。上述した化粧段階に関する記載は単なる例示に過ぎず、本発明はこれに何等制限されない。
【００５２】
スマートミラーディスプレイ装置１００は、認識されたビューティ状態に少なくとも部分的に基づいて、ビューティ映像のサブ映像を切り換えてもよい（Ｓ３４０段階）。スマートミラーディスプレイ装置１００は、例えば、ユーザーのビューティ状態を認識してユーザーが目の化粧を行ったか否かを判断してもよく、判断結果に少なくとも部分的に基づいて、サブビューティ映像を目の化粧の次の段階の化粧の仕方を含むサブビューティ映像に切り換えてディスプレイしてもよい。
【００５３】
スマートミラーディスプレイ装置１００は、ビューティコンテンツをディスプレイしてユーザーがこれを真似できるようにし、ビューティコンテンツをサブビューティコンテンツに分割してユーザーが段階別に真似できるようにしてもよい。また、スマートミラーディスプレイ装置１００は、ユーザーのビューティ状態を認識してサブビューティコンテンツを切り換えることにより、 ユーザーが手軽にビューティコンテンツを真似できるようにしてもよい。なお、スマートミラーディスプレイ装置１００は、ユーザーのビューティ目標に応じて参考にできるビューティコンテンツを推奨してユーザーが自分のビューティ志向点による化粧の仕方を勉強できるようにしてもよい。
【００５４】
図４は、本発明の一実施形態に係るスマートミラーディスプレイ方法を実現するための手段を示すブロック構成図である。
【００５５】
本発明の一実施形態に係るスマートミラーディスプレイ方法は、次の手段によって実現可能である。
【００５６】
本発明の一実施形態に係るスマートミラーディスプレイ方法は、ユーザーの映像を撮影するための手段４１０と、撮影されたユーザーの映像及びビューティ映像をディスプレイするための手段４２０と、撮影されたユーザーの映像からユーザーのビューティ状態を認識するための手段４３０と、認識されたビューティ状態に少なくとも部分的に基づいて、ビューティ映像のサブビューティ映像を切り換えるための手段４４０と、によって実現されてもよい。
【００５７】
図５は、本発明の一実施形態に係るスマートミラーディスプレイ方法を実現するためのモジュールを示すブロック構成図である。
【００５８】
本発明の一実施形態に係るスマートミラーディスプレイ方法は、次のモジュールによって実現されてもよい。
【００５９】
本発明の一実施形態に係るスマートミラーディスプレイ方法は、ユーザーの映像を撮影するためのモジュール５１０と、撮影されたユーザーの映像及びビューティ映像をディスプレイするためのモジュール５２０と、撮影されたユーザーの映像からユーザーのビューティ状態を認識するためのモジュール５３０と、認識されたビューティ状態に少なくとも部分的に基づいて、ビューティ映像のサブビューティ映像を切り換えるためのモジュール５４０と、によって実現されてもよい。
【００６０】
図６は、本発明の一実施形態に係るスマートミラーディスプレイ方法を実現するための回路を示すブロック構成図である。
【００６１】
本発明の一実施形態に係るスマートミラーディスプレイ方法は、次の回路によって実現されてもよい。
【００６２】
本発明の一実施形態に係るスマートミラーディスプレイ方法は、ユーザーの映像を撮影するための回路６１０と、撮影されたユーザーの映像及びビューティ映像をディスプレイするための回路６２０と、撮影されたユーザーの映像からユーザーのビューティ状態を認識するための回路６３０と、認識されたビューティ状態に少なくとも部分的に基づいて、ビューティ映像のサブビューティ映像を切り換えるための回路６４０と、によって実現されてもよい。
【００６３】
図７は、本発明の一実施形態に係るスマートミラーディスプレイ方法を実現するためのロジックを示すブロック構成図である。
【００６４】
本発明の一実施形態に係るスマートミラーディスプレイ方法は、次のロジックによって実現されてもよい。
【００６５】
本発明の一実施形態に係るスマートミラーディスプレイ方法は、ユーザーの映像を撮影するためのロジック７１０と、撮影されたユーザーの映像及びビューティ映像をディスプレイするためのロジック７２０と、撮影されたユーザーの映像からユーザーのビューティ状態を認識するためのロジック７３０と、認識されたビューティ状態に少なくとも部分的に基づいて、ビューティ映像のサブビューティ映像を切り換えるためのロジック７４０と、によって実現されてもよい。
【００６６】
当業者は、更にここで開示された実施形態と結び付けて説明した様々な例示的・論理的なブロック、構成、モジュール、回路、手段、ロジック及びアルゴリズム段階が電子ハードウェア、コンピューターソフトウェア又は両方の組み合わせによって実現可能であるということを認識しなければならない。ハードウェア及びソフトウェアの相互交換性を明らかに例示するために、様々な例示的なコンポーネント、ブロック、構成、手段、ロジック、モジュール、回路及び段階は、これらの機能性の側面から一般的に上述されている。
【００６７】
このような機能性がハードウェア又はソフトウェアとして実現されるか否かは、全般的なシステムに課された特定のアプリケーション（ａｐｐｌｉｃａｔｉｏｎ）及び設計制限による。熟練された技術者であれば、それぞれの特定のアプリケーションのために様々な方法によって説明された機能性を実現することができるが、このような実現の決定が本発明の内容の領域を逸脱させるものと解釈されてはならない。
【００６８】
図８は、本発明の一実施形態に係るコンピューティング装置のブロック構成図である。
【００６９】
図８は、本発明の実施形態を実現する例示的なコンピューティング環境に対する一般的な概略図である。
【００７０】
本発明について、一般に、一つ以上のコンピューター上において起動可能なコンピューター起動可能指令語と結び付けて上述されたが、当業者であれば、本発明がその他のプログラムモジュールと結合されて及び／又はハードウェア及びソフトウェアの組み合わせとして実現可能であるということは理解できる筈である。
【００７１】
一般に、プログラムモジュールは、特定のタスクを行ったり、特定の抽象データ類型を実現したりするルーチン、プログラム、コンポーネント、データ構造、その他などを含む。なお、当業者であれば、本発明の方法が単一のプロセッサー又はマルチプロセッサーコンピューターシステム、ミニコンピューター、メインフレームコンピューターはもとより、パソコン、ハンドヘルドコンピューティング装置、マイクロプロセッサーに基づく家電製品又はプログラム可能な家電製品、その他など（これらのそれぞれは、一つ以上の関連する装置と接続されて動作可能である）をはじめとする他のコンピューターシステム構成によって実施可能であるということが理解できる筈である。
【００７２】
本発明の説明された実施形態はまた、あるタスクが通信ネットワークを介して接続されている遠隔処理装置によって行われる分散コンピューティング環境下で実施可能である。分散コンピューティング環境下で、プログラムモジュールは、ローカル及び遠隔メモリー記憶装置の両方ともに位置してもよい。
【００７３】
コンピューターは、通常、様々なコンピューターにて読取り可能な媒体を備える。コンピューターによってアクセス可能な媒体は、いかなるものにせよ、コンピューターにて読取り可能な媒体であってもよく、このようなコンピューターにて読取り可能な媒体としては、揮発性及び不揮発性媒体、一時的（ｔｒａｎｓｉｔｏｒｙ）及び非一時的（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ）媒体、移動式及び非移動式媒体が挙げられる。非制限的な例として、コンピューターにて読取り可能な媒体としては、コンピューターにて読取り可能な記憶媒体及びコンピューターにて読取り可能な伝送媒体が挙げられる。コンピューターにて読取り可能な記憶媒体としては、コンピューターにて読取り可能な指令語、データ構造、プログラムモジュール又はその他のデータなどの情報を保存する、任意の方法又は技術によって実現される揮発性及び不揮発性媒体、一時的及び非一時的媒体、移動式及び非移動式媒体が挙げられる。コンピューター記憶媒体としては、ＲＡＭ、ＲＯＭ、ＥＥＰＲＯＭ、フラッシュメモリー又はその他のメモリー技術、ＣＤ−ＲＯＭ、デジタルビデオディスク（ＤＶＤ：ｄｉｇｉｔａｌ ｖｉｄｅｏ ｄｉｓｋ）又はその他の光ディスク保存装置、磁気カセット、磁気テープ、磁気ディスク保存装置又はその他の磁気保存装置、又はコンピューターによってアクセス可能であり、所望の情報を保存するのに使用可能な任意のその他の媒体が挙げられるが、これらに限定されない。
【００７４】
コンピューターにて読取り可能な伝送媒体は、通常、搬送波（ｃａｒｒｉｅｒ ｗａｖｅ）又はその他の送信メカニズム（ｔｒａｎｓｐｏｒｔ ｍｅｃｈａｎｉｓｍ）などの被変調データ信号（ｍｏｄｕｌａｔｅｄ ｄａｔａ ｓｉｇｎａｌ）にコンピューターにて読取り可能な指令語、データ構造、プログラムモジュール又はその他のデータなどを実現し、あらゆる情報転送媒体を網羅する。ターミノロジ「被変調データ信号」とは、信号内に情報をエンコードするようにその信号の特性のうちの一つ以上を設定又は変更した信号のことをいう。非制限的な例として、コンピューターにて読取り可能な伝送媒体としては、有線ネットワーク又は直接配線接続（ｄｉｒｅｃｔ−ｗｉｒｅｄ ｃｏｎｎｅｃｔｉｏｎ）などの有線媒体、及び音響、ＲＦ、赤外線、その他の無線媒体などの無線媒体が挙げられる。上述した媒体のうちの任意のものの組み合わせもまた、コンピューターにて読取り可能な伝送媒体の範囲内に含まれるものとする。
【００７５】
コンピューター１１０２をはじめとする本発明の色々な側面を実現する例示的な環境１１００が示されており、コンピューター１１０２は、処理装置１１０４、システムメモリー１１０６及びシステムバス１１０８を備える。システムバス１１０８は、システムメモリー１１０６（これに限定されない）をはじめとするシステムコンポーネントを処理装置１１０４に接続する。処理装置１１０４は、様々な商用プロセッサーのうちの任意のプロセッサーであってもよい。デュアルプロセッサー及びその他のマルチプロセッサーアーキテクチャーもまた、処理装置１１０４として利用可能である。
【００７６】
システムバス１１０８は、メモリーバス、周辺装置バス及び各種の商用バスアーキテクチャーのうちの任意のものを用いるローカルバスに更に相互接続可能ないくつかの類型のバス構造のうちの任意のものであってもよい。システムメモリー１１０６は、読取り専用メモリー（ＲＯＭ）１１１０及びランダムアクセスメモリー（ＲＡＭ）１１１２を備える。基本入／出力システム（ＢＩＯＳ）は、ＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭなどの不揮発性メモリー１１１０に記憶され、このＢＩＯＳは、起動中などのときにコンピューター１１０２内の構成要素同士が相互間に情報をやりとりすることを補助する基本的なルーチンを含む。ＲＡＭ１１１２はまた、データをキャッシュするための静的ＲＡＭなどの高速ＲＡＭを備えていてもよい。
【００７７】
コンピューター１１０２はまた、内蔵型ハードディスクドライブ（ＨＤＤ）１１１４（例えば、ＥＩＤＥ、ＳＡＴＡ）（この内蔵型ハードディスクドライブ１１１４はまた、適当なシャシー（図示せず）内において外付け型用途に構成されてもよい。）、磁気プロッピーディスクドライブ（ＦＤＤ）１１１６（例えば、移動式ディスケット１１１８から読取りをしたり、そこに記録をしたりするためのものである。）及び光ディスクドライブ１１２０（例えば、ＣＤ−ＲＯＭディスク１１２２を読取りしたり、ＤＶＤなどのその他の高容量媒体から読取りをしたり、そこに記録をしたりするためのものである。）を備える。ハードディスクドライブ１１１４、磁気ディスクドライブ１１１６及び光ディスクドライブ１１２０は、それぞれハードディスクドライブインターフェース１１２４、磁気ディスクドライブインターフェース１１２６及び光ドライブインターフェース１１２８によってシステムバス１１０８に接続されてもよい。外付け型ドライブの実現のためのインターフェース１１２４は、ユニバーサルシリアルバス（ＵＳＢ：Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）及びＩＥＥＥ １３９４インターフェース技術のうちの少なくとも一方又は両方を含む。
【００７８】
これらのドライブ及びこれと関連するコンピューターにて読取り可能な媒体は、データ、データ構造、コンピューターにて起動可能な指令語、その他などの不揮発性保存を提供する。コンピューター１１０２の場合、ドライブ及び媒体は、任意のデータを適当なデジタル形式で保存するものに対応する。上記におけるコンピューターにて読取り可能な媒体についての説明においてＨＤＤ、移動式磁気ディスク及びＣＤ又はＤＶＤなどの移動式光媒体を言及しているが、当業者であれば、ジップドライブ（ｚｉｐ ｄｒｉｖｅ）、磁気カセット、フラッシュメモリーカード、カートリッジ、その他などのコンピューターによって読取り可能な他の類型の媒体もまた例示的なオペレーティング環境下で使用可能であり、且つ、任意のこのような媒体が本発明の方法を行うためのコンピューターにて起動可能な指令語を含んでいてもよいということは理解できる筈である。
【００７９】
オペレーティングシステム１１３０、一つ以上のアプリケーションプログラム１１３２、その他のプログラムモジュール１１３４及びプログラムデータ１１３６をはじめとする多数のプログラムモジュールがドライブ及びＲＡＭ １１１２に保存されてもよい。オペレーティングシステム、アプリケーション、モジュール及び／又はデータの全部又はその一部がまた、ＲＡＭ １１１２にキャッシュされてもよい。本発明が各種の商業的に利用可能なオペレーティングシステム又はオペレーティングシステムの組み合わせにおいて実現可能であるということは周知である。
【００８０】
ユーザーは、一つ以上の有線／無線の入力装置、例えば、キーボード１１３８及びマウス１１４０などのポインティング装置を介してコンピューター１１０２に指令及び情報を入力してもよい。その他の入力装置（図示せず）としては、マイク、ＩＲリモコン、ジョイスティック、ゲームパッド、スタイラスペン、タッチスクリーン、その他などが挙げられる。これら及びその他の入力装置が頻繁にシステムバス１１０８に接続されている入力装置インターフェース１１４２を介して処理装置１１０４に接続されるが、並列ポート、ＩＥＥＥ  １３９４直列ポート、ゲームポート、ＵＳＢポート、ＩＲインターフェース、その他のインターフェースなどによって接続されてもよい。
【００８１】
モニター１１４４又は他の類型のディスプレイ装置もまた、ビデオアダプター１１４６などのインターフェースを介してシステムバス１１０８に接続される。モニター１１４４に加えて、コンピューターは、一般に、スピーカー、プリンター、その他の周辺出力装置（図示せず）などを備える。
【００８２】
コンピューター１１０２は、有線及び／又は無線通信を用いた遠隔コンピューター１１４８などの一つ以上の遠隔コンピューターへの論理的な接続を用いてネットワーク化された環境下で動作可能である。遠隔コンピューター１１４８は、ワークステーション、コンピューティングデバイスコンピューター、ルーター、パソコン、携帯型コンピューター、マイクロプロセッサーに基づく娯楽機器、ピア装置又はその他の通常のネットワークノードであってもよく、一般に、コンピューター１１０２について記述された構成要素のうちの多数又はその全部を備えるが、簡略さのために、メモリー記憶装置１１５０のみが開示されている。開示されている論理的な接続は、近距離通信網（ＬＡＮ）１１５２及び／又は更に大きいネットワーク、例えば、遠距離通信網（ＷＡＮ）１１５４への有線／無線の接続を網羅する。このようなＬＡＮ及びＷＡＮネットワーキング環境は、事務室及び会社において一般的なものであり、イントラネットなどの全社的なコンピューターネットワーク（ｅｎｔｅｒｐｒｉｓｅ−ｗｉｄｅ ｃｏｍｐｕｔｅｒ ｎｅｔｗｏｒｋ）を容易にし、これらはいずれも全世界のコンピューターネットワーク、例えば、インターネットに接続可能である。
【００８３】
ＬＡＮネットワーキング環境下で用いられるとき、コンピューター１１０２は、有線及び／又は無線の通信ネットワークインターフェース又はアダプター１１５６を介してローカルネットワーク１１５２に接続される。アダプター１１５６は、ＬＡＮ １１５２への有線又は無線の通信を容易にし、このＬＡＮ １１５２はまた、無線アダプター１１５６と通信するためにそこに設置されている無線アクセスポイントを備えている。ＷＡＮネットワーキング環境下で用いられるとき、コンピューター１１０２は、モデム１１５８を備えていてもよく、ＷＡＮ１１５４上の通信コンピューティングデバイスに接続されるか、又はインターネットを介するなど、ＷＡＮ１１５４を介して通信を設定するその他の手段を有する。内蔵型又は外付け型及び有線又は無線の装置であってもよいモデム１１５８は、直列ポートインターフェース１１４２を介してシステムバス１１０８に接続される。ネットワーク化した環境下で、コンピューター１１０２について説明されたプログラムモジュール又はその一部が遠隔メモリー／記憶装置１１５０に記憶されてもよい。図示のネットワーク接続が例示的なものであり、コンピューターの間に通信リンクを設定するその他の手段が使用可能であるということは周知である。
【００８４】
コンピューター１１０２は、無線通信によって配置されて動作する任意の無線装置又は個体、例えば、プリンター、スキャナー、デスクトップ及び／又は携帯型コンピューター、携帯情報端末（ＰＤＡ：ｐｏｒｔａｂｌｅ ｄａｔａ ａｓｓｉｓｔａｎｔ）、通信衛星、無線検出可能なタグと関連する任意の装備又は場所及び電話と通信をする動作をする。これは、少なくともＷｉ−Ｆｉ及びブルートゥース(ブルートゥースは登録商標)無線技術を含む。このため、通信は、従来のネットワークでのように、予め定義された構造であってもよく、単に少なくとも二つの装置間のアドホック通信（ａｄｈｏｃ ｃｏｍｍｕｎｉｃａｔｉｏｎ）であってもよい。
【００８５】
Ｗｉ−Ｆｉ（Ｗｉｒｅｌｅｓｓ Ｆｉｄｅｌｉｔｙ）は、有線ではなくてもインターネットなどへの接続を可能にする。Ｗｉ−Ｆｉは、このような装置、例えば、コンピューターが屋内において及び屋外において、すなわち、基地局の通話圏内のどこでもデータを送信及び受信可能にするセル電話などの無線技術である。Ｗｉ−Ｆｉネットワークは、安全であり、高い信頼性を有している他、高速の無線接続を提供するためにＩＥＥＥ ８０２.１１（ａ，ｂ，ｇ、その他）と呼ばれる無線技術を使用する。コンピューターを相互に、インターネットに及び有線ネットワーク（（ＩＥＥＥ ８０２.３又はイーサネット(イーサネットは登録商標）を使用する。）)に接続するために、Ｗｉ−Ｆｉが使用可能である。Ｗｉ−Ｆｉネットワークは、無認可２．４及び５ＧＨｚの無線帯域において、例えば、１１Ｍｂｐｓ（８０２．１１ａ）又は５４Ｍｂｐｓ（８０２．１１ｂ）データレートで動作してもよく、両帯域（デュアル帯域）を含む製品において動作してもよい。
【００８６】
本発明の技術分野において通常の知識を有する者であれば、情報及び信号を任意の様々な異なる技術及び技法を用いて表現することができるということが理解できる筈である。例えば、上記の説明において参照可能なデータ、指示、指令、情報、信号、ビット、シンボル及びチップは、電圧、電流、電磁気波、磁場又は粒子、光学場又は粒子、或いはこれらの任意の結合によって表現可能である。
【００８７】
本発明の技術分野において通常の知識を有する者であれば、ここに開示されている実施形態と結び付けて説明した各種の例示的な論理ブロック、モジュール、プロセッサー、手段、回路及びアルゴリズム段階が電子ハードウェア（便宜のために、ここで、「ソフトウェア」と称される。）、様々な形態のプログラム又は設計コード、或いはこれらの両方の結合によって実現可能であるということが理解できる筈である。ハードウェア及びソフトウェアのこのような相互互換性を明確に説明するために、各種の例示的なコンポーネント、ブロック、モジュール、回路及び段階がこれらの機能と関連して上記において一般的に説明された。このような機能がハードウェア又はソフトウェアとして実現されるか否かは、特定のアプリケーション及び全体のシステムに対して課される設計制約によって左右される。本発明の技術分野において通常の知識を有する者は、それぞれの特定のアプリケーションについての様々な方式によって説明された機能を実現することができるが、これらの実現の決定は、本発明の範囲を逸脱するものと解釈されてはならない。
【００８８】
ここで提示されている様々な実施形態は、方法、装置又は標準プログラミング及び／又はエンジニアリング技術を用いた製造物品（ａｒｔｉｃｌｅ）によって実現可能である。ターミノロジ「製造物品」は、任意のコンピューターにて読取り可能な装置からアクセス可能なコンピュータープログラム、キャリア又は媒体（ｍｅｄｉａ）を網羅する。例えば、コンピューターにて読取り可能な媒体としては、磁気記憶装置（例えば、ハードディスク、フロッピーディスク、磁気ストリップなど）、光学ディスク（例えば、ＣＤ、ＤＶＤなど）、スマートカード及びフラッシュメモリー装置（例えば、ＥＥＰＲＯＭ、カード、スティック、キードライブなど）が挙げられるが、これらに何等制限されない。なお、ここで提示されている様々な記憶媒体としては、情報を保存するための一つ以上の装置及び／又は他の機械にて読取り可能な媒体が挙げられる。
【００８９】
提示されたプロセスにある段階の特定の順序又は階層構造は、例示的な接近の一例であることを理解すべきである。設計のプライオリティに基づいて、本発明の範囲内においてプロセスにある段階の特定の順序又は階層構造が並べ替えられてもよいということを理解すべきである。添付の方法の請求項は、サンプル順序で様々な段階のエレメントを提供するが、提示された特定の順序又は階層構造に限定されることを意味しない。
【００９０】
提示された実施形態についての説明は、任意の本発明の技術分野において通常の知識を有する者が本発明を利用又は実施できるように提供される。これらの実施形態に対する各種多様な変形は、本発明の技術分野において通常の知識を有する者にとって自明であり、ここで定義されている一般的な原理は、本発明の範囲を逸脱することなく、他の実施形態に適用可能である。こうして、本発明は、ここで提示されている実施形態に何ら限定されるものではなく、ここで提示されている原理及び新規な特徴と一貫する最広義の範囲において解釈されるべきである。
【図１】
2019103772.tif 000003
【図２】
2019103772.tif 000004
【図３】
2019103772.tif 000005
【図４】
2019103772.tif 000006
【図５】
2019103772.tif 000007
【図６】
2019103772.tif 000008
【図７】
2019103772.tif 000009
【図８】
2019103772.tif 000010