(57)【要約】電気機器用のユーザプロファイリングを提供する方法およびシステムを開示する。顔面表示データは撮像装置を用いて捕捉される。撮像装置は、ユーザの顔に焦点をあわせて顔面表示データを捕捉する。顔面特徴データベースが、顔面表示データと一致するユーザ顔面特徴データを含むか否かが判定される。顔面表示データが、顔面特徴データベース内のユーザ顔面特徴データに一致するとき、ユーザ嗜好データが電気機器のメモリモジュールにロードされる。顔面表示データが、顔面特徴データベース内のユーザ顔面特徴データに一致しないとき、新規のユーザプロファイルがユーザプロファイルデータベースに追加される。
2009521186.tif 000002
【特許請求の範囲】
【請求項１】
電気機器用のユーザプロファイリングを提供するための方法であって、
ユーザの顔に焦点を合わせて顔面表示データを捕捉する撮像装置を用いて顔面表示データを捕捉すること、
顔面特徴データベースが顔面表示データと一致するユーザ顔面特徴データを含むか否かを判定すること、
顔面表示データが、顔面特徴データベース内のユーザ顔面特徴データに一致するとき、ユーザ嗜好データを電気機器にロードすること、
顔面表示データが、顔面特徴データベース内のユーザ顔面特徴データに一致しないとき、新規ユーザプロファイルをユーザプロファイルデータベースに追加すること、
を備える方法。
【請求項２】
電気機器とのユーザ交信に基づき、新規ユーザプロファイルに新たなユーザ嗜好データを記憶することを備える、請求項１に記載の方法。
【請求項３】
電気機器とのユーザ交信に基づき、新規ユーザプロファイルに新規ユーザ履歴データを記憶する、請求項１に記載の方法。
【請求項４】
一致するユーザ顔面特徴データに対応する既存のユーザプロファイルをユーザプロファイルデータベースに配置することを備える、請求項１に記載の方法。
【請求項５】
ユーザ嗜好データを電気機器にロードすることは、電気機器のメモリモジュールに存在するユーザ既存顔面特徴データをロードすることを含む、請求項１に記載の方法。
【請求項６】
顔面特徴データベースが顔面表示データと一致するユーザ顔面特徴データを含むか否かを判定することは、電気機器内の顔面認識モジュールによって実行される、請求項１に記載の方法。
【請求項７】
ユーザ嗜好データおよびユーザ履歴データがユーザプロファイルデータベースに記憶される、請求項１に記載の方法。
【請求項８】
ユーザプロファイルデータベースに追加される新たなユーザプロファイルが、顔面表示データに基づき一意に識別可能である、請求項１に記載の方法。
【請求項９】
ユーザ嗜好データが音声嗜好、色嗜好、または映像嗜好を含む、請求項１に記載の方法。
【請求項１０】
ユーザプロファイリングシステムであって、
顔面表示データを受信する顔面認識モジュールであって、顔面表示データが撮像装置によって補足され、撮像装置がユーザの顔に焦点を合わせて顔面表示データを捕捉する、前記顔面認識モジュールと、
複数のユーザ記録を記憶する顔面特徴データベースであって、複数のユーザ記録がそれぞれ顔面表示データを記憶し、かつ電気機器の複数のユーザにそれぞれ対応する、前記顔面特徴データベースと、
ユーザ嗜好データを電気機器にロードするユーザプロファイリングモジュールであって、顔面表示データが顔面特徴データベース内のユーザ顔面特徴データに一致するとき、ユーザ嗜好データが電気機器のメモリモジュールにロードされ、顔面表示データが顔面特徴データベース内のユーザ顔面特徴データに一致しないとき、ユーザプロファイリングモジュールが新たなユーザプロファイルを作成する、前記ユーザプロファイリングモジュールと、
複数のユーザプロファイルおよび対応するユーザ嗜好データを記憶するユーザプロファイリングデータベースであって、ユーザプロファイルが電気機器の複数のユーザのそれぞれに対応する、前記ユーザプロファイリングデータベースと、
を備えるユーザプロファイリングシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、ユーザプロファイリング、認識、および認証に関する。特に、テレビ電話システムまたは画像捕捉装置を用いたユーザプロファイリング、認識、および認証に関する。
【背景技術】
【０００２】
視聴覚会議機能は通常、パーソナルコンピュータ（「ＰＣ」）やテレビ電話などのコンピュータベースのシステムを用いて実現される。テレビ電話およびその他のテレビ会議システムの中には、ユーザ嗜好を記憶する性能を提供するものがある。概して、テレビ電話およびその他の電子機器におけるユーザ嗜好は、最後のユーザによって設定される嗜好が、テレビ電話または電子機器によって利用される嗜好となるように設定される。さらに、これらのシステムは通常、ユーザによる実質上の交信を必要とする。このような交信は煩わしい作業であり、多大な時間を必要とする。
【０００３】
さらに、テレビ電話内のカメラによって捕捉された画像は、テレビ会議ネットワーク上で送信先のテレビ電話に送信されるだけである。そのようなものとして、ユーザの表情および特徴は、他のテレビ会議参加者への送信以外の目的で記録されない。最後に、現行のテレビ電話およびその他の電気機器は、単独ユーザのためのユーザ嗜好が設定できるだけである。
【発明の開示】
【課題を解決するための手段】
【０００４】
電気機器用のユーザプロファイリングを提供する方法およびシステムを開示する。顔面表示データは撮像装置で捕捉される。撮像装置は、ユーザの顔に焦点をあわせて顔面表示データを捕捉する。顔面特徴データベースが、顔面表示データと一致するユーザ顔面特徴データを含むか否かが判定される。顔面表示データが、顔面特徴データベース内のユーザ顔面特徴データに一致するとき、ユーザ嗜好データが電気機器のメモリモジュールにロードされる。顔面表示データが、顔面特徴データベース内のユーザ顔面特徴データに一致しないとき、新規のユーザプロファイルがユーザプロファイルデータベースに追加される。
【０００５】
ユーザプロファイリングシステムは、顔面認識モジュール、顔面特徴データベース、ユーザプロファイリングモジュール、およびユーザプロファイリングデータベースを含む。顔面認識モジュールは、顔面表示データを受信し、顔面表示データは撮像装置によって補足される。撮像装置はユーザの顔に焦点を合わせて、顔面表示データを捕捉する。顔面特徴データベースは複数のユーザ記録を記憶し、複数のユーザ記録はそれぞれ顔面表示データを記憶する。さらに、複数のユーザ記録はそれぞれ、電気機器の複数のユーザのそれぞれに対応することができる。ユーザプロファイリングモジュールは、電気機器のメモリモジュールにユーザ嗜好データをロードする。顔面表示データが、顔面特徴データベース内のユーザ顔面特徴データに一致するとき、ユーザ嗜好データが電気機器にロードされる。顔面表示データが、顔面特徴データベース内のユーザ顔面特徴データに一致しないとき、ユーザプロファイリングモジュールが新たなユーザプロファイルを作成する。最後に、ユーザプロファイリングデータベースが複数のユーザプロファイルおよび対応するユーザ嗜好データを記憶し、複数のユーザプロファイルは電気機器の複数のユーザにそれぞれに対応する。
【発明を実施するための最良の形態】
【０００６】
例示のため、添付の図を以下参照する。
自動顔面認識およびユーザプロファイリングのための方法および装置を開示する。該システムおよび方法は、カスタマイズされた嗜好を設定するためのオプションを提供する１つまたはそれ以上の電気システムに適用することができる。これらのシステムは、パーソナルコンピュータ、電話、テレビ電話、自動窓口機、パーソナルデータアシスタント、メディアプレーヤなどであってもよい。
【０００７】
電気システムは、通常、設定およびユーザ特有情報または複数のユーザを記憶せず管理も行わない。そうではなく、現行システムは、限定的なインタフェース機能を有するユーザインタフェースを提供する。本明細書に開示される方法および装置は、顔面認識に基づき複数のユーザの嗜好と設定を自動的に保持する。動作と保持が煩雑な現行システムと異なり、本明細書に開示されるシステムおよび方法は、ユーザ行動、命令、情報へのアクセス順序などに基づきユーザの嗜好と設定を自動的に生成する。いったん顔面認識モジュールが、戻ってくるユーザの顔を認識すれば、ユーザプロファイリングモジュールは、ユーザ特有の行動を回収して、戻ってくるユーザの嗜好を生成し学習することができる。ユーザが顔面認識モジュールによって認識されない場合、新規プロファイルを作成することができ、設定、特性、嗜好などを新規ユーザのプロファイルの一部として記憶することができる。
【０００８】
図１は人の顔を撮像するテレビ電話を示す。カメラ１１０と顔面認識プロファイリング部１００とを使用するテレビ電話１０４は、ユーザを一意に識別可能なユーザの顔、表情、およびその他の顔面特徴を捕捉するように構成することができる。顔面認識プロファイリング部１００はカメラ１１０から捕捉画像を受け取り、ユーザの顔を表すデータを保存する。一実施形態では、カメラ１１０および顔面認識プロファイリング部１００は、テレビ電話１０４内に収容される。別の実施形態では、カメラ１１０および顔面認識プロファイリング部１００は、テレビ電話１０４の別個のハウジングに収容される。
【０００９】
一例では、テレビ電話１０２は、ユーザが、その他のテレビ電話のユーザと通信するテレビ会議中のときのみ、ユーザの顔を捕捉する。よって、映像認識およびプロファイリングは、ユーザのテレビ会議を妨害せずに実行される。よって、認識およびプロファイリングは、ユーザに気づかれることなく実行される処理である。ユーザがテレビ会議中、顔面認識プロファイリング部１００はユーザの行動に基づき、ユーザの嗜好および設定を生成することができる。別の実施形態では、テレビ電話１０２は、ユーザがテレビ電話１０２を操作しており、必ずしもテレビ会議中とは限らないときにユーザの顔を捕捉する。そのようなものとして、顔面認識プロファイリング部１００は、ユーザテレビ電話１０２間の交信に対応するユーザの行為や挙動データを回収する。
【００１０】
たとえば、テレビ会議呼中、ユーザは特定レベルで音量を設定することができる。この行為は、顔面認識プロファイリング部１００によって記録され、ユーザのプロファイルと対応付けられる。次に、ユーザが戻って別のテレビ会議に発呼すると、ユーザの顔が顔面認識プロファイリング部１００によって認識され、音量はユーザが先の会議呼で設定したレベルに自動的に設定される。
【００１１】
別の例では、テレビ会議呼中、近接発呼者と遠隔発呼者の両方が顔面認識プロファイリング部１００によって認識される。近接ユーザは、顔面認識プロファイリング部１００によって過去に認識されているユーザであってもよい。近接ユーザが遠隔発呼者から電話を受信すると、顔面認識プロファイリング部１００は遠隔発呼者のプロファイルを求めてサーチし、遠隔ユーザとの通信に関する近接ユーザ嗜好をロードする。さらに、遠隔発呼者の嗜好およびデータも、顔面認識プロファイリング部１００による迅速な検索またはアクセスのためにロードすることができる。顔面認識プロファイリング部１００は、会議呼の参加者であってもよい任意数のユーザプロファイルをロードするように構成することができる。プロファイル、データ、および会議呼に参加するユーザの関連情報は、セキュリティ設定などに応じて、会議呼内の他のユーザによって入手可能であってもなくてもよい。
【００１２】
さらに別の例では、発信するテレビ電話呼ログは、ユーザ毎に記録することができる。各ユーザと通信する参加者に関する連絡情報は、自動的に保存される。ユーザが戻って別のテレビ会議呼に参加するとき、呼ログ内で連絡された参加者全員に関する連絡情報を自動的にロードすることができる。一実施形態では、顔面認識プロファイリング部１００は、複数のユーザに関するユーザプロファイルを記憶する。よって、第２のユーザが同一のテレビ電話１００でテレビ会議呼に参加する場合、テレビ電話１００は第２のユーザの顔を認識して、第２のユーザに関連する連絡リストを直ちにロードすることができる。そのようなものとして、顔面認識を実行し、ユーザプロファイルを自動的に生成することによって、最小限のユーザ交信が必要とされる。
【００１３】
図２は、顔面認識プロファイリング部の構成要素および周辺装置を示す。顔面認識プロファイリング部１００は、顔面特徴データベース１０２、ユーザプロファイルデータベース１０４、顔面認識モジュール１０６、ユーザ保守モジュール１０８、プロセッサ１１２、およびランダムアクセスメモリ１１４を含むことができる。
【００１４】
顔面特徴データベース１０２は、ユーザプロファイルデータベース１０４に各ユーザの顔面特徴データを記憶させることができる。一実施形態では、各ユーザは、複数の対応付けられる顔面特徴を有する。別の実施形態では、各ユーザは、顔面特徴データベース１０２に記憶される顔面特徴画像を有する。顔面認識モジュール１０６は、各ユーザと対応付けられる顔面特徴を記憶するための論理を含む。一実施形態では、論理は、ユーザの顔面特徴とカメラ１１０によって捕捉された顔面特徴との比較を含む。所定数の顔面特徴が類似度の閾値を超える場合、捕捉された顔が、捕捉された顔に類似するとみなされる顔面特徴に対応するユーザに属するとして認証される。別の実施形態では、少なくとも１つの顔面特徴が類似度の閾値を超える場合、捕捉された顔が、ユーザの顔の顔面特徴に類似するとみなされる顔面特徴に対応するユーザとして認証される。別の実施形態では、顔面認識モジュール１０６は、アルゴリズムに一致するテンプレートに基づき動作する論理を含む。各々に対して予め決定されたテンプレートは、認識モジュール１０６の一部として構成することができ、差異パーセンテージを判定するために比較される。
【００１５】
既存のユーザとして認識されない場合、新規のユーザおよび関連する顔面特徴を追加することができる。一実施形態では、所定数の顔面特徴が類似度の閾値を超えない場合、捕捉された顔が新たに捕捉された顔面特徴を有する新規ユーザとして追加される。別の実施形態では、少なくとも１つの顔面特徴が類似度の閾値を超えない場合、捕捉された顔が新たに捕捉された顔面特徴を有する新規ユーザとして追加される。
【００１６】
一例では、顔面認識モジュール１０６は、ユーザの５つの顔面特徴（たとえば目、鼻、口、および顎）の画像を顔面特徴データベース１０２に記憶する。別の例では、顔面認識モジュール１０６は、ユーザの各顔面特徴の測定値を記憶する。さらに別の例では、顔面認識モジュール１０６は、ユーザの各顔面特徴の詳細図を記憶する。別の例では、顔面認識モジュール１０６は、ユーザの顔の単独画像を記憶する。別の例では、ユーザが新規ユーザである場合、顔面認識モジュール１０６は新たな顔面特徴データを記憶する。１つまたはそれ以上の既存の顔面認識スキームが、顔面認識を実行するのに利用することができる。
【００１７】
ユーザプロファイルデータベース１０４は、ユーザ嗜好、代替の識別コード、所定の命令、およびその他のユーザ特有データを記憶することができる。ユーザ保守モジュール１０８は、ユーザプロファイリングを実行する論理を含む。一実施形態では、保守モジュールは、ユーザ識別子に基づきユーザプロファイルを抽出する論理を含む。ユーザ識別子は、たとえば、顔面特徴データベース１０２に記憶されるユーザ顔面特徴であってもよい。別の実施形態では、保守モジュール１０８は、ユーザのプロファイル下でユーザ設定を保存する論理を含む。別の実施形態では、保守モジュール１０８は、ユーザ動作をユーザ嗜好として解釈し、ユーザのプロファイル下でユーザ嗜好を保存する論理を含む。別の実施形態では、保守モジュール１０８は、ユーザ動作をユーザ嗜好として解釈し、ユーザのプロファイル下でユーザ嗜好を保存する論理を含む。さらに別の実施形態では、ユーザが既存のユーザプロファイルと対応付けられていない場合、保守モジュール１０８は新規ユーザを追加する論理を含む。
【００１８】
顔面認識プロファイリング部１００は、１つまたはそれ以上の入出力のための周辺装置に接続することができる。たとえば、カメラ１１０は、通信バス１１６を介して顔面認識プロファイリング部と連結される。カメラ１１０は、人の顔を捕えて、ユーザの顔面画像を生成する。一実施形態では、カメラ１１０は、補足画像の事前ソーティングまたは事前処理なしに、データを顔面認識モジュール１０４に供給する。別の実施形態では、カメラ１１０は、人の顔に類似する顔面認識モジュール１０６の画像を単に送信するように構成される。別の例では、キーパッド１２０、マイクロフォン１１８、ディスプレイ１２２、およびスピーカ１２４が、通信バス１１６を介して顔面認識プロファイリング部１００に接続される。他の各種入出力装置が、顔面認識プロファイリング部１００と通信することができる。各種入力装置からの入力は、ユーザの挙動および嗜好を監視し学習するように利用することができる。
【００１９】
一実施形態では、顔面認識プロファイリング部１００は、２つの別個のハウジング内の２つの構成要素に分離される。顔面認識モジュール１０６および顔面特徴データベース１０２は、第１のハウジングに収容される。ユーザプロファイルデータベース１０４およびユーザ保守モジュール１０８は、第２のハウジングに収容することができる。
【００２０】
一実施形態では、顔面認識は、たとえばカメラ１１０を通じてユーザの顔の捕捉画像を受信すること、提供される画像が、顔面特徴データベース１０２内で提供される画像をサーチすることによって認証ユーザに対応することを認証することを含む。ユーザが認識されない場合、ユーザは、捕捉された顔面特徴に基づき新規ユーザとして追加される。捕捉画像の顔面特徴が顔面特徴データベース１０２内の既存ユーザの顔面特徴に対応するか否かの判定は、顔面認識モジュール１０６によって実行される。上述したように、顔面認識モジュール１０６は、捕捉されたユーザの顔と、顔面特徴データベース１０２に記憶される認証ユーザの顔を表す顔面特徴データとを比較するための動作論理を含むことができる。一実施形態では、顔面特徴データベース１０２は、ユーザプロファイルデータベース１０４にプロファイルされた各ユーザに対する顔面特徴データを含む関連データベースを有する。別の実施形態では、顔面特徴データベース１０２は、認証ユーザの顔を表すデータを記憶する読取専用メモリ（ＲＯＭ）参照テーブルであってもよい。
【００２１】
さらに、ユーザプロファイリングは、ユーザ保守モジュール１０８によって実行することができる。別の実施形態では、ユーザプロファイルデータベース１０４は、ユーザ嗜好、事前構成された機能命令、関連許可などを記憶する読取専用メモリである。たとえば、プレビュー挿入切換、ユーザインタフェース嗜好、着信音嗜好、呼履歴ログ、電話帳および連絡先リスト、友達リスト記録、優先アイコン、優先感情アイコン、チャットルームの履歴ログ、ｅメールアドレス、スケジュールなどの設定である。ユーザ保守モジュール１０８は、ユーザプロファイルデータベース１０４上のデータを検索および記憶して、事前構成された命令、嗜好などを更新する。上述したように、ユーザ保守モジュール１０８は、ユーザプロファイルに含まれるユーザの行動を判定する動作論理を含む。
【００２２】
さらに、顔面認識プロファイリング部１００は、顔面認識モジュール１０６およびユーザ保守モジュール１０８とデータをやり取りするコンピュータプロセッサ１１２を含む。コンピュータプロセッサ１１２は、顔面認識モジュール１０６を通じて入力画像を比較することや、ユーザ嗜好、プロファイル、および既存のユーザに関連するその他のデータをユーザ保守モジュール１０８を介して要求することなどの動作を実行する。
【００２３】
図３は、顔面認識およびユーザプロファイリングに基づく顔面認識の処理に関するフローチャートである。一実施形態では、処理は、顔面認識プロファイリング部１００によって実行される。処理３００は、カメラ１１０が、ユーザの顔の画像を捕捉する処理ブロック３０４で始まる。一実施形態では、処理ブロック３０４では、ユーザの顔が、人の顔面形状として認識されない入力画像を廃棄するように構成される顔面認識モジュール１０６によって既に捕捉されている。一実施形態では、カメラ１００は、カメラ１１０がカメラ１１０近傍の対象物を検知する場合にユーザの顔の画像を捕捉するだけである。一実施形態では、カメラ１１０は、カメラ１１０が顔に類似する形状に焦点をあわせているか否かを検知するように構成される。別の実施形態では、カメラ１１０はすべての捕捉データを顔面認識モジュール１０６に送り、そこで顔が検知されているか否かが判定される。その後、処理３００は処理ブロック３０６に続く。
【００２４】
処理ブロック３０６では、顔のスキャン画像を表すデータが、顔面認識モジュール１０６内に構成される論理にしたがい、顔面特徴データベース１０２に記憶される顔面特徴データと比較される。そのようなものとして、判定処理ブロック３０６では、顔のスキャン画像を表すデータが、記憶された顔面特徴データベース１０２を表す顔面特徴データと一致するか否かが判定される。次に、処理３００は処理ブロック３０８に続く。
【００２５】
処理ブロック３０８では、顔のスキャン画像を表すデータが、顔面特徴データベース１０２に記憶される少なくとも１つの基準顔面特徴の画像を表すデータに一致する場合、ユーザ嗜好が電気機器にロードされる。一実施形態では、ユーザプロファイルデータベース１０２に予め設定され記憶されたユーザ嗜好があるか否かが判定される。既にユーザ嗜好が配備されている場合、ユーザプロファイルおよび対応する嗜好が電気機器にロードされる。別の実施形態では、予め決定されたユーザ嗜好がない場合、ユーザプロファイルを生成し保持するためにユーザの次の要求、行動、命令、および入力が回収される。一実施形態では、ユーザ嗜好が自動的に生成される。認識されたユーザの顔に対応する表情、行動、命令などが、ユーザプロファイルデータベースに自動的に回収されて記憶される。各ユーザに関して記憶されるデータは、たとえば、呼履歴ログ、ユーザデータ、ユーザ連絡情報、およびユーザがテレビ電話を利用中に学習されるその他の情報である。ユーザプロファイルは、ユーザ交信の必要なしに生成することができる。次に、処理３００は処理ブロック３１０に続く。
【００２６】
処理ブロック３１０では、顔のスキャン画像を表すデータが、顔面特徴データベース１０２に記憶される少なくとも１つの基準顔面特徴の画像を表すデータに一致しない場合、ユーザは新規ユーザとしてユーザプロファイルデータベース１０４に追加される。ユーザの顔を表す顔面特徴データは、顔面特徴データベース１０２に追加される。さらに、ユーザプロファイルデータベース１０４は、ユーザの顔または顔面特徴に基づきキー入力され得る新たな記録を含む。よって、新規ユーザが追加されるたび、対応付けられる顔面特徴および嗜好を伴う新たな記録が作成される。複数のユーザは、システムにアクセスして、ユーザ特有の顔面特徴に基づきユーザアカウントを確立することができる。
【００２７】
図４Ａ、４Ｂ、４Ｃ、および４Ｄは、顔面認識プロファイリング部１００に連結可能な電子機器の例を示す。一実施形態では、顔面認識プロファイリング部１００は、構成要素が同一ハウジング内に含まれるように電子機器に組み込まれる。別の実施形態では、顔面認識プロファイリング部１００は、電子機器とは別個のハウジングに設けられる。
【００２８】
図４Ａは、顔面認識プロファイリング部１００と交信するパーソナルコンピュータ４０２を示す。パーソナルコンピュータ４０２は、顔面認識プロファイリング部１００によって確定される様々な構造に応じて動作させることができる。一実施形態では、パーソナルコンピュータは、パーソナルコンピュータの各ユーザの捕捉された顔面または顔面特徴の画像を供給するカメラ１１０を含む。上述したように、ユーザプロファイルは、ユーザの顔または顔面特徴に基づき生成し記憶することができる。ユーザがパーソナルコンピュータ４０２と交信すると、新たな設定、嗜好、およびその他のユーザ特有データが、顔面認識プロファイリング部１００によって学習、生成、および記憶される。パーソナルコンピュータ４０２とのその後の交信では、顔面認識プロファイリング部１００はユーザ嗜好を検索し、認識されたユーザとの交信のためにその嗜好をロードする。いったんユーザが認識され、嗜好パラメータがロードされれば、たとえば、フォントサイズ、壁紙画像、優先インターネットダウンロードフォルダなどが、パーソナルコンピュータ４０２によってロードされ提供される。
【００２９】
図４Ｂは、顔面認識プロファイリング部１００と交信する自動窓口機４０４を示す。自動窓口機４０４は、顔面認識プロファイリング部１００によって確定される様々な構造に応じて動作させることができる。一実施形態では、自動窓口機４０４は、自動窓口機４０４の各ユーザの捕捉された顔面または顔面特徴の画像を供給するカメラ１１０を含む。上述したように、ユーザプロファイルは、ユーザの顔または顔面特徴に基づき生成し記憶することができる。ユーザが自動窓口機４０４と交信すると、新たな設定、嗜好、およびその他のユーザ特有データが、顔面認識プロファイリング部１００によって学習、生成、および記憶される。自動窓口機４０４とのその後の交信では、顔面認識プロファイリング部１００はユーザ嗜好を検索し、認識されたユーザとの交信のためにその嗜好をロードすることができる。いったんユーザが認識され、嗜好パラメータがロードされれば、たとえば、たとえば、表示フォントサイズ、音声起動、よく使用するメニュー項目などが自動窓口機４０４によってロードされ提供される。
【００３０】
図４Ｃは、顔面認識プロファイリング部１００と交信するテレビ４０６を示す。テレビ４０６は、顔面認識プロファイリング部１００によって確定される様々な構造に応じて動作させることができる。一実施形態では、テレビ４０６は、テレビ４０６の各ユーザの捕捉された顔面画像または顔面特徴を供給するカメラ１１０を含む。上述したように、ユーザプロファイルは、ユーザの顔または顔面特徴に基づき生成および記憶される。ユーザがテレビ４０６と交信すると、新たな設定、嗜好、およびその他のユーザ特有データが顔面認識プロファイリング部１００によって学習、生成、および記憶される。テレビ４０６との以後の交信では、顔面認識プロファイリング部１００はユーザ嗜好を検索して、認識されたユーザとの交信のためにその嗜好をロードすることができる。いったんユーザが認識され、嗜好パラメータがロードされれば、たとえば、お気に入りのチャンネル、音声嗜好、色、コントラスト、優先音量レベルなどをテレビ４０６によってロードして提供することができる。
【００３１】
図４Ｄは、顔面認識プロファイリング部１００と交信するパーソナルデータアシスタント４０８を示す。パーソナルデータアシスタント４０８は、顔面認識プロファイリング部１００によって確定される様々な構造に応じて動作させることができる。一実施形態では、パーソナルデータアシスタント４０８は、パーソナルデータアシスタント４０８の各ユーザの捕捉された顔面または顔面特徴の画像を供給するカメラ１１０を含む。上述したように、ユーザプロファイルは、ユーザの顔または顔面特徴に基づき生成および記憶することができる。ユーザがパーソナルデータアシスタント４０８と交信すると、新たな設定、嗜好、およびその他のユーザ特有データが顔面認識プロファイリング部１００によって学習、生成、および記憶される。パーソナルデータアシスタント４０８との以後の交信では、顔面認識プロファイリング部１００はユーザ嗜好を検索して、認識されたユーザとの交信のためにその嗜好をロードすることができる。いったんユーザが認識され、嗜好パラメータがロードされれば、たとえば、フォントサイズ、壁紙画像、および優先インターネットダウンロードフォルダなどをパーソナルデータアシスタント４０８によってロードして提供することができる。
【００３２】
図５は、コンピュータネットワーク上で顔面認識プロファイリング部と交信するパーソナルデータアシスタント５０２を含む。一実施形態では、顔面認識プロファイリング部１００は、サーバ５０４に配置される。顔面認識プロファイリング部１００は、域内ネットワーク（「ＬＡＮ」）、広域ネットワーク（「ＷＡＮ」）、インターネット、ケーブル、衛星などのようなネットワーク２１０を通じてサーバ５０４と通信する。パーソナルデータアシスタント５０２は、カメラ１１０などの内蔵撮像装置を有することができる。別の実施形態では、カメラ１００はパーソナルデータアシスタントに接続されるが、同一ハウジング内では一体化されない。
【００３３】
パーソナルデータアシスタント５０２は、顔面認識プロファイリング部１００と通信して、上述するように、ユーザ顔面特徴、ユーザ動作、およびその他のデータを提供することができる。さらに、顔面認識プロファイリング部１００はユーザプロファイルを記憶し、新規および既存のユーザ顔面特徴を認識し、パーソナルデータアシスタント５０２と他のデータをやり取りする。
【００３４】
図６は、顔面認識およびプロファイリングシステム６００のブロック図である。具体的には、顔面認識およびプロファイリングシステム６００は、ユーザ間を区別する顔面認識を利用して、ユーザ行動、命令、情報へのアクセス順序などに基づくユーザプロファイルおよび設定を自動的に生成するために採用することができる。一実施形態では、顔面認識およびプロファイリングシステム６００は、汎用コンピュータまたはその他のハードウェア等価物を用いて実現される。
【００３５】
したがって、顔面認識およびプロファイリングシステム６００は、プロセッサ（ＣＰＵ）１１２、メモリ１１４、たとえば、ランダムアクセスメモリ（ＲＡＭ）および／または読取専用メモリ（ＲＯＭ）、顔面認識モジュール１０６、および各種入力／出力装置６０２、（たとえば、テープドライブ、フロッピードライブ、ハードディスクドライブ、またはコンパクトディスクドライブを含むがそれらに限定されない記憶装置、受信機、送信機、スピーカ、ディスプレイ、たとえばデジタルスチールカメラまたはデジタルビデオカメラで使用される画像捕捉センサ、時計、出力ポート、ユーザ入力装置（キーボード、キーパッド、マウスなど、または音声命令を捕捉するマイクロフォン）を備える。
【００３６】
顔面認識モジュール１０６は、通信チャネルを介してプロセッサ１１２に連結される一つまたはそれ以上の物理的装置として実現可能であると理解すべきである。もしくは、顔面認識モジュール１０６は、一つまたはそれ以上のソフトウェアアプリケーション（または、たとえば、特定用途向け集積回路（ＡＳＩＣ）を用いる、ソフトウェアとハードウェアの組み合わせ）によって表すことができ、そこでソフトウェアは記憶媒体（たとえば、磁気または光学ドライブまたはディスケット）からロードされ、顔面認識およびプロファイリングシステム６００のメモリ１１４内のプロセッサ１１２によって動作させることができる。そのようなものとして、本発明の顔面認識モジュール１０６（関連データ構造を含む）は、コンピュータ読取可能媒体、たとえば、ＲＡＭメモリ、磁気または光学ドライブまたはディスケットなどに記憶することができる。
【００３７】
本明細書では特定の例示的な実施形態および方法を開示したが、当業者にとっては、開示される技術の真正の技術思想および範囲を逸脱せずに上記実施形態および方法を変形および改良できることは、上記開示から明白であろう。開示される他の技術例も多数存在し、それぞれが細部においてのみ互いに異なる。したがって、開示される技術は、添付の請求項と適用法の規則および原則によって要求される範囲にのみ限定されるものと意図される。
【図面の簡単な説明】
【００３８】
【図１】人の顔を撮像するテレビ電話を示す。
【図２】顔面認識プロファイリング部の構成要素および周辺装置を示す。
【図３】顔面認識およびユーザプロファイリングに基づく顔面認識の処理に関するフローチャートである。
【図４】Ａ−Ｄは、顔面認識プロファイリング部と連結可能な電子機器の例を示す。
【図５】コンピュータネットワーク上で顔面認識プロファイリング部と交信するパーソナルデータアシスタントを示す。
【図６】顔面認識およびプロファイリングシステムのブロック図である。
【図１】
2009521186.tif 000003
【図２】
2009521186.tif 000004
【図３】
2009521186.tif 000005
【図４】
2009521186.tif 000006
【図５】
2009521186.tif 000007
【図６】
2009521186.tif 000008
【手続補正書】
【提出日】平成20年6月25日(2008.6.25)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
電気機器用のユーザプロファイリングを提供するための方法であって、
ユーザの顔に焦点を合わせて顔面表示データを捕捉する撮像装置を用いて顔面表示データを捕捉すること、
顔面特徴データベースが顔面表示データと一致するユーザ顔面特徴データを含むか否かを判定すること、
顔面表示データが、顔面特徴データベース内のユーザ顔面特徴データに一致するとき、ユーザ嗜好データを電気機器にロードすること、
顔面表示データが、顔面特徴データベース内のユーザ顔面特徴データに一致しないとき、新規ユーザプロファイルをユーザプロファイルデータベースに追加すること、
を備える方法。
【請求項２】
電気機器とのユーザ交信に基づき、新規ユーザプロファイルに新たなユーザ嗜好データを記憶することを備える、請求項１に記載の方法。
【請求項３】
電気機器とのユーザ交信に基づき、新規ユーザプロファイルに新規ユーザ履歴データを記憶する、請求項１又は２に記載の方法。
【請求項４】
一致するユーザ顔面特徴データに対応する既存のユーザプロファイルをユーザプロファイルデータベースに配置することを備える、請求項１乃至３のいずれか１項に記載の方法。
【請求項５】
ユーザ嗜好データを電気機器にロードすることは、電気機器のメモリモジュールに存在するユーザ既存顔面特徴データをロードすることを含む、請求項１乃至４のいずれか１項に記載の方法。
【請求項６】
顔面特徴データベースが、顔面表示データと一致するユーザ顔面特徴データを含むか否かを判定することは、電気機器内の顔面認識モジュールによって実行される、請求項１乃至５のいずれか１項に記載の方法。
【請求項７】
ユーザ嗜好データおよびユーザ履歴データがユーザプロファイルデータベースに記憶される、請求項１乃至６のいずれか１項に記載の方法。
【請求項８】
ユーザプロファイルデータベースに追加される新たなユーザプロファイルが、顔面表示データに基づき一意に識別可能である、請求項１乃至７のいずれか１項に記載の方法。
【請求項９】
ユーザ嗜好データが音声嗜好、色嗜好、または映像嗜好を含む、請求項１乃至８のいずれか１項に記載の方法。
【請求項１０】
ユーザプロファイリングシステムであって、
顔面表示データを受信する顔面認識モジュールであって、顔面表示データが撮像装置によって補足され、撮像装置がユーザの顔に焦点を合わせて顔面表示データを捕捉する、前記顔面認識モジュールと、
複数のユーザ記録を記憶する顔面特徴データベースであって、複数のユーザ記録がそれぞれ顔面表示データを記憶し、かつ電気機器の複数のユーザにそれぞれ対応する、前記顔面特徴データベースと、
ユーザ嗜好データを電気機器にロードするユーザプロファイリングモジュールであって、顔面表示データが顔面特徴データベース内のユーザ顔面特徴データに一致するとき、ユーザ嗜好データが電気機器のメモリモジュールにロードされ、顔面表示データが顔面特徴データベース内のユーザ顔面特徴データに一致しないとき、ユーザプロファイリングモジュールが新たなユーザプロファイルを作成する、前記ユーザプロファイリングモジュールと、
複数のユーザプロファイルおよび対応するユーザ嗜好データを記憶するユーザプロファイリングデータベースであって、ユーザプロファイルが電気機器の複数のユーザのそれぞれに対応する、前記ユーザプロファイリングデータベースと、
を備えるユーザプロファイリングシステム。
【国際調査報告】
2009521186.tif 000009