(57)【特許請求の範囲】
【請求項１】
デジタル画像取得装置のレンズ、イメージセンサ及びプロセッサを使用して１以上の焦点がずれた顔を含むシーンのデジタル画像を取得する段階と、
デジタル画像処理のための分類器であって焦点がずれた顔にトレーニングされた１以上のセットの分類器を使用することにより、前記デジタル画像の中で前記１以上の焦点がずれた顔を検知する段階であって、前記１以上のセットの分類器は、少なくとも１セットの焦点がずれた顔を含む参照基準に較正される参照パラメータを含む、段階と、
前記１以上の前記デジタル画像内の焦点がずれた顔の１以上のサイズを決定する段階と、
前記デジタル画像内の前記１以上の焦点がずれた顔の前記１以上のサイズに基づいて、前記１以上の焦点がずれた顔に対する１以上のそれぞれの深度を決定する段階と、
近似的に前記決定された１以上の各々の深度で焦点を合わせる前記レンズの１以上のそれぞれの焦点位置を調節する段階と、
前記レンズで、前記１以上の各々調節された焦点位置で焦点を合わせた、前記１以上の焦点がずれた顔の少なくとも１つを含むシーンの１以上のさらなる画像を得る段階と、
を含む顔検知に基づいたデジタル画像取得装置のためのオートフォーカスの方法。
【請求項２】
前記１以上の各々の焦点位置の調節に際して、微細な走査を実行し、前記微細な走査に基づいて、前記１以上の各々の焦点位置を微細に調節することをさらに含む請求項１の方法。
【請求項３】
前記シーンは、前記１以上のセットの顔分類器の使用により検知されなかった、少なくとも１つの焦点がずれた顔を含み、前記方法は、前記１以上のセットの顔分類器の使用により検知されない前記少なくとも１つの焦点がずれた顔を得るためにコントラスト検知走査又は位相検知走査又は両方を適用することをさらに含む請求項２の方法。
【請求項４】
前記１以上の焦点がずれた顔の少なくとも１つは、目領域を含む請求項１の方法。
【請求項５】
前記１以上の焦点がずれた顔の少なくとも１つが、少なくとも１つのしきい値量のサイズを変化させる場合には、前記１以上の各々の焦点位置の少なくとも１つを調節することをさらに含む請求項１の方法。
【請求項６】
前記１以上の焦点がずれた顔の少なくとも１つをトラッキングし、前記トラッキングに基づいて、前記１以上の焦点がずれた顔の前記少なくとも１つのサイズの前記変化を決定することをさらに含む請求項５の方法。
【請求項７】
前記デジタル画像取得装置の絞りを絞ることにより被写界深度を増加させることをさら
に含む請求項１の方法。
【請求項８】
前記１以上の焦点がずれた顔は、それらの異なる決定されたサイズに基づいて近似的に決定された複数の異なる深度にそれぞれ位置した、複数の顔を含む請求項１の方法。
【請求項９】
前記１以上のそれぞれの深度を前記決定することは、前記１以上の決定されたサイズの少なくとも１つに対応する少なくとも１つの平均深度を割り当てることを含む請求項１の方法。
【請求項１０】
前記１以上のそれぞれの深度を前記決定することは、検知された顔を特定の個人が所有していると認識し、特定の顔に対応する、メモリから既知の顔の空間パラメータを呼び出し、決定したサイズ及び前記既知の顔の空間パラメータに対応する深度を決定することを含む請求項１の方法
【請求項１１】
前記１以上の各々の焦点位置を前記調節することは、MEMS(micro-electro mechanical system)部材を使用することを含む請求項１の方法。
【請求項１２】
請求項１から１１のいずれかに記載の方法を実行するために、１以上の焦点がずれた顔を含むシーンのデジタル画像を得るために、レンズとイメージセンサを使用する、プロセッサを有する装置をプログラムするための、その中に取り込まれたコードを有する１以上のプロセッサ読取り可能なメディア。
【請求項１３】
レンズ、イメージセンサ、プロセッサ、及び、請求項１から１１の前記方法のいずれかに従う顔検知に基づいたオートフォーカスの方法を実行するために、前記プロセッサをプログラムするための、その中に取り込まれたコードを有するメモリを含むデジタル画像取得装置。
【発明の詳細な説明】
【背景技術】
【０００１】
今日のディジタル・カメラは多くの場合オートフォーカス機構を含む。2種類の従来のオートフォーカス機構は、コントラスト検知オートフォーカス及び位相検知オートフォーカスである。
【０００２】
（コントラスト検知オートフォーカス）
コントラスト検知オートフォーカスでは、カメラ・レンズは、最も接近している焦点ポイントに最初に位置する。レンズは漸増的に移動し、イメージシャープネスは各ステップで評価される。シャープネス中のピークに到達する場合には、レンズ移動が止められる。コントラスト検知オートフォーカスは、従来のデジタルスチルカメラ又はDSC、カムコーダー・カメラ電話、ウェッブカメラ及び偵察カメラの中で使用される。それらはピクセル・レベル測定及び微細な走査に基づいて、非常に正確である。それらは、フレーム内のいかなる場所にも焦点を合わせることが可能である。しかしながら、それらは、ただ一般的にフレームの中心のまわりで焦点を合わせる。しかしながら、それらが焦点範囲をスキャンすることを含むので、コントラスト検知オートフォーカス機構は遅い。さらに、それらは、獲得した被写体のトラッキングを可能にしない。被写体が前又は後焦点へ移動したかどうか判断するために、さらなる走査が必要とされ、焦点探索(hunting)として知られている。コントラスト検知オートフォーカス機構は一般的に低コストで粗い。
【０００３】
（位相検知オートフォーカス）
位相検知オートフォーカスは、一般に、第2の鏡、セパレーター・レンズ及び焦点センサーを含む特別のオプトエレクトロニクスを含む。セパレーター・レンズは、レンズの反対面から来る光をオートフォーカス・センサーへ導く。2つのイメージ間の位相差が測定される。レンズは、位相差に相当する距離へシフトする。位相検知オートフォーカスは従来の一眼レフカメラ又はSLRで使用される。これらは、位相差を必ずしもあまり正確に見積ることが可能であるとは限らないため、コントラスト検知オートフォーカス機構ほど一般に正確ではない。それらは、フレームの内の固定されたポイントの中の焦点のみを得ることが可能であり、これらは、カメラ・ユーザーによって一般的にマニュアルで示される。単一の測定によって被写体の相対位置を検知することが可能であるので、それらは一般的に速い。それらは、被写体が前又は後焦点に移動したかどうかそれが判断することが可能であるときトラッキングを可能にするが、ある焦点ポイントから他のポイントまで跳ぶことだけである。位相検知オートフォーカス機構は一般的に高価で脆弱である。図1は、位相検知オートフォーカス機構が機能する手法を示し、すなわち、位相差は中央の図形のように0である場合には、その後、被写体は焦点が合っていると理解される。
【０００４】
コントラスト検知及び位相検知オートフォーカス機構のどちらかの著しい欠点がない改善されたオートフォーカス機構を持つことが望まれる。米国特許公開番号2010/0208091は、カメラによって取り込まれたイメージの中の顔を検知し、顔のサイズを計算するカメラについて記述する。それは、多くの予め格納された顔サイズの中から計算された顔サイズに近いものを選択する。それは、選択され予め格納された顔サイズに関連している予め格納されたレンズ焦点位置を検索する。それは、ディジタル・カメラの移動可能なレンズ系に、検索され予め格納されたレンズ焦点位置により与えられた最終の焦点位置へ移動するように信号を送る。米国2010/0208091に記述された技術に関する問題は、それらの不明瞭で焦点がずれた状態により、顔の非検知の著しく高い率を有することである。もし、さらなる向上が提供されなければ、これは不満足に遅いイメージ取得プロセスにつながるだろう。
【発明の概要】
【０００５】
オートフォーカスの方法は顔検知に基づいたデジタル画像取得装置のために提供される。方法は、レンズ、イメージセンサ及び装置のプロセッサの使用を含む。デジタル画像は、焦点がずれた顔及び/又は部分的な顔を１以上含むシーンに得られる。方法は、焦点がずれた顔に向けられた１以上セットの分類器(classifier)の適用により、デジタル画像内の１以上の焦点がずれた顔及び/又は部分的な顔を検知することを含む。焦点がずれた顔及び/又は部分的な顔よりそれぞれの１つの１以上のサイズが、デジタル画像内で決定される。それぞれの１以上の深さは、デジタル画像内の、より多くの顔及び/又は部分的な顔のうちの１つの１以上のサイズに基づいて、１以上の焦点がずれた顔及び/又は部分的な顔に対して決定される。レンズの１以上のそれぞれの焦点位置が、近似的に１以上の決定されたそれぞれの深さで焦点を合わせるために調節される。１以上のさらなるイメージが、１以上のそれぞれ調整された焦点位置で合焦したレンズでの１以上の顔及び/又は部分的な顔の少なくとも１つを含むシーンに得られる。
【０００６】
１以上のそれぞれの焦点位置の調節に際して、方法は、微細な走査を実行すること、及び、微細な走査に基づいて、１以上のそれぞれの焦点位置を微細に調節することをさらに含んでよい。シーンは、顔分類器の１以上のセットの適用により検知されなかった、少なくとも１つの焦点がずれた顔及び/又は部分的な顔を含んでよく、そして、そこで、方法は、焦点がずれた顔に向けられた１以上のセットの分類器の適用により検知されなかった、少なくとも１つの焦点がずれた顔又は部分的な顔又は両方を得るために、コントラスト検知走査又は位相検知走査又は両方を適用することをさらに含む。
【０００７】
１以上の部分的な顔は目領域を含んでよい。
【０００８】
１以上の顔及び/又は部分的な顔の少なくとも１つが、少なくともしきい値量のサイズを変更する場合には、方法は１以上のそれぞれの焦点位置の少なくとも１つを調節することを含んでよい。
【０００９】
方法はさらに顔及び/又は部分的な顔の少なくとも１つを追跡し、トラッキングに基づいた１以上の顔及び/又は部分的な顔の少なくとも１つのサイズの中の変化の決定を含んでよい。
【００１０】
方法はさらに、デジタル画像取得装置の絞りを絞ることにより、被写界深度を増加させることを含んでよい。
【００１１】
１以上の顔及び/又は部分的な顔は、それらの異なる決定したサイズに基づいて近似的に決定された、複数の異なる深度にそれぞれ位置した、複数の顔及び/又は部分的な顔を含んでよい。
【００１２】
１以上の深度の決定は、１以上の決定したサイズの少なくとも１つに対応する少なくとも１つの平均深度を割り当てることを含んでよい。
【００１３】
１以上の深度の決定は、検知された顔又は部分的な顔又は両方を特定の個人が所有していることと認識すること、特定の顔又は部分的な顔又は両方に対応するメモリから既知の顔又は部分的な顔の空間パラメータを呼び出すこと、及び、決定したサイズ及び既知の顔又は部分的な顔の空間パラメータに対応する深度を決定することを含んでよい。
【００１４】
１以上のそれぞれの焦点位置の調節はMEMS(微小電気機械システム)部材を利用してよい。
【００１５】
ここに記述された方法のうちのいかなるものを実行するために、プロセッサのプログラムのためにそこに収録されたコードを有する、１以上のプロセッサ読取り可能なメディアも提供される。
【００１６】
レンズ、イメージセンサ、プロセッサ及びここに記述された方法のうちのいかなるものも実行するために、プロセッサのプログラムのためにそこにコードを取り込むメモリを含むデジタル画像取得装置も提供される。
【図面の簡単な説明】
【００１７】
【図１】図1は、従来の位相検知オートフォーカス機構を示す。
【図２】図2Ａは、特定の実施形態に従うデジタル画像取得装置のレンズのシャープネス対焦点位置のプロットである。図2Ｂは、焦点がずれ、そしてまだ、検知された顔領域のまわりの顔検知ボックスを有する顔を含むデジタル画像を図示する。
【図３】図3Ａ-3Ｂは、各々特定の実施形態に従って検知されるシャープな顔及び焦点がずれた顔を含むデジタル画像の第1の例をそれぞれ図示する。
【図４】図4Ａ-4Ｂは、各々特定の実施形態に従って検知されるシャープな顔及び焦点がずれた顔を含むデジタル画像の第2の例をそれぞれ図示する。
【図５】図5は、シャープな顔及び焦点がずれた顔を含むデジタル画像を示す。
【図６】図6は、特定の実施形態に従う方法を図示するフローチャートである。
【図７】図7は、顔サイズに基づいた焦点距離の計算を示す。
【図８】図8Ａ-8Ｄは、相対的にシャープな顔8Ａ及び8Ｃ、及び、相対的に焦点がずれた顔8Ｂと8Ｄを含むデジタル画像を図示する。
【図９】図9は、特定の実施形態に従ってディジタル・カメラ・イメージ・パイプラインを示す。
【発明を実施するための形態】
【００１８】
被写体が焦点をずれて移動する場合には、通常のコントラスト検知オートフォーカスは遅く探索する。コントラスト検知オートフォーカスは、不明瞭な顔が検知されない場合には、米国2010/0208091により提供されたプロセスを、しばしば遅くしすぎることがあった。焦点を合わせるスピードを上げて、かつ、連続的なオートフォーカスにおいて焦点ハンティングを低減するために顔検知を使用する方法が提供される。焦点がずれた顔及び/又は部分的な顔に1以上のセットのトレーニングされた分類器を備えることにより、顔に焦点が合っていない場合さえ、非常に信頼できる顔検知がまず第1に提供される。例えば、3セットの顔分類器が備わってよい。1つ目は、シャープな顔にトレーニングされ(trained)、他のものは多少不明瞭な顔にトレーニングされ、そして、3つ目は、さらに不明瞭であり焦点がずれた顔にトレーニングされる。分類器セットの異なる数がトレーニングされ使用されてよい。この有利な技術は、米国2010/0208091の技術より、はるかに少数の非検知イベントを行ない、より速く、より信頼できるイメージ取込プロセスに結びつく。特に、均一に照らされるかもしれないし、照らされないかもしれないし、前に面し、はっきりと焦点を合わせた顔分類器のトレーニングによる顔検知は、本出願の譲受人により、広く研究されており開発されている。例えば、米国特許番号7,362,368、7,616,233、7,315,630、7,269,292、7,471,846、7,574,016、7,440,593、7,317,815、7,551,755、7,558,408、7,587,068、7,555,148、7,564,994、7,565,030、7,715,597、7,606,417、7,692,696、7,680,342、7,792,335、7,551,754、7,315,631、7,469,071、7,403,643、7,460,695、7,630,527、7,469,055、7,460,694、7,515,740、7,466,866、7,693,311、7,702,136、7,620,218、7,634,109、7,684,630、7,796,822、及び、米国特許公開番号米国2006-0204034、米国2007-0201725、米国2007-0110305、米国2009-0273685、米国2008-0175481、米国2007-0160307、米国2008-0292193、米国2007-0269108、米国2008-0013798、米国2008-0013799、米国2009-0080713、米国2009-0196466、米国2008-0143854、米国2008-0220750、米国2008-0219517、米国2008-0205712、米国2009-0185753、米国2008-0266419、米国2009-0263022、米国2009-0244296、米国2009-0003708、米国2008-0316328、米国2008-0267461、米国2010-0054549、米国2010-0054533、米国2009-0179998、米国2009-0052750、米国2009-0052749、米国2009-0087042、米国2009-0040342、米国2009-0002514、米国2009-0003661、米国2009-0208056、米国2009-0190803、米国2009-0245693、米国2009-0303342、米国2009-0238419、米国2009-0238410、米国2010-0014721、米国2010-0066822、米国2010-0039525、米国2010-0165150、米国2010-0060727、米国2010-0141787、米国2010-0141786、米国2010-0220899、米国2010-0092039、米国2010-0188530、米国2010-0188525、米国2010-0182458、米国2010-0165140、及び、米国2010-0202707に記述される。
【００１９】
焦点がずれた顔及び/又は部分的な顔の検知の後に、技術は、被写体が位置する距離を決定するために、顔サイズに依存することを含んでいる。すなわち、レンズの焦点位置が、図2Aで図示されたシャープネス・ピークの値で最良にシャープなイメージを提供するよう配置されない場合には、その後、図2Bで図示されたように、被写体の顔は焦点がずれるだろう。ここに提供されるような焦点がずれた顔を検知するようにトレーニングされた有利な分類器で、被験者の顔に枠をはめる長方形により図示されたように、図2Bで図示された不明瞭な顔はそれにもかかわらず検知される。顔検知は、顔サイズの変化の分析(より大きい＝前に、より小さい=後ろに)により、焦点に向かって、又は、離れて被写体が移動したかどうか識別している。これは、顔検知が、それがカメラから、より近く/より遠く移動させるように顔を追跡することを可能にする。
【００２０】
図3A-3B、各々特定の実施形態に従って検知される、シャープな顔及び焦点がずれた顔を含むデジタル画像の第1の例をそれぞれ図示する。図3Aにおいて、被写体に対する距離は1メートルである。また、焦点面に対する距離は1メートルである。したがって、顔はシャープである。また、焦点を合わせる部材は移動される必要はない。図3Bにおいて、被写体に対する距離は1メートルであり、しかし、焦点面に対する距離は0.2メートルであり、それで、顔は不明瞭であるが、不明瞭な顔(被験者の顔を枠にはめる長方形により示されたように)を検知するようにトレーニングされた分類器の使用により、さらに検知された。焦点を合わせる部材は、図3Bの不明瞭な顔の検知に際して、検知された顔のサイズに基づいて、1メートルであるような顔に対する距離の推定のために、0.2メートルの代わりに1メートルで焦点を合わせるために、これらの実施形態に従って移動される。
【００２１】
図4A-4Bは、各々特定の実施形態に従って検知されるシャープな顔及び焦点がずれた顔を含むデジタル画像の第2の例をそれぞれ図示する。図4Aにおいて、被写体に対する距離は0.5メートルであり、また、焦点面に対する距離は0.5メートルであり、したがって、顔はシャープであり、焦点を合わせる部材は移動される必要はない。図4Bにおいて、被写体に対する距離は0.5メートルであり、しかしながら、焦点面に対する距離は0.25メートルであり、したがって、顔は不明瞭であるが、不明瞭な顔を検知するようにトレーニングされた分類器の使用により、さらに検知された。焦点が図3Bの中でのように、遠くにないことに注意し、したがって、分類器の異なるセットは、図3Bの顔を検知するために使用されるものより、不明瞭でない顔を検知するようにトレーニングされて使用されてもよい。検知された顔のサイズに基づいた0.5メートルであるような顔に対する距離の推定により、0.25メートルの代わりに0.5メートルで焦点を合わせるために、焦点を合わせる部材は、図4Bの不明瞭な顔の検知に際して、これらの実施形態に従って移動されるだろう。
【００２２】
一旦、被写体に対する距離が、図7で提供される計算式に例えば基づくルックアップテーブルに従って計算又は評価により決定されれば、カメラの焦点を合わせる部材は、焦点範囲全体をスキャンする必要なしに、それはそれに対応する距離に焦点を合わせさせる位置に直接移動されてよい。更に、連続モードにおいて、顔サイズの中の変化の測定により、被写体がフロント又はバックフォーカスの方向に移動したかどうかは決定されてよい。これは、焦点探索を低減して、正しい方向に焦点部材の動作をこのように可能にする。
そのプロセスは、例えば、米国特許、7,747,155、7,729,603、7,729,601、7,702,226、7,697,834、7,697,831、7,697,829、7,693,408、7,663,817、7,663,289、7,660,056、7,646,969、7,640,803、7,583,006、7,565,070、7,560,679、7,555,210、7,545,591、7,515,362、7,495,852、7,477,842、7,477,400、7,403,344、7,359,131の、7,359,130、7,345,827、7,266,272、7,113,688及び/又は6,934,087、7,769,281の何れかに述べられたように、MEMsの技術の利用により、まださらに促進することが可能である。この考えは、そのサイズが予め知られていなくても、識別し、追跡することが可能である任意の物体に一般化することが可能である。
【００２３】
言及されるように、非常に有利な特徴が備わり、それにより、焦点がずれた場合さえ、顔検知プロセスはそれによって顔上で確実に実行される。これは、それらに実際に焦点を合わせ始める前に顔を検知するために、ここに記述された実施形態に従う有利なオートフォーカス技術を可能にする。一旦不明瞭な焦点がずれた顔が検知されれば、概算の距離は被写体に対して計算されるかもしれない。人間の顔がサイズにおいて相当に変化しないので、これは可能である。さらなる精度は顔認識の使用により提供されてよく、それによって、特定人物の顔は、データベースに格納された人の他の顔データとの比較により、又は、マニュアル・ユーザー指示、又は、１以上の写真が、同一人物に最近撮られた場合には、これらの組み合わせ、及び、他の顔認識技術により認識される。その後、その人の特に知られている顔サイズを使用することが可能である。
【００２４】
被写体に対する距離は、レンズの焦点距離(これが35mmの同等物でない場合には、センサー・サイズ)を考慮にさらに入れることにより計算してよい。被写体に対する距離が既知の場合には、焦点を合わせる部材は付加的な走査なしで対応する位置に直接移動されてよい。その後、微細なコントラスト検知走査だけが、その距離のまわりで任意に実行される。顔が大きすぎる、及び/又は、単に部分的に検知された場合には、コントラストは、顔領域上に、又は顔の目領域上で測定される。これはコントラストの計算のために計算上の負担を軽減するのに有利である。ビデオモードにおいて、焦点が新しい顔に達せられるごとに、同じことは実行されてよい。一旦焦点がある顔に達せられれば、顔サイズにおける変化は特定の実施形態に従ってモニターされる。変化が重要でない場合、アルゴリズムは顔長方形上(又は目領域又は他の部分的な顔領域)にコントラストを測定し、これがある値より下に落ちない場合には、焦点位置は調節されない。反対に、コントラストが落ちるが、顔サイズが変化しない場合には、微細に再び焦点を合わせることは現在の焦点距離のまわりで行われてよい。顔サイズがあるマージン以上の変更が分かる場合には、被写体が前又は後焦点の中で移動したかどうか判断するために、新しいサイズは古いサイズと比較される。これに基づいて、焦点が再び得られるまで、焦点を合わせる部材は適切な方向(後又は前)に向かって移動される。有利に、焦点トラッキングは探索(hunting)なしで提供される。例えば、顔サイズが増加している場合には、被写体が前焦点に移動したと判定され、したがって、それがより接近して焦点を合わせるように、焦点を合わせる部材は移動される。
【００２５】
予め言及されたように、この方法は、既知のサイズの任意の物体に一般化することが可能である。例えば、顔検知はペット検知のために変更することが可能である。更に、方法は未知のサイズの物体に一般化されるかもしれない。一旦、正常なコントラスト検知及び/又は、位相検知アルゴリズムを使用して、焦点がある物体上で得られれば、その物体は、サイズにおけるその変化に関して追跡しモニターすることが可能である。方法は、物体が、より大きくなるか、より小さくなるか、そして、どのように多いか判断することを含み、連続的な焦点合わせは未知のサイズの物体にさえ探索せずに提供される。
【００２６】
シーンが図5で図示されるような複数の顔を含んでいる場合には、フレーム中の複数の顔が検知されてよい。その後、これらの顔の各々のサイズに対応する距離は計算される。距離はソートされ、複数の顔のために格納される。分割統治スタイル探索は焦点距離にわたって実行されてよい。各ステップでは、COC直径が、レンズ口径を与えられた距離、焦点距離及び焦点距離の各々のために計算されてよい。１つの実施形態において、全体的なシャープネスの測定はこれらの直径を与えられた複数の顔にわたって測定されてよい。これらの探索の結果は、写真中のすべての顔にわたって理論上シャープネスを最大限にする焦点距離になるだろう。レンズは、その距離で直接焦点を合わせるだろう。また、必要であれば、微細なスキャン・シーケンスはより多くの精度を保証するために行うことが可能である。さらに自動露出技術と共にこの技術を適用することができ、その結果、十分な焦点深度又はDOFが入手可能でなければ、オートフォーカス又はAFアルゴリズムは、DOFを増加させるために絞りを絞る決定することが可能である。他の多くのオプションが利用可能である、例えば、シャープな顔の合成イメージは多数のイメージの迅速なキャプチャーにより提供されてよい。計算された焦点位置の各々で取り込まれた1つのイメージ、又は、顔に焦点を合わせられた場合には、ユーザーは選択してもよく、又は、最大の顔は焦点を合わせられてよい。顔の重みを加えることは上に引用された前の出願で説明される。
【００２７】
図6は、特定の実施形態に従う方法を図示するフローチャートである。関心領域又はROIは602で入力される。ROIが顔かどうかは604で決定される。そうでない場合には、その後、606で、一定のステップを備えた反復の探索は最良のグレードのために実行される。顔が検知される場合には、それが新しい顔かどうか、608で決定される。そうでない場合には、その後、610で、顔サイズは、予め決定された顔サイズと同じか、又は、接近しているかどうか決定される。それがそうである場合には、その後、ピント調整は必要ではないが、予め検知された顔のサイズがサイズを変更したと判定される場合には、その後、顔の距離に対する粗い焦点は612で実行される。検知された顔が608の新しい顔であるとわかる場合、顔の距離に対する粗い焦点は612で実行される。614で、シャープネス・グレードが計算されてよい。614で算出されたグレードがOKであると判定される場合には、616で、その後プロセスは終了し、しかし、グレードがOKでない場合には、その後、現在の距離前後の微細な再焦点合わせが、618で実行される。
【００２８】
図7は、被写体に対する距離の計算を示す。被写体に対する距離は、ピクセル中のイメージ分解能、及びこの実施形態中の35mmの相当焦点距離に比例し、検知された顔のピクセル中のサイズに反比例する。150/36の乗数がさらにある。図8A-8Dは、図7で図示された計算に基づいて、物体/被写体に対し、計算されたか推定された距離を各々示す左のテーブルの第1のラインを伴う顔及び焦点深度の異なる距離の例を単に表わす。
【００２９】
ディジタル・カメラ・イメージ・パイプラインは図9で図示される。ハードウェア実装による加速はさらに速い顔検知を得るために使用されてもよい。
【００３０】
ここに記述された実施形態に従う技術は、多くのカテゴリーに高く成し遂げる。例えば、それは速く、非常に低い電力を必要とし、非常に低いモーター摩耗をもたらす。ビデオモードにおいて、それは、被写体が前又は後焦点の中で移動したかどうか知っている。したがって、それは探索する必要はない。この特徴は、DSC及びカメラ電話のためのムービーモードにおける連続的なオートフォーカスを可能にし、それは現在の技術において利用可能でない。更に、技術は付加的なハードウェアを要求しない。したがって、実装することは安く、それは頑丈で(任意の落下試験にも合格する)、いかなる方法で焦点の品質を落とさずに、これをすべて行う。さらに、それは非常に正確である。様々な深度に位置する多数の顔の焦点合わせをカメラに可能にするマルチ顔オートフォーカスも提供される。ここに記述した実施形態に従うマルチ顔AFでは、これは顔のサイズの評価、及び、顔の各々に対する距離の計算、及び、その後、上に記述されるようにこれらのすべての顔にわたって、又は他の方法でシャープネスを最大限にする仮想焦点距離を決めることにより行うことが可能である。その後、さらに、焦点範囲をスキャンする、又は、イメージ中の多数の領域上のシャープネスを測定する必要なしで、合焦はほとんど即座に達成される。すなわち、それらがともに、フレームの大きな領域をカバーする場合には、これは他の方法で非常に遅くなりえる。
【００３１】
好ましい実施形態によってここに実行されるかもしれない、及び、それは上に記述されたかもしれない方法において、動作は選択された印刷上のシーケンスに記述された。しかしながら、シーケンスは選択され、したがって、印刷の便宜のために配列され、特に順序が明らかに述べられるかもしれない場合、又は、ここで当業者は特に順序が必要であると考えるかもしれない場合を除いて、動作を実行するための任意の特に順序も意味するようには意図されない。
【図１】
0006027005.tif 000002
【図２Ａ】
0006027005.tif 000003
【図６】
0006027005.tif 000004
【図７】
0006027005.tif 000005
【図２Ｂ】
0006027005.tif 000006
【図３Ａ】
0006027005.tif 000007
【図３Ｂ】
0006027005.tif 000008
【図４Ａ】
0006027005.tif 000009
【図４Ｂ】
0006027005.tif 000010
【図５】
0006027005.tif 000011
【図８Ａ】
0006027005.tif 000012
【図８Ｂ】
0006027005.tif 000013
【図８Ｃ】
0006027005.tif 000014
【図８Ｄ】
0006027005.tif 000015
【図９】
0006027005.tif 000016