(57)【要約】【課題】無駄なメモリ消費を抑制し、次の撮影までのタイムラグを低減しつつ、最適な顔画像の撮影を行うことができる撮像装置を提供する。【解決手段】撮像装置１００は、動画像の取得および静止画像の撮影を行う撮像部７０と、取得した動画像から顔部分を検出する顔検出部３０と、顔部分についてオートフォーカスを実行する合焦制御部２０と、オートフォーカスを実行した際に、顔部分について品質に関する第１の評価値を算出する最適顔評価部４０と、第１の評価値が所定の閾値以上である場合、撮像部７０に静止画像の撮影を指示する撮影制御部５０とを有する。【選択図】図１
2009177456.tif 000002
【特許請求の範囲】
【請求項１】
動画像の取得および静止画像の撮影を行う撮像部と、
取得した前記動画像から顔部分を検出する顔検出部と、
前記顔部分についてオートフォーカスを実行する合焦制御部と、
前記合焦制御部が前記顔部分についてオートフォーカスを実行した際に、前記顔部分について品質に関する第１の評価値を算出する評価値算出部と、
前記第１の評価値が所定の閾値以上である場合、前記撮像部に前記静止画像の撮影を指示する撮影制御部と、
を有する撮像装置。
【請求項２】
請求項１に記載の撮像装置であって、
前記撮影制御部は、前記第１の評価値が所定の閾値未満である場合、前記評価値算出部に対して、前記第１の評価値の算出以降の前記顔部分について、品質に関する第２の評価値を算出させる
撮像装置。
【請求項３】
請求項２に記載の撮像装置であって、
前記撮影制御部は、１回のシャッター押下の検出に基づいて、前記第１の評価値と前記第２の評価値との算出、および前記静止画像の撮影指示を実行する
撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタルカメラなどの撮像装置に関し、特に、被写体が目を閉じていたりして顔の表情が適切な撮影品質となっていない場合には、撮影操作を行っても静止画像の撮影動作を実行せず、その後適切な撮影品質となった時点で撮影を実行する撮像装置に関する。
【背景技術】
【０００２】
デジタルカメラなどの撮像装置は、単体としてまた携帯電話機の付加機能として広く普及しており、近年は手軽に撮影を行うための各種機能を有するカメラが多く提案されている。それらの中には、画像認識技術を応用して被写体の顔を認識し、更に、被写体が目を閉じているか否かを識別することができる撮像装置（例えば、特許文献１参照）などがある。
【０００３】
例えば、特許文献１に開示された撮像装置によれば、撮影した画像のうち、被写体が目を閉じているような画像を削除し、適切に撮影された画像のみを保存することができる。
【０００４】
【特許文献１】特開２００６‐２５４２２９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記従来の撮像装置は、撮影後の画像データについて顔の認識等を行うものであり、被写体が目を閉じているか否かにかかわらず、データ量の大きな静止画像を一旦記録するという撮影自体は必ず実行されるため、無駄なメモリ消費が生じることがあった。また、撮影や顔認識に係る処理量が膨大となることに伴い、撮影しなおす場合にも次の撮影までに時間がかかり（タイムラグ）、シャッターチャンスを逃してしまうこともあった。更に、被写体が目を閉じていた画像の場合の再撮影は操作者の任意操作を伴うものであり、適切な顔画像を取得するまでの撮影動作が自動化されていなかった。
【０００６】
本発明は、上記従来の事情に鑑みてなされたものであって、無駄なメモリ消費を抑制して次の撮影までのタイムラグを低減しつつ、最適な顔画像の撮影を行うことができる撮像装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するために、本発明の第１の撮像装置は、動画像の取得および静止画像の撮影を行う撮像部と、取得した前記動画像から顔部分を検出する顔検出部と、前記顔部分についてオートフォーカスを実行する合焦制御部と、前記合焦制御部が前記顔部分についてオートフォーカスを実行した際に、前記顔部分について品質に関する第１の評価値を算出する評価値算出部と、前記第１の評価値が所定の閾値以上である場合、前記撮像部に前記静止画像の撮影を指示する撮影制御部と、を有する。
【０００８】
上記構成によれば、顔部分の品質に関する評価値（例えば、目瞑りなし、笑顔、顔が正面を向いている等の状態に依存する値）を算出し、評価値が所定条件を満たした場合にのみ撮影指示を行うため、撮影時における無駄なメモリ消費を抑制し、最適な顔画像の撮影を行うことができる。また、オートフォーカスを実行した際に顔の評価値を算出するので、速い処理速度でユーザの所望の画像を撮像可能である。
【０００９】
また、本発明の第２の撮像装置は、前記撮影制御部が、前記第１の評価値が所定の閾値未満である場合、前記評価値算出部に対して、前記第１の評価値の算出以降の前記顔部分について、品質に関する第２の評価値を算出させる。
【００１０】
上記構成によれば、第１の評価値が所定条件を満たしていない場合には、改めて顔部分の抽出は行わず、動画像から抽出した顔部分（ただし画像としては第１の評価値の算出以降の現在の画像）それぞれについて再度評価値を算出する。これにより、被写体の顔画像に係る撮影品質が良好な状態となるのを待って撮影を実行することができる。さらに、自動的に再評価を行うので、再評価に係る処理を迅速に行うことができる。
【００１１】
また、本発明の第３の撮像装置は、前記撮影制御部が、１回のシャッター押下の検出に基づいて、前記第１の評価値と前記第２の評価値との算出、および前記静止画像の撮影指示を実行する
【００１２】
上記構成によれば、非常に単純なユーザ操作で自動撮影できるため、ユーザの利便性が向上する。
【発明の効果】
【００１３】
本発明によれば、無駄なメモリ消費を抑制し、次の撮影までのタイムラグを低減しつつ、最適な顔画像の撮影を行うことができる。
【発明を実施するための最良の形態】
【００１４】
以下、本発明の実施形態における撮像装置について、図面を用いて詳細に説明する。
【００１５】
本発明の実施形態における撮像装置としては、デジタルカメラ、デジタルビデオカメラ、携帯電話装置など、様々な撮像機能を有する電子機器が考えられる。
【００１６】
図１は、本発明の実施形態のおける撮像装置の概略構成の一例を示すブロック図である。図１に示す撮像装置１００は、主に、顔検出条件設定部１０、合焦制御部２０、顔検出部３０、最適顔評価部４０、撮影制御部５０、記録制御部６０、撮像部７０を有して構成される。
【００１７】
顔検出条件設定部１０は、後述する評価値の基準値ｆ０の設定を行う。
【００１８】
顔検出部３０は、プレビュー画像について被写体の顔部分を検出し、顔領域を抽出する。顔部分の認識は公知の画像処理手法を用いてよい。
【００１９】
合焦制御部２０は、被写体に対応するように焦点を合わせる（オートフォーカスを実行する）オートフォーカス機能部である。この場合、被写体の顔部分にオートフォーカスを実行することが可能である。
【００２０】
最適顔評価部４０は、被写体の顔画像の撮影品質に係る判定を行って最適顔の検出および評価を行う。ここで、撮影品質に係る判定とは、目の開閉や笑顔の有無、顔の向き等の判定項目について、被写体の顔画像が撮影に最適であるか否かを判定することをいう。また、最適顔とは、例えば、判定項目が目の開閉である場合、被写体が目を開いていて撮影に最適な顔の状態をいう。尚、最適顔の検出に係る判定項目の選択や判定基準の設定などは公知の手法を用いてかまわない。
【００２１】
また、最適顔評価部４０は、顔画像が撮影に最適であるか否かを評価値により評価する。評価値の具体例および評価方法については後述する。このように、最適顔評価部４０は、顔部分について、品質に関する評価値を算出する評価値算出部としての機能を有する。尚、上記の評価は、合焦制御部２０が顔部分についてオートフォーカスを実行した際に行う。
【００２２】
撮影制御部５０は、最適顔評価部４０の評価結果に基づいて、撮影可否の指示および最適顔評価部４０での再評価の指示を行う。例えば、評価値が所定の閾値以上である場合、撮像部７０に静止画像の撮影を指示する。また、例えば、最適顔評価部４０に対して、評価値が所定の閾値未満である場合、前回の評価値である第１の評価値の算出以降の顔部分について、品質に関する第２の評価値を算出させる。また、撮影制御部５０は、１回のシャッター押下の検出に基づいて、上記評価値の算出および静止画像の撮影指示を実行することが可能である。
【００２３】
記録制御部６０は、撮影した画像の記録に係る制御を行う。
【００２４】
撮像部７０は、撮影制御部５０の指示に基づいてデジタル画像（ここでは静止画像）の撮像を行う。また、プレビュー画像としての動画像の取得を行なう。
【００２５】
次に、撮像装置１００の撮像動作の一例について説明する。
図２は、撮像装置１００の撮像動作手順を示すフローチャートである。
【００２６】
まず、撮像装置１００に対する所定の操作を図示しない操作部が受け付けると、図示しない表示部がプレビュー画像の表示が開始する（ステップＳ１０１）。
【００２７】
続いて、顔検出条件設定部１０が、複数の顔画像が撮影に最適であるか否かの評価値に対する基準値ｆ０を設定する（ステップＳ１０２）。ここで、ｆ０とは、任意のプレビュー画像において検出される顔領域の総数（Ｍ０）に占める最適顔の数（Ｍ１）の割合である評価値ｆ＝Ｍ１／Ｍ０についての判定基準となる数値である。なお、プレビュー画像の表示開始前に、基準値ｆ０を予め設定しておいてもよい。
【００２８】
続いて、顔検出部３０が、プレビュー画像について顔領域の抽出とその顔領域の抽出数Ｍ０の集計を行う（ステップＳ１０３）。
【００２９】
ここで、図３は撮像時におけるプレビュー画像の表示例を模式的に示す図である。プレビュー画像３０１において、４人の被写体がいる場合、顔検出部３０はこれら被写体の顔領域３０２を抽出する。
【００３０】
続いて、図示しない操作部が、撮像装置１００の操作者によるシャッター押下動作を受け付ける（ステップＳ１０４）。
【００３１】
続いて、合焦制御部２０が、合焦制御動作（オートフォーカス）を実行する（ステップＳ１０５）。この際、顔領域、つまり顔部分に対して合焦制御を実行する。
【００３２】
合焦制御が可能であった場合はステップＳ１０７に進み、不可能であった場合はステップＳ１０３に戻る（ステップＳ１０６）。
【００３３】
合焦制御が可能である場合、オートフォーカスを実行した際に、最適顔評価部４０が、最適顔の検出を行って最適顔の総数Ｍ１を集計する（ステップＳ１０７）。最適顔とは、例えば、撮影品質の判定項目として目の開閉を採用している場合、被写体が目を開いている最適な撮影品質の状態にある顔をいう。尚、この最適顔検出の際は改めて顔領域の抽出は行わず、プレビュー画像において抽出した顔領域それぞれについて最適顔であるか否かを判断する。そのため、判断に係る処理を迅速に行うことができる。
【００３４】
続いて、オートフォーカスを実行した際に、最適顔評価部４０が、集計したＭ０、Ｍ１の値に基づいて評価値ｆ＝Ｍ１／Ｍ０を算出する（ステップＳ１０８）。
【００３５】
続いて、オートフォーカスを実行した際に、撮影制御部５０が、算出した評価値を予め設定した基準値ｆ０と比較する（ステップＳ１０９）。
【００３６】
ｆ値がｆ０以上である場合に、撮影制御部５０が、撮像部７０に当該プレビュー画像に対応する静止画像の撮影を指示する（ステップＳ１１０）。
【００３７】
図３の例で説明すると、４人の被写体のうち３人が目を開いている場合（即ち、最適顔であると検出された場合）、ｆ値は３／４＝０．７５となる。例えば、閾値ｆ０を０．７に設定している場合、ｆ＞ｆ０であるので撮影動作が実行可能と判断される。
【００３８】
続いて、記録制御部６０が、撮影された静止画像を撮像装置１００内のメモリ（図示省略）に記憶する（ステップＳ１１１）。その後、プレビュー画像の表示を再開し、撮影を行う場合には図２の手順を繰り返す。
【００３９】
一方、ステップＳ１０８においてｆがｆ０未満である場合、ステップＳ１０７に戻る。この場合、撮影制御部５０が、最適顔評価部４０に、現在の（つまり以前に最適顔検出や前回の評価を行った後の）プレビュー画像について評価値の再算出を指示し、ステップＳ１０７以降の処理を行う。また、この場合、顔の検出は行なわず、合焦制御時に検出した顔の位置をそのまま利用する。このようにして、撮影対象となっている被写体の所定数以上が目を開いた状態になるまで評価値の算出が繰り返され、条件を満たした状態で撮影動作に移行する。
【００４０】
例えば、目の開閉を撮影品質の判定項目とする場合、ｆ０＝１に設定すると、画像内に認識される被写体のすべてが目を開いている状態でのみ撮影が実行される。このように評価値の基準ｆ０を適切に設定することにより、所望する撮影品質の画像を撮影することができる。
【００４１】
以上のように、本発明の実施形態における撮像装置では、データ量の大きな静止画像が記録される前に、プレビュー画像について顔領域の抽出がなされ、当該抽出した領域について目の開閉等の撮影品質に係る評価が行われる。また、評価値が閾値に達しない場合は、その後のプレビュー画像について評価値の算出を繰り返し、閾値を超過した時点で撮影動作に移行する。つまり、オートフォーカス（合焦制御）したときに顔の評価値を算出し、評価値が閾値以下である場合に撮像部７０に際撮影を指示するので、速い処理速度でユーザの所望の画像を撮影できる。
【００４２】
従って、例えば、被写体のうち所定人数（割合）以上が目を開いている場合のみ撮影可能となるような設定をすることができる。尚、プレビュー画像を用いて顔領域の抽出を行っているため、撮影時における無駄なメモリ消費を抑制し、次の撮影までのタイムラグを低減しつつ、最適な顔画像の撮影を行うことができる。
【００４３】
また、評価値の再算出を伴う撮影は、操作者による特定の操作を要することなく、最終的に最適な顔画像を自動的に取得することができる。
【００４４】
また、撮影制御部５０が、オートフォーカスしたときに顔の評価値を算出するので、顔の評価値を算出するための新たな画像の取り込み等が不要であるため、早い処理速度でユーザ所望の画像を撮影することができる。
【産業上の利用可能性】
【００４５】
本発明にかかる撮像装置は、無駄なメモリ消費を抑制し、次の撮影までのタイムラグを低減しつつ、最適な顔画像の撮影を行うことができる撮像装置等に有用である。
【図面の簡単な説明】
【００４６】
【図１】本発明の実施形態における撮像装置の概略構成の一例を示すブロック図
【図２】本発明の実施形態における撮像装置の撮像動作手順の一例を示すフローチャート
【図３】本発明の実施形態における撮像時のプレビュー画像の表示例を模式的に示す図
【符号の説明】
【００４７】
１０  顔検出条件設定部
２０  合焦制御部
３０  顔検出部
４０  最適顔評価部
５０  撮影制御部
６０  記録制御部
７０  撮像部
１００  撮像装置
【図１】
2009177456.tif 000003
【図２】
2009177456.tif 000004
【図３】
2009177456.tif 000005