(57)【要約】【課題】人物が変わるごとに、ユーザーは、笑顔のレベルを確認する作業と、笑顔検出レベルを修正する作業とを行わなくてはならないという。【解決手段】顔領域の特徴量が記憶された識別特徴量記憶部１２と、表情特徴量の範囲が記憶された表情特徴量記憶部１３と、撮像された画像データを不揮発性記憶部としての不揮発性メモリー１０に記憶させる処理を行う画像データ記憶処理部２４と、人物を特定する人物特定部２５と、画像データ記憶処理部２４が処理を開始するタイミングを制御するタイミング制御部２６と、を備え、タイミング制御部２６は、人物特定部２５によって、画像データにおける人物が特定人物として特定された場合、表情特徴量記憶部１３から特定人物の表情特徴量の範囲内の閾値を取得し、画像データにおける人物の表情特徴量が閾値以上であるとき、画像データ記憶処理部２４の処理を開始させることを特徴とする画像撮影装置を提供する。【選択図】図１
2011171792.tif 000002
【特許請求の範囲】
【請求項１】
個人を識別するための顔領域の特徴量が記憶された識別特徴量記憶部と、
前記個人ごとの表情における表情特徴量の範囲が記憶された表情特徴量記憶部と、
撮像素子によって撮像された画像データを不揮発性記憶部に記憶させる処理を行う画像データ記憶処理部と、
前記画像データにおける人物の顔領域から検出した顔領域の特徴量を検索条件として、前記識別特徴量記憶部に記憶された顔領域の特徴量を検索することによって、前記人物を特定する人物特定部と、
前記画像データ記憶処理部が処理を開始するタイミングを制御するタイミング制御部と、を備え、
前記タイミング制御部は、前記人物特定部によって、前記画像データにおける人物が特定人物として特定された場合、前記表情特徴量記憶部から前記特定人物の表情特徴量の範囲内の閾値を取得し、前記画像データにおける人物の表情特徴量が前記閾値以上であるとき、前記画像データ記憶処理部の処理を開始させることを特徴とする画像撮影装置。
【請求項２】
請求項１に記載の画像撮影装置であって、
前記閾値は、前記表情特徴量の範囲における所定の割合に基づいて定められたことを特徴とする画像撮影装置。
【請求項３】
請求項１または請求項２に記載の画像撮影装置であって、
前記表情特徴量は、笑顔の特徴量であることを特徴とする画像撮影装置。
【請求項４】
請求項１から請求項３のいずれか一項に記載の画像撮影装置であって、
前記表情特徴量は、目閉じの特徴量であることを特徴とする画像撮影装置。
【請求項５】
請求項１から請求項４のいずれか一項に記載の画像撮影装置であって、
前記表情特徴量の範囲は、通常の表情をした顔の画像と、目的とする表情に変化した顔の画像から設定されたことを特徴とする画像撮影装置。
【請求項６】
請求項１から請求項５のいずれか一項に記載の画像撮影装置であって、
前記タイミング制御部は、所定の時間が経過した後は、前記特定人物の表情特徴量の範囲内の閾値を下げることを特徴とする画像撮影装置。
【請求項７】
請求項１から請求項６のいずれか一項に記載の画像撮影装置であって、
前記人物特定部によって、前記画像データにおける複数の人物のそれぞれが特定人物として特定された場合、前記表情特徴量記憶部から前記特定人物のそれぞれの表情特徴量の範囲内の閾値を取得し、前記画像データにおける前記複数の人物のそれぞれの表情特徴量が、それぞれの閾値以上であるとき、前記画像データ記憶処理部の処理を開始させることを特徴とする画像撮影装置。
【請求項８】
撮像素子によって撮像された画像データを不揮発性記憶部に記憶させる処理を行う画像データ記憶処理工程と、
前記画像データにおける人物の顔領域から検出した顔領域の特徴量を検索条件として、前記不揮発性記憶部に記憶された個人を識別するための顔領域の特徴量を検索することによって、前記人物を特定する人物特定工程と、
前記画像データ記憶処理工程が処理を開始するタイミングを制御するタイミング制御工程と、を含み、
前記タイミング制御工程は、前記人物特定工程において、前記画像データにおける人物が特定人物として特定された場合、前記不揮発性記憶部から前記特定人物の表情特徴量の範囲内の閾値を取得し、前記画像データにおける人物の表情特徴量が前記閾値以上であるとき、前記画像データ記憶処理工程の処理を開始させることを特徴とする画像撮影方法。
【請求項９】
撮像素子によって撮像された画像データを不揮発性記憶部に記憶させる処理を行う画像データ記憶処理機能と、
前記画像データにおける人物の顔領域から検出した顔領域の特徴量を検索条件として、前記不揮発性記憶部に記憶された個人を識別するための顔領域の特徴量を検索することによって、前記人物を特定する人物特定機能と、
前記画像データ記憶処理機能における前記処理の開始タイミングを制御するタイミング制御機能と、をコンピューターに実現させ、
前記タイミング制御機能は、前記人物特定機能において、前記画像データにおける人物が特定人物として特定された場合、前記不揮発性記憶部から前記特定人物の表情特徴量の範囲内の閾値を取得し、前記画像データにおける人物の表情特徴量が前記閾値以上であるとき、前記処理を開始させることを特徴とする画像撮影装置の制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像撮影装置、画像撮影方法および制御プログラムに関するものである。
【背景技術】
【０００２】
被写体を光電変換する撮像素子を用いて撮影するデジタルカメラでは、被写体となる人物の笑顔や目閉じなどの顔の表情の度合いを判定することにより、目が閉じることなく微笑んだ表情をしているときに、適切なタイミングで撮影する方法が提案されている（例えば、特許文献１）。しかし、表情には個人差があることから、人物によって、撮影される場合があったり、撮影されない場合があったりすることがある。
【０００３】
そこで、特許文献２では、検出した笑顔度レベルをユーザーに通知する通知手段と、笑顔検出レベルを設定する設定手段を備え、個人差に応じてユーザーが笑顔検出レベルを修正する方法が提案されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９−２０６５８３号公報
【特許文献２】特開２００８−３１１８１９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献２の方法では、被写体となる人物が適切な笑顔をしているときに、人物を撮影しようとすると、人物が変わるごとに、ユーザーは、笑顔のレベルを確認する作業と、笑顔検出レベルを修正する作業と、を行わなくてはならない。このように、被写体となる人物が適切な表情をしているときに、人物を撮影しようとすると、人物が変わるごとに、ユーザーは、画像撮影装置において、表情のレベルを確認する作業と、表情の度合いを検出するレベルを修正する作業と、を行わなくてはならないという課題がある。
【課題を解決するための手段】
【０００６】
本発明は、上述の課題の少なくとも一部を解決するためになされたものであり、以下の形態または適用例として実現することが可能である。
【０００７】
［適用例１］個人を識別するための顔領域の特徴量が記憶された識別特徴量記憶部と、前記個人ごとの表情における表情特徴量の範囲が記憶された表情特徴量記憶部と、撮像素子によって撮像された画像データを不揮発性記憶部に記憶させる処理を行う画像データ記憶処理部と、前記画像データにおける人物の顔領域から検出した顔領域の特徴量を検索条件として、前記識別特徴量記憶部に記憶された顔領域の特徴量を検索することによって、前記人物を特定する人物特定部と、前記画像データ記憶処理部が処理を開始するタイミングを制御するタイミング制御部と、を備え、前記タイミング制御部は、前記人物特定部によって、前記画像データにおける人物が特定人物として特定された場合、前記表情特徴量記憶部から前記特定人物の表情特徴量の範囲内の閾値を取得し、前記画像データにおける人物の表情特徴量が前記閾値以上であるとき、前記画像データ記憶処理部の処理を開始させることを特徴とする画像撮影装置。
【０００８】
この構成によれば、タイミング制御部が、人物特定部によって画像データにおける人物が特定人物として特定された場合、表情特徴量記憶部から特定人物の表情特徴量の範囲内の閾値を取得し、画像データにおける人物の表情特徴量が閾値以上であるとき、画像データ記憶処理部の処理を開始させる。これにより、被写体となる人物個人ごとの表情の度合いに基づいて、画像データ記憶処理部の処理が開始される。そのため、ユーザーは、画像撮影装置において、表情のレベルを確認する作業と、表情の度合いを検出するレベルを修正する作業と、を行わずに、画像データ記憶処理部の処理が開始され、適切な表情をしたときの人物の画像データが不揮発性記憶部に記憶され、被写体となった人物を撮影することができる。
【０００９】
［適用例２］前記閾値は、前記表情特徴量の範囲における所定の割合に基づいて定められたことを特徴とする上記画像撮影装置。
【００１０】
この構成によれば、表情特徴量の範囲における最大値より小さい値に設定することができる。そのため、被写体となった人物が自然な表情であるときに撮影できる可能性が高くなる。
【００１１】
［適用例３］前記表情特徴量は、笑顔の特徴量であることを特徴とする上記画像撮影装置。
この構成によれば、適切な笑顔の表情をしたときの人物を撮影できる可能性が高くなる。
【００１２】
［適用例４］前記表情特徴量は、目閉じの特徴量であることを特徴とする上記画像撮影装置。
この構成によれば、目閉じの状態を回避し、人物を撮影できる可能性が高くなる。
【００１３】
［適用例５］前記表情特徴量の範囲は、通常の表情をした顔の画像と、目的とする表情に変化した顔の画像から設定されたことを特徴とする上記画像撮影装置。
この構成によれば、個人ごとに表情特徴量の範囲を設定することができる。
【００１４】
［適用例６］前記タイミング制御部は、所定の時間が経過した後は、前記特定人物の表情特徴量の範囲内の閾値を下げることを特徴とする上記画像撮影装置。
【００１５】
この構成によれば、画像データの顔領域から検出された目閉じの表情特徴量が、表情特徴量記憶部における特定人物の表情特徴量の範囲内の閾値以上である可能性が高くなるので、人物を撮影できないということを回避できる。
【００１６】
［適用例７］前記人物特定部によって、前記画像データにおける複数の人物のそれぞれが特定人物として特定された場合、前記表情特徴量記憶部から前記特定人物のそれぞれの表情特徴量の範囲内の閾値を取得し、前記画像データにおける前記複数の人物のそれぞれの表情特徴量が、それぞれの閾値以上であるとき、前記画像データ記憶処理部の処理を開始させることを特徴とする上記画像撮影装置。
【００１７】
この構成によれば、複数の人物が同時に撮影される被写体としたとき、それぞれの人物の顔が適切な表情であるときに撮影する可能性が高い。
【００１８】
［適用例８］撮像素子によって撮像された画像データを不揮発性記憶部に記憶させる処理を行う画像データ記憶処理工程と、前記画像データにおける人物の顔領域から検出した顔領域の特徴量を検索条件として、前記不揮発性記憶部に記憶された個人を識別するための顔領域の特徴量を検索することによって、前記人物を特定する人物特定工程と、前記画像データ記憶処理工程が処理を開始するタイミングを制御するタイミング制御工程と、を含み、前記タイミング制御工程は、前記人物特定工程において、前記画像データにおける人物が特定人物として特定された場合、前記不揮発性記憶部から前記特定人物の表情特徴量の範囲内の閾値を取得し、前記画像データにおける人物の表情特徴量が前記閾値以上であるとき、前記画像データ記憶処理工程の処理を開始させることを特徴とする画像撮影方法。
【００１９】
この構成によれば、タイミング制御工程では、人物特定工程によって、画像データにおける人物が特定人物として特定された場合、不揮発性記憶部から特定人物の表情特徴量の範囲内の閾値を取得し、画像データにおける人物の表情特徴量が閾値以上であるとき、画像データ記憶処理工程の処理を開始させる。これにより、被写体となる人物個人ごとの表情の度合いに基づいて、画像データ記憶処理工程の処理が開始される。そのため、ユーザーは、画像撮影装置において、表情のレベルを確認する作業と、表情の度合いを検出するレベルを修正する作業と、を行わずに、画像データ記憶処理工程の処理が開始され、適切な表情をしたときの人物の画像データが不揮発性記憶部に記憶され、被写体となった人物を撮影することができる。
【００２０】
［適用例９］撮像素子によって撮像された画像データを不揮発性記憶部に記憶させる処理を行う画像データ記憶処理機能と、前記画像データにおける人物の顔領域から検出した顔領域の特徴量を検索条件として、前記不揮発性記憶部に記憶された個人を識別するための顔領域の特徴量を検索することによって、前記人物を特定する人物特定機能と、前記画像データ記憶処理機能における前記処理の開始タイミングを制御するタイミング制御機能と、をコンピューターに実現させ、前記タイミング制御機能は、前記人物特定機能において、前記画像データにおける人物が特定人物として特定された場合、前記不揮発性記憶部から前記特定人物の表情特徴量の範囲内の閾値を取得し、前記画像データにおける人物の表情特徴量が前記閾値以上であるとき、前記処理を開始させることを特徴とする画像撮影装置の制御プログラム。
【００２１】
この構成によれば、タイミング制御機能では、人物特定機能によって、画像データにおける人物が特定人物として特定された場合、不揮発性記憶部から特定人物の表情特徴量の範囲内の閾値を取得し、画像データにおける人物の表情特徴量が閾値以上であるとき、撮像素子によって撮像された画像データを不揮発性記憶部に記憶させる処理を開始させる。これにより、被写体となる人物個人ごとの表情の度合いに基づいて、画像データを不揮発性記憶部に記憶させる処理が開始される。そのため、ユーザーは、画像撮影装置において、表情のレベルを確認する作業と、表情の度合いを検出するレベルを修正する作業と、を行わずに、画像データ記憶処理機能を実現するための処理が開始され、適切な表情をしたときの人物の画像データが不揮発性記憶部に記憶され、被写体となった人物を撮影することができる。
【図面の簡単な説明】
【００２２】
【図１】デジタルカメラの構成を示したブロック構成図。
【図２】（ａ）は、第１実施形態におけるテーブルの内容を示す図、（ｂ）は、第１実施形態において検出した笑顔の表情特徴量を示す図、（ｃ）は、比較例におけるテーブルの内容を示す図。
【図３】第１実施形態におけるデジタルカメラの制御プログラムのフローチャート。
【図４】第３実施形態におけるテーブルの内容を示す図。
【図５】第３実施形態におけるデジタルカメラの制御プログラムのフローチャート。
【図６】閾値変更処理における制御プログラムのフローチャート。
【発明を実施するための形態】
【００２３】
（第１実施形態）
以下、第１実施形態について図面を参照しつつ説明する。図１は第１実施形態における画像撮影装置としてのデジタルカメラ１の構成を示したブロック構成図である。デジタルカメラ１は、光学系２、撮像素子としてのＣＣＤ４、Ａ／Ｄコンバーター５、画像処理部６、ＲＡＭ７、画像圧縮部８、画像伸長部９、不揮発性記憶部としての不揮発性メモリー１０、制御部２０、操作部３０、ＶＲＡＭ３２、表示制御部３３、画像表示部３４などから構成される。
【００２４】
光学系２には、集光レンズ３、集光レンズ３を移動させて焦点位置を調整するための駆動機構（不図示）、光量を調整するための絞り機構（不図示）、ＣＣＤ４の露光時間を制御するためのシャッター機構（不図示）などが備えられる。
【００２５】
ＣＣＤ４は、集光レンズ３を通過した光を光電変換し、アナログ信号を出力する。Ａ／Ｄコンバーター５は、ＩＣチップから構成され、ＣＣＤ４から出力されたアナログ信号をデジタル信号に変換する。
【００２６】
画像処理部６は、ＩＣチップから構成され、Ａ／Ｄコンバーター５から出力されたデジタル信号から、明るさ、色などの画像補正を行い、所定のサイズの画像データをフレーム単位で生成し、ＲＡＭ７に出力する。
【００２７】
デジタルカメラ１の電源がＯＮの状態にあるとき、ＣＣＤ４、Ａ／Ｄコンバーター５、画像処理部６は動作し、ＲＡＭ７に記憶される画像データは所定の時間間隔で更新される。
【００２８】
不揮発性メモリー１０は、例えばフラッシュメモリーからなり、デジタルカメラ１の電源がＯＦＦの状態においても、記憶された内容が消えない。
【００２９】
画像圧縮部８はＩＣチップから構成され、ＲＡＭ７に記憶された画像データを圧縮する。圧縮された画像データは、不揮発性メモリー１０に記憶される。画像伸長部９はＩＣチップから構成され、不揮発性メモリー１０における圧縮された画像データを解凍し、ＲＡＭ７に生成する。
【００３０】
画像表示部３４は、液晶パネルなどから構成される。画像表示部３４に表示するための表示用画像データが、ＲＡＭ７に生成された画像データから所定の時間間隔でＶＲＡＭ３２に生成される。表示制御部３３は、ＶＲＡＭ３２に生成された表示用画像データを画像表示部３４に表示させる。また、画像表示部３４には、メッセージが表示され、ユーザーに通知することができる。
【００３１】
操作部３０には、ユーザーによって操作されるシャッターボタン３１や、ユーザーによって各種設定が行われるためのボタン（不図示）が備えられる。
【００３２】
制御部２０は、ＣＰＵ２１、ＲＯＭ２２、ＲＡＭ２３を含んで構成される。ＣＰＵ２１がＲＯＭ２２に格納された制御用プログラムをＲＡＭ２３に読み出して実行することによって、操作部３０におけるシャッターボタン３１などが操作された状態を検出したり、光学系２、ＣＣＤ４、Ａ／Ｄコンバーター５、画像処理部６、ＲＡＭ７、画像圧縮部８、画像伸長部９、不揮発性メモリー１０、ＶＲＡＭ３２、表示制御部３３、画像表示部３４の制御を行う。
【００３３】
不揮発性メモリー１０には、記憶領域である、画像データ記憶部１１、識別特徴量記憶部１２、表情特徴量記憶部１３が設けられる。
【００３４】
画像データ記憶部１１には、画像データが記憶される。識別特徴量記憶部１２には、個人別の顔領域の特徴量が記憶されている。顔領域の特徴量は、撮影された画像データから、顔の輪郭、顔の幅と両目の距離との比率、顔領域における目や鼻などの配置などから、個人別に検出される。
【００３５】
表情特徴量記憶部１３には、個人別の笑顔の表情における表情特徴量の範囲と、表情特徴量における閾値が記憶されている。笑顔の表情における表情特徴量は、撮影された画像データの顔領域において、口のラインの傾斜角度などを検出して得られる。
【００３６】
画像データ記憶処理部２４、人物特定部２５、タイミング制御部２６は、制御部２０におけるＣＰＵ２１が、ＲＯＭ２２に格納された制御プログラムをＲＡＭ２３に読み出して実行することによって機能する。
【００３７】
画像データ記憶処理部２４は、ＲＡＭ７に生成された画像データを、画像圧縮部８によって圧縮し、不揮発性メモリー１０に記憶させる処理を行う。画像データ記憶処理部２４は、人物を被写体とする光が光学系２を通過し、ＣＣＤ４によって光電変換され、Ａ／Ｄコンバーター５によってアナログ信号からデジタル信号に変換され、画像処理部６によって画像処理され、ＲＡＭ７に生成された画像データを対象として処理を行う。
【００３８】
人物特定部２５は、ＲＡＭ７に生成された画像データにおける人物の顔領域から検出した顔領域の特徴量を検索条件として、不揮発性メモリー１０における識別特徴量記憶部１２に記憶された顔領域の特徴量を検索することによって、人物を特定する。
【００３９】
タイミング制御部２６は、画像データ記憶処理部２４が処理を開始するタイミングを制御する。タイミング制御部２６は、人物特定部２５によって、画像データにおける人物が特定人物として特定された場合、不揮発性メモリー１０における表情特徴量記憶部１３から特定人物の表情特徴量の範囲内の閾値を取得し、画像データにおける人物の表情特徴量が閾値以上であるとき、画像データ記憶処理部２４の処理を開始させる。
【００４０】
図２（ａ）は、本実施形態における表情特徴量記憶部１３に設けられたテーブルの内容を示す図である。図２（ａ）のテーブルには、Ａさん、Ｂさん、Ｃさんとして示した個人別に、笑顔の表情特徴量の範囲が、笑顔時の笑顔の表情特徴量と通常時の笑顔の表情特徴量（本実施形態では、笑顔の表情特徴量を表情特徴量という）として、不揮発性メモリー１０の表情特徴量記憶部１３に記憶されている。
【００４１】
通常時の表情特徴量は、各個人が被写体となり、通常の表情をしたときにデジタルカメラ１によって撮影し、撮影された画像データにおいて、それぞれの顔領域における表情特徴量を検出し、予め、表情特徴量記憶部１３に記憶された値である。
【００４２】
笑顔時の表情特徴量は、各個人が被写体となり、目的とする表情、すなわち通常の表情から笑顔の表情に変化したときにデジタルカメラ１によって撮影し、撮影された画像データにおいて、それぞれの顔領域における表情特徴量を検出し、予め、表情特徴量記憶部１３に記憶された値である。
【００４３】
図２（ａ）のテーブルの閾値は、表情特徴量の範囲における所定の割合に基づいて定められる。本実施形態では、例えば、笑顔時の表情特徴量と通常時の表情特徴量として定められた表情特徴量の範囲における５０％の値が設定される。例えば、Ａさんでは、通常時の表情特徴量が「０」で、笑顔時の表情特徴量が「８」であるので、閾値はその範囲における５０％である「４」となる。
【００４４】
次に、本実施形態におけるデジタルカメラ１の制御プログラムの処理内容について説明する。
【００４５】
図３は、本実施形態におけるデジタルカメラ１の制御プログラムのフローチャートである。本制御プログラムは、人物を被写体とする光が光学系２を通過し、ＣＣＤ４によって光電変換され、Ａ／Ｄコンバーター５によってアナログ信号からデジタル信号に変換され、画像処理部６によって画像処理され、ＲＡＭ７に生成された画像データを対象として処理を開始する。
【００４６】
ステップＳ１００では、図１の人物特定部２５は、ＲＡＭ７に生成された画像データから人物の顔領域を検出する。ステップＳ１１０では、人物特定部２５は、顔領域から顔領域の特徴量を検出する。ステップＳ１２０では、人物特定部２５は、ステップＳ１１０で顔領域から検出した顔領域の特徴量に基づいて、不揮発性メモリー１０における識別特徴量記憶部１２を検索する。
【００４７】
ステップＳ１３０では、人物特定部２５は、ステップＳ１１０で顔領域から検出した顔領域の特徴量と、識別特徴量記憶部１２における顔領域の特徴量とが一致したか否かを判定する。一致したときは（Ｙｅｓ）、ステップＳ１４０に進み、図１の画像表示部３４に、人物を特定したことを表示してユーザーに通知し、ステップＳ１５０に進む。
【００４８】
一致しなかったときは（Ｎｏ）、ステップＳ２１０に進み、人物が特定できなかったことを画像表示部３４に表示してユーザーに通知し、処理を終了する。
【００４９】
ステップＳ１５０では、タイミング制御部２６は、図１の操作部３０におけるシャッターボタン３１がユーザーによって押されたか否かを判定する。シャッターボタン３１が押されたときは（Ｙｅｓ）、ステップＳ１６０に進む。シャッターボタン３１が押されなかったときは（Ｎｏ）、ステップＳ１５０に戻る。
【００５０】
図２（ｂ）は、本実施形態において検出した表情特徴量を示す図である。図２（ｂ）の表情特徴量は、Ａさん、Ｂさん、Ｃさんが被写体となり、タイミング制御部２６が検出した個人別の値である。
【００５１】
ステップＳ１６０では、タイミング制御部２６は、ステップＳ１００で検出した顔領域において、表情特徴量を検出する。例えば、特定された人物がＡさんであるとき、顔領域における表情特徴量の値は「６」である（図２（ｂ）参照）。
【００５２】
ステップＳ１７０では、タイミング制御部２６は、表情特徴量記憶部１３に設けられた図２（ａ）のテーブルから特定された人物の表情特徴量の閾値を取得する。例えば、特定された人物がＡさんであるとき、表情特徴量の閾値は「４」である。
【００５３】
ステップＳ１８０では、タイミング制御部２６は、ステップＳ１６０で検出した顔領域における表情特徴量が、ステップＳ１７０で図２（ａ）のテーブルから取得した人物の表情特徴量の閾値以上であるか否かを判定する。顔領域における表情特徴量が、特定人物の表情特徴量の閾値以上であるときは（Ｙｅｓ）、ステップＳ２００に進む。顔領域における表情特徴量が、特定人物の表情特徴量の閾値以上ではなく、すなわち閾値未満であるときは（Ｎｏ）、ステップＳ１９０に進み、閾値未満であることを画像表示部３４に表示してユーザーに通知し、ステップＳ１００に戻る。ステップＳ１００からは、図３に示すフローチャートの処理が再び実行される。
【００５４】
例えば、特定された人物がＡさんであるとき、タイミング制御部２６がステップＳ１６０で検出した表情特徴量の値「６」は、ステップＳ１７０で図２（ａ）のテーブルから取得した人物の表情特徴量の閾値「４」以上であるので、ステップＳ２００に進む。
【００５５】
ステップＳ２００では、画像データ記憶処理部２４は、ＲＡＭ７に生成された画像データを、画像圧縮部８によって圧縮し、不揮発性メモリー１０に記憶させる処理を実行する。
【００５６】
ステップＳ１８０において、顔領域における表情特徴量が、特定人物の表情特徴量の閾値未満となり、ステップＳ１９０で、閾値未満であることが通知されたとき、ユーザーが被写体となる人物に笑顔の度合いを増すように促すことなどによって、被写体となる人物が笑顔の表情を変えた場合には、ステップＳ１００からの処理が再び実行されると、ＲＡＭ７に生成された画像データの顔領域における表情特徴量が増加する。
【００５７】
すると、ステップＳ１８０では、顔領域における表情特徴量が、特定人物の表情特徴量の閾値以上になるので、ステップＳ２００において、画像データ記憶処理部２４は、ＲＡＭ７に生成された画像データを、画像圧縮部８によって圧縮し、不揮発性メモリー１０に記憶させる処理を実行する。
【００５８】
次に、Ｂさんが被写体となり、再び図３のフローチャートに示す制御プログラムが実行され、ステップＳ１００からの処理が開始される。ステップＳ１３０において、人物特定部２５は、ステップＳ１１０で顔領域から検出した顔領域の特徴量と、識別特徴量記憶部１２に記憶された顔領域の特徴量とが一致したとして判定し、Ｂさんが特定された人物となる。
【００５９】
特定された人物がＢさんであるとき、タイミング制御部２６がステップＳ１６０で検出した表情特徴量の値「３」は、ステップＳ１７０で図２（ａ）のテーブルから取得した人物の表情特徴量の閾値「２」以上であるので、ステップＳ２００に進む。
【００６０】
次に、Ｃさんが被写体となり、再び図３のフローチャートに示す制御プログラムが実行され、ステップＳ１００からの処理が開始される。ステップＳ１３０において、人物特定部２５は、ステップＳ１１０で顔領域から検出した顔領域の特徴量と、識別特徴量記憶部１２に記憶された顔領域の特徴量とが一致したとして判定し、Ｃさんが特定された人物となる。
【００６１】
特定された人物がＣさんであるとき、タイミング制御部２６がステップＳ１６０で検出した表情特徴量の値「８」は、ステップＳ１７０で図２（ａ）のテーブルから取得した人物の表情特徴量の閾値「７」以上であるので、ステップＳ２００に進む。
【００６２】
このように、被写体がＡさん、Ｂさん、Ｃさんと変わっても、ユーザーは、デジタルカメラ１において、笑顔度レベルを確認する作業と、笑顔検出レベルを修正する作業とを行わずに、画像データ記憶処理部２４の処理が開始され、適切な笑顔の表情をしたときのＡさん、Ｂさん、Ｃさんの画像データが不揮発性メモリー１０に記憶され、被写体としてのＡさん、Ｂさん、Ｃさんを撮影することができる。
【００６３】
（比較例）
図２（ｃ）は、比較例におけるテーブルの内容を示す図である。比較例におけるテーブルでは、図２（ｃ）に示すように、個人別の表情特徴量を記憶せずに、人物一般としての笑顔の表情特徴量の範囲が、笑顔時の笑顔の表情特徴量と通常時の笑顔の表情特徴量として、不揮発性メモリー１０に記憶されている。
【００６４】
比較例では、被写体となった人物の笑顔の表情特徴量が図２（ｃ）のテーブルの閾値「５」以上であるとき、ＣＣＤ４、Ａ／Ｄコンバーター５、画像処理部６を用いてＲＡＭ７に生成された画像データを、画像圧縮部８を介して不揮発性メモリー１０の画像データ記憶部１１に記憶させる。
【００６５】
比較例では、図２（ｂ）の被写体となったＡさん、Ｃさんの画像データにおける顔領域における笑顔の表情特徴量が、それぞれ、「６」、「８」であり、図２（ｃ）のテーブルの閾値「５」以上であるので、ＲＡＭ７に生成された画像データを不揮発性メモリー１０の画像データ記憶部１１に記憶させ、被写体となったＡさん、Ｃさんを撮影することができる。
【００６６】
しかし、図２（ｂ）の被写体となったＢさんの画像データにおける顔領域における笑顔の表情特徴量は「３」であり、図２（ｃ）のテーブルの閾値「５」未満であるので、ＲＡＭ７に生成された画像データを不揮発性メモリー１０の画像データ記憶部１１に記憶させることができず、被写体となったＢさんを撮影することができない。
【００６７】
このような場合には、Ｂさんにとって適切な笑顔の表情で撮影するためには、デジタルカメラに、検出した笑顔のレベルを通知する手段と閾値を変更する手段を備え、ユーザーは、閾値以上であるか否かを確認する作業や、図２（ｃ）の閾値の設定を変更する作業が必要となってしまう。
【００６８】
以上、本実施形態で説明した画像撮影装置としてのデジタルカメラ１は、個人を識別するための顔領域の特徴量が記憶された識別特徴量記憶部１２と、個人ごとの表情における表情特徴量の範囲が記憶された表情特徴量記憶部１３（図２（ａ）のテーブルを参照）と、撮像素子としてのＣＣＤ４によって撮像された画像データを不揮発性記憶部としての不揮発性メモリー１０に記憶させる処理を行う画像データ記憶処理部２４と、画像データにおける人物の顔領域から検出した顔領域の特徴量を検索条件として、識別特徴量記憶部１２に記憶された顔領域の特徴量を検索することによって、人物を特定する人物特定部２５と、画像データ記憶処理部２４が処理を開始するタイミングを制御するタイミング制御部２６と、を備え、タイミング制御部２６は、人物特定部２５によって、画像データにおける人物が特定人物として特定された場合、表情特徴量記憶部１３から特定人物の表情特徴量の範囲内の閾値を取得し、画像データにおける人物の表情特徴量が閾値以上であるとき、画像データ記憶処理部２４の処理を開始させる。
【００６９】
この構成によれば、被写体となる人物個人ごとの表情の度合いに基づいて、画像データ記憶処理部２４の処理が開始される。そのため、ユーザーは、デジタルカメラ１において、笑顔の表情のレベルを確認する作業と、笑顔の表情の度合いを検出するレベルを修正する作業と、を行わずに、画像データ記憶処理部２４の処理が開始され、適切な笑顔の表情をしたときの人物の画像データが不揮発性メモリー１０に記憶され、被写体となった人物を撮影することができる。
【００７０】
また、閾値は、表情特徴量の範囲における所定の割合に基づいて定められたものである。これにより、表情特徴量の範囲における最大値より小さい値に設定することができる。そのため、被写体となった人物が自然な笑顔の表情であるときに撮影できる可能性が高くなる。
【００７１】
また、表情特徴量は、笑顔の特徴量である。これにより、適切な笑顔の表情をしたときの人物を撮影できる可能性が高くなる。
【００７２】
また、表情特徴量の範囲は、通常の表情をした顔の画像と、目的とする表情である笑顔の表情に変化した顔の画像から設定される。これにより、個人ごとに表情特徴量の範囲を設定することができる。
【００７３】
また、本実施形態で説明した画像撮影方法では、撮像素子によって撮像された画像データを不揮発性記憶部としての不揮発性メモリー１０に記憶させる処理を行う画像データ記憶処理工程と、画像データにおける人物の顔領域から検出した顔領域の特徴量を検索条件として、不揮発性メモリー１０に記憶された個人を識別するための顔領域の特徴量を検索することによって、人物を特定する人物特定工程と、画像データ記憶処理工程が処理を開始するタイミングを制御するタイミング制御工程と、を含み、タイミング制御工程は、人物特定工程において、画像データにおける人物が特定人物として特定された場合、不揮発性メモリー１０から特定人物の表情特徴量の範囲内の閾値を取得し、画像データにおける人物の表情特徴量が閾値以上であるとき、画像データ記憶処理工程の処理を開始させる。
【００７４】
また、本実施形態で説明した画像撮影装置における制御プログラムでは、撮像素子によって撮像された画像データを不揮発性記憶部としての不揮発性メモリー１０に記憶させる処理を行う画像データ記憶処理機能と、画像データにおける人物の顔領域から検出した顔領域の特徴量を検索条件として、不揮発性メモリー１０に記憶された個人を識別するための顔領域の特徴量を検索することによって、人物を特定する人物特定機能と、画像データ記憶処理機能における処理の開始タイミングを制御するタイミング制御機能と、をコンピューターに実現させ、タイミング制御機能は、人物特定機能において、画像データにおける人物が特定人物として特定された場合、不揮発性メモリー１０から特定人物の表情特徴量の範囲内の閾値を取得し、画像データにおける人物の表情特徴量が閾値以上であるとき、画像データ記憶処理機能における処理を開始させる。
【００７５】
（第２実施形態）
第１実施形態では、人物が１名ずつ被写体となって撮影される場合について説明したが、第２実施形態では、複数の人物が同時に被写体となって撮影される場合について説明する。第２実施形態における画像撮影装置としてのデジタルカメラは、図１を用いて説明した第１実施形態で説明したデジタルカメラ１のブロック構成と同じである。
【００７６】
第２実施形態における制御プログラムの処理方法について、第１実施形態で説明した図３のフローチャートを用いて説明する。ステップＳ１００では、図１の人物特定部２５は、被写体となるＡさん、Ｂさん、Ｃさんにおけるそれぞれの顔領域を検出する。ステップＳ１１０では、人物特定部２５は、それぞれの顔領域における顔領域の特徴量を検出する。
【００７７】
ステップＳ１２０では、人物特定部２５は、検出したそれぞれの顔領域の特徴量を用いて、不揮発性メモリー１０の識別特徴量記憶部１２を検索する。ステップＳ１３０において、人物特定部２５は、検出したそれぞれの顔領域の特徴量と識別特徴量記憶部１２に記憶された顔領域の特徴量が一致すると、ステップＳ１４０において、一致したことを通知する。
【００７８】
ステップＳ１５０において、タイミング制御部２６は、ユーザーによって図１のシャッターボタン３１が押されたことを検出すると（Ｙｅｓ）、ステップＳ１６０において、タイミング制御部２６は、ステップＳ１００において検出されたそれぞれの顔領域から、それぞれの人物における笑顔の表情特徴量（以降、本実施形態では、笑顔の表情特徴量を表情特徴量という）を検出する。
【００７９】
ステップＳ１７０において、タイミング制御部２６は、図１の不揮発性メモリー１０における表情特徴量記憶部１３に記憶された図２（ａ）のテーブルを検索し、それぞれの人物の表情特徴量の範囲内の閾値を取得する。
【００８０】
ステップＳ１８０において、タイミング制御部２６は、ステップＳ１５０で検出したそれぞれの人物における表情特徴量が、ステップＳ１６０で図２（ａ）のテーブルから取得したそれぞれの人物の閾値以上であるか判定する。
【００８１】
ステップＳ１８０において、タイミング制御部２６は、それぞれの人物における表情特徴量が、それぞれの人物の表情特徴量の閾値以上であるとき、ステップＳ２００において、タイミング制御部２６は、画像データ記憶処理部２４の処理を開始させる。
【００８２】
ステップＳ１８０において、タイミング制御部２６は、少なくとも１人の人物における表情特徴量が、それぞれの人物の表情特徴量の閾値未満であるとき、ステップＳ１９０に進み、閾値未満であることを通知し、ステップＳ１００に戻る。
【００８３】
以上、本実施形態で説明したデジタルカメラでは、人物特定部２５によって、画像データにおける複数の人物としてのＡさん、Ｂさん、Ｃさんのそれぞれが特定人物として特定された場合、表情特徴量記憶部１３から複数の特定人物のそれぞれの表情特徴量の範囲内の閾値を取得し、画像データにおけるＡさん、Ｂさん、Ｃさんのそれぞれの表情特徴量が、それぞれの閾値以上であるとき、画像データ記憶処理部２４の処理を開始させる。
【００８４】
この構成によれば、Ａさん、Ｂさん、Ｃさんを同時に撮影される被写体としたとき、それぞれの人物の顔が適切な表情であるときに撮影する可能性が高い。
【００８５】
（第３実施形態）
本実施形態では、所定の時間が経過すると、表情特徴量の閾値を下げて撮影する方法について説明する。本実施形態における画像撮影装置としてのデジタルカメラは、図１を用いて説明した第１実施形態で説明したデジタルカメラ１のブロック構成と同じである。
【００８６】
図４は、本実施形態におけるテーブルの内容を示す図である。図４のテーブルは、不揮発性メモリー１０における表情特徴量記憶部１３に記憶されている。図４のテーブルには、Ａさん、Ｂさん、Ｃさんのそれぞれ個人別に、目閉じの表情特徴量の範囲が、通常状態における目閉じの表情特徴量と、目閉じ状態における目閉じの表情特徴量として記憶されている。
【００８７】
また、図４のテーブルには、目閉じの表情特徴量の範囲内にある閾値であって、通常モードの閾値と厳しいモードの閾値とが記憶されている。
【００８８】
本実施形態では、通常モードの閾値は、各個人の通常状態における目閉じの表情特徴量に所定の値として、例えば「２」を加算して得られた値である。厳しいモードの閾値は、通常モードの閾値から所定の値として、例えば「１」を減算して得られた値である。
【００８９】
図５は、本実施形態におけるデジタルカメラの制御プログラムのフローチャートである。図５のフローチャートは、網がけしたステップに示すように、図３のフローチャートにおけるステップＳ１７０を削除し、ステップＳ３００に置き換え、さらにステップＳ２０２、ステップＳ２０４を追加したものである。
【００９０】
まず、Ａさんが被写体となった場合について図５のフローチャートを用いて説明する。ステップＳ１００からステップＳ１５０までは、図３のフローチャートを用いて第１実施形態で説明した処理内容が実行される。ステップＳ３００では、閾値変更処理が実行される。
【００９１】
図６は、閾値変更処理における制御プログラムのフローチャートである。ステップＳ３００では、図１のタイミング制御部２６は、シャッターボタン３１が押された回数をカウントする。ステップＳ３１０では、タイミング制御部２６は、シャッターボタン３１が押された回数が１回目であるか否かを判定する。１回目であるときは（Ｙｅｓ）、ステップＳ３２０に進み、計時を開始する。１回目ではないとき（Ｎｏ）、すなわち２回目以上であるとき、ステップＳ３３０に進む。
【００９２】
ステップＳ３２０では、ＣＰＵ２１が使用するクロック信号を用いて計時を開始する。
ステップＳ３３０では、タイミング制御部２６は、計時された時間が、所定の時間（例えば１０秒間）が経過したか否かを判定する。所定の時間（例えば１０秒間）が経過したときは（Ｙｅｓ）、ステップＳ３５０に進む。所定の時間が経過していないときは（Ｎｏ）、ステップＳ３４０に進む。
【００９３】
ステップＳ３４０では、タイミング制御部２６は、不揮発性メモリー１０における表情特徴量記憶部１３の図４のテーブルのＡさんの通常モードの閾値「２」を取得し、閾値変更処理を終了する。
【００９４】
ステップＳ３５０では、タイミング制御部２６は、不揮発性メモリー１０における表情特徴量記憶部１３の図４のテーブルのＡさんの厳しいモードの閾値「１」を取得し、閾値変更処理を終了する。
【００９５】
図５のステップＳ１８０では、タイミング制御部２６は、ステップＳ１６０で検出された顔領域における目閉じの表情特徴量が、ステップＳ３００での閾値変更処理で取得した閾値（図６のステップＳ３４０またはステップＳ３５０で取得した閾値）以上であるか否かを判定する。
【００９６】
ステップＳ１８０では、ステップＳ１６０で検出された顔領域における目閉じの表情特徴量が、ステップＳ３００での閾値変更処理で取得した閾値以上であるときは、ステップＳ２００に進み、顔領域における目閉じの表情特徴量が、ステップＳ３００での閾値変更処理で取得した閾値未満であるときは、ステップＳ１９０で、閾値未満であることを通知し、ステップＳ１００に戻る。
【００９７】
ステップＳ２００では、タイミング制御部２６は、画像データ記憶処理部２４の処理を開始させる。ステップＳ２０２では、シャッターボタン３１が押された回数を０にし、ステップＳ２０４では、計時された時間を０にする。
【００９８】
ステップＳ３００での閾値変更処理によって、所定の時間内は通常モードの閾値を取得し（ステップＳ３４０）、所定の時間が経過した後は厳しいモードの閾値を取得することによって（ステップＳ３５０）、表情特徴量の閾値が下げられる。これにより、ステップＳ１８０において、ステップＳ１６０で検出された顔領域における目閉じの表情特徴量が、ステップＳ３５０で取得した厳しいモードの閾値以上である可能性が高くなり、画像データ記憶処理部２４の処理を開始させて、被写体となったＡさんを撮影できる。
【００９９】
Ｂさん、Ｃさんが被写体となった場合も同様の処理が行われ、被写体となる人物が変わるごとに、ユーザーはデジタルカメラの設定を変更する作業を行わなくても、撮影をすることができる。
【０１００】
以上、本実施形態で説明したデジタルカメラにおけるタイミング制御部２６は、所定の時間が経過した後、特定人物の目閉じの表情特徴量の範囲内の閾値を下げる。
【０１０１】
このようにすれば、画像データの顔領域から検出された目閉じの表情特徴量が、表情特徴量記憶部１３における特定人物の表情特徴量の範囲内の閾値以上である可能性が高くなるので、人物を撮影できないということを回避できる可能性が高い。
【０１０２】
また、表情特徴量は、目閉じの特徴量である。このようにすれば、目閉じの状態を回避し、人物を撮影できる可能性が高くなる。
【０１０３】
本実施形態では、通常モードの閾値と、通常モードの閾値より低い値が設定された厳しいモードの閾値をテーブルに記憶するようにしたが、所定の時間が経過した後は、初めに設定した閾値から、初めに設定した閾値の所定の割合（例えば８０％）で算出した閾値に下げるようにしてもよい。
【０１０４】
また、本実施形態では、所定の時間が経過した後に閾値を下げるようにしたが、シャッターボタン３１が押された回数が、所定の回数を超えた後に、閾値を下げるようにしてもよい。
【０１０５】
第１実施形態から第３実施形態で説明したデジタルカメラは、図１の画像圧縮部８を備え、画像データ記憶処理部２４によって、不揮発性メモリー１０には圧縮された画像データが記憶されるが、画像圧縮部８を備えずに、不揮発性メモリー１０には圧縮されていない画像データが記憶されるようにしてもよい。
【０１０６】
また、図１の表情特徴量記憶部１３のテーブルに記憶された表情特徴量の範囲は、第１実施形態から第３実施形態で説明したデジタルカメラによって、予め、被写体となる人物を撮影して検出した表情特徴量であるが、他のデジタルカメラなどの画像撮影装置によって、被写体となる人物を撮影し、検出された表情特徴量が表情特徴量記憶部１３のテーブルに記憶されてもよい。
【符号の説明】
【０１０７】
１…デジタルカメラ、４…ＣＣＤ、１０…不揮発性メモリー、１１…画像データ記憶部、１２…識別特徴量記憶部、１３…表情特徴量記憶部、２４…画像データ記憶処理部、２５…人物特定部、２６…タイミング制御部。
【図１】
2011171792.tif 000003
【図２】
2011171792.tif 000004
【図３】
2011171792.tif 000005
【図４】
2011171792.tif 000006
【図５】
2011171792.tif 000007
【図６】
2011171792.tif 000008