(57)【要約】【課題】撮影時において、被写体がユーザの好みの状態にあるかどうかを容易に確認して撮影することのできる撮影装置及び撮影方法を提供する。【解決手段】被写体を撮影して画像を生成する撮影手段（１２）と、撮影手段で撮影された画像を記憶する記憶手段（１８）と、撮影手段で撮影するときに、被写体を確認するためのプレビュー画像を取得しディスプレーに表示するプレビュー手段（１４、１５）と、撮影手段で撮影するフレーム内に存在する人間の顔部分を抽出する顔画像抽出手段（１６，１７）と、顔画像抽出手段で抽出された少なくとも一つの顔画像をディスプレーに表示する顔画像表示手段（２０、１４、１５）とを有する撮影装置である。【選択図】    図２
2007116610.tif 000002
【特許請求の範囲】
【請求項１】
被写体の静止画像を撮影して記憶する撮影装置であって、
被写体を撮影して画像を生成する撮影手段と、
前記撮影手段で撮影された画像を記憶する記憶手段と、
前記撮影手段で撮影するときに、被写体を確認するためのプレビュー画像を取得しディスプレーに表示するプレビュー手段と、
前記撮影手段で撮影するフレーム内に存在する人間の顔部分を抽出する顔画像抽出手段と、
前記顔画像抽出手段で抽出された少なくとも一つの顔画像を前記ディスプレーに表示する顔画像表示手段と、
を有することを特徴とする撮影装置。
【請求項２】
当該撮影装置に設置又は装着された操作部材を更に有し、
前記操作部材の第1の操作に基づいて、前記顔画像抽出手段は、前記フレームから人間の顔部分を抽出し、
前記顔画像表示手段は、前記抽出された顔画像を前記ディスプレーに表示し、
前記操作部材の第２の操作に基づいて、前記撮影手段で被写体を撮影し、前記撮影された画像を前記記憶手段が記憶する、
ことを特徴とする請求項１に記載の撮影装置。
【請求項３】
前記顔画像表示手段は、前記顔画像抽出手段が複数の顔画像を抽出した場合には、それら複数の顔画像を前記ディスプレーに並べて表示する、
ことを特徴とする請求項２に記載の撮影装置。
【請求項４】
被写体を撮影して被写体の温度画像を生成する温度画像撮影手段と、
前記温度画像撮影手段で撮影した温度画像をもとに人間の顔部分の候補となる少なくとも１つの画像を抽出する顔候補抽出手段とを更に有し、
前記顔画像抽出手段は、前記顔候補抽出手段が抽出した候補となる画像について、当該画像の特徴により顔か否かを判定し、顔と判定された場合、その候補となる画像を顔画像として抽出する、
ことを特徴とする請求項２に記載の撮影装置。
【請求項５】
被写体の静止画像を撮影して記憶する撮影装置の撮影方法であって、
被写体を撮影して画像を生成する撮影ステップと、
前記撮影ステップで撮影された画像を記憶する記憶ステップと、
前記撮影ステップで撮影するときに、被写体を確認するためのプレビュー画像を取得しディスプレーに表示するプレビューステップと、
前記撮影ステップで撮影するフレーム内に存在する人間の顔部分を抽出する顔画像抽出ステップと、
前記顔画像抽出ステップで抽出された少なくとも一つの顔画像を前記ディスプレーに表示する顔画像表示ステップと、
を有することを特徴とする撮影方法。
【請求項６】
当該撮影装置に設置又は装着された操作部材を更に有し、
前記操作部材の第1の操作に基づいて、前記顔画像抽出ステップは、前記フレームから人間の顔部分を抽出し、
前記顔画像表示ステップは、前記抽出された顔画像を前記ディスプレーに表示し、
前記操作部材の第２の操作に基づいて、前記撮影ステップは被写体を撮影し、前記記憶ステップは、前記撮影された画像を記憶する、
ことを特徴とする請求項５に記載の撮影方法。
【請求項７】
前記顔画像表示ステップは、前記顔画像抽出ステップで複数の顔画像が抽出された場合には、それら複数の顔画像を前記ディスプレーに並べて表示する、
ことを特徴とする請求項６に記載の撮影方法。
【請求項８】
被写体を撮影して被写体の温度画像を生成する温度画像撮影ステップと、
前記温度画像撮影ステップで撮影した温度画像をもとに人間の顔部分の候補となる少なくとも１つの画像を抽出する顔候補抽出ステップとを更に有し、
前記顔画像抽出ステップは、前記顔候補抽出ステップで抽出した候補となる画像について、当該画像の特徴により顔か否かを判定し、顔と判定された場合、その候補となる画像を顔画像として抽出する、
ことを特徴とする請求項６に記載の撮影方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影時において、被写体がユーザの好みの状態にあるかどうかを容易に確認して撮影することのできる撮影装置及び撮影方法に関する。
【背景技術】
【０００２】
従来の撮影装置では、撮影するフレーム画像が液晶画面に表示されている。しかし、液晶画面の表示領域は小さいため、縮小された画像で被写体の顔の状態を確認することが困難な場合がある。  
そのため、撮影した画像を再生して初めて被写体の顔の状態の良否を知ることとなり、再度の撮影を行うなどフィルムや撮影時間の無駄を生ずる場合が多々見られる。
【０００３】
このような課題を解決するため、人物写真の撮影の際に、被写体が開眼状態であることを検知して、撮影装置のシャッタの駆動を許可することにより、常に開眼状態の写真を撮影する技術が開示されている（例えば、特許文献１参照）。
【特許文献１】特開平８−２５１４７５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかし、特許文献１に記載された方法では、被写体が閉眼状態で撮影されることを防止することができるが、被写体が開眼状態にあることが必ずしもユーザが撮影したい画像であるとは限らない。
【０００５】
本発明は、係る事情に鑑みてなされたものであって、撮影時において、被写体がユーザの好みの状態にあるかどうかを容易に確認して撮影することのできる撮影装置及び撮影方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するための、本発明に係る請求項１に記載の撮影装置は、被写体の静止画像を撮影して記憶する撮影装置であって、被写体を撮影して画像を生成する撮影手段と、前記撮影手段で撮影された画像を記憶する記憶手段と、前記撮影手段で撮影するときに、被写体を確認するためのプレビュー画像を取得しディスプレーに表示するプレビュー手段と、前記撮影手段で撮影するフレーム内に存在する人間の顔部分を抽出する顔画像抽出手段と、前記顔画像抽出手段で抽出された少なくとも一つの顔画像を前記ディスプレーに表示する顔画像表示手段とを有する。
【０００７】
また本発明に係る請求項２に記載の撮影装置は、上記記載の発明である撮影装置において、当該撮影装置に設置又は装着された操作部材を更に有し、前記操作部材の第1の操作に基づいて、前記顔画像抽出手段は、前記フレームから人間の顔部分を抽出し、前記顔画像表示手段は、前記抽出された顔画像を前記ディスプレーに表示し、前記操作部材の第2の操作に基づいて、前記撮影手段で被写体を撮影し、前記撮影された画像を前記記憶手段に記憶する。
【０００８】
また本発明に係る請求項３に記載の撮影装置は、上記記載の発明である撮影装置において、前記顔画像表示手段は、前記顔画像抽出手段が複数の顔画像を抽出した場合には、それら複数の顔画像を前記ディスプレーに並べて表示する。
【０００９】
また本発明に係る請求項４に記載の撮影装置は、上記記載の発明である撮影装置において、被写体を撮影して被写体の温度画像を生成する温度画像撮影手段と、前記温度画像撮影手段で撮影した温度画像をもとに人間の顔部分の候補となる少なくとも１つの画像を抽出する顔候補抽出手段とを更に有し、前記顔画像抽出手段は、前記顔候補抽出手段が抽出した候補となる画像について、当該画像の特徴により顔か否かを判定し、顔と判定された場合、その候補となる画像を顔画像として抽出する。
【００１０】
また本発明に係る請求項５に記載の撮影方法は、被写体の静止画像を撮影して記憶する撮影装置の撮影方法であって、被写体を撮影して画像を生成する撮影ステップと、前記撮影ステップで撮影された画像を記憶する記憶ステップと、前記撮影ステップで撮影するときに、被写体を確認するためのプレビュー画像を取得しディスプレーに表示するプレビューステップと、前記撮影ステップで撮影するフレーム内に存在する人間の顔部分を抽出する顔画像抽出ステップと、前記顔画像抽出ステップで抽出された少なくとも一つの顔画像を前記ディスプレーに表示する顔画像表示ステップとを有する。
【００１１】
また本発明に係る請求項６に記載の撮影方法は、上記記載の発明である撮影方法において、当該撮影装置に設置又は装着された操作部材を更に有し、前記操作部材の第1の操作に基づいて、前記顔画像抽出ステップは、前記フレームから人間の顔部分を抽出し、前記顔画像表示ステップは、前記抽出された顔画像を前記ディスプレーに表示し、前記操作部材の第２の操作に基づいて、前記撮影ステップは被写体を撮影し、前記記憶ステップは、前記撮影された画像を記憶する。
【００１２】
また本発明に係る請求項７に記載の撮影方法は、上記記載の発明である撮影方法において、前記顔画像表示ステップは、前記顔画像抽出ステップで複数の顔画像が抽出された場合には、それら複数の顔画像を前記ディスプレーに並べて表示する。
【００１３】
また本発明に係る請求項８に記載の撮影方法は、上記記載の発明である撮影方法において、被写体を撮影して被写体の温度画像を生成する温度画像撮影ステップと、前記温度画像撮影ステップで撮影した温度画像をもとに人間の顔部分の候補となる少なくとも１つの画像を抽出する顔候補抽出ステップとを更に有し、前記顔画像抽出ステップは、前記顔候補抽出ステップで抽出した候補となる画像について、当該画像の特徴により顔か否かを判定し、顔と判定された場合、その候補となる画像を顔画像として抽出する。
【発明の効果】
【００１４】
本発明によれば、被写体の状態を容易に確認することができるため、ユーザは好みの状態にある被写体を撮影することができる。
【発明を実施するための最良の形態】
【００１５】
〔第１の実施の形態〕  
図１は、本発明の一実施形態に係る撮影方法を説明する図である。  
図１の（１）は、撮影装置１を背面から見た模式図である。撮影装置１のモニタ画面２には、並んだ２人の人物が表示されている。  
通常は、全体の構図を重視する観点から、モニタ画面２には全体の縮小画像が表示される。従って、この状態では、人物の細かな表情などを把握することは一般に困難である。
【００１６】
ユーザがシャッタ３を半押し状態にすると、例えば、人物に対して合焦動作が行われる。このとき、ユーザがシャッタ３の半押し状態を一定時間以上保持すると、図１の（２）に示すように、モニタ画面２には人物の顔領域のみを抽出した画像が一覧表示される。  
この顔画像はスルー画像として表示される。従って、ユーザは人物の表情をリアルタイムで確認することができる。なお、人物が３人以上いる場合には、モニタ画面２には、その人物の数だけ顔画像が配置して表示される。
【００１７】
ユーザは、拡大して表示される顔画像を確認して、所望のタイミングでシャッタを全押しして撮影することができる。  
このようにして、複数の人物を撮影するにあたって、それぞれの顔を確認してシャッタを切ることができるため、被写体がユーザの好みの状態にあることを確認しながら撮影を行うことが可能となる。
【００１８】
図２は、第１の実施の形態に係る撮影装置の構成を示すブロック図である。図２を参照しつつ撮影装置の構成と動作について説明する。
【００１９】
レンズ部１１は、被写体光像を撮影装置内に導く。撮像部１２は、被写体光像を変換して画像データを生成する。画像一時記憶メモリ１３は、画像データを一時的に記憶するバッファメモリである。画像処理部１４は、画像データに画像処理を施す。
【００２０】
表示部１５は、画像処理された画像のサムネイル画像などを表示する。顔画像検出部１６は、画像データ中の人物の顔を検出する。領域切り出し部１７は、画像データ中の人物の顔を含む領域を抽出する。記録媒体１８には、画像処理された撮影画像が保存される。コントロールシャッタ部１９は、シャッタ３の半押し状態、全押し状態を検出する。制御部２０は、撮影装置の全体を統括して制御する。
【００２１】
シャッタコントロール部１９から、半押し状態であることを表す信号が制御部２０に送られると、制御部２０は、撮像部１２から画像一時記憶メモリ１３を介して画像処理部１４に画像データを転送する。  
画像処理部１４で処理された画像のサムネイル画像は表示部１５で表示される。ユーザの半押し状態が一定時間以上継続している場合は、顔画像検出部１６と領域切り出し部１７は、処理画像から顔を含む領域を抽出して顔画像を生成する。画像処理部１４は、顔画像の一覧を表示部１５に表示する。  
そして、シャッタコントロール部１９から、全押し状態であることを表す信号が制御部２０に送られると、制御部２０は、画像一時記憶メモリ１３に転送される画像データを主画像として取扱い、画像処理を行った後、記録媒体１８に記録する。
【００２２】
図３は、第１の実施の形態の撮影装置の撮影動作を示すフロー図である。この撮影動作は、制御部２０が撮影装置の各部を制御することで実行される。
【００２３】
撮影装置に電源が投入されると、ステップＳ０１において、スルー画像が表示部１５で表示される。制御部２０は、ステップＳ０２において、シャッタ３の半押しを検出すると、ステップＳ０３において、半押し時間を監視するタイマーを起動し、それと共に、ステップＳ０４において、オートフォーカス動作を制御する。
【００２４】
制御部２０は、ステップＳ０５において、半押し時間を監視するタイマーが一定時間を経過しているかどうかを監視する。一定時間を経過しているときは、ステップＳ０６において、顔画像検出部１６を制御して顔画像を検出し、ステップＳ０７において、領域切り出し部１７を制御して検出した領域を切り出す。そして、ステップＳ０８において、切り出した画像を一覧として表示部１５に表示する。
【００２５】
ユーザは、表示された顔画像を監視して、所望のタイミングでシャッタ３を全押しする。制御部２０は、ステップＳ１０において、シャッタ３の全押しを検出すると、ステップＳ１１において、露出を制御して撮影した画像を獲得し、ステップＳ１２において、獲得した主画像に画像処理を施して記録媒体１８に保存する。
【００２６】
〔第２の実施の形態〕  
第２の実施の形態では、可視光を用いる撮影に加え、赤外光を利用してサーモグラフィ画像を撮影する。そして、そのサーモグラフィ画像を利用して顔画像を切り出す点が第１の実施の形態と異なっている。  
従って、第１の実施の形態と同一の部位については同一の符号を付して、その詳細の説明は省略する。
【００２７】
図４は、第２の実施の形態に係る撮影装置の構成を示すブロック図である。  
撮影装置１には、分光器２１、可視光線撮像装置２２、可視光画像一時記憶メモリ２３、反射板２５、赤外線撮像装置２６及び赤外光画像一時記憶メモリ２７が新たに設けられている。
【００２８】
分光器２１は、可視光を透過して赤外光を反射する。可視光線撮像装置２２は、可視光線による被写体光像を変換して画像データを生成する。可視光画像一時記憶メモリ２３は、可視光による画像データを一時的に記憶するバッファメモリである。  
反射板２５は、赤外光を反射する。赤外線撮像装置２６は、赤外光線による被写体光像を変換して画像データを生成する。赤外光画像一時記憶メモリ２７は、赤外光による画像データを一時的に記憶するバッファメモリである。
【００２９】
レンズ部１１から入射する光は、分光器２１によって可視光と赤外光とに分光される。可視光による被写体光像は可視光線撮像装置２２に導かれ、赤外光による被写体光像は反射板２５を介して赤外光線撮像装置２６に導かれる。  
シャッタコントロール部１９から、半押し状態であることを表す信号が制御部２０に送られると、制御部２０は、可視光線撮像装置２２から可視光画像一時記憶メモリ２３を介して画像処理部１４に画像データを転送する。
【００３０】
ユーザの半押し状態が一定時間以上継続している場合は、画像処理部１４は、領域切り出し部１７に対して顔画像の切り出しを要求する。赤外光画像一時記憶メモリ２７に赤外光の画像データが存在する場合は、その画像データが領域切り出し部１７に転送される。そして、顔画像検出部１６と領域切り出し部１７は、処理画像と赤外光の画像データとから顔を含む領域を抽出して顔画像を生成する。  
なお、上述の動作以外の動作は、第１の実施の形態と同一であるため、その詳細の説明は省略する。
【００３１】
図５は、サーモグラフィ画像を用いて顔画像を抽出する手順を示すフロー図である。図６は、サーモグラフィ画像を用いて顔画像を抽出する動作を説明する図である。この動作は、制御部２０が顔画像検出部１６と領域切り出し部１７を制御することにより実行される。以下、図５と図６を参照しつつ、その動作を説明する。
【００３２】
図５のステップＳ２１、Ｓ２２において、サーモグラフィ画像を読み込み、そのサーモグラフィ画像から人物の体温に近い温度領域を抽出する。  
図６の（２）には、サーモグラフィ画像から抽出された人物の体温に近い温度領域（特徴抽出領域）が複数表示されている。
【００３３】
図５のステップＳ２３、Ｓ２４において、処理画像から特徴抽出領域に対応する領域の画像を取り出す。そして、取り出した画像の内、顔画像を含むものを抽出する。顔画像を含むかどうかの判断は、公知の顔認識技術であるパターンマッチング、特徴抽出技術などを用いることができる。  
図６の（３）には、抽出された顔画像が表示されている。
【００３４】
図５のステップＳ２５、Ｓ２６において、抽出された顔画像を含む所定の領域の画像を切り出して、その切り出した顔画像を一覧として表示するため合成画像を生成する。
【００３５】
この実施の形態によれば、サーモグラフィ画像から予め人物の体温に近い温度領域を抽出しているため、顔認識技術の適用において、認識率を高めることができ、更に認識処理の効率化により、処理時間を短縮することができる。
【００３６】
なお、上述の各実施の形態では、シャッタの半押しによって顔画像の一覧を表示していたが、顔画像を表示する撮影モードを設け、その撮影モードが選択されたときに、上述の動作を行うようにしても良い。  
また顔画像を表示させるための操作部材をシャッタとは別に設け、その部材を操作することで顔画像を表示するようにしても良い。  
更に、顔画像を表示させるための操作部材は、シャッタと同様に撮影装置に予め設けられているものに限らず、必要なときに装備するようにしても良い。
【００３７】
なお、上述の実施の形態で説明した各機能は、ハードウエアを用いて構成しても良く、また、ソフトウエアを用いて各機能を記載したプログラムをコンピュータに読み込ませて実現しても良い。また、各機能は、適宜ソフトウエア、ハードウエアのいずれかを選択して構成するものであっても良い。
【００３８】
更に、各機能は図示しない記録媒体に格納したプログラムをコンピュータに読み込ませることで実現させることもできる。ここで本実施の形態における記録媒体は、プログラムを記録でき、かつコンピュータが読み取り可能な記録媒体であれば、その記録形式は何れの形態であってもよい。
【００３９】
なお、この発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
【図面の簡単な説明】
【００４０】
【図１】本発明の一実施形態に係る撮影方法を説明する図。
【図２】第１の実施の形態に係る撮影装置の構成を示すブロック図。
【図３】第１の実施の形態の撮影装置の撮影動作を示すフロー図。
【図４】第２の実施の形態に係る撮影装置の構成を示すブロック図。
【図５】サーモグラフィ画像を用いて顔画像を抽出する手順を示すフロー図。
【図６】サーモグラフィ画像を用いて顔画像を抽出する動作を説明する図。
【符号の説明】
【００４１】
１…撮影装置、２…モニタ画面、３…シャッタ、１２…撮像部、１３…縮小画像、１４…画像処理部、１６…顔画像検出部、１７…領域切り出し部、１９…シャッターコントロール部、２０…制御部、２２…可視光線撮像装置、２６…赤外線撮像装置。
【図１】
2007116610.tif 000003
【図２】
2007116610.tif 000004
【図３】
2007116610.tif 000005
【図４】
2007116610.tif 000006
【図５】
2007116610.tif 000007
【図６】
2007116610.tif 000008