(57)【要約】【課題】  被写体の抽出が正確に行えているか否かの判断を容易に行う。【解決手段】  撮影時に取得される第１画像とは異なる第２画像を、撮影が行われる前に一定間隔毎に取得することが可能な撮像手段と、画像に含まれる被写体を抽出する被写体抽出手段と、入力操作に応じて操作信号を出力する操作手段と、第１画像及び第２画像を表示することが可能な表示手段と、第２画像が表示手段に表示された状態で操作手段からの操作信号が出力されたときにのみ、被写体抽出手段による被写体の抽出を第２画像に対して実行させる第１の制御手段と、第２画像に対する被写体の抽出が行われたときに、抽出される被写体の領域と被写体の領域を除く領域との境界を示す境界線を第２画像に付加して表示手段に表示させる第２の制御手段と、を備えたことを特徴とする。【選択図】    図３
2011114544.tif 000002
【特許請求の範囲】
【請求項１】
撮影時に取得される第１画像とは異なる第２画像を、前記撮影が行われる前に一定間隔毎に取得することが可能な撮像手段と、
画像に含まれる被写体を抽出する被写体抽出手段と、
入力操作に応じて操作信号を出力する操作手段と、
前記第１画像及び前記第２画像を表示することが可能な表示手段と、
前記第２画像が前記表示手段に表示された状態で前記操作手段からの操作信号が出力されたときにのみ、前記被写体抽出手段による被写体の抽出を前記第２画像に対して実行させる第１の制御手段と、
前記第２画像に対する前記被写体の抽出が行われたときに、抽出される前記被写体の領域と該被写体の領域を除く領域との境界を示す境界線を前記第２画像に付加して前記表示手段に表示させる第２の制御手段と、
を備えたことを特徴とする撮像装置。
【請求項２】
請求項１に記載の撮像装置において、
前記被写体抽出手段により前記被写体の抽出が行われた前記第２画像に対して画像処理を施す画像処理手段を備え、
前記第２の制御手段は、前記画像処理が施された前記第２画像に前記境界線を付加して前記表示手段に表示させることを特徴とする撮像装置。
【請求項３】
請求項２に記載の撮像装置において、
前記被写体抽出手段は、前記第１画像に対して被写体の抽出を行い、
前記画像処理手段は、前記被写体の抽出が実行された前記第１画像に対して前記画像処理を施すことを特徴とする撮像装置。
【請求項４】
請求項２に記載の撮像装置において、
前記被写体抽出手段は、前記第１画像を縮小した第３画像に対して被写体の抽出を行い、
前記画像処理手段は、前記被写体の抽出が実行された前記第３画像に対して前記第２画像に対して施した画像処理と同一の処理内容の画像処理を施し、
前記表示手段は、前記画像処理が施された第３画像を表示することを特徴とする撮像装置。
【請求項５】
請求項４に記載の撮像装置において、
前記画像処理が施された第３画像が前記表示手段に表示されたときに、該表示された第３画像に施された前記画像処理の良否を選択する選択手段を備え、
前記画像処理手段は、前記選択手段により前記第３画像に施された画像処理を良とする場合に、前記第３画像に施された画像処理と同一の前記画像処理を前記第１画像に施すことを特徴とする撮像装置。
【請求項６】
請求項２〜請求項５のいずれか１項に記載の撮像装置において、
前記画像処理手段における画像処理は、被写体の領域を除く領域に対するぼかし処理であることを特徴とする撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像中の被写体を抽出することが可能な撮像装置に関する。
【背景技術】
【０００２】
撮影により取得された画像から被写体の領域を抽出し、抽出した被写体領域、又は被写体領域を除く領域に対して画像処理を実行する技術が考案されている。また、撮影時に得られる画像（本画像）に対してぼかし処理などの画像処理を行うデジタルカメラにおいて、撮影前に取得される画像（スルー画像）に対して本画像に施される画像処理と同一の画像処理を施した後、該画像処理が施されたスルー画像を表示することで、撮影時に得られる本画像のイメージを事前にユーザに認識させる技術も考案されている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−１２４２７８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、本画像と同一の画像処理を施したスルー画像を表示する場合、スルー画像自体の画質が低いことから、被写体が占める領域と、それ以外の領域との境界がはっきりせず、表示されるスルー画像から被写体の抽出が正確に行えているか否かを判断することが難しい。
【０００５】
本発明は、被写体の抽出が正確に行えているか否かの判断を容易に行うことができるようにした撮像装置を提供することを目的にする。
【課題を解決するための手段】
【０００６】
上述した課題を解決するために、本発明の撮像装置は、撮影時に取得される第１画像とは異なる第２画像を、前記撮影が行われる前に一定間隔毎に取得することが可能な撮像手段と、画像に含まれる被写体を抽出する被写体抽出手段と、入力操作に応じて操作信号を出力する操作手段と、前記第１画像及び前記第２画像を表示することが可能な表示手段と、前記第２画像が前記表示手段に表示された状態で前記操作手段からの操作信号が出力されたときにのみ、前記被写体抽出手段による被写体の抽出を前記第２画像に対して実行させる第１の制御手段と、前記第２画像に対する前記被写体の抽出が行われたときに、抽出される前記被写体の領域と該被写体の領域を除く領域との境界を示す境界線を前記第２画像に付加して前記表示手段に表示させる第２の制御手段と、を備えたことを特徴とする。
【０００７】
また、前記被写体抽出手段により前記被写体の抽出が行われた前記第２画像に対して画像処理を施す画像処理手段を備え、前記第２の制御手段は、前記画像処理が施された前記第２画像に前記境界線を付加して前記表示手段に表示させることが好ましい。
【０００８】
また、前記被写体抽出手段は、前記第１画像に対して被写体の抽出を行い、前記画像処理手段は、前記被写体の抽出が実行された前記第１画像に対して前記画像処理を施すことが好ましい。
【０００９】
また、前記被写体抽出手段は、前記第１画像を縮小した第３画像に対して被写体の抽出を行い、前記画像処理手段は、前記被写体の抽出が実行された前記第３画像に対して前記第２画像に対して施した画像処理と同一の処理内容の画像処理を施し、前記表示手段は、前記画像処理が施された第３画像を表示することが好ましい。
【００１０】
また、前記画像処理が施された第３画像が前記表示手段に表示されたときに、該表示された第３画像に施された前記画像処理の良否を選択する選択手段を備え、前記画像処理手段は、前記選択手段により前記第３画像に施された画像処理を良とする場合に、前記第３画像に施された画像処理と同一の前記画像処理を前記第１画像に施すことが好ましい。
【００１１】
また、前記画像処理手段における画像処理は、被写体の領域を除く領域に対するぼかし処理であることが好ましい。
【発明の効果】
【００１２】
本発明によれば、被写体の抽出が正確に行えているか否かの判断を容易に行うことができる。
【図面の簡単な説明】
【００１３】
【図１】デジタルカメラの一例を示す機能ブロック図である。
【図２】撮影時の処理の流れを示すフローチャートである。
【図３】図２に示すフローチャートのステップＳ１０３からステップＳ１０６の処理の流れを説明する図である。
【図４】実際の被写体の領域と、被写体抽出により抽出される被写体の領域とがことなる場合の画像を示す図である。
【発明を実施するための形態】
【００１４】
図１は、撮像装置の一例としたデジタルカメラ１０の構成を示している。周知のように、デジタルカメラ１０は、撮像光学系１５によって取り込まれた被写体光を撮像素子１６により光電変換し、光電変換後に撮像素子１６から出力される電気信号（画像信号）から画像データを取得する。
【００１５】
撮像光学系１５は、図示を省略したズームレンズやフォーカスレンズなどを含むレンズ群から構成される。これらズームレンズやフォーカスレンズは図示を省略したレンズ駆動機構によって光軸Ｌ方向に移動する。撮像素子１６は、ＣＣＤイメージセンサやＣＭＯＳイメージセンサが用いられる。この撮像素子１６は、ドライバ１７によって駆動される。ドライバ１７は、撮像素子１６の各画素における信号電荷の蓄積、及び蓄積された信号電荷の出力を制御する。
【００１６】
ＡＦＥ（Ａｎａｌｏｇ  Ｆｒｏｎｔ  Ｅｎｄ）回路２１は、周知のＣＤＳ回路、ＡＧＣ回路及びＡ／Ｄ変換回路を備えている。ＡＦＥ回路２１は、撮像素子１６から出力された画像信号に対して、ＣＤＳ回路による相関二重サンプリング処理、ＡＧＣ回路によるゲイン調整が施される。これら処理が施された画像信号は、Ａ／Ｄ変換回路によりアナログの信号からデジタルの信号に変換される。
【００１７】
ＤＦＥ（Ｄｉｇｉｔａｌ  Ｆｒｏｎｔ  Ｅｎｄ）回路２２は、入力される画像信号に対して、シェーディング補正処理、ＦＰＮ補正処理などの補正処理を行う。これら処理については周知であることから、その詳細を省略する。これら処理が施された画像信号は、バッファメモリ２３に画像データとして一時的に記録される。符号２４は、タイミングジェネレータ（ＴＧ）であり、このタイミングジェネレータ２４により、ドライバ１７、ＡＦＥ回路２１及びＤＦＥ回路２２の駆動タイミングが制御される。
【００１８】
画像処理回路３１は、バッファメモリ２３に記憶された画像データに対して、ホワイトバランス処理、色補間処理、輪郭補償処理、ガンマ処理などの画像処理を施す。また、画像処理回路３１は、これら処理の他、後述する被写体抽出処理、ぼかし処理などを実行する。さらに、画像処理回路３１は、画像サイズを変更するリサイズ処理、画像データに対する符号化処理、符号化された画像データに対する復号化処理などを実行する。
【００１９】
この画像処理回路３１は、被写体抽出部３２、マスク生成部３３、ぼかし処理部３４を備えている。被写体抽出部３２は、画像に含まれる被写体を抽出する。以下、被写体の抽出する処理を被写体抽出処理と称する。被写体抽出処理を行う画像としては、レリーズボタン５５の半押し操作が実行されている間に取り込まれるスルー画像、撮影により取得される画像（以下、本画像）、本画像に対してリサイズ処理を行った縮小画像が挙げられる。また、被写体抽出処理としては、周知の特定輪郭を抽出する技術、肌色などの特定の色の領域を抽出する技術、顔を認識する技術のいずれか、或いは、これら技術を組み合わせて用いた処理が挙げられる。被写体抽出部３２により抽出された被写体の領域（以下、被写体領域）に含まれる画素のアドレスデータは、内蔵メモリ４５に書き込まれる。
【００２０】
マスク生成部３３は、被写体抽出部３２により抽出された被写体領域を示すマスク画像データを生成する。なお、被写体領域を示すマスク画像データに基づく画像（マスク画像）としては、例えば被写体の輪郭を示す輪郭線のみの画像ＭＩ（図３（ｃ）参照）が挙げられる。なお、この輪郭線は、マスク画像とスルー画像とを重畳表示したときに、スルー画像における被写体領域と該被写体領域を除く領域（以下、背景領域）との境界を示す線（境界線）となる。マスク生成部３３は、上述したマスク画像データを生成し、バッファメモリ２３に書き込む。なお、この輪郭線は、実線、点線、一点鎖線、二点鎖線など、適宜の線種を用いることができる。また、輪郭線の太さや色は、被写体領域と背景領域との境界が認識できるような太さや色であればよい。
【００２１】
ぼかし処理部３４は、被写体抽出部３２による被写体抽出処理を行った画像データに対して、ぼかし処理を実行する。ここで、ぼかし処理としては、例えばローパスフィルタ（ＬＰＦ）処理が挙げられる。このＬＰＦ処理は、画像の高域空間周波数成分を劣化させ、画像のエッジを不鮮明にし、画像のコントラストを低下させる処理である。このぼかし処理は、画像全体ではなく、背景領域に対して施される。
【００２２】
記録用Ｉ／Ｆ４１は、メモリカードや光学ディスク、或いは磁気ディスクなどの記憶媒体４２と電気的に接続可能となっている。この記録用Ｉ／Ｆ４１に接続される記憶媒体４２には画像ファイルが記憶される。
【００２３】
ＬＣＤ４３は、表示装置の一形態であって、スルー画像、撮影時に得られた画像やデジタルカメラ１０の設定を行う際の設定用の画像を表示する。なお、符号４４は、ＬＣＤ４３の表示制御を行う表示制御回路である。
【００２４】
ＣＰＵ５１は、バス５２を介して、バッファメモリ２３、画像処理回路３１、記録用Ｉ／Ｆ４１、表示制御回路４４、内蔵メモリ４５などと電気的に接続される。また、このＣＰＵ５１には、レリーズボタン５５、設定操作部５６などが接続されており、ＣＰＵ５１は、これら操作部材における操作要求や内蔵メモリ４５に記憶された制御プログラムに基づいて、デジタルカメラ１０の各部を制御する。
【００２５】
次に、撮影時の処理の流れについて図２のフローチャートを用いて説明する。なお、以下では、撮影モードとしてポートレートモード、マクロモードが設定されている場合に実行される場合について説明する。また、図２のフローチャートは、レリーズボタン５５を操作すれば撮影を行える撮影待機状態であることを契機にして実行される。
【００２６】
ステップＳ１０１は、スルー画像を表示する処理である。撮影待機状態では、撮像光学系１５を介して取り込まれる被写体光を撮像素子１６により受光し、該被写体光を受光したときに光電変換される信号電荷を間引き読み出しする。この動作は一定間隔を空けて連続して実行される。間引き読み出しされる各画像信号は、ＡＦＥ回路２１、ＤＦＥ回路２２を介してバッファメモリ２３にスルー画像データとして順次記憶される。画像処理回路３１は、バッファメモリ２３に順次記録されるスルー画像データのそれぞれに対して、ホワイトバランス処理、色補間処理、輪郭補償処理、ガンマ処理などを施す。画像処理回路３１は、画像処理済みのスルー画像データを表示制御回路４４に出力する。表示制御回路４４は、入力された画像処理済みのスルー画像データに基づいたスルー画像をＬＣＤ４３に表示する。
【００２７】
ステップＳ１０２は、スイッチＳＷ１がオンされたか否かを判定する処理である。レリーズボタン５５には、その半押し操作時にオンとなるスイッチＳＷ１と、全押し操作時にオンとなるスイッチＳＷ２とが設けられている。これらスイッチＳＷ１、ＳＷ２がオンとなると、オンされたことを示す信号（以下、オン信号）がＣＰＵ５１に出力される。このステップＳ１０２では、スイッチＳＷ１からのオン信号がＣＰＵ５１に入力されたか否かを判定する。スイッチＳＷ１からのオン信号がＣＰＵ５１に入力される場合には、ＣＰＵ５１はステップＳ１０２の判定をＹｅｓとする。この場合、ステップＳ１０３に進む。一方、スイッチＳＷ１からのオン信号がＣＰＵ５１に入力されていない場合には、ＣＰＵ５１はステップＳ１０２の判定をＮｏとする。この場合、ステップＳ１０１に戻り、ステップＳ１０１及びステップＳ１０２が繰り返し実行される。つまり、この場合には、スルー画像がＬＣＤ４３に表示され続ける。
【００２８】
ステップＳ１０２における判定処理においてＹｅｓとなる場合には、ステップＳ１０３に進む。ステップＳ１０３は、スルー画像データに対する被写体抽出処理である。ＣＰＵ５１は、スルー画像データに対する被写体抽出処理を開始する旨の信号を画像処理回路３１に出力する。これを受けて、画像処理回路３１は、スルー画像データをバッファメモリ２３から読み出し、被写体抽出処理を実行する。この被写体抽出処理により被写体が抽出される。画像処理回路３１は、抽出された被写体領域に含まれる画素のアドレスデータを内蔵メモリ４５に書き込む。
【００２９】
ステップＳ１０４は、マスク画像データを生成する処理である。画像処理回路３１は、内蔵メモリ４５から、被写体領域に含まれる画素のアドレスデータを参照して、被写体の輪郭を示す輪郭線からなるマスク画像を生成する。なお、この生成されたマスク画像の元になるマスク画像データは、バッファメモリ２３に記録される。
【００３０】
ステップＳ１０５は、スルー画像データに対するぼかし処理である。画像処理回路３１は、被写体領域に含まれる画素のアドレスデータを内蔵メモリ４５から読み出し、スルー画像における背景領域を特定する。画像処理回路３１は、特定された背景領域に対してぼかし処理を実行する。このぼかし処理を実行することで、背景領域がぼけたスルー画像データが生成される。なお、この背景領域がぼけたスルー画像データは、画像処理回路３１から表示制御回路４４に出力される。
【００３１】
ステップＳ１０６は、ぼかし処理が施されたスルー画像とマスク画像とを重畳表示する処理である。ＣＰＵ５１は、バッファメモリ２３からマスク画像データを読み出し、表示制御回路４４に出力する。この表示制御回路４４には、ぼかし処理が施されたスルー画像データが入力されている。表示制御回路４４は、ぼかし処理が施されたスルー画像データと、マスク画像データとを用いて、これら画像データに基づく画像をＬＣＤ４３に重畳表示する。これにより、被写体領域と背景領域との境界を示す境界線が付加された、ぼかし処理済みのスルー画像がＬＣＤ４３に表示される（図３（ｅ）参照）。
【００３２】
ステップＳ１０７は、スイッチＳＷ１のオンが保持されているか否かを判定する処理である。上述したように、スイッチＳＷ１は、レリーズボタン５５が半押し操作されたときにオンとなるスイッチである。このステップＳ１０７では、このスイッチＳＷ１からのオン信号の出力が保持されているか否かを判定する処理である。つまり、スイッチＳＷ１からのオン信号が出力され続けているときには、ＣＰＵ５１はステップＳ１０７の判定処理をＹｅｓとする。この場合、ステップＳ１０８に進む。一方、スイッチＳＷ１からのオン信号の出力が停止されている場合には、ＣＰＵ５１はステップＳ１０７の判定処理をＮｏとする。この場合、ステップＳ１０１に戻る。なお、このような判定をされる場合としては、レリーズボタン５５の操作を中断（中止）する場合が挙げられる。このような場合には、被写体領域と背景領域との境界線が付加されず、また、背景領域にぼかし処理が施されていないスルー画像がＬＣＤ４３に表示される。
【００３３】
ステップＳ１０８は、スイッチＳＷ２がオンされているか否かを判定する処理である。上述したように、スイッチＳＷ２は、レリーズボタン５５が全押し操作されたときにオンとなるスイッチである。このステップＳ１０８では、スイッチＳＷ２からのオン信号がＣＰＵ５１に入力されたか否かを判定する。スイッチＳＷ２からのオン信号がＣＰＵ５１に入力される場合には、ＣＰＵ５１はステップＳ１０８の判定処理をＹｅｓとする。この場合、ステップＳ１０９に進む。一方、スイッチＳＷ２からのオン信号がＣＰＵ５１に入力されていない場合には、ＣＰＵ５１はステップＳ１０８の判定処理をＮｏとする。この場合、ステップＳ１０３に戻る。このような場合には、ステップＳ１０３〜ステップＳ１０８の処理が繰り返し実行される。つまり、ぼかし処理が施されたスルー画像とマスク画像とがＬＣＤ４３に重畳表示され続ける。
【００３４】
ステップＳ１０９は、撮像処理である。詳細は省略したが、ステップＳ１０２の判定処理でＹｅｓとなる場合、ＣＰＵ５１は、ＡＥ処理による撮像時の露光条件の設定や、ＡＦ処理による焦点調節などの処理を実行している。ＣＰＵ５１は、設定された露光条件を用いて撮像処理を実行する。この撮像処理によって、撮影時の画像データ（以下、本画像データ）が取得される。この本画像データも、ＡＦＥ回路２１、ＤＦＥ回路２２を介してバッファメモリ２３に記録される。画像処理回路３１は、このバッファメモリ２３に書き込まれた本画像データに対して、ホワイトバランス処理、色補間処理、輪郭補償処理、ガンマ処理などを施す。
【００３５】
ステップＳ１１０は、本画像データに対するリサイズ処理である。画像処理回路３１は、ステップＳ１０９にて実行された各種画像処理が施された本画像データに対してリサイズ処理を行う。このステップＳ１１０の処理を行うことで、本画像データを縮小した縮小画像データが生成される。例えば本画像データの画像サイズが１０Ｍｐｉｘｅｌからなる場合、縮小画像データの画像サイズは２Ｍｐｉｘｅｌ程度に縮小されることが好ましい。このリサイズ処理により生成された縮小画像データは、バッファメモリ２３に再度記録される。
【００３６】
ステップＳ１１１は、縮小画像データに対する被写体抽出処理である。画像処理回路３１は、バッファメモリ２３から縮小画像データを読み出し、読み出した縮小画像データに対する被写体抽出処理を実行する。これにより、縮小画像データから被写体が抽出される。なお、被写体領域に含まれる画素のアドレスデータは、内蔵メモリ４５に記録される。
【００３７】
ステップＳ１１２は、縮小画像データに対するぼかし処理である。このステップＳ１１１の処理は、ステップＳ１０５と同様であることから、ここでは、その詳細を省略する。このステップＳ１１２の処理を行うことで、縮小画像データに基づく縮小画像の背景領域に対してぼかし処理が施される。このぼかし処理が施された縮小画像データは、バッファメモリ２３に記録される。
【００３８】
ステップＳ１１３は、処理済みの縮小画像を表示する処理である。ＣＰＵ５１は、バッファメモリ２３に記録された縮小画像データを読み出し、表示制御回路４４に出力する。これを受けて、表示制御回路４４は、縮小画像データに基づく縮小画像をＬＣＤ４３に表示する。例えば、縮小画像の画像サイズがＬＣＤ４３の画面サイズより大きい場合には、その一部分を表示しておき、ユーザによる設定操作部５６等の操作に合わせて、ＬＣＤ４３に表示される部位をずらして表示すればよい。また、この他に、縮小画像の画像サイズがＬＣＤ４３の画面サイズよりも大きい場合には、縮小画像の画像サイズをＬＣＤ４３の画面サイズに一致させるように、縮小画像の画像サイズを変更し、画像サイズを変更した縮小画像をＬＣＤ４３に表示させることも可能である。
【００３９】
ステップＳ１１４は、縮小画像に施されたぼかし処理が適切であるか否かを判定する処理である。上述したステップＳ１１３が実行されたときには、ＬＣＤ４３には縮小画像と、例えば「ぼかし処理はＯＫですか？」などの確認用のメッセージとが表示される（図示省略）。このステップＳ１１４は、確認用のメッセージに対してユーザが設定操作部５６を操作することで処理される。つまり、設定操作部５６の操作に基づく操作信号がＯＫを示す信号であれば、ＣＰＵ５１は、ステップＳ１１４の判定処理をＹｅｓとし、ステップＳ１１５に進む。一方、設定操作部５６の操作によりＣＰＵ５１に入力される操作信号がＮｏを示す信号であれば、ＣＰＵ５１は、撮影時の一連の処理を終了し、撮影待機状態となる。この場合、撮影により得られた本画像データは記録されずに削除される。
【００４０】
ステップＳ１１５は、本画像データに対する被写体抽出処理である。このステップＳ１１４における被写体抽出処理としては、ステップＳ１１１と同様である。これにより、本画像データに基づく本画像から被写体が抽出される。
【００４１】
ステップＳ１１６は、本画像データに対するぼかし処理である。ステップＳ１１５の処理を行うことで、被写体領域に含まれる画素のアドレスデータが取得されている。画像処理回路３１は、被写体領域に含まれる画素のアドレスデータに基づいて、背景領域を特定する。この特定の後、画像処理回路３１は、背景領域に含まれる画素に対してぼかし処理を実行する。これにより、本画像の背景領域にぼかし処理が施された本画像データが生成される。この本画像データは、バッファメモリ２３に記録される。
【００４２】
ステップＳ１１７は、処理済みの本画像データを記録する処理である。画像処理回路３１は、ステップＳ１１５によりぼかし処理が施された本画像信号に対して符号化処理を実行する。これにより、符号化された本画像データが生成される。ＣＰＵ５１は、画像処理回路３１にて符号化された本画像データと、撮影時の各種情報とをまとめた画像ファイルを記憶媒体に生成する。これにより、背景領域にぼかし処理が施された画像データが、画像ファイルとして記憶媒体に記録される。このステップＳ１１７の処理が終了すると、１回の撮影が終了し、撮影待機状態となる。
【００４３】
例えば１人の男性を被写体とした場合、撮影待機状態においては、通常、図３（ａ）に示すスルー画像ＴＩがＬＣＤ４３に表示される。この撮影待機状態において、ユーザによるレリーズボタン５５の半押し操作が実行されると、被写体抽出処理が実行される。この場合、１人の男性を被写体としていることから、スルー画像ＴＩに対して被写体抽出処理が実行されると、男性の領域（図３（ｂ）中ハッチングで示す領域６１）が被写体領域として抽出される。以下、被写体領域に対して符号６１を付して説明する。被写体領域６１が抽出された後、被写体領域６１に含まれる画素のアドレスデータに基づいて、被写体の輪郭を示す輪郭線６５からなるマスク画像ＭＩが生成される（図３（ｃ）参照）。
【００４４】
上述した被写体抽出処理が実行されると、抽出された被写体を除く領域が背景領域として特定される。つまり、スルー画像ＴＩにおける被写体領域６１以外の領域（図３（ｄ）中のハッチングで示す領域）６２が背景領域となる。以下、背景領域に対して符号６２を付して説明する。なお、この背景領域６２には、ぼかし処理が実行される。このぼかし処理が施された後、ぼかし処理が施されたスルー画像ＴＩ’とマスク画像ＭＩとがそれぞれ表示制御回路４４に入力される。表示制御回路４４は、スルー画像ＴＩ’とマスク画像ＭＩとをＬＣＤ４３に重畳表示させる。つまり、ＬＣＤ４３には、これら画像を重畳した画像Ｉ、言い換えれば被写体領域と背景領域との境界を示す境界線が付加されたスルー画像が表示される。これにより、抽出される被写体の領域の確認を容易に行うことができる。なお、この実施形態では、スルー画像の背景領域にぼかし処理を行っていることから、ぼかし処理を施したときのイメージをユーザに認識させることができる。
【００４５】
なお、図４に示すように、実際の被写体領域が図４中ハッチングで示す領域７１であるのに対して、上述した被写体抽出処理により抽出された被写体領域、また該被写体領域に基づいて設定される境界線７２が背景領域側にずれてしまう場合もある。このような場合には、境界線７２の外側の領域（図中ハッチングで示す領域７３）にぼかし処理が行われ、実際の被写体領域７１と境界線７２の間の領域７４に対しては、ぼかし処理が実行されない。このような場合には、撮影者が被写体領域７１の輪郭が境界線７２と略一致するように、つまり、実際の被写体領域７１と境界線７２の間の領域７４が無くなるように、撮影時の構図や、被写体と撮影者との位置関係を変更すればよい。このように、被写体領域と背景領域の境界線を表示することで、撮影時の被写体の位置や構図を変更する際の目安とすることができる。
【００４６】
本実施形態では、被写体が一人の人物の場合について説明しているが、実際に画像に含まれる被写体が複数の人物からなる場合もある。このような場合であっても、本発明を適用することが可能である。
【００４７】
また、予め被写体となる人物を登録しておき、抽出された被写体が登録された被写体と一致しているか否かによって、上述したステップＳ１０４の処理及びステップＳ１０５の処理を実行することも可能である。つまり、目的の人物以外の人物が含まれる画像の場合には、目的の人物以外の人物も被写体として抽出される恐れがある。このため、予め被写体となる人物を登録しておくことで、目的となる人物以外の人物を被写体として抽出させずに済む。
【００４８】
本実施形態では、撮影時に得られる本画像データをリサイズ処理した縮小画像データに対してぼかし処理を行った後、該ぼかし処理を行った縮小画像データに基づく画像を表示しているが、これら処理は必ず実行する必要はなく、縮小画像データの生成や、生成された縮小画像データに対するぼかし処理を行わずに、本画像データに対してぼかし処理を行ってもよい。
【００４９】
本実施形態では、実際の被写体領域と、被写体抽出処理により抽出される被写体領域とがずれている場合には、撮影時の構図や被写体の位置を変更することが好ましいが、ユーザによっては、ユーザが好む構図の場合に、実際の被写体領域と、被写体抽出処理により抽出される被写体領域とがずれてしまう場合がある（例えば図４参照）。このような場合に対処するために、タッチパネルをデジタルカメラに設けられたＬＣＤなどの前面に配置し、このタッチパネルの操作により境界線の位置を調整できるようにしても良い。この場合、タッチパネルの操作量を記憶させておき、このタッチパネルの操作量に基づく補正量を用いて、縮小画像や本画像から特定される背景領域を補正すればよい。また、タッチパネルを設けずに、設定操作部などの操作に合わせて移動するポインタをＬＣＤに表示させ、設定操作部の操作に基づくポインタの移動などにより、境界線の位置や形状を被写体の輪郭に合わせるように補正できるようにしてもよい。
【００５０】
本実施形態では、抽出された被写体の領域に基づいたマスク画像と、被写体領域から特定される背景領域に対してぼかし処理を施したスルー画像とをＬＣＤに重畳表示しているが、被写体の領域をユーザに認識させることを目的にしていることから、必ずしも背景領域に対してぼかし処理を施したスルー画像ではなく、ぼかし処理を施していないスルー画像とマスク画像とをＬＣＤに重畳表示させることも可能である。また、この他に、被写体領域はそのままで、背景領域をモノクロで表示する、又は無地で表示するなどしてもよい。
【００５１】
本実施形態では、ぼかし処理を施した縮小画像を表示したときに、ユーザにぼかし処理の確認操作を行わせ、縮小画像に施されるぼかし処理がユーザの意図する処理ではない場合には、この縮小画像データや、該縮小画像データの元になる本画像データを削除しているが、これに限定する必要はなく、下記に示す方法を用いても良い。
【００５２】
例えば、縮小画像における被写体領域がユーザの意図する領域となる場合や、ぼかし処理がユーザの意図する処理である場合には、ぼかし処理が施された本画像データ及びぼかし処理が施されていない本画像データの両方を記憶媒体に記録する。また、縮小画像における被写体領域がユーザの意図する領域でない場合、又は、ぼかし処理がユーザの意図する処理でない場合には、ぼかし処理が施されていない本画像データを記憶媒体に記録する。さらに、被写体領域や縮小画像に施されるぼかし処理の良否に関してユーザが判断しかねる場合においては、ぼかし処理が施された本画像データ及びぼかし処理が施されていない本画像データの両方を記憶媒体に記録する、又はぼかし処理が施されていない本画像データを記憶媒体に記録するかをユーザが選択できるようにする。この場合、本画像データは、他の画像処理が施された画像データであっても、他の画像処理が施されていない画像データであってもよい。
【００５３】
本実施形態では、抽出される被写体に基づいて特定される背景領域に対してぼかし処理を行うようにしているが、被写体の抽出の後に実行される画像処理は、ぼかし処理に限定されるものではなく、例えば抽出された被写体の領域のみを切り出し、予め用意されているテンプレートや他の画像に合成する処理を行うことも可能である。
【００５４】
本実施形態では、レリーズボタンの半押し操作時に被写体抽出処理、マスク画像を生成する処理、ぼかし処理、及びぼかし処理されたスルー画像とマスク画像とをＬＣＤに重畳する処理を行っているが、これら処理を実行する契機となる操作部材の操作は、レリーズボタンの半押し操作に限定されるものではなく、デジタルカメラに設けられた他の操作部材や、これら処理を実行させるために、新たにデジタルカメラに実装される操作部材であってもよい。
【００５５】
本実施形態では、被写体の輪郭を示す輪郭線からなるマスク画像データに基づくマスク画像と、ぼかし処理されたスルー画像データに基づくスルー画像とをＬＣＤに重畳表示させることで、被写体領域と背景領域との境界を示す境界線を付加したスルー画像を表示しているが、これに限定される必要はなく、スルー画像の各画素のうち、抽出される被写体の領域に含まれる画素に隣り合う画素、又は近接する画素の画素値を特定の画素値に置換し、この画素値を置換したスルー画像を表示してもよい。
【００５６】
本実施形態では、被写体領域と背景領域との境界を示す境界線からなるマスク画像をスルー画像に重畳表示させているが、スルー画像に重畳表示させるマスク画像は、これに限定される必要はなく、例えば被写体領域における色情報がなく（言い換えれば被写体領域が透明で）、背景領域における色情報が単一色の色情報となるマスク画像としてもよい。
本画像から生成された縮小画像に基づいてマスク画像を生成し、ぼかし処理が施された縮小画像とマスク画像とを重畳表示させてもよい。
【符号の説明】
【００５７】
１０…デジタルカメラ、３１…画像処理部、３２…被写体抽出部、３３…マスク生成部、３４…ぼかし処理部、４３…ＬＣＤ、４４…表示制御部、５１…ＣＰＵ、５５…レリーズボタン
【図１】
2011114544.tif 000003
【図２】
2011114544.tif 000004
【図３】
2011114544.tif 000005
【図４】
2011114544.tif 000006