(57)【要約】【課題】  シャッタディレイが生じる撮影方法においても、撮影者が取得したいと思った瞬間の画像を合成・取得することが可能な撮影装置を提供する。【解決手段】  撮影装置（１）は、画像取得時に複数枚の画像を取得する取得手段（画像処理部１１の合成用画像取得部１１１）と、取得手段（画像処理部１１の合成用画像取得部１１１）で取得した画像を基にシャッタボタンが押下された瞬間に表示されていたプレビュー画像に近い画像を生成する生成手段（画像処理部１１の保存用画像生成部１１２）とを有する。【効果】本発明は、シャッタディレイが生じる撮影方法においても、撮影者が取得したいと思った瞬間の画像を合成・取得することが可能となるという効果を奏する。【選択図】      図１
2010183213.tif 000002
【特許請求の範囲】
【請求項１】
画像取得時に複数枚の画像を取得する取得手段と、
前記取得手段で取得した画像を基にシャッタボタンが押下された瞬間に表示されていたプレビュー画像に近い画像を生成する生成手段と
を有することを特徴とする撮影装置。
【請求項２】
シャッタ押下時に撮影サイズと同じサイズの複数の合成用画像を取得する取得手段と、
前記取得手段で取得した前記合成用画像に対して前記撮影サイズより小さく出力されたプレビュー画像と同じサイズになるように縮小処理を行って比較用縮小画像を作成する作成手段と、
前記作成手段で作成された前記比較用縮小画像を前記プレビュー画像とを比較してＯＫ領域及びＮＧ領域をラベリングするラベリング手段と、
前記ＯＫ領域及びＮＧ領域を前記取得手段で取得した合成用画像にマッピングすることで当該合成用画像の前記ＯＫ領域及びＮＧ領域を割り出す割り出し手段と、
その割り出した結果を基に前記複数の合成用画像における前記ＯＫ領域を合成して保存用画像を生成する生成手段と
を有することを特徴とする撮影装置。
【請求項３】
前記ラベリング手段における前記プレビュー画像は、前記シャッタが押下された瞬間の画像であることを特徴とする請求項２記載の撮影装置。
【請求項４】
前記ラベリング手段は、前記比較用縮小画像と前記プレビュー画像との比較結果において差分の大きい箇所を前記ＮＧ領域とし、それ以外の箇所を前記ＯＫ領域とすることを特徴とする請求項２または請求項３記載の撮影装置。
【請求項５】
マッチング処理の結果において類似度が閾値以上の領域であるＯＫ領域を１枚目から順次足していくことで前記保存用画像を生成することを特徴とする請求項２から請求項４のいずれか記載の撮影装置。
【請求項６】
最終プレビュー画像と比較用縮小画像とをブロックに分け、各ブロックにおいて処理用画像と比較し、最も類似度の高いものを抽出してブロック単位で合成することで前記保存用画像を生成することを特徴とする請求項２から請求項４のいずれか記載の撮影装置。
【請求項７】
請求項１から請求項６のいずれかに記載の撮影装置を含むことを特徴とする携帯端末。
【請求項８】
撮影装置が、
画像取得時に複数枚の画像を取得する取得処理と、
前記取得処理で取得した画像を基にシャッタボタンが押下された瞬間に表示されていたプレビュー画像に近い画像を生成する生成処理と
を実行することを特徴とする画像合成方法。
【請求項９】
撮影装置が、
シャッタ押下時に撮影サイズと同じサイズの複数の合成用画像を取得する取得処理と、
前記取得処理で取得した前記合成用画像に対して前記撮影サイズより小さく出力されたプレビュー画像と同じサイズになるように縮小処理を行って比較用縮小画像を作成する作成処理と、
前記作成処理で作成された前記比較用縮小画像を前記プレビュー画像とを比較してＯＫ領域及びＮＧ領域をラベリングするラベリング処理と、
前記ＯＫ領域及びＮＧ領域を前記取得処理で取得した合成用画像にマッピングすることで当該合成用画像の前記ＯＫ領域及びＮＧ領域を割り出す割り出し処理と、
その割り出した結果を基に前記複数の合成用画像における前記ＯＫ領域を合成して保存用画像を生成する生成処理と
を実行することを特徴とする画像合成方法。
【請求項１０】
前記ラベリング処理における前記プレビュー画像は、前記シャッタが押下された瞬間の画像であることを特徴とする請求項９記載の画像合成方法。
【請求項１１】
前記ラベリング処理は、前記比較用縮小画像と前記プレビュー画像との比較結果において差分の大きい箇所を前記ＮＧ領域とし、それ以外の箇所を前記ＯＫ領域とすることを特徴とする請求項９または請求項１０記載の画像合成方法。
【請求項１２】
マッチング処理の結果において類似度が閾値以上の領域であるＯＫ領域を１枚目から順次足していくことで前記保存用画像を生成することを特徴とする請求項９から請求項１１のいずれか記載の画像合成方法。
【請求項１３】
最終プレビュー画像と比較用縮小画像とをブロックに分け、各ブロックにおいて処理用画像と比較し、最も類似度の高いものを抽出してブロック単位で合成することで前記保存用画像を生成することを特徴とする請求項９から請求項１１のいずれか記載の画像合成方法。
【請求項１４】
撮影装置内の中央処理装置に実行させるプログラムであって、
画像取得時に複数枚の画像を取得する取得処理と、
前記取得処理で取得した画像を基にシャッタボタンが押下された瞬間に表示されていたプレビュー画像に近い画像を生成する生成処理と
を含むことを特徴とするプログラム。
【請求項１５】
撮影装置内の中央処理装置に実行させるプログラムであって、
シャッタ押下時に撮影サイズと同じサイズの複数の合成用画像を取得する取得処理と、
前記取得処理で取得した前記合成用画像に対して前記撮影サイズより小さく出力されたプレビュー画像と同じサイズになるように縮小処理を行って比較用縮小画像を作成する作成処理と、
前記作成処理で作成された前記比較用縮小画像を前記プレビュー画像とを比較してＯＫ領域及びＮＧ領域をラベリングするラベリング処理と、
前記ＯＫ領域及びＮＧ領域を前記取得処理で取得した合成用画像にマッピングすることで当該合成用画像の前記ＯＫ領域及びＮＧ領域を割り出す割り出し処理と、
その割り出した結果を基に前記複数の合成用画像における前記ＯＫ領域を合成して保存用画像を生成する生成処理と
を含むことを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は撮影装置、携帯端末及びそれらに用いる画像合成方法並びにそのプログラムに関し、特にシャッタディレイが生じる撮影方法における画像の合成方法に関する。
【背景技術】
【０００２】
近年、携帯電話機やディジタルカメラにおけるシャッタのきり方に関しては、笑顔のタイミングでシャッタを切る、人物間距離が縮まったらシャッタを切る等、様々な方法が採用されている（例えば、特許文献１，２参照）。
【０００３】
本発明に関連する撮影方法では、大きいサイズの画像撮影時にプレビュー表示用画像として表示部のサイズ合わせ、取得画像より小さいサイズの出力画像を用い、撮影画像取得時のみサイズの大きい出力画像に切り替えることが多い。
【０００４】
そのため、撮影時は、シャッタを押下した後、出力サイズの切り替え処理を行ってから撮影画像を取得するため、シャッタを押してから実際に画像を取得するまでの間にディレイ（シャッタディレイ）が生じる。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００６−３４５２５４号公報
【特許文献２】特開２００５−３４１０１６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
上述した撮影方法では、シャッタディレイが生じるため、シャッタを押した瞬間に、プレビュー画像に表示されていなかった物体が撮影画像に写りこむことがあり、撮影者の期待した画像と異なることがある。
【０００７】
つまり、実際の撮影においては、シャッタ押下の判断がされてから、実際の画像取得までに遅延（シャッタディレイ）が生じるため、動いている状態での撮影においては期待していた撮影画像とは異なること画像が取得されることがある。
【０００８】
そこで、本発明の目的は上記の問題点を解消し、シャッタディレイが生じる撮影方法においても、撮影者が取得したいと思った瞬間の画像を合成・取得することができる撮影装置、携帯端末及びそれらに用いる画像合成方法並びにそのプログラムを提供することにある。
【課題を解決するための手段】
【０００９】
本発明による第１の撮影装置は、画像取得時に複数枚の画像を取得する取得手段と、
前記取得手段で取得した画像を基にシャッタボタンが押下された瞬間に表示されていたプレビュー画像に近い画像を生成する生成手段と
を備えている。
【００１０】
本発明による第２の撮影装置は、シャッタ押下時に撮影サイズと同じサイズの複数の合成用画像を取得する取得手段と、
前記取得手段で取得した前記合成用画像に対して前記撮影サイズより小さく出力されたプレビュー画像と同じサイズになるように縮小処理を行って比較用縮小画像を作成する作成手段と、
前記作成手段で作成された前記比較用縮小画像を前記プレビュー画像とを比較してＯＫ領域及びＮＧ領域をラベリングするラベリング手段と、
前記ＯＫ領域及びＮＧ領域を前記取得手段で取得した合成用画像にマッピングすることで当該合成用画像の前記ＯＫ領域及びＮＧ領域を割り出す割り出し手段と、
その割り出した結果を基に前記複数の合成用画像における前記ＯＫ領域を合成して保存用画像を生成する生成手段と
を備えている。
【００１１】
本発明による携帯端末は、上記の撮影装置を含むことを特徴とする。
【００１２】
本発明による第１の画像合成方法は、
撮影装置が、
画像取得時に複数枚の画像を取得する取得処理と、
前記取得処理で取得した画像を基にシャッタボタンが押下された瞬間に表示されていたプレビュー画像に近い画像を生成する生成処理と
を実行している。
【００１３】
本発明による第２の画像合成方法は、
撮影装置が、
シャッタ押下時に撮影サイズと同じサイズの複数の合成用画像を取得する取得処理と、
前記取得処理で取得した前記合成用画像に対して前記撮影サイズより小さく出力されたプレビュー画像と同じサイズになるように縮小処理を行って比較用縮小画像を作成する作成処理と、
前記作成処理で作成された前記比較用縮小画像を前記プレビュー画像とを比較してＯＫ領域及びＮＧ領域をラベリングするラベリング処理と、
前記ＯＫ領域及びＮＧ領域を前記取得処理で取得した合成用画像にマッピングすることで当該合成用画像の前記ＯＫ領域及びＮＧ領域を割り出す割り出し処理と、
その割り出した結果を基に前記複数の合成用画像における前記ＯＫ領域を合成して保存用画像を生成する生成処理と
を実行している。
【００１４】
本発明による第１のプログラムは、撮影装置内の中央処理装置に実行させるプログラムであって、
画像取得時に複数枚の画像を取得する取得処理と、
前記取得処理で取得した画像を基にシャッタボタンが押下された瞬間に表示されていたプレビュー画像に近い画像を生成する生成処理と
を含むことを特徴とする。
【００１５】
本発明による第２のプログラムは、撮影装置内の中央処理装置に実行させるプログラムであって、
シャッタ押下時に撮影サイズと同じサイズの複数の合成用画像を取得する取得処理と、
前記取得処理で取得した前記合成用画像に対して前記撮影サイズより小さく出力されたプレビュー画像と同じサイズになるように縮小処理を行って比較用縮小画像を作成する作成処理と、
前記作成処理で作成された前記比較用縮小画像を前記プレビュー画像とを比較してＯＫ領域及びＮＧ領域をラベリングするラベリング処理と、
前記ＯＫ領域及びＮＧ領域を前記取得処理で取得した合成用画像にマッピングすることで当該合成用画像の前記ＯＫ領域及びＮＧ領域を割り出す割り出し処理と、
その割り出した結果を基に前記複数の合成用画像における前記ＯＫ領域を合成して保存用画像を生成する生成処理と
を含むことを特徴とする。
【発明の効果】
【００１６】
本発明は、上記のような構成及び動作とすることで、シャッタディレイが生じる撮影方法においても、撮影者が取得したいと思った瞬間の画像を合成・取得することができるという効果が得られる。
【図面の簡単な説明】
【００１７】
【図１】本発明による撮影装置の構成例を示すブロック図である。
【図２】本発明の第１の実施の形態による撮影装置の構成例を示すブロック図である。
【図３】図２の画像処理部の構成例を示すブロック図である。
【図４】本発明の第１の実施の形態による画像処理の流れを示す図である。
【図５】本発明の第１の実施の形態による撮影処理の流れを示すフローチャートである。
【図６】本発明の第１の実施の形態による撮影処理の流れを示すフローチャートである。
【図７】本発明の第２の実施の形態による画像処理の流れを示す図である。
【図８】本発明の第２の実施の形態による撮影処理の流れを示すフローチャートである。
【図９】本発明の第２の実施の形態による撮影処理の流れを示すフローチャートである。
【発明を実施するための形態】
【００１８】
次に、本発明の実施の形態について図面を参照して説明する。まず、本発明の撮影装置の概略について説明する。図１は本発明による撮影装置の構成例を示すブロック図である。図１において、本発明による撮影装置１は、大きいサイズの画像撮影時にプレビュー表示用画像として表示部のサイズ合わせ、取得画像より小さいサイズの出力画像を用い、撮影画像取得時のみサイズの大きい出力画像に切り替える切り替え撮影を行う装置であり、携帯電話機やディジタルカメラ等に用いられる。
【００１９】
本発明による撮影装置１は、上記の切り替え撮影において、画像取得時に画像処理部１１の合成用画像取得部１１１にて複数枚の画像を取得し、保存用画像生成部１１２にてシャッタボタンが押下された瞬間に表示されていたプレビュー画像に近い画像を生成することで、シャッタディレイの影響が少ない撮影画像を取得することを特徴とする。
【００２０】
図２は本発明の第１の実施の形態による撮影装置の構成例を示すブロック図である。図２において、撮影装置１は、画像処理部１１と、ＣＰＵ（中央処理装置）１２と、カメラセンサ１３と、処理用メモリ１４と、メモリ部１５と、キー操作部１６と、表示部１７とを備えている。
【００２１】
キー操作部１６は、撮影者がカメラの起動、シャッタ押下、保存、キャンセル等の操作を入力する回路である。カメラセンサ１３は、画像、合成用画像の取得を行う回路であり、取得した画像を画像処理部１１に転送する。
【００２２】
画像処理部１１は、シャッタ押下時のプレビュー画像やカメラの出力画像サイズ切り替え後に取得した合成用画像を処理用メモリ１４に蓄える。また、画像処理部１１は、合成用画像に縮小処理を施して比較用縮小画像を生成し、この比較用縮小画像を処理用メモリ１４に蓄えられたプレビュー画像と比較する。
【００２３】
画像処理部１１は、その比較結果において、差分の大きい部分をＮＧ領域、差の少ない領域をＯＫ領域としてラベリングし、比較用縮小画像でラベリングされたＯＫ／ＮＧ領域を合成用取得画像にマッピングし、複数枚の合成用画像のＯＫ領域を合成し、一枚の保存用画像を生成する。
【００２４】
メモリ部１５は、画像処理部１１で生成された保存用画像を保持する。尚、メモリ部１５は、ＣＰＵ１２が実行しかつ画像処理部１１の処理を実現するためのプログラムを記憶している。表示部１７では、撮影時のプレビュー表示、保存用画像の確認表示を行う。
【００２５】
ＣＰＵ１２は、キー操作部１６で入力された操作により、カメラセンサ１３に対して画像の取得やデータ転送、画像処理部１１に画像処理命令やデータ転送命令、メモリ部１５へのデータ転送と保存処理や、画像処理部１１やメモリ部１５からの画像を表示部１７で表示処理をそれぞれ行わせるよう制御する。
【００２６】
図３は図２の画像処理部１１の構成例を示すブロック図である。図３において、画像処理部１１は、合成用画像取得部１１１と、保存用画像生成部１１２と、比較用縮小画像作成部１１３と、ラベリング部１１４と、ＯＫ／ＮＧ領域割り出し部１１５とを備えている。
【００２７】
合成用画像取得部１１１は、上記の切り替え撮影において、シャッタ押下時に撮影サイズと同じサイズの合成用画像をカメラセンサ１３から複数枚取得する。比較用縮小画像作成部１１３は、合成用画像取得部１１１で取得された合成用画像を撮影サイズより小さく出力されたプレビュー画像と同じサイズになるように縮小処理を行い、比較用縮小画像を作成する。
【００２８】
ラベリング部１１４は、比較用縮小画像作成部１１３で作成された比較用縮小画像を、シャッタボタン（図示せず）が押下された瞬間のプレビュー画像と比較し、差分の大きい箇所をＮＧ領域とし、それ以外の箇所をＯＫ領域としてラベリングする。
【００２９】
ＯＫ／ＮＧ領域割り出し部１１５は、比較用縮小画像で算出したＯＫ／ＮＧ領域を合成用画像にマッピングすることで、合成用画像のＯＫ／ＮＧ領域を割り出す。保存用画像生成部１１２は、ＯＫ／ＮＧ領域割り出し部１１５で割り出された複数枚の合成用画像におけるＯＫ領域を合成することで、一枚の保存用画像を生成する。
【００３０】
図４は本発明の第１の実施の形態による画像処理の流れを示す図である。図４において、本実施の形態では、切り替え撮影において、シャッタ押下時に撮影サイズと同じサイズの合成用画像２０２〜２０４を複数枚取得し、撮影サイズより小さく出力されたプレビュー画像２０１と同じサイズになるように縮小処理を行い、比較用縮小画像２０５〜２０７を作成する。
【００３１】
本実施の形態では、シャッタボタンが押下された瞬間のプレビュー画像２０１と比較用縮小画像２０５〜２０７を比較し、差分の大きい箇所をＮＧ領域２１５〜２１７とし、それ以外の箇所をＯＫ領域としてラベリングする。本実施の形態では、比較用縮小画像で算出したＯＫ／ＮＧ領域を合成用画像２０２〜２０４にマッピングすることで合成用画像のＯＫ／ＮＧ領域を割り出し（２０８〜２１０）、複数枚の合成用画像におけるＯＫ領域を合成することで（２１１〜２１３）、一枚の保存用画像２１４を生成する。
【００３２】
図５及び図６は本発明の第１の実施の形態による撮影処理の流れを示すフローチャートである。これら図２〜図６を参照して本発明の第１の実施の形態による撮影処理について説明する。尚、図５及び図６に示す処理は、ＣＰＵ１２がメモリ部１５に蓄積されたプログラムを実行することで実現される。
【００３３】
この撮影処理においては、シャッタボタンが押下された時に取得する合成用画像枚数を任意とするが、本実施の形態においてＮ枚（Ｎは２以上の整数）とする。
【００３４】
撮影装置１のＣＰＵ１２は、キー操作部１６よりカメラ起動が入力された場合（図５ステップＳ１）、カメラセンサ１３、画像処理部１１を起動して初期化する（図５ステップＳ２）。ＣＰＵ１２は、カメラセンサ１３から画像を取得し、その画像の表示部１７でのプレビュー表示を開始する（図５ステップＳ３）。
【００３５】
ＣＰＵ１２は、キー操作部１６からシャッタ押下が入力されると（図５ステップＳ４）、画像処理部１１に対して、シャッタ押下時に表示していたプレビュー画像２０１を処理用メモリ１４に蓄積させる（図５ステップＳ６）。
【００３６】
その後、ＣＰＵ１２は、撮影モード切り替え処理としてカメラセンサ１３の画像の出力サイズを撮影用サイズに変更する（図５ステップＳ７）。ＣＰＵ１２は、画像処理部１１（合成用画像取得部１１１）に対して、カメラセンサ１３から出力された画像を合成用画像２０２〜２０４として処理用メモリ１４に蓄積させる（図５ステップＳ９）。
【００３７】
また、ＣＰＵ１２は、画像処理部１１（比較用縮小画像作成部１１３）に対して、合成用画像に縮小処理を加えさせ（図５ステップＳ１０）、プレビュー画像２０１と同サイズにした比較用縮小画像２０５〜２０７を取得させる（図５ステップＳ１１）。
【００３８】
ＣＰＵ１２は、画像処理部１１（ラベリング部１１４）に対して、比較用縮小画像２０５〜２０７をプレビュー画像１０１と比較させ、プレビュー画像２０１との差分の大きい領域をＮＧ領域２１５〜２１７、プレビュー画像２０１との差分の小さい領域をＯＫ領域として求めさせる（図５ステップＳ１２）。
【００３９】
ＣＰＵ１２は、画像処理部１１（ＯＫ／ＮＧ領域割り出し部１１５）に対して、上記のラベリング部１１４の結果を合成用画像２０２〜２０４にマッピングさせる（図６ステップＳ１３）。ＣＰＵ１２は、画像処理部１１に対してこの処理を合成用画像Ｎ枚に対して実施させる（ステップＳ８〜Ｓ１４の処理）。
【００４０】
ＣＰＵ１２は、画像処理部１１（保存用画像生成部１１２）に対して、Ｎ枚の合成用画像２０２〜２０４からＮＧ領域をＯＫ領域で補間し合う合成を行わせ（図６ステップＳ１５）、保存用画像２１４を生成させる（図６ステップＳ１６）。
【００４１】
ＣＰＵ１２は、保存用画像２１４の取得後、その保存用画像２１４を表示部１７で確認表示させ（図６ステップＳ１７）、キー操作部１６より入力された保存処理、またはキャンセルを実行する（図６ステップＳ１９）。ＣＰＵ１２は、キー操作部１６で入力された撮影続行か（図６ステップＳ２０）、またはカメラ終了（図６ステップＳ２１）を行う。
【００４２】
プレビュー画像２０１と比較用縮小画像２０５〜２０７の比較（ステップＳ１２）の実施方法の例としては、プレビュー画像２０１をテンプレートとしたブロックマッチングやテンプレートマッチングにて、類似度が任意の閾値以下のエリアをプレビュー画像と差分の大きい領域であるＮＧ領域として割り出すことが可能である。
【００４３】
ＮＧ領域の補間方法（ステップＳ１５）としては、１枚目でＯＫ／ＮＧ領域を判定した後、２枚目からは１枚目でＮＧとなった領域のみＯＫ／ＮＧ判定を実施しＯＫ領域を１枚目にマージし、３枚目は１、２枚目を合成した画像でまだＮＧとして残っている領域のみＯＫ／ＮＧを判定するというように、ＯＫエリアを足していく方法で１枚の画像を構成していく方法で実施する。
【００４４】
このように、本実施の形態では、最終プレビュー画像をテンプレートとして複数の取得画像から保存用画像を合成することにより、瞬間的に不要な物体が写りこんだ場合等にその不要な物体だけを排除した画像が取得することができるため、そのような場面での撮り直しを減らすことが期待できる。
【００４５】
また、本実施の形態では、最終プレビュー画像に合わせて撮影画像を合成するので、撮影者の期待画像とシャッタディレイによる実際の取得画像とのギャップを軽減させることができる。
【００４６】
さらに、本実施の形態では、画像処理部１１でのソフト処理で実現可能なため、一般的なディジタルカメラや携帯端末装置（携帯電話機等）に装備されている画像処理チップでの実現が可能である。
【００４７】
図７は本発明の第２の実施の形態による画像処理の流れを示す図である。本実施の形態による撮影装置は、上記の図２に示す本発明の第１の実施の形態による撮影装置１と同様の構成となっているので、その構成の図示及び説明を省略する。
【００４８】
図７において、本実施の形態では、各縮小用画像にＯＫ／ＮＧ領域をマッピングした後（３０１〜３０３）、ＮＧ領域の補間に関して縮小用画像で合成領域を算出し（３０４〜３０６）、その合成イメージを処理用画像に適用し（３０７〜３０９）、保存用画像（３１０）を合成している。その時の画像処理の流れは図８及び図９に示すようになる。
【００４９】
すなわち、図８及び図９は本発明の第２の実施の形態による撮影処理の流れを示すフローチャートである。これら図２と図３と図７〜図９とを参照して本発明の第２の実施の形態による撮影処理について説明する。尚、図８及び図９に示す処理は、ＣＰＵ１２がメモリ部１５に蓄積されたプログラムを実行することで実現される。
【００５０】
この撮影処理においては、シャッタボタンが押下された時に取得する合成用画像枚数を任意とするが、本実施の形態においてＮ枚（Ｎは２以上の整数）とする。
【００５１】
撮影装置１のＣＰＵ１２は、キー操作部１６よりカメラ起動が入力された場合（図８ステップＳ３１）、カメラセンサ１３、画像処理部１１を起動して初期化する（図８ステップＳ３２）。ＣＰＵ１２は、カメラセンサ１３から画像を取得し、その画像の表示部１７でのプレビュー表示を開始する（図８ステップＳ３３）。
【００５２】
ＣＰＵ１２は、キー操作部１６からシャッタ押下が入力されると（図８ステップＳ３４）、画像処理部１１に対して、シャッタ押下時に表示していたプレビュー画像２０１を処理用メモリ１４に蓄積させる（図８ステップＳ３６）。
【００５３】
その後、ＣＰＵ１２は、撮影モード切り替え処理としてカメラセンサ１３の画像の出力サイズを撮影用サイズに変更する（図８ステップＳ３７）。ＣＰＵ１２は、画像処理部１１（合成用画像取得部１１１）に対して、カメラセンサ１３から出力された画像を合成用画像２０２〜２０４として処理用メモリ１４に蓄積させる（図８ステップＳ３９）。
【００５４】
また、ＣＰＵ１２は、画像処理部１１（比較用縮小画像作成部１１３）に対して、合成用画像２０２〜２０４に縮小処理を加えさせ（図８ステップＳ４０）、プレビュー画像と同サイズにした比較用縮小画像２０５〜２０７を取得させる（図８ステップＳ４１）。
【００５５】
ＣＰＵ１２は、画像処理部１１（ラベリング部１１４）に対して、比較用縮小画像２０５〜２０７をプレビュー画像２０１と比較させ、プレビュー画像２０１との差分の大きい領域をＮＧ領域２１５〜２１７、プレビュー画像２０１との差分の小さい領域をＯＫ領域として求めさせる（図８ステップＳ４２）。ＣＰＵ１２は、画像処理部１１に対してこの処理を合成用画像Ｎ枚に対して実施させる（ステップＳ３８〜Ｓ４３の処理）。
【００５６】
ＣＰＵ１２は、画像処理部１１（ＯＫ／ＮＧ領域割り出し部１１５）に対して、縮小画像での合成領域算出を行わせ（図９ステップＳ４４）（図７の３０１〜３０３，３０４〜３０６）、合成イメージを処理用画像に適用させる（図９ステップＳ４５）（図７の３０７〜３０９）。
【００５７】
ＣＰＵ１２は、画像処理部１１（保存用画像生成部１１２）に対して、合成イメージを処理用画像に適用させることで、保存用画像３１０を生成させる（図９ステップＳ４６）。
【００５８】
ＣＰＵ１２は、保存用画像３１０の取得後、その保存用画像３１０を表示部１７で確認表示させ（図９ステップＳ４７）、キー操作部１６より入力された保存処理、またはキャンセルを実行する（図９ステップＳ４８，Ｓ４９）。ＣＰＵ１２は、キー操作部１６で入力された撮影続行か（図９ステップＳ５０）、またはカメラ終了（図９ステップＳ５１）を行う。
【００５９】
また、上記の本発明の第１の実施の形態では、マッチング処理を行い、類似度が閾値以上の領域をＯＫ領域とし、ＯＫ領域を１枚目から順次足していくという方法であるが、本発明の第２の実施の形態では、最終プレビュー画像と比較用縮小画像とをブロックに分け（例えば、８×８の領域に分割）、各ブロックにおいて処理用画像と比較し、最も類似度の高いものを抽出してブロック単位で合成している。
【００６０】
このように、本実施の形態では、最終プレビュー画像と比較用縮小画像とをブロックに分け、各ブロックにおいて処理用画像と比較し、最も類似度の高いものを抽出してブロック単位で合成することで、本発明の第１の実施の形態と同様に、瞬間的に不要な物体が写りこんだ場合等にその不要な物体だけを排除した画像が取得することができるため、そのような場面での撮り直しを減らすことが期待できる。
【符号の説明】
【００６１】
１  撮影装置
１１  画像処理部
１２  ＣＰＵ
１３  カメラセンサ
１４  処理用メモリ
１５  メモリ部
１６  キー操作部
１７  表示部
１１１  合成用画像取得部
１１２  保存用画像生成部
１１３  比較用縮小画像作成部
１１４  ラベリング部
１１５  ＯＫ／ＮＧ領域割り出し部
２０１  プレビュー画像
２０２〜２０４  合成用画像
２０５〜２０７  比較用縮小画像
２１４，３１０  保存用画像
２１５〜２１７  ＮＧ領域
【図１】
2010183213.tif 000003
【図２】
2010183213.tif 000004
【図３】
2010183213.tif 000005
【図４】
2010183213.tif 000006
【図５】
2010183213.tif 000007
【図６】
2010183213.tif 000008
【図７】
2010183213.tif 000009
【図８】
2010183213.tif 000010
【図９】
2010183213.tif 000011