(57)【特許請求の範囲】
【請求項１】
所定の撮影パラメータの値を異ならせて撮影を行うブラケット撮影により得られた複数の画像データのうち、前記撮影パラメータの値の差分が閾値以下である２つの画像データを類似画像データと判定する判定手段と、
前記判定手段により類似画像データと判定された２つの画像データのうち一方の画像データを削除する削除手段と、
を有する画像処理装置。
【請求項２】
前記判定手段は、前記複数の画像データのうち、前記撮影パラメータの値の差分に所定の係数を乗じた値と、前記撮影パラメータ以外の撮影パラメータの値の差分に前記所定の係数より小さい値を乗じた値と、の和が閾値以下である２つの画像データを類似画像データと判定する請求項１に記載の画像処理装置。
【請求項３】
前記判定手段は、前記複数の画像データのうち、対応する画素同士の画素値の差分の総和が閾値以下である２つの画像データを類似画像データと判定する請求項１に記載の画像処理装置。
【請求項４】
前記所定の撮影パラメータは露出であり、
前記判定手段は、前記複数の画像データのうち、輝度値の差分が閾値以下である２つの画像データを類似画像データと判定する請求項１に記載の画像処理装置。
【請求項５】
前記所定の撮影パラメータはフォーカス枠の位置であり、
前記判定手段は、前記複数の画像データのうち、対応するフォーカス枠内の画素同士の画素値の差分の総和が閾値以下である２つの画像データを類似画像データと判定する請求項１に記載の画像処理装置。
【請求項６】
前記判定手段により類似画像データと判定された２つの画像データのうち一方の画像データの削除を実行するか否かの指示をユーザに入力させる入力手段を有し、
前記削除手段は、ユーザにより前記指示が入力された場合に、前記類似画像データと判定された２つの画像データのうち一方の画像データの削除を実行する請求項１から５のいずれか１項に記載の画像処理装置。
【請求項７】
前記判定手段は、前記ブラケット撮影により得られた画像データが３つ以上ある場合、当該３つ以上の画像データのうちから前記撮影パラメータの値の差分が閾値以下である２つの画像データを類似画像データとして選び出し、
前記削除手段は、前記判定手段により選ばれた前記類似画像データの２つの画像データのうち一方の画像データを削除する請求項１から６のいずれか１項に記載の画像処理装置。
【請求項８】
前記判定手段は、前記撮影パラメータの値の差分が閾値以下である２つの画像データの組み合わせが複数通りある場合、いずれかの組み合わせを類似画像データとして選び出す請求項７に記載の画像処理装置。
【請求項９】
前記削除手段は、ユーザの指定する代表画像は削除しない請求項１から８のいずれか１項に記載の画像処理装置。
【請求項１０】
前記判定手段は、前記複数の画像データを、前記撮影パラメータの値の差分が閾値以下という条件を満たす画像データの集合によりグループ分けし、
前記削除手段は、複数の画像データを含むグループに関して、当該グループに属する画像データのうち少なくとも１つを残し他を削除する請求項１から９のいずれか１項に記載の画像処理装置。
【請求項１１】
前記画像データは動画像の画像データであり、
前記判定手段は、動画像の全てのフレーム、数フレームおきに抽出した複数のフレーム、又はシーンチェンジを検出してシーン毎に抽出した複数のフレームについて、前記類似画像データであるか判定を行い、判定を行った全てのフレームについて類似画像データと判定した場合に、２つの動画像の画像データは類似していると判定する請求項１から１０のいずれか１項に記載の画像処理装置。
【請求項１２】
前記削除手段は、記録メディアの空き容量が不足したときに、前記画像データの削除を行う請求項１から１１のいずれか１項に記載の画像処理装置。
【請求項１３】
所定の撮影パラメータの値を異ならせて撮影を行うブラケット撮影により得られた複数の画像データのうち、前記撮影パラメータの値の差分が閾値以下である２つの画像データを類似画像データと判定する判定工程と、
前記判定工程により類似画像データと判定された２つの画像データのうち一方の画像データを削除する削除工程と、
を有する画像処理装置の制御方法。
【請求項１４】
前記判定工程では、前記複数の画像データのうち、前記撮影パラメータの値の差分に所定の係数を乗じた値と、前記撮影パラメータ以外の撮影パラメータの値の差分に前記所定の係数より小さい値を乗じた値と、の和が閾値以下である２つの画像データを類似画像データと判定する請求項１３に記載の画像処理装置の制御方法。
【請求項１５】
前記判定工程では、前記複数の画像データのうち、対応する画素同士の画素値の差分の総和が閾値以下である２つの画像データを類似画像データと判定する請求項１３に記載の画像処理装置の制御方法。
【請求項１６】
前記所定の撮影パラメータは露出であり、
前記判定工程では、前記複数の画像データのうち、輝度値の差分が閾値以下である２つの画像データを類似画像データと判定する請求項１３に記載の画像処理装置の制御方法。
【請求項１７】
前記所定の撮影パラメータはフォーカス枠の位置であり、
前記判定工程では、前記複数の画像データのうち、対応するフォーカス枠内の画素同士の画素値の差分の総和が閾値以下である２つの画像データを類似画像データと判定する請求項１３に記載の画像処理装置の制御方法。
【請求項１８】
前記判定工程により類似画像データと判定された２つの画像データのうち一方の画像データの削除を実行するか否かの指示をユーザに入力させる入力工程を有し、
前記削除工程では、ユーザにより前記指示が入力された場合に、前記類似画像データと判定された２つの画像データのうち一方の画像データの削除を実行する請求項１３から１７のいずれか１項に記載の画像処理装置の制御方法。
【請求項１９】
前記判定工程では、前記ブラケット撮影により得られた画像データが３つ以上ある場合、当該３つ以上の画像データのうちから前記撮影パラメータの値の差分が閾値以下である２つの画像データを類似画像データとして選び出し、
前記削除工程では、前記判定工程により選ばれた前記類似画像データの２つの画像データのうち一方の画像データを削除する請求項１３から１８のいずれか１項に記載の画像処理装置の制御方法。
【請求項２０】
前記判定工程では、前記撮影パラメータの値の差分が閾値以下である２つの画像データの組み合わせが複数通りある場合、いずれかの組み合わせを類似画像データとして選び出す請求項１９に記載の画像処理装置の制御方法。
【請求項２１】
前記削除工程では、ユーザの指定する代表画像は削除しない請求項１３から２０のいずれか１項に記載の画像処理装置の制御方法。
【請求項２２】
前記判定工程では、前記複数の画像データを、前記撮影パラメータの値の差分が閾値以下という条件を満たす画像データの集合によりグループ分けし、
前記削除工程では、複数の画像データを含むグループに関して、当該グループに属する画像データのうち少なくとも１つを残し他を削除する請求項１３から２１のいずれか１項に記載の画像処理装置の制御方法。
【請求項２３】
前記画像データは動画像の画像データであり、
前記判定工程では、動画像の全てのフレーム、数フレームおきに抽出した複数のフレーム、又はシーンチェンジを検出してシーン毎に抽出した複数のフレームについて、前記類似画像データであるか判定を行い、判定を行った全てのフレームについて類似画像データと判定した場合に、２つの動画像の画像データは類似していると判定する請求項１３から２２のいずれか１項に記載の画像処理装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ブラケット撮影された画像データを処理する機能を備えた画像処理装置及びその制御方法に関するものである。
【背景技術】
【０００２】
ビデオカメラやデジタルカメラには、複数の異なる撮影条件で同一被写体を連続して撮影するブラケット撮影を行なう機能を備えたものがある。例えば、複数の露出で撮影する露出ブラケット撮影、複数の合焦位置で撮影するフォーカスブラケット撮影、複数の感度（ＩＳＯ値）で撮影するＩＳＯブラケット撮影等がある。ブラケット撮影において設定値を異ならせる撮影パラメータをブラケット撮影パラメータと称する。ブラケット撮影を活用することで、失敗撮影の回避や、同じシーンを異なった撮影条件で記録しておくことができる。ブラケット撮影機能は動画像の撮影にも適用できる。
【０００３】
ブラケット撮影された画像データ（以下、ブラケット撮影データという）は、ブラケット撮影パラメータの値が異なる複数の画像データ（以下、ブラケットコンテンツという）から構成される。図３を用いてブラケット撮影データとブラケットコンテンツについて説明する。図３は、種々の撮影パラメータのうち特にフォーカス位置（合焦位置）をブラケット撮影パラメータとするブラケット撮影により得られる２つの画像データからなるブラケット撮影データの例である。すなわち、フォーカス以外の撮影パラメータの値はブラケットコンテンツ間で共通である。フォーカスブラケット撮影は、例えば、撮像範囲を複数の分割領域に分割し、異なる複数の分割領域を選択し、合焦対象を各分割領域内の被写体に限定して複数回撮影することにより行う。
【０００４】
図３において、フォーカスブラケット撮影データ３０１は、フォーカスＡ（ある分割領域内にある被写体Ａに合焦）とフォーカスＢ（別の分割領域内にある被写体Ｂに合焦）とに合焦位置を異ならせてフォーカスブラケット撮影された画像データである。フォーカスＡで撮影された画像データがブラケットコンテンツ３０２、フォーカスＢで撮影された画像データがブラケットコンテンツ３０３である。ブラケット撮影データとブラケットコンテンツとの関係は、静止画像のブラケット撮影データも動画像のブラケット撮影データも同様とする。
【０００５】
ブラケット撮影データは、異なる複数の撮影条件で撮影した複数のブラケットコンテンツを含むため、データ量が大きくなる課題がある。特に動画像のブラケット撮影においてこの課題はより顕著である。
【０００６】
この問題を解決するために、ブラケット撮影された画像データを優先的に削除して記録媒体の空き容量を確保する技術が特許文献１に記載されている。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００５−１７５９５５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
ブラケット撮影された画像データには、撮影条件は異なるものの実際の画像にはほとんど差がない冗長な複数の画像データが含まれる場合もある。一方、ブラケット撮影は、複数の異なる撮影条件で撮影した画像データを記録しておきたいというユーザの積極的な意
図により行われることもある。そのような場合、ブラケット撮影された複数の画像データはいずれもユーザにとって必要な画像データであると考えられる。
【０００９】
特許文献１の技術では、ブラケット撮影された画像データは無条件に削除対象となってしまうので、ユーザにとって必要な画像データが意図せず削除される可能性がある。
【００１０】
そこで、本発明は、ブラケット撮影により得られた画像データのデータ量を削減することができる技術を提供することを目的とする。
【課題を解決するための手段】
【００１１】
本発明は、所定の撮影パラメータの値を異ならせて撮影を行うブラケット撮影により得られた複数の画像データのうち、前記撮影パラメータの値の差分が閾値以下である２つの画像データを類似画像データと判定する判定手段と、
前記判定手段により類似画像データと判定された２つの画像データのうち一方の画像データを削除する削除手段と、
を有する画像処理装置である。
【００１２】
本発明は、所定の撮影パラメータの値を異ならせて撮影を行うブラケット撮影により得られた複数の画像データのうち、前記撮影パラメータの値の差分が閾値以下である２つの画像データを類似画像データと判定する判定工程と、
前記判定工程により類似画像データと判定された２つの画像データのうち一方の画像データを削除する削除工程と、
を有する画像処理装置の制御方法である。
【発明の効果】
【００１３】
本発明によれば、ブラケット撮影された画像データのデータ量を削減することが可能になる。
【図面の簡単な説明】
【００１４】
【図１】画像処理装置のブロック図
【図２】ブラケット撮影データ内のブラケットコンテンツ削除のフローチャート
【図３】フォーカスブラケット撮影データのブラケットコンテンツを示す図
【図４】露出ブラケット撮影データのブラケットコンテンツを示す図
【図５】フォーカスブラケット撮影データの類似判定方法を示す図
【発明を実施するための形態】
【００１５】
以下、本発明に係わる画像処理装置の発明を実施するための形態について、図面を用いて説明する。図１は本実施例の画像処理装置の概略構成を示したブロック図である。
【００１６】
画像処理装置１０１は、画像入力部１０２、蓄積部１０３（メモリ）、画像処理部１０４、及び表示部１０５を有し、画像入力部１０２に入力される映像が蓄積部１０３及び画像処理部１０４を経て表示部１０５に表示される。また、入力される画像データがブラケット撮影データか否かを判定するブラケット判定部１０６、ブラケット撮影データ内のブラケットコンテンツ群の中に互いに類似したブラケットコンテンツがあるか否かを判定する類似判定部１０７が備わる。更に、ブラケットコンテンツの削除処理の指示を出す削除指示部１０８、削除通知部１０９、操作部１１０が含まれている。以下に各部の詳細について述べる。
【００１７】
画像処理装置１０１は、入力される画像データを蓄積し、画像データに対し画像処理を行った結果を再生し表示することができる。また、画像処理装置１０１は、蓄積された画
像データがブラケット撮影データであるか否かを判定し、ブラケット撮影データ内のブラケットコンテンツの削除処理を行うことができる。
【００１８】
画像入力部１０２は、画像処理装置１０１で蓄積し表示可能な画像データの入力インターフェースであり、受信した画像データを蓄積部１０３へ出力する。
【００１９】
蓄積部１０３は、画像入力部１０２から入力された画像データを蓄積する。また、蓄積部１０３は、画像データをブラケット判定部１０６へ出力する。これにより、画像入力部１０２から入力され蓄積した画像データがブラケット撮影データか否かが判断される。画像データがブラケット撮影データの場合は、後述する類似判定の結果に応じて、削除指示部１０８の指示により、ブラケット撮影データ内のブラケットコンテンツの削除処理が行われる。類似判定及び削除処理の詳細は後述する。また、蓄積部１０３は、画像データを表示するために、後段の画像処理部１０４へ画像データを送信する。
【００２０】
画像処理部１０４は、蓄積部１０３から入力された画像データに対し画像処理を行う。更に、削除通知部１０９から入力される情報表示用グラフィックスを前記画像データに合成する処理を行い、表示部１０５に転送する。
【００２１】
表示部１０５は、画像処理部１０４から入力される画像データ又は画像データと情報表示用グラフィックスとを合成したデータを、表示パネルによって表示する。
【００２２】
ブラケット判定部１０６は、蓄積部１０３から入力される画像データを解析し、前記画像データがブラケット撮影データであるか否かを判定する。画像データの解析は、静止画像データの場合、例えばＥＸＩＦ（Ｅｘｃｈａｎｇｅａｂｌｅ  Ｉｍａｇｅ  Ｆｉｌｅ  Ｆｏｒｍａｔ）のような、撮像装置側で画像データに付加した撮影条件情報に基づき行う。動画像の場合、例えばＭＰＥＧ（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）のメタデータなどに記述される撮影条件情報に基づいて画像データの解析をすることで、ブラケット撮影データか否かを判断することができる。
【００２３】
類似判定部１０７は、ブラケット判定部１０６でブラケット撮影データであると判断された場合に、前記ブラケット撮影データ内で互いに類似しているブラケットコンテンツ（類似画像データ）があるか否かを判定する（判定手段）。判定の方法は、前記撮影条件情報で示されている撮影パラメータの値を解析する方法と、ブラケットコンテンツの画像データの差分を解析する方法とがある。詳細は後述する。
【００２４】
削除指示部１０８は、類似判定部１０７にて類似しているブラケットコンテンツがあると判定されたことを示す信号を受信した場合に、削除指示信号を蓄積部１０３に出力する。また、操作部１１０から削除指示を受信した場合についても、削除指示信号を蓄積部１０３に出力する。具体的には、削除指示部１０８は、類似していると判定された２つのブラケットコンテンツのうち、一方を残し他方を削除する指示を蓄積部１０３に対して出力する。
【００２５】
削除通知部１０９は、類似判定部１０７にて類似しているブラケットコンテンツがあると判定されたことを示す信号を受信した場合、ユーザに対して削除を促す通知を行う。そのために、削除通知部１０９は、ユーザに削除指示を入力させるＧＵＩ（グラフィカルユーザインターフェース）を構成するグラフィックスを生成し、画像処理部１０４に出力する。削除通知部１０９は、本発明の入力手段として機能している。
【００２６】
操作部１１０は、画像処理装置１０１への指示を入力するためのユーザの操作を受け付け、ユーザによる操作を画像処理装置１０１への指示に変換して所定の機能部へ通知する
。例えば、前記削除を促す通知を表示部１０５で確認したユーザが、削除するか否かを判断して、その指示を操作部１１０に対する操作によって画像処理装置１０１に入力することができる。操作部１１０は、ユーザの操作に応じて、削除指示部１０８に対して、削除処理を行うか否かの信号を出力する。
【００２７】
図２は、画像処理装置１０１における、ブラケット撮影データ内のブラケットコンテンツを削除する処理を行うための画像処理装置の制御方法を表すフローチャートである。
【００２８】
ステップＳ２０１にてブラケット撮影データ内のブラケットコンテンツの削除処理が開始されると、ステップＳ２０２で画像入力部１０２に画像データが入力される。ステップＳ２０３では入力された画像データが蓄積部１０３に蓄積される。蓄積された画像データは、ブラケット判定部１０６により、撮影条件を解析される（ステップＳ２０４）。
【００２９】
ステップＳ２０５では、ブラケット判定部１０６により、前記撮影条件の解析結果から、入力（蓄積）された画像データがブラケット撮影データか否か判定する。ブラケット撮影データであると判定された場合（ステップＳ２０５：Ｙｅｓ）は、ステップＳ２０６の処理が実行され、そうでない場合（ステップＳ２０５：Ｎｏ）はステップＳ２１３で本フローの処理が終了する。
【００３０】
ステップＳ２０６では、類似判定部１０７が、前記ブラケット撮影データ内のブラケットコンテンツの中に互いに類似しているブラケットコンテンツが存在するか否かを判定する。ブラケット撮影データ内に類似するブラケットコンテンツがある場合（ステップＳ２０７：Ｙｅｓ）は、ステップＳ２０８の処理が実行され、そうでない場合（ステップＳ２０７：Ｎｏ）は、ステップＳ２１３で本フローの処理が終了する。ブラケットコンテンツ同士の類似判断の具体的な方法については後述する。
【００３１】
ステップＳ２０８では、画像処理装置１０１が自動削除モードに設定されているか否かが判断される。自動削除モードになっている場合（ステップＳ２０８：Ｙｅｓ）は、ステップＳ２０９において、削除指示部１０８は、類似していると判定された２つのブラケットコンテンツのうち一方を削除するよう蓄積部１０３に指示する。蓄積部１０３は指示されたブラケットコンテンツの削除を実行し、ステップＳ２１３で本フローの処理が終了する。
【００３２】
ここで、「自動削除モード」とは、ユーザに確認を求める通知を表示したり、ユーザによる指示の入力を待機したりせずに、類似していると判定されたブラケットコンテンツに対する上記の削除処理が実行される画像処理装置１０１の動作モードをいう。画像処理装置１０１を自動削除モードに設定するか否かは、操作部１１０を介してユーザが指示を入力することができる。
【００３３】
自動削除モードになっていない場合（ステップＳ２０８：Ｎｏ）は、ステップＳ２１０において、ブラケット撮影データの中に類似するブラケットコンテンツがある旨をユーザに通知するための表示が表示部１０５に表示される。
【００３４】
ステップＳ２１１では、前記類似していると判定されたブラケットコンテンツの画像をユーザが確認するためのＧＵＩが表示部１０５に表示される。さらに、当該ブラケットコンテンツを削除するか否かの指示をユーザが操作部１１０を介して画像処理装置１０１に入力するためのＧＵＩが表示部１０５に表示される。ユーザが、不要と判断したブラケットコンテンツについて、当該ブラケットコンテンツの削除を指示する操作を操作部１１０にて行うと、削除指示部１０８の指示により、蓄積部１０３は当該ブラケットコンテンツの削除を実行する（ステップＳ２１２）。
【００３５】
ユーザが積極的に撮影条件を異ならせた画像データを残したいという意図により行ったブラケット撮影では、ブラケット撮影パラメータの値がある程度大きく異なると考えられる。逆に、２つのブラケットコンテンツにおいて、ブラケット撮影パラメータの値がほとんど変わらない場合、つまり類似している場合、異なる撮影条件で撮影した画像データを残すというユーザの積極的な意図を反映しているとは言い難い。従って、このような類似しているブラケットコンテンツは、ユーザにとっての重要度が低いと判断し、本実施例では、いずれか一方のブラケットコンテンツを削除する処理の対象とする。逆に、ブラケット撮影パラメータの値が大きく異なるブラケットコンテンツは、ユーザにとっての重要度が高いと判断し、削除対象とはしない。
【００３６】
本実施例では、ブラケット撮影データ内の２つのブラケットコンテンツが類似していると判定される場合に限り、一方のブラケットコンテンツを自動的に削除する。又は、ユーザに、ブラケットコンテンツが類似している旨を通知したり、類似していると判定したブラケットコンテンツの内容を実際に確認するためのＧＵＩを表示したりする。そして、一方のブラケットコンテンツを削除するか否かの指示を入力させるインターフェースを提供（ＧＵＩを表示）する。
【００３７】
従って、本実施例の画像処理装置によれば、ブラケット撮影データの削除処理において、ユーザが積極的に撮影条件を異ならせて撮り分けたいという撮影意図をもって撮影したブラケットコンテンツが意図せず削除されてしまうことを抑制できる。よって、ユーザに必要な画像データが削除されることを抑制しつつ、ブラケット撮影により得られた画像データのデータ量を削減することが可能となる。
【００３８】
次に、類似判定部１０７におけるブラケットコンテンツの類似判定方法について説明する。判定方法としてここでは２つの方法を例示する。第１の判定方法は、２つのブラケットコンテンツのブラケット撮影パラメータの値を比較し、設定値の差異がある基準以下の場合に当該ブラケットコンテンツ同士は類似していると判断する方法である。第２の判定方法は、判定対象の２つのブラケットコンテンツの画像データの差分を解析して、その差分がある閾値以下の場合に当該ブラケットコンテンツ同士は類似していると判断する方法である。
【００３９】
まず、第１の判定方法、すなわち２つのブラケットコンテンツのブラケット撮影パラメータの値を比較して類似判定を行う方法について説明する。本実施例では、判定対象の２つのブラケットコンテンツのブラケット撮影パラメータの値の差分（差の大きさ）を算出し、算出した差分が予め設定しておいた閾値以下の場合に、当該２つのブラケットコンテンツは類似していると判定する。
【００４０】
例えば、ブラケット撮影パラメータが露出の場合、２つのブラケットコンテンツの露出値の差が±１以内（差分が１以下）の場合に、当該２つのブラケットコンテンツは類似している判定する。なお、閾値は例示であり、上記の値に限らない。
【００４１】
例えば、図４（Ａ）に示す露出ブラケット撮影データ４０１が入力された場合、画像処理装置１０１は、まず撮影条件情報から露出ブラケット撮影データであること（ブラケット撮影パラメータが露出であること）を認識する。次に、２つのブラケットコンテンツ４０２及び４０３の露出値の差分を算出する。ブラケットコンテンツ４０２の露出値は「標準±０ＥＶ」、ブラケットコンテンツ４０３の露出値は「標準＋１ＥＶ」であり、その差分は閾値である１ＥＶ以下である。よって画像処理装置１０１は、ブラケットコンテンツ４０２とブラケットコンテンツ４０３とは類似していると判断する。ここで、ＥＶ（Exposure value）は露出値の単位を表す。
【００４２】
従って、図４（Ａ）の露出ブラケット撮影データ４０１が入力された場合、画像処理装置１０１は、ブラケットコンテンツ４０２又はブラケットコンテンツ４０３の一方を削除する。なお、ブラケットコンテンツ４０３の露出値が「標準＋２ＥＶ」であったとすると、画像処理装置１０１は、ブラケットコンテンツ４０２とブラケットコンテンツ４０３とは類似していないと判断し、いずれのブラケットコンテンツも削除しない。
【００４３】
このように、第１の判定方法では、２つのブラケットコンテンツのブラケット撮影パラメータの値の差分が小さい場合、２つのブラケットコンテンツは類似していると判断し、ブラケットコンテンツを削除可能と判断する。
【００４４】
なお、ブラケット撮影パラメータ以外の撮影パラメータの値にも基づいて、より細かい類似判定を行うこともできる。具体的には、２つのブラケットコンテンツのブラケット撮影パラメータの値の差分に加えて、その他の撮影パラメータの値の差分も算出し、これら算出した各種撮影パラメータの値の差分に係数を乗じて総和を算出する（重み付き総和をとる）。このとき、ブラケット撮影パラメータの値の差分に乗じる係数を、他の撮影パラメータの値の差分に乗じる係数よりも大きくする。すなわち、重み付き総和に、ブラケット撮影パラメータの値の差分の影響がより強く反映されるようにする。重み付き総和が予め設定しておいた閾値以下の場合に、２つのブラケットコンテンツは類似していると判定する。
【００４５】
例えば、露出ブラケット撮影データにおいて、２つのブラケットコンテンツ間の露出値の差分に大きい係数を乗じ、それ以外の撮影パラメータ（シャッタスピードや絞りなど）の値の差分に小さい係数を乗じ、総和（重み付き総和）を算出する。算出した重み付き総和が所定の閾値以下であれば、着目している２つの露出ブラケットコンテンツは類似している判定する。このような類似判定により、ブラケット撮影パラメータの値の差異に重きをおいた類似判定が行える。従って、ブラケット撮影データのユーザにとっての重要度を精度良く判定できる。
【００４６】
次に、第２の判定方法、すなわち２つのブラケットコンテンツの実際の画像データ同士の差分を解析して、その差分が小さい場合に当該２つのブラケットコンテンツ同士は類似していると判定する方法について述べる。最も単純な方法としては、２つのブラケットコンテンツの対応する全ての画素について画素値を比較し、その差分の合計値により類似度を判定する方法がある。つまり、全画素の差分絶対値和が所定の閾値以下の場合に、２つのブラケットコンテンツは類似していると判定することができる。
【００４７】
なお、ブラケット撮影パラメータの種類に応じて２つのブラケットコンテンツ同士の比較方法を変えてもよい。例えば、ブラケット撮影パラメータが露出の場合、２つのブラケットコンテンツの輝度値について比較し、輝度値の差分に基づいて類似度を判定してもよい。
【００４８】
フォーカスブラケット撮影により得られた２つの画像データの類似判定方法について図５を用いて説明する。図５の例では、撮像領域を９個の分割領域に分割し、各分割領域に対応するフォーカス枠を選択することにより、選択したフォーカス枠内の被写体に限定して合焦するように撮影することができる。この場合、ブラケット撮影パラメータはフォーカス枠の位置である。フォーカスブラケット撮影データ５０１には、中央のフォーカス枠５０６が合焦対象として選択されたブラケットコンテンツ５０２と、右下のフォーカス枠５０７が合焦対象として選択されたブラケットコンテンツ５０３と、を含んでいる。
【００４９】
このブラケットコンテンツ５０２及び５０３について類似判定する場合は、同一フォー
カス枠内の画素同士で比較を行う。図５の場合、ブラケットコンテンツ５０２とブラケットコンテンツ５０３との間で、ブラケットコンテンツ５０２で合焦対象として選択されたフォーカス枠５０６内の画素同士の比較（５０４）を行う。また、ブラケットコンテンツ５０２とブラケットコンテンツ５０３との間で、ブラケットコンテンツ５０３で合焦対象として選択されたフォーカス枠５０７内の画素同士の比較（５０５）を行う。
【００５０】
比較５０４及び比較５０５の結果、フォーカス枠５０６及びフォーカス枠５０７の両方において、２つのブラケットコンテンツ５０２とブラケットコンテンツ５０３との間の画素値の差分が所定の閾値以下であれば、両者は類似していると判定される。
【００５１】
このように、ブラケット撮影パラメータの種類に応じて類似判定方法を変えることで、撮影者が積極的に撮り分けようとした撮影パラメータに重きをおいた類似判定を行うことができる。
【００５２】
なお、本実施例では、ブラケット撮影データが２つのブラケットコンテンツで構成される例を説明したが、図４（Ｂ）に示すように１つのブラケット撮影データに３つ以上のブラケットコンテンツが含まれている場合にも本発明を適用できる。例えば、３つ以上のブラケットコンテンツのうちから、ブラケット撮影パラメータの値の差分が閾値以下という条件を満たす２つのブラケットコンテンツを選び出す。ブラケット撮影パラメータの値の差分が閾値以下という条件を満たす２つのブラケットコンテンツの組み合わせが複数通り考えられる場合は、どれを選択しても良いし、ブラケット撮影パラメータの値の差分に応じて優先順位を定めても良い。そして、選択した２つのブラケットコンテンツのうち一方のブラケットコンテンツを削除する。このような削除処理を１回実行することにより、例えば３つのブラケットコンテンツからなるブラケット撮影データから、１つのブラケットコンテンツが削除されるので、結果としてブラケット撮影データのデータ量を削減できる。ただし、ユーザの指定する代表画像や検索キーになるような画像（例：露出値「標準±０ＥＶ」の画像）は削除しないようにしてもよい。
削除処理を１回実行した後、ブラケット撮影データのうちに、ブラケット撮影パラメータの値の差分が閾値以下という条件を満たす２つのブラケットコンテンツがなお存在する場合、当該２つのブラケットコンテンツを対象として本発明の削除処理を実行しても良い。つまり、３つ以上のブラケットコンテンツからなるブラケット撮影データに対しては、本発明の削除処理を少なくとも１回実行する。これにより、ブラケット撮影データのデータ量を削減できる。本発明の削除処理を複数回実行すれば、ブラケット撮影データのデータ量をさらに削減できる。そして、いずれの削除処理においても、削除されるのは、類似していると判定されるブラケットコンテンツの一方であるから、ユーザが積極的に撮り分けたデータが削除されてしまうことを好適に抑制できる。
本発明は、次のように捉えることも出来る。すなわち、ブラケット撮影データに含まれるブラケットコンテンツを、ブラケット撮影パラメータの値の差分が閾値以下という条件を満たすブラケットコンテンツの集合によりグループ分けする。これにより、ブラケット撮影パラメータの値が近い複数のブラケットコンテンツが１つのグループに属すると共に、ブラケット撮影パラメータの値が離れているブラケットコンテンツ同士は、互いに異なるグループに属するようにグループ分けされる。そして、特に複数のブラケットコンテンツを含むグループに関して、当該グループに属するブラケットコンテンツのうち少なくとも１つを残し他を削除する。
例えば、ブラケット撮影パラメータが露出であり、露出値が異なる６つのブラケットコンテンツを含むブラケット撮影データにおいて、５つの露出値ＥＶ１からＥＶ５が、ＥＶ１〜ＥＶ２＜＜ＥＶ３〜ＥＶ４＜＜ＥＶ５という大小関係であるとする。ここで、ＥＶ１〜ＥＶ２は、ＥＶ１とＥＶ２の差分が閾値以下であることを表し、ＥＶ２＜＜ＥＶ３は、ＥＶ２とＥＶ３の差分が閾値を超えることを表す。この場合、露出値がＥＶ１とＥＶ２のブラケットコンテンツが第１のグループ、露出値がＥＶ３とＥＶ４のブラケットコンテン
ツが第２のグループ、露出値がＥＶ５のブラケットコンテンツが第３のグループにそれぞれグループ分けされる。これらのグループのうち、複数のブラケットコンテンツを含む第１のグループ及び第２のグループに対して、グループに属する少なくとも１つのブラケットコンテンツを残し他を削除する処理が行われる。これにより、例えば、露出値がＥＶ１、ＥＶ４、ＥＶ５のブラケットコンテンツが残され、他のブラケットコンテンツが削除されるので、非類似のブラケットコンテンツを残しつつブラケット撮影データのデータ量を削減することができる。
【００５３】
本実施例は、静止画像のブラケット撮影データにも動画像のブラケット撮影データにも適用できる。動画像のブラケット撮影データの場合、ブラケット撮影パラメータの値を異ならせたことによるフレーム画像への効果の現れ方が、シーンによって異なる場合があり得る。従って、動画像の全てのフレームや、数フレームおきに抽出した複数のフレームや、シーンチェンジを検出してシーン毎に抽出した複数のフレームなどについて、類似判定による比較を行っても良い。そして、全てのフレーム或いは抽出した全てのフレームが類似している場合に、２つの動画像のブラケットコンテンツは類似していると判定するようにしても良い。
【００５４】
本実施例に係る画像処理装置は、デジタルカメラやビデオカメラなどの撮像装置や、デジタルテレビやメディアプレーヤーなどの画像表示装置などに適用することができる。特に、撮像装置に適用した場合には、記録メディアの空き容量が不足したときに、ユーザにとって重要度の高いブラケットコンテンツが削除されることを抑制しつつ、冗長なブラケットコンテンツを優先的に削除して迅速な空き容量の確保を容易にする。
【符号の説明】
【００５５】
１０１  画像処理装置、１０７  類似判定部、１０８  削除指示部
【図１】
0005595239.tif 000002
【図２】
0005595239.tif 000003
【図３】
0005595239.tif 000004
【図４】
0005595239.tif 000005
【図５】
0005595239.tif 000006