(57)【要約】  【課題】  シーンの構図が変化するような場合であっても適切に類似シーンの判別が行なえ、適切な画像処理が行なえる画像処理装置を提供する。  【解決手段】  複数の入力画像間の類似性を判別する類似シーン判別部４８と、類似シーンと判別された画像に対して所定の処理を行なう画像処理部４７とを備えて構成される画像処理装置であって、類似シーン判別部４８は、対比する二画像のそれぞれを所定サイズの複数のブロックに領域分割して各ブロックの画像特性値を求めるブロック分割部４９と、両画像間で前記画像特性値の一致度の高いブロック同士を関連付け、一方の画像のブロックを関連付けられた他方の画像のブロックの位置に移動配置した評価画像を生成する評価画像生成部５０と、生成された評価画像と他方の画像に基づいて対比する二画像が類似シーンであるか否かを判別する評価部５１を備えて構成される。  【選択図】  図３
2006301675.tif 000002
【特許請求の範囲】
【請求項１】
複数の入力画像間の類似性を判別する類似シーン判別部と、類似シーンと判別された画像に対して所定の処理を行なう画像処理部とを備えて構成される画像処理装置であって、
類似シーン判別部は、対比する二画像のそれぞれを所定サイズの複数のブロックに領域分割して各ブロックの画像特性値を求めるブロック分割部と、両画像間で前記画像特性値の一致度の高いブロック同士を関連付け、一方の画像のブロックを関連付けられた他方の画像のブロックの位置に移動配置した評価画像を生成する評価画像生成部と、生成された評価画像と他方の画像に基づいて対比する二画像が類似シーンであるか否かを判別する評価部を備えて構成される画像処理装置。
【請求項２】
前記評価部は、前記評価画像の各ブロックとそれぞれに対応する位置にある他方の画像のブロックとの前記画像特性値の差分を前記評価画像を構成する全ブロックについて加算した類似評価値に基づいて対比する二画像が類似シーンであるか否かを判別する請求項１記載の画像処理装置。
【請求項３】
前記評価部は、前記評価画像を構成する各ブロックの移動ベクトルに基づいて対比する二画像が類似シーンであるか否かを判別する請求項１または２記載の画像処理装置。
【請求項４】
前記評価部は、前記評価画像生成部により生成された評価画像を構成するブロック数が所定数より小となるときに類似シーンでないと判別する請求項１から３の何れかに記載の画像処理装置。
【請求項５】
入力画像に対して所定の画像補正処理を行なう画像補正部を備え、前記画像処理部が、前記類似シーン判別部により類似シーンと判別された画像に対して前記画像補正部による画像補正処理条件を制限する画像補正制限部で構成される請求項１から４の何れかに記載の画像処理装置。
【請求項６】
複数の入力画像間の類似性を判別する類似シーン判別ステップと、類似シーンと判別された画像に対して所定の処理を行なう画像処理ステップとを備えて構成される画像処理方法であって、
類似シーン判別ステップは、対比する二画像のそれぞれを所定サイズの複数のブロックに領域分割して各ブロックの画像特性値を求めるブロック分割ステップと、両画像間で前記画像特性値の一致度の高いブロック同士を関連付け、一方の画像のブロックを関連付けられた他方の画像のブロックの位置に移動配置した評価画像を生成する評価画像生成ステップと、生成された評価画像と他方の画像に基づいて対比する二画像が類似シーンであるか否かを判別する評価ステップを備えて構成される画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の入力画像間の類似性を判別する類似シーン判別部と、類似シーンと判別された画像に対して所定の処理を行なう画像処理部とを備えて構成される画像処理装置に関する。
【背景技術】
【０００２】
写真処理装置を用いて現像済み写真フィルムに記録された画像やデジタルスチルカメラ（以下、「ＤＳＣ」と略記する。）で撮影された画像から写真プリントを作成する際に、撮影時の不適切な撮影条件等に起因するプリント画像の品質の低下を改善するべく、写真処理装置に組み込まれる画像処理装置により、逆光シーン、アンダー露光シーン、オーバー露光シーン、シャープネス、周辺光量不足等の各種の補正が行なわれ、高品位で美しい写真プリントが出力される。
【０００３】
このような画像処理がコマ画像単位で行なわれると、類似シーンの写真プリントの仕上がりがばらつく虞があるため、事前に各コマ画像の撮影シーンが類似しているか否かを判別する類似シーン判別部と、類似シーンと判別されたコマ画像に対して画像処理装置による各種の処理パラメータの設定を制限または補正する画像処理部を設けることにより、類似シーンの写真プリントの仕上がりが均一になるように処理されていた。
【０００４】
上述の類似シーン判別部による類似シーン判別アルゴリズムとして、画像から得られる中心部と周辺部の色濃度値の平均値、最大値及び最小値等の画像特性値が対比する画像間で近似している場合に類似シーンと判別するもの、対比する画像のヒストグラムに基づいて類似シーンと判別するもの、ＡＰＳ対応のフィルムでは磁気記録領域に記録された撮影時刻、ＤＳＣでは例えばＥｘｉｆのＤＳＣ付属情報領域に格納されている撮影時刻に基づいて撮影間隔が所定時間以内の連続シーンを対象としてそれら画像間で例えばヒストグラム等の特性値の近似するものを類似シーンと判別するもの等が提案されていた。
【特許文献１】特開昭５４−２６７２９号公報
【特許文献２】特開昭５６−１５３３３４号公報
【特許文献３】特開２００１−２４８８７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかし、上述した類似シーン判別部において画像特性値としてヒストグラムの一致度により判別するものでは全く異なるシーンであってもヒストグラムが近似すると類似シーンであると誤判別される場合があり、画像特性値として中心部と周辺部の色濃度値の平均値、最大値及び最小値等の一致度により判別するものでは被写体が画像中心から画像周辺に移動する等によるシーンの構図の変化に対処できず類似シーンであるにもかかわらず類似シーンと判別できなくなるという問題があった。
【０００６】
本発明は、上述した従来の問題点に鑑み、シーンの構図が変化するような場合であっても適切に類似シーンの判別が行なえ、適切な画像処理が行なえる画像処理装置及び画像処理方法を提供する点にある。
【課題を解決するための手段】
【０００７】
上述の目的を達成するため、本発明による画像処理装置の第一の特徴構成は、特許請求の範囲の書類の請求項１に記載した通り、複数の入力画像間の類似性を判別する類似シーン判別部と、類似シーンと判別された画像に対して所定の処理を行なう画像処理部とを備えて構成される画像処理装置であって、類似シーン判別部は、対比する二画像のそれぞれを所定サイズの複数のブロックに領域分割して各ブロックの画像特性値を求めるブロック分割部と、両画像間で前記画像特性値の一致度の高いブロック同士を関連付け、一方の画像のブロックを関連付けられた他方の画像のブロックの位置に移動配置した評価画像を生成する評価画像生成部と、生成された評価画像と他方の画像に基づいて対比する二画像が類似シーンであるか否かを判別する評価部を備えて構成される点にある。
【０００８】
類似シーンとは、一般的に主要被写体の構図や照明等の撮影条件が近似するシーンを指すが、人物であれ物であれ画像中に共通の被写体が存在し、その背景にも共通部分が存在するシーンであれば被写体の構図が変化するような場合であっても両画像に対する写真プリントの品質を揃えるという観点で類似シーンと判別される必要がある。上述の構成によれば、ブロック分割部により対比する二画像がそれぞれブロックに分割され各ブロックの画像特性値が求められるが、これによって画像を構成する主要被写体及び背景がブロックのサイズに対応した単位構成要素に分割されその単位構成要素の画像特性値が求められる。評価画像生成部は両画像間でブロック毎に得られた画像特性値を比較して一致度の高いブロック同士が共通する単位構成要素であると判別して相互に関連付け、一方の画像のブロックを関連付けられた他方の画像のブロックの位置に移動配置することにより、一の画像の単位構成要素による構図を変化させた評価画像を生成するのである。評価部は、評価画像と他方の画像を対比して類似度を評価することにより構図が変化する場合であっても適切に類似シーンであるか否かを判別することができるようになるのであり、これにより対比する両画像の全体としてのヒストグラムが近似している場合であっても単位構成要素間の関連付けができないために類似シーンであるとの誤判別が生じることが無くなるのである。
【０００９】
同第二の特徴構成は、同請求項２に記載した通り、上述した第一特徴構成に加えて、前記評価部は、前記評価画像の各ブロックとそれぞれに対応する位置にある他方の画像のブロックとの前記画像特性値の差分を前記評価画像を構成する全ブロックについて加算した類似評価値に基づいて対比する二画像が類似シーンであるか否かを判別する点にある。
【００１０】
上述の構成によれば、評価部が評価画像と他方の画像を対比する際に、評価画像を構成する各ブロックの画像特性値とそのブロックの位置に対応する位置にある他の画像のブロックの特性値との差分をとり、それらを加算して得られる類似評価値に基づいて類似シーンであるか否かを判別することができるようになり、類似シーンであると判別できる類似評価値の上限を予めシミュレーション等により定めておくことにより適切に判別できるようになる。
【００１１】
同第三の特徴構成は、同請求項３に記載した通り、上述した第一または第二特徴構成に加えて、前記評価部は、前記評価画像を構成する各ブロックの移動ベクトルに基づいて対比する二画像が類似シーンであるか否かを判別する点にある。
【００１２】
評価部は、評価画像を構成する各ブロックの移動ベクトル、つまり、各ブロックの一方の画像における位置から評価画像における位置までの移動方向と移動量を求め、その傾向に基づいて類似シーンであるか否かを判別するのである。例えば、一方の画像を撮影した後に撮影アングルを上下左右或いは斜め方向に変更して他方の画像を撮影するときには、評価画像生成部により生成された評価画像の各ブロックはほぼ全てが同一の移動ベクトルを示すようになり、他方の画像の撮影時に撮影アングルを変えずに主要被写体のみが移動したときには、評価画像の背景に対応するブロックのベクトルはゼロを示す一方主要被写体に対応するブロックが同一の移動ベクトルを示すようになる。このように、類似シーンでは各ブロックが移動ベクトルの等しいまたは近似するブロック群にグループ分けできるのでその傾向に基づいて判別することができるのである。そして、類似シーンで無い場合には各移動ベクトルに相関関係が見られず無秩序になる点で明確に判別できるのである。
【００１３】
同第四の特徴構成は、同請求項４に記載した通り、上述した第一から第三の何れかの特徴構成に加えて、前記評価部は、前記評価画像生成部により生成された評価画像を構成するブロック数が所定数より小となるときに類似シーンでないと判別する点にある。
【００１４】
上述したように、評価画像生成部は画像特性値を比較して一致度の高いブロック同士が共通する単位構成要素であると判別して相互に関連付けるものであるので、一致度が低く相互に関連付けることのできないブロックも現れる。そこで、上述の構成によれば、評価画像を構成するブロック数に制限を課し、評価画像を構成するブロック数が所定数よりも少ないときには類似シーンでないと判別することにより誤判別を回避することができるようになる。
【００１５】
同第五の特徴構成は、同請求項５に記載した通り、上述した第一から第四の何れかの特徴構成に加えて、入力画像に対して所定の画像補正処理を行なう画像補正部を備え、前記画像処理部が、前記類似シーン判別部により類似シーンと判別された画像に対して前記画像補正部による画像補正処理条件を制限する画像補正制限部で構成される点にある。
【００１６】
上述したように、一般に撮影時の不適切な撮影条件等に起因するプリント画像の品質の低下を改善するべく、画像処理装置には、逆光シーン、アンダー露光シーン、オーバー露光シーン、シャープネス、周辺光量不足等の各種の画像補正部が設けられているが、画像毎に独立して補正が行なわれると類似するシーンでありながら仕上がった写真プリントの品質が大きく異なり違和感を覚える場合がある。そこで、画像補正部による類似シーンに対する画像補正処理条件を画像補正制限部により制限することにより、類似シーンに対する写真プリントの品質が一定になるように調整することができるようになるのである。
【００１７】
本発明による画像処理方法の第一の特徴構成は、同請求項６に記載した通り、複数の入力画像間の類似性を判別する類似シーン判別ステップと、類似シーンと判別された画像に対して所定の処理を行なう画像処理ステップとを備えて構成される画像処理方法であって、類似シーン判別ステップは、対比する二画像のそれぞれを所定サイズの複数のブロックに領域分割して各ブロックの画像特性値を求めるブロック分割ステップと、両画像間で前記画像特性値の一致度の高いブロック同士を関連付け、一方の画像のブロックを関連付けられた他方の画像のブロックの位置に移動配置した評価画像を生成する評価画像生成ステップと、生成された評価画像と他方の画像に基づいて対比する二画像が類似シーンであるか否かを判別する評価ステップを備えて構成される点に有る。
【発明の効果】
【００１８】
以上説明した通り、本発明によれば、シーンの構図が変化するような場合であっても適切に類似シーンの判別が行なえ、適切な画像処理が行なえる画像処理装置及び画像処理方法を提供することができるようになった。
【発明を実施するための最良の形態】
【００１９】
以下に本発明による画像処理装置が組み込まれた写真処理装置の実施の形態を説明する。図１に示すように、写真画像処理装置１は、印画紙Ｐに対して出力画像データに基づいた露光処理を行ない露光された印画紙を現像処理する写真プリンタ２と、現像済みの写真フィルムＦから画像を読み込むフィルムスキャナ３１やデジタルスチルカメラ等で撮影された画像データが格納されたメモリカード等の画像データ記憶メディアＭから画像データを読み取るメディアドライバ３２や、コントローラ３３としての汎用コンピュータ等を備え、入力された元画像としての写真画像に対するプリントオーダ情報を設定入力するとともに、各種の画像補正処理を行なう操作ステーション３を備えて構成され、前記操作ステーション３で元画像から編集処理されたプリントデータが前記写真プリンタ２に出力されて所望の写真プリントが生成される。
【００２０】
前記写真プリンタ２は、図１及び図２に示すように、ロール状の印画紙Ｐを収容した二系統の印画紙マガジン２１と、前記印画紙マガジン２１から引き出された印画紙Ｐを所定のプリントサイズに切断するシートカッター２２と、切断後の印画紙Ｐの背面にコマ番号等のプリント情報を印字するバックプリント部２３と、前記プリントデータに基づいて印画紙Ｐを露光する露光部２４と、露光後の印画紙Ｐを現像、漂白、定着するための各処理液が充填された複数の処理槽２５ａ，２５ｂ，２５ｃを備えた現像処理部２５が印画紙Ｐの搬送経路に沿って配置され、現像処理後に乾燥処理された印画紙Ｐが排出される横送りコンベア２６と、横送りコンベア２６に集積された複数枚の印画紙（写真プリント）Ｐがオーダー単位で仕分けられるソータ２７を備えて構成される。
【００２１】
前記露光部２４には、前記搬送機構２８によって副走査方向に搬送される印画紙Ｐに対して、搬送方向に直交する主走査方向に前記プリントデータに基づき変調されたＲＧＢ三色のレーザ光線束を出力して露光する露光ヘッド２４ａが収容されている。
【００２２】
前記搬送経路に沿って配置された前記露光部２４や現像処理部２５に応じたプロセス速度で印画紙Ｐを搬送する複数のローラ対でなる搬送機構２８が配置され、前記露光部２４の前後には印画紙Ｐを複列に搬送可能なチャッカー式搬送機構２８ａが設けられている。
【００２３】
前記操作ステーション３に設けられたコントローラ３３には、汎用のオペレーティングシステムの管理下で動作し、前記写真処理装置１の各種制御が実行されるアプリケーションプログラムがインストールされ、オペレータとの操作インターフェースとしてモニタ３４、キーボード３５、マウス３６等が接続されている。
【００２４】
前記コントローラ３３のハードウェア及びソフトウェアの協働により実行される写真処理プロセスを機能ブロックで説明すると、図３に示すように、前記フィルムスキャナ３１やメディアドライバ３２によって読み取られた写真画像データを受け取り、所定の前処理を行なって後述のメモリ４１に転送する画像入力部４０と、前記モニタ３４の画面にプリントオーダ情報や画像編集情報を表示するとともに、それらに対して必要なデータ入力のための操作用アイコンを表示するグラフィック操作画面を生成し、或いは表示されたグラフィック操作画面に対する前記キーボード３５やマウス３６からの入力操作に基づいて各種の制御コマンドを生成するグラフィックユーザーインターフェース部４２と、前記画像入力部４０から転送される写真画像データ及び後述の画像処理部４７による補正処理後の写真画像データやそのときの補正パラメータ、更には設定されたプリントオーダ情報等が所定領域に区画されて格納されるメモリ４１と、プリントオーダ情報を生成するオーダー処理部４３と、前記メモリ４１に格納された各写真画像データに対して階調補正、カラー補正、拡縮処理、歪補正等の各種の補正を行なう画像処理部４７と、前記グラフィックユーザーインターフェース部４２からの表示コマンドに基づいて前記メモリ４１に展開された画像データや各種の入出力用グラフィックデータ等を前記モニタ３４に表示処理するビデオＲＡＭ等を備えた表示制御部４６と、各種の補正処理が終了した最終の補正画像を前記写真プリンタ２に出力するためのプリントデータを生成するプリントデータ生成部４４と、顧客のオーダーに応じて最終の補正画像をＣＤ−Ｒ等の記憶媒体に書き込むためのファイル形式に変換するフォーマッタ部４５等で構成される。
【００２５】
前記フィルムスキャナ３１は、フィルムＦに記録された画像を低解像度ではあるものの高速で読み取るプレスキャンモードと、低速ではあるものの高解像度で読み取る本スキャンモードの二モードで作動するように構成され、プレスキャンモードで読み込まれた低解像度の画像に対してプレジャッジモード（後述のプレジャッジ処理で詳述する。）で各種の補正処理が行なわれ、その際に前記メモリ４１に記憶された補正パラメータに基づいて本スキャンモードで読み込まれた高解像度の画像に対する最終の補正処理が実行されて前記プリンタ２に出力される。
【００２６】
同様に、前記メディアドライバ３２から読み込まれた画像ファイルには高解像度の撮影画像とそのサムネイル画像が含まれ、サムネイル画像に対して後述の各種の補正処理が行なわれ、その際に前記メモリ４１に記憶された補正パラメータに基づいて高解像度の撮影画像に対する最終の補正処理が実行される。尚、画像ファイルにサムネイル画像が含まれないときには、前記画像入力部４０で高解像度の撮影画像からサムネイル画像が生成されて前記メモリ４１に転送される。このように、低解像度の画像に対して頻繁に試行錯誤される各種の編集処理が実行されることによりコントローラ３３の演算負荷が低減されるように構成されている。
【００２７】
前記画像処理部４７は、例えば撮影時の露出設定の過不足による主要被写体の階調性を補正する階調補正部５３、カラーバランスを調整するカラー補正部５４、撮影レンズに起因する歪を補正する歪補正部（５５）、画像のエッジを強調しノイズを低減する鮮鋭化処理部（図示せず）、写真プリントのサイズに適した画像サイズに変換する拡縮処理部（図示せず）等を備えた画像補正部５２と、一連の写真画像データに対して相互に類似シーンであるか否かを判別する類似シーン判別部４８と、前記類似シーン判別部４８で類似シーンと判別された写真画像に対して前記画像補正部５２による補正処理を制限する画像補正制限部５６等を備えて構成されている。
【００２８】
前記類似シーン判別部４８は、対比する二つの写真画像のそれぞれを所定サイズの複数のブロックに領域分割して各ブロックの画像特性値を求めるブロック分割部４９と、両画像間で前記画像特性値の一致度の高いブロック同士を関連付け、一方の画像のブロックを関連付けられた他方の画像のブロックの位置に移動配置した評価画像を生成する評価画像生成部５０と、生成された評価画像と他方の画像に基づいて対比する二画像が類似シーンであるか否かを判別する評価部５１を備えて構成される。
【００２９】
前記評価部５１は、前記評価画像の各ブロックとそれぞれに対応する位置にある他方の画像のブロックとの前記画像特性値の差分を前記評価画像を構成する全ブロックについて加算した類似評価値に基づいて対比する二画像が類似シーンであるか否かを判別する。
【００３０】
前記画像補正制限部５６は、類似シーンを撮影した写真画像に対する写真プリントの仕上げ品質が揃うように、前記画像補正部５２による個々の写真画像に対する画像補正条件である補正パラメータの中で類似シーンと判別された画像に対する補正パラメータに制限を課す。例えば、類似シーンと判別された各画像に対する夫々の補正パラメータの平均値を新たな補正パラメータとして設定し、或いは、類似シーンと判別された各画像に対する夫々の補正パラメータをそれらの中の特定の画像に対する補正パラメータ、例えば中央値を示す補正パラメータに置き換え、或いは、中央値を示す特定の画像に対する補正パラメータを基準とする所定範囲に他の類似シーンの画像の補正パラメータを丸め込むのである。
【００３１】
以下に、前記類似シーン判別部４８による写真画像の類似シーン判別手順を説明する。図５に示すように、プレスキャンモードでフィルムスキャナ３１により読取られた画像データ、またはメディアドライバ３２から読み込まれたサムネイル画像データがメモリ４１に格納されると、読み込まれた順番に２画像が選択され、連続撮影シーンであるか否かが判断される（Ｓ１，Ｓ２，Ｓ３）。連続撮影シーンであるか否かは１３５フィルム画像については隣接画像コマを連続撮影画像と判断し、ＡＰＳフィルム画像についてはフィルムの磁気記録領域に記憶された撮影時刻データ、メディアドライバ３２から読み込まれたサムネイル画像データについてはＥｘｉｆファイルの属性領域に記憶された撮影時刻データに基づいてそれぞれ撮影時刻が所定時間以内であるか否かに基づいて判断される。今、図４（ａ）及び（ｂ）に示す二枚の画像データが連続撮影された画像（（ａ）が先に撮影された一方の画像、（ｂ）が後に撮影された他方の画像とする。）として類似シーンであるか否かが判別される場合について説明する。
【００３２】
前記ブロック分割部４９は、連続撮影シーンと判断された２画像のそれぞれに対して所定の画素数でブロック分割し（Ｓ４）、各ブロックの画像特性値を演算導出する（Ｓ５）。例えば、図４（ｃ）、（ｄ）に示すように、１３５フィルムの一コマ２３．４ｍｍ×３５．３ｍｍを３２０ｄｐｉで読み取って得られるＲＧＢの色成分毎にそれぞれが約３００×４４０画素の画像データを約７５×７３画素の２４領域に領域分割して、領域毎に画像特性値として輝度平均値を演算導出するのである。ここに、分割領域数は特に限定するものではないが、細分化すると演算負荷が増大するばかりでなく後述の移動ベクトルに一定の傾向が現れず誤判断を招く虞があり、大きすぎるとブロック間の対応が取れず類似シーンであるにもかかわらず非類似シーンと判定される虞があるので、上述の場合で１５領域から３０領域の範囲が好ましい値である。また、各ブロックの画像特性値としては輝度平均値に加えて最大輝度と最低輝度の組合せを画像特性値としてもよいし、色成分平均値つまりブロックのＲ、Ｇ，Ｂの各成分の平均値（ＲＡＶＲ，ＧＡＶＲ，ＢＡＶＲ）としてもよい。
【００３３】
次に、評価画像生成部５０は、２画像の各ブロックの画像特性値を比較して（Ｓ６）、その差分が最も小となるブロック同士を一致度の高いブロックとして関連付け、一方の画像のブロックを関連付けられた他方の画像のブロックの位置に移動する際のブロックの移動先への方向と距離を規定するデータである移動ベクトルを演算導出し（Ｓ７）、当該移動ベクトルに基づいて一方の画像の該当ブロックを移動した評価画像を生成する（Ｓ８）。例えば、図４（ｃ）、（ｄ）の場合、一方の画像のブロックａ１１，ａ１２，ａ１３，ａ１４に対して他方の画像のブロックａ２１，ａ２２，ａ２３，ａ２４（これ以外も存在するが例として各４ブロックについて説明する）がそれぞれ一致度の高いブロックとして関連付けられ、一方の画像のブロックａ１１，ａ１２，ａ１３，ａ１４を他方の画像のブロックａ２１，ａ２２，ａ２３，ａ２４に移動するための移動ベクトルＶ１１，Ｖ１２，Ｖ１３，Ｖ１４が導出され、図４（ｅ）に示す評価画像が得られるのである。ここで、ステップＳ６で各ブロックの画像特性値の差分が何れの組合せにおいても所定の閾値（実験等により適宜設定される値である。）よりも大となるときに一致度の高いブロックが存在しないと判別し、当該ブロックを評価画像の構成ブロックから除外するように構成してある。
【００３４】
前記評価部５１は、前記評価画像の各ブロックとそれぞれに対応する位置にある他方の画像のブロックとの前記画像特性値の差分を演算し（Ｓ９）、求められた差分を前記評価画像を構成する全ブロックについて加算した類似評価値を求める（Ｓ１０）。そして、類似評価値が所定の評価閾値（実験等により適宜設定される値である。）よりも小となるときに２画像が類似シーンであると判別し、所定の閾値以上のときには非類似シーンであると判別する（Ｓ１１，Ｓ１２，Ｓ１３）。つまり、図４（ｅ）に示す評価画像を構成するブロック（図中ハッチングで示されるブロック）と図４（ｆ）に示す他の画像の対応するブロックが対比され類似評価値が演算されるのである。ここで、評価画像生成部５０により生成された評価画像を構成するブロック数が所定数より小となるときには、評価画像と他方の画像との対比の精度が低下するため、両画像は画像類似シーンでないと判別する。このときのブロック数は特に限定されるものではないが、少なくとも分割された全ブロック数の１／２から２／３のブロック数の範囲に設定されることが好ましい。このような類似シーン判別処理を全ての画像に対して終了すると（Ｓ１４）、プレジャッジ処理に移行する。
【００３５】
プレジャッジ処理では、読み込まれたコマ画像を所定数、例えば６コマ単位で一画面に表示されるサムネイル画像に対して自動モードまたはマニュアルモードで階調補正部５４による階調補正処理、カラー補正部５３によるカラー補正処理、歪補正部５５による歪補正処理等が施され、それぞれの補正パラメータがメモリ４１の区画領域に格納される一方、オーダー処理部４３で処理されるプリントサイズに基づく倍率変換のためのパラメータ等がメモリ４１の区画領域に格納される。
【００３６】
自動モードによる階調補正処理とは予め設定されるルックアップテーブル（図示せず）に基づいて入力画素を一律にテーブル変換して所定の階調に変換する処理をいい、マニュアルモードによる階調処理とはグラフィックユーザーインターフェース部４２を介して表示されるトーンカーブ編集ツールを介して各画像のトーンカーブを変更操作する処理をいい、これによりハイライト部やシャドウ部の階調が調整されるものである。また、自動モードによるカラー補正処理とはエバンスの定理に基づくＬＡＴＤ（Ｌａｒｇｅ  Ａｒｅａ  Ｔｒａｎｓｍｉｔｔａｎｃｅ  Ｄｅｎｓｉｔｙ）方式による色補正処理等をいい、マニュアルモードによるカラー補正処理とはグラフィックユーザーインターフェース部４２を介して表示されるＹＭＣ各色成分補正ツールを介して各画像の色成分を標準値であるレベル０から±２の五段階で変更操作する処理等をいう。尚、これら以外の公知の補正処理を用いるものであってもよい。
【００３７】
このようにして各コマ画像の補正パラメータが生成され、当該補正パラメータに基づいて高解像度の画像データが補正処理され、最終のプリント出力のためのプリントデータが生成されるのであるが、本発明では上述したように前記類似シーン判別部４８で類似シーンと判別された画像データに対する補正パラメータが前記画像補正制限部５６により制限されるように構成されている。具体的には、トーンカーブ編集ツールによる階調補正パラメータやＹＭＣ各色成分補正ツールによる色補正パラメータが類似シーンの画像に対して、その平均値を新たな補正パラメータとして設定し、或いは、類似シーンと判別された各画像に対する夫々の補正パラメータをそれらの中の特定の画像に対する補正パラメータ、例えば中央値を示す補正パラメータに置き換え、或いは、中央値を示す特定の画像に対する補正パラメータを基準とする所定範囲に他の類似シーンの画像の補正パラメータを丸め込むように処理されるのである。尚、前記画像補正制限部５６により制限される補正パラメータはこれらに限定されるものではない。
【００３８】
このようにして、類似シーンを撮影した写真画像に対する写真プリントの品質、つまり階調性や色合いが著しく異なるような不都合なプリントが出力されるようなことが回避されるのである。
【００３９】
以下に別実施形態を説明する。画像のブロック分割に際しては、主要被写体である人物の顔領域を検出する被写体検出手段を備え、検出された顔領域の大きさをブロックサイズとして設定することもできる。また、対比する両画像の特異な領域例えば、周囲の色調と異なる色調の領域を検出してその領域の大きさをブロックサイズとして設定することもできる。つまり、両画像間に共通して含まれる特定の被写体を検出し、その被写体のサイズをブロックのサイズとして設定するものであってもよい。
【００４０】
上述した実施形態では、評価部５１が前記評価画像の各ブロックとそれぞれに対応する位置にある他方の画像のブロックとの前記画像特性値の差分を前記評価画像を構成する全ブロックについて加算した類似評価値に基づいて対比する二画像が類似シーンであるか否かを判別するものを説明したが、これに加えて、或いはこれに代えて、前記評価画像を構成する各ブロックの移動ベクトルと画像特性値の相関関係に基づいて対比する二画像が類似シーンであるか否かを判別するように構成することも可能である。
【００４１】
つまり、類似シーンの画像は同一の被写体が連続撮影されるときに発生するものであり、被写体が静止しており一方の画像を撮影した後に撮影アングルを上下左右或いは斜め方向に変更して他方の画像を撮影するときには、評価画像生成部により生成された評価画像の各ブロックはほぼ全てが同一の移動ベクトルを示すようになり、他方の画像の撮影時に撮影アングルを変えずに主要被写体のみが移動したときには、評価画像の背景に対応するブロックのベクトルはゼロを示す一方主要被写体に対応するブロックが同一の移動ベクトルを示すようになる。このように、類似シーンでは各ブロックを移動ベクトルの等しいまたは近似する単一または複数のブロック群にグループ分けできるのでその傾向に基づいて判別するのである。例えば、隣接する複数のブロックの各移動ベクトルがほぼ同一の値を示すようなブロックのグループがある場合に類似シーンと判別することができるのである。尚、類似シーンで無い場合には各移動ベクトルとブロックに相関関係が見られず無秩序になる点で明確に判別できる。
【００４２】
上述した実施形態では、画像補正制限部は、画像補正部により全コマ画像に対する補正パラメータが導出された後に類似シーンと判別された画像に対する補正パラメータの制限処理を行なうものを説明したが、補正パラメータの制限処理は画像補正部により各コマ画像に対する補正パラメータが導出された後に個別に行なわれるものであってもよい。この場合に類似シーンの画像で先に設定されたコマ画像に対する補正パラメータを次のコマ画像にそのまま反映させることができ、そのコマ画像で修正操作された補正パラメータを先のコマ画像に反映させるように構成してもよい。
【００４３】
上述した実施形態では、類似シーンと判別された画像に対して所定の処理を行なう画像処理部が、類似シーン判別部により類似シーンと判別された画像に対して画像補正部による画像補正処理条件を制限する画像補正制限部で構成されるものを説明したが、類似シーンと判別された画像に対して所定の処理を行なう画像処理部としては、これに限定されるものではなく、例えば、類似シーンのコマ画像をグループ化するグルーピング処理部を設け、グループ化されたコマ画像群毎にアルバム編集するアルバム編集部を設ける等、類似シーンと判別された画像に対する任意の画像処理を行なうことが可能である。
【００４４】
上述した実施形態では、画像処理装置及び画像処理方法を写真処理装置に実現した場合を説明したが、本発明による画像処理装置及び画像処理方法は一般のパーソナルコンピュータ上でも実現可能である。また、画像処理装置を実現するハードウェアの詳細な構成は本発明の作用効果を奏する範囲で適宜公知の技術を用いて設計可能である。
【図面の簡単な説明】
【００４５】
【図１】写真画像処理装置の外観説明図
【図２】写真プリンタのブロック構成図
【図３】写真画像処理装置の機能ブロック構成図
【図４】類似シーン判別のための画像のブロック分割の説明図
【図５】類似シーン判別手順を説明するフローチャート
【符号の説明】
【００４６】
４８：類似シーン判別部
４９：ブロック分割部
５０：評価画像生成部
５１：評価部
５２：画像補正部
５６：画像補正制限部
【図１】
2006301675.tif 000003
【図２】
2006301675.tif 000004
【図３】
2006301675.tif 000005
【図４】
2006301675.tif 000006
【図５】
2006301675.tif 000007