(57)【要約】【課題】ＣＣＤカメラ等のレンズに付着したゴミまたは傷等に起因する画像データの欠陥を検出し、検出された画像欠陥を修正する画像処理装置および画像処方法を提供する。【解決手段】１件の出力ジョブごとに複数の画像データを取得する画像取得手段と、取得したジョブ内の画像データの画像サイズが全て同一になるように、画像データの拡大または縮小を行うサイズ変更手段と、１つのジョブ内の少なくとも２以上の画像データについて、各画素における画像特徴量を比較して、画像特徴量が一致する画素領域を欠陥部分として検出する検出手段と、欠陥部分を拡大表示する表示手段と、欠陥部分を補正する補正手段とを有することにより、上記課題を解決する。【選択図】図１
2009232170.tif 000002
【特許請求の範囲】
【請求項１】
複数の画像データからなる出力ジョブを受け付けて、前記画像データに画像処理を施す画像処理装置であって、
前記ジョブごとに前記複数の画像データを取得する画像取得手段と、
取得した前記ジョブ内の画像データの画像サイズが全て同一になるように、前記画像データの拡縮処理を行うサイズ変更手段と、
前記ジョブ内の少なくとも２以上の前記画像データについて、各画素位置における画像特徴量を比較して、前記画像特徴量が一致する画素領域を欠陥部分として検出する検出手段と、
前記欠陥部分を拡大表示する表示手段と、
前記欠陥部分を補正する補正手段とを有する画像処理装置。
【請求項２】
前記検出手段は、１の画像データと、その直前に撮影された画像データとの間で、前記画像特徴量の比較を行う請求項１に記載の画像処理装置。
【請求項３】
前記検出手段は、１の画像データと、その前に撮影された全ての画像データとの間で、前記画像特徴量の比較を行う請求項１に記載の画像処理装置。
【請求項４】
前記補正手段は、前記検出手段により検出された前記欠陥部分を自動的に補正する請求項１〜３のいずれかに記載の画像処理装置。
【請求項５】
前記補正手段は、前記検出手段により検出された前記欠陥部分のうち、オペレータにより指定されたものを補正する請求項１〜３のいずれかに記載の画像処理装置。
【請求項６】
前記補正手段において行った補正を取り消す補正取消手段を有する請求項１〜５のいずれかに記載の画像処理装置。
【請求項７】
複数の画像データからなる出力ジョブを受け付けて、前記画像データに画像処理を施す画像処理方法であって、
前記ジョブごとに前記複数の画像データを取得するステップと、
取得した前記ジョブ内の画像データの画像サイズが全て同一になるように、前記画像データの拡縮処理を行うステップと、
前記ジョブ内の少なくとも２以上の前記画像データについて、各画素位置における画像特徴量を比較して、前記画像特徴量が一致する画素領域を欠陥部分として検出するステップと、
前記欠陥部分を拡大表示して、前記表示された欠陥部分を補正するステップとを有する画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像欠陥を検出し、検出された画像欠陥を修正するための画像処理装置および画像処理方法に関し、詳しくは、ＣＣＤカメラ等のレンズに付着したゴミまたは傷等に起因する画像データの欠陥を除去する画像処理装置および画像処方法に関する。
【背景技術】
【０００２】
近年、デジタルカメラやデジタルビデオカメラなど、ＣＣＤの撮像素子を用いて画像データを撮影する際には、画質の向上を図るための画像処理の方法が種々提案されている。例えば、デジタルカメラ等の撮影装置によって撮影された画像データにおいて、ＣＣＤカメラのレンズに付着したゴミやほこり、またはレンズに付いた傷などに起因する欠陥を除去する方法がある。
【０００３】
欠陥の検出方法としては、特許文献１に、ＩＲによって読取り取得した画像データを用いることで、ＩＲデータは異物や傷などがない限り、全画素において均一となる特性を利用して、フィルムの傷や、フィルムに付着した埃などの異物に起因する欠陥を検出することが開示されている。
さらに、特許文献２には、エッジ検出によって条件を満たす線分を検出して、これを用いてゴミや傷に起因する欠損部を検出する方法、および、スムージング画像と原画像との差分の大きさからゴミや傷に起因する欠損部を検出する方法が記載されている。
【０００４】
また、このような欠陥を除去する方法として、特許文献３に記載されている撮像装置では、画像の撮影前に、予め、ゴミ検出用画像を撮影し、この画像に基づいて、ゴミに対応する画素位置を検出しておくことが記載されている。特許文献３では、通常の撮像を行って得られた画像の画素データのうち、ゴミ検出用画像によって検出された画素位置に対応する画素に対して、補正処理を行うと記載されている。
【０００５】
【特許文献１】特開２００３−１７９７５０号公報
【特許文献２】特開２００６−１５７１９６号公報
【特許文献３】特開２００６−８１１２２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、このような従来の方法では、画像データ上のゴミや傷などに起因する欠陥を確認するためには、画像データをプリントとして出力するか、あるいは画面上で画像データを拡大表示することにより、オペレータが画像全体について目視でチェックする必要がある。さらに、欠陥が発見された場合は、これを修正するためのアプリケーションなどを用いて、欠陥部分の修正を行わねばならない。
このため、欠陥があった場合に再プリントを行う場合はコストがかかり、また、画面に拡大表示する場合も、オペレータの手間がかかり、欠陥検出に要する時間も長くなってしまう。また、欠陥を検出した後、さらにアプリケーションによる欠陥修正を行うため、工程数が多くなり、処理時間はさらに長くなるという問題があった。
【０００７】
本発明の目的は、上記従来技術の問題点を解決し、無駄なプリントを出力することによるコストを削減し、迅速かつ正確に欠陥検出および検出された欠陥の修正処理を行うことができ、さらにオペレータの負担も軽減することのできる画像処理装置および画像処理方法を提供することにある。
【課題を解決するための手段】
【０００８】
上記課題を解決するために、本発明は、複数の画像データからなる出力ジョブを受け付けて、前記画像データに画像処理を施す画像処理装置であって、前記ジョブごとに前記複数の画像データを取得する画像取得手段と、取得した前記ジョブ内の画像データの画像サイズが全て同一になるように、前記画像データの拡縮処理を行うサイズ変更手段と、前記ジョブ内の少なくとも２以上の前記画像データについて、各画素位置における画像特徴量を比較して、前記画像特徴量が一致する画素領域を欠陥部分として検出する検出手段と、前記欠陥部分を拡大表示する表示手段と、前記欠陥部分を補正する補正手段とを有する画像処理装置を提供する。
【０００９】
また、前記検出手段は、１の画像データと、その直前に撮影された画像データとの間で、前記画像特徴量の比較を行うことが好ましく、あるいは、前記検出手段は、１の画像データと、その前に撮影された全ての画像データとの間で、前記画像特徴量の比較を行うことが好ましい。
【００１０】
さらに、前記補正手段は、前記検出手段により検出された前記欠陥部分を自動的に補正することが好ましく、あるいは、前記補正手段は、前記検出手段により検出された前記欠陥部分のうち、オペレータにより指定されたものを補正することが好ましい。
【００１１】
また、前記補正手段において行った補正を取り消す補正取消手段を有することが好ましい。
【００１２】
また、上記課題を解決するために、本発明は、複数の画像データからなる出力ジョブを受け付けて、前記画像データに画像処理を施す画像処理方法であって、前記ジョブごとに前記複数の画像データを取得するステップと、取得した前記ジョブ内の画像データの画像サイズが全て同一になるように、前記画像データの拡縮処理を行うステップと、前記ジョブ内の少なくとも２以上の前記画像データについて、各画素位置における画像特徴量を比較して、前記画像特徴量が一致する画素領域を欠陥部分として検出するステップと、前記欠陥部分を拡大表示して、前記表示された欠陥部分を補正するステップとを有する画像処理方法を提供する。
【発明の効果】
【００１３】
本発明の画像処理装置および画像処理方法によれば、プリントを出力することなく装置内で欠陥の検出を行うことができるため、無駄なプリントを出力することがない。また、他の画像データとの比較により自動的に欠陥を検出して、検出された領域を表示するため、検出処理に要する時間が短く、かつ正確な検出を行うことができる。さらに、オペレータは検出結果を基に修正の指示を出すのみでよいため、オペレータに負担をかけることなく、スムーズに処理を行うことができる。
【発明を実施するための最良の形態】
【００１４】
以下に、本発明の画像処理装置および画像処理方法について、添付の図面に示す好適実施形態に基づいて詳細に説明する。
【００１５】
図１は、本発明の画像処理装置の装置構成の一実施形態を示すブロック図である。
図１に示す画像処理装置１０は、画像取得手段１２、サイズ変更手段１４、欠陥検出手段１６、表示手段１８、補正手段２０、補正取消手段２２、および出力手段２４を有する。
画像処理装置１０は、例えば、ラボや写真店などにおいて、プリントの注文（オーダ）やその他の要求などに基づく製品の出力要求（出力ジョブ）に基づいて画像データのプリント等の出力を行うためのものである。
【００１６】
画像取得手段１２は、デジタルカメラやデジタルビデオカメラなどにより撮影され、ジョブに供された複数の画像データ群を、取得するものである。画像データ群の取得方法には、特に限定はなく、公知の各種の方法によって行えばよい。例えば、インターネットなどのネットワークを介して、カメラを接続したＰＣなどからアップロードされた画像データ群を取得してもよいし、あるいは画像処理装置１０にカメラを直接接続して取得してもよい。
画像取得手段１２は、取得した画像データ群をジョブごとにまとめて、サイズ変更手段１４へ送信する。
【００１７】
サイズ変更手段１４は、画像取得手段１２から受け取った１件のジョブの画像データ群の画像サイズが全て同一となるように、必要に応じて各画像データの拡大または縮小を行うものである。
サイズ変更手段１４は、１件のジョブの画像データ群の中に、サイズの異なる画像が存在するときは、全ての画像が同一サイズになるように、各画像データに拡縮処理を施して、これを欠陥検出手段１６へ送信する。
【００１８】
欠陥検出手段１６は、サイズ変更手段１４から受信した画像データ群に対して、１件のジョブ毎に欠陥検出を行う。なお、ここでいう欠陥とは、主にＣＣＤのレンズに付着したゴミや、レンズにできた傷などに起因する欠陥を指す。
本発明における欠陥検出処理については、後に詳述する。
【００１９】
欠陥検出手段１６は、欠陥が検出された画像データと、欠陥の画素位置データとに基づいて、画像データの欠陥部分の領域を拡大して、表示手段１８に表示する。なお、表示手段１８は、モニタなどの公知の表示手段である。欠陥検出手段１６は、このとき、欠陥部分を枠で囲んで表示するなどの、オペレータが欠陥部分を容易に認識できるようなアシスト機能を備えていることが好ましい。
オペレータは、表示手段１８に表示された画像データの欠陥部分を確認して、補正を行うかどうかの判断をし、補正を行う場合は、図示しないキーボードやマウスなどの入力手段によって、補正の実行を指示する。
【００２０】
なお、欠陥部分が複数検出された場合には、それぞれの欠陥部分が枠で囲んで表示され、オペレータが選択した欠陥部分について、補正を実行すればよい。
【００２１】
補正手段２０は、表示手段１８に表示された画像データを確認したオペレータが補正の実行を指示した場合に、指示された欠陥部分の補正を自動的に行うものである。
補正の方法には特に限定はなく、検出された欠陥部分の周辺画像により補間して、特徴量をなくすことにより傷やゴミなどの欠陥を消すなど、公知の方法を用いればよい。
【００２２】
また、補正手段２０において補正を行った後に、補正を取り消したい場合は、補正取消手段２２において、補正の取消を行うことができる。
補正取消手段２２は、オペレータからの指示に従い、補正手段２０で行った補正を取り消す。
【００２３】
出力手段２４は、補正手段２０から受け取った補正済みの画像データを、ジョブに従って、プリントなどの記録媒体に出力するものである。出力手段２４には特に限定はなく、プリントやＣＤ−Ｒなど、ジョブに応じて、画像データを記録するための各種の記録媒体に画像データを記録するものであればよい。
【００２４】
次に、本発明の画像処理方法を実現する本発明の画像処理装置の具体的な作用について詳述する。
【００２５】
まず、画像取得装置１２で１ジョブ分の画像データ群を取得する。これをサイズ変更手段１４に送信して、１件のジョブの中の全ての画像が同一サイズとなるように、必要に応じて画像データの拡大または縮小処理を行う。
【００２６】
次に、欠陥検出手段１６において、欠陥の検出を行う。本発明における欠陥検出の流れを、図２に示すフロー図を基に詳述する。
図２において、まずステップＳ１０において、画像データ群のうち、１番目の画像データと２番目の画像データとの画像特徴量を比較する。
ここで、ＣＣＤのレンズに付着したゴミや傷に起因する欠陥は、その撮影装置で撮影した全ての画像上において、同一位置に同一サイズで現れる。したがって、１件のジョブ内の画像データのうち、同一位置に同一の画像特徴量を有する部分がある場合は、その部分をＣＣＤに起因する欠陥であるとみなすことができる。同じ画像特徴量を有することの判断基準の一例としては、その部分における各画素の画素値が同一であること、または、ＲＧＢのバランスが同一であることなどが挙げられる。
ステップＳ１０では、２つの画像データの間に、同一の画素位置に同一の画像特徴量を有する領域があるかどうかを比較して判断する。
【００２７】
次に、ステップＳ１２において、２つの画像データ間で同一の画素位置に同一の画像特徴量の領域が存在する場合は、その領域を欠陥部分として検出し、ステップＳ１４において、この領域を表示手段１８に表示する。
【００２８】
表示手段１８における欠陥部分の表示画面の一例を、図３に示す。
図３に示す表示手段１８の画面３０において、欠陥部分が検出された画像データは、画面左側の補正画像表示領域３２に画像の全域が表示されるように縮小されて表示される。また、オペレータが一目で欠陥部分を認識できるように、欠陥部分は欠陥エリア３４として、枠で囲まれマーキングされている。
さらに、画面右上には、欠陥表示領域３６として、欠陥エリア３４の領域、つまりこの画像データの欠陥部分がピクセル等倍表示、あるいは拡大表示される。欠陥表示領域３６を見ることにより、オペレータは、欠陥部分に補正が必要であるかどうかを判断する。
また、画面右下には、サムネイル表示領域３８が設けられている。サムネイル表示領域３８には、１ジョブ分の画像データ群がサムネイル表示されている。画像データの数が多い場合は、サムネイル表示領域３８をスクロールすることで、前画像のサムネイルを表示することができる。
【００２９】
図３に示すように、欠陥が検出された画像データは、表示手段１８に表示され、さらに欠陥部分が拡大表示される。オペレータは、この表示をもとに、欠陥部分について補正を行うかどうか判断する。
【００３０】
欠陥部分に対して補正を行う場合は、オペレータからの指示に応じて、補正手段２０が欠陥部分の補正を行う（ステップＳ１６）。なお、この補正は、補正取消手段２２において適宜取り消すこともできる。オペレータは、表示手段１８の欠陥表示領域３６において、補正後に欠陥部分を確認して、補正を取り消す場合は、補正取消手段２２にその旨の指示を出す。
【００３１】
補正が終了すると、欠陥検出手段１６において、全ての画像について欠陥検出および修正が終了したかどうか確認する（ステップＳ１８）。
終了していない場合は、次の画像データ、つまり、２番目と３番目の画像データにおいて同様にステップＳ１０〜Ｓ１６までの処理を行い、さらに３番目と４番目の画像データ、というように全ての画像データについて処理を繰り返す。
補正された画像データは、出力手段２４において、所定の形式により出力する。
【００３２】
なお、本実施形態においては、隣合う２つの画像の間において、画像特徴量の比較を行っているが、比較対象とする画像は２つに限らず、前後する３つ以上の画像を用いて行ってもよい。より多くの画像を比較対象とすることで、欠陥部分の検出精度を向上させることができる。
また、本実施形態では、欠陥検出を行った後、オペレータが各欠陥部分の補正を行うかどうかの判断を行っているが、本発明はこれに限定されず、欠陥検出の後、検出された全ての部分に対して自動的に補正を行うようにしてもよい。
さらに、本実施例においては、欠陥部分の補正を画像処理装置１０において行っているが、本発明はこれに限定されず、欠陥部分の補正を、外部のレタッチアプリケーションを用いて行ってもよい。
【００３３】
また、本実施例においては、ジョブを受け付ける画像処理装置側で、欠陥の検出および補正処理を行っているが、本発明はこれに限定されず、デジタルカメラなどの撮影装置側において、これらの処理を行ってもよい。この場合は、検出された画像の欠陥部分を、カメラの液晶画面などのモニタに等倍表示させる。ユーザは、カメラを操作することで、欠陥部分の修正指示を行い、また、修正の取消を行うことができる。
【００３４】
このように、本発明の画像処理装置および画像処理方法によれば、１ジョブ分の画像データにおいて、画像データの特徴量を比較して、画素位置および特徴量が完全に一致する部分を自動的に欠陥として検出するため、検出処理に要する時間が短く、かつ正確な検出を行うことができる。さらに、オペレータは、モニタなどの表示手段に表示された検出結果を基に修正の指示を出すのみでよいため、スムーズに処理を行うことができる。
【００３５】
以上、本発明の画像処理装置および画像処理方法について詳細に説明したが、本発明は上記種々の実施例に限定されず、本発明の主旨を逸脱しない範囲において、種々の改良や変更をしてもよいのはもちろんである。
【図面の簡単な説明】
【００３６】
【図１】本発明の画像処理装置の装置構成の一例を示すブロック図である。
【図２】本発明の画像処理方法の流れを示すフロー図である。
【図３】レタッチ画面の一例を示す概念図である。
【符号の説明】
【００３７】
１０  画像処理装置
１２  画像取得手段
１４  サイズ変更手段
１６  欠陥検出手段
１８  表示手段
２０  補正手段
２２  補正取消手段
２４  出力手段
【図１】
2009232170.tif 000003
【図２】
2009232170.tif 000004
【図３】
2009232170.tif 000005