(57)【要約】  【課題】処理対象の画像が画像欠陥の検出及び修正に適していない場合であっても、適切に対応して画像欠陥の修正を実行できる画像処理方法及び画像処理装置を提供する。  【解決手段】欠陥検出修正部４０は、欠陥検出処理は複数の欠陥検出モードを有し、欠陥修正処理は複数の欠陥修正モードを有する。欠陥検出モード及び欠陥修正モードの少なくとも一方を切換えるためのモード切換条件を取得して、モード切換条件に基づいて、複数の欠陥検出モードから所定の欠陥検出モードを選択することと、複数の欠陥修正モード中から所定の欠陥修正モードを選択することの少なくとも一方を行う。【選択図】図１
2006253798.tif 000002
【特許請求の範囲】
【請求項１】
画像が形成された原稿を光電的に読み取ることによって得られる画像データから前記原稿の画像欠陥を検出する欠陥検出処理と、前記欠陥検出処理により得られた前記画像欠陥を修正する欠陥修正処理とを含む画像処理方法であって、
前記欠陥検出処理は複数の欠陥検出モードを有し、前記欠陥修正処理は複数の欠陥修正モードを有しており、
前記欠陥検出モード及び前記欠陥修正モードの少なくとも一方を切換えるためのモード切換条件を取得し、
前記モード切換条件に基づいて、前記複数の欠陥検出モードから所定の欠陥検出モードを選択することと、前記複数の欠陥修正モード中から所定の欠陥修正モードを選択することの少なくとも一方を行う画像処理方法。
【請求項２】
前記モード切替条件は、フィルムの撮像条件、画像の性質、画像欠陥の性質、画像欠陥の位置及びフィルム感度からなる群から選択される少なくとも一種であることを特徴とする請求項１に記載の画像処理方法。
【請求項３】
前記欠陥修正モードは、修正精度を重視したモード及び修正速度を重視したモードを含むことを特徴とする請求項１又は２に記載の画像処理方法。
【請求項４】
前記欠陥検出モードは、検出精度を重視したモード及び検出速度を重視したモードを含むことを特徴とする請求項１〜３のいずれか一項に記載の画像処理方法。
【請求項５】
前記原稿が写真フィルムであり、前記画像欠陥が前記写真フィルムに形成された傷又は前記写真フィルムに付着した異物であることを特徴とする請求項１〜４のいずれか一項に記載の画像処理方法。
【請求項６】
画像が形成された原稿を光電的に読み取ることによって得られる画像データから前記原稿の画像欠陥を検出し、それにより得られた前記画像欠陥を修正する欠陥修正処理部を有する画像処理装置であって、
前記欠陥修正処理部は、複数の欠陥検出モードと複数の欠陥修正モードを有しており、前記欠陥検出モード及び前記欠陥修正モードの少なくとも一方を切換えるためのモード切換条件を取得して前記モード切換条件に基づいて、前記複数の欠陥検出モードから所定の欠陥検出モードを選択することと、前記複数の欠陥修正モード中から所定の欠陥修正モードを選択することの少なくとも一方を行う画像処理装置。
【請求項７】
前記モード切換条件は、フィルムの撮像条件、画像の性質、画像欠陥の性質、画像欠陥の位置及びフィルム感度からなる群から選択される少なくとも一種であることを特徴とする請求項６に記載の画像処理装置。
【請求項８】
前記欠陥修正モードは、修正精度を重視したモード及び修正速度を重視したモードを含むことを特徴とする請求項６又は７に記載の画像処理装置。
【請求項９】
前記欠陥検出モードは、検出精度を重視したモード及び検出速度を重視したモードを含むことを特徴とする請求項６〜８のいずれか一項に記載の画像処理装置。
【請求項１０】
前記原稿が写真フィルムであり、前記画像欠陥が前記写真フィルムに形成された傷又は前記写真フィルムに付着した異物であることを特徴とする請求項６〜９のいずれか一項に記載の画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像欠陥を検出し、検出された画像欠陥を修正するための画像処理方法及び画像処理装置に関し、更に詳細には、赤外光などの非可視光を用いて写真フィルムの画像欠陥を検出して修正する画像処理方法及び画像処理装置に関する。
【背景技術】
【０００２】
近年、ネガフィルムやリバーサルフィルム等の写真フィルム（以下、フィルムとする）に撮影された画像を感光材料（印画紙）へ焼き付けるための装置として、デジタル露光を利用するデジタルフォトプリンタが実用化されている。デジタルフォトプリンタは、フィルムに記録された画像を光電的に読み取って、読み取った画像をデジタル信号とした後、種々の画像処理を施して記録用の画像データとし、この画像データに応じて変調した記録光によって感光材料を走査露光して画像（潜像）を記録し、現像処理等を行って、（仕上り）プリントとする。
【０００３】
このようなデジタルフォトプリンタでは、画像をデジタルの画像データとして、画像データ処理によって焼付時の露光条件を決定することができるので、逆光やストロボ撮影等に起因する画像の飛びやツブレの補正、シャープネス（鮮鋭化）処理、カラーフェリアや濃度フェリアの補正、アンダー露光やオーバー露光の補正、周辺光量低下の補正等を好適に行って、従来の直接露光では得られなかった高品位なプリントを得ることができる。しかも、複数画像の合成や画像分割、さらには文字の合成等も画像データ処理によって行うことができ、用途に応じて自由に編集／処理したプリントも出力可能である。
さらに、デジタルフォトプリンタによれば、デジタルスチルカメラ等で撮影された画像（画像データ）からプリントを作成することもでき、そのうえ画像をプリント（写真）として出力するのみならず、画像データをコンピュータ等に供給したり、フロッピーディスク等の記録媒体に保存しておくこともできるので、画像データを、写真以外の様々な用途に利用することができる。
【０００４】
このようなデジタルフォトプリンタは、基本的に、フィルムに記録された画像を光電的に読み取るスキャナ（画像読取装置）、読み取った画像を画像処理して記録用の画像データとする画像処理装置、および、この画像データに応じて感光材料を走査露光して現像処理を施してプリントとするプリンタ（画像記録装置）より構成される。
スキャナでは、光源から射出された読取光をフィルムに入射して、フィルムに撮影された画像を担持する投影光を得て、この投影光を結像レンズによってＣＣＤセンサ等のイメージセンサに結像して光電変換することにより画像を読み取り、必要に応じて各種の画像処理を施した後に、フィルムの画像データ（画像データ信号）として画像処理装置に送る。ここで、スキャナにおいては、スキャナに装着されたキャリアによってフィルムをコマ送りすることにより、フィルムに撮影された各コマの画像を１コマずつ順次読み取る。
【０００５】
ところで、このようなスキャナを用いてフィルムの画像を読み取る際に、フィルムにゴミや埃等の異物が付着していたり、摩擦等によって傷が形成されていたりすると、得られた画像データには、異物の付着や摩擦等による傷に起因する画像欠陥が形成されてしまう。このような画像欠陥は、プリントの際に、画質劣化を起こす大きな要因になる。そこで、このような読み取った画像データから画像欠陥を検出し、かつ、画像処理によって画像欠陥を修復する方法が提案されている。
【０００６】
フィルムの画像欠陥の検出方法としては、例えば、赤外光（ＩＲ光）等の非可視領域でフィルムの画像を読み取って、この非可視像を解析する方法が知られている。すなわち、ＩＲ光は、フィルムに撮影された画像（色素）には吸収されず、画像欠陥、すなわち、フィルムに付着したゴミや傷によって遮光／散乱されるので、ＩＲ光でフィルムを読み取った際における信号強度の変化を検出することによって、フィルムの画像欠陥を検出することができる。
【０００７】
しかしながら、現在、市場に出回っている多数種のフィルムの中には、非可視光にも感度を有し、画像の露光記録時に可視画像に加えて非可視像も同時に形成される（所謂像写り）フィルムがある。このようなフィルムでは、非可視光の透過光量が前記非可視像の濃度に応じて変動するので、非可視光を用いたとしても記録画像に起因する透過光量の変化と傷や異物に起因する透過光量の変化を分離することは困難であり、画像欠陥の検出と修正の処理を行うことで、逆に画像中のエッジ部分が鈍る等の画質低下が生じたり、画像欠陥の修正処理に不必要に長い時間がかかったりするという問題があった。
【０００８】
このような問題を解決するために、特許文献１には、画像情報が表す画像の欠陥部を検出し、前記画像情報に対して前記検出した欠陥部の修正を行う検出・修正手段と、処理対象の画像情報が表す処理対象の画像が、前記検出・修正手段による欠陥部の検出及び修正に適しているか否かを判断する判断手段と、前記判断手段により処理対象の画像が欠陥部の検出及び修正に適していないと判断された場合に、前記検出・修正手段による欠陥部の検出及び修正を禁止するか、又は処理対象の画像のうち前記判断手段によって欠陥部の検出及び修正に適していないと判断された領域を除外した領域についてのみ欠陥部の検出及び修正が行われるように制御する制御手段と、を含む画像処理装置が開示されている。
【０００９】
【特許文献１】特開２００２−２８１３０３号公報
【発明の開示】
【発明が解決しようとする課題】
【００１０】
上記特許文献１に開示の画像処理装置では、処理対象の画像が欠陥部（画像欠陥）の検出及び修正に適しているか否かを判断し、欠陥部の検出及び修正に適していないと判断した場合に、欠陥部の検出及び修正を禁止するか、又は欠陥部の検出及び修正に適していないと判断した領域を除外した領域についてのみ欠陥部の検出及び修正を行うので、欠陥部検出・修正処理によって画質低下が生じたり、処理に必要以上に時間がかかったりすることを未然に防止できる。
しかし、特許文献１に記載の画像処理装置においては、処理対象の画像が欠陥部の検出及び修正に適しているか否かを判断しているため、処理対象の画像が欠陥部の検出及び修正に適しておらず、判断手段において検出及び修正を行わないと判断された場合は、欠陥部を修正することはできなかった。
【００１１】
本発明は、このような事情を考慮してなされたものであり、本発明の目的は、処理対象の画像が画像欠陥の検出及び修正に適していない場合であっても、適切に対応して画像欠陥の修正を実行することができる画像処理方法及び画像処理装置を提供することにある。
【課題を解決するための手段】
【００１２】
上記課題を解決するために、本発明の第１の態様は、画像が形成された原稿を光電的に読み取ることによって得られる画像データから前記原稿の画像欠陥を検出する欠陥検出処理と、前記欠陥検出処理により得られた前記画像欠陥を修正する欠陥修正処理とを含む画像処理方法であって、前記欠陥検出処理は複数の欠陥検出モードを有し、前記欠陥修正処理は複数の欠陥修正モードを有しており、前記欠陥検出モード及び前記欠陥修正モードの少なくとも一方を切換えるためのモード切換条件を取得し、前記モード切換条件に基づいて、前記複数の欠陥検出モードから所定の欠陥検出モードを選択することと、前記複数の欠陥修正モード中から所定の欠陥修正モードを選択することの少なくとも一方を行う画像処理方法を提供する。
【００１３】
本発明の画像処理方法においては、前記モード切換条件は、フィルムの撮像条件、画像の性質、画像欠陥の性質、画像欠陥の位置、フィルム感度からなる群から選択される少なくとも一種であることが好ましい。
【００１４】
また、前記欠陥修正モードは、修正精度を重視したモード及び修正速度を重視したモードを含むことが好ましく、前記欠陥検出モードは、検出精度を重視したモード及び検出速度を重視したモードを含むことが好ましい。
【００１５】
また、本発明においては、前記原稿が写真フィルムであり、前記画像欠陥が前記写真フィルムに形成された傷又は前記写真フィルムに付着した異物であることが好ましい。
【００１６】
本発明の第２の態様は、画像が形成された原稿を光電的に読み取ることによって得られる画像データから前記原稿の画像欠陥を検出し、それにより得られた前記画像欠陥を修正する欠陥修正処理部を有する画像処理装置であって、前記欠陥修正処理部は、複数の欠陥検出モードと複数の欠陥修正モードを有しており、前記欠陥検出モード及び前記欠陥修正モードの少なくとも一方を切換えるためのモード切換条件を取得して前記モード切換条件に基づいて、前記複数の欠陥検出モードから所定の欠陥検出モードを選択することと、前記複数の欠陥修正モード中から所定の欠陥修正モードを選択することの少なくとも一方を行う画像処理装置を提供する。
【００１７】
本発明の画像処理装置においては、前記モード切換条件は、フィルムの撮像条件、画像の性質、画像欠陥の性質、画像欠陥の位置、フィルム感度からなる群から選択される少なくとも一種であることが好ましい。
【００１８】
また、前記欠陥修正モードは、修正精度を重視したモード及び修正速度を重視したモードを含むことが好ましく、前記欠陥検出モードは、検出精度を重視したモード及び検出速度を重視したモードを含むことが好ましい。
【００１９】
また、前記原稿が写真フィルムであり、前記画像欠陥が前記写真フィルムに形成された傷又は前記写真フィルムに付着した異物であることが好ましい。
【発明の効果】
【００２０】
本発明の画像処理方法及び画像処理装置によれば、処理対象の画像が画像欠陥の検出及び修正に適していない場合、例えば、人物のように画像の変化が激しい場所である場合であっても、欠陥検出処理において、モード切換条件に基づいて最適な検出モードを選択して画像欠陥を検出するので、画像欠陥を適切に検出することができ、また、欠陥修正処理においても、モード切換条件に基づいて最適な画像修正モードで画像欠陥を修正するので、検出された画像欠陥を適切に修正することができる。
【発明を実施するための最良の形態】
【００２１】
以下、本発明の画像処理装置について、添付の図面に示される好適実施例を基に詳細に説明する。
【００２２】
図１に、本発明の画像処理装置を利用するデジタルプリントシステムの一例のブロック図を示した。
図１に示したデジタルプリントシステム１０は、フィルムＦに撮影された画像を光電的に読み取って、プリントとして出力するもので、基本的に、スキャナ１２と、本発明の画像処理装置１４と、出力装置１６とを有する。
【００２３】
まず、スキャナ１２について説明する。
スキャナ１２は、フィルムＦに撮影された画像を光電的に読み取る装置で、図１に模式的に示すように、白色の光源２２、可変絞り２４、色フィルタ板２６、拡散ボックス２８、キャリア３０、結像レンズユニット３２、エリアＣＣＤセンサ３４、およびＡ／Ｄ（アナログ／デジタル）変換器３６を有する。
【００２４】
光源２４は、例えば、ハロゲンランプを用いて構成することができ、フィルムＦに光を照射することができる。光源２４から出射された光は、拡散ボックス２８に入射する。拡散ボックス２８は、フィルムＦに入射する光を、フィルム面方向で均一にすることができる。
可変絞り２４は、フィルムに照射する光の光量を調節するために用いられる。色フィルタ板２６は、Ｒ（赤）、Ｇ（緑）、Ｂ（青）及びＩＲ（赤外）の各色フィルタを有するターレットである。色フィルタ板２６は、公知の回転手段によって回転させられる。これにより、各色フィルタを読取光の光路中に挿入することができる。
【００２５】
キャリア３０は、フィルムＦを断続的に搬送して、フィルムＦに撮影された各画像（各コマ）を、順次、所定の読み取り位置に搬送し保持することができる。キャリア３０は、新写真システム（Advanced Photo System）や１３５サイズなどのフィルムサイズ等に応じた複数の種類が用意され、スキャナ１２の本体に装着自在に構成されている。このキャリア３０を交換することで、各種のフィルムや処理に対応することができる。フィルムに撮影され、プリント作成に供される画像（コマ）は、このキャリア３０によって所定の読取位置に搬送され、保持される。
また、キャリア３０は、フィルムＦに記録されたＤＸコード等を読み取るリーダ（図示しない）を有している。新写真システムに対応するキャリアであれば、フィルムＦの磁気記録媒体に記録された情報を読み取る磁気ヘッドを有している。これらによって読み取られた情報は、画像処理装置１４に送られる。
【００２６】
結像レンズユニット３２は、フィルムＦの投影光をエリアＣＣＤセンサ３４の所定位置に結像させることができる。エリアＣＣＤセンサ３４は、フィルムＦを光電的に読み取るための装置であり、キャリア３０のマスクで規制された１コマの全面を読み取る（面露光による画像読取）。
【００２７】
このようなスキャナ１２において、フィルムＦを読み取る際には、まず、キャリア３０によってフィルムＦを搬送し、読み取りを行うコマ（通常は、１コマ目か最終コマ）を読取位置に搬送する。
【００２８】
光源２２から射出された読取光は、可変絞り２４によって光量が調整された後、例えば、色フィルタ板２６のＲの色フィルタに入射して調光される。そして、拡散ボックス２８でフィルムＦの面方向で光量を均一にされた後、キャリアによって所定の読取位置に保持されたフィルムＦに入射して、透過することにより、フィルムＦに撮影された画像を担持する投影光が得られる。この投影光は、結像レンズユニット３２によってエリアＣＣＤセンサ３４の所定位置（エリアＣＣＤセンサの受光面）に結像され、このコマのＲ画像が光電的に読み取られる。
【００２９】
色フィルタ板２６を回転させて、順次、読取光をＧ及びＢの色フィルタを透過させることで、このコマのＧ画像およびＢ画像の読み取りを行い、最後に、ＩＲの色フィルタを透過させて、ＩＲによる読み取りを行って、このコマの読み取りを終了する。従って、スキャナ１２からは、Ｒ、ＧおよびＢの可視像と、ＩＲ（非可視像）との、４チャネルの画像信号が出力される。
１コマの読み取りを終了したら、フィルムＦを搬送して、次に読み取りを行うコマを読取位置に搬送する。
【００３０】
エリアＣＣＤセンサ３４からの出力信号は、アンプ（図示しない）で増幅された後、Ａ／Ｄ変換器３６によってデジタルの画像信号に変換されて、画像処理装置１４に出力される。
【００３１】
なお、プリントシステム１０においては、通常、１コマにつき、プリント等の出力のために高解像度で画像を読み取る本スキャンと、本スキャンの読取条件やデータ処理部１４における画像処理条件を決定するために、本スキャンに先立って行われる、低解像度での画像読取であるプレスキャンとの、２回の画像読取が行われる。
この際において、通常、プレスキャンと本スキャンの出力信号は、解像度と出力レベルが異なる以外は、基本的に同じデータである。
【００３２】
また、本実施の形態のデジタルプリントシステムにおいて、スキャナ（画像読取手段）１２は、このようなエリアセンサを用いたものに限定はされず、Ｒ、ＧおよびＢに加え、ＩＲの画像を読み取る４ラインのＣＣＤセンサを用いて、いわゆるスリット走査によって画像を読み取るスキャナであってもよい。また、光源２２は、ＬＥＤ（Light Emitting Diode）を利用するものでもよく、例えば、Ｒ（赤）光、Ｇ（緑）光およびＢ（青）光の各可視光を出射する３種のＬＥＤと、非可視光であるＩＲ（赤外）光を出射するＬＥＤとを配列させて光源を構成してもよい。この場合は、色フィルタ板２６が不要となり、各ＬＥＤ光源を駆動して、可視光およびＩＲ光を、順次、出射させてエリアＣＣＤセンサで読み取ることによってＲ、Ｇ、Ｂの可視像とＩＲの非可視像を得ることができる。
【００３３】
つぎに、画像処理装置１４について説明する。前述のように、スキャナ１２から出力されたデジタルの画像信号は、画像処理装置１４に入力される。
図１に示されるように、画像処理装置１４は、画像データ処理部３８、欠陥検出修正部４０とを有する。画像処理装置１４には、ディスプレイ２０と、入力装置１８が接続されている。入力装置１８は、キーボード１８ａ及びマウス１８ｂを有する。
ここで、画像データ処理部３８について説明する。図２に、画像データ処理部３８のブロック図を示した。
画像データ処理部３８は、図２に示すように、データ補正部４４、Ｌｏｇ変換器４６、フレームメモリ４８（以下、ＦＭ４８とする）、拡縮部５０、画像補正部５２、色補正部５４、階調変換部５６、データ変換部５８、および記憶部６０を有する。
【００３４】
なお、デジタルプリントシステム１０の画像データ処理部３８においては、プレスキャンデータを処理して検定用のシミュレーション画像を表示するために、Ｌｏｇ変換器４６から下流（データの流れ方向）で分岐して、ＦＭ４８からデータ変換部５８までの処理経路と基本的に同様の処理経路を有してもよい。
【００３５】
データ補正部４４は、スキャナ１２から出力されたＲ、Ｇ、ＢおよびＩＲの各出力データに、ＤＣオフセット補正、暗時補正、シェーディング補正等の所定の補正を施す。Ｌｏｇ変換器４６は、データ補正部４４で処理された出力データを、例えばＬＵＴ（ルックアップテーブル）等によってＬｏｇ変換して、デジタルの画像（濃度）データとする。Ｌｏｇ変換器４６で変換された、Ｒ、Ｇ、Ｂ、およびＩＲの各画像データは、それぞれ、対応するＦＭ４８に記憶される。
【００３６】
ＦＭ４８に記憶された画像データは、次いで、拡縮部５０で、出力に対応するサイズ（画素数）の画像データに拡縮処理（電子変倍処理）を施される。拡縮部５０で処理された画像データのうち、ＩＲの画像データは、そのまま記憶部６０に出力され、このコマに対応する位置に記憶される。
【００３７】
他方、拡縮部５０で処理されたＲ、ＧおよびＢの可視像の画像データは、次いで、画像補正部５２で、シャープネス処理等の所定の画像補正を行われた後、色補正部５４で、マトリクス等によって色補正（彩度補正）される。
色補正部５４で処理された可視像の画像データは、次いで、階調変換部５６において、一次元のルックアップテーブル（ＬＵＴ）等によって、濃度補正やカラーバランス調整を含む階調変換を施される。フィルムＦがネガフィルムである場合には、この階調変換によって、ネガの画像（濃度）データから、出力に対応するポジの画像（濃度）データに変換される。
【００３８】
データ変換部５８は、階調変換された画像データを、三次元（３Ｄ）−ＬＵＴ等を用いてプリント出力に対応する画像データに変換する。変換されたＲ、ＧおよびＢの可視像の各画像データは、記憶部６０に送られ、ＩＲの画像データと同様に、このコマに対応する位置に記憶される。
すなわち、図示例においては、１コマについて、Ｒ、ＧおよびＢの３つの可視像の画像データ、および、ＩＲ（非可視像）の画像データの計４チャネルの画像データが記憶部６０に記憶される。記憶部６０は、ハードディスクのような固定の記録装置を用いて構成してもよいし、ＣＤ−ＲやＭＤ等の各種の取り外し自在な記録媒体（リムーバブルストレージ）を用いて構成されてもよい。
【００３９】
なお、デジタルプリントシステム１０においては、データ変換部５８で処理された画像データを画像ファイル化（デジタイズ）してＣＤ−Ｒ等の記録媒体に出力してもよく、プリントと画像ファイルの両者を出力してもよい。
【００４０】
つぎに、欠陥検出修正部４０について説明する。
欠陥検出修正部４０は、フィルムＦに付着したゴミや埃などの異物、摩擦による損傷などのフィルムＦの傷等に起因する、画像の白抜けやスジ状のムラなどの画像欠陥を検出し、画像データの補間等により、その画像欠陥を自動修正することができる。
【００４１】
通常の画像欠陥を修正する画像処理装置では、ＩＲの画像データを用いて画像欠陥を検出し、画像データの補間等によって、全ての画像欠陥を自動的に修正している。しかしながら、補間等を用いた自動修正では、画像欠陥の大きさや、画像欠陥が存在する場所の絵柄、例えば、人物の目のように画像の変化が激しい場所等は、適正な修正を行うことができず、不自然で、画質的に問題がある画像となってしまう場合が多々あるのは、前述の通りである。また、このように、修正が不適切な場合は、自動修正を行わないと判断して欠陥修正を行わないようにしていたため、欠陥がそのまま残ってしまっている場合があった。
【００４２】
これに対し、本発明を利用するデジタルプリントシステム１０の欠陥検出修正部４０においては、フィルムの撮像条件、画像欠陥の性質、画像欠陥が存在する領域の画像の性質、画像欠陥の位置などのモード切換条件に基づいて最適な欠陥検出モード又は画像修正モードを選択して、画像欠陥を検出又は修正する。これにより、適正に修正された高画質な画像を出力することができる。すなわち、人物の目のように画像の変化が激しい場所である場合であっても、それに適した検出モードで画像欠陥を検出するとともに、検出された画像欠陥を適切な修正モードで修正することができる。
【００４３】
本実施の形態において、欠陥検出修正部４０は、複数種の欠陥検出モードと、複数種の欠陥修正モードを有している。欠陥検出修正部４０は、複数種の欠陥検出モードと複数種の欠陥修正モードの中から、後述するモード切換条件に基づいて、最適な欠陥検出モードと欠陥修正モードを自動又は手動により選択して画像欠陥の検出処理及び修正処理を行うことができる。欠陥検出モードは、例えば、処理速度よりも精度を重視した検出モード、処理精度よりも速度を重視したモードなどを挙げることができる。また、欠陥修正モードは、処理速度よりも精度を重視した修正モード、処理精度よりも速度を重視したモード、などを挙げることができる。また、欠陥修正モードは、使用した欠陥検出モードに応じて変更されることができる。
【００４４】
以下、欠陥検出修正部４０の作用を説明することにより、本発明の画像処理装置１４について、より詳細に説明する。
【００４５】
画像欠陥の検出及び修正を行う場合には、欠陥検出修正部４０は、データ処理部１４の記憶部６０から、画像欠陥を修正するコマの４チャネル（Ｒ，Ｇ，ＢおよびＩＲ）の画像データを読み出す。そして、モード切換条件を取得し、モード切換条件に基づいて複数の欠陥検出モードの中から適切な欠陥検出モードを選択して、ＩＲの画像データを用いて、画像欠陥の検出を行う。そして、更に、複数の欠陥修正モードの中から、モード切換条件に基づいて適切な欠陥修正モードを選択して、画像欠陥を修正する。本発明においては、画像欠陥を検出する処理に関して従来と同様の検出処理を用い、検出された画像欠陥の修正に関しては、複数の欠陥修正モードの中から最適なモードを選択するようにしてもよい。
【００４６】
ここで、欠陥検出の原理について説明する。
フィルムＦに異物や傷が有る場合には、Ｒ、ＧおよびＢの可視光、ＩＲ等の非可視光共に、これらで吸収、遮光、および散乱される。従って、フィルムＦに異物等が存在した場合、これらの位置に入射し、読取部３４（ＣＣＤセンサ）に入射するフィルムＦの投影光は、光強度が低くなる。
これに対し、フィルムＦに撮影された画像（可視像）に関しては、Ｒ、ＧおよびＢの可視光は、画像に応じて吸収され、投影光の光強度が変わるが、ＩＲ光は、画像には全く吸収されずにフィルムＦを透過する。従って、フィルムＦに異物等が無ければ、基本的に、ＩＲ光は１コマ（エリアＣＣＤセンサ）の全面で同じ強度となり、ＩＲの画像データは、１コマの全画素で均一となる。すなわち、フィルムＦに異物や傷が有る場合には、それに応じてフィルムＦを透過したＩＲ光の強度、すなわち、ＩＲの画像データが変動する。
【００４７】
欠陥検出修正部４０は、これを利用して、ＩＲの画像データを用いて、このコマの画像欠陥を検出する。また、本発明においては、欠陥検出修正部４０は、モード切換条件を取得し、複数種の欠陥検出モードと、複数種の欠陥修正モードの中から、取得したモード切換条件に基づいて、所望の欠陥検出モードと欠陥修正モードを選択して、画像欠陥の検出及び修正を実行する。
【００４８】
欠陥検出モード又は欠陥修正モードの切換えに利用されるモード切換条件としては、例えば、フィルムの撮像条件、画像の性質、画像欠陥の性質、画像欠陥の位置、フィルム感度などを挙げることができる。
フィルムの撮像条件とは、１３５、ブローニなどのフィルムサイズ、ＩＲ画像データにおけるＩＲノイズ量などである。フィルムサイズは、例えば、キャリアに設けられた、ＤＸコード等を読み取るリーダ又はフィルムの磁気記録媒体に記録された情報を読み取る磁気ヘッドから取得することができる。また、ＩＲノイズ量は、例えば、ＩＲ画像データの分散を計算する方法等、既に知られた手法を用いて取得することができる。
【００４９】
また、画像の性質とは、空のような平坦部であるか、テクスチャであるか、主要被写体であるかなどを意味する。モード切換条件として、この画像の性質を利用する場合は、画像の性質の判別には、Ｒ、Ｇ、Ｂの各画像データを利用すればよい。例えば、画像の性質として主要被写体の場合には、Ｒ、Ｇ、Ｂの各画像データを用いて主要被写体抽出処理を実行すればよい。また、画像をディスプレイに表示し、入力装置を介してオペレータに画像の性質を特定させてもよい。
【００５０】
また、画像欠陥の性質とは、引っかき傷若しくは摺り傷など傷の種類、付着した異物、傷のレベル、傷の深さ、傷の太さ、傷の長さ、又は、異物の大きさなどを意味する。引っかき傷の場合の傷のレベルは、例えば、傷画素の連結性で判断することができる。また、摺り傷の場合の傷のレベルは、例えば、一定面積内の傷密度で判断することができる。
【００５１】
欠陥検出修正部４０は、上述したモード切換条件を取得し、判別して、欠陥検出モードと欠陥修正モードの少なくとも一方を最適なモードに切換えることができる。例えば、モード切換条件としてフィルムサイズを利用する場合においては、１３５フィルムサイズのときは、欠陥検出モード及び欠陥修正モードを、それぞれ、速度重視のモードに切換え、ブローニのときは、精度重視のモードに切換える。このように撮像するフィルムサイズに応じて自動的に欠陥検出モード及び欠陥修正モードの少なくとも一方を切換えることで、ユーザーによる操作を必要とせずに、自動で最適な画像処理を行うことができる。
【００５２】
また、フィルムをＩＲ光でスキャンする際に、高速性を重視してＩＲ光の照射時間を短くすると、ＩＲ光蓄積時間の不足からノイズ成分が多くなる場合がある。このような場合には、ＩＲノイズ量を検出し、ＩＲノイズ量が多い場合には、ノイズ量が多いことを前提とした欠陥検出モード及び／又は欠陥修正モードを選択して画像欠陥の検出及び／又は修正を行うことができる。
【００５３】
また、モード切換条件として欠陥の性質を利用する場合は、まず、欠陥検出処理を実行して欠陥を検出し、検出された欠陥が、傷であるか異物であるかを判別する。また、傷である場合には、引っかき傷か摺り傷かを判別したり、傷の太さ、長さ、深さ、レベルなどを判別する。そして、判別結果に基づいて、その欠陥の修正に最適な欠陥修正モードを選択する。
前述したように、引っかき傷のレベルは、例えば、傷画素の連結性で判断することができる。また、すり傷のレベルは、例えば、一定面積内の傷密度で判断することができる。このような引っかき傷や、すり傷のレベルの判断は、既存の手法を用いることができる。引っかき傷の場合は、傷の周囲からの単純補間で修正することができるので、単純補間で修正する欠陥修正モードを選択すればよい。一方、すり傷の場合は、検出された傷の周囲に正常な画像が少なく、補間による修正で画像が不自然になる恐れがある。そのような場合は、補正レベルを弱める欠陥修正モードを選択してもよいし、傷修正を行わないモード、又は、手動により修正を行うモードに切換えることもできる。ここで、補正レベルを弱めるとは、補間のみによって画素を修正するのではなく、補間によって算出された画素値と、原画像の画素値の重み付けを行い修正画素値を算出することを意味する。
【００５４】
また、モード切換条件として画像の性質を利用する場合は、画像の性質に応じて欠陥検出モードと欠陥修正モードの少なくとも一方を最適なモードに切換える。画像の性質は、例えば、Ｒ、Ｇ及びＢの画像データに基づいて判別することができる。例えば、画像中に空のような平坦な領域が存在する場合は、その平坦な領域では処理速度を重視した欠陥検出モード及び／又は欠陥修正モードを選択する。また、画像中にテクスチャの領域が存在する場合には、補間による欠陥修正が困難な場合が多いので、そのテクスチャ領域では、手動による欠陥検出モードと欠陥修正モードを選択する。また、画像中に主要被写体が存在する場合には、主要被写体に対する品質要求も高いため、その主要被写体の存在領域に関しては、精度を重視した欠陥検出モードや欠陥修正モードを選択する。
【００５５】
ここでは、画像の性質に応じて欠陥検出モードと欠陥修正モードの少なくとも一方を切換える手法について説明したが、これに限らず、画像欠陥を検出し、検出された画像欠陥が存在する領域の画像の性質に応じて欠陥修正モードを切換えるだけでもよい。この場合は、画像欠陥が検出された領域について画像の性質を判別し、その判別結果に基づいて欠陥修正モードを最適なモードに切換える。例えば、欠陥検出処理によって欠陥が検出された領域が、空のような平坦な場合は、必ずしも高精度の修正をする必要がないので、処理速度を重視した欠陥修正モードを選択して欠陥の自動修正を行う。また、欠陥検出処理によって傷が検出され、その領域がテクスチャであり、しかも検出された傷が太いような場合は、補間を行うことにより逆に品質が劣化して、画像が不自然になることがある。この場合は、傷の修正を行わないか、手動による欠陥修正モードに切換える。或いは、オペレータに警告を出して手動で傷の修正を実行するかどうかを問い合わせるようにしてもよい。また、欠陥検出処理によって検出された欠陥が主要被写体の画像領域に存在する場合は、主要被写体、特に、顔などは、品質に対する要求も厳しいことから、高精度の欠陥修正モードに切換えて画像欠陥を修正する。
【００５６】
また、モード切換条件として画像の位置を利用する場合は、画像欠陥を検出し、修正する際に、画像を複数のエリアに分けて、エリア毎に異なる欠陥検出モードや欠陥修正モードを選択して欠陥の検出及び修正を実行すればよい。例えば、画像の中心部と周辺部では、ＩＲ光のシェーディングの影響が異なるため、その影響を考慮した欠陥検出モードや欠陥修正モードを利用して欠陥の検出や修正を実行することもできる。具体的には、撮像条件ごとに、エリアごとのシェーディングレベルを記憶しておき、シェーディングによるＩＲ光のオフセット分をキャンセルする処理を行ってから欠陥検出や修正を行う。或いは、ＩＲ画像にローパスフィルタをかけることにより、シェーディングレベルの推定を行ってから、欠陥検出や修正を行ってもよい。
【００５７】
また、画像の中心部には、主要被写体が映っている可能性が高いので、中心部では精度を重視した欠陥検出モードや欠陥修正モードを選択して画像の欠陥の検出や修正を実行し、周辺部では速度を重視した欠陥検出モードや欠陥修正モードで画像欠陥の検出を実行してもよい。
また、モード切換条件として欠陥の位置を利用することもでき、この場合は、欠陥の存在する領域ごとに欠陥修正モードを最適なモードに切換えればよい。
【００５８】
また、本発明においては、欠陥検出モード及び欠陥修正モードを自動的に切換えてもよいし、オペレータによって設定できるようにしてもよい。例えば、顔のような重要性が高い部分や、テクスチャのように補正が困難な部分では、ディスプレイに警告を表示してオペレータに知らせて、手動モードによる修正処理を実行するかどうかを問い合わせるようにしてもよい。オペレータは、必要に応じて手動モードにより画像欠陥の修正処理を行うことができる。手動モードにより欠陥を修正する場合は、例えば、以下のようにすればよい。まず、Ｒ、ＧおよびＢの画像データを可視像としてディスプレイ２０に表示させるとともに、欠陥の検出結果もディスプレイ２０に表示させる。欠陥は、例えば、検出した欠陥を赤等の判別が容易な色で示す、矢印で指示する等の方法で表示すればよい。また、欠陥を色で表示する際には、判別が容易になるように、Ｒ、ＧおよびＢの画像データによる画像を白黒で表示してもよい。
【００５９】
また、ディスプレイ２０にはＧＵＩ(Graphical User Interface)を利用する処理ツール（例えば、マニュアル修正指示ボタン、レタッチツール、および自動修正開始ボタンなど）を表示させる。
なお、ディスプレイ２０に表示する画像は、１コマ全面を表示してもよく、あるいは、部分的な表示とし、縦横のスクロールや画面の切換え等によって、全面を確認できるようにしてもよい。
【００６０】
画像が表示されたら、オペレータは、補間等による自動修正では適正な修正が困難であると判断した画像欠陥を、入力装置１８（キーボード１８ａ又はマウス１８ｂ）を用いて選択し、入力する。
選択又は入力は、画像欠陥を含む領域の指定や、画像欠陥そのものの指定（クリック）等、ＧＵＩを用いる公知の方法で行えばよい。また、マニュアル修正を指示された画像欠陥は、色の変更や囲み枠の表示等で、容易に判別できるようにしてもよい。
【００６１】
オペレータは、マニュアル修正する画像欠陥を全て指定したら、自動修正開始ボタンを押す。これにより、Ｒ、ＧおよびＢの可視像画像データにおいて、マニュアル修正を指示されていない画像欠陥を除いた、画像欠陥の自動修正が開始される。
なお、本例においては、マニュアル修正する画像欠陥を選択し、それ以外を自動修正しているが、本発明は、これに限定はされず、逆に、自動修正する画像欠陥を選択してもよく、あるいは、マニュアル修正する画像欠陥と自動修正する画像欠陥の両方を選択してもよい。さらに、画像欠陥の誤検出があった場合には、その部位の修正は行わない指示を入力できるようにしてもよい。
【００６２】
画像欠陥の自動修正の方法は、特に限定はなく、周辺画素の連続性を利用したり、周辺画素の画像データを用いた補間などによって、画像欠陥の画素を修正（穴埋め）する方法、輝度を調整する方法、ローパスフィルタ等をかけることにより画像欠陥部をぼかす方法等、公知の方法を用いることができる。
【００６３】
画像欠陥の自動修正が終了したら、あるいは自動修正と平行して、オペレータは、Ｒ、ＧおよびＢの可視像画像データにおいて、マニュアル修正を選択した画像欠陥の修正を行う。
この画像修正は、レタッチツールを用いて、例えば、パーソナルコンピュータ等において、Adobe 社のphoto shopなどの市販のレタッチソフトを用いた際の画像修正と同様に行えばよく、 あるいは、画像処理装置１４（プリントシステム１０）において市販のレタッチソフトを使用して画像修正を行ってもよい。
【００６４】
このように、本発明では、補間等による自動修正が可能な画像欠陥は自動で修正し、自動修正が困難な画像欠陥は、オペレータによるマニュアル修正を行うことができる。これにより、良好な作業性を確保しつつも、全ての画像欠陥を適正に修正して、不自然な絵柄の無い、高画質な画像を出力することができる。
【００６５】
以上、画像処理装置１４について説明した。次に、出力装置１６について説明する。
出力装置１６は、デジタルカラープリンタであり、画像メモリ６２、Ｒ、Ｇ及びＧのレーザ光源６４、レーザドライバ６６、ポリゴンミラー６８、ｆθレンズ７０を有する。出力装置１６は、画像メモリ６２から、画像処理装置１４から出力され、記憶された記録用の画像データを読み出して、画像データに基づいて、レーザドライバ６６でレーザ光を変調する。レーザ光は、回転するポリゴンミラー６８及びｆθレンズ７０を介して印画紙Ｐ上を走査され、印画紙Ｐに画像が記録される。画像が記録された印画紙Ｐは、プロセッサに送られ、発色現像、漂白定着、水洗、乾燥の各処理が行われる。これにより、印画紙に記録された画像が可視化される。
【００６６】
図示例のプリントシステム１０においては、画像処理装置１４で処理した画像データをプリントとして出力するのではなく、画像データを画像ファイル化して、ＣＤ−Ｒ等の記録媒体に出力してもよい。
【００６７】
一例として、ＪＰＥＧ（Joint Photographic Expert Group）フォーマットの画像ファイルを出力する場合には、まず、画像処理装置１４で修正した画像データを、３Ｄ−ＬＵＴ等で変換して、画像ファイルの出力に対応する画像データ、例えば、ｓ−ＲＧＢ規格の画像データとする。次いで、この画像データを量子化テーブルとハフマンテーブルで処理することによりＪＰＥＧ圧縮して、ＪＰＥＧフォーマットのベースラインの画像ファイルとする。
さらに、必要に応じて、この画像ファイルにＥｘｉｆ（Exchangeable Image File Format）フォーマットのタグを付与して、いわゆるＪＰＥＧ（Ｅｘｉｆ）フォーマットの画像ファイルとし、さらに、必要に応じて、サムネイル画像を付加して、画像ファイルとしてＣＤ−Ｒ等の記録媒体に出力する。また、画像ファイルには、画像欠陥の修正有り／無しを、タグとして付加してもよい。
【００６８】
なお、画像ファイルを出力する際には、記録媒体にも、特に限定はなく、ＣＤ−Ｒ以外にも、ＭＯ、スマートメディア、Ｈｉ−ＦＤ、Ｚｉｐ、ハードディスク等、公知の記録媒体が各種利用可能である。また、記録媒体以外にも、インタフェースを介してプリントシステム１０に接続される、インターネット等の通信ネットワークやパーソナルコンピュータ等に画像ファイルを出力してもよい。
【００６９】
以上、本発明の画像処理方法及び画像処理装置について詳細に説明したが、本発明は上記実施例に限定はされず、本発明の要旨を逸脱しない範囲において、各種の改良および変更を行ってもよいのはもちろんである。
【００７０】
例えば、図示例のプリントシステム１０の画像処理装置１４においては、画像データ処理部３８と欠陥検出修正部４０とが別構成になっているが、本発明は、これに限定はされず、例えば、欠陥検出修正部４０が画像データ処理部３８に組み込まれたような、一体的な１つの装置として構成されてもよい。
この際には、画像欠陥の検出及び修正は、スキャナ１２からプリンタ１６に至る経路中であれば、どの位置で行ってもよいが、好ましくは、拡縮部５０よりも下流で行う。また、シャープネス処理で画像欠陥が強調されてしまう可能性がある場合には、画像欠陥の修正は、画像補正部５２よりも上流で行うのが好ましい。さらに、この際には、３Ｄ−ＬＵＴの下流に記憶部を配置せずに、画像欠陥の修正を含む所定の処理が終了した画像データを、プリンタ１６（記録媒体）に出力してもよい。
【００７１】
また、上記実施の形態では、写真フィルムを透過した光を光電変換することで画像を読み取る構成を説明したが、これに限定されるものではなく、写真フィルムを反射した光を光電変換することで画像を読み取る構成を採用してもよい。また、読み取られる原稿としては写真フィルムに限定されるものではなく、写真感光材料、普通紙、ＯＨＰシートなどを、読み取り用の原稿として用いてもよい。
【図面の簡単な説明】
【００７２】
【図１】本発明の画像処理方法を実施し本発明の画像処理装置を備えるデジタルプリントシステムの一実施例の概略を示すブロック図である。
【図２】図１に示されるデジタルプリントシステムの画像処理装置の画像データ処理部を構成するブロック図である。
【符号の説明】
【００７３】
１０  デジタルフォトプリンタ
１２  スキャナ
１４  画像処理装置
１６  出力装置
１８  入力装置
２０  ディスプレイ
２２  光源
２４  可変絞り
２６  色フィルタ板
２８  拡散ボックス
３０  キャリア
３２  結合レンズユニット
３４  エリアＣＣＤセンサ
３６  Ａ／Ｄ変換器
３８  画像データ処理部
４０  欠陥検出修正部
４４  データ補正部
４６  Ｌｏｇ変換器
４８  フレームメモリ（ＦＭ）
５０  拡縮部
５２  画像補正部
５４  色補正部
５６  階調変換部
５８  データ変換部
６０  記憶部
６２  画像メモリ
６４  レーザ光源
６６  レーザドライバ
６８  ポリゴンミラー
７０  ｆθレンズ
【図１】
2006253798.tif 000003
【図２】
2006253798.tif 000004