(57)【要約】【課題】可視光用センサから得た画像情報と赤外光用センサから得た画像情報との間の位置関係を正確に対応付けるための簡単な技術を提供する。【解決手段】可視光用センサによって取得された写真フィルムからの可視光画像と赤外光用センサによって取得された前記写真フィルムからの赤外光画像との位置調整方法。前記可視光画像と前記赤外光画像を複数の領域に分割し、対応する前記領域単位で位置ずらしを複数回行うとともに各ずらし位置における前記可視光画像と前記赤外光画像との間でパターンマッチング処理を行い、最も一致度が高いずらし位置を前記可視光画像と前記赤外光画像の正しい位置関係とみなす。【選択図】        図５
2005091434.tif 000002
【特許請求の範囲】
【請求項１】
可視光用センサによって取得された写真フィルムからの可視光画像と赤外光用センサによって取得された前記写真フィルムからの赤外光画像との位置調整方法において、
前記可視光画像と前記赤外光画像の相対位置を複数回ずらす位置ずらし処理を行うとともに各ずらし位置において前記赤外光画像に含まれる画素値を用いて前記可視光画像に含まれる画素値の傷補正処理を行った後補正された前記可視光画像の画素値の分散値を算出する分散演算処理を行い、最も低い分散値を導くずらし位置を前記可視光画像と前記赤外光画像の正しい位置関係とみなすことを特徴とする位置調整方法。
【請求項２】
前記可視光画像と前記赤外光画像を複数の領域に分割し、対応する前記領域単位で前記位置ずらし処理と前記傷補正処理と前記分散演算処理を行い、前記領域単位で前記可視光画像と前記赤外光画像の正しい位置関係を設定することを特徴とする請求項１に記載の位置調整方法。
【請求項３】
前記位置ずらし処理と前記傷補正処理と前記分散演算処理は、可視光画像を構成する基準色画像毎に行われ、基準色毎に算出された分散値の平均値が該当ずらし位置での分散値を代表することを特徴とする請求項１又は２に記載の位置調整方法。
【請求項４】
前記可視光画像と前記赤外光画像の相対位置のずらし処理は少なくとも上下左右の４方向で、好ましくは斜め方向も含めた８方向で行われることを特徴とする請求項１〜３のいずれかに記載の位置調整方法。
【請求項５】
前記正しい位置関係は画素単位で位置調整テーブル化され、この位置調整テーブルを通じて前記可視光画像の画素が前記赤外光画像の画素に正しく対応付けられることを特徴とする請求項１〜４のいずれかに記載の位置調整方法。
【請求項６】
可視光用センサによって取得された写真フィルムからの可視光画像と赤外光用センサによって取得された前記写真フィルムからの赤外光画像との相対位置を複数回ずらす機能と、各ずらし位置において前記赤外光画像に含まれる画素値を用いて前記可視光画像に含まれる画素値の傷補正処理を行った後補正された前記可視光画像の画素値の分散値を算出する分散演算処理を行う機能と、最も低い分散値を導くずらし位置を前記可視光画像と前記赤外光画像の正しい位置関係と判定する機能とをコンピュータに実行させる位置調整プログラム。
【請求項７】
可視光用センサと、赤外光用センサと、前記可視光用センサによって取得された写真フィルムからの可視光画像と赤外光用センサによって取得された前記写真フィルムからの赤外光画像を格納するメモリを備えた傷補正機能付き画像読取装置において、
前記メモリに展開された可視光画像と赤外光画像の相対位置をずらす画像ずらし部と、前記画像ずらし部によってずらされた前記可視光画像と前記赤外光画像との間で前記赤外光画像に含まれる画素値を用いて前記可視光画像に含まれる画素値の傷補正処理を行う第１傷補正部と、前記第１傷補正部によって補正された前記可視光画像の画素値の分散値を算出する分散演算部と、複数のずらし位置で得られた分散値の内で最も低い分散値を導くずらし位置を前記可視光画像と前記赤外光画像の正しい位置関係と判定する位置決め部と、前記位置決め部によって決定された正しい位置関係の下で前記可視光画像と前記赤外光画像から傷補正された写真フィルム画像を生成する第２傷補正部が備えられていることを特徴とする傷補正機能付き画像読取装置。
【請求項８】
前記画像ずらし部は前記可視光画像と前記赤外光画像を複数の領域に分割して対応する領域単位で位置ずらしを行い、前記第１傷補正部と前記分散演算部は前記領域単位で傷補正処理と分散値算出を行うことを特徴とする請求項７に記載の傷補正機能付き画像読取装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、可視光用センサによって取得された写真フィルムからの可視光画像と赤外光用センサによって取得された前記写真フィルムからの赤外光画像との位置調整方法と位置調整プログラム、及び可視光画像と赤外光画像から傷補正された写真フィルム画像を生成する傷補正機能付き画像読取装置に関する。
【背景技術】
【０００２】
写真フィルムに形成された撮影画像を写真プリントとして再現する写真プリント装置（一般的にはミニラボと呼ばれている）は、近年デジタル化され、写真フィルムの撮影画像を光電的に読み取り、読み取った画像をデジタル信号に変換した後、種々の画像処理を施してプリントデータとし、このプリントデータに基づいて印画紙を露光して、写真プリントを作製する。このようなデジタル化された写真プリント装置は、それゆえ、フィルムに記録された画像を光電的に読み取る画像読取装置と、読み取った画像を画像処理してプリントデータに変換する画像処理装置と、プリントデータに応じて印画紙を露光・現像するプリント装置とから構成される。
【０００３】
そのような写真プリント装置で用いられている画像読取装置は、光源から出射する光を写真フィルムに照射して、一般にはそれの透過光をＣＣＤセンサ等にて検出して写真フィルムに撮影されている画像を読みとる装置であるが、写真フィルムに付いている傷や埃（以下、傷や埃などの総称として単に傷という語句を用いる）をも画像として検出して、傷が付いている位置を特定することにより、その傷の影響を受けた画像を補正する傷補正機能付き画像読取装置が登場している。これは、概略的には、可視光は写真フィルムに撮影された画像自体と写真フィルムに付いている傷や埃の何れによっても影響を受けるが、赤外光は写真フィルムに付いている傷や埃については散乱による影響を受けるものの写真フィルムに撮影された画像（つまり基本色成分）自体による影響を受けないという現象を利用したものである（例えば、特許文献１参照。）。
【０００４】
しかしながら、上述したような傷補正において、写真フィルムの可視画像と赤外画像とを対比すると、同一の写真フィルムを同一のレンズで読み取っても、写真フィルムの画像における同一物（同一部分）の位置が可視光用センサから得た画像情報と赤外光用センサから得た画像情報とでわずかにずれが生じているということから、赤外画像によって見つけ出された傷の赤外画像での位置をそのまま可視画像に当てはめると実際に傷が存在している箇所とはわずかに異なる箇所を補正してしまうという不都合が明らかになってきた。可視光用センサから得た画像情報と赤外光用センサから得た画像情報との間に生じるずれの原因は、可視光や赤外光のセンサを含む光学系の組み付け誤差やその経時的変化、さらにはレンズの収差などが考えられる。
【０００５】
可視光用センサから得た画像情報と赤外光用センサから得た画像情報との間の位置関係を正確に対応付けるために、格子状ラインをもつ基準チャートをスキャンして、可視光画像に対する赤外光画像のずれを補正する補正パラメータを求め、この補正パラメータを機差パラメータとして装置内に保存して、傷補正の際に用いる技術が知られている（例えば、特許文献２参照。）。
【０００６】
さらには、６個の等ピッチで並設された貫通孔を有する較正用チャートを写真フィルム画像読み取りポイントに挿入し、可視光用センサによって得られた画像から求められた孔ピッチと赤外光用センサによって得られた画像から求められた孔ピッチとから、可視光用センサで写真フィルムの画像を読み取るときの倍率と赤外光用センサで写真フィルムの画像を読み取るときの倍率の比率を求め、その比率から可視光画像と赤外光画像との写真フィルム画像上での位置関係を一致させるための位置補正式を決定し、この位置補正式を傷補正の際に用いる技術もある（例えば、特許文献３参照。）。
【０００７】
【特許文献１】特開平６−２８４６８号公報（段落番号００１６、図１）
【特許文献２】特開２００１−７９８７ 号公報（段落番号００２９−００３２、図３）
【特許文献３】特開２００１−１５７００３号公報（段落番号００３３−００３７、図２、図３）
【発明の開示】
【発明が解決しようとする課題】
【０００８】
しかしながら、上述した従来技術では、可視光用センサから得た画像情報と赤外光用センサから得た画像情報との間の位置関係を正確に対応付けるために、基準チャートや較正用チャートを写真フィルム画像読取ポイントに挿入して、通常の作業とは完全に別個な較正作業を行わなければならず、写真プリント装置のオペレータに多大な負担を負わせるものであった。上記実状に鑑み、本発明の課題は、可視光用センサから得た画像情報と赤外光用センサから得た画像情報との間の位置関係を正確に対応付けるための簡単な技術を提供するとともにその技術を採用した画像読取装置を提供することである。
【課題を解決するための手段】
【０００９】
上記課題を解決するため、可視光用センサによって取得された写真フィルムからの可視光画像と赤外光用センサによって取得された前記写真フィルムからの赤外光画像との位置調整を行う、本発明による方法では、前記可視光画像と前記赤外光画像の相対位置を複数回ずらす位置ずらし処理を行うとともに各ずらし位置において前記赤外光画像に含まれる画素値を用いて前記可視光画像に含まれる画素値の傷補正処理を行った後補正された前記可視光画像の画素値の分散値を算出する分散演算処理を行い、最も低い分散値を導くずらし位置を前記可視光画像と前記赤外光画像の正しい位置関係とみなす。
【００１０】
本発明は、写真フィルムに存在していた傷の影響を受けたまま取り込まれた可視光画像を同様に取り込まれた赤外光画像を用いて適正に補正された場合、傷に対応する領域の画素値が平坦化されることから補正後の可視光画像の分散値が小さくなる傾向を示すという発明者の見識に基づく。つまり、可視光画像と赤外光画像の相対位置をいろいろとずらしながらその都度赤外光画像を用いた傷補正行ったとすると、可視光画像と赤外光画像に位置ずれが生じていた場合赤外光画像を用いた傷補正が適切には行われないことから補正後の可視光画像の分散値は小さくならず、可視光画像と赤外光画像に位置ずれがない（もしくは少ない）場合赤外光画像を用いた傷補正が適切に行われることから補正後の可視光画像の分散値は小さくなる。このため、最も小さい分散値を作り出す可視光画像と赤外光画像の位置関係が正しい位置関係と判断することができる。その際用いられる傷補正アルゴリズムは、上述したような公知資料から知られているものを利用するとよい。
【００１１】
この方法が他の従来の方法に比べて特に優れているのは、可視光用センサによって取得された写真フィルムからの可視光画像と赤外光用センサによって取得された前記写真フィルムからの赤外光画像とを用いた、ハードウエア又はソフトウエアあるいはその両方によって実装される傷補正処理を含む画像処理だけで、画像読取装置のＣＣＤの取り付け誤差やレンズ特性（収差）などに基づく画像間の位置ずれ（ミスレジストレーション）を調整することができることであり、従来技術のようにミスレジストレーション調整のために基準チャートなどの調整道具を全く使わない。このため、オペレータに負担をかけることなしに、いつでも簡単にミスレジストレーション調整を行うことができる。このことは、特に、経時変化に伴う定期的なミスレジストレーション調整に威力を発揮する。
【００１２】
本発明の好適な実施形態の１つでは、前記可視光画像と前記赤外光画像を複数の領域に分割し、対応する前記領域単位で前記位置ずらし処理と前記傷補正処理と前記分散演算処理を行い、前記領域単位で前記可視光画像と前記赤外光画像の正しい位置関係を設定する。この方法では、部分的な領域単位で可視光画像と赤外光画像の間のミスレジストレーション調整が可能になるので、レンズ収差などを原因とする局所的な画像領域によって異なるミスレジストレーションの調整も可能となる。
【００１３】
カラー画像の場合、通常Ｒ（赤）、Ｇ（緑）、Ｂ（青）といった３つの基準色毎の画像から構成されているが、写真フィルムに存在する傷が全ての基準色の画像に対して均一に影響を及ぼすとは限らないので、本発明の他の好適な実施形態の１つでは、前記位置ずらし処理と前記傷補正処理と前記分散演算処理は、可視光画像を構成する基準色画像毎に行われ、基準色毎に算出された分散値の平均値が該当ずらし位置での分散値を代表することにしている。
【００１４】
前記可視光画像と前記赤外光画像の相対位置のずらし処理は少なくとも上下左右の４方向で行うとよいが、演算速度に問題がない場合、より正確なミスレジストレーション調整を実現するため、好ましくは斜め方向も含めた８方向で行われることが望ましい。ここでいう上下左右方向とは、Ｘ−Ｙ座標面に配置された画像におけるＸ軸正方向と負方向及びＹ軸正方向と負方向であり、斜め方向とはＸ軸ないしはＹ軸から傾斜した方向である。
【００１５】
本発明の好適な実施形態の１つでは、前記正しい位置関係は画素単位で位置調整テーブル化され、この位置調整テーブルを通じて前記可視光画像の画素が前記赤外光画像の画素に正しく対応付けられる。赤外光画像で見つけだされた傷情報に基づいて可視光画像を補正する際、この調整テーブルを使って赤外光画像の画素位置を可視光画像の画素位置に変換することでミスレジストレーションを補償することができ、従来のミスレジストレーション調整機能を有しない傷補正アルゴリズムに大きな変更を加えることなしに、本発明によるミスレジストレーション調整機能を付加することができる。
【００１６】
また、本発明は、上述した可視光画像と赤外光画像との位置調整方法をコンピュータに実行させるプログラムやそのプログラムを記録した媒体も権利の対象とするものである。
【００１７】
本発明では、さらに、上述した位置調整方法を採用した傷補正機能付き画像読取装置も権利の対象としており、その傷補正機能付き画像読取装置は、可視光用センサと、赤外光用センサと、前記可視光用センサによって取得された写真フィルムからの可視光画像と赤外光用センサによって取得された前記写真フィルムからの赤外光画像を格納するメモリを備え、前記メモリに展開された可視光画像と赤外光画像の相対位置をずらす画像ずらし部と、前記画像ずらし部によってずらされた前記可視光画像と前記赤外光画像との間で前記赤外光画像に含まれる画素値を用いて前記可視光画像に含まれる画素値の傷補正処理を行う第１傷補正部と、前記第１傷補正部によって補正された前記可視光画像の画素値の分散値を算出する分散演算部と、複数のずらし位置で得られた分散値の内で最も低い分散値を導くずらし位置を前記可視光画像と前記赤外光画像の正しい位置関係と判定する位置決め部と、前記位置決め部によって決定された正しい位置関係の下で前記可視光画像と前記赤外光画像から傷補正された写真フィルム画像を生成する第２傷補正部が備えられている。当然ながら、この傷補正機能付き画像読取装置も上述した位置調整方法におけるすべての作用効果を得ることができる。また、第１傷補正部と第２傷補正部を兼用させてもよいが、第１傷補正部ではあくまでミスレジストレーション調整を目的としているので、簡単な傷補正アルゴリズムを用い、第２傷補正部ではミスレジストレーション調整された可視画像と赤外画像を用いた本格的な傷補正アルゴリズムを用いることが好都合である。もちろん、第１傷補正部と第２傷補正部を兼用させた場合は、ミスレジストレーション調整と傷補正が同時に行われるという利点が得られる。
本発明によるその他の特徴及び利点は、以下図面を用いた実施形態の説明により明らかになるだろう。
【発明を実施するための最良の形態】
【００１８】
図１は本発明による傷補正機能付き画像読取装置を搭載した画像プリントシステムを示す外観図であり、この写真プリントシステムは、ここでは図示されていないフィルム現像機によって現像処理された写真フィルム１（以下、単位フィルムと称する）の撮影画像コマをデジタル画像データとして読み取る画像読取装置３や取得された画像データに画像処理を施してプリント情報を作成するコントローラ４などを備えた操作ステーションＯＳと、操作ステーションＯＳからのプリント情報に基づいて印画紙２に対して露光処理と現像処理とを行って写真プリント２ａを作成するプリントステーションＰＳとから構成されている。コントローラ４は、基本的には汎用パソコンから構成されており、このパソコンには、この写真プリントシステムの操作画面を表示するモニタ４ａ、デジタルカメラ等のメモリカード等から画像を読み込むメディアリーダ４ｂ、オペレータによる操作入力に用いられるキーボード４ｃ等が組み込まれている。
【００１９】
プリントステーションＰＳは、図２に示されているように、２つの印画紙マガジン１１に納めたロール状の印画紙２を引き出してシートカッター１２でプリントサイズに切断すると共に、このように切断された印画紙２に対し、バックプリント部１３で色補正情報やコマ番号などのプリント処理情報を印画紙Ｐの裏面に印字するとともに、露光プリント部１４で印画紙２の表面に撮影画像の露光を行い、この露光後の印画紙２を複数の現像処理槽を有した処理槽ユニット１５に送り込んで現像処理する。乾燥の後に装置上部の横送りコンベア１６からソータ１７に送られた印画紙２、つまり写真プリント２ａは、このソータ１７の複数のトレイ１７ａにオーダ単位で仕分けられた状態で集積される（図１参照）。
【００２０】
上述した印画紙２に対する各種処理に合わせた搬送速度で印画紙２を搬送するために印画紙搬送機構１８が敷設されている。印画紙搬送機構１８は、印画紙搬送方向に関して露光部１４の前後に配置されたチャッカー式印画紙搬送ユニット１８ａを含む複数の挟持搬送ローラ対から構成されている。
【００２１】
露光プリント部１４には、副走査方向に搬送される印画紙２に対して、主走査方向に沿って操作ステーションＯＳからのプリントデータなどのプリント情報に基づいてＲ（赤）、Ｇ（緑）、Ｂ（青）の３原色のレーザ光線の照射を行うライン露光ヘッドが設けられている。処理槽ユニット１５は、発色現像処理液を貯留する発色現像槽１５ａと、漂白定着処理液を貯留する漂白定着槽１５ｂと、安定処理液を貯留する安定槽１５ｃを備えている。
【００２２】
画像読取装置３は傷補正機能付きフィルムスキャナであり、主な構成要素として、照明光学系３１、撮像光学系としてのズームレンズ３２、入射してきた光を可視光と赤外光に分けるダイクロイックミラー３３、可視光用センサユニット３４、赤外光用センサユニット３５を備えている。照明光学系３１は、光源としてのハロゲンランプ又は発光ダイオードと、その光源からの光を調光するミラートンネルや拡散板などから構成されている。可視光用センサユニット３４は、フィルム１の３つの基本色成分（例えばＲ、Ｇ、Ｂ）からなる可視光画像を検出するためにそれぞれ適合するカラーフィルタを装着した３つのＣＣＤアレイ３４ａと、これらのＣＣＤアレイ３４ａによって検出された可視光信号を処理して基本色成分で構成されたＲ・Ｇ・Ｂ画像データを生成してコントローラ４へ転送する可視光用信号処理回路３４ｂを備えている。これに対して、赤外光用センサユニット３５は、フィルム１に付いている傷の状態を赤外光画像として検出するためにダイクロイックミラー３３から分岐された赤外光のみを受けるように配置されたＣＣＤアレイ３５ａと、このＣＣＤアレイ３５ａによって検出された赤外光信号を処理して赤外光画像データを生成してコントローラ４へ転送する赤外光用信号処理回路３５ｂを備えている。
【００２３】
このように構成された画像読取装置３では、フィルム１の撮影画像コマが所定の読取位置に位置決めされると、撮影画像コマの読取処理が開始されるが、その際撮影画像コマの投影光像は、フィルム搬送機構３６によるフィルム１の副走査方向への送り操作により、複数のスリット画像に分割された形で順次可視光用センサユニット３４及び赤外光用センサユニット３５によって読み取られ、Ｒ、Ｇ、Ｂの色成分の画像信号並びに赤外成分の画像信号に光電変換され、生のデジタル画像データとしてコントローラ４に送られる。このような、照明光学系３１、撮像光学系３２、可視光用センサユニット３４及び赤外光用センサユニット３５の各制御はコントローラ４によって行われており、この実施の形態では、コントローラ４の一部の機能部分が画像読取装置３の構成要素となっている。
【００２４】
コントローラ４は、ＣＰＵを中核部材として、入力されたデータに対して種々の処理を行うための機能部がハードウエア又はソフトウエア或いはその両方で実装されているが、本発明に特に関係する機能部として、図３に示されているように、画像（詳しくは画像データ）を各種処理のために一時的に格納するメモリ４１、可視光用センサユニット３４によって取得されたフィルム１からの可視光画像と赤外光用センサユニット３５によって取得されたフィルム１からの赤外光画像を用いて後で詳しく説明するミスレジストレーション調整やフィルムの傷補正などを行う読取画像前処理手段５０、この読取画像前処理手段５０によって傷補正処理されるとともにメモリ４１に展開されている画像データ（可視光画像データ）に対して色調補正やフィルタリング（ぼかしやシャープネスなど）やトリミングなどの各種画像処理を施す画像処理部４２、画像データやその他の表示アイテムをビデオメモリに取り込むとともにこのビデオメモリに展開されたイメージをビデオコントローラによってビデオ信号に変換してモニタ４ａに送るビデオ制御部４３、画像処理部４２で処理された最終的な画像データ等をプリントデータに変換してプリントステーションＰＳの露光プリント部１４に転送するプリントデータ生成部４４、ＧＵＩを用いて作り出された操作画面の下でキーボード４ｃ等を通じて入力された操作指令や予めプログラム化された操作指令に基づいて各機能部を制御するプリント管理部４５が挙げられる。
【００２５】
読取画像前処理手段５０は、メモリ４１に展開された可視光画像と赤外光画像の相対位置をずらす画像ずらし部５１と、この画像ずらし部５１によってずらされた可視光画像と赤外光画像との間で赤外光画像に含まれる画素値を用いて可視光画像に含まれる画素値の傷補正処理を行う第１傷補正部５２と、この第１傷補正部５２によって補正された可視光画像の画素値の分散値を算出する分散演算部５３と、複数のずらし位置で得られた分散値の内で最も低い分散値を導くずらし位置を可視光画像と赤外光画像の正しい位置関係と判定する位置決め部５４と、この位置決め部によって決定された正しい位置関係を表す情報を格納している位置調整テーブル５５と、この位置調整テーブル５５を利用しながら可視光画像と赤外光画像から傷補正された写真フィルム画像（画像データ）を生成する第２傷補正部５６を備えている。
【００２６】
この実施形態では、第１傷補正部５２は、赤外画像の平均値ないしは実験的に求められた固定値に基づいて設定された閾値をフィルム傷の判定条件とし、閾値を下回る赤外画像の画素値分を対応する可視光画像の画素値に加算することで、傷による画素値低下分を補償するという簡単であるが高速に処理可能な傷補正アルゴリズムを採用している。また、第２傷補正部５６は、ここでは詳しく説明しないが、フィルム傷の統計学的特性等を考慮して複数の傷補正アルゴリズムから最適なものを選択して傷補正を行うといったより複雑であるが高精度な傷補正アルゴリズムを採用している。
【００２７】
画像ずらし部５１は、図４で模式的に示しているように、メモリ４１に展開されている可視光画像（ここでは赤色（Ｒ）画像）と赤外光（ＩＲ）画像の一方（ここではＲ画像）に注目画素：R(x,y)を定め、この注目画素を中心として移動オペレート領域Ｔを設定するとともに、他方の画像（ここではＩＲ画像）に対しても対応する位置：IR(x,y)を中心として移動オペレート領域Ｔを設定し、ＩＲ画像の移動オペレート領域Ｔを矢印で示された８つの方向にずらすとともにそれぞれの方向で１画素づつ１０画素分程度ずらす。第１傷補正部５２はそれぞれの移動オペレート領域Ｔに含まれているＲ画像とＩＲ画像の画素の濃度値を読み出しながら、上述した傷補正アルゴリズム（閾値に関しては全画像領域で共通のものを使用してもよいし、移動オペレート領域毎に設定してもよい）を用いて移動オペレート領域に含まれているＲ画像に対して傷補正を行い、さらに分散演算部５３が傷補正されたＲ画像の分散値を算出していく。なお、ここでの説明では可視光画像としてＲ画像を処理対象として説明しているが、緑色（Ｇ）と青色（Ｂ）の画像に対しても同様に行われる。つまり、設定された注目画素：R(x,y)、G(x,y)、B(x,y)をホームポジションとして全てのずらし位置（ホームポジションも含む）での分散値が得られる。また、１つのずらし位置で得られるＲ画像、Ｇ画像、Ｂ画像の分散値の平均値がそのずらし位置での分散値を代表することにしている。位置決め部５４は、このようにして得られた（代表）分散値の中で最小の分散値を与えているずらし位置を可視画像と赤外画像の正しい位置と判定する。
【００２８】
移動オペレート領域Ｔのサイズは処理対象の画像データサイズによっても異なるが、２０００×３０００（画素）程度の画像データサイズの場合５０×５０（画素） が好ましいが、さらに大きなサイズを採用してもよい。また、注目画素：R(x,y)の移動ピッチは移動オペレート領域Ｔのサイズによって異なるが、５０x５０程度のサイズの場合２５〜５０（画素）程度が好ましい。注目画素：R(x,y)の移動ピッチ毎にミスレジストレーション調整量、つまりＲ画像とＩＲ画像の正しい位置関係が求められることになるので、きめの細かいミスレジストレーション調整が必要な場合、注目画素：R(x,y)の移動ピッチを小さくすればよい。
【００２９】
この実施形態では、各ずらし位置で実行される傷補正処理と傷補正後の可視光画像の分散値算出は、統合的な演算式で行われる。そのため、分散値演算で用いられる可視光画像の画素値は、前述したフィルム傷判定の閾値：ＣＦと赤外画像の対応する画素値の差、つまり閾値を下回る赤外画像の画素値分が加算されたものである。この閾値：ＣＦと赤外画像の対応する画素値の差を加算することが傷補正となっている。フィルム傷の影響を受けていない赤外画像の画素値は、閾値と実質的に等しくなるので、可視光画像の画素値はそのままとなる。
【００３０】
このような傷補正処理が組み込まれた可視光画像（ここではＲ画像分だけが説明されている）の分散値算出のための演算式が以下のようになるが、その際、移動オペレート領域ＴのサイズをＮ＝（２ｎ＋１）x（２ｎ＋１）とするとともに、Ｒ画像をｒ画像、ＩＲ画像をｄ画像とし、そこに含まれている画素（濃度値）はｒとｄに２つの添え字を与えた二次マトリックスの形で示され、添え字のαとβはそれぞれｘ方向とｙ方向のずらし量である。
【数１】
2005091434.tif 000003
この数式１は、特定のずらし位置におけるＲ画像の分散値であるが、同様にＧ画像の分散値としてgＶ(α,β)、Ｂ画像の分散値としてbＶ(α,β)が求められる。これらの分散値の平均値が、つまり
aＶ(α,β)=（rＶ(α,β)＋gＶ(α,β)＋bＶ(α,β)）÷３
がこのずらし位置における可視光画像の分散を代表する。
【００３１】
この可視光画像の分散値：aＶ(α,β)は全てのずらし位置（全てのαとβの組み合わせ位置）で求められ、それらの内で最も小さい値を与えたずらし位置がこの移動オペレート領域における可視画像と赤外画像の正しい位置となる。
【００３２】
次に、本発明による可視光画像（Ｒ・Ｇ・Ｂ画像）と赤外画像（ＩＲ画像）との位置調整ルーチンを図４の模式図を念頭におきながら図５のフローチャートを用いて説明する；
まず、注目画素の初期座標(x,y)を設定する（＃０１）。この注目画素の座標位置(x,y)は、所定の移動ピッチでそこに設定されていく移動オペレート領域Ｔが約１／２程度の重なりをもって全画像領域をカバーするように画像サイズに依存して予め決められている。図４に示すように、メモリ４１に展開されているＲ・Ｇ・Ｂ画像中の注目画素(x,y)を中心として移動オペレート領域Ｔを設定する（＃０２）。
【００３３】
Ｒ画像中の注目画素に対応するＩＲ画像中の画素ＩＲ(x+α,y+β)（最初はα=0,β=0）を中心として移動オペレート領域Ｔを設定する（＃０３）。ステップ＃０２とステップ＃０３で設定された移動オペレート領域Ｔ内に含まれるＲ・Ｇ・Ｂ画像のそれぞれとＩＲ画像との画素群の間で数式１で示した演算式に基づいて傷補正と分散値演算を行い、算出された可視画像の分散値を記憶する（＃０４）。ＩＲ画像中に設定された移動オペレート領域Ｔが全方位（８方向）で所定のずらし量を終了したかどうかをチェックする（＃０５）。移動オペレート領域Ｔは１つの注目画素を原点として全方位で画素単位で１０画素分ずらされる。つまりαとβがそれぞれ−１０〜＋１０まで増分する。ステップ＃０５のチェックで「Ｎｏ」なら、その移動オペレート領域をずらすためにＩＲ画像中の注目画素の位置を変更し（αとβの変更）、ステップ＃０３にジャンプする（＃０６）。
【００３４】
ステップ＃０５のチェックで「Ｙｅｓ」なら、現在の注目画素に関してステップ＃０３〜＃０６の繰り返しを通じて得られた全ての分散値から最小を選び、その分散値をもたらした位置ずれ量、つまりαとβの値をそれぞれＸ方向とＹ方向の位置ずれ値（この分だけすれた位置が正しい位置である）として記録する（＃０７）。次に、画像サイズによって決定されている全ての注目画素の位置での位置ずれ値算出が終了しているかどうかをチェックする（＃０８）。ステップ＃０８のチェックで「Ｎｏ」なら、可視画像に設定する注目画素を次の座標位置に設定し（＃０９）、ステップ＃２にジャンプして、全ての注目画素の移動ピッチが終了するまでステップ＃０２〜＃０７の処理を繰り返しながら位置ずれ値を記録していく。この注目画素の移動ピッチは、ここでは、移動オペレート領域Ｔが５０ｘ５０程度として例えば５０画素に設定されている。この場合、位置ずれ値（αとβの値）は２５画素ピッチで得られる。
【００３５】
ステップ＃０８のチェックで「Ｙｅｓ」なら、可視画像において注目画素を所定ピッチ（５０画素）で移動しながら得られた位置ずれ値群を用いて位置調整テーブル５５を作成又は調整を行う（＃１０）。
【００３６】
この位置調整ルーチンで得られた位置ずれ値群は５０画素ピッチとなっているので、これをそれ自体はよく知られた平滑化処理を用いて実際の画像サイズの各画素に合わせた位置ずれ値テーブルを作成する。位置ずれ値はＸ方向（主走査方向）とＹ方向（副走査方向）で求められているのでＸ方向とＹ方向の位置ずれ値テーブルが作成される。この実施の形態では、この位置ずれ値テーブルに基づいて画素単位での可視光画像と赤外光画像の正しい位置関係、つまり一方の画像の画素座標値に対する他方の画素座標値を示す位置調整テーブル５５が作成又は修正される。この位置調整テーブル５５は、第２傷補正部５６によるＩＲ画像情報を利用したフィルムの本格的な傷補正処理に用いられる。
【００３７】
上記の実施の形態では、メモリ４１に展開されている可視光画像に注目画素を定め、この注目画素を中心として移動オペレート領域Ｔを設定するとともに、赤外光画像に対しても注目画像に対応する位置を中心として移動オペレート領域Ｔを設定し、傷補正と分散値演算を行っていたが、逆に赤外光画像に注目画素を定め、この注目画素を中心として移動オペレート領域Ｔを設定するとともに、可視光画像に対して位置ずらしを行う移動オペレート領域Ｔを設定し、傷補正と分散値演算を行っても良い。
さらに上記の実施の形態では、特定のずらし位置におけるＲ画像とＧ画像とＢ画像の分散値を算術平均することでそのずらし位置における可視光画像の分散を代表させていたが、算術平均に代え重みつき平均を採用しても良いし、Ｒ画像とＧ画像とＢ画像の分散値の内の最大値又は最小値をとるやり方も考慮することができる。また、特別な場合では、Ｒ画像とＧ画像とＢ画像のうちの１つ又は２つだけの分散値を求めるやり方も可能である。
【産業上の利用可能性】
【００３８】
本発明の位置調整技術は、可視光画像と赤外光画像を用いて画像処理を行う際に、レンズ収差やＣＣＤ特性等を原因として、取得されメモリに展開された可視光画像と赤外光画像の間の画素座標値のずれを較正プレートなどを使わずに調整する分野に利用可能である。
【図面の簡単な説明】
【００３９】
【図１】本発明による位置調整方法を用いた傷補正機能付き画像読取装置を組み込んだ写真プリントシステムの外観図
【図２】写真プリントシステムの模式構成図
【図３】コントローラの機能ブロック図
【図４】可視光画像と赤外光画像とのテンプレートマッチング処理の説明図
【図５】可視光画像（Ｒ画像）と赤外画像（ＩＲ画像）との位置調整ルーチン示すフローチャート
【符号の説明】
【００４０】
３：画像読取装置
３４：可視光用センサユニット（可視光用センサ）
３５：赤外光用センサユニット（赤外光用センサ）
４１：メモリ
５０：読取画像前処理手段
５１：画像ずらし部
５２：第１傷補正部
５３：分算演算部
５４：位置決め部
５５：位置調整テーブル
５６：第２傷補正部
【図１】
2005091434.tif 000004
【図２】
2005091434.tif 000005
【図３】
2005091434.tif 000006
【図４】
2005091434.tif 000007
【図５】
2005091434.tif 000008