(57)【要約】重複領域において重複する入力画像同士を繋ぎ合わせる画像繋合方法は、各々の入力画像から低周波帯副画像を得ることと；各々の入力画像から高周波帯副画像を得ることとを含む。更に画像繋合方法は、低周波帯出力画像を作り出すべく重複領域の少なくとも一部を横切って低周波帯副画像同士をブレンドすることと；高周波帯出力画像を作り出すべく重複領域の少なくとも一部を横切って高周波帯副画像同士を接合することと；全帯域出力合成画像を作り出すべく低周波帯出力画像と高周波帯出力画像を合体することとを含む。
2010512696.tif 000002
【特許請求の範囲】
【請求項１】
重複領域において互いに重複する入力画像同士を繋ぎ合わせる画像繋合方法であって、前記画像繋合方法は、
各々の前記入力画像から低周波帯副画像を得ることと；
各々の前記入力画像から高周波帯副画像を得ることと；
低周波帯出力画像を作り出すべく、前記重複領域のうちの少なくとも一部を横切って前記低周波帯副画像同士をブレンドすることと；
高周波帯出力画像を作り出すべく、前記重複領域のうちの少なくとも一部を横切って前記高周波帯副画像同士を接合することと；
全帯域出力合成画像を作り出すべく、前記低周波帯出力画像と前記高周波帯出力画像を合体することと
を備える、画像繋合方法。
【請求項２】
各々の前記入力画像は、高ダイナミックレンジ画像を含む、請求項１記載の画像繋合方法。
【請求項３】
前記高周波帯副画像同士の接合は、
前記入力画像同士に共通のエッジ特徴に対応する接合位置を選択して選択接合位置とすることと；
前記選択接合位置で前記高周波帯副画像同士を接合することと
を含む、請求項１または２記載の画像繋合方法。
【請求項４】
前記画像繋合方法は、互いに共通のエッジ特徴を同定不可能な前記高周波帯副画像同士をブレンドすることを含む、請求項３記載の画像繋合方法。
【請求項５】
前記画像繋合方法は、各々の前記高周波帯副画像に対して複数の走査線を規定することを含み、
前記選択接合位置での前記高周波帯副画像同士の接合は、走査線ベースで前記高周波帯副画像同士を接合することを含む、請求項３記載の画像繋合方法。
【請求項６】
前記画像繋合方法は、前記高周波帯副画像の各々の走査線に対して、接合位置として両方の前記入力画像に共通のエッジ特徴に対応するピクセルインタフェースを選択することを含む、請求項５記載の画像繋合方法。
【請求項７】
前記画像繋合方法は、前記入力画像におけるエッジ特徴を同定することを含む、請求項３記載の画像繋合方法。
【請求項８】
前記画像繋合方法は、前記入力画像における対応点を同定することを含む、請求項３記載の画像繋合方法。
【請求項９】
前記低周波帯副画像同士の前記ブレンドは、正弦波融合関数を用いることを含む、請求項１〜８何れか一項記載の画像繋合方法。
【請求項１０】
前記画像繋合方法は、前記入力画像の正規化を含む、請求項１〜９何れか一項記載の画像繋合方法。
【請求項１１】
前記画像繋合方法は、前記低周波帯副画像の正規化を含む、請求項１〜９何れか一項記載の画像繋合方法。
【請求項１２】
前記画像繋合方法は、前記高周波帯副画像の正規化を含む、請求項１〜９何れか一項記載の画像繋合方法。
【請求項１３】
前記画像繋合方法は、前記高周波帯副画像のサイズを変更することを含む、請求項１〜１２何れか一項記載の画像繋合方法。
【請求項１４】
前記画像繋合方法は更に、前記全帯域出力合成画像が非方形画像を含む場合、方形拡大画像領域を規定し、ランダム近傍サンプリングによって空白の縁画像領域を充填する、請求項１〜１３何れか一項記載の画像繋合方法。
【請求項１５】
前記ランダム近傍サンプリングは、各々の非充填ピクセルに対して、
前記非充填ピクセルに最も近い検索領域を規定することと；
前記非充填ピクセルを充填すべく、前記検索領域における入力ピクセルの特徴を選択することと
を含む、請求項１４記載の画像繋合方法。
【請求項１６】
前記画像繋合方法は、前記検索領域が非充填ピクセルしか含まない場合、前記検索領域を拡大することを含む、請求項１５記載の画像繋合方法。
【請求項１７】
前記画像繋合方法は、１つの非充填ピクセルに対して、前に充填された非充填ピクセルの前記検索領域のサイズよりも小さい前記検索領域のサイズを選択することを含む、請求項１６記載の画像繋合方法。
【請求項１８】
重複領域において互いに重複する入力画像同士を繋ぎ合わせる画像繋合装置であって、前記画像繋合装置は、
画像ブレンドプロセッサと；
画像接合プロセッサと；
前記画像ブレンドプロセッサと前記画像接合プロセッサにそれぞれ連結される画像マージャと
を備える、画像繋合装置。
【請求項１９】
前記画像繋合装置は更に、
前記画像ブレンドプロセッサに連結される低域フィルタと；
前記画像接合プロセッサに連結される高域フィルタと
を備える、請求項１８記載の画像繋合装置。
【請求項２０】
前記画像繋合装置は更に、前記画像ブレンドプロセッサに連結される画像整列検出器を備える、請求項１８または１９記載の画像繋合装置。
【請求項２１】
前記画像繋合装置は更に、前記画像接合プロセッサに連結される画像整列検出器を備える、請求項１８〜２０何れか一項記載の画像繋合装置。
【請求項２２】
前記画像繋合装置は更に、前記画像接合プロセッサに連結される接合位置選択装置を備える、請求項１８〜２１何れか一項記載の画像繋合装置。
【請求項２３】
前記画像繋合装置は更に、前記画像接合プロセッサに連結されるエッジ特徴検出器を備える、請求項２２記載の画像繋合装置。
【請求項２４】
前記画像繋合装置は更に、前記画像マージャに連結される第２画像ブレンドプロセッサを備える、請求項１８〜２３何れか一項記載の画像繋合装置。
【請求項２５】
前記画像マージャは、画像増倍器を備える、請求項１８〜２４何れか一項記載の画像繋合装置。
【請求項２６】
コンピュータに、請求項１記載の画像繋合方法の手順を実行させるためのプログラムを記憶した、コンピュータ読取可能な記憶媒体。
【請求項２７】
コンピュータに、
画像同士をブレンドする第１機能と；
画像同士を接合する第２機能と；
画像同士を加える第３機能と
を実現させるためのプログラムを記憶した、コンピュータ読取可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、２つ以上のデジタル画像を互いに繋ぎ合わせる（ｓｔｉｔｃｈｉｎｇ）方法と装置に関する。
【背景技術】
【０００２】
重複視野を描写するデジタル画像同士は、「繋ぎ合わせ」として公知の工程によって、より大きな統合視野の合成画像を形成すべく合体（ｃｏｍｂｉｎｅ）され得る。何れの原画像よりも大きな視野を備える合成画像を作成すべく、繋ぎ合わせを用いることによって、幾つかの原画像を互いに継ぎ合わせ（ｊｏｉｎ）得る。
【０００３】
幾つかの先行技術の合成画像（ｓｔｉｔｃｈｅｄ  ｉｍａｇｅｓ）において生じ得る１つの問題は、合体画像の視野が交わる、目に見える「継ぎ目」の出現である。公知の画像繋合方法は通常、合成画像を作り出すために、入力画像の正確またはほぼ正確なオーバーレイを必要とする。最も公知の画像繋合方法は、同一の画像露出量を必要とするし、仮にそうであったとしても高ダイナミックレンジ画像ではうまくいかない。幾つかの公知の画像繋合方法は、コンピュータ集約的であり、コンピュータソフトウエアで実行される場合はメモリ効率が悪い。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
高品質合成画像を得るため、デジタル画像の有効な繋合方法が一般的に必要とされる。特に、高ダイナミックレンジ画像を、合成画像に合体し得るような機材が必要である。
【課題を解決するための手段】
【０００５】
以下の実施形態とその特徴は、模範的と例示的であることを意味し、範囲を限定しない方法で記載と例示されている。様々な実施形態において、一あるいは複数の上記の問題は、軽減されるか、排除されているが、他の実施形態は、他の改良を対象にする。
【０００６】
本発明の１つの特徴は、重複画像同士を繋ぎ合わせる画像繋合方法に関する。画像繋合方法は、各々の入力画像から低周波帯副画像を得ることと、各々の入力画像から高周波帯副画像を得ることとを備える。更に画像繋合方法は、低周波帯副画像同士をブレンドすることによって低周波帯合成画像を作り出すことと、高周波帯出力合成画像を作り出すべく接合位置で高周波帯副画像同士を接合することによって高周波帯副画像を合体することと、低周波帯出力合成画像と高周波帯合成画像を合体することによって全帯域出力合成画像を作り出すこととを備える。
【０００７】
本発明の別の特徴は、重複画像同士を繋ぎ合わせる画像繋合装置に関する。画像繋合装置は、第１画像ブレンドプロセッサ、画像接合プロセッサ、および画像マージャを備える。画像マージャは、画像ブレンドプロセッサと画像接合プロセッサにそれぞれ連結される。
【０００８】
模範的実施形態は、添付図面において例示される。本明細書において開示される実施形態と図面は、例示であり、制限するものではない。
以下の説明を通して詳細情報は、本発明をより深く理解するために示される。しかし本発明は、これらの詳細なしで実行され得る。他の例において、周知の要素は、本発明を不必要に曖昧にしないように詳細に示されていないか、記載されていない。従って明細書と図面は、制限よりはむしろ例示的な意味で見なされるべきである。
【０００９】
本明細書において記載された本発明の幾つかの実施形態に従う装置と方法は、１つの入力画像の低空間周波数成分を、別の入力画像の低空間周波数成分とブレンドし、更に入力画像の特徴と一致させるべく選択された位置で、入力画像同士の高空間周波数成分を不連続的に継ぎ合わす。低空間周波数成分同士は、顕著なアーチファクトを発生させることなく、滑らかにブレンドされ得る。高空間周波数成分同士は、走査線のエッジ特徴に最も近い各々の走査線上の接合位置で、重複領域の各々の複数走査線に沿って継ぎ合わされ得る。
【００１０】
本発明の１つの特徴は、画像を繋ぎ合わせる画像繋合方法に関する。以下の例示的説明において、方法例は、視野が共通の副視野を共有する２つの重複入力画像に適用されるように記載されているが、当然のことながら本発明の実施形態に従う方法は、任意数の入力画像を合体するためにも用いられ得る。共通の副視野を描写する各々の画像の一部は、重複領域と称され得る。各々の画像における重複領域は、他の画像の重複領域における点に対応する複数の点を含む。一方の画像の重複領域における点と他方の画像の重複領域における対応する点は、集合的に対応点と称され得る。
【図面の簡単な説明】
【００１１】
【図１】図１ａ〜図１ｃは、互いに共通の副視野を共有する重複入力画像と出力合成画像。
【図２】図２ａ〜図２ｄは、それぞれ入力画像によって共有される重複領域例の走査線。
【図３】本発明の実施形態例に従う方法を例示するフローチャート。
【図４】図４ａ〜図４ｃは、それぞれ非方形の出力合成画像。
【図５】画像の接合例を例示するデータフロー線図。
【図６】図６ａ〜図６ｃは、出力副画像走査線を作り出すべく接合された２つの副画像走査線。
【図７】本発明の一実施形態に従う、画像接合装置のブロック線図。
【図８】本発明の別の実施形態に従う、画像接合装置のブロック線図。
【発明を実施するための形態】
【００１２】
図１ａと図１ｂは、それぞれ第１入力領域１１ａと第２入力領域１１ｂとして描写される共通の副視野を共有する、第１入力画像１０ａと第２入力画像１０ｂを示す。図１ｃは、本明細書において記載されるような方法を、第１入力画像１０ａと第２入力画像１０ｂに適用することによって得られる合成画像１０ｃを示す。合成画像１０ｃは、重複領域１１ｃとして描写される共通の副視野を含む。本発明の実施形態に従う方法は、画像の何れもが、他の画像のうちの少なくとも１つと重複領域を共有する限りにおいて、任意数の画像の繋ぎ合わせに適用され得る。
【００１３】
図２ａ〜図２ｄは、それぞれ重複領域例１１１ａ〜１１１ｄを示す。各々の重複領域１１１は、複数のピクセルを備え、各々のピクセルは、第１入力画像由来の第１ピクセル値と、それに関連する第２入力画像由来の第２ピクセル値とを備える。各々の重複領域１１１は、第１境界線１２３と第２境界線１２４の間に区画形成されると共に、複数の走査線によって分割され得る。走査線例１２１ａ〜１２１ｄは、それぞれ図２ａ〜図２ｄにおいて陰線で示す。図２ａに示す重複領域例１１１ａの走査線は、互いに平行な第１境界線１２３ａと第２境界線１２４ａに対して、全般的に垂直に規定される。
【００１４】
幾つかの状況において入力画像は、重複領域の境界線同士が互いに平行にはならないように方向付けられ得る。そのような状況において入力画像は、重複領域の境界線同士が互いに平行になるように、回転関数によってトリミングと処理のうちの少なくとも一方が行
われ得るが、これは全ての実施形態には必ずしも必要ない。
【００１５】
図２ｂ〜図２ｄに示す実施例において、入力画像は、重複領域１１１ｂ〜１１１ｄそれぞれの第１境界線１２３ｂ〜１２３ｄと第２境界線１２４ｂ〜１２４ｄが互いに平行ではないように方向付けられる。たとえば図２ｂの重複領域１２１ｂの走査線は、第１境界線１２３ｂに全般的に垂直に規定され、図２ｃの重複領域１２１ｃの走査線は、第２境界線１２４ｃに全般的に垂直に規定され、図２ｄの重複領域１２１ｄの走査線は、第１境界線１２３ｄと第２境界線１２４ｄの両方に対して斜角に規定される。
【００１６】
幾つかの状況において入力画像は、互いに異なる露出量レベルを占めるように正規化され得る。たとえば実施形態によっては、入力画像は、入力画像に関連する露出量情報に基づき正規化され得る。別または付加的に正規化は、平均露出量を算出し、更に重複領域の露出量レベルを正規化することによって達成され得る。
【００１７】
図３は、第１入力画像１０ａと第２入力画像１０ｂを繋ぎ合わせる画像繋合方法２０の例を示す。画像繋合方法２０は、公知の技術を用いて得られ得る画像対応データに従って、第１入力画像１０ａと第２入力画像１０ｂを整列することを含み得る。幾つかの実施形態において画像繋合方法２０は、画像間の対応点対に従って、入力画像を整列することを含む。対応点対は、手動によって選択され得るか、たとえばルーカス・カナデ・モーション推定法（Ｌｕｃａｓ ａｎｄ Ｋａｎａｄｅ ｍｏｔｉｏｎ ｅｓｔｉｍａｔｉｏｎ）、または最適走査線特徴マッチングなどの公知の技法を用いることによって、自動的に生成され得る。一般的に重複領域における単一の特徴適合が、入力画像の整列に十分である。
【００１８】
ブロックＳ２２において、画像繋合方法２０は、第１入力画像１０ａと第２入力画像１０ｂから、第１低周波帯副画像と第２低周波帯副画像を得る。第１低周波帯副画像と第２低周波帯副画像は各々、第１低周波帯副画像と第２低周波帯副画像の両方によって共有される共通の副視野によって区画形成される重複領域の少なくとも一部を備える。実施形態によっては、低周波帯副画像は、低周波数空間フィルタによって入力画像をフィルタリングすることによって得られる。低周波帯副画像は、入力画像の解像度よりも低い解像度を有し得る。１つの特定実施形態において低周波帯副画像は、入力画像解像度の１６分の１に等しい解像度を備える。
【００１９】
ブロックＳ２４において、画像繋合方法２０は、第１入力画像１０ａと第２入力画像１０ｂから、第１高周波帯副画像と第２高周波帯副画像を得る。第１高周波帯副画像と第２高周波帯副画像はまた各々、第１入力画像１０ａと第２入力画像１０ｂの両方によって共有される共通の副視野によって区画形成される重複領域の少なくとも一部を含む。実施形態によっては、高周波帯副画像は、高周波数空間フィルタで入力画像をフィルタリングすることによって得られる。１つの特定実施形態において高周波帯副画像は、入力画像の解像度に等しい解像度を備える。
【００２０】
ブロックＳ２６において、画像繋合方法２０は、低周波帯出力副画像を作り出すべく、第１低周波帯副画像と第２低周波帯副画像をブレンドする。第１低周波帯副画像と第２低周波帯副画像のブレンドは、一または複数の走査線に沿って進行し得る。一実施形態においてブレンドは、正弦波融合関数を用いることによって、低周波帯出力副画像を作り出すことを備える。たとえば指数融合関数、または一次融合関数などの他の適切な融合関数もまた、用いられ得る。
【００２１】
第１低周波帯副画像と第２低周波帯副画像のブレンドは、第１入力画像１０ａと第２入力画像１０ｂの露出量が互いに異なる場合、マッハバンド・アーチファクトＭａｃｈ ｂ
ａｎｄ ａｒｔｉｆａｃｔｓの出現を減らす。第１入力画像１０ａと第２入力画像１０ｂ
の間の露出量の差によって生じるマッハバンド・アーチファクトの出現を更に最小限に抑えるため、画像繋合方法２０は更に、共有重複領域の一部または全部に基づき、複数の副画像を正規化する段階を備える。
【００２２】
ブロックＳ２８において、画像繋合方法２０は、高周波帯出力副画像を作り出すべく、第１高周波帯副画像と第２高周波帯副画像を接合する。第１高周波帯副画像と第２高周波帯副画像の接合は、一あるいは複数の走査線に沿って進行し得る。例示実施形態の以下の説明において、本発明は、複数の走査線を逐次的または同時に接合することによって実施され得るが、接合は、単一の走査線について記載される。
【００２３】
接合は、入力として第１高周波帯副画像と第２高周波帯副画像からそれぞれ第１走査線と第２走査線を採用し、出力として合成走査線を生成する。各々の第１走査線と第２走査線のうちの一部は、その対応する高周波帯副画像の重複領域由来である。接合において第１入力走査線由来のピクセル値は、重複領域の第１境界線と、接合位置との間の出力走査線の第１側のピクセルに割当てられ、第２入力走査線由来のピクセル値は、接合位置と、重複領域の第２境界線との間の出力走査線の第２側のピクセルに割当てられる。
【００２４】
出力走査線の接合位置は、第１入力走査線と第２入力走査線におけるエッジ特徴に基づき選択され得る。走査線におけるエッジ特徴の位置は、公知の算法を用いることによって得られ得る。一実施形態において、エッジ特徴は、ピクセルインタフェースに隣接するピクセル間の強度の差が閾値を超えるピクセルインタフェースで同定される。他の実施形態は、勾配ラプラスまたはソーベル法を用いることによってエッジ特徴を同定し得る。
【００２５】
出力走査線の接合位置は、たとえば第１入力走査線と第２入力走査線の両方に共通するエッジ特徴に対応するピクセルインタフェースを含み得る。出力走査線が、共通エッジ特徴に対応する１つのピクセルインタフェースのみを含む場合、そのピクセルインタフェースは、その走査線の接合位置として選択され得る。出力走査線が、共通エッジ特徴に対応する複数のピクセルインタフェースを含む場合、接合位置としての特定ピクセルインタフェースの選択は、以下の因子：
ｉ）ピクセルインタフェースを含むエッジ特徴の強度勾配；
ｉｉ）ピクセルインタフェースに対応するエッジ特徴が、隣接する走査線に存在するか否か；
ｉｉｉ）ピクセルインタフェースに対応するエッジ特徴を含む副画像における走査線数；
ｉｖ）複数の適切なピクセルインタフェース間のランダム選択
のうちの１つか、その組み合わせに従って決定され得る。
【００２６】
隣接する出力走査線の接合位置は、各々の走査線で接合位置を切り換えることによって生じるアーチファクトが減少するように、幾つかの実施形態において互いの近くに選択するのが有利であり得る。実施形態によっては、共通のエッジ特徴に対応する多重ピクセルインタフェースが、現行の走査線の接合位置として選択される場合には、近くの走査線の接合位置に最も近いエッジ特徴に対応するピクセルインタフェースが、現行の走査線の接合位置として選択される。
【００２７】
幾つかの実施形態は、エッジ特徴が１つの走査線から次の走査線に連続し得る可能性、従って隣接する走査線の接合位置が互いに近い可能性を最大にすべく、たとえば走査線をスカッシングか、ストレッチングの何れかによって、走査線の長さを変化させることも含み得る。スカッシングまたはストレッチングは、任意の適当な尺度構成法を用いることによって達成され得る。走査線の長さは、たとえば幾つかの実施形態において最大１５％まで変更され得る。走査線の長さが変更される実施形態において、低周波帯出力副画像の対
応走査線の長さは、転位アーチファクトを最小限にするため、同量だけ変更され得る。また、１つの走査線の長さにおける任意の偏差は、隣接走査線の長さを変更する場合に考慮され得る。走査線の長さの変更は、入力画像が重複領域において目に見える縦線を有する状況において望まれ得る。走査線の長さは、手動または自動的に変更され得る。
【００２８】
高周波帯副画像のうちの１つの入力走査線が、エッジ特徴に対応する任意のピクセルインタフェースを含まない場合、誤ったエッジが高周波帯出力副画像において生じないように、出力走査線を得るべく接合の代わりにブレンドが用いられ得る。低周波帯副画像のブレンドにおいて記載されるように、ブレンドは、正弦波融合関数または他の適切な融合関数を用いて実施されることが可能である。
【００２９】
ブロックＳ３０において、画像繋合方法２０は、低周波帯出力副画像と高周波帯出力副画像を合体することによって、全帯域出力合成画像を作り出す。状況によっては、全帯域出力合成画像は、図１ｃに示すような方形画像を含み得る。しかし入力画像は、全帯域出力合成画像が図４ａ〜図４ｃに示すような非方形であるように、方向付けられ得る。
【００３０】
図４ａは、２つの入力画像４１と４２から生成された非方形出力画像４０を示す。図４ｂに示すように非方形出力画像４０は、方形画像を得るべく、クロップ領域４３で示すようにクロッピングされ得る。しかしクロッピングは、不都合であり得る幾つかのクロップ画像データ４４の損失が生じる。別の解決策は、図４ｃに拡大画像領域４５で示すような拡大方形画像を規定することである。画像を拡大することによって、目をそらさせ得る幾つかの空白の縁画像領域４６が生じる。
【００３１】
本発明の幾つかの実施形態において、拡大出力画像の縁画像領域は、ランダム近傍サンプリング方法ｒａｎｄｏｍ ｎｅｉｇｈｂｏｒｈｏｏｄ ｓａｍｐｌｉｎｇ ｍｅｔｈｏｄ
によって充填され得る。そのような実施形態において各々の非充填ピクセルには、非充填（宛先）ピクセルを中心とする正方形または円形の領域から入力ピクセルがランダムに選択され得る。棄却サンプリングは、充填入力ピクセルが突き止められるまで用いられ得る。各々がうまくいかない（棄却される）場合、検索領域の半径が僅かに増加され得るので、最終的に充填入力ピクセルが確実に突き止められる。非充填宛先ピクセルが充填されれば、方法は、次の（通常、隣接する）非充填ピクセルに進み、僅かな前の検索半径から工程が繰返され得る。これによって、サンプリング半径が制約なしに増大しないようになるので、有効な近傍ピクセルを見つけるべく検索半径を平均して良好なサイズに維持する。最終的に縁画像領域、その色と特徴が最も近くの有効ピクセルに一致するピクセルを有するが、外観は「スノーイ」（ｓｎｏｗｙ。雪状に白い）である。
【００３２】
図５は、上記の方法の例示実施形態を示す。互いに隣接する第１入力画像２１０ａと第２入力画像２１０ｂは、それぞれ第１画像領域２１１ａと第２画像領域２１１ｂによって捕らえられる共通の副視野を共有する。第１入力画像２１０ａと第２入力画像２１０ｂは、第１高周波帯副画像Ｈ−２１０ａと第２高周波帯副画像Ｈ−２１０ｂを得るべく、第１高域フィルタ２１２ａと第２高域フィルタ２１２ｂに入力される。第１入力画像２１０ａと第２入力画像２１０ｂは、第１低周波帯副画像Ｌ−２１０ａと第２低周波帯副画像Ｌ−２１０ｂを得るべく、第１低域フィルタ２１３ａと第２低域フィルタ２１３ｂにも入力される。第１高周波帯副画像Ｈ−２１０ａと第２高周波帯副画像Ｈ−２１０ｂは、接合器２１４によって合体される。第１低周波帯副画像Ｌ−２１０ａと第２低周波帯副画像Ｌ−２１０ｂは、ブレンド器２１５によって合体される。高周波帯接合出力Ｈ−２１０ｃと低周波帯ブレンド出力Ｌ−２１０ｃは、重複領域２１１ｃによって描写される共通の副視野を含む全帯域出力画像２１０ｃを作り出すべくマージすることによって、加算器２１６で合体される。高周波帯接合出力Ｈ−２１０ｃと低周波帯ブレンド出力Ｌ−２１０ｃのマージングは、出力が加算される場合に生じ得る負の数と丸め誤差を回避するため、たとえば高
周波帯接合出力Ｈ−２１０ｃと低周波帯ブレンド出力Ｌ−２１０ｃの増倍を含み得る。
【００３３】
図６ａ、図６ｂおよび図６ｃは、走査線に適用された上記の接合の例示実施形態を示す。図６ａと図６ｂは、それぞれ第１入力走査線３３０ａと第２入力走査線３３０ｂ、および各々の走査線に沿ったピクセル値の第１対応グラフ３４０Ａと第２対応グラフ３４０ｂを示す。第１入力走査線３３０ａは、第１境界線３３１を越え、重複領域３３２を横切って第２境界線３３３まで延びる。第２入力走査線３３０ｂは、第１境界線３３１から重複領域３３２を横切って、第２境界線３３３の先まで延びる。第１入力走査線３３０ａと第２入力走査線３３０ｂは、それぞれ共通のエッジ特徴３３５ａ，３３５ｂに対応するそれぞれ第１ピクセルインタフェース３３４ａと第２ピクセルインタフェース３３４ｂを含む。例示実施例において、第１ピクセルインタフェース３３４ａと第２ピクセルインタフェース３３４ｂは、エッジ特徴に対応するものとして検出される各々の走査線における唯一のピクセルインタフェースなので、第１ピクセルインタフェース３３４ａと第２ピクセルインタフェース３３４ｂの位置は、接合位置として選択される。
【００３４】
図６ｃは、第１入力走査線３３０ａと第２入力走査線３３０ｂを接合することによって生じる出力合成走査線３３０ｃを示す。出力合成走査線３３０ｃは、ピクセルインタフェース３３４ｃで接合位置周囲の第１入力走査線３３０ａと第２入力走査線３３０ｂを接合することから生じる。第１走査線３３０ａ由来のピクセル値は、ピクセルインタフェース３３４ｃよりも左方の出力合成走査線３３０ｃの一部に用いられ、第２走査線３３０ｂ由来のピクセル値は、ピクセルインタフェース３３４ｃよりも右方の出力合成走査線３３０ｃの一部に用いられる。従って、出力合成走査線３３０ｃに沿ったピクセル値のグラフ３４０ｃに示すように、エッジ特徴３３５ｃよりも左方の接合出力は、第１対応グラフ３４０Ａに対応し、エッジ特徴３３５ｃよりも右方の接合出力は、第２対応グラフ３４０ｂに対応する。
【００３５】
本発明の別の特徴は、合成または「繋ぎ合わされた」画像を形成すべく画像を繋ぎ合わせる画像繋合装置を提供する。画像繋合装置の機能要素は、一あるいは複数のデータプロセッサ（マイクロプロセッサ、画像プロセッサ、その他を含み得る）で実行するソフトウエアとハードウエア要素のうちの少なくとも一方によって提供され得る。図７は、実施形態例に従う画像繋合装置５０を示す。画像繋合装置５０は、画像マージャ５６に両方が連結される走査線接合プロセッサ５２と第１走査線ブレンドプロセッサ５４を備える。高周波帯副画像、画像対応データ、および画像エッジ位置データは、第１走査線接合プロセッサ５２に入力される。低周波帯副画像と画像対応データは、第１走査線ブレンドプロセッサ５４に入力される。画像繋合装置５０は、高周波帯副画像と画像対応データが入力される第２走査線ブレンドプロセッサを備え得る。画像繋合装置５０は、入力画像から高周波帯副画像を得るべく走査線接合プロセッサ５２に連結される高域画像フィルタも備え得る。画像繋合装置５０は、入力画像から低周波帯副画像を得るべく第１走査線ブレンドプロセッサに連結される低域画像フィルタを更に含み得る。画像繋合装置５０は、第１走査線ブレンドプロセッサ、第２走査線ブレンドプロセッサまたは走査線接合プロセッサ５２のうちの１つか組合せに入力されるべき画像対応データを生成する画像整列検出器を更に備え得る。画像繋合装置５０は更に、走査線接合プロセッサ５２に入力すべくエッジ特徴に対応するピクセルインタフェースを捜し出すエッジ特徴検出器を備え得る。
【００３６】
図８は、本発明の別の実施形態に従う画像繋合装置４４０を示す。画像繋合装置４４０は、走査線接合プロセッサＨ−４４１、低域走査線ブレンドプロセッサＬ−４４２、および高域走査線ブレンドプロセッサＨ−４４２を備える。高域画像フィルタＨ−４４３は、走査線接合プロセッサＨ−４４１と高域走査線ブレンドプロセッサＨ−４４２にそれぞれ入力される高周波帯副画像Ｈ−４５０を得るべく、入力画像４５０をフィルタにかける。低域画像フィルタＬ−４４３は、低域走査線ブレンドプロセッサＬ−４４２に入力される
低周波帯副画像Ｌ−４５０を得るべく、入力画像４５０をフィルタにかける。エッジ特徴検出器４４５は、入力画像４５０におけるエッジ特徴に対応するピクセルインタフェースを突き止めると共に、ピクセルインタフェースエッジデータ４５５を接合位置選択装置４４６に転送する。接合位置選択装置４４６は、走査線接合プロセッサＨ−４４１と高域走査線ブレンドプロセッサＨ−４４２に連結される。画像整列検出器４４４は、接合位置選択装置４４６、低域走査線ブレンドプロセッサＬ−４４２、および高域走査線ブレンドプロセッサＨ−４４２に入力される画像対応データ４５４を生成する。高周波数帯接合出力画像Ｈ−４５１Ｓ、高周波帯ブレンド出力画像Ｈ−４５１Ｂ、および低周波帯ブレンド出力画像Ｌ−４５１Ｂは、全帯域合成画像４５１を出力する画像マージャ４４７で合体する。
【００３７】
当業者には明らかになり得るように、前述の開示物の観点から、多くの変更と修正は、この発明の実施に際してその趣旨と範囲を逸脱しなければ可能である。従って本発明の範囲は、以下の請求項によって規定される内容に従って解釈されるものとする。当業者は、特定の修正、置換、追加、およびその部分組合せを認めるだろう。従って以下の添付請求項と今後に導入される請求項は、その真の趣旨と範囲内にあるとして、そのような修正、置換、追加、および部分組合せを含むと解釈するように意図される。
【図１ａ】
2010512696.tif 000003
【図１ｂ】
2010512696.tif 000004
【図１ｃ】
2010512696.tif 000005
【図２ａ】
2010512696.tif 000006
【図２ｂ】
2010512696.tif 000007
【図２ｃ】
2010512696.tif 000008
【図２ｄ】
2010512696.tif 000009
【図３】
2010512696.tif 000010
【図４ａ】
2010512696.tif 000011
【図４ｂ】
2010512696.tif 000012
【図４ｃ】
2010512696.tif 000013
【図５】
2010512696.tif 000014
【図６ａ】
2010512696.tif 000015
【図６ｂ】
2010512696.tif 000016
【図６ｃ】
2010512696.tif 000017
【図７】
2010512696.tif 000018
【図８】
2010512696.tif 000019
【国際調査報告】
2010512696.tif 000020
2010512696.tif 000021
2010512696.tif 000022