(57)【要約】  ノイズが低減されたディジタルカラー画像を生成する方法であって、パンクロマチックマチック画素および少なくとも２つのカラー光応答に対応するカラー画素を有する画像を提供すること；前記画像からパンクロマチック画像および少なくとも１つのカラー画像を提供すること；および前記パンクロマチック画像およびカラー画像を使用して、ノイズが低減されたディジタルカラー画像を生成することを含む方法。
2010509841.tif 000002
【特許請求の範囲】
【請求項１】
ノイズが低減されたディジタルカラー画像を生成する方法であって、
（ａ）パンクロマチック画素および少なくとも２つのカラー光応答に対応するカラー画素を有する画像を提供するステップ；
（ｂ）前記画像からパンクロマチック画像および少なくとも１つのカラー画像を提供するステップ；および
（ｃ）前記パンクロマチック画像およびカラー画像を使用して、ノイズが低減されたディジタルカラー画像を生成するステップ；
を含む方法。
【請求項２】
ステップａ）が、レッド、グリーンおよびブルーの感光性を有するカラー画素を含む、請求項１に記載の方法。
【請求項３】
ステップａ）が、シアン、マゼンタおよびイエローの感光性を有するカラー画素を含む、請求項１に記載の方法。
【請求項４】
ノイズが低減されたディジタルカラー画像を生成する方法であって、
（ａ）パンクロマチック画素および少なくとも２つのカラー光応答に対応するカラー画素を有する画像を提供するステップ；
（ｂ）前記画像からパンクロマチック画像および少なくとも１つのカラー画像を提供するステップ；および
（ｃ）近隣のパンクロマチック画素の値を使用して、各カラー画素に対応するパンクロマチック値を生成させ、次いで、計算されたパンクロマチック画素値および近隣の同じカラー画素の値を使用して、ノイズが低減されたカラー画素を生成させ、このステップを各カラー画素に対して繰り返して、ノイズが低減されたディジタルカラー画像を生成するステップ；
を含む方法。
【請求項５】
ステップｃ）が、ｉ）カラーノイズが低減された画素を補間して補間カラー画素を生成することによりノイズが低減されたディジタルカラー画像をもたらすことをさらに含む、請求項４に記載の方法。
【請求項６】
フルカラー補間画像に対してさらにノイズ低減をもたらして、ノイズが低減された最終的なディジタルカラー画像を生成することをさらに含む、請求項５に記載の方法。
【請求項７】
ステップｉ）の前に、補間パンクロマチック値を含む全てのパンクロマチック値のノイズを低減させて、ノイズが低減されたパンクロマチック画像を生成することをさらに含む、請求項５に記載の方法。
【請求項８】
フルカラー補間画像に対してさらなるノイズ低減をもたらして、ノイズが低減された最終的なディジタルカラー画像を生成することをさらに含む、請求項７に記載の方法。
【請求項９】
ステップａ）が、レッド、グリーンおよびブルーの感光性を有するカラー画素を含む、請求項４に記載の方法。
【請求項１０】
ステップａ）が、シアン、マゼンタおよびイエローの感光性を有するカラー画素を含む、請求項４に記載の方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、概して、パンクロマチック画素およびカラー画素を有する画像からフルカラーのノイズが低減されたフル解像度画像を生成するディジタル画像処理操作の分野に関する。
【背景技術】
【０００２】
最も一般的でしばしば必須とされる画像処理操作の１つはノイズの低減である。ノイズの低減は、特に、不十分な照明条件下で捕捉されたであろうディジタルスチルカメラ画像およびディジタルビデオカメラ画像に当てはまる。最適な照明条件に満たない条件下でのディジタル画像キャプチャに対処する１つの方法は、低いまたは不十分なシーン照明に対して特に感受性の高い１または２以上のカラーチャネルを得るか合成することである。高い感光性を有するチャネルから得られたデータは、付随する標準カラーチャネルに由来するデータのその後の画像処理を支援するために一般的に使用される。ノイズの低減は、この付加的な画像データから利点を得るための主要な候補である。多数の例が文献にある。米国特許第６，６４６，２４６号（Ｇｉｎｄｅｌｅら）には、低速および高速画素を有する拡張ダイナミックレンジカラーフィルターアレイ（ＣＦＡ）パターンを使用すること、低速画素データのみを使用して低速画素データをノイズ除去すること、および高速画素データのみを使用して高速画素データをノイズ除去することが教示されている。この方法では、各カラーチャネルが高速チャネルおよび低速チャネルに細分されるために画像解像度を犠牲にしてノイズの低減が達成され、その後の合併により、対処しようとしている原ノイズよりも問題のある画像処理アーチファクトを生じうる。米国特許第７，０６５，２４６号（Ｘｉａｏｍａｎｇら）は、直接検出したカラーチャネルデータ、この場合にはシアン、マゼンタ、イエローおよびグリーンから輝度信号を構築するという点で、多くの類似の開示された発明の代表的なものである。構築された輝度の高周波数成分は、原カラーチャネル信号の高周波数成分を置き換えて画像データの全体的なノイズ低減をもたらすために使用される。幾分効果的であるが、この方法の主な不都合な点は、合成される輝度チャネルがノイズの多いカラーチャネルから構築され、本質的に等しいノイズの多い合成チャネルをもたらすことである。
【０００３】
より好ましい方法が米国特許第５，２６４，０２４号（Ｃｏｋ）に提案されている。Ｃｏｋは、各画素位置でのレッド、グリーン、ブルーおよび輝度の値を直接測定することを提案している。対応するレッド、グリーンおよびブルーのデータよりも本質的にノイズが少ないようにされた高周波数輝度データを使用して上記の高周波数レッド、グリーンおよびブルーデータを置き換え、ノイズが除去されたレッド、グリーンおよびブルーの信号を生成させる。ディジタルスチルカメラおよびディジタルビデオカメラの大多数は１画素あたり１つのカラーチャネルを検出するだけのＣＦＡを備えた１つのセンサーを使用するために、かかる系ではＣｏｋの方法を直接実施することはできない。
【０００４】
ＸｉａｏｍａｎｇおよびＣｏｋは輝度信号について記載しているが、人間の視覚系の輝度チャネルに対応する測光感度を有するチャネルは不必要に限定的である。より有用な信号は、人間の視覚系の輝度チャネルにわたる全波長で高い感度を有するより一般的なパンクロマチックチャネルにより捕捉できるものである。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】米国特許第６，６４６，２４６号明細書
【特許文献２】米国特許第７，０６５，２４６号明細書
【特許文献３】米国特許第５，２６４，９２４号明細書
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明の目的は、パンクロマチック画素およびカラー画素を有するディジタル画像からノイズが低減されたフル解像度のフルカラー画像を生成することである。
【課題を解決するための手段】
【０００７】
この目的は、ノイズが低減されたディジタルカラー画像を生成する方法であって、
（ａ）パンクロマチック画素および少なくとも２つのカラー光応答に対応するカラー画素を有する画像を提供するステップ；
（ｂ）前記画像からパンクロマチック画像および少なくとも１つのカラー画像を提供するステップ；および
（ｃ）前記パンクロマチック画像およびカラー画像を使用して、ノイズが低減されたディジタルカラー画像を生成するステップ；
を含む方法により達成される。
本発明の１つの特徴は、パンクロマチック画素およびカラー画素を有するセンサーにより低照明条件下で画像を捕捉でき、処理によってパンクロマチック画素およびカラー画素から生じたフルカラー画像におけるノイズを低減することである。
【図面の簡単な説明】
【０００８】
【図１】図１は、本発明を実施するための、ディジタルカメラを含むコンピュータシステムの概略図である。
【図２】図２は、本発明の好ましい一実施態様のブロック図である。
【図３】図３は、本発明の別の一実施態様のブロック図である。
【図４】図４は、本発明の別の一実施態様のブロック図である。
【図５】図５は、本発明の別の一実施態様のブロック図である。
【図６】図６は、図２のブロック２０２において使用される画素の領域である。
【図７】図７は、図２のブロック２０６において使用される画素の領域である。
【図８】図８は、図３のブロック２１０において使用される画素の領域である。
【図９】図６は、図４のブロック２０４において使用される画素の領域である。
【発明を実施するための形態】
【０００９】
以下の説明では、通常はソフトウェアプログラムとして実現であろうものによって、本発明の好ましい一実施態様を説明する。当業者は、かかるソフトウェアの等価物もハードウェア中に構成できることを容易に理解するであろう。画像操作のアルゴリズムおよびシステムは公知であるため、ここでの説明は、特に、本発明に係るシステムおよび方法の部分を構成する、あるいは、本発明に係るシステムおよび方法とより直接的に協働するアルゴリズムおよびシステムに対して行うことにする。かかるアルゴリズムおよびシステムの別の側面、並びにそれに関連する画像信号を生成させるためやその他の処理のためのハードウェアおよびソフトウェアは、本明細書に具体的に提示または記載していないが、当該技術分野で知られているかかるシステム、アルゴリズム、成分および要素から選択することができる。以下の材料で本発明に係るシステムを仮定した場合に、本明細書に具体的に提示、提案または記載していないが、本発明の実施に有用なソフトウェアは、従来からある一般的なものであり、当業者の知識の範囲内である。
【００１０】
さらに、本明細書では、コンピュータプログラムは、コンピュータの読み取り可能な記憶媒体に記憶させることができる。コンピュータの読み取り可能な記憶媒体としては、例えば、磁気記憶媒体、例えば磁気ディスク（ハードドライブやフロッピー（登録商標）ディスクなど）や磁気テープなど；光学的記憶媒体、例えば光ディスク、光テープ、機械で読み取り可能なバーコード）など；固体電子記憶装置、例えばランダムアクセスメモリ（ＲＡＭ）、読み出し専用メモリ（ＲＯＭ）など；またはコンピュータプログラムの記憶に用いられる他の任意の物理的な装置または媒体などがある。
【００１１】
本発明を説明する前に、よく知られた任意のコンピュータシステム（例えばパーソナルコンピュータ）で本発明が利用できることに留意すると、本発明の理解が容易になる。従って、本明細書では、コンピュータシステムについては詳細に説明しない。画像は、コンピュータシステムに直接入力（例えばディジタルカメラによって）されるか、あるいは、コンピュータシステムに入力される前にディジタル化（例えばハロゲン化銀フィルムなどのオリジナルを走査することによって）されることに留意することも有益である。
【００１２】
図1を参照すると、本発明を実施するためのコンピュータシステム１１０が示されている。コンピュータシステム１１０は好ましい一実施態様を説明するために示しているが、本発明は、図示したコンピュータシステム１１０に限定されることはなく、家庭用コンピュータ、キオスク、リテールまたは大規模な写真仕上げなどで見られる電子処理システムや、ディジタル画像を処理するための他の任意のシステムで使用できる。コンピュータシステム１１０は、ソフトウェアプログラムを格納してそのソフトウェアプログラムによる処理を行なうため、および、他の処理機能を実行するためのマイクロプロセッサをベースとしたユニット１１２を備える。ディスプレイ１１４は、例えばグラフィカルユーザーインターフェイスによって、そのソフトウェアに関係するユーザー関連情報を表示するために、マイクロプロセッサをベースとしたユニット１１２に電気的に接続されている。ユーザーがソフトウェアに情報を入力することができるように、キーボード１１６もマイクロプロセッサをベースとしたユニット１１２に接続されている。当該技術分野でよく知られているように、入力にキーボード１１６を使用する代わりにマウス１１８を用いてディスプレイ１１４上のセレクタ１２０を移動させ、そのセレクタ１２０を重ね合わせたアイテムを選択することもできる。
【００１３】
ソフトウェアプログラムおよび他の情報を入力する手段をマイクロプロセッサをベースとしたユニット１１２に備えるために、コンパクトディスク−読み出し専用メモリ（ＣＤ−ＲＯＭ）１２４（典型的にはその中にソフトウェアプログラムが格納されている）をマイクロプロセッサをベースとしたユニット１１２に挿入する。さらに、フロッピー（登録商標）ディスク１２６がソフトウェアプログラムを格納することもでき、その場合にはソフトウェアプログラムを入力するためのマイクロプロセッサをベースとしたユニット１１２にフロッピー（登録商標）ディスクを挿入する。代わりに、コンパクトディスク−読み出し専用メモリー（ＣＤ−ＲＯＭ）１２４またはフロッピー（登録商標）ディスク１２６は、マイクロプロセッサをベースとしたユニット１１２に接続された外付けディスクドライブユニット１２２に挿入することもできる。さらに、当該技術分野でよく知られているようにマイクロプロセッサをベースとしたユニット１１２にプログラムしてソフトウェアプログラムを内部的に記憶させることもできる。マイクロプロセッサをベースとしたユニット１１２は、外部ネットワーク（例えばローカルエリアネットワークやインターネット）へのネットワーク接続１２７（例えば電話線）も備えることができる。コンピュータシステム１１０からの出力のハードコピーをプリントするために、マイクロプロセッサをベースとしたユニット１１２にプリンタ１２８を接続することもできる。
【００１４】
画像は、電子的な形態のディジタル化画像を収容しているパーソナルコンピュータカード（ＰＣカード）１３０（例えば以前から知られているＰＣＭＣＩＡカード（パーソナルコンピュータメモリカード国際協会の仕様に基づく））を通じてディスプレイ１１４に表示することもできる。ディスプレイ１１４上に画像を視覚的に表示することができるように、ＰＣカード１３０は最終的にマイクロプロセッサをベースとしたユニット１１２に挿入される。あるいは、ＰＣカード１３０は、マイクロプロセッサをベースとしたユニット１１２に接続された外付けＰＣカード読取機１３２に挿入することもできる。画像は、コンパクトディスク１２４、フロッピー（登録商標）ディスク１２６、またはネットワーク接続１２７を通じて入力することもできる。ＰＣカード１３０、フロッピー（登録商標）ディスク１２６もしくはコンパクトディスク１２４のいずれかに記憶されたいかなる画像、またはネットワーク接続１２７を通じて入力されるいかなる画像も、さまざまな供給源（例えばディジタルカメラ（図示せず）またはスキャナー（図示せず））から得られたものであることができる。画像は、マイクロプロセッサをベースとしたユニット１１２に接続されたカメラドッキングポート１３６を通じてディジタルカメラ１３４から直接入力でき、またはケーブル接続１３８を通じてディジタルカメラ１３４からマイクロプロセッサをベースとしたユニット１１２に直接入力でき、あるいは無線接続１４０を通じてマイクロプロセッサをベースとしたユニット１１２に入力できる。
【００１５】
本発明によれば、希薄な画像（sparsely populated images）を補間するために、アルゴリズムをこれまでに述べた記憶装置のいずれかに記憶させ、画像に適用することができる。
【００１６】
図２は、好ましい一実施態様の高レベル図である。ディジタルカメラ１３４は、ディジタルのレッド−グリーン−ブルー−パンクロマチック（ＲＧＢＰ）カラーフィルタアレイ（ＣＦＡ）原画像２００（ディジタルＲＧＢＰ  ＣＦＡ画像またはＲＧＢＰ  ＣＦＡ画像ともいう）の生成に関わる。以下の説明では、この時点で、レッド−グリーン−ブルー−パンクロマチックの代わりに他のカラーチャネルの組合せ、例えばシアン−マゼンタ−イエロー−パンクロマチックなどを使用できることを注記しておく。重要な事項はパンクロマチックチャネルを含むということである。この画像は、まばらにサンプリングされた画像（sparsely sampled image）と見なされる。なぜなら、当該画像中の各画素が、レッド、グリーン、ブルーまたはパンクロマチックのデータのうちの１つの画素値のみを含むからである。パンクロマチック画像補間ブロック２０２は、フル解像度パンクロマチック画像２０４を生成する。画像処理チェーンのこの時点で、各カラー画素位置は、パンクロマチック値と、レッド、グリーンまたはブルー値のいずれかと関連付けられている。フル解像度パンクロマチック画像の助けによって、レッド、グリーンおよびブルーの画素値と関連付けられたノイズをＲＧＢ  ＣＦＡ画像ノイズ低減ブロック２１０において低減して、ノイズ低減ＲＧＢ  ＣＦＡ画像２１２を生成させる。その後、ＲＧＢ  ＣＦＡ画像補間ブロック２１４は、ノイズ低減フル解像度フルカラー画像２２６を生成する。
【００１７】
図３は、第２の好ましい実施態様の高レベル図である。ディジタルカメラ１３４は、ディジタルのレッド−グリーン−ブルー−パンクロマチック（ＲＧＢＰ）カラーフィルタアレイ（ＣＦＡ）原画像２００（ディジタルＲＧＢＰ  ＣＦＡ画像またはＲＧＢＰ  ＣＦＡ画像ともいう）の生成に関わる。以下の説明では、この時点で、レッド−グリーン−ブルー−パンクロマチックの代わりに他のカラーチャネルの組合せ、例えばシアン−マゼンタ−イエロー−パンクロマチックなどを使用できることを注記しておく。重要な事項はパンクロマチックチャネルを含むということである。この画像は、まばらにサンプリングされた画像と見なされる。なぜなら、当該画像中の各画素が、レッド、グリーン、ブルーまたはパンクロマチックデータのうちの１つの画素値のみを含むからである。パンクロマチック画像補間ブロック２０２は、フル解像度パンクロマチック画像２０４を生成する。画像処理チェーンのこの時点で、各カラー画素位置は、パンクロマチック値と、レッド、グリーンまたはブルー値のいずれかと関連付けられている。フル解像度パンクロマチック画像の助けによって、レッド、グリーンまたはブルーの画素値と関連付けられたノイズをＲＧＢ  ＣＦＡ画像ノイズ低減ブロック２１０において低減して、ノイズ低減ＲＧＢ  ＣＦＡ画像２１２を生成させる。その後、ＲＧＢ  ＣＦＡ画像補間ブロック２１４は、ノイズ低減フル解像度フルカラー画像２１６を生成する。最後に、フル解像度フルカラーノイズ低減ブロック２１８は、最終的なノイズ低減フル解像度フルカラー画像ブロック２２４を生成する。
【００１８】
図４は、好ましい一実施態様の高レベル図である。ディジタルカメラ１３４は、ディジタルのレッド−グリーン−ブルー−パンクロマチック（ＲＧＢＰ）カラーフィルタアレイ（ＣＦＡ）原画像２００（ディジタルＲＧＢＰ  ＣＦＡ画像またはＲＧＢＰ  ＣＦＡ画像ともいう）の生成に関わる。以下の説明では、この時点で、レッド−グリーン−ブルー−パンクロマチックの代わりに他のカラーチャネルの組合せ、例えばシアン−マゼンタ−イエロー−パンクロマチックなどを使用できることを注記しておく。重要な事項はパンクロマチックチャネルを含むということである。この画像は、まばらにサンプリングされた画像と見なされる。なぜなら、当該画像中の各画素が、レッド、グリーン、ブルーまたはパンクロマチックデータのうちの１つの画素値のみを含むからである。パンクロマチック画像補間ブロック２０２は、フル解像度パンクロマチック画像２０４を生成する。画像処理チェーンのこの時点で、各カラー画素位置は、パンクロマチック値と、レッド、グリーンまたはブルー値のいずれかと関連付けられている。次に、フル解像度パンクロマチック画像ノイズ低減ブロック２０６は、ノイズ低減フル解像度パンクロマチック画像２０８を生成する。ノイズ低減フル解像度パンクロマチック画像の助けによって、レッド、グリーンまたはブルーの画素値と関連付けられたノイズをＲＧＢ  ＣＦＡ画像ノイズ低減ブロック２１０において低減して、ノイズ低減ＲＧＢ  ＣＦＡ画像２１２を生成させる。その後、ＲＧＢ  ＣＦＡ画像補間ブロック２１４は、ノイズ低減フル解像度フルカラー画像２２２を生成する。
【００１９】
図５は、好ましい一実施態様の高レベル図である。ディジタルカメラ１３４は、ディジタルのレッド−グリーン−ブルー−パンクロマチック（ＲＧＢＰ）カラーフィルタアレイ（ＣＦＡ）原画像２００（ディジタルＲＧＢＰ  ＣＦＡ画像またはＲＧＢＰ  ＣＦＡ画像ともいう）の生成に関わる。以下の説明では、この時点で、レッド−グリーン−ブルー−パンクロマチックの代わりに他のカラーチャネルの組合せ、例えばシアン−マゼンタ−イエロー−パンクロマチックなどを使用できることを注記しておく。重要な事項はパンクロマチックチャネルを含むということである。この画像は、まばらにサンプリングされた画像と見なされる。なぜなら、当該画像中の各画素が、レッド、グリーン、ブルーまたはパンクロマチックのデータのうちの１つの画素値のみを含むからである。パンクロマチック画像補間ブロック２０２は、フル解像度パンクロマチック画像２０４を生成する。画像処理チェーンのこの時点で、各カラー画素位置は、パンクロマチック値と、レッド、グリーンまたはブルー値のいずれかと関連付けられている。次に、フル解像度パンクロマチック画像ノイズ低減ブロック２０６は、ノイズ低減フル解像度パンクロマチック画像２０８を生成する。ノイズ低減フル解像度パンクロマチック画像の助けによって、レッド、グリーンまたはブルーの画素値と関連付けられたノイズをＲＧＢ  ＣＦＡ画像ノイズ低減ブロック２１０において低減して、ノイズ低減ＲＧＢ  ＣＦＡ画像２１２を生成させる。その後、ＲＧＢ  ＣＦＡ画像補間ブロック２１４は、ノイズ低減フル解像度フルカラー画像２１６を生成する。最後に、フル解像度フルカラーノイズ低減ブロック２１８は、最終的なノイズ低減フル解像度フルカラー画像ブロック２２０を生成する。
【００２０】
図２に戻ると、パンクロマチック画像補間ブロック２０２は、当業者に知られている任意の適切な方法で実施することができる。２つの例を以下に示す。図６を参照すると、画素Ｘ5 のパンクロマチック値を推定する１つの方法は、単純に、周囲の６つのパンクロマチック値の平均値、すなわち、
【００２１】
【数１】
2010509841.tif 000003
【００２２】
を求めることである。あるいは、この方法において、画素値に重み付けをすることも当業者によく知られている。一例として、
【００２３】
【数２】
2010509841.tif 000004
【００２４】
がある。代わりに、まず、方向性勾配の絶対値（絶対方向性勾配（absolute directional gradients））を計算することによって、適応できる方法を使用できる。
【００２５】
【数３】
2010509841.tif 000005
【００２６】
３つの２点平均値のうちの１つによりＸ5 の値が求められる。
【００２７】
【数４】
2010509841.tif 000006
【００２８】
Ｘ5 を計算するために、絶対方向性勾配の組のうちの最小値と関連する２点平均値を使用する。例えば、Ｖ5≦Ｂ5およびＶ5≦Ｓ5である場合には、Ｘ5＝ＶＸ5である。
【００２９】
図２に戻ると、ＲＧＢ  ＣＦＡ画像ノイズ低減ブロック２１０は、ブロック２０２により生成したフル解像度のパンクロマチック画像の利点を得るのに適応できる様式で好ましくは実施される。かなり多くのかかる方法が当業者に知られているであろう。２つの例を以下に示す。図７を参照すると、各画素位置は、関連するパンクロマチック値を有する。間に存在する非レッド画素（すなわち、図７における空白の画素）の数および位置は無関係であることも注記しておく。必要なのは、同じ色の少なくとも１または２以上の近隣画素値を有する中央画素値である。また、以下の議論では、グリーンまたはブルーのカラーチャネルをクリーニングする場合には、レッドをグリーンまたはブルーに置き換える。レッド画素Ｒ5 のノイズ低減を達成するために、シグマフィルタを使用できる。これは、以下の加重平均を計算することにより達成される。
【００３０】
【数５】
2010509841.tif 000007
【００３１】
重み係数ｃ1 からｃ9 は、パンクロマチック値の差から計算される。
【００３２】
【数６】
2010509841.tif 000008
【００３３】
これらの表現において、ｔは、図７に示す画素近隣の任意のエッジによって中央の画素（Ｒ5 ）から分離された画素値を除くために選択される予め決定される閾値である。これらの定義では、ｃ5 は常に１であり、この値は、総和の中に少なくとも１つの画素を常に含むようにするためのものであることを注記しておく。シグマフィルタ重み係数をポピュレートするための別のスキームは当該技術分野でよく知られており、フル解像度パンクロマチックデータを使用して同様に適応させることができる。別の方法は、適応メディアンフィルタを使用することである。再び図７を参照すると、４つのパンクロマチックメディアン値および４つのレッド３点メディアン値が計算される。
【００３４】
【数７】
2010509841.tif 000009
【００３５】
Ｒ5 についてのノイズ低減値は、Ｒ5 に関連するパンクロマチック値に最も近いパンクロマチックメディアン値に対応するレッドメディアン値、すなわち、Ｐ5 に対応する。
【００３６】
【数８】
2010509841.tif 000010
【００３７】
近傍内に４つよりも少ないメディアン値を使用するものを含む適応メディアンフィルタを使用するための別のスキームは当該技術分野でよく知られており、フル解像度のパンクロマチックデータを使用して同様に適応させることができる。
【００３８】
上記の方法に加えて、例えば無限インパルス応答（infinite impulse response）（ＩＩＲ）、フィルタリング、および特異値分解（singular value decomposition）（ＳＶＤ）など（これらに限定されない）の他の周知のノイズ低減方法を使用できる。
【００３９】
図７に示したような近隣画素は、画像データのラプラシアンまたはガウシアンのピラミッド分解またはウェーブレット分解に起因することがあることも当業者によく知られている。フル解像度パンクロマチックデータに同じ分解方法を同時に適用することによって、各ＲＧＢ画像分解成分内の得られる各画素は関連するパンクロマチック値を依然として有するであろう。従って、上記の議論および例は依然として関連性があり、変更はない。
【００４０】
図２に戻ると、ＲＧＢ  ＣＦＡ画像補間ブロック２１４は、先行技術文献に記載されている周知のＣＦＡ補間またはモザイク除去技術のいずれかを使用して実施できる。米国特許第５，８５２，４６８号（Ｏｋａｄａ）には、典型的な非適応方法が記載されており、一方、米国特許第５，５０６，６１９号（Ａｄａｍｓら）には、代表的な適応方法が教示されている。
【００４１】
図３において、ＲＧＢ  ＣＦＡ画像ノイズ低減ブロック２１０に類似の方法でフル解像度フルカラーノイズ低減ブロック２１６を実施でき、ブロック２１６においてのみ、各画素位置でのレッド、グリーン、ブルーおよびパンクロマチック値がある。従って、ノイズ低減は、例えば図８に示されているように隣接する近隣画素を使用して実施できる。図８を参照すると、シグマフィルタおよび適応メディアンフィルタの先に示した例は、直接適用できる。
【００４２】
図４において、フル解像度のパンクロマチック画像ノイズ低減ブロック２０６は、グレースケールまたはシングルチャネル画像ノイズ低減のための当該技術分野で周知の方法のいずれかを使用して実施できる。これらの方法には、シグマフィルタリングおよび適応メディアンフィルタリングの上記の例が含まれる。図９を参照すると、パンクロマチック画素Ｐ5 のノイズ低減を達成するためにシグマフィルタを使用することができる。これは、以下の加重平均を計算することにより達成される。
【００４３】
【数９】
2010509841.tif 000011
【００４４】
重み計数ｃ1 からｃ9 は、パンクロマチック値の差から計算される。
【００４５】
【数１０】
2010509841.tif 000012
【００４６】
これらの表現において、ｔは、図９に示す画素近隣の任意のエッジによって中央の画素（Ｐ5 ）から分離された画素値を除くために選択される予め決定される閾値である。これらの定義では、ｃ5 は常に１であり。この値は、総和の中に少なくとも１つの画素を常に含むようにするためのものであることを注記しておく。シグマフィルタ重み係数をポピュレートするための別のスキームは当該技術分野でよく知られている。別の方法は、適応メディアンフィルタを使用することである。再び図９を参照すると、４つのパンクロマチックが計算される。
【００４７】
【数１１】
2010509841.tif 000013
【００４８】
Ｐ5 についてのノイズ低減値は、Ｐ5 に関連する原パンクロマチック値に最も近いパンクロマチックメディアン値に対応する。
【００４９】
【数１２】
2010509841.tif 000014
【００５０】
適応メディアンフィルタを使用するための別のスキームは当該技術分野でよく知られており、使用できる。
【００５１】
上記の方法に加えて、例えば無限インパルス応答（ＩＩＲ）、フィルタリング、および特異値分解（ＳＶＤ）など（これらに限定されない）の他の周知のノイズ低減方法を使用できる。
【００５２】
図９に示したような近隣画素は、画像データのラプラシアンまたはガウシアンのピラミッド分解またはウェーブレット分解をもたらしうることも当業者によく知られている。従って、上記の議論および例は依然として関連性があり、変更はない。
【００５３】
本発明の好ましい実施態様に開示したノイズ低減アルゴリズムは、ユーザーのさまざまな状況および環境で利用することができる。状況および環境の例としては、大規模ディジタル写真仕上げ（フィルム導入、ディジタル処理、プリント出力といった処理ステップまたは処理段階を伴う）、リテールディジタル写真仕上げ（フィルム導入、ディジタル処理、プリント出力）、家庭でのプリント（家庭でフィルムまたはディジタル画像を走査、ディジタル処理、プリント出力）、デスクトップソフトウェア（アルゴリズムをディジタル印刷に適用してそのディジタル印刷をより改善したりまたは変更することもあるソフトウェア）、ディジタル処理（媒体からのまたはウェブ上でのディジタル画像の取り込み、ディジタル処理、媒体へのまたはウェブ上でのディジタル形態での画像出力、またはハードコピー印刷物上への印刷）、キオスク（ディジタル入力または走査入力、ディジタル処理、ディジタル出力または走査出力）、携帯装置（例えば、処理ユニット、ディスプレイユニット、処理の指示を与えるユニットとして使用できるＰＤＡや携帯電話）、ワールドワイドウェブを通じて提供されるサービスなどがある。
【００５４】
それぞれの場合に、ノイズ低減アルゴリズムは、独立して使用することも、あるいは、より大きなシステムソリューションの要素であることができる。さらに、アルゴリズムとのいろいろなインターフェイス、例えば、走査または入力、ディジタル処理、ユーザーに対する表示（必要な場合）、ユーザーの要求または処理命令の入力（必要な場合）、出力は、それぞれ、同じまたは異なる装置および物理的位置にあってもよく、装置間および位置間の通信は、公的または私的なネットワーク接続を通じて、またはメディアをベースとした通信を通じて行なうことができる。本発明についての上記開示内容と整合する場合に、アルゴリズム自体を完全に自動化すること、またはアルゴリズム自体にユーザーが（完全にまたは部分的に手作業で）入力すること、またはユーザーまたはオペレータが見て結果を受け入れる／拒絶すること、またはアルゴリズム自体がメタデータにより支援されうること（メタデータは、ユーザーが供給すること、または測定装置（例えばカメラ中の）が供給すること、または別のアルゴリズムによって決定することができる）ができる。さらに、アルゴリズムは、様々なワークフローユーザーインターフェーススキームと相互作用することができる。
【００５５】
本明細書に開示した本発明に係るノイズ低減アルゴリズムは、さまざまなデータ検出法とデータ低減技術（例えば顔検出、目検出、皮膚検出、フラッシュ検出）を利用した内部コンポーネントを備えることができる。
【符号の説明】
【００５６】
１１０    コンピュータシステム
１１２    マイクロプロセッサをベースとしたユニット
１１４    ディスプレイ
１１６    キーボード
１１８    マウス
１２０    ディスプレイ上のセレクタ
１２２    ディスクドライブユニット
１２４    コンパクトディスク−読み出し専用メモリ（ＣＤ−ＲＯＭ）
１２６    フロッピー（登録商標）ディスク
１２７    ネットワーク接続
１２８    プリンタ
１３０    パーソナルコンピュータカード（ＰＣカード）
１３２    ＰＣカード読取機
１３４    ディジタルカメラ
１３６    カメラドッキングポート
１３８    ケーブル接続
１４０    無線接続
２００    ＲＧＢＰ  ＣＦＡ画像
２０２    パンクロマチック画像補間
２０４    フル解像度パンクロマチック画像
２０６    フル解像度パンクロマチック画像ノイズ低減
２０８    ノイズ低減フル解像度パンクロマッチク画像
２１０    ＲＧＢ  ＣＦＡ画像ノイズ低減
２１２    ノイズ低減ＲＧＢ  ＣＦＡ画像
２１４    ＲＧＢ  ＣＦＡ画像補間
２１６    ノイズ低減フル解像度フルカラー画像
２１８    フル解像度フルカラーノイズ低減
２２０    最終的なノイズ低減フル解像度フルカラー画像
２２２    ノイズ低減フル解像度フルカラー画像
２２４    最終的なノイズ低減フル解像度フルカラー画像
２２６    ノイズ低減フル解像度フルカラー画像
【図１】
2010509841.tif 000015
【図２】
2010509841.tif 000016
【図３】
2010509841.tif 000017
【図４】
2010509841.tif 000018
【図５】
2010509841.tif 000019
【図６】
2010509841.tif 000020
【図７】
2010509841.tif 000021
【図８】
2010509841.tif 000022
【図９】
2010509841.tif 000023
【国際調査報告】
2010509841.tif 000024
2010509841.tif 000025