(57)【要約】  【課題】デジタル画像アーチファクト補正のための技術を提供する。  【解決手段】デジタル画像（１０）を取得し（３０）、前記画像における候補赤目欠陥領域（２２）を識別（３２）するものであり、前記候補赤目領域の周辺において少なくとも１つの限界輝度値を有する高輝度ピクセル（２４）領域を識別し（４０）、前記候補赤目領域および前記高輝度ピクセル領域を含む結合されたハイブリッド領域の目に関連する特徴を分析し（４６、４８、５０）、前記結合されたハイブリッド領域を、前記目に関連する特徴の分析に基づいて、フラッシュアーチファクト領域であると識別し、前記フラッシュアーチファクト領域にフラッシュアーチファクト補正（５２）を適用する。  【選択図】図３
2009516441.tif 000002
【特許請求の範囲】
【請求項１】
デジタル画像アーチファクト補正のための方法であって、
デジタル画像を取得し、
前記画像における候補赤目欠陥領域を識別し、
前記候補赤目領域の周辺において少なくとも１つの限界輝度値を有する高輝度ピクセル領域を識別し、
前記候補赤目領域および前記高輝度ピクセル領域を含む結合されたハイブリッド領域の目に関連する特徴を分析し、
前記結合されたハイブリッド領域を、前記目に関連する特徴の分析に基づいて、フラッシュアーチファクト領域であると識別し、
前記フラッシュアーチファクト領域にフラッシュアーチファクト補正を適用する方法。
【請求項２】
前記候補赤目欠陥領域を含む境界箱の定義をさらに備える請求項１に記載の方法。
【請求項３】
前記高輝度ピクセル領域の識別は、前記境界箱内に配置されている高輝度シードピクセルの識別を含む請求項２に記載の方法。
【請求項４】
前記シードピクセルは、所定の閾値よりも上のイエローネスおよび所定の閾値よりも下のレッドネスを有する請求項３に記載の方法。
【請求項５】
前記高輝度ピクセル領域を、シードピクセルの周囲で定義することをさらに備える請求項３に記載の方法。
【請求項６】
前記分析は、候補赤目領域と結合された複合領域との間での真円度の差の計算をさらに備える請求項５に記載の方法。
【請求項７】
結合された複合領域の真円度が閾値より大きな場合に、赤目補正を適用することの判定をさらに備える請求項６に記載の方法。
【請求項８】
結合された複合領域の真円度が閾値による候補赤目領域の真円度よりも大きい場合に、赤目補正を適用することの判定をさらに備える請求項６に記載の方法。
【請求項９】
高輝度ピクセル領域が閾値領域よりも大きい領域を有する場合に補正を適用しないことの判定をさらに備える請求項５に記載の方法。
【請求項１０】
前記領域は、前記境界箱のサイズに関連する機能として決定される請求項９に記載の方法。
【請求項１１】
前記高輝度ピクセル領域のイエローネスおよびノンピンクネスの判定をさらに備える請求項５に記載の方法。
【請求項１２】
前記取得された画像はＬａｂ色空間で表現されるものであり、
前記高輝度ピクセル領域のｂ値の平均値を測定し、
前記高輝度ピクセル領域でのａ値の平均値とｂ値の平均値との間での差異を判定する処理をさらに備える請求項１１に記載の方法。
【請求項１３】
前記分析は、
輝きの存在についての前記結合された複合領域の分析と、
輝きの存在に対応する前記高輝度ピクセル領域を補正しないことの判定と、
をさらに備える請求項５に記載の方法。
【請求項１４】
補正された赤目領域から１つまたはそれ以上のピクセル値を選択することによる高輝度ピクセル領域の補正と、
高輝度ピクセル領域を補正するための前記ピクセル値の使用と、
をさらに備える請求項５に記載の方法。
【請求項１５】
前記選択されたピクセル値は、補正された赤目領域のメジアン内にあるＬ値とｂ値を有するピクセルから得られる請求項１４に記載の方法。
【請求項１６】
高輝度ピクセル領域のｂ値の平均値が比較的低い限界を越える場合における、もしくは、ａ値とｂ値の平均値の差が所定の閾値よりも低い場合における、補正を適用しないことの判定をさらに備える請求項１に記載の方法。
【請求項１７】
取得した画像の、ＲＧＢ、ＹＣＣあるいはＬａｂ色空間フォーマット、あるいはそれらの組み合わせの内の１つへの変換をさらに備える請求項１に記載の方法。
【請求項１８】
前記取得された画像の分析は、輝度−クロミナンス色空間で行なわれ、
前記高輝度ピクセル領域は、輝度限界より大きな輝度値、クロミナンス限界よりも大きい青色−黄色クロミナンス値、および赤色−緑色限界よりも小さい赤色−緑色値を有している請求項１に記載の方法。
【請求項１９】
赤目欠陥領域として前記領域を確認もしくは拒絶するために、前記赤目候補領域をフィルタリングし、
複合領域としての分析のために前記拒絶された赤目候補領域の部分集合を選ぶ、
請求項１に記載の方法。
【請求項２０】
デジタル画像取得装置内において実行される請求項１に記載の方法。
【請求項２１】
画像取得プロセスの一部として実行される請求項２０に記載の方法。
【請求項２２】
前記デジタル画像取得装置における再生オプションの一部として、実行される請求項２０に記載の方法。
【請求項２３】
デジタル画像取得装置における背景プロセスとして実行される請求項１に記載の方法。
【請求項２４】
多目的計算装置において実行され、
前記取得がデジタル画像取得装置からの前記デジタル画像の受信を含む請求項１に記載の方法。
【請求項２５】
前記フラッシュアーチファクト補正は、前記候補赤目領域の赤目補正を含む請求項１に記載の方法。
【請求項２６】
前記フラッシュアーチファクト補正は、さらに前記高輝度ピクセル領域の補正をさらに含む請求項２５に記載の方法。
【請求項２７】
前記高輝度ピクセル領域の補正は、前記候補赤目領域に基づいて補正されたピクセル値の利用を含む請求項２５に記載の方法。
【請求項２８】
前記高輝度ピクセル領域および前記候補赤目領域の補正結果は、領域間の継ぎ目を不明瞭にする（ぼかす）ように組み合わせられる請求項２５に記載の方法。
【請求項２９】
前記候補赤目領域と前記高輝度ピクセル領域との間の継ぎ目領域の平滑化をさらに有する請求項２５に記載の方法。
【請求項３０】
前記目に関連する特徴は、形状を含む請求項１に記載の方法。
【請求項３１】
前記目に関連する特徴は、真円度を含む請求項１に記載の方法。
【請求項３２】
前記目に関連する特徴は、相対的な瞳サイズを含む請求項１に記載の方法。
【請求項３３】
デジタル画像アーチファクトの補正のための方法であって、
デジタル画像を取得し、
前記画像中の候補赤目欠陥領域を識別し、
前記候補赤目領域の周辺において高い輝度値を持っているシードピクセルを識別し、
前記シードピクセルおよび前記候補赤目領域を含む結合された複合領域の目に関連する特徴を分析し、
前記結合された複合領域を、前記目に関連する特徴の前記分析に基づいて、フラッシュアーチファクト領域であると識別し、
前記フラッシュアーチファクト領域にフラッシュアーチファクト補正を適用する方法。
【請求項３４】
シードピクセルは、所定の閾値よりも上のイエローネスおよび所定の閾値よりも下のレッドネスを有する請求項３３に記載の方法。
【請求項３５】
前記領域を赤目欠陥領域として確認もしくは拒絶するための赤目候補領域のフィルタリングと、
複合領域として分析するための、拒絶された赤目候補領域の部分集合の選択と
をさらに行う請求項３３に記載の方法。
【請求項３６】
デジタル画像取得装置内にて実行される請求項３３に記載の方法。
【請求項３７】
画像取得プロセスの一部として実行される請求項３６に記載の方法。
【請求項３８】
デジタル画像取得装置における再生オプションの一部として実行される請求項３６に記載の方法。
【請求項３９】
デジタル画像取得装置におけるバックグラウンド処理として実行するために実行される請求項３３に記載の方法。
【請求項４０】
一般用途用の計算装置内において実行され、前記取得はデジタル画像取得装置からのデジタル画像の受信を含んでいる請求項３３に記載の方法。
【請求項４１】
前記分析は、ｂ値の平均値が比較的低い限界を越えるかどうかの確認を備えている請求項３３に記載の方法。
【請求項４２】
前記分析は、ａ値とｂ値の平均値の差が所定の閾値よりも低いかどうかの確認を備えている請求項４１に記載の方法。
【請求項４３】
前記フラッシュアーチファクト補正は、候補赤目領域の赤目補正を含んでいる請求項３３に記載の方法。
【請求項４４】
前記フラッシュアーチファクト補正は、さらにシードピクセルを含んでいる第２の領域の補正を含んでいる請求項４３に記載の方法。
【請求項４５】
画像処理装置にて実行された際に、請求項１〜４４の内のいずれか１項に記載のステップを行うように構成された、デジタル画像アーチファクト補正のためのコンピュータ読取り可能な信号を備えるコンピュータプログラム製品。
【請求項４６】
デジタル画像アーチファクトの補正のために構成された装置であって、
デジタル画像を取得するための手段と、
前記画像中の候補赤目欠陥領域を識別するための手段とを備え、
前記候補赤目領域の周辺において少なくとも１つの限界輝度値を持っている高輝度ピクセル領域を識別するための手段と、
前記高輝度ピクセル領域および前記候補赤目領域を含む結合された複合領域の目に関連する特徴を分析するための手段と、
前記結合された複合領域を、前記目に関連する特徴の前記分析に基づいて、フラッシュアーチファクト領域であると識別するための手段と、
前記フラッシュアーチファクト領域にフラッシュアーチファクト補正を適用するための手段と、
により特徴づけられる装置。
【請求項４７】
前記候補赤目欠陥領域の周囲において境界箱を定義する手段をさらに備える請求項４６に記載の装置。
【請求項４８】
前記分析するための手段は、
輝きの存在についての前記結合された複合領域を分析する手段と、
輝きの存在に対応する前記高輝度ピクセル領域を補正しないことの判定を行う手段と、
をさらに備える請求項４６に記載の装置。
【請求項４９】
赤目欠陥領域として前記領域を確認もしくは拒絶するために、前記赤目候補領域をフィルタリングする手段と、
複合領域としての分析のために前記拒絶された赤目候補領域の部分集合を選ぶ手段と、
をさらに備える請求項４６に記載の装置。
【請求項５０】
前記フラッシュアーチファクト補正は、前記候補赤目領域の赤目補正を含む請求項４６に記載の装置。
【請求項５１】
デジタル画像アーチファクトの補正のために構成された装置であって、
デジタル画像を取得するための手段と、
前記画像中の候補赤目欠陥領域を識別するための手段と、
前記候補赤目領域の周辺において高い輝度値を持っているシードピクセルを識別するための手段と、
前記シードピクセルおよび前記候補赤目領域を含む結合された複合領域の目に関連する特徴を分析するための手段と、
前記結合された複合領域を、前記目に関連する特徴の前記分析に基づいて、フラッシュアーチファクト領域であると識別するための手段と、
前記フラッシュアーチファクト領域にフラッシュアーチファクト補正を適用するための手段と、
を備えてなる装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタル画像の補正に関し、特に、フラッシュ露光によるアイアーチファクトの補正に関する。
【背景技術】
【０００２】
従来、赤目欠陥が存在するかどうかを、ユーザの介在無しで決定する赤目検出部を含むデジタル画像用の、自動の、赤目検出および補正を行うシステムが開示されている（例えば、特許文献１を参照）。
【０００３】
欠陥が画像中に存在する場合、欠陥を取り巻く画像の一部は、欠陥領域の他の色の特徴を保存する間に、欠陥の赤い成分をデサチュレートする補正部に送られる。
【０００４】
また、ハイライト（つまり、その周辺の領域内のピクセルよりも、実質的に赤い色合い、より高いサチュレーション（彩度）値および輝度値をもつピクセルを有する、きらきら光る画像領域）の識別を含む、デジタル画像中における赤目の特徴を検出する方法も開示されている（例えば、特許文献２を参照）。
【０００５】
さらに、瞳領域は、サチュレーション値グラフの谷部の両サイドに識別されるであろう二つのサチュレーション値のピークを有している。
【０００６】
そして、さらなる選択基準(当該選択基準は、参照ピクセルの周囲における、孤立した、補正可能なピクセルの実質的に円形をなす領域の有無の判断を含む場合がある)に基づく赤目特徴の一部に、ハイライト領域あるいは瞳領域がそれぞれ相当するかどうかが判断される。
【０００７】
赤目特徴の補正は、明るさ、及び／又は赤目特徴中におけるピクセルの一部または全体のサチュレーションを減少させることを含んでいる。
【特許文献１】米国特許第６，８７３，７４３号公報
【特許文献２】国際公開第ＷＯ０３／０７１４８４号パンフレット
【発明の開示】
【発明が解決しようとする課題】
【０００８】
多くのケースでは、フラッシュの使用によって引き起こされるアイアーチファクトは、赤い色と強調された輝きとの単なる組み合わせよりも複雑である。
【０００９】
そのようなアーチファクトは、赤色部分と、黄色、金色、白色の他の部分、もしくはそれらの組合せとからなる複合部分の複雑なパターンの形態をとり得る。
【００１０】
一例は、フラッシュ写真が撮影される際に、被写体がカメラを直接見ない場合のケースを含んでいる。
【００１１】
フラッシュからの光は、再帰反射（それは白色もしくは金色である）とは異なる反射を引き起こすかもしれない角度で眼球に当たる。
【００１２】
他のケースは、光のいくつかの部分を他の部分とは異なるように回折させるコンタクトレンズを着用している被写体、若しくはメガネを着用している被写体を含んでいる。
【００１３】
さらに、レンズに関連のあるフラッシュのロケーション、例えば、レンズの下方とした場合、目の分離変色を悪化させるかもしれない。
【００１４】
本発明は上述した問題点を解決するためになされたものであり、デジタル画像アーチファクト補正のために提供される。
【課題を解決するための手段】
【００１５】
上述した課題を解決するため、本発明の一態様に係るデジタル画像アーチファクト補正のための方法は、デジタル画像（１０）を取得し（３０）、前記画像における候補赤目欠陥領域（２２）を識別（３２）するものであり、  前記候補赤目領域の周辺において少なくとも１つの限界輝度値を有する高輝度ピクセル（２４）領域を識別し（４０）、  前記候補赤目領域および前記高輝度ピクセル領域を含む結合されたハイブリッド領域の目に関連する特徴を分析し（４６、４８、５０）、前記結合されたハイブリッド領域を、前記目に関連する特徴の分析に基づいて、フラッシュアーチファクト領域であると識別し、前記フラッシュアーチファクト領域にフラッシュアーチファクト補正（５２）を適用することにより特徴づけられる。
【００１６】
また、本発明の一態様に係るコンピュータプログラム製品は、画像処理装置にて実行された際に、上述のような方法におけるステップを実行するように構成された、デジタル画像アーチファクト補正のためのコンピュータ読取り可能な信号を備えることを特徴とするものである。
【００１７】
また、本発明の一態様に係るデジタル画像アーチファクトの補正のために構成された装置は、デジタル画像を取得するための手段と、前記画像中の候補赤目欠陥領域を識別するための手段とを備え、前記候補赤目領域の周辺において少なくとも１つの限界輝度値を持っている高輝度ピクセル領域を識別するための手段と、前記高輝度ピクセル領域および前記候補赤目領域を含む結合された複合領域の目に関連する特徴を分析するための手段と、前記結合された複合領域を、前記目に関連する特徴の前記分析に基づいて、フラッシュアーチファクト領域であると識別するための手段と、前記フラッシュアーチファクト領域にフラッシュアーチファクト補正を適用するための手段とにより特徴づけられるものである。
【００１８】
デジタル画像が取得される。候補赤目欠陥領域は、画像中で識別される。前記候補赤目領域の周辺において、少なくとも1つの限界輝度値を有する高輝度ピクセル領域が識別される。結合されたハイブリッド領域の目に関連する特徴が、分析される。結合されたハイブリッド領域は、候補赤目領域および高輝度ピクセル領域を含んでいる。結合されたハイブリッド領域は、目に関連する特徴の分析に基づいて、フラッシュアーチファクト領域であると認識される。フラッシュアーチファクト補正は、フラッシュアーチファクト領域に適用される。
【００１９】
フラッシュアーチファクト補正は、候補赤目領域の赤目補正を含んでいてもよい。
【００２０】
フラッシュアーチファクト補正は、さらに高輝度ピクセル領域の補正を含んでいてもよい。
【００２１】
境界箱は、候補赤目欠陥領域の近傍に定義されてもよい。
【００２２】
高輝度ピクセル領域の識別は、前記境界箱内に配置されている高輝度シードピクセルの識別を含んでいてもよい。
【００２３】
シードピクセルは、所定の閾値よりも上のイエローネスおよび所定の閾値よりも下のレッドネスを有していてもよい。
【００２４】
高輝度ピクセル領域は、シードピクセルの周囲で定義されてもよい。
【００２５】
分析は、候補赤目領域と結合された複合領域との間での真円度の差の計算を含んでいてもよい。
【００２６】
結合された複合領域の真円度が閾値より大きな場合、赤目補正が適用されてもよい。
【００２７】
方法は、結合された複合領域の真円度が、閾値による候補赤目領域の真円度より大きい場合における、赤目補正の適用の決定を含んでいてもよい。
【００２８】
方法は、高輝度ピクセル領域が閾値領域よりも大きい場合に補正を適用しないと判定することを含んでいてもよい。
【００２９】
その領域は、前記境界箱のサイズに関連する機能として決定されてもよい。
【００３０】
方法は、高輝度ピクセル領域のイエローネスおよびノンピンクネスの判定を含んでいてもよい。
【００３１】
取得された画像は、Ｌａｂ色空間で表現されるものであってもよい。また、方法は、高輝度ピクセル領域のb値の平均値の測定、および、高輝度ピクセル領域でのａ値の平均値とb値の平均値との間での相違の判断を含むことができる。
【００３２】
分析は、輝きの存在に対応する結合された複合領域の分析を含んでいてもよい。そして、輝きの検出に対応して、輝きの存在に対応する高輝度ピクセル領域を補正しないことの決定を含んでいてもよい。
【００３３】
方法は、補正された赤目領域からの1つ又はそれ以上のピクセル値の選択、および高輝度ピクセル領域を補正するためのピクセル値の使用による、高輝度ピクセル領域の補正を含んでいてもよい。
【００３４】
選択されたピクセル値は、補正された赤目領域のメジアン（median）内にあるL値とb値を有するピクセルから得られてもよい。
【００３５】
方法は、高輝度ピクセル領域のｂ値の平均値が比較的低い限界を越える場合における、もしくは、ａ値とｂ値の平均値の差が所定の閾値よりも低い場合における、補正を適用しないことの判定を含んでいてもよい。
【００３６】
方法は、取得した画像の、ＲＧＢ、ＹＣＣあるいはＬａｂ色空間フォーマット、あるいはそれらの組み合わせの内の１つへの変換を含んでいてもよい。
【００３７】
取得された画像の分析は、輝度−クロミナンス色空間で行なわれてもよい。また、高輝度ピクセル領域は、輝度限界より大きな輝度値、クロミナンス限界よりも大きい青色−黄色クロミナンス値、および赤色−緑色限界よりも小さい赤色−緑色値を有していてもよい。
【００３８】
方法は、前記領域を赤目欠陥領域として確認もしくは拒絶するための赤目候補領域のフィルタリング、および拒絶された赤目候補領域の部分集合の選択を含んでいてもよい。
【００３９】
方法は、デジタル画像取得装置内にて実装されてもよい。
【００４０】
方法は、画像取得プロセスの一部として実装されてもよい。
【００４１】
方法は、デジタル画像取得装置における再生オプションの一部として実装されてもよい。
【００４２】
方法は、デジタル画像取得装置中のバックグラウンド処理として実行するために実装されてもよい。
【００４３】
方法は、一般用途用の計算装置内に実装されてもよいし、ここでの上記取得はデジタル画像取得装置からのデジタル画像の受信を含んでいてもよい。
【００４４】
候補赤目領域及び／又は高輝度ピクセル領域が、補正されてもよい。
【００４５】
高輝度ピクセル領域は、赤目候補領域の後に補正されてもよい。
【００４６】
高輝度ピクセル領域の補正は、候補赤目領域に基づいて補正されたピクセル値を利用してもよい。
【００４７】
候補赤目領域および高輝度ピクセル領域の補正結果は、それらの領域間の継ぎ目をぼかすように組み合わせられてもよい。
【００４８】
方法は、候補赤目領域と高輝度ピクセル領域との間の継ぎ目領域の平滑化を含んでいてもよい。
【００４９】
目に関連する特徴は、形状、真円度及び／又は相対的な瞳サイズを含んでいてもよい。
【００５０】
更なる方法は、デジタル画像アーチファクト補正のために提供される。デジタル画像が得られる。候補赤目欠陥領域は、画像中で識別される。候補赤目領域の近傍において、高輝度値を有するシードピクセルが識別される。結合された複合領域の目に関連する特徴が分析される。結合されたハイブリッド領域は、候補赤目領域およびシードピクセルを含んでいる。結合された複合領域は、目に関連する特徴の分析に基づいて、フラッシュアーチファクト領域として識別される。フラッシュアーチファクト補正は、フラッシュアーチファクト領域に適用される。
【００５１】
フラッシュアーチファクト補正は、候補赤目領域の赤目補正を含んでいてもよい。
【００５２】
フラッシュアーチファクト補正は、さらにシードピクセルを含んでいる第２の領域の補正を含んでいてもよい。
【００５３】
シードピクセルは、所定の閾値を上回るイエローネスおよび所定の閾値を下回るレッドネスを有していてもよい。
【００５４】
方法は、前記領域を赤目欠陥領域として確認もしくは拒絶するための赤目候補領域のフィルタリング、および拒絶された赤目候補領域の部分集合の選択を含んでいてもよい。
【００５５】
方法は、デジタル画像取得装置内に実装されてもよい。
【００５６】
方法は、画像取得プロセスの一部として実装されてもよい。
【００５７】
方法は、デジタル画像取得装置における再生オプションの一部として実装されてもよい。
【００５８】
方法は、デジタル画像取得装置中のバックグラウンド処理として実行するために実装されてもよい。
【００５９】
方法は、一般用途用の計算装置内に実装されてもよいし、ここでの上記取得はデジタル画像取得装置からのデジタル画像の受信を含んでいてもよい。
【００６０】
分析は、b値の平均値が比較的低い閾値を越えるかどうかのチェックを含んでいてもよい。
【００６１】
分析は、ａ値の平均値とｂ値の平均値との間の差が与えられた閾値よりも低いかどうかのチェックを含んでいてもよい。
【発明の効果】
【００６２】
以上に詳述したように本発明によれば、デジタル画像アーチファクト補正のために提供される。
【発明を実施するための最良の形態】
【００６３】
以下、本発明の実施の形態について図面を参照しつつ説明する。
【００６４】
図１は、いくつかの欠陥候補領域が識別され、境界箱により囲まれているイメージを示している。
【００６５】
図２は、半分が赤色、半分が白色／金色の欠陥を示す候補領域をより詳細に示している。
【００６６】
図３は、本発明による画像補正ソフトウェアの実施の形態のフローチャートを示している。
【００６７】
好ましい実施の形態は、そのような欠陥を補正するための方法と同様、被写体の目の欠陥を検出するための改善された方法も提供する。
【００６８】
好ましい実施の形態は、赤目もしくは金色のパッチの一方もしくは両方を補正する条件下においても、同じ目に属する黄色、白色および／または金色のパッチの近隣もしくは周辺を見つつ、候補赤目領域を検査することにより行われてもよい。
【００６９】
好ましい実施の形態に従った技術を使用することで、半分赤色−半分白色／金色の欠陥に対する自動的な目補正の質および受容性を向上させることができる。
【００７０】
好ましい実施の形態の実施は、ある自動的な赤目検出処理方法による目欠陥の赤目部分の検出について優位性を得ることができる。おそらく、既存技術もしくは新技術を利用することにより、非赤目領域の検出は補正前の段階として適用されることができる。そして、この方法は、既存の、若しくは新規な検出方法についての優位性を得るであろう。
【００７１】
このような赤目処理における補正箇所は、好ましい実施の形態に従った技術を実施するために変更されてもよい。一方、非補正箇所は変更されないことが好ましい。
【００７２】
好ましい実施の形態に従った技術は、処理性能が制限されるであろうカメラにおいて、および／またはカメラのクリック間隔に過度な影響を与えることなく、それを容易に実施させる比較的小さな処理オーバーヘッドを、画像補正における質的改善のために提供してもよい。
【００７３】
ピクセルの赤色値の減少により、赤目欠陥に属するピクセルが補正され得ることがわかる。
【００７４】
一例として、画像情報は、L*a*b*色空間のような輝度−クロミナンス空間において利用することができる。
【００７５】
これは、ピクセルのＬ*値およびa*値を、適切なレベルまで減少させることを含んでいてもよい。
【００７６】
多くの場合、a*値の減少は、このように虹彩の正しい値を回復させ、目のクロミナンスを自動的に回復させる。
【００７７】
しかしながら、半分赤色−半分白色／金色の目欠陥における白色／金色ピクセルに対して、ピクセルのＬおよびあるいはｂの特徴もまた、サチュレート（saturate）され及び／または歪められるかもしれない。
【００７８】
これは赤目欠陥とは異なることを意味しており、これらのケースでは、オリジナルの画像情報が部分的に、もしくは全体的に失われるかもしれない。
【００７９】
その補正は、a*およびb*の削減と同様に、全面的なＬ*値の削減により行なわれてもよい。
【００８０】
しかしながら、Ｌ*が非常に高いと、クロミナンスは非常に低い場合があり得る。したがって、重要な色情報が残っていないかもしれない。
【００８１】
付加的な好ましい実施の形態では、欠陥の白色／金色部分の補正は、欠陥部分における補正された赤目部分からの情報からの上記回復に対し、目の再構成を含んでいる。
【００８２】
ここで、図３に示すように、デジタル画像１０は、他の従来の手法、および／または、ある革新的な技術の利用により取得（３０）されることができる。
【００８３】
実施の形態が、元々画像が取得されたカメラかスキャナのような装置とは分離されている装置において実施される場合、画像は、有線もしくは無線によるピア・ツー・ピア転送もしくはネットワーク転送を含む他の適切な手段によるファイル転送を介して取得されることができる。
【００８４】
この他、下記に述べられる画像補正処理は、適切に速度が最適化されていれば、使用者が後続する画像の保存および／または取得を選択する前に、使用者に補正済み画像を表示するための画像取得装置での一連の画像獲得処理中に実施されることができる。
【００８５】
あるいは、上記画像補正処理は、画像が以前に格納されている画像取得装置において作動するために、分析を最適化されることができる。
【００８６】
次に、赤目検出（３２）中において、赤色のピクセル２０は識別され、続いて、複数の隣接する（あるいは一般に隣接する）ピクセル（例えば、図２を参照）を含む領域２２にグループ化される。
【００８７】
これらの領域は、より大きな境界箱領域１２、１４、１６、１８（例えば、図１を参照）に関連（３４）することができる。
【００８８】
その後、実際には上記領域が赤目欠陥であるかどうか判断するために、これら境界箱内に含まれる候補領域は、１セットのフィルタを通される（３６）。
【００８９】
そのようなフォールシングフィルタ（falsing filter）の例は、米国特許６，８７３，７４３号公報に開示されている。
【００９０】
フィルタリング処理が図２に示されるような赤色ピクセル２０の領域のような候補領域を拒絶するかもしれない１つの理由としては、それが典型的な赤目欠陥に期待される真円度を欠いている場合があり得る。
【００９１】
他の適切な理由で問題のある領域と同様なそのような領域は、それらが半分赤色−半分白色／金色の目欠陥を含むかどうか、そして、結果として補正され得る欠陥であるかどうかを判断するための更なる処理のため、拒絶された領域（３８）としてむしろ通過されてもよい。
【００９２】
この処理の動作の多くは、他の赤目処理（例えば、並列処理可能な環境において）、もしくは、各々の拒絶された領域のある範囲について並行して実行され得る処理、と平行して実行されることができる。
【００９３】
半分赤色―半分白色／金色の目欠陥の確認に含まれ得る典型的な実施の形態に従う処理は、より詳細に以下のように概説される：
【００９４】
１．  既に検出されたアイアーチファクトの赤色部分の内の境界箱１２−１８は、以下のような特徴を有する位置（図２に示す符号２６のような位置）を探索（４０）される。
当該位置は、例えば以下のような特徴を有する。
【００９５】
ａ．  高輝度（High intensity）  （Ｉ  ＞閾値）
【００９６】
ｂ．  ハイイエローネス（High yellowness）  （ｂ  ＞  閾値）
【００９７】
ｃ．  ローレッドネス（Low redness）  （ａ  ＜  閾値）
【００９８】
この例において、領域に対する画像情報はＬａｂ色空間で利用可能であると仮定されているが、ＲＧＢ、ＹＣＣもしくはビットマップフォーマットのような他のフォーマットでの画像情報に対しても同様に他の実施の形態を実施され得る。
【００９９】
そのような特徴部分が存在しない場合、処理を停止し（つまり、白色／金色のパッチは赤色領域の近傍に存在しないという決定が得られる）、当該領域が拒絶（４２）されるものであることを確認する。
【０１００】
２．  ステップ４０において検出された特徴部分からの開始は、輝度情報に基づいて領域２４（図２を参照）を成長（４４）させる。例えば、輝度が閾値より大きな場合に、当該部分は白色／金色領域２４に追加される。
【０１０１】
領域２４が所定の最大許容サイズを超過する場合（ステップ４６）、その後、処理を停止し、領域が拒絶される部分であることを確認する（４２）。
【０１０２】
上記最大許容サイズは、赤色領域２２および白色／金色領域２４の全体と比較した境界箱領域の比率から決定され得る。
【０１０３】
３．  白色領域のイエローネス（yellowness）およびノンピンクネス（non-pinkness）は、ｂ値の平均値が比較的低い閾値を超えること、および、ａ値の平均値とｂ値の平均値と間での差が与えられた閾値よりも低いこと、を確認することにより評価（４８）される。
【０１０４】
少なくとも１つのテストが失敗する場合、処理を停止し、その領域が拒絶（４２）されるものであることを確認する。
【０１０５】
４．  この実施の形態では、赤色領域２２および検出された白色／金色領域２４の組合せ領域の、元の赤色領域２２からの真円度の増加分が確認（５０）される。
【０１０６】
このように、赤色領域および白色／金色領域の結合領域の真円度は計算され、赤色領域２２のそれと比較される。
【０１０７】
白色／金色領域２４の赤色領域２２への追加を行っても、真円度が閾値未満である場合、もしくは減少している場合、もしくは十分に増加していない場合、処理を停止し、領域を拒絶する（４２）。
【０１０８】
領域の真円度は、下記の演算式を使用することにより、計算され得る。
【０１０９】
Ｒｏｕｎｄｎｅｓｓ  ＝  Ｐｅｒｉｍｅｔｅｒ２／（４π・Ａｒｅａ）
【０１１０】
真円度の評価に先立って、穴を埋める手順は、例えばピクセル２８を結合領域内に含めるために、それぞれの領域２２および２４に適用され得る。
【０１１１】
５．  領域が１つ若しくはそれ以上、および好ましくは上記のテストのすべてを通過する場合、当該領域は、確認済の赤目領域のリストに追加される。
【０１１２】
ここで、目欠陥の赤色部分は、補正済みピクセルが更なる処理において使用される場合に、様々な手法（例えば、Ｌａｂ色空間におけるピクセル値を減少させること）により補正（５２）され得る。
【０１１３】
６．  赤目欠陥領域のリストに加えられた白色／金色の領域については、いくつかのさらなるチェックの後に、欠陥の白色／金色部分のさらなる補正を適用することができる。
【０１１４】
そのような１つのチェックは、輝きを検出することである（５４）。
【０１１５】
ＲＧＢ空間では、輝き候補は、高輝度ピクセル（例えば、ｍｉｎ（Ｒ，Ｇ）＞＝２２０  および  ｍａｘ（Ｒ，Ｇ）＝＝２５５）として選択される。
【０１１６】
とても丸く（アスペクト比および離角の内の一方もしくは双方において）、明るく、デサチュレート（desaturate）されている領域が、最新の「赤色
2009516441.tif 000003
白色」領域２２および２４の内側で見つかった場合、それらピクセルは「補正対象ピクセル」リストから除外されてもよい。
【０１１７】
輝きは、高輝度領域全体であるかもしれない。しかし、ほとんどの場合、高輝度領域の内のわずかな部分だけが、輝きピクセルとしての基準を満たす。
【０１１８】
７．  輝きが検出されないか、白色／金色領域のサイズに比べて小さい場合、非赤目アーチファクトピクセル２４は、補正の後のそのような情報が存在する場合、好ましくはステップ５２にて既に補正済みの赤色ピクセル２２から色情報を取得することで補正（５６）され得る。
【０１１９】
あるいは、補正は、輝度値を減少させることによって行うことができる。
【０１２０】
好ましい実施の形態では、色情報は、その領域（Ｌとｂについての累積的なヒストグラム上の３０％位置と７０％位置の間）の中央にあるＬ値とｂ値を備えた赤色以外のピクセルの選択に由来する。
【０１２１】
これらの色見本（目の既に補正済みの赤色部分からの）は、目の赤色および非赤色欠陥部分の両方において同じ構成を作るために使用される。
【０１２２】
Ｌ値とｂ値のヒストグラムが、各ステップ（例えば、様々な限界を決定するためのもの）の前処理から一般に利用可能であるかもしれないこと、赤目補正がピクセル値の減少を含み得るように、補正中に必ずしも変わる必要はないであろうこと、は着目されるべきである。
【０１２３】
赤目領域および高輝度領域用の補正が、領域間の好ましくない継ぎ目を示すかもしれないことはあり得る。
【０１２４】
他の実施例では、上記補正済み領域は、２つの領域の間に継ぎ目が存在する場合にこれを除去する手法により滑らかにされる。
【０１２５】
好ましい実施の形態によってここに行なわれ、上述され、および／または、以下に請求される方法において、動作は選択された印刷順序で記述されている。
【０１２６】
しかしながら、上記順序は印刷上の便宜のために選択され順序付けられたものであり、また、動作を行うための特別な順序を示すように意図されたものではない。
【図面の簡単な説明】
【０１２７】
【図１】いくつかの欠陥候補領域が識別され、境界箱により囲まれているイメージを示す図である。
【図２】半分が赤色、半分が白色／金色の欠陥を示す候補領域をより詳細に示している図である。
【図３】本発明による画像補正ソフトウェアの実施の形態のフローチャートを示す図である。
【符号の説明】
【０１２８】
１０  デジタル画像、１２，１４，１６，１８  境界箱領域、２０  赤色ピクセル、２２  候補赤目欠陥領域、２４  高輝度ピクセル、２８  ピクセル。
【図１】
2009516441.tif 000004
【図２】
2009516441.tif 000005
【図３】
2009516441.tif 000006
【手続補正書】
【提出日】平成20年5月20日(2008.5.20)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
デジタル画像アーチファクト補正のための方法であって、
デジタル画像（１０）を取得し（３０）、
前記画像における候補赤目欠陥領域（２２）を識別（３２）するものであり、
前記候補赤目領域の周辺において少なくとも１つの限界輝度値を有する高輝度ピクセル（２４）領域を識別し（４０）、
前記候補赤目領域および前記高輝度ピクセル領域を含む結合されたハイブリッド領域の目に関連する特徴を分析し（４６、４８、５０）、
前記結合されたハイブリッド領域を、前記目に関連する特徴の分析に基づいて、フラッシュアーチファクト領域であると識別し、
前記フラッシュアーチファクト領域にフラッシュアーチファクト補正（５２）を適用することにより特徴づけられる方法。
【請求項２】
前記候補赤目欠陥領域を含む境界箱（１４）の定義（３４）をさらに備える請求項１に記載の方法。
【請求項３】
前記高輝度ピクセル領域の識別は、前記境界箱内に配置されている高輝度シードピクセル（２６）の識別を含む請求項２に記載の方法。
【請求項４】
前記シードピクセルは、所定の閾値よりも上のイエローネスおよび所定の閾値よりも下のレッドネスを有する請求項３に記載の方法。
【請求項５】
前記高輝度ピクセル領域を、シードピクセルの周囲で定義することをさらに備える請求項３に記載の方法。
【請求項６】
前記分析は、候補赤目領域と結合された複合領域との間での真円度（５０）の差の計算をさらに備える請求項５に記載の方法。
【請求項７】
結合された複合領域の真円度が閾値より大きな場合に、赤目補正を適用することの判定をさらに備える請求項６に記載の方法。
【請求項８】
結合された複合領域の真円度が閾値による候補赤目領域の真円度よりも大きい場合に、赤目補正を適用することの判定をさらに備える請求項６に記載の方法。
【請求項９】
高輝度ピクセル領域が閾値領域よりも大きい場合に補正を適用しないことの判定（４６）をさらに備える請求項５に記載の方法。
【請求項１０】
前記領域は、前記境界箱のサイズに関連する機能として決定される請求項９に記載の方法。
【請求項１１】
前記高輝度ピクセル領域のイエローネスおよびノンピンクネスの判定（４８）をさらに備える請求項５に記載の方法。
【請求項１２】
前記取得された画像はＬａｂ色空間で表現されるものであり、
前記高輝度ピクセル領域のｂ値の平均値を測定し、
前記高輝度ピクセル領域でのａ値の平均値とｂ値の平均値との間での差異を判定する処理をさらに備える請求項１１に記載の方法。
【請求項１３】
前記分析は、
輝きの存在についての前記結合された複合領域の分析（５４）と、
輝きの存在に対応する前記高輝度ピクセル領域を補正しないことの判定と、
をさらに備える請求項５に記載の方法。
【請求項１４】
補正された赤目領域から１つまたはそれ以上のピクセル値を選択することによる高輝度ピクセル領域の補正（５６）と、
高輝度ピクセル領域を補正するための前記ピクセル値の使用と、
をさらに備える請求項５に記載の方法。
【請求項１５】
前記選択されたピクセル値は、補正された赤目領域のメジアン内にあるＬ値とｂ値を有するピクセルから得られる請求項１４に記載の方法。
【請求項１６】
高輝度ピクセル領域のｂ値の平均値が比較的低い限界を越える場合における、もしくは、ａ値とｂ値の平均値の差が所定の閾値よりも低い場合における、補正を適用しないことの判定をさらに備える請求項１に記載の方法。
【請求項１７】
取得した画像の、ＲＧＢ、ＹＣＣあるいはＬａｂ色空間フォーマット、あるいはそれらの組み合わせの内の１つへの変換をさらに備える請求項１に記載の方法。
【請求項１８】
前記取得された画像の分析は、輝度−クロミナンス色空間で行なわれ、
前記高輝度ピクセル領域は、輝度限界より大きな輝度値、クロミナンス限界よりも大きい青色−黄色クロミナンス値、および赤色−緑色限界よりも小さい赤色−緑色値を有している請求項１に記載の方法。
【請求項１９】
赤目欠陥領域として前記領域を確認もしくは拒絶するために、前記赤目候補領域をフィルタリング（３８）し、
複合領域としての分析のために前記拒絶された赤目候補領域の部分集合を選ぶ（４０）、
請求項１に記載の方法。
【請求項２０】
デジタル画像取得装置内において、
画像取得プロセスの一部として、
前記デジタル画像取得装置における再生オプションの一部として、
デジタル画像取得装置における背景プロセスとして実行され、
もしくは、
多目的計算装置において実行され、および前記取得がデジタル画像取得装置からの前記デジタル画像の受信を含む請求項１に記載の方法。
【請求項２１】
前記フラッシュアーチファクト補正は、前記候補赤目領域の赤目補正（５２）を含む請求項１に記載の方法。
【請求項２２】
前記フラッシュアーチファクト補正は、さらに前記高輝度ピクセル領域の補正をさらに含む請求項２１に記載の方法。
【請求項２３】
前記高輝度ピクセル領域の補正は、前記候補赤目領域に基づいて補正されたピクセル値の利用を含む請求項２１に記載の方法。
【請求項２４】
前記高輝度ピクセル領域および前記候補赤目領域の補正結果は、領域間の継ぎ目を不明瞭にする（ぼかす）ように組み合わせられる請求項２１に記載の方法。
【請求項２５】
前記候補赤目領域と前記高輝度ピクセル領域との間の継ぎ目領域の平滑化をさらに有する請求項２１に記載の方法。
【請求項２６】
前記目に関連する特徴は、形状（好ましくは真円度）、もしくは相対的な瞳サイズ、の内の１つを含む請求項１に記載の方法。
【請求項２７】
画像処理装置にて実行された際に、請求項１〜２６の内のいずれか１項に記載のステップを行うように構成された、デジタル画像アーチファクト補正のためのコンピュータ読取り可能な信号を備えるコンピュータプログラム製品。
【請求項２８】
デジタル画像アーチファクトの補正のために構成された装置であって、
デジタル画像を取得するための手段と、
前記画像中の候補赤目欠陥領域を識別するための手段とを備え、
前記候補赤目領域の周辺において少なくとも１つの限界輝度値を持っている高輝度ピクセル領域を識別するための手段と、
前記高輝度ピクセル領域および前記候補赤目領域を含む結合された複合領域の目に関連する特徴を分析するための手段と、
前記結合された複合領域を、前記目に関連する特徴の前記分析に基づいて、フラッシュアーチファクト領域であると識別するための手段と、
前記フラッシュアーチファクト領域にフラッシュアーチファクト補正を適用するための手段と、
により特徴づけられる装置。
【国際調査報告】
2009516441.tif 000007
2009516441.tif 000008
2009516441.tif 000009