(57)【要約】  本発明は画像の不良画素補償方法及び装置を提出し、当該画像の不良画素補償方法は、補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定するステップと、各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定するステップと、各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定するステップと、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得するステップと、を含む。
2019507361.tif 000002
【特許請求の範囲】
【請求項１】
画像の不良画素補償方法であって、
補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定するステップと、
各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定するステップと、
各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定するステップと、
前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得するステップと、を含む画像の不良画素補償方法。
【請求項２】
補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測することは、
予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と異なるチャネルの画素点の第１輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と異なるチャネルの画素点の第２輝度情報を取得し、前記第１側と前記第２側はそれぞれ前記不良画素が前記予め設定された方向での両側であるステップと、
前記第１輝度情報に基づいて前記不良画素の第１側の第１輝度変化傾向を予測し、前記第２輝度情報に基づいて前記不良画素の第２側の第２輝度変化傾向を予測するステップと、を含む請求項１に記載の方法。
【請求項３】
補償待ち画像データ中の各々の予め設定された方向に対し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定することは、
予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と同一のチャネルの画素点の第３輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と同一のチャネルの画素点の第４輝度情報を取得するステップと、
前記第３輝度情報と前記不良画素の第１側の輝度変化傾向に基づき、第１不良画素輝度補償値を決定し、前記第２輝度情報と前記不良画素の第４側の輝度変化傾向に基づき、第２不良画素輝度補償値を決定するステップと、を含む請求項１に記載の方法。
【請求項４】
各々の予め設定された方向に対応する第１差異値及び第２差異値に基づき、相応の予め設定された方向に対応する補償加重因子をそれぞれ決定することは、
各々の予め設定された方向に対し、相応の予め設定された方向に対応する前記第１不良画素輝度補償値と前記第２不良画素輝度補償値の輝度補償平均値をそれぞれ計算するステップと、
各々の予め設定された方向に対し、前記不良画素の輝度情報と相応の予め設定された方向に対応する前記輝度補償平均値の差値をそれぞれ計算し、前記差値に基づいて対応する第１加重値を決定するステップと、
各々の予め設定された方向に対応する第１差異値、第２差異値のそれぞれに基づき、相応の予め設定された方向の前記第１加重値を修正し、相応の予め設定された方向に対応する補償加重因子を得るステップと、を含む請求項１に記載の方法。
【請求項５】
前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、計算結果に基づいて前記不良画素を補償することは、
各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値をそれぞれ計算するステップと、
前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値を加重計算し、計算結果に基づいて前記不良画素を補償するステップと、を含む請求項１〜４のいずれかに記載の方法。
【請求項６】
画像の不良画素補償装置であって、前記画像の不良画素補償装置は、
予測モジュール、第一決定モジュール、第二決定モジュール、第三決定モジュール、及び補償モジュールを含み、前記予測モジュールは、補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化の傾向をそれぞれ予測し、前記第一決定モジュールは、補償待ち画像データ中の各々の予め設定された方向に対し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定し、前第二決定モジュールは、記各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定し、前記第三決定モジュールは、各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定し、前記前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記補償モジュールは、不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得する、画像の不良画素補償装置。
【請求項７】
前記予測モジュールは、
予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と異なるチャネルの画素点の第１輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と異なるチャネルの画素点の第２輝度情報を取得し、前記第１側と前記第２側はそれぞれ前記不良画素が前記予め設定された方向での両側であり、
前記第１輝度情報に前基づいて前記不良画素の第１側の第１輝度変化傾向を予測し、前記第２輝度情報に基づいて前記不良画素の第２側の第２輝度変化傾向を予測する、請求項６に記載の装置。
【請求項８】
前記第１決定モジュールは、
予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と同一のチャネルの画素点の第３輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と同一のチャネルの画素点の第４輝度情報を取得し、
前記第３輝度情報と前記不良画素の第１側の輝度変化傾向に基づき、第１不良画素輝度補償値を決定し、前記第４輝度情報と前記不良画素の第２側の輝度変化傾向に基づき、第２不良画素輝度補償値を決定する、請求項６に記載の装置。
【請求項９】
前記第３決定モジュールは、
各々の予め設定された方向に対し、相応の予め設定された方向に対応する前記第１不良画素輝度補償値と前記第２不良画素輝度補償値の輝度補償平均値をそれぞれ計算し、
各々の予め設定された方向に対し、前記不良画素の輝度情報と相応の予め設定された方向に対応する前記輝度補償平均値の差値をそれぞれ計算し、前記差値に基づいて対応する加重値を決定し、
各々の予め設定された方向に対応する第１差異値、第２差異値のそれぞれに基づき、相応の予め設定された方向の前記加重値を修正し、相応の予め設定された方向に対応する補償加重因子を得る、請求項６に記載の装置。
【請求項１０】
前記補償モジュールは、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値をそれぞれ計算しと、
前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値を加重計算し、計算結果に基づいて前記不良画素を補償する、請求項６〜９のいずれかに記載の装置。
【請求項１１】
ケース、プロセッサー、メモリ、回路板及び電源回路を含み、回路板は、ケースに囲まれた空間内に配置され、プロセッサーとメモリは、回路板に配置され、電源回路は、電子機器の各々の回路又は素子に電源を供給することに用いられ、メモリは実行可能なプログラムコードを格納することに用いられ、プロセッサーは、メモリに格納した実行可能なプログラムコードを読み出すことにより実行可能なプログラムコードに対応するプログラムを実行し、請求項１〜５のいずれかに記載の画像の不良画素補償方法を実行することに用いられる、電子機器。
【請求項１２】
一つ又は複数のプログラムが記憶された記憶媒体を提供し、前記の一つ又は複数のプログラムが機器により実行される際に、請求項１〜５のいずれかに記載の画像の不良画素補償方法を実行させる、記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は画像処理技術分野に関し、特に、画像の不良画素補償方法、装置及び電子機器に関する。
【背景技術】
【０００２】
科学技術及び製造プロセスの進歩に伴い、画像センサの画素数が日々増加し、多くの画素は製造プロセスで必然的に不良画素が発生する。画像センサ中の不良画素とは位相画素点を指し、当該位相画素点にとっては、コーティング又はコーティングされない原因で同じ照明条件下での該画素点の輝度が他の画素点より高い又は他の画素点より低い。画像センサ自体の不良画素は画質に大きな影響を与え、画像の品質を大幅に低下させる。不良画素の修正は検出及び補償を含み、画像の品質を向上させることができる。
【０００３】
現在、不良画素数によって画像センサの品質を管理・制御し、不良画素数が予め設定された閾値を超える場合、当該製品は出荷できない。また、不良画素の他の管理・制御パラメータとして、いずれの単位領域内の不良画素数も閾値を超えてはいけない。しかし、このような管理・制御にも関わらず、出荷した画像センサの不良画素はやはり存在する。不良画素が存在することで、画像の品質を大幅に低下させる。
【発明の概要】
【０００４】
本発明は、上記の技術的問題を解決するためであり、その第一の目的は、補償結果と他の画素とがより統一になり、効果を向上することができる画像の不良画素補償方法を提供することである。
【０００５】
本発明の第二目的は、画像の不良画素補償装置を提供することである。
【０００６】
本発明の第三目的は、電子機器を提供することである。
【０００７】
本発明の第四目的は、記憶媒体を提供することである。
【０００８】
上記の目的を達成するために、本発明の第一観点によれば、補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化の傾向をそれぞれ予測し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定するステップと、各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定するステップと、各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定するステップと、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得するステップと、を含む画像の不良画素補償方法を提供する。
【０００９】
本発明の第二観点の実施例によれば、予測モジュール、第一決定モジュール、第二決定モジュール、第三決定モジュール、及び補償モジュールを含み、前記予測モジュールは、補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化の傾向をそれぞれ予測し、前記第一決定モジュールは、補償待ち画像データ中の各々の予め設定された方向に対し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定し、前第二決定モジュールは、記各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定し、前記第三決定モジュールは、各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定し、前記前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記補償モジュールは、不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得する、画像の不良画素補償装置を提供する。
【００１０】
本発明の第三観点の実施例によれば、ケース、プロセッサー、メモリ、回路板及び電源回路を含み、回路板は、ケースに囲まれた空間内に配置され、プロセッサーとメモリは、回路板に配置され、電源回路は、電子機器の各々の回路又は素子に電源を供給することに用いられ、メモリは実行可能なプログラムコードを格納することに用いられ、プロセッサーは、メモリに格納した実行可能なプログラムコードを読み出すことにより実行可能なプログラムコードに対応するプログラムを実行し、前記のいずれの実施例による前記の画像の不良画素補償方法を実行することに用いられる、電子機器を提供する。
【００１１】
本発明の第四観点の実施例によれば、一つ又は複数のプログラムが記憶された記憶媒体を提供し、前記の一つ又は複数のプログラムが機器により実行される際に、前記機器に本発明の第一観点の実施例における画像の不良画素補償方法を実行させる、記憶媒体を提供する。
【００１２】
本発明の実施例の画像の不良画素補償方法によると、各々の予め設定された方向上で不良画素両側の輝度変化傾向及びその差異をそれぞれ予測でき、不良画素両側に対応する不良画素輝度補償値及びその差異をそれぞれ予測でき、その二つの差異を組み合わせて不良画素を補償することに用いる加重因子を決定でき、従って、加重因子に基づき各方向の補償値を加重計算でき、得られた補償結果は他の画素点とより一致するようになり、効果がより良く、特に、複雑な画面における静的不良画素を補償及び修正する際の効果がさらに顕著である。
【００１３】
本発明の他の面及びメリットの一部を以下に説明し、以下の説明により、より著しくなるか、本発明の実施によって理解することができる。
【図面の簡単な説明】
【００１４】
本発明の上述した及び/又は追加した部分及び利点は、以下の図面に合わせた実施例の説明から明瞭且つ理解し易くなる。
【００１５】
【図１】本発明の一つの実施例に係る画像の不良画素補償方法のフローチャートである。
【図２ａ】本発明の一つの実施例に係る感光データの概略図である。
【図２ｂ】本発明の他の一つの実施例に係る感光データの概略図である。
【図３】本発明の他の一つの実施例に係る画像の不良画素補償方法のフローチャートである。
【図４】本発明の他の一つの実施例に係る画像の不良画素補償方法のフローチャートである。
【図５】本発明の他の一つの実施例に係る画像の不良画素補償方法のフローチャートである。
【図６ａ】本発明の実施例に係る補償待ち画像データの概略図である。
【図６ｂ】従来の方法によって図６ａに示す画像データを補償した結果概略図である。
【図６ｃ】本発明の実施例によって図６ａに示す画像データを補償した結果概略図である。
【図７】本発明の一つの実施例に係る画像の不良画素補償装置の構造概略図である。
【図８】本発明一つの実施例に係る電子機器のブロック図である。
【発明を実施するための形態】
【００１６】
以下、本発明の実施例を詳細に説明し、前記実施例の例示は図面に示され、全体的に同一または類似の記号で同一または類似の素子或いは同一または類似の機能を有する素子を示す。図面を参照して説明した以下の実施例は例示的なもので、本発明を解釈するためのものだけで、本発明を限定するものと理解してはいけない。
【００１７】
本発明の実施例が提供した画像の不良画素補償方案は画像センサを有する端末装置に配置されることができる。例えば、携帯電話、タブレットＰＣ、スマートウェアラブル機器などの多くの種類の端末装置があることに留意すべきである。以下、図面を参照して本発明の実施例による画像の不良画素補償方法、装置及び電子機器を説明する。
【００１８】
本発明の以下の実施例において、Ｂａｙｅｒ画像センサが生成する感光データを例にして本発明を説明したが、実際的な応用はＢａｙｅｒ画像センサに限定されたものではなく、他のいずれの画像センサが生成した感光データであってもよい。
【００１９】
位相の画像センサの特徴は、位相の情報を提供することに用いられる画素自体も感光し、得られた輝度値は環境の輝度によって変化される。一般に、普通の画素に比べ、その感光量はより高い（位相の情報の精度を高めるため異なるマイクロレンズを使用する）。
【００２０】
図１は本発明の一つの実施例に係る画像の不良画素補償方法のフローチャートである。
【００２１】
図１に示すように、本発明の実施例による画像の不良画素補償方法は以下のスッテップを含む。
【００２２】
Ｓ１０１において、補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定する。
【００２３】
本発明の実施例において、補償される（補償待ち）画像データは画像センサの感光データであってもよい。画像センサ自体に不良画素が存在するので、画像センサの感光データに感光度の低い画素点が存在するようになり、感光データ中の不良画素と見なせる。即ち、画像センサの不良画素によって画像データ中の不良画素を決定することができる。又は、本発明の他の一つの実施例において、画像データに対して不良画素を検出することにより、前記画像データ中の不良画素を決定することができる。
【００２４】
画像データ中の不良画素を補償するために、不良画素周囲にある他の画素点の輝度情報が予め設定された方向での変化傾向、及び不良画素を分割点とした不良画素両側の輝度情報の変化傾向の差異、不良画素両側の輝度補償値の間の差異など情報に基づき、不良画素の実際の補償値を決定する。
【００２５】
本発明の一つの実施例において、予め設定された方向は以下の規則に基づいて前記複数の予め設定された方向を配置することができる。不良画素を中心にして外側に伸びる八つの方向において、それぞれ二つは互いに反対方向であるため、方向が反対する二つの方向を一つの予め設定された方向の対応する反対両側として合併し、すなわち合計で４つの予め設定された方向がある。
【００２６】
例えば、図２ａは本発明の一つの実施例に係る感光データの概略図である。図２ａに示すように、不良画素を中心とした７×７の領域である。当該領域において、不良画素以外の他の画素点の輝度情報、は不良画素を補償することに用いられる。図２ｂにおいて、前記７×７の領域中には、中心点（不良画素）から外側に延伸する８つの方向には不良画素と同一のチャネル（Ｒチャネル）の画素点だけでなく、不良画素と異なるチャネル（Ｇチャネル及びＢチャネル）の画素点も含まれている。従って、当該７×７の領域に不良画素がない場合、異なるチャネルの画素点を完全に不良画素の輝度として参照でき、その同一のチャネルの画素点の輝度を組み合わせて不良画素の修正値を予測することに合わせて用いられる。
【００２７】
なお、本発明の方案を容易に説明するために、本発明の実施例では図２ａに示した「不良画素を中心にした７×７の領域」のみで不良画素の補償過程を例示的に説明した。しかしながら、実際的な応用においては、当該領域のサイズ・大きさを限定しなく、面積的な画素領域で不良画素を補償でき、例え「不良画素を中心にした９×９の領域」、「不良画素を中心にした１０×１０の領域」などがあり、実際の需要に応じて選択でき、本発明ではそれに対し具体的な限定をしない。
【００２８】
近接点とは不良画素と直接的な近接関係を有する画素点を指す。図面に示すように、領域Ｍ中の不良画素以外の画素点である。
【００２９】
具体的に説明すると、前記４つの方向にそれぞれ対応した４つのベクトルグループを構成し、前記７×７の領域において、不良画素及びその周囲にある各々の画素点の輝度情報を取得し、各々の画素点の方向に基づき、相応の方向に対応するベクトルグループを記憶する。
【００３０】
前記図２ｂに示した４つの方向に対して、それぞれに対応するベクトルグループは、以下のとおりである。
【００３１】
2019507361.tif 000003
2019507361.tif 000004
2019507361.tif 000005
2019507361.tif 000006
その中、
2019507361.tif 000007
は第i方向上でのすべての画素点の輝度値から構成されたベクトルを表し、７つの値を含み、これらの７つの値それぞれは不良画素及び相応の方向での不良画素両側の各３つの画素点に対応し、
2019507361.tif 000008
は図２ｂに示した画像データ中の第i行、第j列に位置する画素点の輝度情報を表し、その中、
2019507361.tif 000009
は図２ｂの不良画素の輝度情報を表する。
【００３２】
その中、それぞれの方向にとっては、不良画素の一方の側の輝度情報の変化傾向とは、当該方向における正の方向での遠端画素点から近端画素点までの輝度情報の変化傾向を指し、他方の側の輝度情報の変化傾向とは、当該方向における負の方向での遠端画素点から近端画素点までの輝度情報の変化傾向を指す。
【００３３】
例えば、第１方向にとっては、不良画素両側の輝度情報の変化傾向それぞれは以下のようである。第１側は、第
2019507361.tif 000010
行、第
2019507361.tif 000011
列に位置する画素点から第
2019507361.tif 000012
行、第
2019507361.tif 000013
列に位置する画素点までの輝度情報の変化傾向である。第２側は、第
2019507361.tif 000014
行、第
2019507361.tif 000015
列に位置する画素点から第
2019507361.tif 000016
行、第
2019507361.tif 000017
列に位置する画素点までの輝度情報の変化傾向である。
【００３４】
本発明の一つの実施例において、前記輝度情報の変化傾向は同一のチャネルの画素点の輝度情報の変化傾向であってもよい。例えば、前記第１方向にとっては、不良画素の両側のＧチャネルに位置する画素点の輝度情報の変化傾向であってもよい。
【００３５】
具体的に説明すると、画素点の輝度情報の変化傾向は各々の画素点の輝度情報を微分して計算し得る。本発明の一つの実施例において、図３に示した実施例によって不良画素両側の輝度変化傾向をそれぞれ予測でき、具体的にはステップＳ３０１〜Ｓ３０２を含む。
【００３６】
Ｓ３０１において、予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と異なるチャネルの画素点の第１輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と異なるチャネルの画素点の第２輝度情報を取得し、前記第１側と前記第２側それぞれは前記不良画素が前記予め設定された方向での両側である。
【００３７】
例えば、第i方向に対しては、
2019507361.tif 000018
では、不良画素に対応する輝度情報元素は
2019507361.tif 000019
と表示することができる。第１側は不良画素の左側（第１方向を例にする）であってもよく、その中、
2019507361.tif 000020
で不良画素左側の第j画素点の輝度情報を表示でき、その場合、前記不良画素の第１側に位置する、不良画素と異なるチャネルの画素点の第１輝度情報は、
2019507361.tif 000021
（例えば、第１方向にとっては、
2019507361.tif 000022
である）と
2019507361.tif 000023
（例えば、第１方向にとっては、
2019507361.tif 000024
である）を含む。第２側は不良画素右側であってもよく、その中、
2019507361.tif 000025
で不良画素右側の第j画素点の輝度情報を表示でき、その場合、前記不良画素の第２側に位置する、不良画素と異なるチャネルの画素点の第１輝度情報は、
2019507361.tif 000026
（例えば、第１方向にとっては、
2019507361.tif 000027
である）と
2019507361.tif 000028
（例えば、第１方向にとっては、
2019507361.tif 000029
である）を含む。
【００３８】
Ｓ３０２において、前記第１輝度情報に基づいて前記不良画素の第１側の第１輝度変化傾向を予測し、前記第２輝度情報に基づいて前記不良画素の第２側の第２輝度変化傾向を予測する。
【００３９】
本発明の一つの実施例において、輝度情報の導関数値で輝度変化傾向を表示できる。
【００４０】
具体的に説明すると、第i方向に対し、第１側の第１輝度変化傾向は、以下の公式で計算できる。
【００４１】
2019507361.tif 000030
、
第２側の第２輝度変化傾向は、以下の公式で計算できる。
2019507361.tif 000031
、
2019507361.tif 000032
は、第１輝度変化傾向であり、
2019507361.tif 000033
は第２輝度変化傾向である。
【００４２】
本発明の一つの実施例において、それぞれの方向にとっては、不良画素両側に対応する不良画素輝度補償値は以下のように理解できる。第１側に対応する輝度補償値とは、当該方向において、不良画素の第１側の輝度情報の変化傾向及び第１側中で不良画素と同一のチャネルの画素点の輝度情報に基づき決定した、不良画素輝度情報を補償することに用いる数値を指す。相応的に、第２側に対応する輝度補償値とは、当該方向において、不良画素の第２側の輝度情報の変化傾向及び第２側中で不良画素と同一のチャネルの画素点の輝度情報に基づき決定した、不良画素輝度情報を補償することに用いる数値を指す。
【００４３】
具体的に説明すると、本発明の一つの実施例において、図４に示した実施例によって相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定し、具体的にステップＳ４０１-Ｓ４０２を含むことができる。
【００４４】
Ｓ４０１において、予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と同一のチャネルの画素点の第３輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と同一のチャネルの画素点の第４輝度情報を取得する。
【００４５】
例えば、第i方向に対しては、前記不良画素の第１側に位置する、前記不良画素と同一のチャネルの画素点の第３輝度情報は、
2019507361.tif 000034
（例えば、第１方向にとっては、
2019507361.tif 000035
である）を含み、前記不良画素の第２側に位置する、前記不良画素と同一のチャネルの画素点の第４輝度情報は、
2019507361.tif 000036
（例えば、第１方向に対しては、
2019507361.tif 000037
である）を含む。
【００４６】
Ｓ４０２において、前記第３輝度情報と前記不良画素の第１側の輝度変化傾向に基づき、第１不良画素輝度補償値を決定し、前記第４輝度情報と前記不良画素の第２側の輝度変化傾向に基づき、第２不良画素輝度補償値を決定する。
【００４７】
具体的に説明すると、第i方向に対し、第１不良画素輝度補償値（
2019507361.tif 000038
で表示する）は、以下の公式で計算できる。
2019507361.tif 000039
、
第２不良画素輝度補償値（
2019507361.tif 000040
で表示）は、以下の公式で計算できる。
2019507361.tif 000041
。
Ｓ１０２において、各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定する。
【００４８】
本発明の一つの実施例において、不良画素両側の輝度変化傾向の差異は不良画素両側の輝度情報の導関数値の差の絶対値で表示できる。
【００４９】
具体的に説明すると、第i方向に対し、不良画素両側の輝度変化傾向の第１差異値
2019507361.tif 000042
は以下である。
2019507361.tif 000043
。
第i方向に対し、不良画素両側に対応する不良画素輝度補償値の第２差異値
2019507361.tif 000044
は以下である。
2019507361.tif 000045
。
Ｓ１０３において、各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定する。
【００５０】
本発明の一つの実施例において、それぞれの方向に対しては、当該方向での不良画素両側に対応する不良画素輝度補償値に基づき一つの不良画素に対する補償値を決定できるので、複数の予め設定された方向でのデータに基づいて対応する複数の補償値を得られる。しかしながら、各方向での不良画素両側の輝度変化傾向が不良画素箇所の輝度に対する予測作用が異なる可能性があり、例えば、不良画素箇所の輝度は、その中の一つの方向のみの輝度変化傾向に一致することがあり、又は、いくつかの方向の輝度変化傾向に関連することがあり、又は、全ての方向の輝度変化傾向に関連することがある。そのため、各方向での補償値を単純に加算すれば、不良画素に対する補償結果が不正確になる問題がある。
【００５１】
そのため、本発明の実施例において、各々の予め設定された方向に対応する第１差異値、第２差異値に基づいて相応の予め設定された方向に対応する補償加重因子を決定でき、第１差異値が小さいほど、第２差異値が小さいほど、対応する補償加重因子が小さくなり、第１差異値が大きいほど、第２差異値が大きいほど、対応する補償加重因子が大きくなる。
【００５２】
具体的に説明すると、本発明の一つの実施例において、図５に示すように、ステップＳ１０３は、具体的にステップＳ５０１〜Ｓ５０３を含むことができる。
【００５３】
Ｓ５０１において、各々の予め設定された方向に対し、相応の予め設定された方向に対応する前記第１不良画素輝度補償値と前記第２不良画素輝度補償値の輝度補償平均値をそれぞれ計算する。
【００５４】
具体的に説明すると、第i方向に対し、それに対応する輝度補償平均値は
2019507361.tif 000046
である。
【００５５】
Ｓ５０２において、各々の予め設定された方向に対し、前記不良画素の輝度情報と相応の予め設定された方向に対応する前記輝度補償平均値の差値をそれぞれ計算し、前記差値に基づいて対応する第１加重値を決定する。
【００５６】
具体的に説明すると、第i方向に対し、以下の公式で前記不良画素の輝度情報と相応の予め設定された方向に対応する前記輝度補償平均値の差値
2019507361.tif 000047
を計算できる。
【００５７】
2019507361.tif 000048
、
その中、
2019507361.tif 000049
は不良画素の輝度情報である。
【００５８】
そして、
2019507361.tif 000050
に基づいて対応する第１加重を決定する。具体的に説明すると、予め設定した規則に基づき各々の
2019507361.tif 000051
に対応する第１加重
2019507361.tif 000052
を決定できる。具体的に説明すると、第１加重の設定規則は実際的な応用の需要に基づいたものである。本発明の一つの実施例において、不良画素の輝度が他の画素点より高い場合、
2019507361.tif 000053
が高くほど、より小さい第１加重を設定することができ、不良画素の輝度が他の画素点より低い場合、
2019507361.tif 000054
小さいほど、より大きい第１加重を設定することができる。従って、各方向に応じる
2019507361.tif 000055
と第１加重の探索テーブル
2019507361.tif 000056
を構成でき、
2019507361.tif 000057
である。
【００５９】
Ｓ５０３において、各々の予め設定された方向に対応する第１差異値、第２差異値のそれぞれに基づき、相応の予め設定された方向の第１加重値を修正し、相応の予め設定された方向に対応する補償加重因子を得る。
【００６０】
第１差異値、第２差異値及第１加重値それぞれは、不良画素両側の補償値差異、不良画素両側の輝度変化傾向の差異、不良画素輝度と補償値との間の差異の三つの方面から不良画素を補償する際の影響を表示する。不良画素補償の精度を高めるために、本発明の実施例は第１差異値、第２差異値及第１加重値に基づき補償加重因子を生成でき、従って、前記三つの方面の要素を総合的に考慮して不良画素を補償でき、補償効果を高めることができる。
【００６１】
具体的に説明すると、画像センサ中の不良画素の具体的な状況に応じて、異なるアルゴリズムを選択することにより第１差異値、第２差異値及第１加重値を計算して補償加重因子を得られる。
【００６２】
本発明の一つの実施例において、第i方向に対し、当該方向に対応する第１差異値、第２差異値と第１加重値を乗算して対応する補償加重因子を得られる。
【００６３】
なお、発明の他の実施例において、他のアルゴリズムによって修正でき、例えば、第１差異値、第２差異値に基づき、予め設定されたアルゴリズムによって計算して修正係数を得られ、当該修正係数と第１加重値を乗算して対応する補償加重因子を得られる。
【００６４】
Ｓ１０４において、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得する。
【００６５】
本発明の一つの実施例において、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値をそれぞれ計算し、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値を加重計算し、計算結果に基づいて前記不良画素を補償することができる。
【００６６】
具体的に説明すると、以下の公式で不良画素の補償結果
2019507361.tif 000058
を計算することができる。
2019507361.tif 000059
、
2019507361.tif 000060
は、第iの予め設定された方向に対応する前記不良画素両側に対応する不良画素輝度補償値の平均値であり、
2019507361.tif 000061
は第iの予め設定された方向に対応する加重値である。
【００６７】
本発明の実施例の画像の不良画素補償方法によると、各々の予め設定された方向上で不良画素両側の輝度変化傾向及びその差異をそれぞれ予測でき、不良画素両側に対応する不良画素輝度補償値及びその差異をそれぞれ予測でき、その二つの差異を組み合わせて不良画素を補償することに用いる加重因子を決定でき、従って、加重因子に基づき各方向の補償値を加重計算でき、得られた補償結果は他の画素点とより一致するようになり、効果がより良く、特に、複雑な画面における静的不良画素を補償及び修正する際の効果がさらに顕著である。
【００６８】
例えば、図６ａは、本発明の実施例に係る補償待ち画像データの概略図である。図６ｂは、従来の方法によって図６ａに示す画像データを補償した結果概略図である。図６ｃは、本発明の実施例によって図６ａに示す画像データを補償した結果概略図である。上記から分かるように、図６ｂの補償結果では、数字「５」の周囲及び５本の垂直線の周囲にはやはり多くの不良画素が存在するが、図６ｃに示した本発明の実施例の補償結果では、数字「５」の周囲及び５本の垂直線の周囲には不良画素数が大幅に減少した。したがって、上述した対比から分かるように、本発明の実施例の画像の不良画素補償方法は不良画素の補償効果を顕著に高めることができる。
【００６９】
なお、本発明の実施例において、前記複数の予め設定された方向は、図２ｂに示した方向を例として説明したが、実際的な応用では、本発明は図２ｂに示した方向に限定されるものではなく、他の方向に広げることができ、ここで説明しない。
【００７０】
本発明は画像の不良画素補償装置をさらに提供する。
【００７１】
図７は本発明の一つの実施例に係る画像の不良画素補償装置の構造概略図である。
【００７２】
図７に示すように、本発明の実施例に係る画像の不良画素補償装置は、予測モジュール１０、第１決定モジュール２０、第２決定モジュール３０、第３決定モジュール４０及び補償モジュール５０を備える。
【００７３】
予測モジュール１０は、補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測することに用いられる。
【００７４】
予測モジュール１０の実現過程は図１に示した実施例を参照することができる。
【００７５】
具体的に説明すると、本発明の一つの実施例において、予測モジュール１０は、
予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と異なるチャネルの画素点の第１輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と異なるチャネルの画素点の第２輝度情報を取得し、前記第１側と前記第２側はそれぞれ前記不良画素が前記予め設定された方向での両側であることと、
前記第１輝度情報に基づいて前記不良画素の第１側の第１輝度変化傾向を予測し、前記第２輝度情報に基づいて前記不良画素の第２側の第２輝度変化傾向を予測することに用いられる。
【００７６】
上述した具体的な実現過程は図３に示した実施例を参照することができる。
【００７７】
第１決定モジュール２０は、補償待ち画像データ中の各々の予め設定された方向に対し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定することに用いられる。
【００７８】
第１決定モジュール２０の実現過程は、図１に示した実施例を参照することができる。
【００７９】
具体的に説明すると、本発明の一つの実施例において、第１決定モジュール２０は、
【００８０】
予め設定された領域内で、各々の予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と同一のチャネルの画素点の第３輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と同一のチャネルの画素点の第４輝度情報を取得することと、
【００８１】
前記第３輝度情報と前記不良画素の第１側の輝度変化傾向に基づき、第１不良画素輝度補償値を決定し、前記第４輝度情報と前記不良画素の第２側の輝度変化傾向に基づき、第２不良画素輝度補償値を決定することに用いられる。
【００８２】
上述した具体的な過程は図４に示した実施例を参照することができる。
【００８３】
第２決定モジュール３０は、各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定することに用いられる。
【００８４】
第２決定モジュール３０の実現過程は、図１に示した実施例を参照することができる。
【００８５】
第３決定モジュール４０は、各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定することに用いられる。
【００８６】
第３決定モジュール４０の実現過程は、図１に示した実施例を参照することができる。
【００８７】
具体的に説明すると、本発明の一つの実施例において、第３決定モジュール４０は、
各々の予め設定された方向に対し、相応の予め設定された方向に対応する前記第１不良画素輝度補償値と前記第２不良画素輝度補償値の輝度補償平均値をそれぞれ計算することと、
各々の予め設定された方向に対し、前記不良画素の輝度情報と相応の予め設定された方向に対応する前記輝度補償平均値の差値をそれぞれ計算し、前記差値に基づいて対応する第１加重値を決定することと、
各々の予め設定された方向に対応する第１差異値、第２差異値のそれぞれに基づき、相応の予め設定された方向の第１加重値を修正し、相応の予め設定された方向に対応する補償加重因子を得ることに用いられる。
【００８８】
上述した具体的な過程は図５に示した実施例を参照することができる。
【００８９】
補償モジュール５０は、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得することに用いられる。
【００９０】
補償モジュール５０の実現過程は、図１に示した実施例を参照することができる。
【００９１】
具体的に説明すると、本発明の一つの実施例において、補償モジュール５０は、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値をそれぞれ計算することと、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値を加重計算し、計算結果に基づいて前記不良画素を補償することに用いられる。
【００９２】
本発明の実施例の画像の不良画素補償装置は、各々の予め設定された方向上で不良画素両側の輝度変化傾向及びその差異をそれぞれ予測でき、不良画素両側に対応する不良画素輝度補償値及びその差異をそれぞれ予測でき、その二つの差異を組み合わせて不良画素を補償することに用いる加重因子を決定でき、従って、加重因子に基づき各方向の補償値を加重計算でき、得られた補償結果は他の画素点とより一致するようになり、効果がより良く、特に、複雑な画面における静的不良画素を補償及び修正する際の効果がさらに顕著である。
【００９３】
図８は一つの例示的な実施例に係る電子機器８００のブロック図である。例えば、電子機器８００としては、携帯電話、ゲームコンソール、タブレットデバイス、医療機器、フィットネス機器、パーソナルデジタル補助装置などがある。
【００９４】
図８を参照すると、電子機器８００は、以下の一つ又は複数のアセンブリを含むことができる。ケース８０２、プロセッサー８０４、メモリ８０６、回路板８０８及び電源回路８１０であり、回路板８０８は、ケース８０２に囲まれた空間内に配置され、プロセッサー８０４とメモリ８０６は、回路板８０８に配置され、電源回路８１０は、前記電子機器の各々の回路又は素子に電源を供給することに用いられ、メモリ８０６は実行可能なプログラムコードを格納することに用いられ、プロセッサー８０４は、メモリ８０６に格納した実行可能なプログラムコードを読み出すことにより実行可能なプログラムコードに対応するプログラムを実行し、前記のいずれの実施例による前記の画像の不良画素補償方法を実行することに用いられる。
【００９５】
プロセッサー８０４は、通常、表示、電話呼び出し、データ通信、カメラ動作及び記録動作に関連する動作などの電子機器８００の全体的な動作を制御する。プロセッサー８０４は前記方法の全て又は一部のステップを完成するように、指示を実行する一つ又は複数のプロセッサー８０４を備えてもよい。なお、プロセッサー８０４は、プロセッサー８０４と他のアセンブリとの間の交換動作を容易にするために、一つ又は複数のモジュールを備えてもよい。例えば、マルチメディアアセンブリとプロセッサー８０４との間の交換動作を容易にするために、プロセッサー８０４はマルチメディアモジュールを備えてもよい。
【００９６】
メモリ８０６は、様々な種類のデータを格納して電子機器８００での動作を支援するように配置される。これらのデータの例として、電子機器８００で動作し得るいずれのアプリケーションプログラム又は方法の指示、連絡先データ、電話帳データ、メッセージ、画像、ビデオ等を含む。メモリ８０６はいずれの種類の揮発性記憶装置、非揮発性記憶装置又はそれらが組み合わせたものから実現でき、例えば、スタティックランダムアクセスメモリ（ＳＲＡＭ）、電気的消去可能プログラマブル読取り専用メモリ（ＥＥＰＲＯＭ）、消去可能プログラマブル読取り専用メモリ（ＥＰＲＯＭ）、プログラマブル読取り専用メモリ（ＰＲＯＭ）、読取り専用メモリ（ＲＯＭ）、磁気メモリ、フラッシュメモリ、磁気ディスク又は光ディスクなどがある。
【００９７】
電源回路８１０は、電子機器８００の様々なアセンブリに電力を供給する。電源回路８１０は、電源管理システム、一つ又は複数の電源、及び電子機器８００の電力の生成、管理及び分配に関連する他のアセンブリを備えてもよい。
【００９８】
例示的な実施例において、電子機器８００は一つ又は複数の特定用途向け集積回路（ＡＳIＣ）、デジタル信号プロセッサー（ＤＳＰ）、デジタル信号処理装置（ＤＳＰＤ）、プログラマブル論理装置（ＰＬＤ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、コントローラ、マイクロコントローラ、マイクロプロセッサ又は他の電子部品などで実現することにより前記方法を実行してもよい。
【００９９】
例示的な実施例において、指示を含むメモリ８０６等の指示を含む非一時的なコンピュータ可読記憶媒体を提供する。電子機器８００のプロセッサー８０４により前記指示を実行して前記方法を完成できる。例えば、前記非一時的なコンピュータ可読記憶媒体は、ＲＯＭ、ランダムアクセスメモリ（ＲＡＭ）、ＣＤ−ＲＯＭ、磁気テープ、フロッピーディスク及び光データ記憶装置等であってもよい。
【０１００】
当業者は、明細書に対する理解、及び明細書に記載された発明に対する実施を通じて、本発明の他の実施形態を容易に得ることができる。本願は、本発明に対する任意の変形、用途、または適応的な変化を含み、このような変形、用途、または適応的な変化は、本発明の一般的な原理に従い、本発明では開示していない本技術分野の公知の知識、または通常の技術手段を含む。明細書と実施例は、ただ例示的なものであって、本発明の本当の範囲と主旨は、以下の特許請求の範囲によって示される。
【０１０１】
本発明は、上記で記述し、図面で図示した特定の構成に限定されず、その範囲を離脱しない状況で、様様な修正と変更を実現できる。本発明の範囲は、添付される特許請求の範囲のみにより限定される。
【図１】
2019507361.tif 000062
【図２ａ】
2019507361.tif 000063
【図２ｂ】
2019507361.tif 000064
【図３】
2019507361.tif 000065
【図４】
2019507361.tif 000066
【図５】
2019507361.tif 000067
【図６ａ】
2019507361.tif 000068
【図６ｂ】
2019507361.tif 000069
【図６ｃ】
2019507361.tif 000070
【図７】
2019507361.tif 000071
【図８】
2019507361.tif 000072
【手続補正書】
【提出日】平成30年3月23日(2018.3.23)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像の不良画素補償方法であって、
補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定するステップと、
各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定するステップと、
各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定するステップと、
前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得するステップと、を含む画像の不良画素補償方法。
【請求項２】
補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測することは、
予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と異なるチャネルの画素点の第１輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と異なるチャネルの画素点の第２輝度情報を取得し、前記第１側と前記第２側はそれぞれ前記不良画素が前記予め設定された方向での両側であるステップと、
前記第１輝度情報に基づいて前記不良画素の第１側の第１輝度変化傾向を予測し、前記第２輝度情報に基づいて前記不良画素の第２側の第２輝度変化傾向を予測するステップと、を含む請求項１に記載の方法。
【請求項３】
補償待ち画像データ中の各々の予め設定された方向に対し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定することは、
予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と同一のチャネルの画素点の第１輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と同一のチャネルの画素点の第２輝度情報を取得するステップと、
前記第１輝度情報と前記不良画素の第１側の輝度変化傾向に基づき、第１不良画素輝度補償値を決定し、前記第２輝度情報と前記不良画素の第２側の輝度変化傾向に基づき、第２不良画素輝度補償値を決定するステップと、を含む請求項１〜２のいずれかに記載の方法。
【請求項４】
各々の予め設定された方向に対応する第１差異値及び第２差異値に基づき、相応の予め設定された方向に対応する補償加重因子をそれぞれ決定することは、
各々の予め設定された方向に対し、相応の予め設定された方向に対応する前記第１不良画素輝度補償値と前記第２不良画素輝度補償値の輝度補償平均値をそれぞれ計算するステップと、
各々の予め設定された方向に対し、前記不良画素の輝度情報と相応の予め設定された方向に対応する前記輝度補償平均値の差値をそれぞれ計算し、前記差値に基づいて対応する加重値を決定するステップと、
各々の予め設定された方向に対応する第１差異値、第２差異値のそれぞれに基づき、相応の予め設定された方向の前記加重値を修正し、相応の予め設定された方向に対応する補償加重因子を得るステップと、を含む請求項３に記載の方法。
【請求項５】
前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、計算結果に基づいて前記不良画素を補償することは、
各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値をそれぞれ計算するステップと、
前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値を加重計算し、計算結果に基づいて前記不良画素を補償するステップと、を含む請求項１〜４のいずれかに記載の方法。
【請求項６】
プロセッサー、及び、メモリを備える画像の不良画素補償装置であって、
前記メモリは、前記プロセッサーに接続され、幾つかのプログラム命令を含み、
前記プロセッサーにより前記プログラム命令を実行する方法は、
補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測するステップと、
補償待ち画像データ中の各々の予め設定された方向に対し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定するステップと、
各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定するステップと、
各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定するステップと、
前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得するステップと、を含む画像の不良画素補償装置。
【請求項７】
補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測することは、
予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と異なるチャネルの画素点の第１輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と異なるチャネルの画素点の第２輝度情報を取得し、前記第１側と前記第２側はそれぞれ前記不良画素が前記予め設定された方向での両側であるステップと、
前記第１輝度情報に前基づいて前記不良画素の第１側の第１輝度変化傾向を予測し、前記第２輝度情報に基づいて前記不良画素の第２側の第２輝度変化傾向を予測するステップと、を含む請求項６に記載の装置。
【請求項８】
補償待ち画像データ中の各々の予め設定された方向に対し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定することは、
予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と同一のチャネルの画素点の第１輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と同一のチャネルの画素点の第２輝度情報を取得するステップと、
前記第１輝度情報と前記不良画素の第１側の輝度変化傾向に基づき、第１不良画素輝度補償値を決定し、前記第２輝度情報と前記不良画素の第２側の輝度変化傾向に基づき、第２不良画素輝度補償値を決定するステップと、を含む請求項６〜７のいずれかに記載の装置。
【請求項９】
各々の予め設定された方向に対応する第１差異値及び第２差異値に基づき、相応の予め設定された方向に対応する補償加重因子をそれぞれ決定することは、
各々の予め設定された方向に対し、相応の予め設定された方向に対応する前記第１不良画素輝度補償値と前記第２不良画素輝度補償値の輝度補償平均値をそれぞれ計算するステップと、
各々の予め設定された方向に対し、前記不良画素の輝度情報と相応の予め設定された方向に対応する前記輝度補償平均値の差値をそれぞれ計算し、前記差値に基づいて対応する加重値を決定するステップと、
各々の予め設定された方向に対応する第１差異値、第２差異値のそれぞれに基づき、相応の予め設定された方向の前記加重値を修正し、相応の予め設定された方向に対応する補償加重因子を得るステップと、を含む請求項８に記載の装置。
【請求項１０】
前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、計算結果に基づいて前記不良画素を補償することは、
各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値をそれぞれ計算するステップと、
前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値を加重計算し、計算結果に基づいて前記不良画素を補償するステップと、を含む請求項６〜９のいずれかに記載の装置。
【請求項１１】
ケース、回路板及び電源回路をさらに備え、回路板はケースに囲まれた空間内に配置され、プロセッサーとメモリは回路板に配置され、電源回路は前記装置の各々の回路に電源を供給する、請求項６〜１０のいずれかに記載の装置。
【請求項１２】
一つ又は複数のプログラムが記憶される非一時的な（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ）コンピュータ可読記憶媒体であって、前記一つ又は複数のプログラムが一つの機器により実行される際、前記機器に画像の不良画素補償方法を実行させ、前記方法は、
補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定するステップと、
各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定するステップと、
各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定するステップと、
前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得するステップと、を含む非一時的な（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ）コンピュータ可読記憶媒体。
【請求項１３】
補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測することは、
予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と異なるチャネルの画素点の第１輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と異なるチャネルの画素点の第２輝度情報を取得し、前記第１側と前記第２側はそれぞれ前記不良画素が前記予め設定された方向での両側であるステップと、
前記第１輝度情報に基づいて前記不良画素の第１側の第１輝度変化傾向を予測し、前記第２輝度情報に基づいて前記不良画素の第２側の第２輝度変化傾向を予測するステップと、を含む請求項１２に記載の非一時的なコンピュータ可読記憶媒体。
【請求項１４】
補償待ち画像データ中の各々の予め設定された方向に対し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定することは、
予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と同一のチャネルの画素点の第１輝度情報を取得し、且つ、前記不良画素の第２側に位置する、且前記不良画素と同一のチャネルの画素点の第２輝度情報を取得するステップと、
前記第１輝度情報と前記不良画素の第１側の輝度変化傾向に基づき、第１不良画素輝度補償値を決定し、前記第２輝度情報と前記不良画素の第２側の輝度変化傾向に基づき、第２不良画素輝度補償値を決定するステップと、を含む請求項１２〜１３のいずれかに記載の非一時的なコンピュータ可読記憶媒体。
【請求項１５】
各々の予め設定された方向に対応する第１差異値及び第２差異値に基づき、相応の予め設定された方向に対応する補償加重因子をそれぞれ決定することは、
各々の予め設定された方向に対し、相応の予め設定された方向に対応する前記第１不良画素輝度補償値と前記第２不良画素輝度補償値の輝度補償平均値をそれぞれ計算するステップと、
各々の予め設定された方向に対し、前記不良画素の輝度情報と相応の予め設定された方向に対応する前記輝度補償平均値の差値をそれぞれ計算し、前記差値に基づいて対応する加重値を決定するステップと、
各々の予め設定された方向に対応する第１差異値、第２差異値のそれぞれに基づき、相応の予め設定された方向の前記加重値を修正し、相応の予め設定された方向に対応する補償加重因子を得るステップと、を含む請求項１４に記載の非一時的なコンピュータ可読記憶媒体。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は画像処理技術分野に関し、特に、画像の不良画素補償方法、装置及び非一時的な（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ）コンピュータ可読記憶媒体に関する。
【背景技術】
【０００２】
科学技術及び製造プロセスの進歩に伴い、画像センサの画素数が日々増加し、多くの画素は製造プロセスで必然的に不良画素が発生する。画像センサ中の不良画素とは位相画素点を指し、当該位相画素点にとっては、コーティング又はコーティングされない原因で同じ照明条件下での該画素点の輝度が他の画素点より高い又は他の画素点より低い。画像センサ自体の不良画素は画質に大きな影響を与え、画像の品質を大幅に低下させる。不良画素の修正は検出及び補償を含み、画像の品質を向上させることができる。
【０００３】
現在、不良画素数によって画像センサの品質を管理・制御し、不良画素数が予め設定された閾値を超える場合、当該製品は出荷できない。また、不良画素の他の管理・制御パラメータとして、いずれの単位領域内の不良画素数も閾値を超えてはいけない。しかし、このような管理・制御にも関わらず、出荷した画像センサの不良画素はやはり存在する。不良画素が存在することで、画像の品質を大幅に低下させる。
【発明の概要】
【０００４】
本発明の少なくとも一つの実施例によれば、補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化の傾向をそれぞれ予測し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定するステップと、各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定するステップと、各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定するステップと、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得するステップと、を含む画像の不良画素補償方法を提供する。
【０００５】
本発明の少なくとも一つの実施例によれば、プロセッサー、及びメモリを備える画像の不良画素補償装置を提供し、前記メモリは、前記プロセッサーに接続され、幾つかのプログラム命令を含み、前記プロセッサーにより前記プログラム命令を実行する方法は、補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化の傾向をそれぞれ予測するステップと、補償待ち画像データ中の各々の予め設定された方向に対し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定するステップと、各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定するステップと、各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定するステップと、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得するステップと、を含む。
【０００６】
本発明の少なくとも一つの実施例によれば、一つ又は複数のプログラムが記憶された非一時的なコンピュータ可読記憶媒体を提供し、前記の一つ又は複数のプログラムが機器により実行される際に、前記機器に以下のような画像の不良画素補償方法を実行させる。前記方法は、補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定するステップと、各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定するステップと、各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定するステップと、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得するステップと、を含む。
【図面の簡単な説明】
【０００７】
本発明の上述した及び/又は追加した部分及び利点は、以下の図面に合わせた実施例の説明から明瞭且つ理解し易くなる。
【０００８】
【図１】本発明の一つの実施例に係る画像の不良画素補償方法のフローチャートである。
【図２ａ】本発明の一つの実施例に係る感光データの概略図である。
【図２ｂ】本発明の他の一つの実施例に係る感光データの概略図である。
【図３】本発明の他の一つの実施例に係る画像の不良画素補償方法のフローチャートである。
【図４】本発明の他の一つの実施例に係る画像の不良画素補償方法のフローチャートである。
【図５】本発明の他の一つの実施例に係る画像の不良画素補償方法のフローチャートである。
【図６ａ】本発明の実施例に係る補償待ち画像データの概略図である。
【図６ｂ】従来の方法によって図６ａに示す画像データを補償した結果概略図である。
【図６ｃ】本発明の実施例によって図６ａに示す画像データを補償した結果概略図である。
【図７】本発明の一つの実施例に係る画像の不良画素補償装置の構造概略図である。
【図８】本発明一つの実施例に係る電子機器のブロック図である。
【発明を実施するための形態】
【０００９】
以下、本発明の実施例を詳細に説明し、前記実施例の例示は図面に示され、全体的に同一または類似の記号で同一または類似の素子或いは同一または類似の機能を有する素子を示す。図面を参照して説明した以下の実施例は例示的なもので、本発明を解釈するためのものだけで、本発明を限定するものと理解してはいけない。
【００１０】
本発明の実施例が提供した画像の不良画素補償方案は画像センサを有する端末装置に配置されることができる。例えば、携帯電話、タブレットＰＣ、スマートウェアラブル機器などの多くの種類の端末装置があることに留意すべきである。以下、図面を参照して本発明の実施例による画像の不良画素補償方法、装置及び電子機器を説明する。
【００１１】
本発明の以下の実施例において、Ｂａｙｅｒ画像センサが生成する感光データを例にして本発明を説明したが、実際的な応用はＢａｙｅｒ画像センサに限定されたものではなく、他のいずれの画像センサが生成した感光データであってもよい。
【００１２】
位相の画像センサの特徴は、位相の情報を提供することに用いられる画素自体も感光し、得られた輝度値は環境の輝度によって変化される。一般に、普通の画素に比べ、その感光量はより高い（位相の情報の精度を高めるため異なるマイクロレンズを使用する）。
【００１３】
本発明の少なくとも一つの実施例によれば、補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定するステップと、各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定するステップと、各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定するステップと、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得するステップと、を含む画像の不良画素補償方法を提供する。
【００１４】
一つの実施例において、補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測することは、予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と異なるチャネルの画素点の第１輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と異なるチャネルの画素点の第２輝度情報を取得し、前記第１側と前記第２側はそれぞれ前記不良画素が前記予め設定された方向での両側であるステップと、前記第１輝度情報に基づいて前記不良画素の第１側の第１輝度変化傾向を予測し、前記第２輝度情報に基づいて前記不良画素の第２側の第２輝度変化傾向を予測するステップと、を含む。
【００１５】
一つの実施例において、補償待ち画像データ中の各々の予め設定された方向に対し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定することは、予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と同一のチャネルの画素点の第３輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と同一のチャネルの画素点の第４輝度情報を取得するステップと、前記第３輝度情報と前記不良画素の第１側の輝度変化傾向に基づき、第１不良画素輝度補償値を決定し、前記第４輝度情報と前記不良画素の第２側の輝度変化傾向に基づき、第２不良画素輝度補償値を決定するステップと、を含む。
【００１６】
一つの実施例において、各々の予め設定された方向に対応する第１差異値及び第２差異値に基づき、相応の予め設定された方向に対応する補償加重因子をそれぞれ決定することは、各々の予め設定された方向に対し、相応の予め設定された方向に対応する前記第１不良画素輝度補償値と前記第２不良画素輝度補償値の輝度補償平均値をそれぞれ計算するステップと、各々の予め設定された方向に対し、前記不良画素の輝度情報と相応の予め設定された方向に対応する前記輝度補償平均値の差値をそれぞれ計算し、前記差値に基づいて対応する第１加重値を決定するステップと、各々の予め設定された方向に対応する第１差異値、第２差異値のそれぞれに基づき、相応の予め設定された方向の第１加重値を修正し、相応の予め設定された方向に対応する補償加重因子を得るステップと、を含む。
【００１７】
一つの実施例において、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、計算結果に基づいて前記不良画素を補償することは、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値をそれぞれ計算するステップと、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値を加重計算し、計算結果に基づいて前記不良画素を補償するステップと、を含む。
【００１８】
本発明の少なくとも一つの実施例によれば、補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測することに用いられる予測モジュールと、補償待ち画像データ中の各々の予め設定された方向に対し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定することに用いられる第１決定モジュールと、各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定することに用いられる第２決定モジュールと、各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定することに用いられる第３決定モジュールと、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得することに用いられる補償モジュールと、を含む画像の不良画素補償装置を提供する。
【００１９】
一つの実施例において、前記予測モジュールは、予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と異なるチャネルの画素点の第１輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と異なるチャネルの画素点の第２輝度情報を取得し、前記第１側と前記第２側はそれぞれ前記不良画素が前記予め設定された方向での両側であることと、前記第１輝度情報に基づいて前記不良画素の第１側の第１輝度変化傾向を予測し、前記第２輝度情報に基づいて前記不良画素の第２側の第２輝度変化傾向を予測することに用いられる。
【００２０】
一つの実施例において、前記第１決定モジュールは、予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と同一のチャネルの画素点の第３輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と同一のチャネルの画素点の第４輝度情報を取得することと、前記第３輝度情報と前記不良画素の第１側の輝度変化傾向に基づき、第１不良画素輝度補償値を決定し、前記第４輝度情報と前記不良画素の第２側の輝度変化傾向に基づき、第２不良画素輝度補償値を決定することに用いられる。
【００２１】
一つの実施例において、前記第３決定モジュールは、各々の予め設定された方向に対し、相応の予め設定された方向に対応する前記第１不良画素輝度補償値と前記第２不良画素輝度補償値の輝度補償平均値をそれぞれ計算することと、各々の予め設定された方向に対し、前記不良画素の輝度情報と相応の予め設定された方向に対応する前記輝度補償平均値の差値をそれぞれ計算し、前記差値に基づいて対応する第１加重値を決定することと、各々の予め設定された方向に対応する第１差異値、第２差異値のそれぞれに基づき、相応の予め設定された方向の第１加重値を修正し、相応の予め設定された方向に対応する補償加重因子を得ることに用いられる。
【００２２】
一つの実施例において、前記補償モジュールは、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値をそれぞれ計算することと、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値を加重計算し、計算結果に基づいて前記不良画素を補償することに用いられる。
【００２３】
本発明の少なくとも一つの実施例によれば、ケース、プロセッサー、メモリ、回路板及び電源回路を備える電子機器を提供し、回路板はケースに囲まれた空間内に配置され、プロセッサーとメモリは回路板に配置されており、電源回路は前記電子機器の各々の回路又は素子に電源を供給することに用いられ、メモリは実行可能なプログラムコードを格納することに用いられ、プロセッサーはメモリに格納した実行可能なプログラムコードを読み出すことにより実行可能なプログラムコードに対応するプログラムを実行し、前記画像の不良画素補償方法を実行することに用いられる。
【００２４】
本発明の少なくとも一つの実施例によれば、一つ又は複数のプログラムが記憶される記憶媒体を提供し、前記の一つ又は複数のプログラムが機器により実行される際に、前記機器に前記画像の不良画素補償方法を実行させる。
【００２５】
図１は本発明の一つの実施例に係る画像の不良画素補償方法のフローチャートである。
【００２６】
図１に示すように、本発明の実施例による画像の不良画素補償方法は以下のスッテップを含む。
【００２７】
Ｓ１０１において、補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定する。
【００２８】
本発明の実施例において、補償される（補償待ち）画像データは画像センサの感光データであってもよい。画像センサ自体に不良画素が存在するので、画像センサの感光データに感光度の低い画素点が存在するようになり、感光データ中の不良画素と見なせる。即ち、画像センサの不良画素によって画像データ中の不良画素を決定することができる。又は、本発明の他の一つの実施例において、画像データに対して不良画素を検出することにより、前記画像データ中の不良画素を決定することができる。
【００２９】
画像データ中の不良画素を補償するために、不良画素周囲にある他の画素点の輝度情報が予め設定された方向での変化傾向、及び不良画素を分割点とした不良画素両側の輝度情報の変化傾向の差異、不良画素両側の輝度補償値の間の差異など情報に基づき、不良画素の実際の補償値を決定する。
【００３０】
本発明の一つの実施例において、予め設定された方向は以下の規則に基づいて前記複数の予め設定された方向を配置することができる。不良画素を中心にして外側に伸びる八つの方向において、それぞれ二つは互いに反対方向であるため、方向が反対する二つの方向を一つの予め設定された方向の対応する反対両側として合併し、すなわち合計で４つの予め設定された方向がある。
【００３１】
例えば、図２ａは本発明の一つの実施例に係る感光データの概略図である。図２ａに示すように、不良画素を中心とした７×７の領域である。当該領域において、不良画素以外の他の画素点の輝度情報、は不良画素を補償することに用いられる。図２ｂにおいて、前記７×７の領域中には、中心点（不良画素）から外側に延伸する８つの方向には不良画素と同一のチャネル（Ｒチャネル）の画素点だけでなく、不良画素と異なるチャネル（Ｇチャネル及びＢチャネル）の画素点も含まれている。従って、当該７×７の領域に不良画素がない場合、異なるチャネルの画素点を完全に不良画素の輝度として参照でき、その同一のチャネルの画素点の輝度を組み合わせて不良画素の修正値を予測することに合わせて用いられる。
【００３２】
なお、本発明の方案を容易に説明するために、本発明の実施例では図２ａに示した「不良画素を中心にした７×７の領域」のみで不良画素の補償過程を例示的に説明した。しかしながら、実際的な応用においては、当該領域のサイズ・大きさを限定しなく、面積的な画素領域で不良画素を補償でき、例え「不良画素を中心にした９×９の領域」、「不良画素を中心にした１０×１０の領域」などがあり、実際の需要に応じて選択でき、本発明ではそれに対し具体的な限定をしない。
【００３３】
近接点とは不良画素と直接的な近接関係を有する画素点を指す。図面に示すように、領域Ｍ中の不良画素以外の画素点である。
【００３４】
具体的に説明すると、前記４つの方向にそれぞれ対応した４つのベクトルグループを構成し、前記７×７の領域において、不良画素及びその周囲にある各々の画素点の輝度情報を取得し、各々の画素点の方向に基づき、相応の方向に対応するベクトルグループを記憶する。
【００３５】
前記図２ｂに示した４つの方向に対して、それぞれに対応するベクトルグループは、以下のとおりである。
【００３６】
2019507361.tif 000073
2019507361.tif 000074
2019507361.tif 000075
2019507361.tif 000076
その中、
2019507361.tif 000077
は第i方向上でのすべての画素点の輝度値から構成されたベクトルを表し、７つの値を含み、これらの７つの値それぞれは不良画素及び相応の方向での不良画素両側の各３つの画素点に対応し、
2019507361.tif 000078
は図２ｂに示した画像データ中の第i行、第j列に位置する画素点の輝度情報を表し、その中、
2019507361.tif 000079
は図２ｂの不良画素の輝度情報を表する。
【００３７】
その中、それぞれの方向にとっては、不良画素の一方の側の輝度情報の変化傾向とは、当該方向における正の方向での遠端画素点から近端画素点までの輝度情報の変化傾向を指し、他方の側の輝度情報の変化傾向とは、当該方向における負の方向での遠端画素点から近端画素点までの輝度情報の変化傾向を指す。
【００３８】
例えば、第１方向にとっては、不良画素両側の輝度情報の変化傾向それぞれは以下のようである。第１側は、第
2019507361.tif 000080
行、第
2019507361.tif 000081
列に位置する画素点から第
2019507361.tif 000082
行、第
2019507361.tif 000083
列に位置する画素点までの輝度情報の変化傾向である。第２側は、第
2019507361.tif 000084
行、第
2019507361.tif 000085
列に位置する画素点から第
2019507361.tif 000086
行、第
2019507361.tif 000087
列に位置する画素点までの輝度情報の変化傾向である。
【００３９】
本発明の一つの実施例において、前記輝度情報の変化傾向は同一のチャネルの画素点の輝度情報の変化傾向であってもよい。例えば、前記第１方向にとっては、不良画素の両側のＧチャネルに位置する画素点の輝度情報の変化傾向であってもよい。
【００４０】
具体的に説明すると、画素点の輝度情報の変化傾向は各々の画素点の輝度情報を微分して計算し得る。本発明の一つの実施例において、図３に示した実施例によって不良画素両側の輝度変化傾向をそれぞれ予測でき、具体的にはステップＳ３０１〜Ｓ３０２を含む。
【００４１】
Ｓ３０１において、予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と異なるチャネルの画素点の第１輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と異なるチャネルの画素点の第２輝度情報を取得し、前記第１側と前記第２側それぞれは前記不良画素が前記予め設定された方向での両側である。
【００４２】
例えば、第i方向に対しては、
2019507361.tif 000088
では、不良画素に対応する輝度情報元素は
2019507361.tif 000089
と表示することができる。第１側は不良画素の左側（第１方向を例にする）であってもよく、その中、
2019507361.tif 000090
で不良画素左側の第j画素点の輝度情報を表示でき、その場合、前記不良画素の第１側に位置する、不良画素と異なるチャネルの画素点の第１輝度情報は、
2019507361.tif 000091
（例えば、第１方向にとっては、
2019507361.tif 000092
である）と
2019507361.tif 000093
（例えば、第１方向にとっては、
2019507361.tif 000094
である）を含む。第２側は不良画素右側であってもよく、その中、
2019507361.tif 000095
で不良画素右側の第j画素点の輝度情報を表示でき、その場合、前記不良画素の第２側に位置する、不良画素と異なるチャネルの画素点の第１輝度情報は、
2019507361.tif 000096
（例えば、第１方向にとっては、
2019507361.tif 000097
である）と
2019507361.tif 000098
（例えば、第１方向にとっては、
2019507361.tif 000099
である）を含む。
【００４３】
Ｓ３０２において、前記第１輝度情報に基づいて前記不良画素の第１側の第１輝度変化傾向を予測し、前記第２輝度情報に基づいて前記不良画素の第２側の第２輝度変化傾向を予測する。
【００４４】
本発明の一つの実施例において、輝度情報の導関数値で輝度変化傾向を表示できる。
【００４５】
具体的に説明すると、第i方向に対し、第１側の第１輝度変化傾向は、以下の公式で計算できる。
【００４６】
2019507361.tif 000100
、
第２側の第２輝度変化傾向は、以下の公式で計算できる。
2019507361.tif 000101
、
2019507361.tif 000102
は、第１輝度変化傾向であり、
2019507361.tif 000103
は第２輝度変化傾向である。
【００４７】
本発明の一つの実施例において、それぞれの方向にとっては、不良画素両側に対応する不良画素輝度補償値は以下のように理解できる。第１側に対応する輝度補償値とは、当該方向において、不良画素の第１側の輝度情報の変化傾向及び第１側中で不良画素と同一のチャネルの画素点の輝度情報に基づき決定した、不良画素輝度情報を補償することに用いる数値を指す。相応的に、第２側に対応する輝度補償値とは、当該方向において、不良画素の第２側の輝度情報の変化傾向及び第２側中で不良画素と同一のチャネルの画素点の輝度情報に基づき決定した、不良画素輝度情報を補償することに用いる数値を指す。
【００４８】
具体的に説明すると、本発明の一つの実施例において、図４に示した実施例によって相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定し、具体的にステップＳ４０１-Ｓ４０２を含むことができる。
【００４９】
Ｓ４０１において、予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と同一のチャネルの画素点の第３輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と同一のチャネルの画素点の第４輝度情報を取得する。
【００５０】
例えば、第i方向に対しては、前記不良画素の第１側に位置する、前記不良画素と同一のチャネルの画素点の第３輝度情報は、
2019507361.tif 000104
（例えば、第１方向にとっては、
2019507361.tif 000105
である）を含み、前記不良画素の第２側に位置する、前記不良画素と同一のチャネルの画素点の第４輝度情報は、
2019507361.tif 000106
（例えば、第１方向に対しては、
2019507361.tif 000107
である）を含む。
【００５１】
Ｓ４０２において、前記第３輝度情報と前記不良画素の第１側の輝度変化傾向に基づき、第１不良画素輝度補償値を決定し、前記第４輝度情報と前記不良画素の第２側の輝度変化傾向に基づき、第２不良画素輝度補償値を決定する。
【００５２】
具体的に説明すると、第i方向に対し、第１不良画素輝度補償値（
2019507361.tif 000108
で表示する）は、以下の公式で計算できる。
2019507361.tif 000109
、
第２不良画素輝度補償値（
2019507361.tif 000110
で表示）は、以下の公式で計算できる。
2019507361.tif 000111
。
Ｓ１０２において、各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定する。
【００５３】
本発明の一つの実施例において、不良画素両側の輝度変化傾向の差異は不良画素両側の輝度情報の導関数値の差の絶対値で表示できる。
【００５４】
具体的に説明すると、第i方向に対し、不良画素両側の輝度変化傾向の第１差異値
2019507361.tif 000112
は以下である。
2019507361.tif 000113
。
第i方向に対し、不良画素両側に対応する不良画素輝度補償値の第２差異値
2019507361.tif 000114
は以下である。
2019507361.tif 000115
。
Ｓ１０３において、各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定する。
【００５５】
本発明の一つの実施例において、それぞれの方向に対しては、当該方向での不良画素両側に対応する不良画素輝度補償値に基づき一つの不良画素に対する補償値を決定できるので、複数の予め設定された方向でのデータに基づいて対応する複数の補償値を得られる。しかしながら、各方向での不良画素両側の輝度変化傾向が不良画素箇所の輝度に対する予測作用が異なる可能性があり、例えば、不良画素箇所の輝度は、その中の一つの方向のみの輝度変化傾向に一致することがあり、又は、いくつかの方向の輝度変化傾向に関連することがあり、又は、全ての方向の輝度変化傾向に関連することがある。そのため、各方向での補償値を単純に加算すれば、不良画素に対する補償結果が不正確になる問題がある。
【００５６】
そのため、本発明の実施例において、各々の予め設定された方向に対応する第１差異値、第２差異値に基づいて相応の予め設定された方向に対応する補償加重因子を決定でき、第１差異値が小さいほど、第２差異値が小さいほど、対応する補償加重因子が小さくなり、第１差異値が大きいほど、第２差異値が大きいほど、対応する補償加重因子が大きくなる。
【００５７】
具体的に説明すると、本発明の一つの実施例において、図５に示すように、ステップＳ１０３は、具体的にステップＳ５０１〜Ｓ５０３を含むことができる。
【００５８】
Ｓ５０１において、各々の予め設定された方向に対し、相応の予め設定された方向に対応する前記第１不良画素輝度補償値と前記第２不良画素輝度補償値の輝度補償平均値をそれぞれ計算する。
【００５９】
具体的に説明すると、第i方向に対し、それに対応する輝度補償平均値は
2019507361.tif 000116
である。
【００６０】
Ｓ５０２において、各々の予め設定された方向に対し、前記不良画素の輝度情報と相応の予め設定された方向に対応する前記輝度補償平均値の差値をそれぞれ計算し、前記差値に基づいて対応する第１加重値を決定する。
【００６１】
具体的に説明すると、第i方向に対し、以下の公式で前記不良画素の輝度情報と相応の予め設定された方向に対応する前記輝度補償平均値の差値
2019507361.tif 000117
を計算できる。
【００６２】
2019507361.tif 000118
、
その中、
2019507361.tif 000119
は不良画素の輝度情報である。
【００６３】
そして、
2019507361.tif 000120
に基づいて対応する第１加重を決定する。具体的に説明すると、予め設定した規則に基づき各々の
2019507361.tif 000121
に対応する第１加重
2019507361.tif 000122
を決定できる。具体的に説明すると、第１加重の設定規則は実際的な応用の需要に基づいたものである。本発明の一つの実施例において、不良画素の輝度が他の画素点より高い場合、
2019507361.tif 000123
が高くほど、より小さい第１加重を設定することができ、不良画素の輝度が他の画素点より低い場合、
2019507361.tif 000124
小さいほど、より大きい第１加重を設定することができる。従って、各方向に応じる
2019507361.tif 000125
と第１加重の探索テーブル
2019507361.tif 000126
を構成でき、
2019507361.tif 000127
である。
【００６４】
Ｓ５０３において、各々の予め設定された方向に対応する第１差異値、第２差異値のそれぞれに基づき、相応の予め設定された方向の第１加重値を修正し、相応の予め設定された方向に対応する補償加重因子を得る。
【００６５】
第１差異値、第２差異値及第１加重値それぞれは、不良画素両側の補償値差異、不良画素両側の輝度変化傾向の差異、不良画素輝度と補償値との間の差異の三つの方面から不良画素を補償する際の影響を表示する。不良画素補償の精度を高めるために、本発明の実施例は第１差異値、第２差異値及第１加重値に基づき補償加重因子を生成でき、従って、前記三つの方面の要素を総合的に考慮して不良画素を補償でき、補償効果を高めることができる。
【００６６】
具体的に説明すると、画像センサ中の不良画素の具体的な状況に応じて、異なるアルゴリズムを選択することにより第１差異値、第２差異値及第１加重値を計算して補償加重因子を得られる。
【００６７】
本発明の一つの実施例において、第i方向に対し、当該方向に対応する第１差異値、第２差異値と第１加重値を乗算して対応する補償加重因子を得られる。
【００６８】
なお、発明の他の実施例において、他のアルゴリズムによって修正でき、例えば、第１差異値、第２差異値に基づき、予め設定されたアルゴリズムによって計算して修正係数を得られ、当該修正係数と第１加重値を乗算して対応する補償加重因子を得られる。
【００６９】
Ｓ１０４において、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得する。
【００７０】
本発明の一つの実施例において、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値をそれぞれ計算し、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値を加重計算し、計算結果に基づいて前記不良画素を補償することができる。
【００７１】
具体的に説明すると、以下の公式で不良画素の補償結果
2019507361.tif 000128
を計算することができる。
2019507361.tif 000129
、
2019507361.tif 000130
は、第iの予め設定された方向に対応する前記不良画素両側に対応する不良画素輝度補償値の平均値であり、
2019507361.tif 000131
は第iの予め設定された方向に対応する加重値である。
【００７２】
本発明の実施例の画像の不良画素補償方法によると、各々の予め設定された方向上で不良画素両側の輝度変化傾向及びその差異をそれぞれ予測でき、不良画素両側に対応する不良画素輝度補償値及びその差異をそれぞれ予測でき、その二つの差異を組み合わせて不良画素を補償することに用いる加重因子を決定でき、従って、加重因子に基づき各方向の補償値を加重計算でき、得られた補償結果は他の画素点とより一致するようになり、効果がより良く、特に、複雑な画面における静的不良画素を補償及び修正する際の効果がさらに顕著である。
【００７３】
例えば、図６ａは、本発明の実施例に係る補償待ち画像データの概略図である。図６ｂは、従来の方法によって図６ａに示す画像データを補償した結果概略図である。図６ｃは、本発明の実施例によって図６ａに示す画像データを補償した結果概略図である。上記から分かるように、図６ｂの補償結果では、数字「５」の周囲及び５本の垂直線の周囲にはやはり多くの不良画素が存在するが、図６ｃに示した本発明の実施例の補償結果では、数字「５」の周囲及び５本の垂直線の周囲には不良画素数が大幅に減少した。したがって、上述した対比から分かるように、本発明の実施例の画像の不良画素補償方法は不良画素の補償効果を顕著に高めることができる。
【００７４】
なお、本発明の実施例において、前記複数の予め設定された方向は、図２ｂに示した方向を例として説明したが、実際的な応用では、本発明は図２ｂに示した方向に限定されるものではなく、他の方向に広げることができ、ここで説明しない。
【００７５】
本発明は画像の不良画素補償装置をさらに提供する。
【００７６】
図７は本発明の一つの実施例に係る画像の不良画素補償装置の構造概略図である。
【００７７】
図７に示すように、本発明の実施例に係る画像の不良画素補償装置は、予測モジュール１０、第１決定モジュール２０、第２決定モジュール３０、第３決定モジュール４０及び補償モジュール５０を備える。
【００７８】
予測モジュール１０は、補償待ち画像データ中の各々の予め設定された方向に対し、不良画素両側の輝度変化傾向をそれぞれ予測することに用いられる。
【００７９】
予測モジュール１０の実現過程は図１に示した実施例を参照することができる。
【００８０】
具体的に説明すると、本発明の一つの実施例において、予測モジュール１０は、
予め設定された領域内で、それぞれの予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と異なるチャネルの画素点の第１輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と異なるチャネルの画素点の第２輝度情報を取得し、前記第１側と前記第２側はそれぞれ前記不良画素が前記予め設定された方向での両側であることと、
前記第１輝度情報に基づいて前記不良画素の第１側の第１輝度変化傾向を予測し、前記第２輝度情報に基づいて前記不良画素の第２側の第２輝度変化傾向を予測することに用いられる。
【００８１】
上述した具体的な実現過程は図３に示した実施例を参照することができる。
【００８２】
第１決定モジュール２０は、補償待ち画像データ中の各々の予め設定された方向に対し、相応の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値をそれぞれ決定することに用いられる。
【００８３】
第１決定モジュール２０の実現過程は、図１に示した実施例を参照することができる。
【００８４】
具体的に説明すると、本発明の一つの実施例において、第１決定モジュール２０は、
【００８５】
予め設定された領域内で、各々の予め設定された方向に対し、前記不良画素の第１側に位置する、前記不良画素と同一のチャネルの画素点の第３輝度情報を取得し、且つ、前記不良画素の第２側に位置する、前記不良画素と同一のチャネルの画素点の第４輝度情報を取得することと、
【００８６】
前記第３輝度情報と前記不良画素の第１側の輝度変化傾向に基づき、第１不良画素輝度補償値を決定し、前記第４輝度情報と前記不良画素の第２側の輝度変化傾向に基づき、第２不良画素輝度補償値を決定することに用いられる。
【００８７】
上述した具体的な過程は図４に示した実施例を参照することができる。
【００８８】
第２決定モジュール３０は、各々の予め設定された方向での不良画素両側の輝度変化傾向の第１差異値をそれぞれ決定し、各々の予め設定された方向での前記不良画素両側に対応する不良画素輝度補償値の第２差異値をそれぞれ決定することに用いられる。
【００８９】
第２決定モジュール３０の実現過程は、図１に示した実施例を参照することができる。
【００９０】
第３決定モジュール４０は、各々の予め設定された方向に対応する第１差異値及び第２差異値のそれぞれに基づき、相応の予め設定された方向に対応する補償加重因子を決定することに用いられる。
【００９１】
第３決定モジュール４０の実現過程は、図１に示した実施例を参照することができる。
【００９２】
具体的に説明すると、本発明の一つの実施例において、第３決定モジュール４０は、
各々の予め設定された方向に対し、相応の予め設定された方向に対応する前記第１不良画素輝度補償値と前記第２不良画素輝度補償値の輝度補償平均値をそれぞれ計算することと、
各々の予め設定された方向に対し、前記不良画素の輝度情報と相応の予め設定された方向に対応する前記輝度補償平均値の差値をそれぞれ計算し、前記差値に基づいて対応する第１加重値を決定することと、
各々の予め設定された方向に対応する第１差異値、第２差異値のそれぞれに基づき、相応の予め設定された方向の第１加重値を修正し、相応の予め設定された方向に対応する補償加重因子を得ることに用いられる。
【００９３】
上述した具体的な過程は図５に示した実施例を参照することができる。
【００９４】
補償モジュール５０は、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値を加重計算し、前記不良画素に対する補償結果を取得することに用いられる。
【００９５】
補償モジュール５０の実現過程は、図１に示した実施例を参照することができる。
【００９６】
具体的に説明すると、本発明の一つの実施例において、補償モジュール５０は、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値をそれぞれ計算することと、前記補償加重因子に基づき、各々の予め設定された方向に対応する、前記不良画素両側に対応する不良画素輝度補償値の平均値を加重計算し、計算結果に基づいて前記不良画素を補償することに用いられる。
【００９７】
本発明の実施例の画像の不良画素補償装置は、各々の予め設定された方向上で不良画素両側の輝度変化傾向及びその差異をそれぞれ予測でき、不良画素両側に対応する不良画素輝度補償値及びその差異をそれぞれ予測でき、その二つの差異を組み合わせて不良画素を補償することに用いる加重因子を決定でき、従って、加重因子に基づき各方向の補償値を加重計算でき、得られた補償結果は他の画素点とより一致するようになり、効果がより良く、特に、複雑な画面における静的不良画素を補償及び修正する際の効果がさらに顕著である。
【００９８】
図８は一つの例示的な実施例に係る電子機器８００のブロック図である。例えば、電子機器８００としては、携帯電話、ゲームコンソール、タブレットデバイス、医療機器、フィットネス機器、パーソナルデジタル補助装置などがある。
【００９９】
図８を参照すると、電子機器８００は、以下の一つ又は複数のアセンブリを含むことができる。ケース８０２、プロセッサー８０４、メモリ８０６、回路板８０８及び電源回路８１０であり、回路板８０８は、ケース８０２に囲まれた空間内に配置され、プロセッサー８０４とメモリ８０６は、回路板８０８に配置され、電源回路８１０は、前記電子機器の各々の回路又は素子に電源を供給することに用いられ、メモリ８０６は実行可能なプログラムコードを格納することに用いられ、プロセッサー８０４は、メモリ８０６に格納した実行可能なプログラムコードを読み出すことにより実行可能なプログラムコードに対応するプログラムを実行し、前記のいずれの実施例による前記の画像の不良画素補償方法を実行することに用いられる。
【０１００】
プロセッサー８０４は、通常、表示、電話呼び出し、データ通信、カメラ動作及び記録動作に関連する動作などの電子機器８００の全体的な動作を制御する。プロセッサー８０４は前記方法の全て又は一部のステップを完成するように、指示を実行する一つ又は複数のプロセッサー８０４を備えてもよい。なお、プロセッサー８０４は、プロセッサー８０４と他のアセンブリとの間の交換動作を容易にするために、一つ又は複数のモジュールを備えてもよい。例えば、マルチメディアアセンブリとプロセッサー８０４との間の交換動作を容易にするために、プロセッサー８０４はマルチメディアモジュールを備えてもよい。
【０１０１】
メモリ８０６は、様々な種類のデータを格納して電子機器８００での動作を支援するように配置される。これらのデータの例として、電子機器８００で動作し得るいずれのアプリケーションプログラム又は方法の指示、連絡先データ、電話帳データ、メッセージ、画像、ビデオ等を含む。メモリ８０６はいずれの種類の揮発性記憶装置、非揮発性記憶装置又はそれらが組み合わせたものから実現でき、例えば、スタティックランダムアクセスメモリ（ＳＲＡＭ）、電気的消去可能プログラマブル読取り専用メモリ（ＥＥＰＲＯＭ）、消去可能プログラマブル読取り専用メモリ（ＥＰＲＯＭ）、プログラマブル読取り専用メモリ（ＰＲＯＭ）、読取り専用メモリ（ＲＯＭ）、磁気メモリ、フラッシュメモリ、磁気ディスク又は光ディスクなどがある。
【０１０２】
電源回路８１０は、電子機器８００の様々なアセンブリに電力を供給する。電源回路８１０は、電源管理システム、一つ又は複数の電源、及び電子機器８００の電力の生成、管理及び分配に関連する他のアセンブリを備えてもよい。
【０１０３】
例示的な実施例において、電子機器８００は一つ又は複数の特定用途向け集積回路（ＡＳIＣ）、デジタル信号プロセッサー（ＤＳＰ）、デジタル信号処理装置（ＤＳＰＤ）、プログラマブル論理装置（ＰＬＤ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、コントローラ、マイクロコントローラ、マイクロプロセッサ又は他の電子部品などで実現することにより前記方法を実行してもよい。
【０１０４】
例示的な実施例において、指示を含むメモリ８０６等の指示を含む非一時的なコンピュータ可読記憶媒体を提供する。電子機器８００のプロセッサー８０４により前記指示を実行して前記方法を完成できる。例えば、前記非一時的なコンピュータ可読記憶媒体は、ＲＯＭ、ランダムアクセスメモリ（ＲＡＭ）、ＣＤ−ＲＯＭ、磁気テープ、フロッピーディスク及び光データ記憶装置等であってもよい。
【０１０５】
当業者は、明細書に対する理解、及び明細書に記載された発明に対する実施を通じて、本発明の他の実施形態を容易に得ることができる。本願は、本発明に対する任意の変形、用途、または適応的な変化を含み、このような変形、用途、または適応的な変化は、本発明の一般的な原理に従い、本発明では開示していない本技術分野の公知の知識、または通常の技術手段を含む。明細書と実施例は、ただ例示的なものであって、本発明の本当の範囲と主旨は、以下の特許請求の範囲によって示される。
【０１０６】
本発明は、上記で記述し、図面で図示した特定の構成に限定されず、その範囲を離脱しない状況で、様様な修正と変更を実現できる。本発明の範囲は、添付される特許請求の範囲のみにより限定される。
【手続補正４】
【補正対象書類名】図面
【補正対象項目名】全図
【補正方法】変更
【補正の内容】
【図１】
2019507361.tif 000132
【図２ａ】
2019507361.tif 000133
【図２ｂ】
2019507361.tif 000134
【図３】
2019507361.tif 000135
【図４】
2019507361.tif 000136
【図５】
2019507361.tif 000137
【図６ａ】
2019507361.tif 000138
【図６ｂ】
2019507361.tif 000139
【図６ｃ】
2019507361.tif 000140
【図７】
2019507361.tif 000141
【図８】
2019507361.tif 000142
【国際調査報告】
2019507361.tif 000143
2019507361.tif 000144
2019507361.tif 000145
2019507361.tif 000146