(57)【要約】【課題】データ圧縮伸長処理を経た１フレーム前の出力画像データを用いて巡回型のＮＲ処理を行う際に、ＮＲ帰還率が１００％の状態となって出力画像に残像が残る状態を良好に回避する。【解決手段】入力画像データおよび１フレーム前の出力画像データに基づいてＮＲ処理量を算出する。このＮＲ処理量を、圧縮誤差情報に基づいて、ＮＲ帰還率が１００％未満の画素については補正することなく出力し、ノイズリダクションのＮＲ帰還率が１００％以上の画素についてはその帰還率が１００％未満となるように補正して出力する。入力画像データに、補正後のＮＲ処理量を加算して出力画像データを得る。ＮＲ帰還率が１００％以上になると判断される画素についてのみ、ＮＲ処理量を、帰還率が１００％未満となるように補正して使用する。ＮＲ帰還率が１００％の状態となって出力画像に残像が残る状態を、ＮＲ効果を維持しつつ回避できる。【選択図】図２
2012253645.tif 000002
【特許請求の範囲】
【請求項１】
入力画像データおよびデータ圧縮伸長処理を経た１フレーム前の出力画像データに基づいてノイズリダクション処理量を算出するノイズリダクション処理量算出部と、
上記ノイズリダクション処理量算出部で算出された上記ノイズリダクション処理量を、圧縮誤差情報に基づいて、ノイズリダクションの帰還率が１００％未満の画素については補正することなく出力し、ノイズリダクションの帰還率が１００％以上の画素については該帰還率が１００％未満となるように補正して出力する帰還率補正部と、
上記入力画像データに、上記帰還率補正部から出力されたノイズリダクション処理量を加算して出力画像データを得る加算部と
を備える画像処理装置。
【請求項２】
上記１フレーム前の出力画像データと上記入力画像データとの間のフレーム差分データを得るフレーム差分算出部をさらに備え、
上記帰還率補正部は、画素毎に、上記フレーム差分算出部で算出されたフレーム差分データ、上記ノイズリダクション処理量算出部で算出されたノイズリダクション処理量および上記圧縮誤差情報に基づいて、ノイズリダクションの帰還率が１００％以上となるか否かを判断する
請求項１に記載の画像処理装置。
【請求項３】
ノイズリダクション処理量として、上記ノイズリダクション処理量算出部で算出されたノイズリダクション処理量または上記帰還率補正部から出力されたノイズリダクション処理量を択一的に出力する帰還率補正選択制御部をさらに備え、
上記帰還率補正選択制御部は、上記帰還率補正部から出力されたノイズリダクション処理量を時間的に分散させて出力し、
上記加算部は、上記入力画像データに、上記帰還率補正選択制御部から出力されたノイズリダクション処理量を加算して上記出力画像データを得る
請求項１に記載の画像処理装置。
【請求項４】
上記帰還率補正選択制御部は、上記帰還率補正部から出力されたノイズリダクション処理量を、所定のラインおよびフレームの周期をもって出力する
請求項３に記載の画像処理装置。
【請求項５】
入力画像データおよびデータ圧縮伸長処理を経た１フレーム前の出力画像データに基づいてノイズリダクション処理量を算出するノイズリダクション処理量算出ステップと、
上記ノイズリダクション処理量算出ステップで算出された上記ノイズリダクション処理量を、圧縮誤差情報に基づいて、ノイズリダクションの帰還率が１００％未満の画素については補正することなく出力し、ノイズリダクションの帰還率が１００％以上の画素については該帰還率が１００％未満となるように補正して出力する帰還率補正ステップと、
上記入力画像データに、上記帰還率補正ステップで出力されたノイズリダクション処理量を加算して出力画像データを得る加算ステップと
を備える画像処理方法。
【請求項６】
出力画像データにデータ圧縮処理を施して圧縮画像データをメモリに書き込むエンコード部と、
上記メモリから１フレーム前の圧縮画像データを読み出し、データ伸長処理を施して１フレーム前の出力画像データおよび画素毎の圧縮誤差情報を出力するデコード部と、
入力画像データおよび上記デコード部から出力された１フレーム前の出力画像データに基づいてノイズリダクション処理量を算出するノイズリダクション処理量算出部と、
上記ノイズリダクション処理量算出部で算出された上記ノイズリダクション処理量を、上記デコード部から出力された上記圧縮誤差情報に基づいて、ノイズリダクションの帰還率が１００％未満の画素については補正することなく出力し、ノイズリダクションの帰還率が１００％以上の画素については該帰還率が１００％未満となるように補正して出力する帰還率補正部と、
上記入力画像データに、上記帰還率補正部から出力されたノイズリダクション処理量を加算して上記出力画像データを得る加算部と
を備える画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、画像処理装置および画像処理方法に関し、特に、データ圧縮伸長処理を経た１フレーム前の出力画像データを用いて巡回型のノイズリダクション処理を行う画像処理装置および画像処理方法に関する。
【背景技術】
【０００２】
近年、画像処理ＬＳＩ（Large Scale Integration）等において、高画質化機能の複雑化等により、メモリ帯域が大幅に増加し、その対策として外部メモリとの通信量を画像データの圧縮により減少させる施策が取られることが多い。
【０００３】
図４は、巡回型のノイズリダクション処理を行う画像処理装置２００の一例を示している。この画像処理装置２００は、ノイズリダクション部２１０と、エンコーダ２２０と、フレームメモリ２３０と、デコーダ２４０を有している。この画像処理装置２００では、フレームメモリ２３０に一時的に蓄積される画像データを圧縮画像データとして、ノイズリダクション部２１０側とフレームメモリ２３０との間のデータ通信量を減少させている。
【０００４】
ノイズリダクション部２１０から出力された出力画像データは、エンコーダ２２０に供給される。エンコーダ２２０では、この出力画像データに対して、所定の圧縮アルゴリズムにより非可逆なデータ圧縮処理が施され、圧縮画像データが得られる。この圧縮画像データは、遅延手段を構成するフレームメモリ２３０に一時的に蓄積される。
【０００５】
デコーダ２４０には、フレームメモリ２３０から１フレーム前の圧縮画像データが読み出されて供給される。デコーダ２４０では、この圧縮画像データに対してデータ伸長処理が施され、１フレーム前の出力画像データが得られる。ノイズリダクション部２１０には、この１フレーム前の出力画像データと共に、入力画像データが供給される。
【０００６】
ノイズリダクション部２１０では、入力画像データおよび１フレーム前の出力画像データに基づいて、帰還値としてのノイズリダクション処理量（ＮＲ処理量）が算出される。さらに、このノイズリダクション部２１０では、このＮＲ処理量が入力画像データに加算されて、出力画像データが得られる。
【０００７】
図４に示す画像処理装置２００の構成では、画像データの圧縮はフレーム単位、つまり空間方向の圧縮となり、一方、ノイズリダクションは時間方向の処理となり、処理の次元が異なっている。これが原因となり、ノイズリダクションの帰還率（ＮＲ帰還率）が１００％となり、１フレーム前の出力画像データを出力し続けてしまうということが生じることがある。
【０００８】
例えば、１フレーム前の出力画像データ（前フレームの画像データ）と、入力画像データ（現フレームの画像データ）との間の差分データ（フレーム差分値）を、帰還率５０％で入力画像データに加算する制御を行うノイズリダクションがあるとする。
【０００９】
このノイズリダクションにおいて、図５（ａ）に示すように、ある特定の画素の入力画像データのレベルが、Ｎフレーム→Ｎ＋１フレームで、“８”→“０”に変化したとする。この場合、図５（ｄ）に示すように、出力画像データは、Ｎ＋４フレームで入力画像データのレベルに収束する。なお、図５（ｂ）は、１フレーム前の出力画像データを示し、図５（ｄ）に示す出力画像データを１フレーム遅延させたものとなる。また、図５（ｃ）は、フレーム差分値を示し、図５（ｂ）に示す１フレーム前の出力画像データから図５（ａ）に示す入力画像データを差し引いた値となる。
【００１０】
このノイズリダクションに、図４の画像処理装置２００において、８ビットの画像データのＬＳＢ（Least Significant Bit）側から３ビット目を四捨五入し、５ビットに圧縮する圧縮機能を組み合わせるとする。その場合、図６（ｄ）に示すように、出力画像データのレベルが４となった時点で、ノイズリダクション処理が圧縮誤差に埋もれてしまい、入力画像データに永久に収束できなくなる。これが、ＮＲ帰還率が１００％の状態である。
【００１１】
なお、図６（ａ）は、図５（ａ）と同様に、ある特定の画素の入力画像データのレベルを示しており、Ｎフレーム→Ｎ＋１フレームで、“８”→“０”に変化している。図６（ｂ）は、データ圧縮伸長処理を経た１フレーム前の出力画像データを示す。この１フレーム前の出力画像データは、データ圧縮伸長処理を経ることで、図５（ｂ）に示す出力画像データを単に１フレーム遅延させたものとは異なるものとなっている。
【００１２】
すなわち、上述の圧縮アルゴリズムではＬＳＢ側から３ビット目を四捨五入し５ビットに圧縮するものである。そのため、出力画像データの“４”は、圧縮後の画像データでは表現できないことから、フレームメモリ２３０には“８”として書き込まれる。そのため、図６（ｂ）に示す１フレーム前の出力画像データは、Ｎ＋２フレーム以降で“８”となる。
【００１３】
また、図６（ｃ）は、フレーム差分値を示し、図６（ｂ）に示す１フレーム前の出力画像データから図６（ａ）に示す入力画像データを差し引いた値となる。図６（ｂ）に示す１フレーム前の出力画像データは、データ圧縮伸長処理を経ることで、上述したように、Ｎ＋２フレーム以降で“８”となる。そのため、フレーム差分値は、Ｎ＋１フレーム以降で“８”となる。これにより、出力画像データは、上述したように、レベルが４となった時点で、ノイズリダクション処理が圧縮誤差に埋もれてしまう。従って、入力画像データに永久に収束できなくなる、ＮＲ帰還率が１００％の状態、つまり出力画像データをそのままホールドする状態となる。
【００１４】
上述のＮＲ帰還率が１００％の状態は、前フレームの画像がうっすらと残像として残る原因となる。図７は、入力画像データによる画像（入力画像）と、出力画像データによる画像（出力画像）の一例を示している。この例では、矩形のはめ込み画像部分ＩＭが圧縮による喪失情報量が高い画像部分である。この画像部分ＩＭにおいて、データ圧縮伸長処理を経ることでＮＲ帰還率が１００％の状態が発生する。そのため、出力画像においては、この画像部分ＩＭに前フレームの画像がうっすらと残像として残る状態となる。
【００１５】
例えば、特許文献１には、シーンチェンジ等により現画像と過去画像の差分が大きい場合に、過去画像の残像表示時間を短縮するために、一時的にＮＲ帰還率を低下させ、入力画像へ高速で収束させるような制御を使用することが、記載されている。
【先行技術文献】
【特許文献】
【００１６】
【特許文献１】特開平０３−２６６５６５号公報
【発明の概要】
【発明が解決しようとする課題】
【００１７】
上述のようにＮＲ帰還率が１００％の状態となって出力画像に残像が残る状態を回避するために、周期的にＮＲ帰還率を低下させることが考えられる。この場合、周期的にノイズリダクションが効かなくなることから、ノイズが消える→現れる→消える→現れる・・・を繰り返し、ノイズのある画像でノイズリダクション効果が低下する。
【００１８】
本技術の目的は、データ圧縮伸長処理を経た１フレーム前の出力画像データを用いて巡回型のＮＲ（ノイズリダクション）処理を行う際に、ＮＲ帰還率が１００％の状態となって出力画像に残像が残る状態を良好に回避することにある。
【課題を解決するための手段】
【００１９】
本技術の概念は、
入力画像データおよびデータ圧縮伸長処理を経た１フレーム前の出力画像データに基づいてノイズリダクション処理量を算出するノイズリダクション処理量算出部と、
上記ノイズリダクション処理量算出部で算出された上記ノイズリダクション処理量を、圧縮誤差情報に基づいて、ノイズリダクションの帰還率が１００％未満の画素については補正することなく出力し、ノイズリダクションの帰還率が１００％以上の画素については該帰還率が１００％未満となるように補正して出力する帰還率補正部と、
上記入力画像データに、上記帰還率補正部から出力されたノイズリダクション処理量を加算して出力画像データを得る加算部と
を備える画像処理装置にある。
【００２０】
本技術において、ノイズリダクション処理量算出部により、入力画像データおよびデータ圧縮伸長処理を経た１フレーム前の出力画像データに基づいてノイズリダクション処理量が算出される。本技術は、ノイズリダクションのアルゴリズムに依存しない。すなわち、本技術は、ノイズリダクション処理量算出部において、入力画像データおよび１フレーム前の出力画像データから、如何なるアルゴリズムでノイズリダクション処理量が算出されるかは問わない。
【００２１】
また、本技術は、データ圧縮のアルゴリズムに依存しない。すなわち、本技術は、如何なるアルゴリズムでデータ圧縮が行われているかは問題ではなく、データ圧縮伸長処理を経た１フレーム前の出力画像データに対応して、画素毎の圧縮誤差情報を取得可能である場合に適用できる。
【００２２】
帰還率補正部では、圧縮誤差情報に基づいて、ノイズリダクション処理量算出部で算出されたノイズリダクション処理量が、そのままあるいは補正されて出力される。すなわち、ノイズリダクションの帰還率が１００％未満の画素については、ノイズリダクション処理量算出部で算出されたノイズリダクション処理量が補正されることなく出力される。一方、ノイズリダクションの帰還率が１００％以上の画素については、この帰還率が１００％未満となるように補正されて出力される。
【００２３】
この場合、例えば、１フレーム前の出力画像データと入力画像データとの間のフレーム差分データを得るフレーム差分算出部をさらに備え、帰還率補正部は、画素毎に、フレーム差分算出部で算出されたフレーム差分データ、ノイズリダクション処理量算出部で算出されたノイズリダクション量および圧縮誤差情報に基づいて、ノイズリダクションの帰還率が１００％以上になるか否かを判断する、ようにされてもよい。加算部により、入力画像データに、帰還率補正部から出力されたノイズリダクション処理量が加算されて、出力画像データが得られる。
【００２４】
このように、本技術においては、画素毎に圧縮誤差情報に基づいてノイズリダクションの帰還率が１００％以上になるか否かが判断される。そして、１００％以上になると判断される画素については、ノイズリダクション処理量算出部で算出されたノイズリダクション処理量が、帰還率補正部により、この帰還率が１００％未満となるように補正されて使用される。そのため、ＮＲ帰還率が１００％の状態となって出力画像に残像が残る状態を、ノイズリダクション効果を維持しつつ回避可能となる。
【００２５】
なお、本技術において、例えば、ノイズリダクション処理量として、イズリダクション処理量算出部で算出されたノイズリダクション処理量または帰還率補正部から出力されたノイズリダクション処理量を択一的に出力する帰還率補正選択制御部をさらに備え、帰還率補正選択制御部は、帰還率補正部から出力されたノイズリダクション処理量を時間的に分散させて出力し、加算部は、入力画像データに、帰還率補正選択制御部から出力されたノイズリダクション処理量を加算して出力画像データを得る、ようにされてもよい。例えば、帰還率補正選択制御部は、帰還率補正部から出力されたノイズリダクション処理量を、所定のラインおよびフレームの周期をもって出力する、ようにされる。
【００２６】
この場合、帰還率補正部から出力されるノイズリダクション処理量は、帰還率補正選択制御部から時間的に分散されて出力される。上述したように、帰還率が１００％以上になると判断される画素については、帰還率が１００％未満となるようにノイズリダクション処理量が補正される。この一時的な帰還率制御によりノイズリダクション効果が弱くなるが、その制御タイミングが分散されることから、視聴者にその影響を感じさせないようにできる。
【発明の効果】
【００２７】
本技術によれば、データ圧縮伸長処理を経た１フレーム前の出力画像データを用いて巡回型のＮＲ（ノイズリダクション）処理を行う際に、ＮＲ帰還率が１００％の状態となって出力画像に残像が残る状態を良好に回避できる。
【図面の簡単な説明】
【００２８】
【図１】本技術の実施の形態としての画像処理装置の構成例を示すブロック図である。
【図２】画像処理装置を構成するノイズリダクション部の詳細構成例を示すブロック図である。
【図３】ノイズリダクション部を構成する帰還率補正部におけるＮＲ処理量（帰還値）の補正処理を概念的に示す図である。
【図４】巡回型のノイズリダクション処理を行う画像処理装置の一例を示すブロック図である。
【図５】データ圧縮処理を組み合わせない場合における巡回型のノイズリダクション処理を行う画像処理装置の各部の画像データの一例を示す図である。
【図６】データ圧縮処理を組み合わせた場合における巡回型のノイズリダクション処理を行う画像処理装置の各部の画像データの一例を示す図である。
【図７】入力画像データによる画像（入力画像）と、出力画像データによる画像（出力画像）の一例を示す図である。
【発明を実施するための形態】
【００２９】
以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明を以下の順序で行う。
１．実施の形態
２．変形例
【００３０】
＜１．実施の形態＞
［画像処理装置の構成例］
図１は、本技術の実施の形態としての画像処理装置１００の構成例を示している。この画像処理装置１００は、データ圧縮伸長処理を経た１フレーム前の出力画像データを用いて巡回型のＮＲ（ノイズリダクション）処理を行う。この画像処理装置１００は、ノイズリダクション部１１０と、エンコーダ１２０と、フレームメモリ１３０と、デコーダ１４０を有している。
【００３１】
エンコーダ１２０は、ノイズリダクション部１１０で得られた出力画像データに対して、所定の圧縮アルゴリズムにより、非可逆なデータ圧縮処理を施して圧縮画像データを得る。本技術は、データ圧縮のアルゴリズムには依存しない。すなわち、本技術は、如何なるアルゴリズムでデータ圧縮が行われているかは問題とならない。フレームメモリ１３０は、エンコーダ１２０で得られた圧縮画像データを一時的に蓄積する。このフレームメモリ１３０は、１フレームの遅延手段を構成する。
【００３２】
デコーダ１４０は、フレームメモリ２３０から１フレーム前の圧縮画像データを読み出し、この圧縮画像データに対してデータ伸長処理を施し、１フレーム前の出力画像データを得る。また、デコーダ１４０は、この１フレーム前の出力画像データに対応して、画素毎の圧縮誤差情報を出力する。デコーダ１４０は、データ圧縮のアルゴリズムに依らず、画素毎に、データ圧縮によってどれだけの情報量を失っているかがわかる。そこで、デコーダ１４０は、１フレーム前の出力画像データをデコードして出力する際に、画素毎に、どれだけの情報量を失っているかを示す圧縮誤差情報を出力できる。
【００３３】
ノイズリダクション部１１０は、入力画像データと、デコーダ１４０で得られる１フレーム前の出力画像データ、さらにはデコーダ１４０から出力される圧縮誤差情報に基づいて、画素毎に、ノイズリダクション処理量（ＮＲ処理量）を取得する。そして、このノイズリダクション部１１０は、このＮＲ処理量を入力画像データに加算して、出力画像データを得る。
【００３４】
ノイズリダクション部１１０は、基本的には、画素毎に、入力画像データおよび１フレーム前の出力画像データに基づいてＮＲ処理量を算出する。本技術は、ノイズリダクションのアルゴリズムに依存しない。すなわち、本技術は、入力画像データおよび１フレーム前の出力画像データから、如何なるアルゴリズムでノイズリダクション処理量を算出するかは問わない。
【００３５】
ノイズリダクション部１１０は、上述のように算出されたＮＲ処理量と圧縮誤差情報に基づいて、画素毎に、ノイズリダクションの帰還率（ＮＲ帰還率）が１００％以上になるか否かを判断する。そして、ノイズリダクション部１１０は、ＮＲ帰還率が１００％以上になると判断する画素については、ＮＲ帰還率が１００％未満となるように、ＮＲ処理量を補正する。
【００３６】
また、ノイズリダクション部１１０は、上述のＮＲ処理量の補正タイミングを時間的に分散する。例えば、ノイズリダクション部１１０は、ＮＲ処理量の補正を、所定のラインおよびフレームの周期をもって行う。このノイズリダクション部１１０の詳細構成例については後述する。
【００３７】
図１に示す画像処理装置１００の動作を説明する。ノイズリダクション部１１０から出力された出力画像データは、エンコーダ１２０に供給される。このエンコーダ１２０では、この出力画像データに対して、所定の圧縮アルゴリズムにより非可逆なデータ圧縮処理が施され、圧縮画像データが得られる。この圧縮画像データは、フレームメモリ１３０に一時的に蓄積される。
【００３８】
デコーダ１４０には、フレームメモリ１３０から１フレーム前の圧縮画像データが読み出されて供給される。このデコーダ１４０では、この圧縮画像データに対してデータ伸長処理が施され、１フレーム前の出力画像データが得られる。また、このデコーダ１４０では、１フレーム前の出力画像データに対応して、画素毎の圧縮誤差情報が出力される。１フレーム前の出力画像データおよびそれに対応した画素毎の圧縮誤差情報は、ノイズリダクション部１１０に供給される。
【００３９】
ノイズリダクション部１１０には、さらに、入力画像データが供給される。ノイズリダクション部１１０では、入力画像データと、１フレーム前の出力画像データ、さらには画素毎の圧縮誤差情報に基づいて、画素毎に、ノイズリダクション処理量（ＮＲ処理量）が取得される。この際、画素毎にＮＲ帰還率が１００％以上になるか否かが判断され、ＮＲ帰還率が１００％以上になると判断される画素についてはＮＲ処理量が補正される。また、この際、ノイズリダクション部１１０では、上述のＮＲ処理量の補正タイミングが時間的に分散される。
【００４０】
［ノイズリダクション部の詳細構成例］
図２は、ノイズリダクション部１１０の詳細構成例を示している。このノイズリダクション部１１０は、ノイズリダクション処理量算出部１１１と、減算部１１２と、帰還率補正部１１３と、帰還率補正選択制御部１１４と、加算部１１５を有している。
【００４１】
ノイズリダクション処理量算出部１１１は、入力画像データおよび１フレーム前の出力画像データに基づいて、帰還値であるノイズリダクション処理量（ＮＲ処理量）を算出する。ここで、１フレーム前の出力画像データは、上述のデコーダ１４０（図１参照）で得られたものであり、データ圧縮伸長処理を経たものである。
【００４２】
ノイズリダクション処理量算出部１１１は入力画像データおよび１フレーム前の出力画像データに基づいて、画素毎に、ＮＲ処理量（帰還値）を算出する。本技術は、上述したように、ノイズリダクションのアルゴリズムに依存しない、すなわち、ノイズリダクション処理量算出部１１１において、入力画像データおよび１フレーム前の出力画像データから如何なるアルゴリズムでＮＲ処理量を算出するかは問わない。
【００４３】
減算部１１２は、１フレーム前の出力画像データと入力画像データとの間の差分データを得る。すなわち、減算部１１２は、１フレーム前の出力画像データから入力画像データを差し引く処理を行って、差分データを算出する。この減算部１１２は、フレーム差分算出部を構成している。
【００４４】
帰還率補正部１１３は、ノイズリダクション処理量算出部１１１で算出されたＮＲ処理量を、減算部１１２で得られたフレーム差分データおよび圧縮誤差情報に基づいて、画素毎に補正処理を行って出力する。ここで、圧縮誤差情報は、上述のデコーダ１４０（図１参照）から、１フレーム前の出力画像データに対応して出力されるものである。
【００４５】
帰還率補正部１１３は、画素毎に、ノイズリダクションの帰還率（ＮＲ帰還率）が１００％以上になるか否かを判断する。そして、帰還率補正部１１３は、ＮＲ帰還率が１００％以上にならないと判断する画素については、ノイズリダクション処理量算出部１１１で算出されたＮＲ処理量を、補正することなくそのまま出力する。また、帰還率補正部１１３は、ＮＲ帰還率が１００％以上になると判断する画素については、ＮＲ帰還率が１００％未満になるように、ノイズリダクション処理量算出部１１１で算出されたＮＲ処理量を補正して出力する。
【００４６】
図３は、帰還率補正部１１３におけるＮＲ処理量（帰還値）の補正処理を概念的に示している。図３（ａ）は、ノイズリダクション処理量算出部１１１で算出されるＮＲ処理量と、１フレーム前の出力画像データおよび入力画像データの間のフレーム差分データとの対応関係の一例を示している。この場合、ＮＲ帰還率が１００％以上にならないように、ＮＲ処理量が算出される。
【００４７】
図３（ｂ）は、例えば、データ圧縮伸長処理によりフレーム内の各画素で同一の圧縮誤差が発生するものとして、水平方向に並ぶ各画素における圧縮誤差の幅を示している。なお、ここでは、説明の簡単化のために、フレーム内の各画素で同一の圧縮誤差が発生するものとして説明する。しかし、実際には、フレーム内の各画素で同一の圧縮誤差が発生するものではない。
【００４８】
上述したように、ノイズリダクション処理量算出部１１１は、図３（ａ）に示すように、ＮＲ帰還率が１００％以上にならないようにＮＲ処理量を算出する。しかし、図３（ｂ）に示すような圧縮誤差を考えると、図３（ｃ）に斜線を付して示すように、フレーム差分データのレベルによっては、ＮＲ帰還率が１００％以上になる部分が出てくる。
【００４９】
そのため、帰還率補正部１１３は、図３（ｄ）に示すように、ＮＲ帰還率が１００％以上になると判断する画素については、ＮＲ帰還率が１００％未満となるように、ノイズリダクション処理量算出部１１１で算出されたＮＲ処理量を補正して出力する。なお、帰還率補正部１１３は、圧縮誤差を考えてもＮＲ帰還率が１００％以上にならないと判断する画素、例えばフレーム差分データのレベルが高い画素については、ノイズリダクション処理量算出部１１１で算出されたＮＲ処理量を補正せずにそのまま出力する。
【００５０】
図２に戻って、帰還率補正選択制御部１１４は、ＮＲ処理量（帰還値）として、イズリダクション処理量算出部１１１で算出されたノイズリダクション処理量または帰還率補正部１１３から出力されたノイズリダクション処理量を、択一的に出力する。この場合、帰還率補正選択制御部１１４は、帰還率補正部１１３から出力されたノイズリダクション処理量を時間的に分散させて出力する。
【００５１】
この実施の形態において、帰還率補正選択制御部１１４は、ラインカウント値およびフレームカウント値に基づいて、帰還率補正部１１３から出力されたノイズリダクション処理量を、所定のラインおよびフレームの周期をもって出力する。これにより、例えば、帰還率補正部１１３および帰還率補正選択制御部１１４により、以下のようなタイミングで補正が行われることとなる。なお、“３０”、“４”等の数値は、あくまでも一例である。
【００５２】
（１）３０の倍数フレーム：４の倍数のライン上の帰還率１００％以上となる画素のみを補正
（２）３０の倍数＋１のフレーム：４の倍数＋１のライン上の帰還率１００％以上となる画素のみを補正
（３）３０の倍数＋２のフレーム：４の倍数＋２のライン上の帰還率１００％以上となる画素のみを補正
（４）３０の倍数＋３のフレーム：４の倍数＋３のライン上の帰還率１００％以上となる画素のみを補正
【００５３】
加算部１１５は、入力画像データに、帰還率補正選択制御部１１４から出力された最終のＮＲ処理量（最終帰還値）を加算し、出力画像データを得る。
【００５４】
図２に示すノイズリダクション部１１０の動作を説明する。入力画像データと、データ圧縮伸長処理を経た１フレーム前の出力画像データは、ノイズリダクション処理量算出部１１１に供給される。このノイズリダクション処理量算出部１１１では、入力画像データおよび１フレーム前の出力画像データに基づいて、帰還値であるノイズリダクション処理量（ＮＲ処理量）が算出される。このＮＲ処理量は、帰還率補正部１１３に供給される。
【００５５】
また、入力画像データおよび１フレーム前の出力画像データは、減算部１１２に供給される。この減算部１１２では、１フレーム前の出力画像データから入力画像データを差し引く処理が行われ、フレーム差分データが得られる。このフレーム差分データは、帰還率補正部１１３に供給される。また、帰還率補正部１１３には、１フレーム前の出力画像データに対応した画素毎の圧縮誤差情報が供給される。
【００５６】
帰還率補正部１１３では、ノイズリダクション処理量算出部１１１で算出されたＮＲ処理量が、フレーム差分データおよび圧縮誤差情報に基づいて、画素毎に補正されて出力される。この場合、帰還率補正部１１３では、画素毎に、ノイズリダクション処理量算出部１１１で算出されたＮＲ処理量とフレーム差分データとが比較されて、圧縮誤差を考えたとき、ＮＲ帰還率が１００％以上になるか否かが判断される。
【００５７】
そして、帰還率補正部１１３では、ＮＲ帰還率が１００％以上にならないと判断される画素については、ノイズリダクション処理量算出部１１１で算出されたＮＲ処理量が、補正されることなくそのまま出力される。また、帰還率補正部１１３では、ＮＲ帰還率が１００％以上になると判断される画素については、ＮＲ帰還率が１００％未満になるように、ノイズリダクション処理量算出部１１１で算出されたＮＲ処理量が補正されて出力される。
【００５８】
帰還率補正部１１３から出力される補正後のＮＲ処理量（補正後帰還値）は、帰還率補正選択制御部１１４に供給される。また、この帰還率補正選択制御部１１４には、ノイズリダクション処理量算出部１１１で算出されるＮＲ処理量が供給される。さらに、この帰還率補正選択制御部１１４には、ラインカウント値およびフレームカウント値が供給される。
【００５９】
帰還率補正選択制御部１１４では、ＮＲ処理量として、イズリダクション処理量算出部１１１で算出されたＮＲ処理量または帰還率補正部１１３から出力されたＮＲ処理量が、択一的に出力される。この場合、帰還率補正選択制御部１１４では、例えば、帰還率補正部１１３から出力されたＮＲ処理量が所定のラインおよびフレームの周期をもって出力される。これにより、帰還率補正部１１３から出力されたＮＲ処理量は、時間的に分散されて出力される。
【００６０】
帰還率補正制御部１１４から出力される最終のＮＲ処理量（最終帰還値）は、加算部１１５に供給される。また、この加算部１１５には、入力画像データが供給される。加算部１１５では、入力画像データに、帰還率補正選択制御部１１４から出力された最終のＮＲ処理量が加算され、出力画像データが得られる。
【００６１】
上述したように、図１に示す画像処理装置１００においては、ノイズリダクション部１１０では、画素毎に圧縮誤差情報に基づいてノイズリダクションの帰還率が１００％以上になるか否かが判断される。そして、１００％以上になると判断される画素については、ノイズリダクション処理量算出部１１１で算出されたＮＲ処理量（帰還値）が、帰還率補正部１１３により、この帰還率が１００％未満となるように補正されて使用される。そのため、ＮＲ帰還率が１００％の状態となって出力画像に残像が残る状態を、ノイズリダクション効果を維持しつつ回避可能となる。
【００６２】
また、図１に示す画像処理装置１００においては、ノイズリダクション部１１０では、帰還率補正部１１３から出力されるＮＲ処理量（補正後帰還値）は、帰還率補正選択制御部１１４から時間的に分散されて出力される。帰還率が１００％以上になると判断される画素については、帰還率補正部１１３において、帰還率が１００％未満となるようにＮＲ処理量が補正される。この一時的な帰還率制御によりノイズリダクション効果が弱くなるが、その制御タイミングが分散されることから、視聴者にその影響を感じさせないようになる。
【００６３】
また、図１に示す画像処理装置１００においては、データ圧縮およびノイズリダクションのアルゴリズムに依存しない。そのため、データ圧縮やノイズリダクション機能のアップデート、あるいは置換が発生しても、回路、プログラム等の修正なしで、同様の効果を発揮させることができる。
【００６４】
＜２．変形例＞
なお、上述実施の形態において、ノイズリダクション部１１０は、帰還率補正選択制御部１１４を有する構成とされている。しかし、この帰還率補正選択制御部１１４は、本技術において、必ずしも必要な構成要素ではない。つまり、ノイズリダクション部１１０として、図２に示すノイズリダクション部１１０から帰還率補正選択制御部１１４を除いた構成も当然に考えられる。その場合、帰還率補正部１１３から出力される補正後のＮＲ処理量（補正後帰還値）が直接加算部１１５に入力されることとなる。
【００６５】
また、上述実施の形態おいて、画像処理装置１００のノイズリダクション処理は、ハードウェアで実行できる他、ソフトウェアでも実行可能である。ソフトウェアで処理を実行する場合には、処理シーケンスを記録したプログラムを、専用のハードウェアに組み込まれたコンピュータ内のメモリにインストールして実行させる。または、各種処理が実行可能な汎用コンピュータにプログラムをインストールして実行させることが可能である。この場合、コンピュータを、プログラムにより、画像処理装置１００の各機能ブロックとして機能させるものである。
【００６６】
また、本技術は、以下のような構成を取ることもできる。
（１）入力画像データおよびデータ圧縮伸長処理を経た１フレーム前の出力画像データに基づいてノイズリダクション処理量を算出するノイズリダクション処理量算出部と、
上記ノイズリダクション処理量算出部で算出された上記ノイズリダクション処理量を、圧縮誤差情報に基づいて、ノイズリダクションの帰還率が１００％未満の画素については補正することなく出力し、ノイズリダクションの帰還率が１００％以上の画素については該帰還率が１００％未満となるように補正して出力する帰還率補正部と、
上記入力画像データに、上記帰還率補正部から出力されたノイズリダクション処理量を加算して出力画像データを得る加算部と
を備える画像処理装置。
（２）上記１フレーム前の出力画像データと上記入力画像データとの間のフレーム差分データを得るフレーム差分算出部をさらに備え、
上記帰還率補正部は、画素毎に、上記フレーム差分算出部で算出されたフレーム差分データ、上記ノイズリダクション処理量算出部で算出されたノイズリダクション処理量および上記圧縮誤差情報に基づいて、ノイズリダクションの帰還率が１００％以上となるか否かを判断する
前記（１）に記載の画像処理装置。
（３）ノイズリダクション処理量として、上記ノイズリダクション処理量算出部で算出されたノイズリダクション処理量または上記帰還率補正部から出力されたノイズリダクション処理量を択一的に出力する帰還率補正選択制御部をさらに備え、
上記帰還率補正選択制御部は、上記帰還率補正部から出力されたノイズリダクション処理量を時間的に分散させて出力し、
上記加算部は、上記入力画像データに、上記帰還率補正選択制御部から出力されたノイズリダクション処理量を加算して上記出力画像データを得る
前記（１）または（２）に記載の画像処理装置。
（４）上記帰還率補正選択制御部は、上記帰還率補正部から出力されたノイズリダクション処理量を、所定のラインおよびフレームの周期をもって出力する
前記（３）に記載の画像処理装置。
（５）入力画像データおよびデータ圧縮伸長処理を経た１フレーム前の出力画像データに基づいてノイズリダクション処理量を算出するノイズリダクション処理量算出ステップと、
上記ノイズリダクション処理量算出ステップで算出された上記ノイズリダクション処理量を、圧縮誤差情報に基づいて、ノイズリダクションの帰還率が１００％未満の画素については補正することなく出力し、ノイズリダクションの帰還率が１００％以上の画素については該帰還率が１００％未満となるように補正して出力する帰還率補正ステップと、
上記入力画像データに、上記帰還率補正ステップで出力されたノイズリダクション処理量を加算して出力画像データを得る加算ステップと
を備える画像処理方法。
（６）出力画像データにデータ圧縮処理を施して圧縮画像データをメモリに書き込むエンコード部と、
上記メモリから１フレーム前の圧縮画像データを読み出し、データ伸長処理を施して１フレーム前の出力画像データおよび画素毎の圧縮誤差情報を出力するデコード部と、
入力画像データおよび上記デコード部から出力された１フレーム前の出力画像データに基づいてノイズリダクション処理量を算出するノイズリダクション処理量算出部と、
上記ノイズリダクション処理量算出部で算出された上記ノイズリダクション処理量を、上記デコード部から出力された上記圧縮誤差情報に基づいて、ノイズリダクションの帰還率が１００％未満の画素については補正することなく出力し、ノイズリダクションの帰還率が１００％以上の画素については該帰還率が１００％未満となるように補正して出力する帰還率補正部と、
上記入力画像データに、上記帰還率補正部から出力されたノイズリダクション処理量を加算して上記出力画像データを得る加算部と
を備える画像処理装置。
【符号の説明】
【００６７】
１００・・・画像処理装置
１１０・・・ノイズリダクション部
１１１・・・ノイズリダクション処理量算出部
１１２・・・減算部
１１３・・・帰還率補正部
１１４・・・帰還率補正選択制御部
１１５・・・加算部
１２０・・・エンコーダ
１３０・・・フレームメモリ
１４０・・・デコーダ
【図１】
2012253645.tif 000003
【図２】
2012253645.tif 000004
【図３】
2012253645.tif 000005
【図４】
2012253645.tif 000006
【図５】
2012253645.tif 000007
【図６】
2012253645.tif 000008
【図７】
2012253645.tif 000009