【手続補正書】
【提出日】平成21年1月28日(2009.1.28)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
入力画像からテクスチャ成分を抽出するテクスチャ抽出部と、
前記入力画像を分割して形成されるブロック毎に、前記テクスチャ成分によるブロックを縮小して基本ブロックを作成し、前記基本ブロックを前記ブロックに繰り返し配置することにより、前記テクスチャ成分の空間周波数を増大させた細テクスチャ成分を生成する細テクスチャ生成部と、
前記細テクスチャ成分と前記入力画像とを画像合成するブレンド部と、
前記ブレンド部における画像合成比率を設定するテクスチャ付加量制御部とを備える
画像処理装置。
【請求項２】
入力画像からテクスチャ成分を抽出するテクスチャ抽出ステップと、
前記入力画像を分割して形成されるブロック毎に、前記テクスチャ成分によるブロックを縮小して基本ブロックを作成し、前記基本ブロックを前記ブロックに繰り返し配置することにより、前記テクスチャ成分の空間周波数を増大させた細テクスチャ成分を生成する細テクスチャ生成ステップと、
前記細テクスチャ成分と前記入力画像とを画像合成して出力画像を生成するブレンドステップと、
前記ブレンドステップにおける画像合成比率を設定するテクスチャ付加量制御ステップとを備える
画像処理方法。
【請求項３】
前記細テクスチャ生成ステップは、
前記ブロックの中央部分を選択的に縮小して前記基本ブロックを作成する
請求項２に記載の画像処理方法。
【請求項４】
前記細テクスチャ生成ステップは、
前記細テクスチャ成分のフィルタリング処理により、前記細テクスチャ成分における前記基本ブロック間の段差を抑圧する段差抑圧ステップを有する
請求項２に記載の画像処理方法。
【請求項５】
前記細テクスチャ生成ステップは、
前記テクスチャ成分に対する前記細テクスチャ成分の差分値を周辺画素に拡散させる差分拡散ステップを有する
請求項２に記載の画像処理方法。
【請求項６】
前記細テクスチャ生成ステップは、
前記テクスチャ成分に対する前記細テクスチャ成分の差分値を周辺画素に拡散させる差分拡散ステップと、
前記細テクスチャ成分に、前記差分拡散ステップにより差分拡散した前記細テクスチャ成分を合成する合成ステップを有し、
前記ブレントステップで処理する前記細テクスチャ成分が、前記合成ステップで合成した前記細テクスチャ成分である
請求項２に記載の画像処理方法。
【請求項７】
前記合成ステップは、
テクスチャである確からしさを示すテクスチャ度に応じて、合成比率を可変する
請求項６に記載の画像処理方法。
【請求項８】
前記細テクスチャ生成ステップは、
変動する利得を前記細テクスチャ成分に乗算して出力する
請求項２に記載の画像処理方法。
【請求項９】
前記テクスチャ付加量制御ステップは、
前記入力画像から注目画素のエッジらしさを示すパラメータを検出するエッジ検出ステップと、
前記エッジ検出ステップで検出したパラメータを解析して、エッジの部位で前記細テクスチャ成分の割合が低下するように、前記画像合成比率を設定するエッジ解析ステップとを有する
請求項２に記載の画像処理方法。
【請求項１０】
前記テクスチャ付加量制御ステップは、
前記入力画像のアクティビティを検出するアクティビティ検出ステップと、
前記アクティビティを解析して、画素値の変動が一定である部位で前記細テクスチャ成分の割合が増大するように、前記画像合成比率を設定するアクティビティ解析ステップとを有する
請求項２に記載の画像処理方法。
【請求項１１】
前記テクスチャ付加量制御ステップは、
前記入力画像のアクティビティを検出するアクティビティ検出ステップと、
前記細テクスチャ成分のアクティビティを検出する細テクスチャ成分のアクティビティ検出ステップと、
前記入力画像のアクティビティと、前記細テクスチャ成分のアクティビティとの比率を計算するアクティビティ比計算ステップと、
前記比率により、画素値の変動が一定である部位で前記細テクスチャ成分の割合が増大するように、前記画像合成比率を設定するアクティビティ比解析ステップとを有する
請求項２に記載の画像処理方法。
【請求項１２】
前記出力画像における画素値のピークを抑圧するピーク抑圧ステップを有する
請求項２に記載の画像処理方法。
【請求項１３】
入力画像からテクスチャ成分を抽出するテクスチャ抽出ステップと、
前記入力画像を分割して形成されるブロック毎に、前記テクスチャ成分によるブロックを縮小して基本ブロックを作成し、前記基本ブロックを前記ブロックに繰り返し配置することにより、前記テクスチャ成分の空間周波数を増大させた細テクスチャ成分を生成する細テクスチャ生成ステップと、
前記細テクスチャ成分と前記入力画像とを画像合成して出力画像を生成するブレンドステップと、
前記ブレンドステップにおける画像合成比率を設定するテクスチャ付加量制御ステップとを備える
画像処理方法のプログラム。
【請求項１４】
画像処理方法のプログラムを記録した記録媒体において、
前記プログラムは、
入力画像からテクスチャ成分を抽出するテクスチャ抽出ステップと、
前記入力画像を分割して形成されるブロック毎に、前記テクスチャ成分によるブロックを縮小して基本ブロックを作成し、前記基本ブロックを前記ブロックに繰り返し配置することにより、前記テクスチャ成分の空間周波数を増大させた細テクスチャ成分を生成する細テクスチャ生成ステップと、
前記細テクスチャ成分と前記入力画像とを画像合成して出力画像を生成するブレンドステップと、
前記ブレンドステップにおける画像合成比率を設定するテクスチャ付加量制御ステップとを備える
画像処理方法のプログラムを記録した記録媒体。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００３０
【補正方法】変更
【補正の内容】
【００３０】
これによりテクスチャ合成部１５は、誤差拡散していない細テクスチャ成分Ｓ６の成分量と、誤差拡散した細テクスチャ成分Ｓ７の成分量とを相補的に変化させて、これら細テクスチャ成分Ｓ６及びＳ７を合成し、より処理に適した細テクスチャ成分Ｓ６、Ｓ７により細テクスチャ成分Ｓ３（synthesized tex.）を出力する。具体的に、テクスチャ合成部１５は、草花、木々の葉、岩肌等の細部構造の部位では、誤差拡散していない細テクスチャ成分Ｓ６の成分量を増大させ、各種被写体間の境界、エッジでは誤差拡散した細テクスチャ成分Ｓ７の成分量を増大させる。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】変更
【補正の内容】
【００３６】
ゲイン設定部２３は、この高域成分の信号レベルを判定して、図９に示すように、ローパスフィルタ２１の出力値に対する入力映像信号Ｓ１の信号レベルが上限値fluct diff max及び下限値-fluct diff minの範囲では、減算回路２２の出力値に比例して利得が増大するように、またこの上限値fluct diff max及び下限値-fluct diff minの範囲外では、それぞれ上限値fluct gain max及び下限値fluct gain minとなるように変動ゲインｇfluct を設定する。なお変動ゲインｇfluct は、要は、連続する基本ブロックにおける画素値の変化が自然画における画素値の変化に近づくように、画素値を微妙に変化させるものである。従って変動ゲインｇfluct は、この図９に示す特性により生成する場合に限らず、入力映像信号Ｓ１の高域成分量、信号レベル等に応じて種々に生成することができ、例えば図９において破線により示すように、上限値fluct diff max及び下限値-fluct diff minの間で折り返すような特性により設定してもよい。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００４０
【補正方法】変更
【補正の内容】
【００４０】
なおここでｗ(i,j) は、（６）式により表されるガウス型の重みであり、ｇは、画像輝度Ｉのｘ方向の偏微分ｇx と、画像輝度Ｉのｙ方向の偏微分ｇy とにより（７）式で表される輝度勾配である。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００５１
【補正方法】変更
【補正の内容】
【００５１】
またテクスチャ度計算部２６は、図１３に示すように、エッジ勾配方向ｖ１と直交する方向ｖ２の固有値λ２をエッジ勾配方向ｖ１の固有値λ１で割り算して割り算値λ２／λ１を計算する。テクスチャ度計算部２６は、この割り算値λ２／λ１が所定値ａｖｅで値１のピーク値となり、この割り算値λ２／λ１がこの所定値から値が遠ざかるに従って値が減少するようにエッジ揃い度のパラメータｇを生成する。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００５６
【補正方法】変更
【補正の内容】
【００５６】
エッジ解析部２９は、これらのλ１、λ２、λ１ｔ、λ２ｔを処理して、エッジである可能性が高くなるに従って値が減少するエッジによる重み付け係数αtype-Eを生成する。すなわちエッジ解析部２９は、図１４に示すように、固有値λ１に基づいて、値１から値０の範囲で、エッジ勾配方向ｖ１にコントラストが高くなってエッジである確率が高くなるに従って値の増大するパラメータＳを生成する。また図１５に示すように、固有値λ２及びλ１の割り算値λ２／λ１に基づいて、輝度勾配が揃ってエッジである確率が高くなるに従って値の増大するパラメータｔを生成する。エッジ解析部２９は、これら固有値λ１及びλ２から生成したパラメータＳ及びｔを乗算して、入力映像信号Ｓ１における注目画素のエッジらしさを示すパラメータedgenessを生成する。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００５７
【補正方法】変更
【補正の内容】
【００５７】
また同様に、細テクスチャ成分Ｓ５に対応する固有値λ１ｔ、λ２ｔを処理して、細テクスチャ成分Ｓ５における注目画素のエッジらしさを示すパラメータedgenesstileを生成する。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００５８
【補正方法】変更
【補正の内容】
【００５８】
エッジ解析部２９は、この２つのパラメータedgeness、edgenesstileを次式の演算処理により処理し、エッジ等の部位で映像信号Ｓ９における細テクスチャ成分Ｓ３の成分量が低下するようにエッジによる重み付け係数αtype-Eを生成する。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００８７
【補正方法】変更
【補正の内容】
【００８７】
またパラメータλ１、λ２、λ１ｔ、λ２ｔがエッジ解析部２９において処理され（図１４、図１５）、エッジの部位で細テクスチャ成分Ｓ３の割合が低下するように重み付け係数αtype-Eが生成され、この重み付け係数αtype-Eによりブレンド部１７における細テクスチャ成分Ｓ３と入力映像信号Ｓ１との合成比率が設定される。これによりこの映像信号処理装置１では、エッジの部分では、入力映像信号Ｓ１の割合を増大させて、エッジ等の部分では基本ブロックの繰り返しにより高域成分を強調しないようにすることができ、これにより画質の劣化を有効に回避して質感を向上することができる。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００８８
【補正方法】変更
【補正の内容】
【００８８】
また入力映像信号Ｓ１は、アクティビティ計算部３０において、アクティビティが求められ、このアクティビティがタイリング部３１で処理されて、タイリング部７から出力される細テクスチャ成分Ｓ５に対応するアクティビティが求められる。入力映像信号は、これらのアクティビティがアクティビティ解析部３２で処理され（図１６、図１７）、画素値の変動が一定である部位で細テクスチャ成分Ｓ３の割合が増大するように、アクティビティによる重み付け係数αactivityが生成され、この重み付け係数αactivityによりブレンド部１７における細テクスチャ成分Ｓ３と入力映像信号Ｓ１との合成比率が設定される。これによりこの実施例では、エッジ、孤立点等では、基本ブロックの繰り返しにより高域成分を強調しないようにすることができ、これにより画質の劣化を有効に回避して質感を向上することができる。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００８９
【補正方法】変更
【補正の内容】
【００８９】
また入力映像信号Ｓ１は、アクティビティ比計算部３３において、入力映像信号Ｓ１のアクティビティと細テクスチャ成分Ｓ５に対応するアクティビティとの比率が求められ、続くアクティビティ比解析部３４において、この比率に基づいて、画素値の変動が一定である部位で細テクスチャ成分の割合が増大するように、重み付け係数αpix vs blkが生成され（図１８）、この重み付け係数αpix vs blkによりブレンド部１７における細テクスチャ成分Ｓ３と入力映像信号Ｓ１との合成比率が設定される。これによりこの実施例では、基本ブロック内に、異質のテクスチャ成分が存在する場合には、基本ブロックの繰り返しにより高域成分を強調しないようにすることができ、これにより画質の劣化を有効に回避して質感を向上することができる。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００９７
【補正方法】変更
【補正の内容】
【００９７】
具体的に、テクスチャである確からしさを示すテクスチャ度に応じて、合成比率を可変することにより、違和感無く質感を向上することができる。