【手続補正書】
【提出日】平成25年1月16日(2013.1.16)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
低解像度入力画像を入力して超解像画像を出力する画像処理装置において、
前記低解像度入力画像を第１の高解像度変換をして高解像度入力画像を生成する第１の高解像度変換部と、
前記低解像度入力画像に基づいて生成される推定高解像度画像を低解像度変換して低解像度画像を生成する低解像度変換部と、
前記低解像度画像と前記低解像度入力画像とから差分画像を生成する差分画像生成部と、
前記差分画像から指標値を算出する指標値算出部と、
前記差分画像を第２の高解像度変換をして差分高解像度画像を生成する第２の高解像度変換部と、
前記差分高解像度画像と前記推定高解像度画像とから高解像度画像を生成する高解像度画像生成部と、
前記第１の高解像度変換、前記第２の高解像度変換および前記低解像度変換で用いられる変換パラメータを前記指標値と所定のしきい値とを比較して修正し、前記推定高解像度画像を前記低解像度変換部および前記高解像度画像生成部に出力するか、超解像画像として出力して画像処理を終了するかを判定する制御部とを備え、
前記低解像度変換部は、前記高解像度入力画像および前記高解像度画像を入力し、入力した前記高解像度入力画像および前記高解像度画像から１つを選択して前記推定高解像度画像とすることを特徴とする画像処理装置。
【請求項２】
低解像度入力画像を入力して超解像画像を出力する画像処理装置において、
前記低解像度入力画像を第１の高解像度変換をして高解像度入力画像を生成する第１の高解像度変換部と、
前記低解像度入力画像に基づいて生成される推定高解像度画像を低解像度変換して低解像度画像を生成する低解像度変換部と、
前記低解像度画像と前記低解像度入力画像とから差分画像を生成する差分画像生成部と、
前記差分画像から指標値を算出する指標値算出部と、
前記差分画像を第２の高解像度変換をして差分高解像度画像を生成する第２の高解像度変換部と、
前記差分高解像度画像と前記推定高解像度画像とから高解像度画像を生成する高解像度画像生成部と、
前記第１の高解像度変換、前記第２の高解像度変換および前記低解像度変換で用いられる変換パラメータを前記指標値と所定のしきい値とを比較して修正する制御部とを備え、
前記高解像度生成部は、第２の低解像度入力画像に対して得られる前記高解像度入力画像および前記高解像度画像を入力し、入力した前記高解像度入力画像および前記高解像度画像から１つを選択して前記推定高解像度画像とし、
前記高解像度画像生成部は、前記低解像度入力画像に対して得られる差分高解像度画像と第２の低解像度入力画像に対して得られる推定高解像度画像とから前記高解像度画像を
生成することを特徴とする画像処理装置。
【請求項３】
前記低解像度入力画像と前記第２の低解像度入力画像とから動き情報を検出する動き検出部を備え、
前記高解像度画像生成部は、前記低解像度入力画像に対して得られた差分画像を前記動き検出部が検出した動き情報に基づいて参照し、高解像度変換して得られる前記差分高解像度画像と前記第２の低解像度入力画像に対して得られる推定高解像度画像とから前記高解像度画像を生成する
ことを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記動き検出部は、領域ごとに動き情報を検出し、
前記第１の高解像度変換部は、前記動き検出部が検出した動き情報に基づいて、動きが検出されない領域には、動きが検出された領域に対する高解像度変換より処理負荷が低い拡大処理を適用して前記高解像度入力画像を生成する
ことを特徴とする請求項３に記載の画像処理装置。
【請求項５】
前記制御部は、前記低解像度入力画像に対して前記高解像度画像生成部が高解像度画像を反復して生成した回数を計数し、計数された反復して生成した回数に基づいて、前記高解像度画像生成部に前記高解像度画像を反復して生成させるか、または前記推定高解像度画像を超解像画像として出力して終了するかを判定する
ことを特徴とする請求項１に記載の画像処理装置。
【請求項６】
前記制御部は、光学系の光軸中心から変換対象画素の位置までの距離に基づいて、前記第１、第２の高解像度変換部が行う高解像度変換および前記低解像度変換部が行う低解像度変換を定義する変換パラメータを修正する
ことを特徴とする請求項１ないし請求項５のいずれかに記載の画像処理装置。
【請求項７】
低解像度入力画像を入力して超解像画像を出力する画像処理装置において、
低解像度入力画像または差分画像を高解像度変換をして、前記低解像度入力画像を高解像度変換した高解像度入力画像または前記差分画像を高解像度変換した差分高解像度画像を生成する高解像度変換部と、
この高解像度変換部が生成した高解像度入力画像または高解像度画像を推定高解像度画像として、この推定高解像度画像を低解像度変換して低解像度画像を生成する低解像度変換部と、
この低解像度変換部が生成した低解像度画像と前記低解像度入力画像とから得られる前記差分画像を生成する差分画像生成部と、
前記差分画像から指標値を算出する指標値算出部と、
前記差分画像生成部が生成した差分画像から前記高解像度変換部が生成した差分高解像度画像と前記推定高解像度画像とから得られる前記高解像度画像を生成する高解像度画像生成部と、
前記高解像度変換部が行う高解像度変換および前記低解像度変換部が行う低解像度変換で用いられる変換パラメータを前記指標値と所定のしきい値とを比較して修正し、前記推定高解像度画像を前記低解像度変換部および前記高解像度画像生成部に出力するか、超解像画像として出力して画像処理を終了するかを判定する制御部とを備え、
前記低解像度変換部は、前記高解像度入力画像および前記高解像度画像を入力し、入力した前記高解像度入力画像および前記高解像度画像から１つを選択して前記推定高解像度画像とすることを特徴とする画像処理装置。
【請求項８】
低解像度入力画像を入力して超解像画像を出力する画像処理装置において、
前記低解像度入力画像を第１の高解像度変換をして高解像度入力画像を生成する第１の高解像度変換ステップと、
前記低解像度入力画像に基づいて生成される推定高解像度画像を低解像度変換して低解像度画像を生成する低解像度変換ステップと、
前記低解像度画像と前記低解像度入力画像とから差分画像を生成する差分画像生成ステップと、
前記差分画像から指標値を算出する指標値算出ステップと、
前記差分画像を第２の高解像度変換をして差分高解像度画像を生成する第２の高解像度変換ステップと、
前記差分高解像度画像と前記推定高解像度画像とから高解像度画像を生成する高解像度画像生成ステップと、
前記第１の高解像度変換、前記第２の高解像度変換および前記低解像度変換で用いられる変換パラメータを前記指標値と所定のしきい値とを比較して修正し、前記推定高解像度画像を前記低解像度変換ステップおよび前記高解像度画像生成ステップに出力するか、超解像画像として出力して画像処理を終了するかを判定する制御ステップとを備え、
前記低解像度変換ステップは、前記高解像度入力画像および前記高解像度画像を入力し、入力した前記高解像度入力画像および前記高解像度画像から１つを選択して前記推定高解像度画像とすることを特徴とする画像処理方法。
【請求項９】
低解像度入力画像を入力して超解像画像を出力する画像処理装置において、
前記低解像度入力画像を第１の高解像度変換をして高解像度入力画像を生成する第１の高解像度変換ステップと、
前記低解像度入力画像に基づいて生成される推定高解像度画像を低解像度変換して低解像度画像を生成する低解像度変換ステップと、
前記低解像度画像と前記低解像度入力画像とから差分画像を生成する差分画像生成ステップと、
前記差分画像から指標値を算出する指標値算出ステップと、
前記差分画像を第２の高解像度変換をして差分高解像度画像を生成する第２の高解像度変換ステップと、
前記差分高解像度画像と前記推定高解像度画像とから高解像度画像を生成する高解像度画像生成ステップと、
前記第１の高解像度変換、前記第２の高解像度変換および前記低解像度変換で用いられる変換パラメータを前記指標値と所定のしきい値とを比較して修正する制御ステップとを備え、
前記高解像度生成ステップは、第２の低解像度入力画像に対して得られる前記高解像度入力画像および前記高解像度画像を入力し、入力した前記高解像度入力画像および前記高解像度画像から１つを選択して前記推定高解像度画像とし、
前記高解像度画像生成ステップは、前記低解像度入力画像に対して得られる差分高解像度画像と第２の低解像度入力画像に対して得られる推定高解像度画像とから前記高解像度画像を
生成することを特徴とする画像処理方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
この発明に係る画像処理装置は、低解像度入力画像を入力して超解像画像を出力するものであり、前記低解像度入力画像を第１の高解像度変換をして高解像度入力画像を生成する第１の高解像度変換部と、前記低解像度入力画像に基づいて生成される推定高解像度画像を低解像度変換して低解像度画像を生成する低解像度変換部と、前記低解像度画像と前記低解像度入力画像とから差分画像を生成する差分画像生成部と、前記差分画像から指標値を算出する指標値算出部と、前記差分画像を第２の高解像度変換をして差分高解像度画像を生成する第２の高解像度変換部と、前記差分高解像度画像と前記推定高解像度画像とから高解像度画像を生成する高解像度画像生成部と、前記第１の高解像度変換、前記第２の高解像度変換および前記低解像度変換で用いられる変換パラメータを前記指標値と所定のしきい値とを比較して修正し、前記推定高解像度画像を前記低解像度変換部および前記高解像度画像生成部に出力するか、超解像画像として出力して画像処理を終了するかを判定する制御部とを備え、前記低解像度変換部は、前記高解像度入力画像および前記高解像度画像を入力し、入力した前記高解像度入力画像および前記高解像度画像から１つを選択して前記推定高解像度画像とする。