【手続補正書】
【提出日】平成18年2月14日(2006.2.14)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】０１０４
【補正方法】変更
【補正の内容】
【０１０４】
図１２は、実世界１の線状の物（例えば、細線）の画像、すなわち光の強度の分布の例を示す図である。図１２において、図中の上方向の位置は、光の強度（レベル）を示し、図中の右上方向の位置は、画像の空間方向の一方向である空間方向Ｘの位置を示し、図中の右方向の位置は、画像の空間方向の他の方向である空間方向Ｙの位置を示す。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０１０９
【補正方法】変更
【補正の内容】
【０１０９】
図１４において、図中の上方向の位置は、画素値を示し、図中の右上方向の位置は、画像の空間方向の一方向である空間方向Ｘの位置を示し、図中の右方向の位置は、画像の空間方向の他の方向である空間方向Ｙの位置を示す。図１４における画素値を示す方向は、図１２におけるレベルの方向に対応し、図１４における空間方向Ｘ、および空間方向Ｙは、図１２における方向と同じである。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０１１２
【補正方法】変更
【補正の内容】
【０１１２】
図１５は、背景とは異なる色であって、単色の、直線状の縁を有する物の実世界１の画像、すなわち光の強度の分布の例を示す図である。図１５において、図中の上方向の位置は、光の強度（レベル）を示し、図中の右上方向の位置は、画像の空間方向の一方向である空間方向Ｘの位置を示し、図中の右方向の位置は、画像の空間方向の他の方向である空間方向Ｙの位置を示す。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０１１７
【補正方法】変更
【補正の内容】
【０１１７】
図１７において、図中の上方向の位置は、画素値を示し、図中の右上方向の位置は、画像の空間方向の一方向である空間方向Ｘの位置を示し、図中の右方向の位置は、画像の空間方向の他の方向である空間方向Ｙの位置を示す。図１７における画素値を示す方向は、図１５におけるレベルの方向に対応し、図１７における空間方向Ｘ、および空間方向Ｙは、図１５における方向と同じである。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０１２７
【補正方法】変更
【補正の内容】
【０１２７】
これに対して、本発明に係る信号処理においては、データ３から、実世界１が推定され、推定の結果に基づいて、高解像度データ１８１が生成される。すなわち、図１９で示されるように、実世界１が、データ３から推定され、高解像度データ１８１が、データ３を考慮して、推定された実世界１から生成される。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０１８３
【補正方法】変更
【補正の内容】
【０１８３】
第２に、例えば、センサ２による射影を定式化して、式（７）を記述する。例えば、実世界１の信号の積分を行った結果がデータ３であると定式化する。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】０５４９
【補正方法】変更
【補正の内容】
【０５４９】
例えば、図９６に示すように、縦に１列の画素からなる単調増減領域であって、２つの隣接するものに属する、横に隣接する画素の画素値が、それぞれ２および５８であるとき、加算した値が６０なので、それぞれの画素に対して、３．５および９５．０である分配比が算出される。縦に１列の画素からなる単調増減領域であって、２つの隣接するものに属する、横に隣接する画素の画素値が、それぞれ１および６５であるとき、加算した値が６６なので、それぞれの画素に対して、１．５および９８．５である分配比が算出される。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】０５６０
【補正方法】変更
【補正の内容】
【０５６０】
図９９に示すように、回帰直線算出部２１３２は、算出された直線Ｂを基に、単調増減領域２１４１−１乃至単調増減領域２１４１−５の下側の境界を決定する。例えば、回帰直線算出部２１３２は、単調増減領域２１４１−１乃至単調増減領域２１４１−５のそれぞれについて、算出された直線Ｂに最も近い画素から下側の境界を決定する。例えば、回帰直線算出部２１３２は、単調増減領域２１４１−１乃至単調増減領域２１４１−５のそれぞれについて、算出された直線Ｂに最も近い画素が領域に含まれるように下側の境界を決定する。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】０６１９
【補正方法】変更
【補正の内容】
【０６１９】
逆に、水平方向であると判定された場合、注目画素を中心として水平（左右）方向に２画素の合計５画素となるように、水平方向に長い範囲の画素を参照画素として抽出して、傾き推定部２２１２に出力する。もちろん、参照画素は、上述のように５画素に限定されるものではなく、それ以外の個数であってもよい。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】０６２３
【補正方法】変更
【補正の内容】
【０６２３】
すなわち、現実世界を近似的に記述する近似関数f(x)が存在すると仮定すると、上述のシフト量と各参照画素の画素値との関係は、図１１０で示されるようなものとなる。ここで、図１０９の各画素の画素値は、上からP（０，２），P（０，１），P（０，０），P（０，−１），P（０，−２）で表される。結果として、注目画素（０，０）近傍の画素値Pとシフト量Cxは、（Ｐ，Ｃｘ）＝（Ｐ（０，２），−Cx（２）），（Ｐ（０，１），−Cx（１）），（Ｐ（０，−１），−Cx（−１）），（Ｐ（０，−２），−Cx（−２）），（Ｐ（０，０），０）の５組の関係が得られることになる。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】０６３６
【補正方法】変更
【補正の内容】
【０６３６】
参照画素抽出部２２３１は、データ定常性検出部１０１より入力されるデータ定常性情報（定常性の動き（動きベクトル）、および、領域の情報）に基づいて、入力画像の各画素が処理領域であるか否かを判定し、処理領域である場合には、入力画像から実世界の近似関数を求めるために必要な参照画素の情報（演算に必要な注目画素周辺の複数の画素の位置、および、画素値の情報）を抽出して、近似関数推定部２２３２に出力する。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】０６４３
【補正方法】変更
【補正の内容】
【０６４３】
ステップＳ２２４４において、参照画素抽出部２２３１は、データ定常性情報に含まれる動きの情報から、データ定常性の動きが、空間方向に近い動きか、または、フレーム方向に近い動きであるか否かを判定する。すなわち、図１１３で示されるように、フレーム方向Ｔと空間方向Ｙからなる面において、フレーム方向を基準軸とした、時間と空間の面内の方向を示す角度をθｖとすれば、参照画素抽出部２２３１は、データ定常性の有する角度θｖが、0度≦θｖ＜45度、または、135度≦θｖ＜180度となる場合、注目画素の定常性の動きは、フレーム方向（時間方向）に近いと判定し、データ定常性の有する角度θｖが、45度≦θｖ＜135度となる場合、注目画素の定常性の動きは、空間方向に近いと判定する。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】０６４４
【補正方法】変更
【補正の内容】
【０６４４】
ステップＳ２２４５において、参照画素抽出部２２３１は、判定した方向に対応した参照画素の位置情報、および、画素値をそれぞれ入力画像から抽出し、近似関数推定部２２３２に出力する。すなわち、参照画素は、後述する近似関数を演算する際に使用されるデータとなるので、角度に応じて抽出されることが望ましい。従って、フレーム方向、または、空間方向のいずれかの判定方向に対応して、その方向に長い範囲の参照画素が抽出される。より具体的には、例えば、図１１３で示されるように、動き方向Ｖfが空間方向に近いと、空間方向であると判定され、この場合、参照画素抽出部２２３１は、例えば、図１１３で示されるように、図１１３中の中央の画素（ｔ，ｙ）＝（０，０）を注目画素とするとき、画素（ｔ，ｙ）＝（−１，２），（−１，１），（−１，０），（−１，−１），（−１，−２），（０，２），（０，１），（０，０），（０，−１），（０，−２），（１，２），（１，１），（１，０），（１，−１），（１，−２）のそれぞれの画素値を抽出する。尚、図１１３においては、各画素のフレーム方向、および、空間方向の大きさが１であるものとする。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】０６５９
【補正方法】変更
【補正の内容】
【０６５９】
ステップＳ２２４７において、微分処理部２２３３は、再度、近似関数推定部２２３２より入力された近似関数f(t)に基づいて、生成しようとする画素の位置における、シフト量を求める。すなわち、微分処理部２２３３は、今の場合、２分割された画素Pat，Pbtのそれぞれをさらに２分割するために必要な微分値をそれぞれ求める。画素Pat，Pbtの画素の位置は、図１１４における黒丸で示すそれぞれの位置であるので、微分処理部２２３３は、それぞれの位置に対応するシフト量を求める。画素Pat，Pbtのシフト量は、それぞれCt（0.25），Ct(−0.25)となる。
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】０６７６
【補正方法】変更
【補正の内容】
【０６７６】
ステップＳ２２６４において、参照画素抽出部２２５１は、データ定常性情報に含まれる動きの情報から、データ定常性の動きが、フレーム方向に近い動きか、または、空間方向に近い動きであるか否かを判定する。すなわち、フレーム方向Ｔと空間方向Ｙからなる面において、フレーム方向を基準軸とした、時間と空間の面内の方向を示す角度をθｖとすれば、参照画素抽出部２２５１は、データ定常性の動きの角度θｖが、0度≦θｖ＜45度、または、135度≦θｖ＜180度となる場合、注目画素の定常性の動きは、フレーム方向に近いと判定し、データ定常性の有する角度θｖが、45度≦θｖ＜135度となる場合、注目画素の定常性の動きは、空間方向に近いと判定する。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】０６７９
【補正方法】変更
【補正の内容】
【０６７９】
逆に、フレーム方向であると判定された場合、注目画素を中心としてフレーム（図中の左右）方向に２画素の合計５画素となるように、フレーム方向に長い範囲の画素を参照画素として抽出して、近似関数推定部２２５２に出力する。もちろん、参照画素は、上述のように５画素に限定されるものではなく、それ以外の個数であってもよい。
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】０６８６
【補正方法】変更
【補正の内容】
【０６８６】
上述の式（３６）は、変数Ｋｔについての１変数の関数であるので、傾き推定部２２５２は、この変数Ｋｔ（傾き）について、１変数の最小自乗法により傾きＫｔを求める。
【手続補正１８】
【補正対象書類名】明細書
【補正対象項目名】０６９２
【補正方法】変更
【補正の内容】
【０６９２】
例えば、図１１４で示されるように、水平方向に２倍の密度で、かつ、フレーム方向に２倍の密度の時空間方向に合計４倍の密度の画素を生成する場合、上述したように、図１１４中のPin，Pat，Pbtのそれぞれの位置に対応する近似関数f(t)の傾きＫｔを求めるようにすればよい。
【手続補正１９】
【補正対象書類名】明細書
【補正対象項目名】０８２３
【補正方法】変更
【補正の内容】
【０８２３】
入力画素値取得部２３３３は、入力画像記憶部２３３２に記憶された入力画像のうちの、条件設定部２３３１により設定されたタップ範囲に対応する入力画像の領域を取得し、それを入力画素値テーブルとして正規方程式生成部２３３５に供給する。即ち、入力画素値テーブルは、入力画像の領域に含まれる各画素のそれぞれの画素値が記述されたテーブルである。なお、入力画素値テーブルの具体例については後述する。
【手続補正２０】
【補正対象書類名】明細書
【補正対象項目名】０８７６
【補正方法】変更
【補正の内容】
【０８７６】
詳細には、例えば、実世界推定部１０２は、データ定常性検出手部１０１により検出されたデータの定常性に対応する線（例えば、図１３１の傾きGfに対応する線（点線））からの１次元方向（例えば、Ｘ方向）に沿った距離（例えば、図１３１のシフト量Cx(y)）に対応する画素の画素値が、１次元方向の積分効果により取得された画素値（例えば、上述した式（４６）に示されるような積分範囲で、式（４６）の右辺に示されるように、近似関数f3(x)がＸ方向に積分された値）であるとして、光信号関数Fを近似関数ｆで近似することにより、光信号関数Fを推定する。
【手続補正２１】
【補正対象書類名】明細書
【補正対象項目名】１０８２
【補正方法】変更
【補正の内容】
【１０８２】
正規方程式生成部２５２５より正規方程式テーブルが出力されると、ステップＳ２５０６において、近似関数生成部２５２６は、正規方程式テーブルに基づいて、上述した式（１０１）の行列WMATの各成分である特徴量wi（即ち、近似関数f(x,y,t)の係数wi）を演算する。
【手続補正２２】
【補正対象書類名】明細書
【補正対象項目名】１０８８
【補正方法】変更
【補正の内容】
【１０８８】
そして、全画素の処理が終了すると（ステップＳ２５０７において、全画素の処理が終了されたと判定されると）、実世界１の推定処理は終了となる。
【手続補正２３】
【補正対象書類名】明細書
【補正対象項目名】１１３７
【補正方法】変更
【補正の内容】
【１１３７】
同様に、上述した式（１０６）において、画素３１１２に対する画素値M(2)は、y=0における近似関数f(x)を所定の積分範囲（開始位置xs2から終了位置xe2まで）で積分したものであるとすると、その積分範囲は、開始位置xs2＝０から終了位置xe2＝0.5までの範囲（画素３１１２のX方向に占める範囲そのもの）ではなく、図１５３で示される範囲、即ち、開始位置xs2＝０＋Cx(0.25)から終了位置xe2＝0.5＋Cx(0.25)（シフト量Cx(0.25)だけ画素３１１２を仮に移動させた場合における、画素３１１２のX方向に占める範囲）となる。
【手続補正２４】
【補正対象書類名】明細書
【補正対象項目名】１１４１
【補正方法】変更
【補正の内容】
【１１４１】
同様に、上述した式（１０８）において、画素３１１４に対する画素値M(4)は、y=0における近似関数f(x)を所定の積分範囲（開始位置xs4から終了位置xe4まで）で積分したものであるとすると、その積分範囲は、開始位置xs4＝０から終了位置xe4＝0.5までの範囲（画素３１１４のX方向の占める範囲そのもの）ではなく、図１５３で示される範囲、即ち、開始位置xs4＝０＋Cx(-0.25)から終了位置xe4＝0.5＋Cx(-0.25)（シフト量Cx(-0.25)だけ画素３１１４を仮に移動させた場合における、画素３１１４のX方向に占める範囲）となる。
【手続補正２５】
【補正対象書類名】明細書
【補正対象項目名】１８９８
【補正方法】変更
【補正の内容】
【１８９８】
なお、定常領域検出部４１６１以外の構成は、図２０７のそれと基本的に同様である。即ち、第３の併用手法が適用される信号処理装置（図２１５の信号処理装置）においても、第１の併用手法が適用される信号処理装置（図２０７）と基本的に同様の構成と機能を有する、データ定常性検出部４１０１、実世界推定部４１０２、画像生成部４１０３、および、画像生成部４１０４が設けられている。
【手続補正２６】
【補正対象書類名】明細書
【補正対象項目名】１９１９
【補正方法】変更
【補正の内容】
【１９１９】
このように、図２１６のフローチャートの例においては、第１の画素（ＨＤ画素）または第２の画素（ＨＤ画素）が生成される毎に、出力画像として第１の画素または第２の画素が画素単位で出力される。