(57)【要約】【課題】  より高品位の画像信号を生成できるようにする。【解決手段】  HD予測部１１は、入力されたSD画像信号から４倍密度のHD画像信号を生成する。予測値評価部１２は、HD予測部１１により生成されたHD予測値を評価し、その評価に対応する補正量Ｅを演算する。予測値補正部１３は、HD予測部１１により生成されたHD予測値から、予測値評価部１２により生成された補正量Ｅを減算することで、HD予測値を補正する。本発明はテレビジョン受像機に適用できる。【選択図】  図１
2005311588.tif 000002
【特許請求の範囲】
【請求項１】
第１の画像信号を画素変換して第２の画像信号を生成する生成手段と、
前記第２の画像信号の前記第１の画像信号に対する評価に基づいて補正量を演算する演算手段と、
前記補正量に基づいて前記第２の画像信号を補正する補正手段と
を備えることを特徴とする信号処理装置。
【請求項２】
前記演算手段は、前記第２の画像信号の画素のうちの注目画素と、前記注目画素を含むブロック内の他の画素との差分である第１の差分と、前記注目画素と、前記ブロック外の他の画素との差分である第２の差分との関係に基づいて、前記評価を表す係数を演算する
ことを特徴とする請求項１に記載の信号処理装置。
【請求項３】
前記演算手段は、
前記第１の差分を演算する第１の差分演算手段と、
前記第２の差分を演算する第２の差分演算手段と、
前記第１の差分のフレーム内の平均値を演算する第１の平均値演算手段と、
前記第２の差分のフレーム内の平均値を演算する第２の平均値演算手段と、
前記第１の差分の平均値と前記第２の差分の平均値との比に基づいて、前記係数を演算する係数演算手段と、
前記係数と前記第２の差分に基づいて、前記補正量を演算する補正量演算手段と
を備えることを特徴とする請求項２に記載の信号処理装置。
【請求項４】
第１の画像信号を画素変換して第２の画像信号を生成する生成ステップと、
前記第２の画像信号の前記第１の画像信号に対する評価に基づいて補正量を演算する演算ステップと、
前記補正量に基づいて前記第２の画像信号を補正する補正ステップと
を含むことを特徴とする信号処理方法。
【請求項５】
第１の画像信号を画素変換して第２の画像信号を生成する生成ステップと、
前記第２の画像信号の前記第１の画像信号に対する評価に基づいて補正量を演算する演算ステップと、
前記補正量に基づいて前記第２の画像信号を補正する補正ステップと
を含むことを特徴とするコンピュータが読み取り可能なプログラムが記録されている記録媒体。
【請求項６】
第１の画像信号を画素変換して第２の画像信号を生成する生成ステップと、
前記第２の画像信号の前記第１の画像信号に対する評価に基づいて補正量を演算する演算ステップと、
前記補正量に基づいて前記第２の画像信号を補正する補正ステップと
をコンピュータに実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、信号処理装置および方法、記録媒体、並びにプログラムに関し、特に、より高品質の画像を生成することができるようにした、信号処理装置および方法、記録媒体、並びにプログラムに関する。
【背景技術】
【０００２】
最近、テレビジョン受像機の表示画面の大型化に伴い、画像信号の画素数を多くして表示させることが多くなってきた。このため、例えばSD（Standard Definition）画像からHD（High Definition）画像へ変換するために、画素数を４倍密度に変換する処理が提案されている（例えば、特許文献１）。
【０００３】
これにより、視聴者は、より高品質の画像を大型の画面で視聴することが可能となる。
【特許文献１】特開２０００−７８５３６公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、出力画像を線形予測係数によって生成する場合、出力画像が入力画像によって一義的に決定されてしまう。また、例えば、ADRC（Adaptive Dynamic Range Coding）によってクラス分類を行い、このクラスによって予め学習した予測係数の中から最適な予測係数を読み出し、その予測係数に基づいて出力画像を生成する方法によっても、入力画像が決まると出力画像も一義的に決定される。入力画像と出力画像との誤差が少なくなるように予め多くの教師画像を学習することで予測係数が生成されるのであるが、入力画像によっては、やはり、この誤差が充分小さくできない場合がある。
【０００５】
従来、このような場合においても、生成された高解像度の画像は、そのまま出力されていた。例えば、４倍密度変換の場合、１画素からそれぞれ独立した線形予測係数によって４画素が生成されるが、その４画素間と、別の入力画素から得られる別の４画素との間で、異なる特性を持つ処理になるため、不連続が生じる場合があった。
【０００６】
その結果、ユーザは、必ずしも充分な高品位の画像を視聴できなくなる場合があった。
【０００７】
本発明はこのような状況に鑑みてなされたものであり、より高品位の画像を提供できるようにするものである。
【課題を解決するための手段】
【０００８】
本発明の信号処理装置は、第１の画像信号を画素変換して第２の画像信号を生成する生成手段と、第２の画像信号の第１の画像信号に対する評価に基づいて補正量を演算する演算手段と、補正量に基づいて第２の画像信号を補正する補正手段と
を備えることを特徴とする。
【０００９】
前記演算手段は、第２の画像信号の画素のうちの注目画素と、注目画素を含むブロック内の他の画素との差分である第１の差分と、注目画素と、ブロック外の他の画素との差分である第２の差分との関係に基づいて、評価を表す係数を演算するようにすることができる。
【００１０】
前記演算手段は、第１の差分を演算する第１の差分演算手段と、第２の差分を演算する第２の差分演算手段と、第１の差分のフレーム内の平均値を演算する第１の平均値演算手段と、第２の差分のフレーム内の平均値を演算する第２の平均値演算手段と、第１の差分の平均値と第２の差分の平均値との比に基づいて、係数を演算する係数演算手段と、係数と第２の差分に基づいて、補正量を演算する補正量演算手段とを備えるようにすることができる。
【００１１】
本発明の信号処理方法は、第１の画像信号を画素変換して第２の画像信号を生成する生成ステップと、第２の画像信号の第１の画像信号に対する評価に基づいて補正量を演算する演算ステップと、補正量に基づいて第２の画像信号を補正する補正ステップとを含むことを特徴とする。
【００１２】
本発明の記録媒体のプログラムは、第１の画像信号を画素変換して第２の画像信号を生成する生成ステップと、第２の画像信号の第１の画像信号に対する評価に基づいて補正量を演算する演算ステップと、補正量に基づいて第２の画像信号を補正する補正ステップとを含むことを特徴とする。
【００１３】
本発明のプログラムは、第１の画像信号を画素変換して第２の画像信号を生成する生成ステップと、第２の画像信号の第１の画像信号に対する評価に基づいて補正量を演算する演算ステップと、補正量に基づいて第２の画像信号を補正する補正ステップとをコンピュータに実行させることを特徴とする。
【００１４】
本発明においては、第１の画像信号を画素変換して生成された第２の画像信号の第１の画像信号に対する評価に基づいて補正量が演算され、その補正量に基づいて、第２の画像信号が補正される。
【発明の効果】
【００１５】
本発明によれば、高解像度の画像信号を生成することができる。特に、本発明によれば、より高品位の高解像度の画像を生成することが可能となる。
【発明を実施するための最良の形態】
【００１６】
以下に本発明の最良の形態を説明するが、開示される発明と実施の形態との対応関係を例示すると、次のようになる。明細書中には記載されているが、発明に対応するものとして、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その発明に対応するものではないことを意味するものではない。逆に、実施の形態が発明に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その発明以外の発明には対応しないものであることを意味するものでもない。
【００１７】
さらに、この記載は、明細書に記載されている発明の全てを意味するものではない。換言すれば、この記載は、明細書に記載されている発明であって、この出願では請求されていない発明の存在、すなわち、将来、分割出願されたり、補正により出現し、追加される発明の存在を否定するものではない。
【００１８】
［請求項１］
第１の画像信号（例えば、SD画像信号）を画素変換して第２の画像信号（例えば、HD画像信号）を生成する生成手段（例えば、図１のHD予測部１１）と、
前記第２の画像信号の前記第１の画像信号に対する評価に基づいて補正量（例えば、補正量Ｅ）を演算する演算手段（例えば、図１の予測値評価部１２）と、
前記補正量に基づいて前記第２の画像信号を補正する補正手段（例えば、図１の予測値補正部１３）と
を備えることを特徴とする信号処理装置。
【００１９】
［請求項２］
前記演算手段は、前記第２の画像信号の画素（例えば、図８のHD画素データ）のうちの注目画素（例えば、図８の画素ｍ０）と、前記注目画素を含むブロック内の他の画素（例えば、図８の画素ｍ１乃至ｍ３）との差分である第１の差分（例えば、モード内差分）と、前記注目画素と、前記ブロック外の他の画素（例えば、図８の画素ｓ１乃至ｓ３）との差分である第２の差分（例えば、モード間差分）との関係に基づいて、前記評価を表す係数（例えば、補正係数Ｋ）を演算する（例えば、図１２のステップＳ６５の処理）
ことを特徴とする請求項１に記載の信号処理装置。
【００２０】
［請求項３］
前記演算手段は、
前記第１の差分を演算する第１の差分演算手段（例えば、図６のモード内差分計算部６１）と、
前記第２の差分を演算する第２の差分演算手段（例えば、図６のモード間差分計算部６５）と、
前記第１の差分のフレーム内の平均値（例えば、平均値Ｄinav）を演算する第１の平均値演算手段（例えば、図６の平均値計算部６２）と、
前記第２の差分のフレーム内の平均値（例えば、平均値Ｄoutav）を演算する第２の平均値演算手段（例えば、図６の平均値計算部６６）と、
前記第１の差分の平均値と前記第２の差分の平均値との比に基づいて、前記係数を演算する係数演算手段（例えば、図６の補正係数計算部６３）と、
前記係数と前記第２の差分（例えば、ｄout）に基づいて、前記補正量を演算する補正量演算手段（例えば、図６の補正量演算部６４）と
を備えることを特徴とする請求項２に記載の信号処理装置。
【００２１】
［請求項４］
第１の画像信号（例えば、SD画像信号）を画素変換して第２の画像信号（例えば、HD画像信号）を生成する生成ステップ（例えば、図２のステップＳ1）と、
前記第２の画像信号の前記第１の画像信号に対する評価に基づいて補正量（例えば、補正量Ｅ）を演算する演算ステップ（例えば、図１２のステップＳ66）と、
前記補正量に基づいて前記第２の画像信号を補正する補正ステップ（例えば、図２のステップＳ3）と
を含むことを特徴とする信号処理方法。
【００２２】
以下、図面を参照して、本発明の実施の形態について説明する。
【００２３】
図１は、本発明を適用した信号処理装置の機能的構成例を表している。この信号処理装置１は、HD予測部１１、予測値評価部１２、および予測値補正部１３により構成されている。
【００２４】
HD予測部１１には、入力画像信号が入力されている。HD予測部１１は、例えば、この入力画像信号がSD画像信号であるとき、これをHD画像信号に変換して、信号Ｙ1として、予測値評価部１２と予測値補正部１３に出力する。予測値評価部１２は、HD予測部１１から入力された予測値としてのHD画像信号を評価し、補正量Ｅを演算して、予測値補正部１３に供給する。予測値補正部１３は、HD予測部１１から入力されたHD画像信号を、予測値評価部１２より供給された補正量Ｅに基づいて補正し、信号Ｙ2としての出力画像信号を出力する。
【００２５】
次に、図２のフローチャートを参照して、図１の信号処理装置の画像信号生成処理について説明する。
【００２６】
ステップＳ１において、HD予測部１１は、入力画像信号からHD予測値を生成する。即ち、入力されたSD画像信号からHD予測値としてのHD画像信号を生成し、予測値評価部１２と予測値補正部１３に出力する。このHD予測値生成処理の詳細については、図３と図４を参照して後述する。
【００２７】
ステップＳ２において、予測値評価部１２は、HD予測部１１より入力されたHD予測値を評価する。この予測値評価部１２の動作の詳細については、図６と図１２を参照して後述するが、これにより、HD予測部１１により生成された予測値が評価され、その評価に基づいた補正量Ｅが演算される。
【００２８】
ステップＳ３において、予測値補正部１３は、HD予測値を補正する。即ち、HD予測部１１より供給されたHD画像信号である予測値Ｙ1から、予測値評価部１２より供給された補正量Ｅを次式に基づいて減算することで、補正されたHD画像信号としての信号Ｙ2が演算される。
【００２９】
【数１】
2005311588.tif 000003
【００３０】
図３は、HD予測部１１の機能的構成を表すブロック図である。同図に示されるように、HD予測部１１は、予測タップ抽出部３１、クラスタップ抽出部３２、クラス分類部３３、係数記憶部３４、および適応予測部３５により構成されている。
【００３１】
予測タップ抽出部３１は、入力画像信号としてのSD画像信号から予測タップを抽出し、適応予測部３５に供給する。クラスタップ抽出部３２は、入力されたSD画像信号からクラスタップを抽出し、クラス分類部３３に出力する。予測タップ抽出部３１が抽出する予測タップと、クラスタップ抽出部３２が抽出するクラスタップとして、入力されたSD画像信号のどの位置の画素が抽出されるかは、予め定められている。
【００３２】
クラス分類部３３は、クラスタップ抽出部３２より入力されたクラスタップを構成する画素の値に基づいてクラスを決定し、そのクラスに対応するコードを係数記憶部３４に出力する。係数記憶部３４には、多くの画像を予め学習することにより生成されたクラス毎の予測係数が記憶されている。係数記憶部３４は、クラス分類部３３より入力されたクラスに対応する予測係数を読み出し、適応予測部３５に出力する。適応予測部３５は、予測タップ抽出部３１により抽出された予測タップを構成する画素の画素値と、係数記憶部３４より供給された予測係数を一次線形結合式に適用して、HD予測値としてのHD画像信号を生成する。
【００３３】
次に、図４のフローチャートを参照して、HD予測部１１のHD予測値生成処理について説明する。
【００３４】
ステップＳ３１において、クラスタップ抽出部３２は、入力されたSD画像信号からクラスタップを抽出する。抽出されたクラスタップは、クラス分類部３３に供給され、ステップＳ３２において、クラス分類部３３はクラス分類する。即ちクラスタップ抽出部３２より入力されたクラスタップの値を、例えば１ビットADRC処理することでクラスが決定される。このクラスは、入力されたSD画像信号の特徴に対応したものとなる。係数記憶部３４は、ステップＳ３３において、予測係数を読み出す。具体的には、クラス分類部３３より入力されたクラスコードに対応する予測係数が読み出され、適応予測部３５に供給される。このクラスコードは、入力されたSD画像信号の特徴に対応したものであるため、予測係数はその特徴に対応した予測係数となる。
【００３５】
ステップＳ３４において、予測タップ抽出部３１は予測タップを抽出する。抽出された予測タップは、適応予測部３５に供給される。適応予測部３５は、ステップＳ３５において、HD予測値を生成する。即ち、予め定められている一次線形予測式に、予測タップ抽出部３１より供給された予測タップの画素値と、係数記憶部３４より読み出された予測係数を適応することで、HD予測値が演算される。
【００３６】
以上のようにして、例えば、図５に示されるように、図中丸印で示されるSD画素データから４倍の画素密度の図中四角形で示すHD画素データが生成される。同図に示されるように、この場合、例えば１個のSD画素データｐ１が、その周囲の４個のHD画素データｑ１乃至ｑ４に対応する。
【００３７】
以上のようにして、SD画像信号から生成されたより高密度のHD画像信号が予測値評価部１２と予測値補正部１３に供給される。
【００３８】
図６は、予測値評価部１２の機能的構成例を表している。この予測値評価部１２は、モード内差分計算部６１、平均値計算部６２、補正係数計算部６３、補正量演算部６４、モード間差分計算部６５、および平均値計算部６６により構成されている。
【００３９】
モード内差分計算部６１は、HD予測部１１の適応予測部３５より供給されたHD予測値のモード内差分値を計算する。同様に、モード間差分計算部６５は、入力されたHD予測値からモード間差分を計算する。この実施の形態においては、図７に示されるように、SD画素データのうちの１つの注目画素に対して、その周囲の４個のHD画素がモード０乃至モード３とされる。図７の例においては、注目画素の左上のHD画素がモード０、右上の画素がモード１、左下の画素がモード２、そして右下の画素がモード３とされる。
【００４０】
図８に示されるように、モード０乃至モード３の画素m０乃至ｍ３の４個の画素によりモードブロックが構成される。そして、画素m０乃至ｍ３のうちの１つが注目画素とされ、１つの注目画素とそれ以外のモードブロック内の他の画素との差分がモード内差分とされる。図８の例の場合、モードブロックの左上のモード０の画素ｍ０が注目画素とされているので、モード１の画素ｍ１、モード２の画素ｍ２、およびモード３の画素ｍ３との差分がモード内差分とされる。即ち、モード内差分Dinは、次式で表される。
【００４１】
【数２】
2005311588.tif 000004
【００４２】
式（２）から明らかなように、この例においては、注目画素とその他の３個のモードの画素の差分の絶対値和がモード内差分Dinとされる。
【００４３】
そして、モードブロック内における注目画素の位置に対応する位置のモードブロック外の画素と注目画素との差分がモード間差分とされる。即ち、図８の例の場合、注目画素ｍ０は、モードブロックの左上の画素であるため、注目画素ｍ０の左上の３個の画素ｓ１乃至ｓ３との差分がモード間差分とされる。即ち、モード間差分Doutは、注目画素ｍ０と、その左側の画素ｓ１、上側の画素ｓ２、および斜め左上の画素ｓ３との差分の絶対値の和として次式により演算される。
【００４４】
【数３】
2005311588.tif 000005
【００４５】
注目画素の位置が、例えば図９に示されるように、モードブロックの右上に位置する場合、その右側の画素ｓ１、上側の画素ｓ２、および右斜め上の画素ｓ３との差分の絶対値和が、モード間差分とされる。
【００４６】
モード内差分は、図８の場合と同様に、モードブロック内の注目画素ｍ０と他の３つの画素ｍ１乃至ｍ３との差分の絶対値和である。
【００４７】
図１０に示されるように、注目画素がモードブロックの左下の位置にある場合、注目画素ｍ０の左側の画素ｓ１、下側の画素ｓ２、および斜め左下の画素ｓ３との差分の絶対値和がモード間差分Doutとされる。モード内差分は、注目画素ｍ０とその他のモードブロック内の３つの画素ｍ１乃至ｍ３との差分の絶対値和である。
【００４８】
さらに、図１１に示されるように、注目画素ｍ０がモードブロックの右下に位置する場合、注目画素ｍ０の右側の画素ｓ１、下側の画素ｓ２、および右下の画素ｓ３との差分の絶対値和がモード間差分とされる。モード内差分は、注目画素ｍ０とモードブロック内のその他の３つの画素ｍ１乃至ｍ３との差分の絶対値和とされる。
【００４９】
図６に戻って、平均値計算部６２は、モード内差分計算部６１により計算されたモード内差分のそのフレーム内の平均値Dinavを計算する。平均値計算部６６は、モード間差分計算部６５により計算されたモード間差分Ｄoutのフレーム内の平均値Doutavを演算する。
【００５０】
補正係数計算部６３は、平均値計算部６２により計算されたモード内差分の平均値Dinavと、平均値計算部６６により計算されたモード間差分の平均値Ｄoutavとに基づいて、次式から補正係数Ｋを演算する。
【００５１】
【数４】
2005311588.tif 000006
【００５２】
補正量演算部６４は、補正係数計算部６３により計算された補正係数Ｋと、モード間差分計算部６５により計算されたモード間差分doutから、次式に基づいて補正量Ｅを演算する。
【００５３】
【数５】
2005311588.tif 000007
【００５４】
なお、上記式のモード間差分doutは、次式で表される値である。
【００５５】
【数６】
2005311588.tif 000008
【００５６】
次に、図１２のフローチャートを参照して、予測値評価部１２の補正量演算処理について説明する。
【００５７】
ステップＳ６１において、モード内差分計算部６１は、モード内差分を計算する。具体的には、HD画素データで構成されるフレームの所定の位置にモードブロックを配置し、そのモードブロックの４個の画素のうちの１つの画素を注目画素として、上述した式（２）に基づいて、モード内差分Ｄinが演算される。ステップＳ６２において、モード間差分計算部６５は、式（３）に基づいてモード間差分Ｄoutを演算する。
【００５８】
モード内差分計算部６１によるモード内差分の計算と、モード間差分計算部６５によるモード間差分の計算は、モードブロックをフレーム内の位置に順次移動することで、１フレーム内の全ての画素について、同様に行われる。
【００５９】
そして、ステップＳ６３において、平均値計算部６２は、モード内差分計算部６１により計算されたモード内差分Dinの１フレーム分の平均値Dinavを演算する。同様に、ステップＳ６４において、平均値計算部６６は、モード間差分計算部６５により計算されたモード間差分Doutの１フレーム分の平均値Doutavを演算する。
【００６０】
補正係数計算部６３は、ステップＳ６５において補正係数Ｋを演算する。即ち、補正係数計算部６３は、平均値計算部６２により計算された平均値Dinavを、平均値計算部６６により計算された平均値Doutavで割り算することで、式（４）に基づいて、補正係数Ｋを演算する。
【００６１】
ステップＳ６６において、補正量演算部６４は、補正係数計算部６３により計算された補正係数Ｋと、モード間差分計算部６５により計算された式（６）で表されるモード間差分doutに基づいて、式（５）で表される補正量Ｅを演算する。
【００６２】
ここで、補正係数Ｋと補正量Ｅの意味について説明すると、次のようになる。
【００６３】
即ち、一般的な自然画像では、モード内差分の平均値Dinavとモード間差分の平均値Doutavは、次式で表されるように、等しい。
【００６４】
【数７】
2005311588.tif 000009
【００６５】
この式（７）は、画素レベル勾配の方向依存性がないことを意味する。
【００６６】
しかしながら、本実施の形態のように、画素密度を４倍に変換すると、変換後の画像では、４画素のブロック毎に隔たりができ、次式で表されるように、モード間差分の平均値Doutavは、モード内差分の平均値Dinavより大きくなる。
【００６７】
【数８】
2005311588.tif 000010
【００６８】
つまり、モード内差分よりもモード間差分の方が、平均的に大きくなる。これは、１個のSD画素から４個のHD画素を生成しているために、４画素毎に独立な出力になっているためである。
【００６９】
このように、本来、式（７）に示されるように、平均的に等しくなるべき値が、画素変換後の画像では、式（８）に示されるように、等しくなくなっているので、この値が等しくなるように補正することで、本来出力したい画像（より高品位の画像）に演算結果を近づけることができる。
【００７０】
画素変換をしない本来の画像では、式（７）に表されるように、モード内差分Dinavとモード間差分Doutavの値は等しくなるので、式（４）で表される補正係数Ｋは、本来の画像のモード間差分が４倍密処理の出力結果におけるモード間差分に較べて、どれくらい小さいかを表していることになる。そこで、４倍密処理出力結果画像のモード間差分Doutをモード内差分Dinに近づけてやれば、画像を正しい方向に補正することができる。
【００７１】
この処理を概念的に表すと、図１３に示されるようになる。ある注目画素ｍ０に対してモードブロック境界をまたいだ左側の画素をｓ１としたとき、図１３の最も左側に示されるように、注目画素ｍ０と画素ｓ１との差分はｄ０となっている。
【００７２】
この画像を４倍密処理して画素変換すると、図１３の中央に示されるように、注目画素ｍ０と画素ｓ１との差分は、ｄ０からｄ１に平均的に拡大することになる。この状態がHD予測部１１より出力されたHD予測値としての信号Ｙ1の状態である。
【００７３】
そこで、この差分ｄ１に対して、本来平均的にどれくらい小さいかを表す補正係数Ｋを乗算することで、補正後の差分ｄ２を、本来の差分ｄ０に近づけることができる。このための補正量がＥである。
【００７４】
なお、注目画素ｍ０と画素ｓ１との差分補正処理は、両側から行われるため（画素ｍ０が注目画素とされている場合の補正と、画素ｓ1が注目画素とされた場合の補正が行われるため）、式（５）においては、補正量Ｅの値が２で割り算されている。
【００７５】
予測値補正部１３により、上記した式（１）に基づいて、HD予測部１１より出力された信号Ｙ1から補正量Ｅを減算することで、補正されたHD画像信号としての信号Ｙ2を演算することができる。これにより、画面全体で平均的にモード間差分平均がモード内差分平均に近づき、画面全体でモードブロック毎の隔たりがなくなった画像が得られる。
【００７６】
以上においては、画素変換を４倍密度としたが、その値は、それに限られるものではなく、また、画素密度をｎ倍にする場合だけでなく、１／ｎ倍にする場合にも本発明は適用することが可能である。
【００７７】
本発明は、テレビジョン受像機、ハードディスクレコーダ、その他の画像信号を処理する装置に適用することができる。
【００７８】
上述した一連の処理は、ハードウエアにより実行させることもできるし、ソフトウエアにより実行させることもできる。この場合、例えば、信号処理装置は、図１４に示されるようなパーソナルコンピュータにより構成される。
【００７９】
図１４において、CPU（Central Processing Unit）２２１は、ROM（Read Only Memory）２２２に記憶されているプログラム、または記憶部２２８からRAM（Random Access Memory）２２３にロードされたプログラムに従って各種の処理を実行する。RAM２２３にはまた、CPU２２１が各種の処理を実行する上において必要なデータなども適宜記憶される。
【００８０】
CPU２２１、ROM２２２、およびRAM２２３は、バス２２４を介して相互に接続されている。このバス２２４にはまた、入出力インタフェース２２５も接続されている。
【００８１】
入出力インタフェース２２５には、キーボード、マウスなどよりなる入力部２２６、CRT(Cathode Ray Tube)、LCD(Liquid Crystal display)などよりなるディスプレイ、並びにスピーカなどよりなる出力部２２７、ハードディスクなどより構成される記憶部２２８、モデムなどより構成される通信部２２９が接続されている。通信部２２９は、インターネットを含むネットワークを介しての通信処理を行う。
【００８２】
入出力インタフェース２２５にはまた、必要に応じてドライブ２３０が接続され、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア２３１が適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて記憶部２２８にインストールされる。
【００８３】
上述した一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。
【００８４】
この記録媒体は、図１４に示されるように、装置本体とは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク（フロッピディスクを含む）、光ディスク（CD-ROM(Compact Disk-Read Only Memory),DVD(Digital Versatile Disk)を含む）、光磁気ディスク（ＭＤ（Mini-Disk）を含む）、もしくは半導体メモリなどよりなるリムーバブルメディア２３１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される、プログラムが記録されているROM２２２や、記憶部２２８に含まれるハードディスクなどで構成される。
【００８５】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【００８６】
また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
【産業上の利用可能性】
【００８７】
本発明は、画像処理を行うパーソナルコンピュータに適応することが可能である。
【図面の簡単な説明】
【００８８】
【図１】本発明を適用した信号処理装置の機能的構成例を示すブロック図である。
【図２】図１の信号処理装置の画像生成処理を説明するフローチャートである。
【図３】図１のHD予測部の機能的構成例を示すブロック図である。
【図４】HD予測値生成処理を説明するフローチャートである。
【図５】SD画素データとHD画素データの関係を説明する図である。
【図６】図１の予測値評価部の機能的構成例を示すブロック図である。
【図７】モードを説明する図である。
【図８】モード内差分とモード間差分を説明する図である。
【図９】モード内差分とモード間差分を説明する図である。
【図１０】モード内差分とモード間差分を説明する図である。
【図１１】モード内差分とモード間差分を説明する図である。
【図１２】補正量演算処理を説明するフローチャートである。
【図１３】補正の原理を説明する図である。
【図１４】パーソナルコンピュータの構成例を示すブロック図である。
【符号の説明】
【００８９】
１  信号処理装置，  １１  HD予測部，  １２  予測値評価部，  １３  予測値補正部，  ３１  予測タップ抽出部，  ３２  クラスタップ抽出部，  ３３  クラス分類部，  ３４  係数記憶部，  ３５  適応予測部，  ６１  モード内差分計算部，  ６２  平均値計算部，  ６３  補正係数計算部，  ６４  補正量演算部，  ６５  モード間差分計算部，  ６６  平均値計算部
【図１】
2005311588.tif 000011
【図２】
2005311588.tif 000012
【図３】
2005311588.tif 000013
【図４】
2005311588.tif 000014
【図５】
2005311588.tif 000015
【図６】
2005311588.tif 000016
【図７】
2005311588.tif 000017
【図８】
2005311588.tif 000018
【図９】
2005311588.tif 000019
【図１０】
2005311588.tif 000020
【図１１】
2005311588.tif 000021
【図１２】
2005311588.tif 000022
【図１３】
2005311588.tif 000023
【図１４】
2005311588.tif 000024