(57)【要約】      （修正有）【課題】画像の先鋭感を維持し、符号化歪が視覚的に目立たなくなる順次走査変換装置を実現する。【解決手段】各ブロックの画素値のアクティビティ演算手段1と、時間的に前後する前後フィールドから、画素の動きベクトルを表す動き情報、動き検出の精度を表す動き検出精度情報、及びフレーム間補間画素値を出力する動き検出手段2と、入力画像を、画素の散乱度と動き散乱度の２つのパラメータにより規定される１つ又はそれ以上の領域に区分する領域区分情報を出力する領域区分手段6とを有する。適応混合手段7において、区分された領域毎に、重み付け情報を用いてフィールド内補間画素値とフレーム間補間画素値に対して重み付けし、重み付けされたフィールド内補間画素値とフレーム間補間画素値とを混合して出力する。符号化制御情報に含まれる量子化制御情報をアクティビティ情報として用い、動き情報を動きベクトルとして用いる。【選択図】図１
2006304096.tif 000002
【特許請求の範囲】
【請求項１】
入力した飛び越し走査信号について順次走査変換処理を行って順次走査信号を出力する順次走査変換装置において、
入力画像信号を受け取り、入力画像を複数のブロックに分割し、画素値の散乱度をブロック毎に演算し、各ブロックの画素値の散乱度を表すアクティビティ情報を出力するアクティビティ演算手段と、
入力画像信号を受け取り、時間的に前後する前後フィールドから、補間すべき各画素の動きベクトル情報、動きの検出精度情報及びフレーム間補間画素値をそれぞれ出力する動き検出手段と、
入力画像信号を受け取り、補間されるべきフィールドの画素値を用いてフィールド内補間画素値を出力するフィールド内補間手段と、
前記動き検出手段から出力される各画素の動きベクトルから動き散乱度をブロック単位で演算し、動き散乱度情報を出力する動き散乱度演算手段と、
前記アクティビティ演算手段からのアクティビティ情報と、前記動き散乱度演算手段から出力される動き散乱度情報とを受け取り、入力画像を、画素値の散乱度と動き散乱度との２つのパラメータにより規定される１つ又はそれ以上の領域に区分する領域区分情報を出力する領域区分手段と、
前記フィールド内補間画素値、フレーム間補間画素値、及び領域区分情報を受け取り、区分された領域毎に、前記画素値の散乱度と動き散乱度とにより規定されるパラメータを重み付け因子として用い、フィールド内補間画素値とフレーム間補間画素値に対して適応混合処理して補間画素値を出力する適応混合手段と、
前記入力画像信号と適応混合手段から出力された補間画素値とを用いライン補間を行うライン補間手段とを具えることを特徴とする順次走査変換装置。
【請求項２】
入力した飛び越し走査信号について順次走査変換処理を行って順次走査信号を出力する順次走査変換装置において、
符号化ストリームを復号化して、画像信号と、画素の動き情報及び量子化制御情報を含む符号化制御情報とを出力する復号手段と、
復号化された符号化制御情報に含まれる画像の動き情報を受け取り、動き散乱度をブロック単位で演算して動き散乱度情報を出力する動き散乱度演算手段と、
前記動き散乱度情報及び量子化制御情報を受け取り、入力画像を、画素値の散乱度と動き散乱度との２つのパラメータにより規定される１つ又はそれ以上の領域に区分する領域区分情報を出力する領域区分手段と
復号画像信号を受け取り、時間的に前後する前後フィールドから、動き検出の精度を表す動き検出精度情報、及びフレーム間補間画素値をそれぞれ出力する動き検出手段と、
復号画像信号を受け取り、補間されるべきフィールドの画素値を用いてフィールド内補間画素値を出力するフィールド内補間手段と、
前記フィールド内補間画素値、フレーム間補間画素値、及び領域区分情報を受け取り、区分された画像領域毎に、前記画素値の散乱度と動き散乱度とにより規定されるパラメータを重み付け因子として用い、フィールド内補間画素値とフレーム間補間画素値に対して適応混合処理して補間画素値を出力する適応混合手段と、
前記入力画像信号と適応混合手段から出力された補間画素値とを用いライン補間を行うライン補間手段とを具えることを特徴とする順次走査変換装置。
【請求項３】
請求項２に記載の順次走査変換装置において、前記符号化ストリームは、非可逆変換符号化処理されていることを特徴とする順次走査変換装置。
【請求項４】
前記領域区分手段は、前記画素値の散乱度及び動き散乱度についてそれぞれ所定の閾値と比較する比較手段を有し、前記適応混合手段は、画素値の散乱度及び動き散乱度の両方が閾値を超えた領域について、前記画素値の散乱度及び動き散乱度により規定されるパラメータを重み付け因子として用いて適応混合処理により補間値を出力し、画素値の散乱度及び動き散乱度の少なくとも一方の散乱度が閾値以下の領域については、前記動き検出手段から出力される動き検出精度情報を重み付け因子として用いて適応混合処理により補間画素値を出力することを特徴とする順次走査変換装置。
【請求項５】
請求項４に記載の順次走査変換装置において、前記適応混合手段は、前記動きの検出精度情報を重み付け因子として用い、前記フィールド内補間画素値とフレーム間補間画素値に対して適応混合処理する第１の重み付け混合手段と、前記画素値の散乱度及び動き散乱度により規定されるパラメータを重み付け因子として用い、前記フィールド内補間画素値とフレーム間補間画素値に対して適応混合処理する第２の重み付け混合手段と、前記第１の重み付け適応混合手段からの出力と第２の重み付け適応混合手段からの出力を切り換えて補間画素値を出力するスィッチング手段と、前記領域区分手段からの出力信号に基づいてスィッチング手段を制御する切り換え制御手段とを有することを特徴とする順次走査変換装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動き補償型順次走査変換装置の改良、特に動画像の画質の向上を図った順次走査変換装置に関するものである。
【背景技術】
【０００２】
テレビジョン信号等の動画像信号は、限られた伝送路帯域で効率よく信号を伝送するため、飛び越し走査方式により伝送されている。この飛び越し走査信号を受信側で順次走査信号に変換する信号処理は順次走査変換と称されている。この処理は、例えばLCD(Liquid Crystal Display)やPDP(Plasma Display Panel)等の順次走査信号対応の画像表示装置において、付随する信号処理部において行われている。
【０００３】
順次走査変換処理は、動き適応型順次走査変換と動き補償型順次走査変換とに大別される。動き適応型順次走査変換では、画像の差分等から静動判定を行い、画像が静止していると判定した場合前後の２フィールドを重ね合わせてフレーム画像を作成し、画像が動いていると判定した場合フィールド内補間フィルタによりフレーム画像を作成している。この処理では、静止画像については垂直解像度が改善されるが、動きのある画像については垂直解像度の改善は望めない。
【０００４】
一方、動き補償型順次走査変換は、補間すべきフィールドに対して、時間的に前後する２つのフィールドを用いた動き補償処理により補間ラインを形成するものであり、動きのある画像についても垂直解像度の改善が見込まれる（例えば、「非特許文献１」及び「特許文献１」参照）。
【０００５】
【非特許文献１】「動き補償を用いたインタレース走査画像の順次走査変換法の検討」、栗田ほか、信学論、Vol. J72-D-II、No.1 pp40-49
【特許文献１】「特開平1-108886号公報」
【発明の開示】
【発明が解決しようとする課題】
【０００６】
従来の動き補償型順次走査変換では、一般的に、検出された動き情報の正確さを用いて補間値が決められている。この動き情報の正確度は、例えば前後フィールドでブロックマッチングを行い、ブロック内画素の差分絶対値和の大小で表現され、その値が大きい場合その動きは正確でないものとされ、フィールド内補間値に重みをおいた補間画素値が生成されていた。このため、例えば水面のように、画素値の散乱度ないし分散度が高く且つランダムな動きの画像領域については動き情報が正確に捕らえられないため、順次走査変換時にフィールド内補間値に重みを置いた補間画素値が生成されていた。しかしながら、このような画像領域は、本来高い垂直解像度を有しているためフィールド内補間値に重みを置いて補間画素値を生成したのでは、順次走査変換された画像の垂直解像度が顕著に低下する欠点があった。
【０００７】
また、圧縮符号化された動画像信号では、一般的に画像の高周波成分の情報量を重点的に削減する処理が行われるため、上述した水面のような画像領域では、例えばブロック歪のような符号化歪が目立って発生していた。このような画像領域に従来の順次走査変換手法を適用すると、垂直方向にのみ解像度低下が起こるため水平方向のブロック境界がむしろ視覚的に目立ってしまい、主観的な画質を低下させる欠点も指摘されている。
【０００８】
本発明の目的は、上述した欠点を解消し、画像の特徴に応じた動き補償型順次走査変換処理を行うことにより、本来高精細な画像領域の先鋭感を維持することができる順次走査変換装置を実現することにある。
本発明の別の目的は、復号動画像信号が符号化歪を含む場合であっても、符号化歪が視覚的に目立たなくなる順次走査変換装置を実現することにある。
【課題を解決するための手段】
【０００９】
本発明による順次走査変換装置は、入力した飛び越し走査信号について順次走査変換処理を行って順次走査信号を出力する順次走査変換装置において、
入力画像信号を受け取り、入力画像を複数のブロックに分割し、画素値の散乱度をブロック毎に演算し、各ブロックの画素値の散乱度を表すアクティビティ情報を出力するアクティビティ演算手段と、
入力画像信号を受け取り、時間的に前後する前後フィールドから、補間すべき各画素の動きベクトル情報、動きの検出精度情報及びフレーム間補間画素値をそれぞれ出力する動き検出手段と、
入力画像信号を受け取り、補間されるべきフィールドの画素値を用いてフィールド内補間画素値を出力するフィールド内補間手段と、
前記動き検出手段から出力される各画素の動きベクトルから動き散乱度をブロック単位で演算し、動き散乱度情報を出力する動き散乱度演算手段と、
前記アクティビティ演算手段からのアクティビティ情報と、前記動き散乱度演算手段から出力される動き散乱度情報とを受け取り、入力画像を、画素値の散乱度と動き散乱度との２つのパラメータにより規定される１つ又はそれ以上の領域に区分する領域区分情報を出力する領域区分手段と、
前記フィールド内補間画素値、フレーム間補間画素値、及び領域区分情報を受け取り、区分された領域毎に、前記画素値の散乱度と動き散乱度とにより規定されるパラメータを重み付け因子として用い、フィールド内補間画素値とフレーム間補間画素値に対して適応混合処理して補間画素値を出力する適応混合手段と、
前記入力画像信号と適応混合手段から出力された補間画素値とを用いライン補間を行うライン補間手段とを具えることを特徴とする。
【００１０】
画像アクティビティが高い画像部分、例えばランダムノイズ画像（砂嵐画像）の場合、一般的に動き検出の検出精度が低下する。すなわち、このような画像について動き検出部において画像のブロックを切り出して他の画像ブロックとマッチングをとっても良好なマッチング精度が得られず、誤差すなわち画素値の差分絶対値和が大きくなってしまう。このため、従来の順次走査変換装置では、補間対象フィールドに対して垂直方向のローパスフィルタを適用して補間画素を生成しており、補間後の画像の垂直方向の解像度が低下してしまう。一方、このような画像については、砂嵐画像から想到できるように、各画像の動きを正確に捕らえる必要はなく、多少動きが外れていても、動き補償に基づいて画素を補間するほうが視覚的に高解像度が得られる。このような概念に基づき、本発明では、アクティビティの高い画像については、動き補償に重みをおいた補間画素を生成して垂直方向の解像度低下の問題を解消する。
【００１１】
しかしながら、画素値の散乱度だけに着目した場合、例えば競技場の観客席、砂浜や金網を撮影した画像のように、細かい物体が静止し又は一方向に動いている画像も処理の対象となってしまう。これらの画像では、物体にランダムな動きはなく、画像に対する視聴者の認識感度も高いため、画像中にエラーが発生すると、顕著に目立ってしまう。従って、このようなランダムな動きのない画像については、動き補償に重みをおいた画像処理ではなく、エラーの発生しにくい順次走査変換、すなわちフィールド内補間に重みをおいた順次走査変換を行うことが好ましい。
【００１２】
そこで、本発明では、画素値の散乱度及び動きベクトルの散乱度の両方について閾値比較を行い、これらの両方が所定の閾値を超える画像領域についてだけ動き補償に重みをおいた補間を行い、それ以外の領域については動き検出精度情報に基づく重み付けを利用して順次走査変換を行う。このように、画素値の散乱度及び動きベクトルの散乱度の両方に基づいて領域区分し、重み付け因子を切り換えることにより、本来高精細な画像について当該画像部分の高精細感が維持された順次走査変換を行うことができる。
【００１３】
さらに、本発明による順次走査変換装置は、入力した飛び越し走査信号について順次走査変換処理を行って順次走査信号を出力する順次走査変換装置において、
符号化ストリームを復号化して、画像信号と、画素の動き情報及び量子化制御情報を含む符号化制御情報とを出力する復号手段と、
復号化された符号化制御情報に含まれる画像の動き情報を受け取り、動き散乱度をブロック単位で演算して動き散乱度情報を出力する動き散乱度演算手段と、
前記動き散乱度情報及び量子化制御情報を受け取り、入力画像を、画素値の散乱度と動き散乱度との２つのパラメータにより規定される１つ又はそれ以上の領域に区分する領域区分情報を出力する領域区分手段と
復号画像信号を受け取り、時間的に前後する前後フィールドから、動き検出の精度を表す動き検出精度情報、及びフレーム間補間画素値をそれぞれ出力する動き検出手段と、
復号画像信号を受け取り、補間されるべきフィールドの画素値を用いてフィールド内補間画素値を出力するフィールド内補間手段と、
前記フィールド内補間画素値、フレーム間補間画素値、及び領域区分情報を受け取り、区分された画像領域毎に、前記画素値の散乱度と動き散乱度とにより規定されるパラメータを重み付け因子として用い、フィールド内補間画素値とフレーム間補間画素値に対して適応混合処理して補間画素値を出力する適応混合手段と、
前記入力画像信号と適応混合手段から出力された補間画素値とを用いライン補間を行うライン補間手段とを具えることを特徴とする。
【００１４】
動画像信号を符号化したビット列である符号化ストリームは、動画像信号と共に符号化制御情報を含み、この符号化制御情報は、量子化制御情報及び画像の動き情報を含んでいる。従って、画像の動き情報を動きベクトル情報として用い、量子化制御情報をアクティビティ情報として用いることができる。この符号化ストリームについて本発明に基づいて順次走査変換すれば、垂直方向の解像度が維持されると共に、符号化歪みが発生している画像領域に対しては、ブロック境界以外の画素から補間画素値が生成されるため、ブロック境界が拡散され視覚的に目立たなくすることができる。
【発明の効果】
【００１５】
本発明では、入力画像について、画素値の散乱度と動き散乱度とを用いて領域区分し、区分された領域対してフレーム間補間値に重みをおいた補間画素値を発生させているので、本来高精細な画像部分の解像度の低下を抑制することができ、当該画像部分の高精細感を維持することができる。
また、符号化歪を含む復号動画像信号を順次走査変換する場合、符号化歪が発生している画像領域に対して動き補償による画素間に重みをおいた補間処理が行われるため、歪みのパターンが動的に拡散され、符号化歪を視覚的に目立たなくすることができる。
【発明を実施するための最良の形態】
【００１６】
図１は本発明による順次走査変換装置の一例を示す線図である。本発明により順次走査変換されるべき動画像信号は、例えばHD-SDI信号のような飛び越し走査信号とする。尚、当該動画像信号は非圧縮の信号でもよく、或いは非可逆圧縮符号化された信号でもよい。入力動画像信号は、アクティビティ演算部１、動き検出部２、フィールド内補間部３及びライン補間部４にそれぞれ入力する。
【００１７】
アクティビティ演算部１は、補間対象のフィールドについて、ブロック単位で画素値の散乱ないし散らばり具合を示す画素値の散乱度を演算し、各ブロックの画素値の散乱度を示す情報をアクティビティ情報（画素値散乱度情報）101として出力する。図２はアクティビティ演算部１の一例を示す線図である。入力動画像信号は、１フィールド遅延部１１に入力し、１フィールドの遅延をうけ、ブロック分割部１２において複数のブロックに分割され、例えば16×8画素を単位ブロックとすることができる。ブロック分割された入力動画像信号は、分散計算部１３において各画素の輝度値を用いて散乱度Ａを各ブロック毎に計算する。計算式として、一例として以下の式に基づいて計算することができる。初めに、ブロック毎に輝度の平均値ａＶＥ  を求め、各画素の輝度ａｉについて以下の計算を行う。計算結果をアクティビティ情報101として出力する。
2006304096.tif 000003
【００１８】
動き検出部２は、補間対象のフィールドの時間的に前後する前後フィールドについて動き検出処理を行い、画像の動き情報、動き検出の精度である差分絶対値和及びフレーム間補間画素値を出力する。図３は動き検出部２の一例を示す線図である。入力した動画像信号は２つの経路に分岐され、一方の信号は１フレーム遅延部２１により１フレーム分遅延されてブロック探索部２２に入力し、他方の信号は直接ブロック探索部２２に入力する。ブロック探索部２２では、入力画像を例えば17×9画素のブロックに分割し、１フレーム分時間的にずれた２つの動画像を用いてブロックマッチングによるブロック探索処理を行う。すなわち、補間対象フィールドの補間したいある画素に対して時間的に点対象の位置にあるブロック同士の画素値の差分絶対値和を順次算出し、最も差分値の低いブロック対を選択する。選択したブロック対に対応する画素単位の動きベクトルを動き情報102として出力すると共に、選択したブロック対の画素値の差分絶対値和を検出精度情報103として出力する。
【００１９】
選択されたブロック対の情報は、補間画素値生成部２３に供給する。補間画素値生成部２３では、選択したブロック対の各中心位置にある画素の平均値を算出してフレーム間補間画素値104として出力する。
【００２０】
次に、フィールド内補間部３について説明する。フィールド内補間部３は、入力した動画像信号について、補間されるべきフィールド自身の画素値情報を用いてフィールド内補間の補間画素値を算出し、フィールド内補間画素値105として出力する。図4はフィールド内補間部３の一例を示す線図である。入力した動画像信号は１フィールド遅延部３１において１フィールド分遅延させてからフィルタ補間部３２に供給する。フィルタ補間部３２では、補間対象の画素について、隣接する１本以上のフィールドラインの画素の画素値を用いて補間値を算出するフィルタ処理を行いフィールド内補間画素値を出力する。
【００２１】
動き検出部２から出力される動き情報(各画素毎の動きベクトル)102は動き散乱度演算部５に供給する。動き散乱度演算部５は、入力動画像を16×8のブロックに分割し、各ブロックにおける動きのランダム性を表す動きベクトルの散乱度をブロック単位で演算し、動き散乱情報106として出力する。この動きベクトルの散乱度は、例えば16×8画素のブロックの各画素の動きベクトルについて、隣接するベクトル(例えば、左隣のベクトル)との差分を求め、その差分値をブロック内で累積加算することにより求める。この演算は以下の式に基づいて行う。
2006304096.tif 000004
ここで、MVrandは各ブロックの動き散乱度すなわち動きのランダム性を表し、ｘｉｊ，ｙｉｊは（ｉ，ｊ）の画素位置での動きベクトルのＸ座標及びＹ座標を表す。
【００２２】
アクティビティ演算部１から出力されるアクティビティ情報101及び動き散乱度演算部５から出力される動き散乱度情報106は領域区分部６に供給する。領域区分部６は、入力動画像について、画素値の散乱度及び動きの散乱度がどのようなレベルにあるかをブロック単位で求め、マップ情報として出力する。図５は領域区分部の一例を示す線図である。画素値の散乱度を表すアクティビティ情報101は第１の閾値処理部６１に入力し、所定の閾値と比較される。すなわち、16×8画素の各ブロックについて、画素値の散乱度をブロック単位で所定の閾値と比較し、画素値の散乱度が所定の値以上に大きいか否か判断する。
続いて、正規化部６２において正規化し、その値を線形結合部６３に供給する。尚、画素値散乱度が所定の閾値以下の場合、零の値を付し、正規化部６２を経て線形結合部６３に供給する。
【００２３】
同様に、動き散乱度情報は第２の閾値処理部６４に入力し、所定の閾値と比較され、動きの散乱度合いが所定の閾値を超えるか否か各ブロック単位で判断する。続いて、正規化部６２において正規化し、その値を線形結合部６３に供給する。尚、動き散乱度が所定の閾値以下の場合、零の値を付し、正規化部６２を経て線形結合部６３に供給する。
【００２４】
線形結合部６３では、正規化された画素値の散乱度及び動きベクトルの散乱度をブロック単位で線形加算し領域区分情報107として適応混合部７に出力する。この領域区分情報107は、各ブロックのアドレス情報と散乱度のレベルを示す散乱度レベル情報とを対として含む。一方、画素値の散乱度又は動き散乱度の少なくとも一方の散乱度について零の値が付された場合、線形結合部は、当該領域については零の値を付して出力する。従って、領域区分情報107は、画素値が散乱し且つ動きがランダムな領域について線形加算値が付され、それ以外の領域については零の値が付された情報として出力される。この結果、領域区分情報により、画素値及び動きの散乱度が高い領域とそれ以外の領域とが区分されることになる。
【００２５】
図６は、適応混合部７の一例を示す線図である。 動き検出部２から出力されるフレーム間補間画素値104及びフィールド内補間部３から出力されるフィールド内補間画素値105は適応混合部7に供給する。これらフレーム間補間画素値及びフィールド内補間画素値は、第１及び第２の重み付け混合部７１及び７２にそれぞれ供給する。適応混合部７には、さらに検出精度情報103及び領域区分情報107も供給する。検出精度情報103は第１の重み付け混合部７１に供給し、領域区分情報107は第２の重み付け混合部７２に供給する。第１の重み付け混合部７１では、動き検出部２から供給される検出精度情報（差分絶対値和）を重み付け因子として用い、フレーム間補間画素値とフィールド内補間画素値との比率を変えて混合し、その出力をスィッチング部７３に出力する。第２の重み付け混合部では、領域区分情報107に含まれる散乱度レベル情報を重み付け因子として、フレーム間補間画素値とフィールド間補間画素値との比率を変えて混合し、その出力をスィッチング部７３に供給する。この際、画素値の散乱度が高い領域及び動き散乱度の高い領域についてはフレーム間補間画素値の重みが大きくなるように重み付けされて混合される。
【００２６】
領域区分情報107は切り換え制御部７４にも供給する。切り換え制御部７４では、領域区分情報に含まれる散乱度レベル情報を参照し、散乱度レベルに応じてスィッチング部７３を切り換える制御信号を発生する。すなわち、散乱度レベル情報が零の場合、第１の重み付け混合部７１からの出力信号が出力されるように設定し、散乱度レベル情報が零以外の場合第２の重み付け混合部７２からの出力信号が出力されるように設定する。このように重み付け因子を切り換えて適応混合することにより、画素値の散乱度が高く且つ動き散乱度も高い領域についてはフレーム間補間画素値に重みを置いた補間画素値が出力され、それ以外の領域については従来の適応混合処理が行われることになる。この結果、画素値の散乱度が高くランダムな動きをする領域について、垂直方向の解像度低下を有効に防止することができる。また、符号化歪みを含む符号化ストリームについては、ブロック境界が拡散され視覚的に目立たなくなる作用効果が達成される。
【００２７】
適応混合部７から出力される補間画素値情報108はライン補間部４に供給する。このライン補間部４は、入力した補間対象フレームに対して、補間画素値情報108を用いてライン補間処理を行い、フレーム画像を生成して出力する。図７はライン補間部の一例を示す線図である。入力した動画像信号は、１フィールド遅延部４１により１フィールド分の遅延を受け、補間部４２に入力する。補間部４２では、入力したフィールド画像に対して、入力した補間画素値情報107を用いて、補間対象フィールドのラインを補間してフレーム画像を生成する。そして、順次走査の動画像信号として出力する。
【００２８】
図８は本発明による順次走査変換装置の第２実施例を示す線図である。尚、図１で用いた構成要素と同一の構成要素には同一符号を付して説明する。本例では、飛び越し走査の動画像信号を符号化したビット列である符号化ストリームを順次走査変換すべき入力信号とする。符号化ストリームは復号器５０に入力し、復号化処理が行われる。符号化ストリームは動画像信号に相当する情報と共に符号化情報も含み、符号化情報は、量子化制御情報110及び動きベクトルに相当する動き情報111も含んでいる。一般的に、画像アクティビティが高い画像部分については粗い量子化を行う制御が行われているから、量子化制御情報は、画素値の散乱度を表すアクティビティ情報として用いることができる。動き情報111は動き散乱度演算部５に供給し、隣接するベクトルとの差分を求め、その差分値をブロック内で累積加算することにより動きの散乱度をブロック単位で演算し、領域区分部６に出力する。量子化制御情報110も領域区分部６に供給する。領域区分部６は、画素値の散乱度に相当する量子化制御情報110及び動き散乱度演算部５から出力される動き散乱度情報112を用い、前述したように、領域区分情報107を出力する。そして、適応混合部７において、補間画素値を出力し、ライン補間部４に出力する。
【００２９】
本発明は上述した実施例だけに限定されず種々の変形や変更が可能である。例えば、画像アクティビティ情報と動きベクトル情報とを入力動画像信号から得る態様と、符号化ストリームの情報から得る態様についてそれぞれ説明したが、画像アクティビティ情報のみを動画像信号から得て、動きベクトル情報は符号化ストリームから得る構成や、その逆の構成を採用することも可能である。
【図面の簡単な説明】
【００３０】
【図１】本発明による順次走査変換装置の一例を示す線図である。
【図２】アクティビティ演算部の構成を示す線図である。
【図３】動き検出部の構成を示す線図である。
【図４】フィールド内補間部の構成を示す線図である。
【図５】領域区分部の一例を示す線図である。
【図６】適応混合部の一例を示す線図である。
【図７】ライン補間部の構成を示す線図である。
【図８】本発明による順次走査変換装置の第２実施例を示す線図である。
【符号の説明】
【００３１】
１  アクティビティ演算部
２  動き検出部
３  フィールド内補間部
４  ライン補間部
５  動き散乱度演算部
６  領域区分部
7   適応混合部
１１，２１，３１，４１  １フィールド遅延部
１２  ブロック分割部
１３  分散計算部
２２  ブロック探索部
２３  補間画素生成部
３２  フィルタ補間部
４２  補間部
５０  復号器
６１，６４  閾値処理部
６２，６５  正規化部
63  線形結合部
【図１】
2006304096.tif 000005
【図２】
2006304096.tif 000006
【図３】
2006304096.tif 000007
【図４】
2006304096.tif 000008
【図５】
2006304096.tif 000009
【図６】
2006304096.tif 000010
【図７】
2006304096.tif 000011
【図８】
2006304096.tif 000012