(57)【特許請求の範囲】
【請求項１】
第１の圧縮符号化方式で圧縮された飛び越し走査の入力画像圧縮情報を、第２の圧縮符号化方式で圧縮された順次走査の出力画像圧縮情報に変換する画像情報変換装置において、
上記入力画像圧縮情報及び上記出力画像圧縮情報の画像群は、フレーム内で符号化されたイントラ符号化画像、表示順序で順方向を参照して符号化された順方向予測符号化画像及び表示順序で順方向及び逆方向を参照して符号化された双方向予測符号化画像を含み、
上記入力画像圧縮情報及び上記出力画像圧縮情報は複数の符号化画像からなる画像群を単位として構成され、
上記出力画像圧縮情報におけるシーンチェンジを検出するシーンチェンジ検出手段と、
上記入力画像圧縮情報の各フレームのコンプレキシティを検出するコンプレキシティ検出手段と、
上記コンプレキシティ検出手段で検出したコンプレキシティに基づいて上記出力画像圧縮情報に画像情報の符号量を配分する際に、上記シーンチェンジ検出手段で検出したシーンチェンジに応じて上記出力画像圧縮情報における画像群の構造を変換する変換手段とを有し、
上記変換手段は、上記出力画像圧縮情報の２画像群に相当する時間に亘って画像情報を遅延させる遅延手段を有し、上記出力画像圧縮情報において、シーンチェンジを含む画像群の直後の画像群の先頭のイントラ符号化画像を順方向予測符号化画像に変換し、
上記イントラ符号化画像を順方向予測符号化画像に変換する際の動きベクトル情報を、当該イントラ符号化画像の前後の順方向予測符号化画像における動きベクトル情報を利用して求めると共に、上記イントラ符号化画像を順方向予測符号化画像に変換する際のコンプレキシティを、上記イントラ符号化画像の前後の順方向予測符号化画像におけるコンプレキシティを利用して求める
画像情報変換装置。
【請求項２】
第１の圧縮符号化方式で圧縮された飛び越し走査の入力画像圧縮情報を、第２の圧縮符号化方式で圧縮された順次走査の出力画像圧縮情報に変換する画像情報変換装置において、
上記入力画像圧縮情報及び上記出力画像圧縮情報の画像群は、フレーム内で符号化されたイントラ符号化画像、表示順序で順方向を参照して符号化された順方向予測符号化画像及び表示順序で順方向及び逆方向を参照して符号化された双方向予測符号化画像を含み、
上記入力画像圧縮情報及び上記出力画像圧縮情報は複数の符号化画像からなる画像群を単位として構成され、
上記出力画像圧縮情報におけるシーンチェンジを検出するシーンチェンジ検出手段と、
上記入力画像圧縮情報の各フレームのコンプレキシティを検出するコンプレキシティ検出手段と、
上記コンプレキシティ検出手段で検出したコンプレキシティに基づいて上記出力画像圧縮情報に画像情報の符号量を配分する際に、上記シーンチェンジ検出手段で検出したシーンチェンジに応じて上記出力画像圧縮情報における画像群の構造を変換する変換手段とを有し、
上記変換手段は、上記出力画像圧縮情報において、シーンチェンジを含む画像群の直後の画像群の先頭のイントラ符号化画像を順方向予測符号化画像に変換し、
上記イントラ符号化画像を順方向予測符号化画像に変換する際の動きベクトル情報を、当該イントラ符号化画像の前後の順方向予測符号化画像における動きベクトル情報を利用して求めると共に、上記イントラ符号化画像を順方向予測符号化画像に変換する際のコンプレキシティを、上記イントラ符号化画像の前後の順方向予測符号化画像におけるコンプレキシティを利用して求める
画像情報変換装置。
【請求項３】
上記入力画像圧縮情報の内、イントラ符号化画像及び順方向予測符号化画像を通過させるが、双方向予測符号化画像を破棄する判別手段を有する請求項２記載の画像情報変換装置。
【請求項４】
上記変換手段は、上記出力画像圧縮情報の２画像群に相当する時間に亘って画像情報を遅延させる遅延手段を有する請求項２記載の画像情報変換装置。
【請求項５】
上記シーンチェンジ検出手段は、上記コンプレキシティ検出手段で検出した上記入力画像圧縮情報の各フレームに対するコンプレキシティを利用してシーンチェンジを検出する請求項２記載の画像情報変換装置。
【請求項６】
上記シーンチェンジ検出手段は、次の式が成立すると順方向予測符号化画像におけるシーンチェンジを検出したと判断する請求項５記載の画像情報変換装置。
【数１】
0004517465.tif 000034
ただし、順方向予測符号化画像に対するコンプレキシティをＸｐ、順方向予測符号化画像を含む画像群の先頭のイントラ符号化画像に対するコンプレキシティをＸｉと、予め設定された閾値をＸｔｈｒｅｓｈｏｌｄとする。
【請求項７】
上記シーンチェンジ検出手段は、上記入力画像圧縮情報を復号する際に、この入力画像圧縮情報を解析して得られた情報に基づいてシーンチェンジを検出し、次の式が成立すると順方向予測符号化画像におけるシーンチェンジを検出したと判断する請求項２記載の画像情報変換装置。
【数２】
0004517465.tif 000035
ただし、上記出力画像圧縮情報の各画像を構成する画素ブロックについて、フレーム内で符号化された画素ブロックの個数をＮｉｎｔｒａと、予め設定された閾値をＮｔｈｒｅｓｈｏｌｄとする。
【請求項８】
１フレームの画像情報を格納するフレームバッファを有し、上記シーンチェンジ検出手段は、上記フレームバッファに格納された画像情報からシーンチェンジを検出する請求項２記載の画像情報変換装置。
【請求項９】
上記シーンチェンジ検出手段は、次の式が成立すると順方向予測符号化画像におけるシーンチェンジを検出したと判断する請求項８記載の画像情報変換装置。
【数３】
0004517465.tif 000036
ただし、１フレームの特徴量をαと、１フレーム前の特徴量をαｐｒｅｖと、予め設定された閾値をαｔｈｒｅｓｈｏｌｄとする。
【請求項１０】
上記特徴量は、画素値の平均値又は分散値である請求項９記載の画像情報変換装置。
【請求項１１】
上記出力画像圧縮情報を構成する画像群において、上記シーンチェンジ検出手段によりイントラ符号化画像の直前に位置する順方向予測符号化画像以外の順方向予測符号化画像におけるシーンチェンジが検出された際に、上記イントラ符号化画像の直前又は直後の順方向予測符号化画像における動きベクトル情報に基づいて動きベクトル情報を求め、上記イントラ符号化画像を順方向予測符号化画像に変換する際の動きベクトル情報として用いる請求項２記載の画像情報変換装置。
【請求項１２】
上記出力画像圧縮情報を構成する画像群において、上記シーンチェンジ検出手段によりイントラ符号化画像の直前に位置する順方向予測符号化画像以外の順方向予測符号化画像におけるシーンチェンジが検出された際に、複数の画素で構成される各画素ブロックに対して、上記イントラ符号化画像の直前又は直後の順方向予測符号化画像における動きベクトル情報と、動きベクトルを０とした場合のうち、符号化効率の良いものを、上記イントラ符号化画像を順方向予測符号化画像に変換する際の動きベクトル情報として用いる請求項２記載の画像情報変換装置。
【請求項１３】
上記出力画像圧縮情報を構成する画像群において、上記シーンチェンジ検出手段によりイントラ符号化画像の直前に位置する順方向予測符号化画像においてシーンチェンジが検出された際に、上記イントラ符号化画像の直後の順方向予測符号化画像における動きベクトル情報に基づいて動きベクトル情報を求め、上記イントラ符号化画像を順方向予測符号化画像に変換する際の動きベクトル情報として用いる請求項２記載の画像情報変換装置。
【請求項１４】
第１の圧縮符号化方式で圧縮された飛び越し走査の入力画像圧縮情報を、第２の圧縮符号化方式で圧縮された順次走査の出力画像圧縮情報に変換する画像情報変換方法において、
上記入力画像圧縮情報及び上記出力画像圧縮情報の画像群は、フレーム内で符号化されたイントラ符号化画像、表示順序で順方向を参照して符号化された順方向予測符号化画像及び表示順序で順方向及び逆方向を参照して符号化された双方向予測符号化画像を含み、
上記入力画像圧縮情報及び上記出力画像圧縮情報は複数の符号化画像からなる画像群を単位として構成され、
上記出力画像圧縮情報におけるシーンチェンジを検出するシーンチェンジ検出工程と、
上記入力画像圧縮情報の各フレームのコンプレキシティを検出するコンプレキシティ検出工程と、
上記コンプレキシティ検出工程にて検出したコンプレキシティに基づいて上記出力画像圧縮情報に画像情報の符号量を配分する際に、上記シーンチェンジ検出工程で検出したシーンチェンジに応じて上記出力画像圧縮情報における画像群の構造を変換する変換工程とを有し、
上記変換工程は、上記出力画像圧縮情報において、シーンチェンジを含む画像群の直後の画像群の先頭のイントラ符号化画像を順方向予測符号化画像に変換し、
上記イントラ符号化画像を順方向予測符号化画像に変換する際の動きベクトル情報を、当該イントラ符号化画像の前後の順方向予測符号化画像における動きベクトル情報を利用して求めると共に、上記イントラ符号化画像を順方向予測符号化画像に変換する際のコンプレキシティを、上記イントラ符号化画像の前後の順方向予測符号化画像におけるコンプレキシティを利用して求める
画像情報変換方法。
【請求項１５】
第１の圧縮符号化方式で圧縮された飛び越し走査の入力画像圧縮情報を復号して得られる画像情報を、第２の圧縮符号化方式で圧縮された順次走査の出力画像圧縮情報に符号化する符号化装置において、
上記入力画像圧縮情報及び上記出力画像圧縮情報の画像群は、フレーム内で符号化されたイントラ符号化画像、表示順序で順方向を参照して符号化された順方向予測符号化画像及び表示順序で順方向及び逆方向を参照して符号化された双方向予測符号化画像を含み、
上記入力画像圧縮情報及び上記出力画像圧縮情報は複数の符号化画像からなる画像群を単位として構成され、
上記出力画像圧縮情報におけるシーンチェンジを検出して得られたシーンチェンジを受け取る受け取り手段と、
上記入力画像圧縮情報の各フレームのコンプレキシティを検出するコンプレキシティ検出手段と、
上記コンプレキシティ検出手段で検出したコンプレキシティに基づいて上記出力画像圧縮情報に画像情報の符号量を配分する際に、上記受け取り手段からのシーンチェンジに応じて上記出力画像圧縮情報における画像群の構造を変換する変換手段とを有し、
上記変換手段は、上記出力画像圧縮情報において、シーンチェンジを含む画像群の直後の画像群の先頭のイントラ符号化画像を順方向予測符号化画像に変換し、
上記イントラ符号化画像を順方向予測符号化画像に変換する際の動きベクトル情報を、当該イントラ符号化画像の前後の順方向予測符号化画像における動きベクトル情報を利用して求めると共に、上記イントラ符号化画像を順方向予測符号化画像に変換する際のコンプレキシティを、上記イントラ符号化画像の前後の順方向予測符号化画像におけるコンプレキシティを利用して求める
符号化装置。
【請求項１６】
第１の圧縮符号化方式で圧縮された飛び越し走査の入力画像圧縮情報を復号して得られる画像情報を、第２の圧縮符号化方式で圧縮された順次走査の出力画像圧縮情報に符号化する符号化方法において、
上記入力画像圧縮情報及び上記出力画像圧縮情報の画像群は、フレーム内で符号化されたイントラ符号化画像、表示順序で順方向を参照して符号化された順方向予測符号化画像及び表示順序で順方向及び逆方向を参照して符号化された双方向予測符号化画像を含み、
上記入力画像圧縮情報及び上記出力画像圧縮情報は複数の符号化画像からなる画像群を単位として構成され、
上記出力画像圧縮情報におけるシーンチェンジを検出して得られたシーンチェンジを受け取る受け取り工程と、
上記入力画像圧縮情報の各フレームのコンプレキシティを検出するコンプレキシティ検出工程と、
上記コンプレキシティ検出工程にて検出したコンプレキシティに基づいて上記出力画像圧縮情報に画像情報の符号量を配分する際に、上記受け取り工程からのシーンチェンジに応じて上記出力画像圧縮情報における画像群の構造を変換する変換工程とを有し、
上記変換工程では、上記出力画像圧縮情報において、シーンチェンジを含む画像群の直後の画像群の先頭のイントラ符号化画像を順方向予測符号化画像に変換し、
上記イントラ符号化画像を順方向予測符号化画像に変換する際の動きベクトル情報を、当該イントラ符号化画像の前後の順方向予測符号化画像における動きベクトル情報を利用して求めると共に、上記イントラ符号化画像を順方向予測符号化画像に変換する際のコンプレキシティを、上記イントラ符号化画像の前後の順方向予測符号化画像におけるコンプレキシティを利用して求める
符号化方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、画像情報を変換する画像情報変換装置及び方法並びに符号化装置及び方法に関し、詳しくは、離散コサイン変換等の直交変換と動き補償によって圧縮されたＭＰＥＧ等の画像情報（ビットストリーム）を衛星放送、ケーブルＴＶ、インターネット等のネットワークメディアを介して受信する際に、若しくは光、磁気ディスクのような記憶メディア上で処理する際に用いられる画像情報を変換する画像情報変換装置及び方法並びに符号化装置及び方法に関する。
【０００２】
【従来の技術】
近年、画像情報をディジタルとして取り扱い、効率の高い情報の伝送、蓄積を目的とし、画像情報特有の冗長性を利用して、離散コサイン変換等の直交変換と動き補償により圧縮するＭＰＥＧなどの画像情報圧縮方式が提供されている。そして、このような画像情報圧縮方法に準拠した装置は、放送局などの情報配信、及び一般家庭における情報受信の双方において普及しつつある。
【０００３】
特に、ＭＰＥＧ２（ＩＳＯ／ＩＥＣ  １３８１８−２）は、飛び越し走査画像及び順次走査画像の双方、並びに標準解像度画像及び高精細画像を網羅する、汎用画像符号化方式として定義されている。
【０００４】
すなわち、ＭＰＥＧ２符号化圧縮方式によれば、例えば、７２０×４８０画素を持つ標準解像度の飛び越し走査画像に４〜８Ｍｂｐｓの符号量（ビットレート）を割り当て、１９２０×１０８８画素を持つ高解像度の飛び越し走査画像に対して１８〜２２Ｍｂｐｓの符号量（ビットレート）を割り当てることにより、高い圧縮率と良好な画質の実現が可能となる。
【０００５】
このようなことから、ＭＰＥＧ２は、プロフェッショナル用途及びコンシューマー用途の広範なアプリケーションに今後とも用いられるものと予想される。 しかし、ＭＰＥＧ２は、主として放送用に適合する高画質符号化を対象としており、例えばＭＰＥＧ１より低い符号量（ビットレート）、つまりより高い圧縮率の符号化方式には対応していなかった。
【０００６】
一方で、近年の携帯端末の普及により、今後とも高い圧縮率の符号化方式のニーズは高まると思われ、これに対応して、高い圧縮率を有するＭＰＥＧ４符号化方式の標準化が行われている。この画像符号化方式に関しては、１９９８年１２月にＩＳＯ／ＩＥＣ  １４４９６−２として国際標準の規格が承認された。
【０００７】
ところで、ディジタル放送用に一度符号化されたＭＰＥＧ２画像圧縮情報（ビットストリーム）を、携帯端末上等で処理するのにより適した、より低い符号量（ビットレート）の画像圧縮情報（ビットストリーム）に変換したいというニーズがある。
【０００８】
かかる目的を達成するために、“Field-to-Frame Transcoding with Spatial and Temporal Downsampling”（Susie L Wee, John G. Apostolopoulos, and Nick Feamster, ICIP 99、以下これを文献１と呼ぶ）により、図８に示すような画像情報変換装置（トランスコーダ）が提供されている。
【０００９】
この文献１において提供された画像情報変換装置（トランスコーダ）は、図８に示すように、ピクチャタイプ判別部１と、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）２と、間引き部３と、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）４と、動きベクトル合成部５と、動きベクトル検出部６とから構成されている。
【００１０】
この画像情報変換装置には、フレーム内で符号化されたイントラ符号化画像（Ｉピクチャ；Ｉ）、表示順序で順方向を参照して予測符号化された順方向予測符号化画像（Ｐピクチャ；Ｐ）及び表示順序で順方向及び逆方向を参照して予測符号化された双方向予測符号化画像（Ｂピクチャ；Ｂ）から構成される飛び越し走査のＭＰＥＧ２画像圧縮情報（ビットストリーム）が入力される。
【００１１】
このＭＰＥＧ２画像圧縮情報（ビットストリーム）は、ピクチャタイプ判別部１において、Ｉ／Ｐピクチャに関するものか、Ｂピクチャに関するものであるかを判別され、Ｉ／Ｐピクチャのみ後続のＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）２に出力され、Ｂピクチャは破棄される。
【００１２】
ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）２における処理は通常のＭＰＥＧ２画像情報復号化装置と同様に、ＭＰＥＧ２画像圧縮情報（ビットストリーム）を画像信号に復号するものである。
【００１３】
ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）２の出力となる画素値は、間引き部３に入力される。間引き部３は、水平方向には１／２の間引き処理を施し、垂直方向には、第一フィールド若しくは第二フィールドのどちらか一方のデータのみを残し、もう一方を廃棄する。このような間引きによって、入力となる画像情報の１／４の大きさを持つ順次走査画像を生成する。
【００１４】
間引き部３によって生成された順次走査画像はＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）４によってフレーム内で符号化されたＩ−ＶＯＰ及び表示順序で順方向を参照して予測符号化されたＰ−ＶＯＰに符号化され、ＭＰＥＧ４画像圧縮情報（ビットストリーム）として出力される。尚、ＶＯＰはVideo object Planeを意味し、ＭＰＥＧ２におけるフレームに相当するものである。
【００１５】
その際、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）中の動きベクトル情報は、動きベクトル合成部５において間引き後の画像情報に対する動きベクトルにマッピングされ、動きベクトル検出部６においては、動きベクトル合成部５において合成された動きベクトル値を元に高精度の動きベクトルを検出する。
【００１６】
文献１は、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）の１／２×１／２の大きさを持つ順次走査画像のＭＰＥＧ４画像圧縮情報（ビットストリーム）を生成する画像情報変換装置に関して記述している。すなわち、例えば入力となるＭＰＥＧ２画圧縮情報（ビットストリーム）がＮＴＳＣ（National Television System Committee）の規格に準拠したものであった場合、出力となるＭＰＥＧ４画像圧縮情報はＳＩＦサイズ（３５２×２４０画素）ということになる。
【００１７】
ところで、図８に示した画像情報変換装置においては、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）４における符号量制御が、出力となるＭＰＥＧ４画像圧縮情報（ビットストリーム）における画質を決定する大きな要因となる。ＩＳＯ／ＩＥＣ １４４９６−２においては、符号量制御の方式に関しては特に規定されておらず、各ベンダが、アプリケーションに応じて、演算量及び出力画質の観点から最適と考えられる方式を用いることが出来る。以下では、代表的な符号量制御方式として、ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄｅｌ ５（ＩＳＯ／ＩＥＣ ＪＴＣ１／ＳＣ２９／ＷＧ１１ Ｎ０４００）で述べられている方式について述べる。
【００１８】
この符号量制御のフローを図９に示すフローを用いて説明する。最初のステップＳ１１において、画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）４は、目標符号量（ターゲットビットレート）、及び、ＧＯＰ（ｇroup of pictures）構成を入力変数として、各ピクチャヘのビット配分を行う。ここで、ＧＯＰとは、ランダムアクセス可能なピクチャの組である。
【００１９】
すなわち、ステップＳ１１において、画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）４は、ＧＯＰ内の各ピクチャに対する割り当てビット量を、割り当て対象ピクチャを含めＧＯＰ内でまだ復号化されていないピクチャに対して割り当てられるビット量（以下、これをＲとする）を基に配分する。この配分をＧＯＰ内の符号化ピクチャ順に繰り返す。その際、以下に述べる２つの仮定を用いて各ピクチャヘの符号量割り当てを行う。
【００２０】
まず、第一に、各ピクチャを符号化する際に用いる平均量子化スケールコードと発生符号量の積は、画面が変化しない限り、ピクチャタイプ毎に一定値となると仮定する。そこで、各ピクチャを符号化した後、各ピクチャタイプ毎に、画面の複雑さを示す変数Ｘi，Ｘp，Ｘb（grobal complelxity measure）を次の式（１）によって更新する。
【００２１】
【数４】
0004517465.tif 000002
【００２２】
ここでＳi，Ｓp，Ｓbはピクチャ符号化時の発生符号ビット量であり、Ｑi，Ｑp，Ｑbは、ピクチャ符号化時の平均量子化スケールコードである。また、初期値は、目標符号量（ターゲットビットレート）ｂｉｔ＿ｒａｔｅ［ｂｉｔｓ／ｓｅｃ］を用いて、式（２）で示される値とする。
【００２３】
【数５】
0004517465.tif 000003
【００２４】
第二に、Ｉピクチャの量子化スケールコードを基準としたＰ，Ｂピクチャの量子化スケールコードの比率Ｋp，Ｋbが式（３）に定めた値となる場合に常に全体の画質が最適化されると仮定する。
【００２５】
【数６】
0004517465.tif 000004
【００２６】
すなわち、Ｂピクチャの量子化スケールコードは、Ｉ，Ｐピクチャの量子化スケールコードの常に１．４倍としている。これは、ＢピクチャをＩ，Ｐピクチャに比較して多少粗めに符号化することにより、Ｂピクチャで節約できる符号量をＩ，Ｐピクチャに加えると、Ｉ，Ｐピクチャの画質が改善され、これを参照するＢピクチャの画質も改善されることを想定している。
【００２７】
上記２つの仮定より、ＧＯＰの各ピクチャに対する割り当てビット量（Ｔi，Ｔp，Ｔb）は式（４）に示す値とする。
【００２８】
【数７】
0004517465.tif 000005
【００２９】
ここでＮp，ＮbはＧＯＰ内でまだ符号化されていないＰ，Ｂピクチャの枚数である。
【００３０】
このようにして求めた割当符号量を基にして、各ピクチャをステップＳ１１，Ｓ１２に従って符号化する毎に、ＧＯＰ内の未符号化ピクチャに対して割り当てられるビット量Ｒを式（５）で更新する。
【００３１】
【数８】
0004517465.tif 000006
【００３２】
また、ＧＯＰの最初のピクチャを符号化する際には、式（６）によりＲを更新する。
【００３３】
【数９】
0004517465.tif 000007
【００３４】
ＮはＧＯＰ内のピクチャ数である。また、シーケンスの最初でのＲの初期値は０とする。
【００３５】
次に、ステップＳ１２において、画像情報符号化装置（Ｉ／Ｐ−ＶＯＰ）４は、仮想バッファを用いたレート制御を行う。すなわち、ステップＳ１２において、画像情報符号化装置（Ｉ／Ｐ−ＶＯＰ）４は、ステップＳ１１で式（４）により求められた各ピクチャに対する割当ビット量（Ｔi，Ｔp，Ｔb）と、実際の発生符号量を一致させるため、各ピクチャ毎に独立に設定した３種類の仮想バッファの容量を基に、量子化スケールコードを、マクロブロック単位のフィードバック制御で求める。
【００３６】
まず、ｊ番目のマクロブロック符号化に先立ち、仮想バッファの占有量を式（７）によって求める。
【００３７】
【数１０】
0004517465.tif 000008
【００３８】
ここで、ｄ0i，ｄ0p，ｄ0bは各仮想バッファの初期占有量、Ｂjはピクチャの先頭からｊ番目のマクロブロックまでの発生ビット量、ＭＢ＿ｃｎｔは１ピクチャ内のマクロブロック数である。各ピクチャ符号化終了時の仮想バッファ占有量（ｄMB_cnti，ｄMB_cntp，ｄMB_cntb）は、それぞれ同一のピクチャタイプで、次のピクチャに対する仮想バッファ占有量の初期値（ｄ0i，ｄ0p，ｄ0b）として用いられる。
【００３９】
次に、ｊ番目のマクロブロックに対する量子化スケールコードを式（８）により計算する。
【００４０】
【数１１】
0004517465.tif 000009
【００４１】
ここで、ｒはリアクションパラメーターと呼ばれるフィードバックループの応答を制御する変数であり、式（９）により与えられる。
【００４２】
【数１２】
0004517465.tif 000010
【００４３】
尚、符号化開始時における仮想バッファの初期値は式（１０）で与えられる。
【００４４】
【数１３】
0004517465.tif 000011
【００４５】
最後に、ステップＳ１３において、画像情報符号化装置（Ｉ／Ｐ−ＶＯＰ）４は、視覚特性を考慮したマクロブロック毎の適応量子化を行う。すなわち、ステップＳ１３において、画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）４は、ステップＳ１２で求められた量子化スケールコードを、視覚的に劣化の目立ちやすい平坦部でより細かく量子化し、劣化の比較的目立ちにくい絵柄の複雑な部分で粗く量子化するように、各マクロブロック毎のアクティビティと呼ばれる変数によって変化させている。
【００４６】
アクティビティは、原画の輝度信号画素値を用い、フレーム離散コサイン変換モードにおける４個のブロックと、フィールド離散コサイン変換モードにおける４個のブロックとの、合計８ブロックの画素値を用いて式（１１）で与えられる。
【００４７】
【数１４】
0004517465.tif 000012
【００４８】
ここで、Ｐkは原画の輝度信号ブロック内画素値である。式（１１）において最小値を採るのは、マクロブロック内の一部だけでも平坦部分のある場合には量子化を細かくするためである。
【００４９】
更に、式（１２）によりその値が０．５〜２の範囲を取る正規化アクティビティＮａｃｔjを求める。
【００５０】
【数１５】
0004517465.tif 000013
【００５１】
ここで、ａｖｇ＿ａｃｔは、直前に符号化したピクチャでのａｃｔjの平均値である。
【００５２】
視覚特性を考慮した量子化スケールコードｍｑｕａｎｔjはステップＳ１２で得られた量子化スケールコードＱjを基に式（１３）で与えられる。
【００５３】
【数１６】
0004517465.tif 000014
【００５４】
ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄｅｌ ５において定められた上記符号量制御方式には以下の制限のあることが知られており、実際の制御を行う場合には、これらの制限に対する対策が必要となる。すなわち、第一の制限は、第一ステップＳ１１はシーンチェンジに対応出来ず、また、シーンチェンジ後には第三ステップＳ１３で用いる媒介変数ａｖｇ＿ａｃｔが間違った値となるということである。第二の制限は、ＭＰＥＧ２及びＭＰＥＧ４において規定されているＶＢＶ（Video Buffer Verifier）の拘束条件を満たす保証がないことである。
【００５５】
ところで、文献”ＭＰＥＧ圧縮効率の理論解析とその符号量制御への応用”（信学技報、ＩＥ−９５， ＤＳＰ９５−１０， １９９５年５月、以下これを文献２と呼ぶ）でも述べられている通り、Ｔｅｓｔ Ｍｏｄｅｌ ５で定められている符号量制御方式は、ＭＰＥＧ−２画像符号化装置において、必ずしも良好な画質を与えるものではない。
【００５６】
この文献２では、特に、良好な画質を与えるための、ＧＯＰ内における各フレーム毎の最適な符号量配分を与える手法として以下の方式を提案している。すなわち、ＮI，ＮP，ＮBを、ＧＯＰ内においてまだ符号化されていないＩ，Ｐ，Ｂピクチャの枚数として、これらに割り当てられる符号量をＲI，ＲP，ＲBとする。また、式（１４）で与えられる固定レート条件の下に、それぞれにおける量子化ステップサイズをＱI，ＱP，ＱBとし、ｍを、量子化ステップサイズと再生誤差分散を関係付ける次数（すなわち、量子化ステップサイズをｍ乗したものの平均値の最小化が再生誤差分散を最低にすると仮定する）とする。そして、式（１５）を最小にすることを考える。
【００５７】
【数１７】
0004517465.tif 000015
【００５８】
【数１８】
0004517465.tif 000016
【００５９】
尚、それぞれのフレームにおける平均量子化スケールＱ、及び符号量Ｒは、Ｔｅｓｔ Ｍｏｄｅｌ ５でも用いられる媒体変数である各フレームのコンプレキシティＸと、式（１６）のように関係づけられる。
【００６０】
【数１９】
0004517465.tif 000017
【００６１】
式（１６）の関係も考慮しつつ、式（１４）の拘束条件の元に式（１５）を最小にするＲI，ＲP，ＲBを、ラグランジェの未定乗数法を用いて算出すると、最適なＲI，ＲP，ＲBとして以下の式のような値が求められる。
【００６２】
【数２０】
0004517465.tif 000018
【００６３】
α＝１として、式（１７）と、ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄｅｌ ５で定められた符号量制御方式における式（４）との関係は以下の通りであると言える。すなわち、式（１７）は、符号量制御の媒介変数であるＫp，Ｋbを、各フレームのコンプレキシティＸI，ＸP，ＸBに応じて、式（１８）のように適応的に算出していることに他ならない。
【００６４】
【数２１】
0004517465.tif 000019
【００６５】
文献２では、１／（１＋ｍ）の値として、０．６〜１．２程度に設定することで良好な画質が得られることが示されている。
【００６６】
図８に示した画像情報変換装置内で、ＭＰＥＧ４画像情報符号化装置（Ｉ／Ｐ−ＶＯＰ）４において、ＭＰＥＧ２  Ｔｅｓｔ  Ｍｏｄｅｌ  ５において定められたのと同様な手法を用いて符号量制御を行った場合、シーンチェンジ等に起因する、ＧＯＰ内でのコンプレキシティの変化に対応することが不可能であるため、安定した符号量制御が困難となり、画質劣化を引き起こすことが考えられる。ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）２において抽出される、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）内の情報をＭＰＥＧ４画像圧縮情報符号化部（Ｉ／Ｐ−ＶＯＰ）４において利用することでこの問題を回避することが可能であると期待される。
【００６７】
かかる問題を解決するため、本願出願人は、先に図１０に示すような画像情報変換装置を提案した。
【００６８】
この画像情報変換装置は、ピクチャタイプ判別部７と、圧縮情報解析部８と、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）９と、間引き部１０と、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１１と、動きベクトル合成部１２と、動きベクトル検出部１３と、情報バッファ１４と、コンプレキシティ算出部１５とから構成される。
【００６９】
この画像情報変換装置は、圧縮情報解析部８、情報バッファ１４、コンプレキシティ算出部１５及びＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１１における符号量制御以外の動作原理については、図８に示した画像情報変換装置と同様であるため、以下では、圧縮情報解析部８、情報バッファ１４、コンプレキシティ算出部１５における動作原理及びＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１１における符号量制御について述べることにする。
【００７０】
圧縮情報解析部８において、復号処理に用いられた量子化スケールのフレーム全体に渡る平均値Ｑ、及び、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）において、当該フレームに割り当てられた総符号量（ビット数）Ｂは、情報バッファ１４に格納される。
【００７１】
コンプレキシティ算出部１５においては、情報バッファ１４に格納されたフレーム毎の情報Ｑ及びＢから、当該フレームに対するコンプレキシティＸを式（１９）により算出する。
【００７２】
【数２２】
0004517465.tif 000020
【００７３】
式（１９）によって算出された、当該フレームに対するコンプレキシティＸは、１ＧＯＶ（group of VOPs）分バッファリングされた後、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１１に符号量制御のための媒介変数として伝送される。このため、１ＧＯＶ分の遅延が必要となる。この遅延は図示しない遅延バッファを用いて実現される。ここで、ＧＯＶとは、ランダムアクセス可能なＶＯＰの組である。
【００７４】
以下では、式（１９）において算出された、ＧＯＶ内の各フレームに対するコンプレキシティＸが、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）１１においてどのように用いられるかについて述べる。尚、以下では、ピクチャタイプ判別部７がこの画像情報変換装置内に存在せず、フレームレートの変換を行わない場合をも考慮することにする。
【００７５】
式（１８）によつて求められたＫP，ＫBの意味するところは、Ｉ−ＶＯＰに対する理想的な平均量子化スケールＱi_idealに対するＰ−ＶＯＰ／Ｂ−ＶＯＰに対する理想的な平均量子化スケールＱp_ideal，Ｑb_idealの比が、式（２０）によって与えられるということである。
【００７６】
【数２３】
0004517465.tif 000021
【００７７】
ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄｅｌ ５においては、式（１８）のように適応的にＫp，Ｋbを算出することを行わず、式（３）に示したような固定値を用いている。
【００７８】
式（１８）及び式（２０）から、或るＶＯＰ１と、或るＶＯＰ２に対するコンプレキシティをそれぞれＸ1，Ｘ2とし、理想的な量子化スケールをＱ1_ideal，Ｑ2_idealとすれば、式（２１）のようになる。
【００７９】
【数２４】
0004517465.tif 000022
【００８０】
或いはまた、ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄｅｌ ５のように、式（３）に示した固定値を用いたい場合には、式（２１）に代えて、式（２２）のようにすれば良い。
【００８１】
【数２５】
0004517465.tif 000023
【００８２】
今、ＧＯＶ内の未符号化されたＶＯＰに対して割り当てられる総符号量（ビット数）をＲとし、Ｒが、各ＶＯＰに対して、Ｒ1，Ｒ2，…Ｒnといったように割り当てられる時、当該ＧＯＶに対する画質が最適化されるものとする。ここでＲとＲ1，Ｒ2，…Ｒnの間には式（２３）のような関係式が成り立つ。
【００８３】
【数２６】
0004517465.tif 000024
【００８４】
或るＶＯＰkに対する平均量子化スケールＱk、割当符号量Ｒk、コンプレキシティＸkの間には式（２４）なる関係があることにも注意して、式（２３）を変形すれば式（２５）が得られる。
【００８５】
【数２７】
0004517465.tif 000025
【００８６】
【数２８】
0004517465.tif 000026
【００８７】
式（２５）において、Ｋ（Ｘ1，Ｘ2）に関しては、式（２１）に示した値を用いても、式（２２）に示した値を用いても良いが、前者の方が、画像に応じた、より最適な符号量配分を実現することが可能である。その際、１／（１＋ｍ）の値を１．０と設定することで、指数演算を行うことが不要となり、高速な実行が可能となる。また、１／（１＋ｍ）の値を１．０以外に設定する場合にも、予めテーブルを持ち、これを参照して指数演算を行うことで高速な実行が可能となる。
【００８８】
式（２５）における各ＶＯＰに対するコンプレキシティＸkはＭＰＥＧ４画像符号化によるものであるが、ＭＰＥＧ２画像符号化による各フレームに対するコンプレキシティと、ＭＰＥＧ４画像符号化による各フレームに対するコンプレキシティが等しいと仮定すれば、コンプレキシティ算出部１５に格納されたＸkを用いることで、式（２５）によって当該ＶＯＰに対する目標符号量を算出することが可能である。
【００８９】
この目標符号量の算出のフローを図１１に示す。最初のステップＳ２１において、圧縮情報解析部８は、ＭＰＥＧ２画像情報復号化部９における復号処理に用いられるＧＯＰ内の各フレームに対する平均量子化スケールＱ，及び割当符号量（ビット数）Ｂを抽出する。
【００９０】
ステップＳ２２において、コンプレキシティ算出部１５は、平均量子化スケールＱ及び割当符号量（ビット数）Ｂの積で与えられるコンプレキシティＸを算出する。
【００９１】
ステップＳ２３において、ＭＰＥＧ４画像符号化部（Ｉ／Ｐ−ＶＯＰ）１１は、コンプレキシティＸに応じた目標符号量（ターゲットビット）を算出する。
【００９２】
ＭＰＥＧ２ Ｔｅｓｔ Ｍｏｄｅｌ ５では、ＧＯＰ内におけるＩ，Ｐ，Ｂピクチャに対するコンプレキシティＸi，Ｘp，Ｘbは一定であると仮定しているが実際にはシーンチェンジをＧＯＰ内に含む場合や、ＧＯＰ内で背景が著しく変化する場合等ではこの仮定が成り立たず、安定した符号量制御の妨げとなり、画質劣化の要因ともなる。図１０に示した画像情報変換装置においては、そのような場合にも、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）における、各フレームに対するコンプレキシティに基づいた符号量制御を行うため、画質劣化を引き起こすことなく、安定した符号量制御を行うことが可能である。
【００９３】
【発明が解決しようとする課題】
ところで、ＣＣＩＲ（Comite Consultantif Internationale des Radio Communications ）テストシーケンスの一つである“Ｔａｂｌｅ  Ｔｅｎｎｉｓ”をＭＰＥＧ２符号化方式によって、ｎ＝１５；ｍ＝３の条件の元、４Ｍｂｐｓ に圧縮した画像圧縮情報（ビットストリーム）を、図１０に示した画像情報変換装置を用いて、ｎ＝５；ｍ＝１、６００ｋｂｐｓのＭＰＥＧ４画像圧縮情報（ビットストリーム）に変換した時のｐＳＮＲを図１２に示す。 ｐＳＮＲは次の式（２６）により計算される。
【００９４】
【数２９】
0004517465.tif 000027
【００９５】
この式（２６）において、ＭＳＥは、ＭＰＥＧ４画像情報符号化装置（Ｉ／Ｐ−ＶＯＰ）１１の、各フレームに対する入力信号と出力信号の平均２乗誤差である。
【００９６】
図１２において、第２１フレーム及び第３１フレームのＰ−ＶＯＰにはシーンチェンジが含まれる。図１０に示した画像情報変換装置を用いることにより、これらのワレームには通常のＰ−ＶＯＰより多くの符号量（ビット数）が割り当てられることになり、その画質劣化を最小限に抑えることを可能としている。しかしながら、これらのＰ−ＶＯＰにより多くの符号量（ビット数）を割り当てるため、当該ＧＯＶ内の他のＩ−ＶＯＰ及びＰ−ＶＯＰに対して割り当てられる符号量（ビット数）が減少し、ＧＯＶ全体の画質劣化が他のＧＯＶにおける画質劣化に比べて大きくなってしまうという問題点を有する。
【００９７】
本発明は、上述の実情に鑑みて提案されるもので、シーンチェンジを含む場合にも画質劣化を抑制するような画像情報変換装置及び方法並びに符号化装置及び方法を提供することを目的とする。
【００９８】
【課題を解決するための手段】
上述の課題を解決するために、本発明は、第１の圧縮符号化方式で圧縮された飛び越し走査の入力画像圧縮情報を、第２の圧縮符号化方式で圧縮された順次走査の出力画像圧縮情報に変換するものであって、上記入力画像圧縮情報及び上記出力画像圧縮情報の画像群は、フレーム内で符号化されたイントラ符号化画像、表示順序で順方向を参照して符号化された順方向予測符号化画像及び表示順序で順方向及び逆方向を参照して符号化された双方向予測符号化画像を含み、上記入力画像圧縮情報及び上記出力画像圧縮情報は複数の符号化画像からなる画像群を単位として構成され、上記出力画像圧縮情報におけるシーンチェンジを検出するシーンチェンジ検出手段と、上記入力画像圧縮情報の各フレームのコンプレキシティを検出するコンプレキシティ検出手段と、上記コンプレキシティ検出手段で検出したコンプレキシティに基づいて上記出力画像圧縮情報に画像情報の符号量を配分する際に、上記シーンチェンジ検出手段で検出したシーンチェンジに応じて上記出力画像圧縮情報における画像群の構造を変換する変換手段とを有し、上記変換手段は、上記出力画像圧縮情報の２画像群に相当する時間に亘って画像情報を遅延させる遅延手段を有し、上記出力画像圧縮情報において、シーンチェンジを含む画像群の直後の画像群の先頭のイントラ符号化画像を順方向予測符号化画像に変換し、上記イントラ符号化画像を順方向予測符号化画像に変換する際の動きベクトル情報を、当該イントラ符号化画像の前後の順方向予測符号化画像における動きベクトル情報を利用して求めると共に、上記イントラ符号化画像を順方向予測符号化画像に変換する際のコンプレキシティを、上記イントラ符号化画像の前後の順方向予測符号化画像におけるコンプレキシティを利用して求める。
また、本発明に係る画像情報変換装置は、第１の圧縮符号化方式で圧縮された飛び越し走査の入力画像圧縮情報を、第２の圧縮符号化方式で圧縮された順次走査の出力画像圧縮情報に変換する画像情報変換装置において、上記入力画像圧縮情報及び上記出力画像圧縮情報の画像群は、フレーム内で符号化されたイントラ符号化画像、表示順序で順方向を参照して符号化された順方向予測符号化画像及び表示順序で順方向及び逆方向を参照して符号化された双方向予測符号化画像を含み、上記入力画像圧縮情報及び上記出力画像圧縮情報は複数の符号化画像からなる画像群を単位として構成され、上記出力画像圧縮情報におけるシーンチェンジを検出するシーンチェンジ検出手段と、上記入力画像圧縮情報の各フレームのコンプレキシティを検出するコンプレキシティ検出手段と、上記コンプレキシティ検出手段で検出したコンプレキシティに基づいて上記出力画像圧縮情報に画像情報の符号量を配分する際に、上記シーンチェンジ検出手段で検出したシーンチェンジに応じて上記出力画像圧縮情報における画像群の構造を変換する変換手段とを有し、上記変換手段は、上記出力画像圧縮情報において、シーンチェンジを含む画像群の直後の画像群の先頭のイントラ符号化画像を順方向予測符号化画像に変換し、上記イントラ符号化画像を順方向予測符号化画像に変換する際の動きベクトル情報を、当該イントラ符号化画像の前後の順方向予測符号化画像における動きベクトル情報を利用して求めると共に、上記イントラ符号化画像を順方向予測符号化画像に変換する際のコンプレキシティを、上記イントラ符号化画像の前後の順方向予測符号化画像におけるコンプレキシティを利用して求める。
次に、本発明に係る符号化装置は、第１の圧縮符号化方式で圧縮された飛び越し走査の入力画像圧縮情報を復号して得られる画像情報を、第２の圧縮符号化方式で圧縮された順次走査の出力画像圧縮情報に符号化する符号化装置において、上記入力画像圧縮情報及び上記出力画像圧縮情報の画像群は、フレーム内で符号化されたイントラ符号化画像、表示順序で順方向を参照して符号化された順方向予測符号化画像及び表示順序で順方向及び逆方向を参照して符号化された双方向予測符号化画像を含み、上記入力画像圧縮情報及び上記出力画像圧縮情報は複数の符号化画像からなる画像群を単位として構成され、上記出力画像圧縮情報におけるシーンチェンジを検出して得られたシーンチェンジを受け取る受け取り手段と、上記入力画像圧縮情報の各フレームのコンプレキシティを検出するコンプレキシティ検出手段と、上記コンプレキシティ検出手段で検出したコンプレキシティに基づいて上記出力画像圧縮情報に画像情報の符号量を配分する際に、上記受け取り手段からのシーンチェンジに応じて上記出力画像圧縮情報における画像群の構造を変換する変換手段とを有し、上記変換手段は、上記出力画像圧縮情報において、シーンチェンジを含む画像群の直後の画像群の先頭のイントラ符号化画像を順方向予測符号化画像に変換し、上記イントラ符号化画像を順方向予測符号化画像に変換する際の動きベクトル情報を、当該イントラ符号化画像の前後の順方向予測符号化画像における動きベクトル情報を利用して求めると共に、上記イントラ符号化画像を順方向予測符号化画像に変換する際のコンプレキシティを、上記イントラ符号化画像の前後の順方向予測符号化画像におけるコンプレキシティを利用して求める。
【００９９】
本発明は、飛び越し走査のＭＰＥＧ２画像圧縮情報（ビットストリーム）を入力画像圧縮情報とし、順次操作のＭＰＥＧ４画像圧縮情報（ビットストリーム）を出力画像圧縮情報とする。ここで、ＭＰＥＧ２画像圧縮情報（ビットストリーム）は符号化画像であるピクチャ（picture）からなる画像群であるＧＯＰ（group of pictures）から構成され、ＭＰＥＧ４画像圧縮情報（ビットストリーム）は符号化画像であるＶＯＰ（vide object plain）からなる画像群であるＧＯＶ（group of VOPs）から構成されている。そして、上記画像群の符号化画像は、複数の画素から構成される画素ブロックすなわちマクロブロックから構成されている。
【０１００】
すなわち、本発明は、飛び越し走査のＭＰＥＧ２画像圧縮情報（ビットストリーム）を入力とし、ピクチャタイプ判別部、圧縮情報解析部、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）、間引き部、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）、動きベクトル合成部、動きベクトル検出部、情報バッファ、コンプレキシティ算出部、シーンチェンジ検出部、及びＧＯＶ構造変換部を兼ね備え、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）における各フレームに対するコンプレキシティを元にしてＭＰＥＧ４画像情報符号化部で符号量制御を行う際、シーンチェンジが検出されたＧＯＶに対しては、直後のＧＯＶにおける最初のＩ−ＶＯＰをＰ−ＶＯＰに変換することによりＧＯＶ構造の変換を行うことで当該ＧＯＶにおける画質劣化を低減し、各フレームに対する符号量割当が画像に対して最適化された状態で、順次走査のＭＰＥＧ４画像圧縮情報（ビットストリーム）を出力する手段を提供するものである。
【０１０１】
上記構成において、ピクチャタイプ判別部は、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）内で、Ｉ／Ｐピクチャに関するものだけ残してＢピクチャに関するものは廃棄する。圧縮情報解析部は、２ＧＯＰ分の遅延を実現し、また、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）内で、各フレームに対して割り当てられた符号量（ビット数）及び各フレームにおける平均量子化スケールを抽出する。ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）は、ピクチャタイプ判別部の出力となる、Ｉ／Ｐピクチャに関する圧縮情報（ビットストリーム）を、水平方向垂直方向ともに、８次の離散コサイン係数全てを用いた、若しくはその低域成分のみを用いた復号処理を行う。間引き部は、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）の出力である画像情報の第一フィールド若しくは第二フイールドのみを取り出して順次走査画像への変換を行うと同時に、所望の画枠サイズに変換するためのダウンサンプリングを行う。ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）は、間引き部の出力となる画像情報をＭＰＥＧ４符号化方式により符号化する。動きベクトル合成部は、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）で検出された、入力となる画像圧縮情報（ビットストリーム）内の動きベクトル値を元に、走査変換後の画像データに対する動きベクトル値にマッピングを行う。動きベクトル検出部は、動きベクトル合成部から出力される動きベクトル値を元に、高精度の動きベクトル検出を行い、情報パフファにおいては、圧縮情報解析部において抽出された、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）における各フレームに割り当てられた符号量（ビット数）及び各フレームに対する平均量子化スケールを格納する。コンプレキシティ算出部は、情報バッファに格納された、入力となる画像圧縮情報（ビットストリーム）における、各フレームに割り当てられた符号量（ビット数）、及び各フレームに対する平均量子化スケールから、各フレームに対するコンプレキシティを算出し、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）へ、符号量制御のための媒介変数として伝送する。シーンチェンジ検出部は、コンプレキシティ算出部に格納された、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）における各フレームに対するコンプレキシティからシーンチェンジが当該ＧＯＰに含まれているかどうかの検出を行う。ＧＯＶ構造変換部は、シーンチェンジ検出部においてシーンチェンジが検出された場合、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）において符号化制御情報として与えられるＧＯＶ構造の変換を行ってその情報をＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）に伝送する。シーンチェンジ検出は、コンプレキシティ算出部に格納された情報ではなく、圧縮情報解析部において抽出される、各フレームにおけるイントラマクロブロックの数等の情報を用いて行っても良い。また、間引き部の後段にフレームバッファを兼ね備え、ここでシーンチェンジ検出を行っても良い。
【０１０２】
【発明の実施の形態】
以下、本発明の実施の形態について、図面を参照して説明する。
【０１０３】
まず、本発明を適用した第１の実施の形態として、画像情報変換装置を説明する。
【０１０４】
この画像情報変換装置は、図１に示すように、ピクチャタイプ判別部１６と、圧縮情報解析部１７と、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）１８と、間引き部１９と、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）２０と、動きベクトル合成部２１と、動きベクトル検出部２２と、情報バッファ２３と、コンプレキシティ算出部２４と、シーンチェンジ検出部２５と、ＧＯＶ構造変換部２６とから構成されている。
【０１０５】
なお、ピクチャタイプ判別部１６を持たず、フレームレートの変換を行わない装置構成も考えられるが、以下では説明を簡単にするため、ピクチャタイプ判別部１６を兼ね備えた装置構成について述べることとする。
【０１０６】
この画像情報変換装置には、フレーム内で符号化されたイントラ符号化画像（Ｉピクチャ；Ｉ）、表示順序で順方向を参照して予測符号化された順方向予測符号化画像（Ｐピクチャ；Ｐ）及び表示順序で順方向及び逆方向を参照して予測符号化された双方向予測符号化画像（Ｂピクチャ；Ｂ）から構成される飛び越し走査のＭＰＥＧ２画像圧縮情報（ビットストリーム）が入力される。
【０１０７】
このＭＰＥＧ２画像圧縮情報（ビットストリーム）は、ピクチャタイプ判別部１６において、Ｉ／Ｐピクチャに関するものか、Ｂピクチャに関するものであるかを判別され、Ｉ／Ｐピクチャのみ後続の圧縮情報解析部１７に出力され、Ｂピクチャは破棄される。
【０１０８】
圧縮情報解析部１７において、ＭＰＥＧ２画像情報復号化装置（Ｉ／Ｐピクチャ）１８における復号処理に用いられる量子化スケールのフレーム全体に渡る平均値Ｑ、及び、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）において、当該フレームに割り当てられた総符号量（ビット数）Ｂは、情報バッファ２３に格納される。
【０１０９】
ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）１８における処理は通常のＭＰＥＧ２画像情報復号化装置と同様に、ＭＰＥＧ２画像圧縮情報（ビットストリーム）を画像信号に復号するものである。ここで、Ｂピクチャに関するデータはピクチャタイプ判別部１６において廃棄されているので、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）１８は、Ｉ／Ｐピクチャのみを復号化出来る機能を有すればよい。
【０１１０】
ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）１８の出力となる画素値は、間引き部１９に入力される。間引き部１９は、水平方向には１／２の間引き処理を施し、垂直方向には、第一フィールド若しくは第二フィールドのどちらか一方のデータのみを残し、もう一方を廃棄する。このような間引きによって、入力となる画像情報の１／４の大きさを持つ順次走査画像を生成する。
【０１１１】
ところで、間引き部１９から出力された画像をＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）２０において１６×１６画素で構成されるマクロブロック単位で符号化するためには、水平方向、垂直方向ともに、その画素数が１６の倍数である必要が有る。間引き部１９においては、このための画素の補填若しくは廃棄を、間引きと同時に行う。
【０１１２】
例えば、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）がＮＴＳＣ（National Television System Committee）の規格に準拠したもの、つまり７２０×４８０画素、３０Ｈｚの飛び越し走査画像であった場合、間引き後の画枠はＳＩＦ（３６０×２４０画素）サイズということになる。この画像に対して、間引き部１９において、例えば水平方向の右端若しくは左端の８ラインを廃棄して３５２×２４０画素とする。
【０１１３】
なお、間引き部１９における動作の変更を行うことで、これ以外の画枠、例えば上記の例で、約１／４×１／４の画枠であるＱＳＩＦ（１７６×１１２画素）サイズの画像に変換することも可能である。
【０１１４】
更に、上述した文献１は、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）１８における処理として、水平方向、垂直方向それぞれについて、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）内の、８次の離散コサイン変換係数すべてを用いた復号処理を行う画像情報変換装置について述べられているが、図１に示した装置に関してはその限りではなく、水平方向のみ、或いは水平方向、垂直方向ともに、８次の離散コサイン変換係数のうちの低域成分のみを用いた復号処理を行い、画質劣化を最小限に抑えながら、復号処理に伴う演算量とビデオメモリ容量を削減することが可能である。
【０１１５】
間引き部１９によって生成された順次走査画像はＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）２０によってフレーム内で符号化されたＩ−ＶＯＰ及び表示順序で順方向を参照して予測符号化されたＰ−ＶＯＰに符号化され、ＭＰＥＧ４画像圧縮情報（ビットストリーム）として出力される。
【０１１６】
尚、ＶＯＰはVideo object Planeを意味し、ＭＰＥＧ２におけるフレームに相当するものである。また、Ｉ−ＶＯＰはＩピクチャに対応するイントラ符号化ＶＯＰ、Ｐ−ＶＯＰはＰピクチャに対応する順方向予測符号化ＶＯＰ、Ｂ−ＶＯＰはＢピクチャに対応する双方向予測符号化ＶＯＰである。
【０１１７】
ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）２０における符号化の際には、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）中の動きベクトル情報は、動きベクトル合成部２１において間引き後の画像情報に対する動きベクトルにマッピングされ、動きベクトル検出部２２においては、動きベクトル合成部２１において合成された動きベクトル値を元に高精度の動きベクトルを検出する。
【０１１８】
また、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）２０は、コンプレキシティ算出部２４からコンプレキシティの近似値が与えられるので、この近似値に基づいて各ＶＯＰに対する目標符号量（ターゲットビット）を算出し、この目標符号量（ターゲットビット）に応じて符号化する際に、ＧＯＶ構造変換部２６からのＧＯＶ構造に変換を行うことで、当該ＧＯＶにおいて生じる画質劣化を低減し、符号量配分を最適化する。
【０１１９】
シーンチェンジ検出部２５においては、コンプレキシティ算出部２４に格納された、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）における当該ＧＯＰ内の各フレームに対するコンプレキシティからシーンチェンジが当該ＧＯＰに含まれているかどうかの判断を行う。当該ＧＯＰに対するＩピクチャ及びＰピクチャのコンプレキシティをそれぞれＸi及びＸp1，Ｘp2，…Ｘpnとすれば、予め定められた閾値Ｘthresholdに対し、次の式（２７）が一つでも成り立つ時、このＧＯＰにはシーンチェンジが含まれていると判断する。
【０１２０】
【数３０】
0004517465.tif 000028
【０１２１】
図２に、シーンチェンジ検出装置２５においてシーンチェンジが検出された場合の、ＧＯＶ構造変換部２６における動作原理の一例を示す。
【０１２２】
図２の例では、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）のＧＯＰ構造がｎ＝１５；ｍ＝３の場合を想定している。すなわち、図２のＡに示すように、入力ＭＰＥＧ２画像圧縮情報（ビットストリーム）は、Ｉ0，Ｂ0，Ｂ1，Ｐ0，Ｂ2，Ｂ3，Ｐ1，Ｂ4，Ｂ5，Ｐ2，Ｂ6，Ｂ7，Ｐ3，Ｂ8，Ｂ9からなるＧＯＰ０及びＩ1，Ｂ10，Ｂ11，Ｐ4，Ｂ12，Ｂ13，Ｐ5，Ｂ14，Ｂ15，Ｐ6，Ｂ16，Ｂ17，Ｐ7，Ｂ18、Ｂ19からなるＧＯＰ１から構成されている。
【０１２３】
この時、ＧＯＶ構造変換前には、出力となるＭＰＥＧ４画像圧縮情報（ビットストリーム）におけるＧＯＶ構造がｎ＝５；ｍ＝１となる。すなわち、図２のＢに示すように、変換前の出力ＭＰＥＧ４画像圧縮情報（ビットストリーム）は、Ｉ0，Ｐ0，Ｐ1，Ｐ2，Ｐ3からなるＧＯＰ０及びＩ1，Ｐ4，Ｐ5，Ｐ6，Ｐ7からなるＧＯＰ１から構成されている。
【０１２４】
ここで、式（２７）により、Ｐ1にシーンチェンジが検出されたとする。この時、変換前のＧＯＶ０にはシーンチェンジが含まれるとして、ＧＯＶ１の先頭に存在するＩ−ＶＯＰであるＩ1はＰ−ＶＯＰであるＰ4へ変換され、ＧＯＶ０及びＧＯＶ１は統合されて一つのＧＯＶとなる。すなわち、図２のＣに示すように変換後の出力ＭＰＥＧ４画像圧縮情報（ビットストリーム）は、Ｉ0，Ｐ0，Ｐ1，Ｐ2，Ｐ3，Ｐ4，Ｐ5，Ｐ6，Ｐ7，Ｐ8からなるＧＯＶ０から構成されている。なお、図２のＣにおけるＰ4，Ｐ5，Ｐ6，…は、図２のＢにおけるＩ1，Ｐ4，Ｐ5，…の位置に対応している。
【０１２５】
図３に、シーンチェンジ検出部２５及びＧＯＶ構造変換部２６における一連の動作フローを示す。この動作を実現するためには、圧縮情報解析部１７において２ＧＯＶ分の遅延を実現する必要がある。
【０１２６】
最初のステップＳ３１において、シーンチェンジ検出部２５は、コンプレキシティ算出部２４から当該ＧＯＶにおける各フレームに対するコンプレキシティ情報を読み出す。
【０１２７】
ステップＳ３２において、シーンチェンジ検出部２５は、当該ＧＯＶにシーンチェンジが含まれるかどうかを調べ、その結果に応じて処理の手順を分岐させる。
【０１２８】
すなわち、当該ＧＯＶにシーンチェンジが含まれている場合にはステップＳ３３に処理を進めるが、当該ＧＯＶにシーンチェンジが含まれていない場合にはステップＳ３４に処理を進める。
【０１２９】
ステップＳ３３において、ＧＯＶ構造変換部２６は、シーンチェンジ検出部２５で検出したシーンチェンジに応じてＧＯＶ構造を変換する。
【０１３０】
ステップＳ３４においては、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）２０はＭＰＥＧ４画像圧縮情報（ビットストリーム）への符号化を行う。ここで、ステップＳ３３でＧＯＶ構造を変換した場合には、これに応じた符号化を行う。
【０１３１】
このような一連の処理により、たとえ入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）が固定ＧＯＶ構造であっても、出力となるＭＰＥＧ４画像圧縮情報（ビットストリーム）が可変となりうる。このことを、図４を用いて説明する。図４で、変換前の固定ＧＯＶ構造において、ＧＯＶ１及びＧＯＶ６にシーンチェンジのあることが、シーンチェンジ検出装置２５によって検出されたとする。すなわち、図４のＡにおいて、変換前の固定ＧＯＶ構造ＧＯＶ１，ＧＯＰＶ２，ＧＯＶ３，ＧＯＶ４，ＧＯＶ５，ＧＯＶ６，ＧＯＶ７，ＧＯＶ８の内、シーンチェンジ検出部３５によりＧＯＶ１及びＧＯＶ６にシーンチェンジが検出されたものとする。
【０１３２】
この場合、ＧＯＶ１とＧＯＶ２、及びＧＯＶ６とＧＯＶ７をそれぞれ統合することにより、図４のＢに示すように、ＧＯＶ０，ＧＯＶ１，ＧＯＶ２、ＧＯＶ３，ＧＯＶ４，ＧＯＶ５，ＧＯＶ６のようなＧＯＶ構造に変換される。変換後において、ＧＯＶ１及びＧＯＶ５は他のＧＯＶに比べて２倍の長さを持つことになる。すなわち、このＭＰＥＧ４画像圧縮情報（ビットストリーム）は可変ＧＯＶ構造となる。
【０１３３】
ここで、図４のＢに示す変換後のＧＯＶ２，ＧＯＶ３，ＧＯＶ４，ＧＯＶ６は、図４のＡに示す変換前のＧＯＶ３，ＧＯＶ４，ＧＯＶ５，ＧＯＶ８の位置にそれぞれ対応している。
【０１３４】
尚、Ｉ−ＶＯＰをＰ−ＶＯＰに変換するためには、当該フレームに対する動きベクトル情報が必要となる。このため、当該フレームに対する動きベクトルは全て０とするか、或いはまた、動きベクトル検出装置２２を用いて動きベクトルの検出を行っても良いが、前後のＰ−ＶＯＰにおける動きベクトル情報を利用することも考えられる。また、式（２５）に基づいて、当該ＶＯＰに対する目標符号量（ターゲットビット）を算出するには、Ｉ−ＶＯＰからＰ−ＶＯＰに変換されたＶＯＰに対するコンプレキシティを推定する必要がある。このための処理の一例を図５に示す。図５には、Ｉ0，Ｐ0，Ｐ1，Ｐ2，Ｐ3からなるＧＯＶ０及びＩ1，Ｐ4，Ｐ5，Ｐ6，Ｐ7からなるＧＯＶ１が例示されている。
【０１３５】
図５のＡは、ＧＯＶ内において、最後のＰ−ＶＯＰ以外のＰ−ＶＯＰでシーンチェンジが検出された場合の例である。すなわち、ここではＧＯＶのＰ1においてシーンチェンジが検出されたものとする。この場合のＩ1に対する動きベクトル情報としては、Ｐ3若しくはＰ4で用いられた動きベクトル情報をそのまま用いる、或いは、Ｐ3若しくはＰ4で用いられた動きベクトル情報を元に動きベクトル検出装置２２を用いて動きベクトル情報の高精度化を行う。或いはまた、各マクロブロックに対して、Ｐ3若しくはＰ4で用いられた動きベクトル情報を用いて予測を行った場合と、動きベクトルを０として予測を行った場合とを比較して、符号化効率の高い方を選択するといったことが考えられる。
【０１３６】
コンプレキシティに関しては、直前のＰ−ＶＯＰであるＰ3、若しくは直後のＰ−ＶＯＰであるＰ4で用いられたコンプレキシティＸp3若しくはＸp4をそのまま使つても良い。或いは、次の式（２８）で与えられる両者の平均値を用いても良い。
【０１３７】
【数３１】
0004517465.tif 000029
【０１３８】
或いは、次の式（２９）で与えられるシーンチェンジ後の全てのＰ−ＶＯＰに対する平均値を用いても良い。
【０１３９】
【数３２】
0004517465.tif 000030
【０１４０】
元のＩ−ＶＯＰのコンプレキシティＸi1及びＸpk（ｋ＝２，…，７）から当該ＶＯＰに対するコンプレキシティの推測値を算出しても良い。
【０１４１】
図５のＢは、ＧＯＶ内において、最後のＰ−ＶＯＰでシーンチェンジが検出された場合の例である。すなわち、ここではＧＯＶ０のＰ3においてシーンチェンジが検出されたものとする。この時、直前のＰ−ＶＯＰであるＰ3における動きベクトル情報は、Ｉ1をＰ−ＶＯＰに変換する場合の動きベクトル情報との相関が低いと考えられる。そこで、直後のＰ−ＶＯＰであるＰ4における動きベクトル情報をそのまま用いる。或いは、Ｐ4で用いられた動きベクトル情報を元に動きベクトル検出装置２２を用いて動きベクトル情報の高精度化を行う。或いはまた、各マクロブロックに対して、Ｐ4で用いられた動きベクトル情報を用いて予測を行った場合と、動きベクトルを０として予測を行った場合とを比較して、符号化効率の高い方を選択するといったことが考えられる。
【０１４２】
コンプレキシティに関しても、Ｐ3におけるコンプレキシティＸp3と、Ｉ1をＰ−ＶＯＰに変換した時のコンプレキシティＸとの間の相関は低いと考えられる。そこで、Ｐ4におけるコンプレキシティＸp4の値をそのまま用いるか、或いは次の式（３０）で与えられるシーンチェンジ後の全てのＰ−ＶＯＰに対する平均値を用いる。
【０１４３】
【数３３】
0004517465.tif 000031
【０１４４】
或いは、元のＩ−ＶＯＰのコンプレキシティＸi1及びＸpk（ｋ＝４，…，７）から当該ＶＯＰに対するコンプレキシティの推測値を算出しても良い。
【０１４５】
次に、本発明を適用した第２の実施の形態の画像情報変換装置について、図６を参照して説明する。
【０１４６】
この画像情報変換装置は、ピクチャタイプ判別部２７と、圧縮情報解析部２８と、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）２９と、間引き部３０と、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）３１と、動きベクトル合成部３２と、動きベクトル検出部３３と、情報バッファ３４と、コンプレキシティ算出部３５と、シーンチェンジ検出部３６と、ＧＯＶ構造変換部３７とから構成されている。
【０１４７】
図６に示した画像情報変換装置と、図１に示した画像情報変換装置の違いは、図１に示した画像情報変換装置においては、コンプレキシティ算出装置３４において算出された、入力となる画像圧縮情報（ビットストリーム）における、各フレームに対するコンプレキシティを元にシーンチェンジ検出が行われるのに対し、図６に示した画像圧縮情報解析装置においては、シーンチェンジ検出部３６は、圧縮情報解析装置２８において抽出される情報を元にシーンチェンジ検出を行う点にある。例えば、圧縮情報解析装置２８において、Ｐピクチャ内のイントラマクロブロックの個数Ｎintraを算出し、これが予め定められた閥値Ｎthresholdに対して、次の式（３１）で与えられる関係が成り立つ時、シーンチェンジが検出されたとしてその後の処理を行う。
【０１４８】
【数３４】
0004517465.tif 000032
【０１４９】
次に、本発明を適用した第３の実施の形態の画像情報変換装置について、図７を参照して説明する。
【０１５０】
この画像情報変換装置は、ピクチャタイプ判別部３８と、圧縮情報解析部３９と、ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）４０と、間引き部４１と、フレームバッファ４２と、ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）４３と、動きベクトル合成部４４と、動きベクトル検出部４５と、情報バッファ４６と、コンプレキシティ算出部４７と、シーンチェンジ検出部４８と、ＧＯＶ構造変換部４９とから構成されている。
【０１５１】
図７に示した画像情報変換装置と、図１に示した画像情報変換装置の違いは、図１に示した画像情報変換装置においては、コンプレキシティ算出装置３４において算出された、入力となる画像圧縮情報（ビットストリーム）における、各フレームに対するコンプレキシティを元にシーンチェンジ検出が行われるのに対し、図７に示した画像情報変換装置においては、シーンチェンジ検出部４８によりフレームバッファ４２に格納された画像情報を元にシーンチェンジ検出が行われる。すなわち、例えば、ベースバンドにおける１フレームの特徴量（例えば画素の平均値、分散値等）αを算出し、１フレーム前の特微量であるαprev、及び予め定められた閥値αthresholdに対して、式（３２）で与えられる関係が成り立つ時、シーンチェンジが検出されたとしてその後の処理を行う。
【０１５２】
【数３５】
0004517465.tif 000033
【０１５３】
以上、入力としてＭＰＥＧ２画像圧縮情報（ビットストリーム）を、出力としてＭＰＥＧ４画像圧縮情報（ビットストリーム）を対象としてきたが、入力、出力ともこれに限らず、例えばＭＰＥＧ−１やＨ．２６３などの画像圧縮情報（ビットストリーム）でも良い。
【０１５４】
【発明の効果】
以上述べてきた様に、本発明は、飛び越し走査のＭＰＥＧ２画像圧縮情報（ビットストリーム）を入力とし、入力となるＭＰＥＧ２画像圧縮情報（ビットストリーム）における各フレームに対するコンプレキシティを元にしてＭＰＥＧ４画像情報符号化部で符号量制御を行う際、シーンチェンジが検出されたＧＯＶに対しては、直後のＧＯＶにおける最初のＩ−ＶＯＰをＰ−ＶＯＰに変換することでＧＯＶ構造の変換を行うことで当該ＧＯＶにおける画質劣化を低減し、各フレームに対する符号量割当が画像に対して最適化された状態で順次走査のＭＰＥＧ４画像圧縮情報（ビットストリーム）に変換して出力する手段を提供するものである。
【図面の簡単な説明】
【図１】第１の実施の形態の画像情報変換装置の構成を示すブロック図である。
【図２】シーンチェンジ検出部及びＧＯＶ構造変換部における動作原理を説明する図である。
【図３】シーンチェンジ検出部及びＧＯＶ構造変換部における一連の動作を示すフローチャートである。
【図４】固定ＧＯＶ構造から可変ＯＰＶ構造の変換を示す図である。
【図５】図６において、Ｉ−ＶＯＰをＰ―ＶＯＰに変換する処理を示す図である。
【図６】第２の実施の形態の画像情報変換装置の構成を示すブロック図である。
【図７】第３の実施の形態の画像情報変換装置の構成を示すブロック図である。
【図８】従来の画像情報変換装置の構成を示すブロック図である。
【図９】ＭＰＥＧ２ Ｔｅｓｔ  Ｍｏｄｅ１  ５（ＩＳＯ／ＩＥＣ  ＪＴＣ１／ＳＣ２９／ＷＧ１１  Ｎ０４００）で述べられている符号量制御方式の動作原理を示すフローチャートである。
【図１０】本願出願人が提案した画像情報変換装置の構成を示す図である。
【図１１】図１０の画像情報変換装置における符号量制御の動作を示すフローチャートである。
【図１２】ＣＣＩＲテストシーケンスの一つである“Ｔａｂｌｅ  Ｔｅｎｎｉｓ”をＭＰＥＧ２符号化方式によって、ＭＰＥＧ４画像圧縮情報（ビットストリーム）に変換した時のｐＳＮＲを示した図である。
【符号の説明】
１６  ピクチャタイプ判別部、１７  圧縮情報解析部、１８  ＭＰＥＧ２画像情報復号化部（Ｉ／Ｐピクチャ）、１９  間引き部、２０  ＭＰＥＧ４画像情報符号化部（Ｉ／Ｐ−ＶＯＰ）、２１  動きベクトル合成部、２２  動きベクトル検出部、２３  情報バッファ、２４  コンプレキシティ算出部、２５  シーンチェンジ検出部、２６  ＧＯＶ構造変換部
【図１】
0004517465.tif 000037
【図２】
0004517465.tif 000038
【図３】
0004517465.tif 000039
【図４】
0004517465.tif 000040
【図５】
0004517465.tif 000041
【図６】
0004517465.tif 000042
【図７】
0004517465.tif 000043
【図８】
0004517465.tif 000044
【図９】
0004517465.tif 000045
【図１０】
0004517465.tif 000046
【図１１】
0004517465.tif 000047
【図１２】
0004517465.tif 000048