(57)【特許請求の範囲】
【請求項１】
画像信号が符号化されたＭＰＥＧ２規格のビットストリームについて少なくとも復号処理を行う画像信号処理装置であって、
上記ビットストリームにおける解像度の変更可能な最小単位であるＭＰＥＧ２規格のビットストリームを構成するビデオシーケンス内に設けられた上記ビデオシーケンスごとに定義可能なユーザデータエリアから当該ビデオシーケンスのディスプレイサイズ変換比及び複数の上記ビデオシーケンス間の関係を示す識別情報を読み出す識別情報読み出し手段と、
上記識別情報の上記ディスプレイサイズ変換比に応じて上記ビデオシーケンスに対応する画像信号のデコードの際の解像度を切り換える制御手段とを有し、
上記識別情報は、上記ビデオシーケンスを複数集めて構成される動画シーケンスの最初のビデオシーケンス及び最後のビデオシーケンスを識別するための情報を含み、これらの情報を上記識別情報読み出し手段により読み出して上記動画シーケンスの最初のビデオシーケンス及び最後のビデオシーケンスを識別する画像信号処理装置。
【請求項２】
上記ビットストリームは、画像内符号化画像と、表示順序で順方向の他の画像から予測される順方向予測符号化画像と、表示順序で順方向及び逆方向の他の画像から予測される双方向符号化画像とからなる画像群を単位とする請求項１記載の画像信号処理装置。
【請求項３】
上記ビットストリーム内に設けられたユーザデータエリアに上記ビデオシーケンスの解像度及び上記動画シーケンスの最初のビデオシーケンス及び最後のビデオシーケンスを識別するための識別情報を書き込む識別情報書き込み手段を有する請求項１記載の画像信号処理装置。
【請求項４】
画像信号が符号化されたＭＰＥＧ２規格のビットストリームについて少なくとも復号処理を行う画像信号処理方法であって、
上記ビットストリームにおける解像度の変更可能な最小単位であるＭＰＥＧ２規格のビットストリームを構成するビデオシーケンス内に設けられた上記ビデオシーケンスごとに定義可能なユーザデータエリアから当該ビデオシーケンスのディスプレイサイズ変換比及び複数の上記ビデオシーケンス間の関係を示す識別情報を読み出す識別情報読み出し工程と、
上記識別情報の上記ディスプレイサイズ変換比に応じて上記ビデオシーケンスに対応する画像信号のデコードの際の解像度を切り換える制御工程とを有し、
上記識別情報は、上記ビデオシーケンスを複数集めて構成される動画シーケンスの最初のビデオシーケンス及び最後のビデオシーケンスを識別するための情報を含み、これらの情報を上記識別情報読み出し工程により読み出して上記動画シーケンスの最初のビデオシーケンス及び最後のビデオシーケンスを識別する画像信号処理方法。
【請求項５】
上記ビットストリームは、画像内符号化画像と、表示順序で順方向の他の画像から予測される順方向予測符号化画像と、表示順序で順方向及び逆方向の他の画像から予測される双方向符号化画像とからなる画像群を単位とする請求項４記載の画像信号処理方法。
【請求項６】
上記ビットストリーム内に設けられたユーザデータエリアに上記ビデオシーケンスの解像度及び上記動画シーケンスの最初のビデオシーケンス及び最後のビデオシーケンスを識別するための識別情報を書き込む識別情報書き込み工程を有する請求項４記載の画像信号処理方法。
【請求項７】
画像信号を符号化したＭＰＥＧ２規格のビットストリームを記録する画像信号記録装置であって、
上記ビットストリームにおける解像度の変更可能な最小単位であるＭＰＥＧ２規格のビットストリームを構成するビデオシーケンス毎にエンコードの際の解像度を切換制御する制御手段と、
この制御手段により切り換えられた解像度に応じたディスプレイサイズ変換比及び複数の上記ビデオシーケンス間の関係を示す識別情報を上記ビデオシーケンス内に設けられた上記ビデオシーケンスごとに定義可能なユーザデータエリアに書き込む識別情報書き込み手段とを有し、
上記識別情報は、上記ビデオシーケンスを複数集めて構成される動画シーケンスの最初のビデオシーケンス及び最後のビデオシーケンスを識別するための情報を含み、上記識別情報書き込み手段により、上記動画シーケンスの最初のビデオシーケンスを識別するための情報を当該最初のビデオシーケンスの上記ユーザデータエリアに書き込み、上記動画シーケンスの最後のビデオシーケンスを識別するための情報を当該最後のビデオシーケンスの上記ユーザデータエリアに書き込む画像信号記録装置。
【請求項８】
上記ビットストリームは、画像内符号化画像と、表示順序で順方向の他の画像から予測される順方向予測符号化画像と、表示順序で順方向及び逆方向の他の画像から予測される双方向符号化画像とからなる画像群を単位とする請求項７記載の画像信号記録装置。
【請求項９】
画像信号を符号化したＭＰＥＧ２規格のビットストリームを記録する画像信号記録方法であって、
上記ビットストリームにおける解像度の変更可能な最小単位であるＭＰＥＧ２規格のビットストリームを構成するビデオシーケンス毎にエンコードの際の解像度を切換制御する制御工程と、
この制御手段により切り換えられた解像度に応じたディスプレイサイズ変換比及び複数の上記ビデオシーケンス間の関係を示す識別情報を上記ビデオシーケンス内に設けられた上記ビデオシーケンスごとに定義可能なユーザデータエリアに書き込む識別情報書き込み工程とを有し、
上記識別情報は、上記ビデオシーケンスを複数集めて構成される動画シーケンスの最初のビデオシーケンス及び最後のビデオシーケンスを識別するための情報を含み、上記識別情報書き込み工程により、上記動画シーケンスの最初のビデオシーケンスを識別するための情報を当該最初のビデオシーケンスの上記ユーザデータエリアに書き込み、上記動画シーケンスの最後のビデオシーケンスを識別するための情報を当該最後のビデオシーケンスの上記ユーザデータエリアに書き込む画像信号記録方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、解像度切り換えをシームレスに再生することを規定したＭＰＥＧ２（Moving Pictures Experts Group Phase2）規格のビットストリームシンタックス（bitstream syntax）の表現についての画像信号処理装置及び方法、並びに画像信号記録装置及び方法に関する。
【０００２】
【従来の技術】
ＭＰＥＧ２（Moving Pictures Experts Group Phase2）は放送やＡＶ機器などに用いられる符号化方式であり、画像／音声／データなどの情報圧縮技術として広く用いられるようになっている。
【０００３】
ＭＰＥＧ２では、入力される画像／音声／データなどのデータをビットレートに基づいて符号化を行う。画像では、画像をｍ×ｎのブロックに分割して、直交関数で変換して信号電力を集中させ、全体情報量を圧縮する。
【０００４】
ＭＰＥＧ２で符号化された画像データは、シーケンス層からブロック層までの階層構造をとる。
【０００５】
すなわち、ＭＰＥＧ２の画像データは、一連の同じ属性をもつ画面グループのシーケンス層、ランダムアクセスの単位となる画面グループの最小単位のＧＯＰ（Group of Pictures ）層、１枚の画面に共通な属性のピクチャ層、１枚の画面を任意に分割した小画面に共通の情報のスライス層、スライス層をさらに分割した画素ブロック（マクロブロック）に共通の情報のマクロブロック層、及び変換係数そのもののブロック層から構成される。
【０００６】
これらの内で、ピクチャー層は、例えば、ＮＴＳＣ方式のテレビジョン信号ではメイン・レベル・フォーマットに従って７０４（Ｈ）×４８０（Ｖ）画素の画面をその対象とする。
【０００７】
各画面（ピクチャー）には、画面内符号化画面であるＩ（Intra ）ピクチャー、表示順序に順方向の順方向に予測符号化される順方向予測符号化画面Ｐ（Predictive）ピクチャー，表示順序に順方向及び逆方向の双方向に予想符号化される双方向符号化画像であるＢ（Bidirectionally predictive）ピクチャーのピクチャータイプがあり、これら複数のピクチャーをまとめてＧＯＰ（Group of Pictures）層を形成している。
【０００８】
【発明が解決しようとする課題】
ところで、従来のＭＰＥＧ２における動画処理、例えば、解像度切り換えは、Ｂ，Ｂ，Ｉ，Ｂ，Ｂ，Ｐピクチャー・・からなる解像度切換可能な最小単位であるビデオシーケンス（video sequence）単位で行うようになっている。
【０００９】
したがって、一つの映像ソースである動画シーケンスは、解像度を切り換える単位であるビデオシーケンスそのものであった。このため、動画シーケンスの途中ではエンコードサイズ、すなわち解像度を切り換えるような制御ができなかった。
【００１０】
このため、例えば、静止画、動き度が多い動画などに応じて解像度を切り換えることができずに符号化の圧縮効率を悪化させていた。
【００１１】
本発明は、上述の実情に鑑みてなされるものであって、静止画、動きが多い動画などに応じて画像信号の解像度切り換えを行うような画像信号処理装置及び方法、並びに画像信号記録装置及び方法を提供することを目的とする。
【００１２】
【課題を解決するための手段】
上述の課題を解決するために、本発明に係る画像信号処理装置は、画像信号が符号化されたＭＰＥＧ２規格のビットストリームについて少なくとも復号処理を行う画像信号処理装置であって、上記ビットストリームにおける解像度の変更可能な最小単位であるＭＰＥＧ２規格のビットストリームを構成するビデオシーケンス内に設けられた上記ビデオシーケンスごとに定義可能なユーザデータエリアから当該ビデオシーケンスのディスプレイサイズ変換比及び複数の上記ビデオシーケンス間の関係を示す識別情報を読み出す識別情報読み出し手段と、上記識別情報の上記ディスプレイサイズ変換比に応じて上記ビデオシーケンスに対応する画像信号のデコードの際の解像度を切り換える制御手段とを有し、上記識別情報は、上記ビデオシーケンスを複数集めて構成される動画シーケンスの最初のビデオシーケンス及び最後のビデオシーケンスを識別するための情報を含み、これらの情報を上記識別情報読み出し手段により読み出して上記動画シーケンスの最初のビデオシーケンス及び最後のビデオシーケンスを識別するものである。
【００１３】
本発明に係る画像信号処理方法は、画像信号が符号化されたＭＰＥＧ２規格のビットストリームについて少なくとも復号処理を行う画像信号処理方法であって、上記ビットストリームにおける解像度の変更可能な最小単位であるＭＰＥＧ２規格のビットストリームを構成するビデオシーケンス内に設けられた上記ビデオシーケンスごとに定義可能なユーザデータエリアから当該ビデオシーケンスのディスプレイサイズ変換比及び複数の上記ビデオシーケンス間の関係を示す識別情報を読み出す識別情報読み出し工程と、上記識別情報の上記ディスプレイサイズ変換比に応じて上記ビデオシーケンスに対応する画像信号のデコードの際の解像度を切り換える制御工程とを有し、上記識別情報は、上記ビデオシーケンスを複数集めて構成される動画シーケンスの最初のビデオシーケンス及び最後のビデオシーケンスを識別するための情報を含み、これらの情報を上記識別情報読み出し工程により読み出して上記動画シーケンスの最初のビデオシーケンス及び最後のビデオシーケンスを識別するものである。
【００１４】
本発明に係る画像信号記録装置は、画像信号を符号化したＭＰＥＧ２規格のビットストリームを記録する画像信号記録装置であって、上記ビットストリームにおける解像度の変更可能な最小単位であるＭＰＥＧ２規格のビットストリームを構成するビデオシーケンス毎にエンコードの際の解像度を切換制御する制御手段と、この制御手段により切り換えられた解像度に応じたディスプレイサイズ変換比及び複数の上記ビデオシーケンス間の関係を示す識別情報を上記ビデオシーケンス内に設けられた上記ビデオシーケンスごとに定義可能なユーザデータエリアに書き込む識別情報書き込み手段とを有し、上記識別情報は、上記ビデオシーケンスを複数集めて構成される動画シーケンスの最初のビデオシーケンス及び最後のビデオシーケンスを識別するための情報を含み、上記識別情報書き込み手段により、上記動画シーケンスの最初のビデオシーケンスを識別するための情報を当該最初のビデオシーケンスの上記ユーザデータエリアに書き込み、上記動画シーケンスの最後のビデオシーケンスを識別するための情報を当該最後のビデオシーケンスの上記ユーザデータエリアに書き込むものである。
【００１５】
本発明に係る画像信号記録方法は、画像信号を符号化したＭＰＥＧ２規格のビットストリームを記録する画像信号記録方法であって、上記ビットストリームにおける解像度の変更可能な最小単位であるＭＰＥＧ２規格のビットストリームを構成するビデオシーケンス毎にエンコードの際の解像度を切換制御する制御工程と、この制御手段により切り換えられた解像度に応じたディスプレイサイズ変換比及び複数の上記ビデオシーケンス間の関係を示す識別情報を上記ビデオシーケンス内に設けられた上記ビデオシーケンスごとに定義可能なユーザデータエリアに書き込む識別情報書き込み工程とを有し、上記識別情報は、上記ビデオシーケンスを複数集めて構成される動画シーケンスの最初のビデオシーケンス及び最後のビデオシーケンスを識別するための情報を含み、上記識別情報書き込み工程により、上記動画シーケンスの最初のビデオシーケンスを識別するための情報を当該最初のビデオシーケンスの上記ユーザデータエリアに書き込み、上記動画シーケンスの最後のビデオシーケンスを識別するための情報を当該最後のビデオシーケンスの上記ユーザデータエリアに書き込むものである。
【００１７】
【発明の実施の形態】
以下、本発明の実施の形態について、図面を参照して詳細に説明する。
【００１８】
第１の実施の形態として、光ディスクに対してデータを記録／再生する記録／再生装置について説明する。この記録／再生装置は、ＭＰＥＧ２規格のビットストリームの固有情報領域に識別情報を記録するものである。
【００１９】
記録／再生装置は、図１に示すように、入力されるビデオ信号に対して所定のフィルタ処理をおこなうプリフィルタ部１９と、プリフィルタ部１９からの信号をＭＰＥＧ２のビットストリームに変換するＭＰＥＧ２符号器２０と、入力されるオーディオ信号にいわゆるＡＴＲＡＣ（Adaptive TRansform Acoustic Coding）等の音声適応変換符号化を施すいわゆる音声適応変換符号器１８と、ＭＰＥＧ２符号器２０及び符号器１８にてそれぞれ符号化されたビットストリームを多重化するＭＵＸ（Multiplexer ）１６とを有している。
【００２０】
ビデオ信号の流れとしては、プリフィルタ部１９では解像度に応じてフィルタ特性を事前に換えてビデオ信号にフィルタ処理を施す。プリフィルタ部１９からの信号は、ＭＰＥＧ２符号器１８に入り、エンコードされる。
【００２１】
オーディオ信号の流れとしては、音声適応変換符号器１８でビット圧縮処理される。
【００２２】
そして、ＭＰＥＧ２符号器２０で符号化されたビデオ信号及び音声適応変換符号器１８にて符号化されたオーディオ信号は、ＭＵＸ１６にて多重化される。
【００２３】
また、記録／再生装置は、エラー訂正のためのいわゆるＥＣＣ（Error Correction Code ）のエンコード又はデコードを行うＥＣＣエンコード／デコード部１５と、ＥＣＣエンコード／デコード部１５の制御の下にデータを記憶するメモリ１４と、データに対する変調／復調をおこなうデータ変復調部１３と、光ディスク１０１に変調した磁界を印加するための磁界変調ドライバ１１と、光ディスク１０１に対するレーザ光の照射／受光を行う光ピックアップ１２とを有している。
【００２４】
ＥＣＣエンコード／デコード部１５では、エラー訂正のためのいわゆるＥＣＣと同期パターンが付加される。データ変復調部１３では、メモリ１４に格納されているデータを逐次読み出し、所定の変調を施した後、磁界変調ドライバ１１に供給する。
【００２５】
磁界変調ドライバ１１は、供給されたデータに応じて、磁界用のコイルを駆動して光ディスク１０１の磁気領域に磁界を印加する。光ピックアップ１２は、記録用のレーザビームまたは再生用のレーザビームを光ディスク１０１に照射するとともに、光ディスク１０１から反射された再生用のレーザビームを電気信号に光電変換し、再生ＲＦ信号として出力する。
【００２６】
データ変復調部１３では、再生ＲＦ信号に対して所定の復調処理を施し、データをメモリ１４に格納する。ＥＣＣエンコード／デコード部１５では、データに対するエラー訂正処理を実行する。
【００２７】
さらに、記録／再生装置は、多重化分離をおこなうＤＭＵＸ（Demultiplexer ）２１と、ＤＭＵＸ２１からのオーディオデータをいわゆる音声適応変換により復号する音声適応変換復号部２２と、ＤＭＵＸ２１からのビデオデータをＭＰＥＧ２に従って復号するＭＰＥＧ２復号器２３と、ＭＰＥＧ２復号器２３からの信号に所定のフィルタ処理を施すポストフィルタ部２４とを有している。
【００２８】
ＥＣＣエンコード／デコード部１５から出力されたデータはＤＭＵＸ２０でビデオデータ及びオーディオデータに分離される。そして、オーディオデータは音声適応変換復号器２２、ビデオデータはＭＰＥＧ２復号器２３及びポストフィルタ２４によって処理されて各々出力される。
【００２９】
そして、記録／再生装置は、この動画像圧縮伸長装置の各部を制御する制御部１７を有している。この制御部は、例えば、ＣＰＵ，ＲＯＭ，ＲＡＭ等からなるいわゆるマイコンとして構成される。
【００３０】
制御部１７では、ＭＰＥＧ２符号器２０の動き量を検出し、動き量に対応した解像度を決定して解像度データを作成し、ユーザデータに付加してＭＰＥＧ２符号器２０に出力する。それとともに、解像度に応じてプリフィルタ部１９を制御する。例えば、静止に近い動画では解像度を７０４×４８０そのままとし、動き量が多い動画では３５２×４８０とし、動き量が少ない動画では中間の５２８×４８０などと制御する。再生時は、制御部１７がＭＰＥＧ２復号器２３にユーザデータを取りに行って、解像度に応じてポストフィルタ部２４を取り換える。
【００３１】
ＭＰＥＧ２規格のビットストリームでは、ビデオシーケンス（video sequence）は、シーケンスヘッダ（sequence header ）にて始まり、シーケンスエンド（sequance end）にて終了するように規定されている。そして、このビデオシーケンスの中でエンコードするサイズが一意的に決定される記録単位である。
【００３２】
すなわち、ＭＰＥＧ２には、図２に示すように、スタート−エンド（start-end ）で一つの動画を表すビデオシーケンスという単位があり、この中では解像度をかえることはできない。
【００３３】
このような処理を連続して行うには、上述したように、ＭＰＥＧ２ではスタート−エンド間では解像度を自由に変更することはできない。このため、これらのビデオシーケンスをいくつか集めて、動画シーケンスと新たに定義をする。
【００３４】
すなわち、動画シーケンスは、解像度が一意的に決定されているビデオシーケンスを集めた集合体として定義される。
【００３５】
この動画シーケンスにおいては、例えば、ビデオシーケンス１ではある解像度でエンコードし、ビデオシーケンス２では水平方向の解像度を半分としてエンコードするように、エンコードサイズ（解像度）が異なったビデオシーケンスが混在し得る。
【００３６】
例えば、静止画に近い動画像に対して７０４×４８０画素の解像度を採用したとすると、静止画に近い動画像であるビデオシーケンス１及びビデオシーケンス３に対しては７０４×４８０画素の解像度と、動きが激しい動画像であるビデオシーケンス２に対しては７０４×４８０画素の解像度の半分の３５２×４８０画素の解像度とする。
【００３７】
この場合、従来のＭＰＥＧ２と同様に、ビデオシーケンスごとに動画シーケンスの始まりと解釈してしまうと、ビデオシーケンスの集合体と定義された動画シーケンスの始まりと終わりとが判定できなくなってしまう。
【００３８】
この第１の実施の形態においては、図３に示すように、ビデオシーケンスの始まりと終わりを特定するため、また、解像度を特定するために、ビデオシーケンスにおけるシーケンスヘッダ（sequence_header ）のユーザデータ（user_data ）を利用する。
【００３９】
すなわち、動画シーケンスは、記録／再生装置によりディスク上の連続する位置に記録される。そして、このように連続して記録される動画シーケンスの始点及び終点を明確にするために、動画シーケンスを構成する最初のビデオシーケンス及び最後のビデオシーケンスを識別するためのＩＤを定義する。これらのＩＤは、エンコード処理時に設定される。
【００４０】
動画シーケンスのデコード処理時には、動画シーケンスを構成する最初のビデオシーケンス及び最後のビデオシーケンスを識別するＩＤにより、ディスク上における動画シーケンスの始点及び終点が明らかにされる。
【００４１】
これらの動画シーケンスにおけるビデオシーケンスの位置を示すＩＤは、具体的には、ビデオシーケンスごとに定義可能なユーザデータエリアの１バイト（byte）をが用いられる。
【００４２】
すなわち、ユーザデータのバイト１（byte 1）において、図４に示すように、第７ビットｂ７をスタートＩＤ（start ID）、第６ビットｂ６をエンドＩＤ（end ID）、第５ビットｂ５及び第４ビットｂ４をディスプレイサイズ変換比（conversion ratio of display size）とする。なお、図中の“ｂ”は、２進（binary）表記であることを示している。
【００４３】
そして、スタートＩＤとして“１”ならば、動画シーケンスの最初のビデオシーケンスであると定義し、エンドＩＤとして“１”ならば、動画シーケンスの最後のビデオシーケンスであると定義する。
【００４４】
さらに、ディスプレイサイズ変換比として水平方向及び垂直方向の変換比を定義する。例えば、ディスプレイ変換比が“００”（１：１）は７０４×４８０そのままとし、“０１”（３：４）は、エンコードするときに３／４倍することでサイズを５２８×４８０とする。“１０”（１：２）は、１／２倍することで３５２×４８０となる。
【００４５】
デコードするときは逆変換して元の７０４×４８０に戻す。この規定は、元々何もしないで３５２×４８０でエンコードするものと区別するために設けたものである。
【００４６】
これらをフォーマットとして規定することにより、ビデオシーケンスが動画シーケンスに対してどういうシーケンスであるのかを判断するとともに、デコードの際の判断材料とする。
【００４７】
続いて、動画シーケンスのディスク状の記録媒体であるディスクメディアにおける記録を、図５に示す概念図を用いて説明する。
【００４８】
ディスクメディア１０１にはビデオシーケンスＶＳ１，ＶＳ２，ＶＳ３がビデオシーケンスごとに先頭から書かれている状態を示している。
【００４９】
最初のビデオシーケンスＶＳ１のユーザデータはスタートＩＤが“１”であり、エンドＩＤが“０”となっている。次のビデオシーケンスＶＳ２のユーザデータはスタートＩＤが“０”であり、エンドＩＤが“０”となっている。最後のビデオシーケンスＶＳ４のユーザデータはスタートＩＤが“０”であり、エンドＩＤが“１”となっている。
【００５０】
これによって、ビデオシーケンスＶＳ１が動画シーケンスの内の最初のビデオビデオシーケンスであり、ビデオシーケンスＶＳ３が動画シーケンスの内の最後のビデオシーケンスであることがわかる。
【００５１】
次に、本発明の第２の実施の形態として、光ディスクに対して画像データの記録／再生を行う記録／再生装置について説明する。この第２の実施の形態における記録／再生装置は、管理ファイルに識別情報を記録するものである。
【００５２】
動画像圧縮伸長装置は、図６に示すように、入力されるビデオ信号に対して所定のフィルタ処理をおこなうプリフィルタ部１９と、プリフィルタ部１９からの信号をＭＰＥＧ２のビットストリームに変換するＭＰＥＧ２符号器２０と、入力されるオーディオ信号に音声適応符号化を施すいわゆる音声適応変換符号器１８と、ＭＰＥＧ２符号器２０及び音声適応変換符号器１８にてそれぞれ符号化されたビットストリームを多重化するＭＵＸ（Multiplexer ）１６とを有している。
【００５３】
また、動画像圧縮信号装置は、エラー訂正のためのいわゆるＥＣＣ（Error Correction Code ）のエンコード又はデコードを行うＥＣＣエンコード／デコード部１５と、ＥＣＣエンコード／デコード部１５の制御の下にデータを記憶するメモリ１４と、データに対する変調／復調をおこなうデータ変復調部１３と、光ディスク１０１に変調した磁界を印加するための磁界変調ドライバ１１と、光ディスク１０１に対するレーザ光の照射／受光を行う光ピックアップ１２とを有している。
【００５４】
さらに、動画像圧縮伸長装置は、多重化分離をおこなうＤＭＵＸ（Demultiplexer ）２０と、ＤＭＵＸ２０からのオーディオデータをいわゆる音声適応変換復号部２２と、ＤＭＵＸ２０からのビデオデータをＭＰＥＧ２に従って復号するＭＰＥＧ２復号器２３と、ＭＰＥＧ２復号器２３からの信号に所定のフィルタ処理を施すポストフィルタ部２４とを有している。
【００５５】
そして、動画像圧縮伸長装置は、この動画像圧縮伸長装置の各部を制御する制御部１７を有している。この制御部は、例えば、ＣＰＵ，ＲＯＭ，ＲＡＭ等からなるいわゆるマイコンとして構成される。
【００５６】
第２の実施の形態の記録／再生装置の特徴部分の説明をするならば、制御部１７は、ＭＵＸ１６による多重化の際に、上述したビデオシーケンスの位置を示す管理ファイルをマルチプレクス（多重化）して書き込む。
【００５７】
再生時は、制御部１７で管理ファイルを読み出してから、ビデオシーケンス毎の解像度に応じてポストフィルタ部２４を書き換える。他の部分の回路動作については、上述の第１の実施の形態と同様であるため、説明を省略する。
【００５８】
この第２の実施の形態においては、動画シーケンスをディスクメディアに記録するときには、ディスクメディアにどのように記録したかを示す履歴ファイル又は管理ファイルを常に作成して、この管理ファイルによって規定する。
【００５９】
例えば、この第２の実施の形態の記録／再生装置では、ディスクメディア上に予め全てのアドレスが記録されているとした上で、動画シーケンスは、ディスクメディア上の予め決められた場所、すなわちアドレスに順次記録されていくものとする。このように、アドレスによりディスクメディア上の全ての位置が特定される。
【００６０】
図７に示すように、記録時の最初のビデオシーケンスＶＳ１がディスクメディア１０１のｎ番のアドレスに記録され、次のビデオシーケンスＶＳ２がｍ番のアドレスの位置に記録され、最後のビデオシーケンスＶＳ４がｐ番のアドレスの位置に記録されていく。
【００６１】
実際の管理ファイルには、記録を始めてから最初のビデオシーケンスＶＳ１はｎ番のアドレスにあり、２番目のビデオシーケンスＶＳ２はｍ番目にあるという内容を記述したファイルをディスクのエリアに書き込みにいく。そして、動画シーケンスの中のビデオシーケンスが、ディスク上のどのアドレスに記録されたかを、管理ファイルとして動画シーケンスのデータとは、別の場所に記録する。
【００６２】
動画シーケンスの記録が終了した後、この管理ファイルを見ると、動画シーケンスの中のビデオシーケンスが、各々どのアドレスに記録されたかが、全てわかるようになっている。すなわち、このファイルを利用することで、動画シーケンスの中で、ビデオシーケンスの始まりと終わりが分かるようになる。
【００６３】
この第２の実施の形態は、管理ファイルを、異なる解像度のビデオシーケンスを組み合わせて動画シーケンスとする場合に用いられる。
【００６４】
次に、記録／再生方法の一連の工程について、図８に示すフローチャートを参照して説明する。
【００６５】
最初のステップＳ１１においてはビデオシーケンスにシーケンスヘッダを付加し、次のステップＳ１２においてはＭＰＥＧ２符号器から動き量を検出する。
【００６６】
これに続くステップＳ１３においては、ステップＳ１２にてＭＰＥＧ２符号器にて検出された動き量に基づいて、画素数を増すか否かが判断される。そして、画素数を増すときには“ＹＥＳ”としてステップ６に進み、画素数を増さないときには“ＮＯ”としてステップ１４に進む。
【００６７】
ステップＳ１４及びステップＳ１６においては、解像度の決定をする。すなわち、ステップＳ１４においては、解像度を３５２×４８０として、ステップＳ１５に進む。一方、ステップＳ１６においては、解像度を７０４×４８０としてステップＳ１７に進む。
【００６８】
ステップＳ１５においては、ステップＳ１４において決定した解像度が現在の解像度と同じであるか判断する。そして、ステップＳ１４で決定した解像度が現在の解像度と同じときには“ＹＥＳ”としてステップＳ１２に戻り、そうでないときには“ＮＯ”としてステップＳ１８に進む。
【００６９】
ステップＳ１７においては、ステップＳ１６において決定した解像度が現在の解像度と同じであるか判断する。そして、ステップＳ１６で決定した解像度が現在の解像度と同じときには“ＹＥＳ”としてステップＳ１２に戻り、そうでないときには“ＮＯ”としてステップＳ１８に進む。
【００７０】
ステップＳ１８においては、ビデオシーケンスにシーケンスエンドを付加し、ステップＳ１９に進む。ステップＳ１９においては、ユーザデータを作成して所定の部分に書き込む。このステップＳ１９を終えると、ステップＳ１１に戻る。
【００７１】
次に、記録媒体について説明する。この記録媒体は、上述したような、ＭＰＥＧ２規格により符号化された画像信号が記録されてなるものである。
【００７２】
上述したように、ＭＰＥＧ２規格のビットストリームにおいては、解像度が切換可能な最小単位はビデオシーケンスである。この記録媒体には、ビットストリームの固有情報であるユーザデータに、複数のビデオシーケンスの解像度の関係についての識別情報が記録されている。
【００７３】
なお、このような記録媒体は、例えばいわゆるＣＤ−ＲＯＭとして提供される。
【００７４】
上述のように、本発明は、一つの動画シーケンスの中で、エンコードサイズの異なるエンコード処理を行うことにより、画質改善を図るものである。本発明は、動画シーケンスの中で、異なる解像度をＭＰＥＧ２のビデオシーケンスとして扱い、また、動画シーケンスをいわゆるＤＶＤ，いわゆるＭＤ等のディスクメディアの記録／再生に適応するものである。
【００７５】
なお、上述の実施の形態においては、記録媒体としてディスクメディアについて例示したが、本発明はディスクメディアに限定されない。本発明は、例えば、いわゆるＤＡＴのようなテープ状の記録媒体に対しても適用することができる。
【００７６】
【発明の効果】
以上説明したように、本発明は、従来のＭＰＥＧ２手法ではなかった動画シーケンスの概念を取り入れ、動画シーケンス＝ビデオシーケンスの集まりとして規定する。そのためには、ビデオシーケンスの開始と終了を明確にしている。そして、動画シーケンスの中での解像度切り換えを自由に行うことができるようにして、圧縮効率の向上を図る。つまり、通常のＭＰＥＧ２のエンコードでは、エンコードしてから終わるまで、同じサイズで行っていたのを、適宜、切り換えるようにして画質改善を図るものである。
【図面の簡単な説明】
【図１】第１の実施の形態の記録／再生装置の概略的な構成を示すブロック図である。
【図２】動画シーケンスを説明する図である。
【図３】ビデオシーケンスを示す図である。
【図４】ユーザデータの構造を示すデータ構造図である。
【図５】第１の実施の形態におけるディスクメディアへの動画シーケンスの記録を説明する図である。
【図６】第２の実施の形態の記録／再生装置の概略的な構成を示すブロック図である。
【図７】第２の実施の形態におけるディスクメディアへの動画シーケンスの記録を説明する図である。
【図８】記録／再生方法の一連の工程を示すフローチャートである。
【符号の説明】
１６  ＭＵＸ、２０  ＭＰＥＧ２符号器、１９  プリフィルタ部、２１  ＤＭＵＸ、２３  音声適応変換復号器、２４  ポストフィルタ部
【図１】
0004366725.tif 000002
【図２】
0004366725.tif 000003
【図３】
0004366725.tif 000004
【図４】
0004366725.tif 000005
【図５】
0004366725.tif 000006
【図６】
0004366725.tif 000007
【図７】
0004366725.tif 000008
【図８】
0004366725.tif 000009