(57)【特許請求の範囲】
【請求項１】
画像処理方法であって、
現在の再構成されるべき画像ブロックの量子化パラメータ予測差と、前記現在の再構成されるべき画像ブロックの量子化係数と、前記現在の再構成されるべき画像ブロックの符号化スキームと、前記現在の再構成されるべき画像ブロックの予測信号とを取得するように符号ストリームをパースすることであり、前記符号化スキームは、原解像度符号化スキーム又はダウンサンプリング符号化スキームである、前記符号ストリームをパースすることと、
前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定することであり、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが、前記現在の再構成されるべき画像ブロックと同じ現在の画像エリアに属している、少なくとも１つの前に再構成された画像ブロックの符号化スキームと同じである場合に、前記前に再構成された画像ブロックが１つの再構成された画像ブロックであるならば、該１つの再構成された画像ブロックの量子化パラメータを前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として決定し、前記前に再構成された画像ブロックが複数の再構成された画像ブロックであるならば、該複数の再構成された画像ブロックの量子化パラメータの平均を前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として決定し、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記少なくとも１つの前に再構成された画像ブロックのうちのいずれかの再構成された画像ブロックが前記符号化スキームとは異なる場合に、前記原解像度符号化スキームでの前記現在の画像エリアの量子化パラメータであって前記符号ストリームをパースすることによって取得される第１量子化パラメータから、前記ダウンサンプリング符号化スキームでの前記現在の画像エリアの量子化パラメータであって前記符号ストリームをパースすることによって取得される第２量子化パラメータを減じて量子化残差を取得し、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームであり、前記いずれかの再構成された画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームであるとき、前記いずれかの再構成された画像ブロックの量子化パラメータと前記量子化残差との和を計算し、前記前に再構成された画像ブロックが１つの再構成された画像ブロックであるならば、前記和を前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として決定し、前記前に再構成された画像ブロックが複数の再構成された画像ブロックであるならば、前記和に基づいて決定された前記複数の再構成された画像ブロックの量子化パラメータの平均を前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として決定するか、あるいは、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームであり、前記いずれかの再構成された画像ブロックの前記符号化スキームが前記原解像度符号化スキームであるとき、前記いずれかの再構成された画像ブロックの量子化パラメータと前記量子化残差との差を計算し、前記前に再構成された画像ブロックが１つの再構成された画像ブロックであるならば、前記差を前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として決定し、前記前に再構成された画像ブロックが複数の再構成された画像ブロックであるならば、前記差に基づいて決定された前記複数の再構成された画像ブロックの量子化パラメータの平均を前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として決定する、ことと、
前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子及び前記量子化パラメータ予測差に基づき前記現在の再構成されるべき画像ブロックの量子化パラメータを決定することと、
現在の再構成された画像ブロックを取得するように前記現在の再構成されるべき画像ブロックの前記量子化パラメータ、前記量子化係数、及び前記予測信号に基づき前記現在の再構成されるべき画像ブロックを再構成することと
を有する方法。
【請求項２】
Ｍが１以上の正の整数であるとして、前記少なくとも１つの前に再構成された画像ブロックは、前もって設定された規則に従って選択された、前記現在の画像エリア内のＭ個の再構成された画像ブロックを有し、
前記方法は、前記Ｍ個の再構成された画像ブロックの量子化パラメータ及び前記Ｍ個の再構成された画像ブロックの符号化スキームを取得することを更に有する、
請求項１に記載の方法。
【請求項３】
前記Ｍが１に等しい場合に、前記Ｍ個の再構成された画像ブロックは、復号化シーケンスにおける前記現在の再構成されるべき画像ブロックの前の再構成された画像ブロックである、
請求項２に記載の方法。
【請求項４】
前記Ｍが１よりも大きい正の整数である場合に、前記Ｍ個の再構成された画像ブロックは、前記現在の再構成されるべき画像ブロックの上側の再構成された画像ブロック及び左側の再構成された画像ブロックを有する、
請求項２に記載の方法。
【請求項５】
前記Ｍ個の再構成された画像ブロックは、１つの再構成された画像ブロックであり、
前記Ｍ個の再構成された画像ブロックの量子化パラメータ及び前記Ｍ個の再構成された画像ブロックの符号化スキームを取得することは、
前記現在の再構成されるべき画像ブロックと同じ符号化スキームを有している再構成された画像ブロックを、前もって設定された範囲内にある再構成された画像ブロックから探すことと、
前記１つの再構成された画像ブロックの量子化パラメータを取得することと
を有する、
請求項２に記載の方法。
【請求項６】
前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定することは、
前記現在の再構成されるべき画像ブロックが前記現在の画像エリア内の最初の画像ブロックであって、前記少なくとも１つの前に再構成された画像ブロックが存在しない場合に、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームであるとき、前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として前記第１量子化パラメータを、又は前記第１量子化パラメータから前記量子化パラメータ予測差を減じることによって取得される補正された第１量子化パラメータ使用し、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームであるとき、前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として前記第２量子化パラメータを、又は前記第２量子化パラメータから前記量子化パラメータ予測差を減じることによって取得される補正された第２量子化パラメータを使用すること
を更に有する、
請求項１に記載の方法。
【請求項７】
画像処理デバイスであって、
現在の再構成されるべき画像ブロックの量子化パラメータ予測差と、前記現在の再構成されるべき画像ブロックの量子化係数と、前記現在の再構成されるべき画像ブロックの符号化スキームと、前記現在の再構成されるべき画像ブロックの予測信号とを取得するように符号ストリームをパースするよう構成されるパージングモジュールであり、前記符号化スキームは、原解像度符号化スキーム又はダウンサンプリング符号化スキームである、前記パージングモジュールと、
前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定するよう構成される第１決定モジュールであり、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが、前記現在の再構成されるべき画像ブロックと同じ現在の画像エリアに属している、少なくとも１つの前に再構成された画像ブロックの符号化スキームと同じである場合に、前記前に再構成された画像ブロックが１つの再構成された画像ブロックであるならば、該１つの再構成された画像ブロックの量子化パラメータを前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として決定し、前記前に再構成された画像ブロックが複数の再構成された画像ブロックであるならば、該複数の再構成された画像ブロックの量子化パラメータの平均を前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として決定し、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記少なくとも１つの前に再構成された画像ブロックのうちのいずれかの再構成された画像ブロックが前記符号化スキームとは異なる場合に、前記原解像度符号化スキームでの前記現在の画像エリアの量子化パラメータであって前記符号ストリームをパースすることによって取得される第１量子化パラメータから、前記ダウンサンプリング符号化スキームでの前記現在の画像エリアの量子化パラメータであって前記符号ストリームをパースすることによって取得される第２量子化パラメータを減じて量子化残差を取得し、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームであり、前記いずれかの再構成された画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームであるとき、前記いずれかの再構成された画像ブロックの量子化パラメータと前記量子化残差との和を計算し、前記前に再構成された画像ブロックが１つの再構成された画像ブロックであるならば、前記和を前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として決定し、前記前に再構成された画像ブロックが複数の再構成された画像ブロックであるならば、前記和に基づいて決定された前記複数の再構成された画像ブロックの量子化パラメータの平均を前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として決定するか、あるいは、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームであり、前記いずれかの再構成された画像ブロックの前記符号化スキームが前記原解像度符号化スキームであるとき、前記いずれかの再構成された画像ブロックの量子化パラメータと前記量子化残差との差を計算し、前記前に再構成された画像ブロックが１つの再構成された画像ブロックであるならば、前記差を前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として決定し、前記前に再構成された画像ブロックが複数の再構成された画像ブロックであるならば、前記差に基づいて決定された前記複数の再構成された画像ブロックの量子化パラメータの平均を前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として決定する、前記第１決定モジュールと、
前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子及び前記量子化パラメータ予測差に基づき前記現在の再構成されるべき画像ブロックの量子化パラメータを決定するよう構成される第２決定モジュールと、
現在の再構成された画像ブロックを取得するように前記現在の再構成されるべき画像ブロックの前記量子化パラメータ、前記量子化係数、及び前記予測信号に基づき前記現在の再構成されるべき画像ブロックを再構成するよう構成される再構成モジュールと
を有するデバイス。
【請求項８】
Ｍが１以上の正の整数であるとして、前記少なくとも１つの前に構成された画像ブロックは、前もって設定された規則に従って選択された、前記現在の画像エリア内のＭ個の再構成された画像ブロックを有し、
前記第１決定モジュールは、前記Ｍ個の再構成された画像ブロックの量子化パラメータ及び前記Ｍ個の再構成された画像ブロックの符号化スキームを取得するよう更に構成される、
請求項７に記載のデバイス。
【請求項９】
前記Ｍが１に等しい場合に、前記Ｍ個の再構成された画像ブロックは、復号化シーケンスにおける前記現在の再構成されるべき画像ブロックの前の再構成された画像ブロックである、
請求項８に記載のデバイス。
【請求項１０】
前記Ｍが１よりも大きい正の整数である場合に、前記Ｍ個の再構成された画像ブロックは、前記現在の再構成されるべき画像ブロックの上側の再構成された画像ブロック及び左側の再構成された画像ブロックを有する、
請求項８に記載のデバイス。
【請求項１１】
前記Ｍ個の再構成された画像ブロックは、１つの再構成された画像ブロックであり、
前記第１決定モジュールは、
前記現在の再構成されるべき画像ブロックと同じ符号化スキームを有している再構成された画像ブロックを、前もって設定された範囲内にある再構成された画像ブロックから探し、
前記１つの再構成された画像ブロックの量子化パラメータを取得する
よう特に構成される、
請求項８に記載のデバイス。
【請求項１２】
前記１つの再構成された画像ブロックは、復号化シーケンスにおいて、前記前もって設定された範囲内にある前記再構成された画像ブロックの中にあって、前記現在の再構成されるべき画像ブロックに最も近い再構成された画像ブロックである、
請求項１１に記載のデバイス。
【請求項１３】
前記第１決定モジュールは、
前記現在の再構成されるべき画像ブロックが前記現在の画像エリア内の最初の画像ブロックであって、前記少なくとも１つの前に再構成された画像ブロックが存在しない場合に、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームであるとき、前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として前記第１量子化パラメータを、又は前記第１量子化パラメータから前記量子化パラメータ予測差を減じることによって取得される補正された第１量子化パラメータを使用するし、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームであるとき、前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として前記第２量子化パラメータを、又は前記第2量子化パラメータから前記量子化パラメータ予測差を減じることによって取得される補正された第２量子化パラメータを使用する
よう更に構成される、
請求項７に記載のデバイス。
【発明の詳細な説明】
【技術分野】
【０００１】
本願は、「IMAGE  PROCESSING  METHOD,  DEVICE,  AND  SYSTEM」と題されて２０１７年７月２５日付けで中国特許庁に出願された中国特許出願第２０１７１０６１４１４１．６号の優先権を主張する。なお、この中国特許出願は、その全文を参照により本願に援用される。
【０００２】
本願は、画像処理技術に、特に、画像処理方法、デバイス、及びシステムに関係がある。
【背景技術】
【０００３】
デジタルビデオは、デジタル形式で記録された映像である。図１は、本願に従うデジタルビデオの概略図である。図１に示されるように、デジタルビデオは、デジタル画像の複数のフレームを含む。図２は、本願に従うデジタル画像の概略図である。図２に示されるように、画像は１２×１６のピクセルを含む。各ピクセルは１ピクセルと呼ばれ、１２×１６は画像解像度を表す。例えば、２Ｋビデオの画像解像度は、１９２０×１０８０であり、４Ｋビデオの画像解像度は、３８４０×２１６０である。元の映像は、通常はデータ量が比較的に多く、記憶及び伝送に適さない。そのため、高効率ビデオ圧縮符号化技術が、元データを圧縮するために使用される必要がある。
【０００４】
具体的に、図３は、本願に従って符号器側によって実行される符号化の概略図である。図３に示されるように、符号器側によって実行される符号化プロシージャは、ビデオを受け取った後に、符号器側が、ビデオを構成する画像の各フレームを複数の符号化されるべき画像ブロックに分けること、を含む。現在の符号化されるべき画像フロックについて、現在の符号化されるべき画像ブロックは、最初に、現在の符号化されるべき画像ブロックの予測信号を取得するように、参照再構成画像ブロック（参照再構成画像ブロックは、現在の符号化されるべき画像ブロックによって必要とされる参照ピクセルを提供するよう構成され、参照ピクセルは、現在の符号化されるべき画像ブロックを予測するために使用される。）を使用することによって予測される。予測信号は、残留信号を取得するように、現在の符号化されるべき画像ブロックの原信号から減じられる。予測後に、残留信号の大きさは、原信号のそれよりもはるかに小さい。変換操作（変換操作は任意の操作である。）及び量子化操作が残留信号に対して実行される。変換及び量子化後に量子化係数が得られ、次いで、量子化係数、及び符号化の間に使用される他の指示情報は、符号ストリームを取得するように、エントロピー符号化技術を使用することによって符号化される。更に、符号器側は、続く符号化されるべき画像ブロックを符号化するための参照ピクセルを提供するように、現在の符号化されるべき画像ブロックを再構成する必要がある。具体的に、現在の符号化されるべき画像ブロックの量子化係数を取得した後、符号器側は、現在の符号化されるべき画像ブロックの量子化係数に対して逆量子化及び逆変換を実行して、再構成された残留信号を取得し、再構成された残留信号と、現在の符号化されるべき画像ブロックに対応する予測信号とを加算して、現在の符号化されるべき画像ブロックの再構成信号を取得し、再構成信号に基づいて、再構成された画像ブロックを取得する必要がある。再構成された画像ブロックは、その後に符号化されるべき画像ブロックを予測するために使用され得る。任意に、残留信号が変換された後に変換係数が得られ、変換係数が量子化された後に情報損失が起こり、情報損失は不可逆である。すなわち、変換係数が逆量子化された後に歪みが現れ、その結果として、再構成信号は原信号と一貫性がない。かような圧縮方法は、不可逆圧縮である。そのため、不可逆圧縮の場合に、再構成された画像ブロックが得られた後、不可逆圧縮によって引き起こされるいくつかの歪み、例えば、ブロッキングアーティファクト及びリンギング効果を取り除くように、再構成された画像ブロックに対してフィルタリングが実行される必要がある。ブロッキングアーティファクトは、Ｈ．２６４又はＨ．２６５標準におけるＤＢＫフィルタを使用することによって取り除かれ得、リンギング効果は、Ｈ．２６５におけるＳＡＯフィルタ、次世代標準におけるＡＬＦフィルタ、などを使用することによって取り除かれ得る。可逆圧縮方法も存在する。具体的に言えば、変換係数を取得するように残留信号に対して可逆変換操作が実行され、変換係数に対して、量子化操作を実行せずに、エントロピー符号化が実行される。可逆圧縮の場合に、フィルタリング操作は、通常は実行されない。更に、現在の画像の全ての画像ブロックが再構成された後に、再構成された画像が取得され、そして、再構成された画像は、その後に画像の他のフレームを予測するために使用され得る。
【０００５】
図４は、本願に従って復号器側によって実行される復号化の概略図である。図４に示されるように、符号ストリームを取得した後、復号器側は、最初に、現在の再構成されるべき画像ブロックの量子化係数を取得するように、符号ストリームに対してエントロピー復号化を実行し、次いで、現在の再構成されるべき画像ブロックの再構成された残留信号を取得するように、量子化係数に対して逆量子化及び逆変換を実行する。現在の再構成されるべき画像ブロックは、現在の再構成されるべき画像ブロックの予測信号を取得するように、現在の再構成されるべき画像ブロックの参照再構成画像ブロックを使用することによって予測される。予測信号及び再構成された残留信号は、現在の再構成されるべき画像ブロックの再構成信号を取得するように加算される。再構成信号に基づいて、現在の再構成されるべき画像ブロックに対応する現在の再構成された画像ブロックが得られる。現在の再構成された画像ブロックは、その後に他の再構成されるべき画像ブロックを予測するために使用され得る。これは、符号器側での上記の場合と同様である。任意に、復号器側は、現在の再構成された画像ブロックに対してフィルタリングを実行する必要がある。更に、現在の画像の全ての画像ブロックが再構成された後に、再構成された画像が取得され、そして、再構成された画像は、その後に画像の他のフレームを予測するために使用され得る。
【０００６】
符号化及び復号化をより容易にするために、符号器側は、最初に、画像の各フレームに対してダウンサンプリング処理を実行する。図５は、本願に従って符号器側によって実行される符号化の概略図である。図５に示されるように、符号器側は、画像全体に対してダウンサンプリング処理を実行し、次いで、符号ストリームを取得するように、ダウンサンプリング処理後に得られた画像内の夫々の符号化されるべき画像ブロックを符号化する。夫々の符号化されるべき画像ブロックに対応する再構成された画像ブロックの解像度は、ダウンサンプリング解像度である。相応して、復号器側は符号ストリームをパースする。夫々の再構成されるべき画像ブロックの解像度はダウンサンプリング解像度であり、取得される再構成された画像ブロックの対応する解像度もダウンサンプリング解像度である。復号器側は、元の解像度の再構成された画像ブロックを取得するように、再構成された画像ブロックに対してアップサンプリング処理を実行する必要がある。
【０００７】
先行技術では、符号器側は、画像全体に対してダウンサンプリング処理を実行する。しかし、画像全体に含まれる全ての画像ブロックは、異なった特徴を有することがある。例えば、いくつかの画像ブロックは比較的に平坦であり得る。この場合に、符号器側は、それらの画像ブロックに対してダウンサンプリング処理を実行することができる。いくつかの画像ブロックは多数のディテールを有することがある。この場合に、これらのディテールは、ダウンサンプリング処理が実行されると失われる。その結果として、符号器側によって実行される符号化の効果は不十分であり、相応して、復号器側によって取得されるいくつかの再構成された画像ブロックは比較的に不鮮明である。すなわち、復号器側によって取得される再構成された画像ブロックの効果は不十分である。
【発明の概要】
【０００８】
本願は、復号器側によって取得される再構成された画像ブロックがより良い効果を有し、且つ、符号器側がより良い符号化効果を実装するように、画像処理方法、デバイス、及びシステムを提供する。
【０００９】
第１の態様によれば、本願は、原解像度符号化スキームでの現在の画像エリアの第１量子化パラメータと、ダウンサンプリング符号化スキームでの前記現在の画像エリアの第２量子化パラメータと、前記現在の画像エリア内の現在の再構成されるべき画像ブロックの符号化スキームと、前記現在の再構成されるべき画像ブロックの量子化係数と、前記現在の再構成されるべき画像ブロックの予測信号とを取得するように符号ストリームをパースすることであり、前記現在の再構成されるべき画像ブロックの前記符号化スキームは、前記原解像度符号化スキーム又は前記ダウンサンプリング符号化スキームであり、前記現在の再構成されるべき画像ブロックは、前記現在の画像エリアの部分である、前記符号ストリームをパースすることと、前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの量子化パラメータを決定することであり、前記現在の再構成されるべき画像ブロックの前記量子化パラメータは、前記第１量子化パラメータ又は前記第２量子化パラメータである、前記量子化パラメータを決定することと、現在の再構成された画像ブロックを取得するように前記現在の再構成されるべき画像ブロックの前記量子化パラメータ、前記量子化係数、及び前記予測信号に基づき前記現在の再構成されるべき画像ブロックを再構成することとを含む画像処理方法を提供する。
【００１０】
本願の有利な効果は、次の通りである：画像ブロックが各々の特徴を有していると考えると、符号器側は、異なるように画像ブロックを符号化する。これに基づき、復号器側は、現在の再構成されるべき画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータを決定してよい。すなわち、量子化パラメータは、現在の再構成されるべき画像ブロックを再構成するために適切である。従って、復号器側によって取得される再構成された画像ブロックは、より良い効果を有する。
【００１１】
任意に、前記符号ストリームは、前記第１量子化パラメータ及び前記第２量子化パラメータを含む。
【００１２】
代替的に、前記符号ストリームは、前記第１量子化パラメータと、前記現在の画像エリアの量子化パラメータ予測差とを含む。相応して、ダウンサンプリング符号化スキームでの現在の画像エリアの第２量子化パラメータを取得することは、前記第１量子化パラメータ及び前記量子化パラメータ予測差に基づき前記第２量子化パラメータを計算することを含む。
【００１３】
本願の有利な効果は、次の通りである：量子化パラメータ予測差は、第２量子化パラメータよりも短い。従って、この方法は、符号器側のビットオーバーヘッドを減らすことができる。
【００１４】
任意に、前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの量子化パラメータを決定することは、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームである場合に、前記現在の再構成されるべき画像ブロックの前記量子化パラメータとして前記第１量子化パラメータを使用すること、又は
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームである場合に、前記現在の再構成されるべき画像ブロックの前記量子化パラメータとして前記第２量子化パラメータを使用すること
を含む。
【００１５】
第２の態様によれば、本願は、現在の再構成されるべき画像ブロックの量子化パラメータ予測差と、前記現在の再構成されるべき画像ブロックの量子化係数と、前記現在の再構成されるべき画像ブロックの符号化スキームと、前記現在の再構成されるべき画像ブロックの予測信号とを取得するように符号ストリームをパースすることであり、前記符号化スキームは、原解像度符号化スキーム又はダウンサンプリング符号化スキームである、前記符号ストリームをパースすることと、前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定することと、前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子及び前記量子化パラメータ予測差に基づき前記現在の再構成されるべき画像ブロックの量子化パラメータを決定することと、現在の再構成された画像ブロックを取得するように前記現在の再構成されるべき画像ブロックの前記量子化パラメータ、前記量子化係数、及び前記予測信号に基づき前記現在の再構成されるべき画像ブロックを再構成することとを含む画像処理方法を提供する。
【００１６】
本願の有利な効果は、次の通りである：画像ブロックが各々の特徴を有していると考えると、符号器側は、異なるように画像ブロックを符号化する。これに基づき、復号器側は、現在の再構成されるべき画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定し、現在の再構成されるべき画像ブロックの量子化パラメータ予測子及び量子化パラメータ予測差に基づき、現在の再構成されるべき画像ブロックの量子化パラメータを決定してよい。すなわち、量子化パラメータは、現在の再構成されるべき画像ブロックを再構成するために適切である。従って、復号器側によって取得される再構成された画像ブロックは、より良い効果を有する。
【００１７】
任意に、前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定することは、
Ｍが正の整数であるとして、前もって設定された規則に従って、前記現在の再構成されるべき画像ブロックと同じ現在の画像エリアに属するＭ個の再構成された画像ブロックを選択し、該Ｍ個の再構成された画像ブロックの量子化パラメータ及び該Ｍ個の再構成された画像ブロックの符号化スキームを取得することと、
前記Ｍ個の再構成された画像ブロックの前記量子化パラメータに基づき前記現在の再構成されるべき画像ブロックの前記符号化スキーム及び前記Ｍ個の再構成された画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子を決定することと
を含む。
【００１８】
前もって設定された規則は、復号化シーケンスにおける現在の再構成されるべき画像ブロックの前の再構成された画像ブロックを選択すること、又は現在の再構成されるべき画像ブロックの上側の再構成された画像ブロック及び左側の再構成された画像ブロックを選択すること、又は復号化シーケンスにおいて、前もって設定された範囲内にある再構成された画像ブロックから、現在の再構成されるべき画像ブロックと同じ符号化スキームを有し且つ現在の再構成されるべき画像ブロックに最も近い再構成された画像ブロックを選択すること、であってよい。前もって設定された規則は、本願において限定されない点が留意されるべきである。
【００１９】
本願の有利な効果は、次の通りである：この方法は、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を有効に且つ正確に決定するために使用され得る。
【００２０】
任意に、前記Ｍ個の再構成された画像ブロックは、１つの再構成された画像ブロックであり、
前記Ｍ個の再構成された画像ブロックの前記量子化パラメータに基づき前記現在の再構成されるべき画像ブロックの前記符号化スキーム及び前記Ｍ個の再構成された画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子を決定することは、
前記１つの再構成された画像ブロックの符号化スキームが前記現在の再構成されるべき画像ブロックの前記符号化スキームと同じである場合に、前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として前記１つの再構成された画像ブロックの量子化パラメータを決定すること、又は
前記１つの再構成された画像ブロックの前記符号化スキームが前記現在の再構成されるべき画像ブロックの前記符号化スキームとは異なる場合に、第１量子化パラメータ及び第２量子化パラメータに基づき前記１つの再構成された画像ブロックの前記符号化スキーム及び前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子を決定すること
を含む。前記第１量子化パラメータは、前記原解像度符号化スキームでの前記現在の画像エリアの量子化パラメータであって、前記符号ストリームをパースすることによって取得される。前記第２量子化パラメータは、前記ダウンサンプリング符号化スキームでの前記現在の画像エリアの量子化パラメータであって、前記符号ストリームをパースすることによって取得される。前記現在の再構成されるべき画像ブロックは、前記現在の画像エリアの部分である。
【００２１】
任意に、第１量子化パラメータ及び第２量子化パラメータに基づき前記１つの再構成された画像ブロックの前記符号化スキーム及び前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子を決定することは、
前記１つの再構成された画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームであり、且つ、前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームである場合に、量子化差分を取得するように前記第１量子化パラメータから前記第２量子化パラメータを減じ、前記量子化パラメータ予測子を取得するように前記１つの再構成された画像ブロックの前記量子化パラメータと前記量子化差分との和を計算すること、又は
前記１つの再構成された画像ブロックの前記符号化スキームが前記原解像度符号化スキームであり、且つ、前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームである場合に、前記量子化差分を取得するように前記第１量子化パラメータから前記第２量子化パラメータを減じ、前記量子化パラメータ予測子を取得するように前記１つの再構成された画像ブロックの前記量子化パラメータと前記量子化差分との間の差を計算すること
を含む。
【００２２】
任意に、前記１つの再構成された画像ブロックは、復号化シーケンスにおける前記現在の再構成されるべき画像ブロックの前の再構成された画像ブロックである。
【００２３】
任意に、Ｍは１よりも大きく、
前記Ｍ個の再構成された画像ブロックの前記量子化パラメータに基づき前記現在の再構成されるべき画像ブロックの前記符号化スキーム及び前記Ｍ個の再構成された画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子を決定することは、
前記Ｍ個の再構成された画像ブロックの前記符号化スキームが夫々、前記現在の再構成されるべき画像ブロックの前記符号化スキームと同じである場合に、前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として前記Ｍ個の再構成された画像ブロックの前記量子化パラメータの平均を決定すること、又は
前記Ｍ個の再構成された画像ブロックの前記符号化スキームのいずれかが前記現在の再構成されるべき画像ブロックの前記符号化スキームとは異なる場合に、第１量子化パラメータ及び第２量子化パラメータに基づき前記Ｍ個の再構成された画像ブロックの前記符号化スキーム及び前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子を決定すること
を含む。前記第１量子化パラメータは、前記原解像度符号化スキームでの前記現在の画像エリアの量子化パラメータであって、前記符号ストリームをパースすることによって取得される。前記第２量子化パラメータは、前記ダウンサンプリング符号化スキームでの前記現在の画像エリアの量子化パラメータであって、前記符号ストリームをパースすることによって取得される。前記現在の再構成されるべき画像ブロックは、前記現在の画像エリアの部分である。
【００２４】
任意に、第１量子化パラメータ及び第２量子化パラメータに基づき前記Ｍ個の再構成された画像ブロックの前記符号化スキーム及び前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子を決定することは、
前記Ｍ個の再構成された画像ブロックが、前記ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックを含み、且つ、前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームである場合に、前記第１量子化パラメータと、前記第２量子化パラメータと、前記ダウンサンプリング符号化スキームを使用することによって符号化された前記再構成された画像ブロックの量子化パラメータとに基づき、前記ダウンサンプリング符号化スキームを使用することによって符号化された前記再構成された画像ブロックの補正された量子化パラメータを計算し、前記ダウンサンプリング符号化スキームを使用することによって符号化された前記再構成された画像ブロックの前記補正された量子化パラメータに基づき前記Ｍ個の再構成された画像ブロックの前記量子化パラメータの前記平均を決定し、該平均が、前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子である、こと、又は
前記Ｍ個の再構成された画像ブロックが、前記原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックを含み、且つ、前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームである場合に、前記第１量子化パラメータと、前記第２量子化パラメータと、前記原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの量子化パラメータとに基づき、前記原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの補正された量子化パラメータを計算し、前記原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの前記補正された量子化パラメータに基づき前記Ｍ個の再構成された画像ブロックの前記量子化パラメータの前記平均を決定し、該平均が、前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子である、こと
を含む。
【００２５】
任意に、前記第１量子化パラメータと、前記第２量子化パラメータと、前記ダウンサンプリング符号化スキームを使用することによって符号化された前記再構成された画像ブロックの量子化パラメータとに基づき、前記ダウンサンプリング符号化スキームを使用することによって符号化された前記再構成された画像ブロックの補正された量子化パラメータを計算することは、
量子化差分を取得するように前記第１量子化パラメータから前記第２量子化パラメータを減じることと、
前記ダウンサンプリング符号化スキームを使用することによって符号化された前記再構成された画像ブロックの前記補正された量子化パラメータを取得するように、前記量子化差分と前記ダウンサンプリング符号化スキームを使用することによって符号化された前記再構成された画像ブロックの前記量子化パラメータとの和を計算することと
を含む。
【００２６】
本願の有利な効果は、次の通りである：この方法は、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを有効に且つ正確に計算するために使用され得る。
【００２７】
任意に、前記第１量子化パラメータと、前記第２量子化パラメータと、前記原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの量子化パラメータとに基づき、前記原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの補正された量子化パラメータを計算することは、
前記量子化差分を取得するように前記第１量子化パラメータから前記第２量子化パラメータを減じることと、
前記原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの前記補正された量子化パラメータを取得するように、前記量子化差分と前記原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの前記量子化パラメータとの間の差を計算することと
を含む。
【００２８】
本願の有利な効果は、次の通りである：この方法は、原解像度符号化スキームによって符号化された再構成された画像ブロックの補正された量子化パラメータを有効に且つ正確に計算するために使用され得る。
【００２９】
任意に、前記Ｍ個の再構成された画像ブロックは、前記現在の再構成されるべき画像ブロックの上側の再構成された画像ブロック及び左側の再構成された画像ブロックを含む。
【００３０】
任意に、前記Ｍ個の再構成された画像ブロックは、１つの再構成された画像ブロックであり、
前記Ｍ個の再構成された画像ブロックの量子化パラメータ及び前記Ｍ個の再構成された画像ブロックの符号化スキームを取得することは、
前記現在の再構成されるべき画像ブロックと同じ符号化スキームを有している再構成された画像ブロックを、前もって設定された範囲内にある再構成された画像ブロックから探すことと、
前記１つの再構成された画像ブロックの量子化パラメータを取得することと
を含む。相応して、前記Ｍ個の再構成された画像ブロックの前記量子化パラメータに基づき前記現在の再構成されるべき画像ブロックの前記符号化スキーム及び前記Ｍ個の再構成された画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子を決定することは、
前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として前記１つの再構成された画像ブロックの前記量子化パラメータを使用することを含む。
【００３１】
任意に、前記１つの再構成された画像ブロックは、復号化シーケンスにおいて、前記前もって設定された範囲内にある前記再構成された画像ブロックの中にあって、前記現在の再構成されるべき画像ブロックに最も近い再構成された画像ブロックである。
【００３２】
任意に、前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定することは、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームである場合に、前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として第１量子化パラメータを使用すること、又は
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームである場合に、前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子として第２量子化パラメータを使用すること
を含む。前記第１量子化パラメータは、前記原解像度符号化スキームでの現在の画像エリアの量子化パラメータであって、前記符号ストリームをパースすることによって取得される。前記第２量子化パラメータは、前記ダウンサンプリング符号化スキームでの前記現在の画像エリアの量子化パラメータであって、前記符号ストリームをパースすることによって取得される。前記現在の再構成されるべき画像ブロックは、前記現在の画像エリアの部分である。
【００３３】
任意に、前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定することは、
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームである場合に、前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子を取得するように前記量子化パラメータ予測差に基づき第１量子化パラメータを補正すること、又は
前記現在の再構成されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームである場合に、前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子を取得するように前記量子化パラメータ予測差に基づき第２量子化パラメータを補正すること
を含む。前記第１量子化パラメータは、前記原解像度符号化スキームでの現在の画像エリアの量子化パラメータであって、前記符号ストリームをパースすることによって取得される。前記第２量子化パラメータは、前記ダウンサンプリング符号化スキームでの前記現在の画像エリアの量子化パラメータであって、前記符号ストリームをパースすることによって取得される。前記現在の再構成されるべき画像ブロックは、前記現在の画像エリアの部分である。
【００３４】
第３の態様によれば、本願は、原解像度符号化スキームでの現在の画像エリアの第１量子化パラメータと、ダウンサンプリング符号化スキームでの前記現在の画像エリアの第２量子化パラメータと、前記現在の画像エリア内の現在の符号化されるべき画像ブロックの符号化スキームと、前記現在の符号化されるべき画像ブロックの符号化された信号と、前記現在の符号化されるべき画像ブロックの予測信号とを取得することであり、前記現在の符号化されるべき画像ブロックの前記符号化スキームは前記原解像度符号化スキーム又は前記ダウンサンプリング符号化スキームであり、前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームである場合には、前記符号化された信号は前記現在の符号化されるべき画像ブロックの原信号であり、あるいは、前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームである場合には、前記符号化された信号は、前記現在の符号化されるべき画像ブロックの前記原信号に対してダウンサンプリング処理が実行された後に取得される信号である、前記取得することと、前記現在の符号化されるべき画像ブロックの前記符号化スキームに従って前記現在の符号化されるべき画像ブロックの量子化パラメータを決定することであり、前記現在の符号化されるべき画像ブロックの前記量子化パラメータは前記第１量子化パラメータ又は前記第２量子化パラメータであり、あるいは、前記現在の符号化されるべき画像ブロックの前記量子化パラメータは、前記第１量子化パラメータを補正することによって取得される量子化パラメータ、又は前記第２量子化パラメータを補正することによって取得される量子化パラメータである、前記決定することと、前記予測信号及び前記符号化された信号に基づき前記現在の符号化されるべき画像ブロックの残留信号を生成することと、前記現在の符号化されるべき画像ブロックの前記量子化パラメータに基づき前記残留信号を符号化することとを含む画像処理方法を提供する。
【００３５】
本願の有利な効果は、次の通りである：画像ブロックが各々の特徴を有していると考えると、符号器側は、異なるように画像ブロックを符号化する。これに基づき、符号器側は、現在の符号化されるべき画像ブロックの符号化スキームに従って、現在の符号化されるべき画像ブロックの量子化パラメータを決定してよい。すなわち、量子化パラメータは、現在の符号化されるべき画像ブロックを符号化するために適切である。従って、符号器側は、より良い符号化効果を有する。
【００３６】
任意に、ダウンサンプリング符号化スキームでの前記現在の画像エリアの第２量子化パラメータを取得することは、
前記現在の画像エリアの量子化パラメータ予測差を取得することと、
前記第１量子化パラメータ及び前記量子化パラメータ予測差に基づき前記第２量子化パラメータを計算することと
を含む。
【００３７】
任意に、現在の符号化されるべき画像ブロックの符号化スキームを取得することは、
前記第１量子化パラメータに基づき、前記原解像度符号化スキームが前記現在の符号化されるべき画像ブロックに使用される場合に使用される第１符号化コストを決定することと、
前記第２量子化パラメータに基づき、前記ダウンサンプリング符号化スキームが前記現在の符号化されるべき画像ブロックに使用される場合に使用される第２符号化コストを決定することと、
前記現在の符号化されるべき画像ブロックの前記符号化スキームとして前記第１符号化コスト及び前記第２符号化コストの中の最低符号化コストに対応する符号化スキームを使用することと
を含む。
【００３８】
本願の有利な効果は、次の通りである：この方法は、符号化コストが最も低い符号化スキームを選択するために使用され得、これは、符号化をより容易にする。
【００３９】
任意に、前記現在の符号化されるべき画像ブロックの前記符号化スキームに従って前記現在の符号化されるべき画像ブロックの量子化パラメータを決定することは、
前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームである場合に、前記第１量子化パラメータとして前記現在の符号化されるべき画像ブロックの前記量子化パラメータを決定すること、又は
前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームである場合に、前記第２量子化パラメータとして前記現在の符号化されるべき画像ブロックの前記量子化パラメータを決定すること
を含む。
【００４０】
任意に、当該方法は、符号ストリームを生成することを更に含む。前記符号ストリームは、前記第１量子化パラメータと、前記第２量子化パラメータと、前記現在の符号化されるべき画像ブロックの前記符号化スキームとを含むか、あるいは、前記符号ストリームは、前記第１量子化パラメータと、前記現在の画像エリアの前記量子化パラメータ予測差と、前記現在の符号化されるべき画像ブロックの前記符号化スキームとを含む。
【００４１】
本願の有利な効果は、次の通りである。量子化パラメータ予測差は、第２量子化パラメータよりも短い。従って、この方法は、符号器側のビットオーバーヘッドを減らすことができる。
【００４２】
任意に、現在の符号化されるべき画像ブロックの符号化スキームを取得することは、
少なくとも１つの第３量子化パラメータを取得するように少なくとも１回前記第１量子化パラメータを補正し、且つ、少なくとも１つの第４量子化パラメータを取得するように少なくとも１回前記第２量子化パラメータを補正することと、
前記第３量子化パラメータに基づき、前記原解像度符号化スキームが前記現在の符号化されるべき画像ブロックに使用される場合に使用される第３符号化コストを決定し、且つ、前記第４量子化パラメータに基づき、前記ダウンサンプリング符号化スキームが前記現在の符号化されるべき画像ブロックに使用される場合に使用される第４符号化コストを決定することと、
前記現在の符号化されるべき画像ブロックの前記符号化スキームとして前記第３符号化コスト及び前記第４符号化コストの中の最低符号化コストに対応する符号化スキームを使用することと
を含む。
【００４３】
本願の有利な効果は、次の通りである。この方法は、符号化コストが最も低い符号化スキームを選択するために使用され得、これは、符号化をより容易にする。
【００４４】
任意に、前記現在の符号化されるべき画像ブロックの前記符号化スキームに従って前記現在の符号化されるべき画像ブロックの量子化パラメータを決定することは、
前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームである場合に、前記現在の符号化されるべき画像ブロックの前記量子化パラメータとして前記少なくとも１つの第３量子化パラメータの中で符号化コストが最も低い第３量子化パラメータを決定すること、又は
前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームである場合に、前記現在の符号化されるべき画像ブロックの前記量子化パラメータとして前記少なくとも１つの第４量子化パラメータの中で符号化コストが最も低い第４量子化パラメータを決定すること
を含む。
【００４５】
任意に、当該方法は、
前記現在の符号化されるべき画像ブロックの量子化パラメータ予測子を取得することと、
前記量子化パラメータ予測子及び前記現在の符号化されるべき画像ブロックの前記量子化パラメータに基づき前記現在の符号化されるべき画像ブロックの量子化パラメータ予測差を計算することと、
前記現在の符号化されるべき画像ブロックの前記符号化スキーム及び前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測差を含む符号ストリームを生成することと
を更に含む。
【００４６】
本願の有利な効果は、次の通りである。量子化パラメータ予測差は、量子化パラメータよりも短い。従って、この方法は、符号器側のビットオーバーヘッドを減らすことができる。
【００４７】
任意に、前記現在の符号化されるべき画像ブロックの量子化パラメータ予測子を取得することは、
Ｍが正の整数であるとして、前もって設定された規則に従って、前記現在の符号化されるべき画像ブロックと同じ現在の画像エリアに属するＭ個の再構成された画像ブロックを選択し、該Ｍ個の再構成された画像ブロックの量子化パラメータ及び該Ｍ個の再構成された画像ブロックの符号化スキームを取得することと、
前記Ｍ個の再構成された画像ブロックの前記量子化パラメータに基づき前記現在の符号化されるべき画像ブロックの前記符号化スキーム及び前記Ｍ個の再構成された画像ブロックの前記符号化スキームに従って前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子を決定することと
を含む。
【００４８】
本願の有利な効果は、次の通りのものである：この方法は、現在の符号化されるべき画像ブロックの量子化パラメータ予測子を有効に且つ正確に決定するために使用され得る。
【００４９】
任意に、前記Ｍ個の再構成された画像ブロックは、１つの再構成された画像ブロックであり、
前記Ｍ個の再構成された画像ブロックの前記量子化パラメータに基づき前記現在の符号化されるべき画像ブロックの前記符号化スキーム及び前記Ｍ個の再構成された画像ブロックの前記符号化スキームに従って前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子を決定することは、
前記１つの再構成された画像ブロックの符号化スキームが前記現在の符号化されるべき画像ブロックの前記符号化スキームと同じである場合に、前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子として前記１つの再構成された画像ブロックの量子化パラメータを決定すること、又は
前記１つの再構成された画像ブロックの前記符号化スキームが前記現在の符号化されるべき画像ブロックの前記符号化スキームとは異なる場合に、前記第１量子化パラメータ及び前記第２量子化パラメータに基づき前記１つの再構成された画像ブロックの前記符号化スキーム及び前記現在の符号化されるべき画像ブロックの前記符号化スキームに従って前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子を決定すること
を含む。
【００５０】
任意に、前記第１量子化パラメータ及び前記第２量子化パラメータに基づき前記１つの再構成された画像ブロックの前記符号化スキーム及び前記現在の符号化されるべき画像ブロックの前記符号化スキームに従って前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子を決定することは、
前記１つの再構成された画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームであり、且つ、前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームである場合に、量子化差分を取得するように前記第１量子化パラメータから前記第２量子化パラメータを減じ、前記量子化パラメータ予測子を取得するように前記１つの再構成された画像ブロックの前記量子化パラメータと前記量子化差分との和を計算すること、又は
前記１つの再構成された画像ブロックの前記符号化スキームが前記原解像度符号化スキームであり、且つ、前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームである場合に、前記量子化差分を取得するように前記第１量子化パラメータから前記第２量子化パラメータを減じ、前記量子化パラメータ予測子を取得するように前記１つの再構成された画像ブロックの前記量子化パラメータと前記量子化差分との間の差を計算すること
を含む。
【００５１】
任意に、前記１つの再構成された画像ブロックは、符号化シーケンスにおける前記現在の符号化されるべき画像ブロックの前の再構成された画像ブロックである。
【００５２】
任意に、Ｍは１よりも大きく、
前記Ｍ個の再構成された画像ブロックの前記量子化パラメータに基づき前記現在の符号化されるべき画像ブロックの前記符号化スキーム及び前記Ｍ個の再構成された画像ブロックの前記符号化スキームに従って前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子を決定することは、
前記Ｍ個の再構成された画像ブロックの前記符号化スキームが夫々、前記現在の符号化されるべき画像ブロックの前記符号化スキームと同じである場合に、前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子として前記Ｍ個の再構成された画像ブロックの前記量子化パラメータの平均を決定すること、又は
前記Ｍ個の再構成された画像ブロックの前記符号化スキームのいずれかが前記現在の符号化されるべき画像ブロックの前記符号化スキームとは異なる場合に、前記第１量子化パラメータ及び前記第２量子化パラメータに基づき前記Ｍ個の再構成された画像ブロックの前記符号化スキーム及び前記現在の符号化されるべき画像ブロックの前記符号化スキームに従って前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子を決定すること
を含む。
【００５３】
任意に、前記第１量子化パラメータ及び前記第２量子化パラメータに基づき前記Ｍ個の再構成された画像ブロックの前記符号化スキーム及び前記現在の符号化されるべき画像ブロックの前記符号化スキームに従って前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子を決定することは、
前記Ｍ個の再構成された画像ブロックが、前記ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックを含み、且つ、前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームである場合に、前記第１量子化パラメータと、前記第２量子化パラメータと、前記ダウンサンプリング符号化スキームを使用することによって符号化された前記再構成された画像ブロックの量子化パラメータとに基づき、前記ダウンサンプリング符号化スキームを使用することによって符号化された前記再構成された画像ブロックの補正された量子化パラメータを計算し、前記ダウンサンプリング符号化スキームを使用することによって符号化された前記再構成された画像ブロックの前記補正された量子化パラメータに基づき前記Ｍ個の再構成された画像ブロックの前記量子化パラメータの前記平均を決定し、該平均が、前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子である、こと、又は
前記Ｍ個の再構成された画像ブロックが、前記原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックを含み、且つ、前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームである場合に、前記第１量子化パラメータと、前記第２量子化パラメータと、前記原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの量子化パラメータとに基づき、前記原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの補正された量子化パラメータを計算し、前記原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの前記補正された量子化パラメータに基づき前記Ｍ個の再構成された画像ブロックの前記量子化パラメータの前記平均を決定し、該平均が、前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子である、こと
を含む。
【００５４】
任意に、前記第１量子化パラメータと、前記第２量子化パラメータと、前記ダウンサンプリング符号化スキームを使用することによって符号化された前記再構成された画像ブロックの量子化パラメータとに基づき、前記ダウンサンプリング符号化スキームを使用することによって符号化された前記再構成された画像ブロックの補正された量子化パラメータを計算することは、
量子化差分を取得するように前記第１量子化パラメータから前記第２量子化パラメータを減じることと、
前記ダウンサンプリング符号化スキームを使用することによって符号化された前記再構成された画像ブロックの前記補正された量子化パラメータを取得するように、前記量子化差分と前記ダウンサンプリング符号化スキームを使用することによって符号化された前記再構成された画像ブロックの前記量子化パラメータとの和を計算することと
を含む。
【００５５】
本願の有利な効果は、次の通りである：この方法は、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを有効に且つ正確に計算するために使用され得る。
【００５６】
任意に、前記第１量子化パラメータと、前記第２量子化パラメータと、前記原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの量子化パラメータとに基づき、前記原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの補正された量子化パラメータを計算することは、
前記量子化差分を取得するように前記第１量子化パラメータから前記第２量子化パラメータを減じることと、
前記原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの前記補正された量子化パラメータを取得するように、前記量子化差分と前記原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの前記量子化パラメータとの間の差を計算することと
を含む。
【００５７】
本願の有利な効果は、次の通りである：この方法は、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを有効に且つ正確に計算するために使用され得る。
【００５８】
任意に、前記Ｍ個の再構成された画像ブロックは、前記現在の符号化されるべき画像ブロックの上側の再構成された画像ブロック及び左側の再構成された画像ブロックを含む。
【００５９】
任意に、前記Ｍ個の再構成された画像ブロックは、１つの再構成された画像ブロックであり、
前記Ｍ個の再構成された画像ブロックの量子化パラメータ及び前記Ｍ個の再構成された画像ブロックの符号化スキームを取得することは、
前記現在の符号化されるべき画像ブロックと同じ符号化スキームを有している再構成された画像ブロックを、前もって設定された範囲内にある再構成された画像ブロックから探すことと、
前記１つの再構成された画像ブロックの量子化パラメータ及び前記１つの再構成された画像ブロックの符号化スキームを取得することと
を含む。相応して、前記Ｍ個の再構成された画像ブロックの前記量子化パラメータに基づき前記現在の符号化されるべき画像ブロックの前記符号化スキーム及び前記Ｍ個の再構成された画像ブロックの前記符号化スキームに従って前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子を決定することは、
前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子として前記１つの再構成された画像ブロックの前記量子化パラメータを使用することを含む。
【００６０】
任意に、前記１つの再構成された画像ブロックは、符号化シーケンスにおいて、前記前もって設定された範囲内にある前記再構成された画像ブロックの中にあって、前記現在の符号化されるべき画像ブロックに最も近い再構成された画像ブロックである。
【００６１】
任意に、前記現在の符号化されるべき画像ブロックの量子化パラメータ予測子を取得することは、
前記原解像度符号化スキームでの前記現在の画像エリアの前記第１量子化パラメータと、前記ダウンサンプリング符号化スキームでの前記現在の画像エリアの前記第２量子化パラメータとを取得することと、
前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームである場合に、前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子として前記第１量子化パラメータを使用すること、又は
前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームである場合に、前記現在の符号化されるべき画像ブロックの前記量子化パラメータ予測子として前記第２量子化パラメータを使用することと
を含む。
【００６２】
以下は、画像処理デバイス及びシステムについて記載する。画像処理デバイス及びシステムの実施原理及び技術的効果は、上記の原理及び技術的効果と同様であり、詳細は、ここで再びは記載されない。
【００６３】
第４の態様によれば、本願は、原解像度符号化スキームでの現在の画像エリアの第１量子化パラメータと、ダウンサンプリング符号化スキームでの前記現在の画像エリアの第２量子化パラメータと、前記現在の画像エリア内の現在の再構成されるべき画像ブロックの符号化スキームと、前記現在の再構成されるべき画像ブロックの量子化係数と、前記現在の再構成されるべき画像ブロックの予測信号とを取得するように符号ストリームをパースするよう構成されるパージングモジュールであり、前記現在の再構成されるべき画像ブロックの前記符号化スキームは、前記原解像度符号化スキーム又は前記ダウンサンプリング符号化スキームであり、前記現在の再構成されるべき画像ブロックは、前記現在の画像エリアの部分である、前記パージングモジュールと、前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの量子化パラメータを決定するよう構成される決定モジュールであり、前記現在の再構成されるべき画像ブロックの前記量子化パラメータは、前記第１量子化パラメータ又は前記第２量子化パラメータである、前記決定モジュールと、現在の再構成された画像ブロックを取得するように前記現在の再構成されるべき画像ブロックの前記量子化パラメータ、前記量子化係数、及び前記予測信号に基づき前記現在の再構成されるべき画像ブロックを再構成するよう構成される再構成モジュールとを含む画像処理デバイスを提供する。
【００６４】
第５の態様によれば、本願は、現在の再構成されるべき画像ブロックの量子化パラメータ予測差と、前記現在の再構成されるべき画像ブロックの量子化係数と、前記現在の再構成されるべき画像ブロックの符号化スキームと、前記現在の再構成されるべき画像ブロックの予測信号とを取得するように符号ストリームをパースするよう構成されるパージングモジュールであり、前記符号化スキームは、原解像度符号化スキーム又はダウンサンプリング符号化スキームである、前記パージングモジュールと、前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定するよう構成される第１決定モジュールと、前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子及び前記量子化パラメータ予測差に基づき前記現在の再構成されるべき画像ブロックの量子化パラメータを決定するよう構成される第２決定モジュールと、現在の再構成された画像ブロックを取得するように前記現在の再構成されるべき画像ブロックの前記量子化パラメータ、前記量子化係数、及び前記予測信号に基づき前記現在の再構成されるべき画像ブロックを再構成するよう構成される再構成モジュールとを含む画像処理デバイスを提供する。
【００６５】
第６の態様によれば、本願は、原解像度符号化スキームでの現在の画像エリアの第１量子化パラメータと、ダウンサンプリング符号化スキームでの前記現在の画像エリアの第２量子化パラメータと、前記現在の画像エリア内の現在の符号化されるべき画像ブロックの符号化スキームと、前記現在の符号化されるべき画像ブロックの符号化された信号と、前記現在の符号化されるべき画像ブロックの予測信号とを取得するよう構成される第１取得モジュールであり、前記現在の符号化されるべき画像ブロックの前記符号化スキームは前記原解像度符号化スキーム又は前記ダウンサンプリング符号化スキームであり、前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームである場合には、前記符号化された信号は前記現在の符号化されるべき画像ブロックの原信号であり、あるいは、前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームである場合には、前記符号化された信号は、前記現在の符号化されるべき画像ブロックの前記原信号に対してダウンサンプリング処理が実行された後に取得される信号である、前記第１取得モジュールと、前記現在の符号化されるべき画像ブロックの前記符号化スキームに従って前記現在の符号化されるべき画像ブロックの量子化パラメータを決定するよう構成される決定モジュールであり、前記現在の符号化されるべき画像ブロックの前記量子化パラメータは前記第１量子化パラメータ又は前記第２量子化パラメータであり、あるいは、前記現在の符号化されるべき画像ブロックの前記量子化パラメータは、前記第１量子化パラメータを補正することによって取得される量子化パラメータ、又は前記第２量子化パラメータを補正することによって取得される量子化パラメータである、前記決定モジュールと、前記予測信号及び前記符号化された信号に基づき前記現在の符号化されるべき画像ブロックの残留信号を生成するよう構成される生成モジュールと、前記現在の符号化されるべき画像ブロックの前記量子化パラメータに基づき前記残留信号を符号化するよう構成される符号化モジュールとを含む画像処理デバイスを提供する。
【００６６】
第７の態様によれば、本願は、第４の態様に従う画像処理デバイスと、第６の態様に従う画像処理デバイスとを含む画像処理システムを提供する。
【００６７】
第８の態様によれば、本願は、第５の態様に従う画像処理デバイスと、第６の態様に従う画像処理デバイスとを含む画像処理システムを提供する。
【００６８】
第９の態様によれば、本願は、画像処理デバイスを提供し、当該デバイスは、
原解像度符号化スキームでの現在の画像エリアの第１量子化パラメータと、ダウンサンプリング符号化スキームでの前記現在の画像エリアの第２量子化パラメータと、前記現在の画像エリア内の現在の再構成されるべき画像ブロックの符号化スキームと、前記現在の再構成されるべき画像ブロックの量子化係数と、前記現在の再構成されるべき画像ブロックの予測信号とを取得するように符号ストリームをパースする動作であり、前記現在の再構成されるべき画像ブロックの前記符号化スキームは、前記原解像度符号化スキーム又は前記ダウンサンプリング符号化スキームであり、前記現在の再構成されるべき画像ブロックは、前記現在の画像エリアの部分である、前記符号ストリームをパースする動作と、
前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの量子化パラメータを決定する動作であり、前記現在の再構成されるべき画像ブロックの前記量子化パラメータは、前記第１量子化パラメータ又は前記第２量子化パラメータである、前記量子化パラメータを決定する動作と、
現在の再構成された画像ブロックを取得するように前記現在の再構成されるべき画像ブロックの前記量子化パラメータ、前記量子化係数、及び前記予測信号に基づき前記現在の再構成されるべき画像ブロックを再構成する動作と
を実行するよう構成された復号器を含む。
【００６９】
第１０の態様によれば、本願は、画像処理デバイスを提供し、当該デバイスは、
現在の再構成されるべき画像ブロックの量子化パラメータ予測差と、前記現在の再構成されるべき画像ブロックの量子化係数と、前記現在の再構成されるべき画像ブロックの符号化スキームと、前記現在の再構成されるべき画像ブロックの予測信号とを取得するように符号ストリームをパースする動作であり、前記符号化スキームは、原解像度符号化スキーム又はダウンサンプリング符号化スキームである、前記符号ストリームをパースする動作と、
前記現在の再構成されるべき画像ブロックの前記符号化スキームに従って前記現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定する動作と、
前記現在の再構成されるべき画像ブロックの前記量子化パラメータ予測子及び前記量子化パラメータ予測差に基づき前記現在の再構成されるべき画像ブロックの量子化パラメータを決定する動作と、
現在の再構成された画像ブロックを取得するように前記現在の再構成されるべき画像ブロックの前記量子化パラメータ、前記量子化係数、及び前記予測信号に基づき前記現在の再構成されるべき画像ブロックを再構成する動作と
を実行するよう構成された復号器を含む。
【００７０】
第１１の態様によれば、本願は、画像処理デバイスを提供し、当該デバイスは、
原解像度符号化スキームでの現在の画像エリアの第１量子化パラメータと、ダウンサンプリング符号化スキームでの前記現在の画像エリアの第２量子化パラメータと、前記現在の画像エリア内の現在の符号化されるべき画像ブロックの符号化スキームと、前記現在の符号化されるべき画像ブロックの符号化された信号と、前記現在の符号化されるべき画像ブロックの予測信号とを取得する動作であり、前記現在の符号化されるべき画像ブロックの前記符号化スキームは前記原解像度符号化スキーム又は前記ダウンサンプリング符号化スキームであり、前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記原解像度符号化スキームである場合には、前記符号化された信号は前記現在の符号化されるべき画像ブロックの原信号であり、あるいは、前記現在の符号化されるべき画像ブロックの前記符号化スキームが前記ダウンサンプリング符号化スキームである場合には、前記符号化された信号は、前記現在の符号化されるべき画像ブロックの前記原信号に対してダウンサンプリング処理が実行された後に取得される信号である、前記取得する動作と、
前記現在の符号化されるべき画像ブロックの前記符号化スキームに従って前記現在の符号化されるべき画像ブロックの量子化パラメータを決定する動作であり、前記現在の符号化されるべき画像ブロックの前記量子化パラメータは前記第１量子化パラメータ又は前記第２量子化パラメータであり、あるいは、前記現在の符号化されるべき画像ブロックの前記量子化パラメータは、前記第１量子化パラメータを補正することによって取得される量子化パラメータ、又は前記第２量子化パラメータを補正することによって取得される量子化パラメータである、前記決定する動作と、
前記予測信号及び前記符号化された信号に基づき前記現在の符号化されるべき画像ブロックの残留信号を生成する動作と、
前記現在の符号化されるべき画像ブロックの前記量子化パラメータに基づき前記残留信号を符号化する動作と
を実行するよう構成された符号器を含む。
【００７１】
第１２の態様によれば、本願は、第４の態様又は第９の態様を実行するよう設計されたプログラムを含む、第４の態様又は第９の態様の画像処理デバイスによって使用されるコンピュータソフトウェア命令を記憶するよう構成されたコンピュータ記憶媒体を提供する。
【００７２】
第１３の態様によれば、本願は、コンピュータプログラム製品を提供し、当該コンピュータプログラム製品は、命令を含む。コンピュータプログラム製品がコンピュータによって実行される場合に、命令は、コンピュータが、第４の態様又は第９の態様の画像処理デバイスによって実行される機能を実行することを可能にする。
【００７３】
第１４の態様によれば、本願は、第５の態様又は第１０の態様を実行するよう設計されたプログラムを含む、第５の態様又は第１０の態様の画像処理デバイスによって使用されるコンピュータソフトウェア命令を記憶するよう構成されたコンピュータ記憶媒体を提供する。
【００７４】
第１５の態様によれば、本願は、コンピュータプログラム製品を提供し、当該コンピュータプログラム製品は、命令を含む。コンピュータプログラム製品がコンピュータによって実行される場合に、命令は、コンピュータが、第５の態様又は第１０の態様の画像処理デバイスによって実行される機能を実行することを可能にする。
【００７５】
第１６の態様によれば、本願は、第６の態様又は第１１の態様を実行するよう設計されたプログラムを含む、第６の態様又は第１１の態様の画像処理デバイスによって使用されるコンピュータソフトウェア命令を記憶するよう構成されたコンピュータ記憶媒体を提供する。
【００７６】
第１７の態様によれば、本願は、コンピュータプログラム製品を提供し、当該コンピュータプログラム製品は、命令を含む。コンピュータプログラム製品がコンピュータによって実行される場合に、命令は、コンピュータが、第６の態様又は第１１の態様の画像処理デバイスによって実行される機能を実行することを可能にする。
【００７７】
最後に、本願は、画像処理方法、デバイス、及びシステムを提供する。画像ブロックが各々の特徴を有していると考えると、符号器側は、異なるように画像ブロックを符号化する。これに基づき、復号器側は、現在の再構成されるべき画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータを決定してよい。すなわち、量子化パラメータは、現在の再構成されるべき画像ブロックを再構成するために適切である。従って、復号器側によって取得される再構成された画像ブロックは、より良い効果を有する。その上、符号器側は、現在の符号化されるべき画像ブロックの符号化スキームに従って、現在の符号化されるべき画像ブロックの量子化パラメータを決定してよい。すなわち。量子化パラメータは、現在の符号化されるべき画像ブロックを符号化するために適切である。従って、符号器側は、より良い符号化効果を有する。
【図面の簡単な説明】
【００７８】
【図１】本願に従うデジタルビデオの概略図である。
【図２】本願に従うデジタルビデオの概略図である。
【図３】本願に従って符号器側によって実行される符号化の概略図である。
【図４】本願に従って復号器側によって実行される復号化の概略図である。
【図５】本願に従って符号器側によって実行される符号化の概略図である。
【図６】本願の実施形態に従って符号化中である画像の概略図である。
【図７】本願の実施形態に従う参照ピクセルテンプレートの概略図である。
【図８Ａ】本願の実施形態に従うプレーナモードの概略図である。
【図８Ｂ】本願の実施形態に従うプレーナモードの概略図である。
【図９】本願の実施形態に従う３３の角度予測モードの具体的な方向の概略図である。
【図１０】本願の実施形態に従う画像ダウンサンプリングの概略図である。
【図１１】本願の実施形態に従う画像アップサンプリングの概略図である。
【図１２】本願の実施形態に従う画像アップサンプリングの概略図である。
【図１３】本願の実施形態に従う画像処理方法のフローチャートである。
【図１４】本願の他の実施形態に従う画像処理方法のフローチャートである。
【図１５】本願の更なる他の実施形態に従う画像処理方法のフローチャートである。
【図１６】本願の実施形態に従う画像処理デバイスの概略構造図である。
【図１７】本願の他の実施形態に従う画像処理デバイスの概略構造図である。
【図１８】本願の更なる他の実施形態に従う画像処理デバイスの概略構造図である。
【図１９】本願の実施形態に従う画像処理システムの概略構造図である。
【図２０】本願の実施形態に従う画像処理システムの概略構造図である。
【発明を実施するための形態】
【００７９】
以下は、当業者の理解を促すように、本願中のいくつかの用語について記載する。
【００８０】
デジタルビデオは、デジタル形式で記録された映像である。デジタルビデオは、デジタル画像の複数のフレームを含む。元の映像は、通常はデータ量が比較的に多く、記憶及び伝送に適さない。そのため、高効率ビデオ圧縮符号化技術が、元データを圧縮するために使用される必要がある。
【００８１】
ビデオ圧縮技術は、ビデオ冗長性を除くことによって圧縮を実施する。ビデオ冗長性は、主に、空間冗長性、時間冗長性、視覚冗長性、及び情報エントロピー冗長性を含む。
【００８２】
空間冗長性：空間冗長性は、静止画像における主なデータ冗長性である。空間冗長性は、画像内の隣接するピクセルが比較的に近似した振幅を有していることを意味する。この空間コヒーレンスは、空間相関又は空間冗長性と呼ばれる。空間冗長性は、主に、イントラフレーム予測法を使用することによって取り除かれる。イントラフレーム予測法は、現在の再構成された画像ブロック内の画素が、ビデオ空間冗長性を取り除くために、参照再構成画像ブロック内のピクセルを使用することによってビデオ空間領域相関により予測されることを意味する。
【００８３】
時間冗長性：時間冗長性は、ビデオシーケンスで通常起こる冗長性である。ビデオの隣接する画像は、通常、同じ背景及び動いている対象物、又は類似した背景及び動いている対象物を含む。しかし、動いている対象物は、わずかに異なった空間的位置にある。隣接する画像どうしのこのような高いデータ相関は、時間冗長性と呼ばれる。時間冗長性は、主に、インタフレーム予測技術を使用することによって取り除かれる。インタフレーム予測技術は、現在のピクセルが時間的に隣接する画像のピクセルを使用することによって予測されることを意味する。
【００８４】
視覚冗長性：人間の視覚系は、画像ディテールの変化に鈍感である。たとえわずかな変化に関する情報が失われるとしても、人間の目は喪失を感じることができない。元のビデオデータが記録されるときに、視覚系は、様々なタイプのコンテンツに一貫して敏感であると通常は考えられる。その結果として、理想的な符号化の間に生成されるものよりも多くのデータが生成され、これは視覚冗長性と呼ばれる。視覚冗長性は、主に、変換技術及び量子化技術を使用することによって取り除かれる。変換技術は、画像サンプルに対して周波数解析が実行され、画像サンプルが周波数領域に変換され、視覚品質に対して異なる周波数信号によってなされる寄与の大きさに基づきデータ提示及びビット再割り当てが行われることを意味する。これは、空間領域での一様サンプリングの不適切な提示を補正することができる。その上、ビット再割り当てプロセスでは、視覚冗長性を取り除くための要件は包括的に考えられ、高周波成分の極端に精緻化された表現は、量子化操作を使用することによって除かれる。これは、有効な圧縮を実装する。
【００８５】
情報エントロピー冗長性：画像データのピクセルは、ピクセルの情報エントロピーサイズに基づき対応する数量のビットを割り当てることによってのみ表現可能であることが、情報理論から分かる。しかし、画像データのピクセル毎に、画像取得中にそのピクセルの情報エントロピーを取得することは極めて難しい。そのため、通常は、全てのピクセルが、同じ数量のビットを用いることによって表現される。その結果として、冗長性が必然的に引き起こされる。情報エントロピー冗長性は、主に、エントロピー符号化技術を使用することによって取り除かれる。エントロピー符号化技術は、係数情報エントロピー分布に関する統計値を集めることによって、情報エントロピーが異なるデータに対して異なる数量のビットを割り当てることである。
【００８６】
現在の主流のビデオ圧縮符号化アーキテクチャは、複合型の符号化アーキテクチャである。上記の冗長性は、種々の技術を使用することによって取り除かれ、それらの技術は、複合的なビデオ符号化アーキテクチャを形成するように組み合わされる。図３に示されるように、ビデオを受け取った後、符号器側は、ビデオを構成する画像の各フレームを、符号化されるべき画像ブロックに分け、その後に、符号化されるべき画像ブロックを符号化する。現在の符号化されるべき画像フロックについて、現在の符号化されるべき画像ブロックは、最初に、現在の符号化されるべき画像ブロックの予測信号を取得するように、参照再構成画像ブロックを使用することによって予測される。予測信号は、残留信号を取得するように、現在の符号化されるべき画像ブロックの原信号から減じられる。予測後に、残留信号の大きさは、原信号のそれよりもはるかに小さい。変換操作（任意の操作）及び量子化操作が残留信号に対して実行される。変換及び量子化後に量子化係数が得られ、次いで、符号ストリームを取得するように、量子化係数に対して、可変長符号化又はバイナリ符号化のようなエントロピー符号化により、エントロピー符号化操作が実行される。符号ストリームは、通常は、符号化されるべき画像ブロックを分割するための情報、エントロピー符号化が画像に対して実行された後に取得される情報、などを含む。更に、符号器側は、続いて符号化されるべき画像ブロックを符号化するための参照ピクセルを提供するように、現在の符号化されるべき画像ブロックを再構成する必要がある。具体的に、現在の符号化されるべき画像ブロックの量子化係数を取得した後、符号器側は、現在の符号化されるべき画像ブロックの量子化係数に対して逆量子化及び逆変換を実行して、再構成された残留信号を取得し、再構成された残留信号と、現在の符号化されるべき画像ブロックに対応する予測信号とを加算して、現在の符号化されるべき画像ブロックの再構成信号を取得し、再構成信号に基づいて、再構成された画像ブロックを取得する必要がある。
【００８７】
図４に示されるように、符号ストリームを取得した後、復号器側は、最初に、現在の再構成されるべき画像ブロックの量子化係数を取得するように、符号ストリームに対してエントロピー復号化を実行し、次いで、現在の再構成されるべき画像ブロックの再構成された残留信号を取得するように、量子化係数に対して逆量子化及び逆変換を実行する。現在の再構成されるべき画像ブロックは、現在の再構成されるべき画像ブロックの予測信号を取得するように、参照再構成画像ブロックを使用することによって予測される。予測信号及び再構成された残留信号は、現在の再構成されるべき画像ブロックの再構成信号を取得するように加算される。再構成信号に基づいて、現在の再構成されるべき画像ブロックに対応する現在の再構成された画像ブロックが得られる。
【００８８】
符号化及び復号化をより容易にするために、符号器側は、最初に、画像の各フレームに対してダウンサンプリング処理を実行する。図５に示されるように、符号器側は、画像全体に対してダウンサンプリング処理を実行し、次いで、符号ストリームを取得するように、ダウンサンプリング処理後に得られた画像内の夫々の符号化されるべき画像ブロックを符号化する。夫々の符号化されるべき画像ブロックに対応する再構成された画像ブロックの解像度は、ダウンサンプリング解像度である。相応して、復号器側は符号ストリームをパースする。夫々の再構成されるべき画像ブロックの解像度はダウンサンプリング解像度であり、取得される再構成された画像ブロックの対応する解像度もダウンサンプリング解像度である。復号器側は、元の解像度の再構成された画像ブロックを取得するように、再構成された画像ブロックに対してアップサンプリング処理を実行する必要がある。
【００８９】
符号器側及び復号器側は両方とも、現在の再構成された画像ブロックの予測信号を取得するために、参照再構成画像ブロックを使用することによって現在の再構成された画像ブロック（現在の符号化されるべき画像ブロック又は現在の再構成されるべき画像ブロック）を予測するプロセスに関与する。本願において、現在の再構成された画像ブロックの先行技術の予測モード（主にイントラフレーム予測法である。）は、具体的に次の通りであってよい。
【００９０】
例えば、図６は、本願の実施形態に従って符号化中である画像の概略図である。図６に示されるように、画像は複数の画像ブロックを含む。画像は、上から下及び左から右へ順に符号化される。図６では、ブロックＣ、Ｂ、Ｄ、Ｅ、及びＡは、再構成された画像ブロックであり、画像ブロックＦは、現在の符号化されるべき画像ブロックであり、画像内の他のエリアは、符号化されていない画像エリアである。
【００９１】
Ｈ．２６５標準が、イントラフレーム予測法の具体的なプロセスについて記載するためにここでは使用される。Ｈ．２６５では、現在の符号化されるべき画像ブロックは、予測のために、より小さいサブ画像ブロックに分けられる。サブ画像ブロックが分割を通じて取得される構造は、四分木構造である。具体的に言えば、１つの画像ブロックは４つのサブ画像ブロックに分割されてよく、各サブ画像ブロックは、更に４つのサブ画像ブロックに分割されてよい。図６に示されるように、現在の符号化されるべき画像ブロックは、予測のために７つのサブ画像ブロックに分けられると考えられ、あるいは、現在の符号化されるべき画像ブロックは、予測のために、より多くのサブ画像ブロックに分割されてもよい。各サブ画像ブロックは、最初に、予測信号を取得するように予測される。次いで、サブ画像ブロックの残留信号が予測信号に基づき取得される。変換、量子化、及びエントロピー符号化が残留信号に対して更に実行される。任意に、プレーナモード、ＤＣモード、及び３３の角度予測モードを含む、各サブ画像ブロックを予測するための３５のイントラフレーム予測法が存在する。同じ参照ピクセルテンプレート（複数の参照ピクセルを含む。）が全ての予測モードに対して使用される。図７は、本願の実施形態に従う参照ピクセルテンプレートの概略図である。図７に示されるように、ピクセルＰ１，１、Ｐ２，１、・・・、Ｐ１，Ｎ、Ｐ２，Ｎ、・・・、及びＰＮ，Ｎは、符号化されるべきサブ画像ブロックを構成する。例えば、符号化されるべきサブ画像ブロックは、図６のサブ画像ブロック１であってよい。図７に示されるように、符号化されるべきサブ画像ブロックに加えて、他の参照ピクセルＲ０，０、Ｒ１，０、・・・、Ｒ２Ｎ＋１，０、・・・、及びＲ０，２Ｎは、参照ピクセルテンプレートを構成する。符号化されるべきサブ画像ブロックは、図６のサブ画像ブロック１であると仮定される。この場合に、それらの参照ピクセルのいくつかは、参照再構成画像ブロックＢの最後の行にあるピクセルであり、他のピクセルは、参照再構成画像ブロックＡの最右の列にあるピクセルである。他の標準では、それらの参照ピクセルのいくつは、参照再構成画像ブロックＢに含まれる下の方の複数行のピクセルであり、他のピクセルは、参照再構成画像ブロックＡに含まれる右の複数列のピクセルである。すなわち、参照ピクセルテンプレートは、本願において限定されない。
【００９２】
プレーナモード
【００９３】
プレーナモードは、ピクセル値がゆっくりと変化するエリアに適用可能である。図８Ａ及び図８Ｂは、本願の実施形態に従うプレーナモードの概略図である。図８Ａ及び図８Ｂに示されるように、水平方向及び垂直方向における２つの線形フィルタが、２つの予測子Ｐｘ，ｙＨｏｒ及びＰｘ，ｙＶｅｒを夫々得るために使用され、Ｐｘ，ｙＨｏｒ及びＰｘ，ｙＶｅｒの平均が、ピクセル（ｘ，ｙ）の予測信号として使用される。
【００９４】
ＤＣモード
【００９５】
ＤＣモードは、広域的な平面エリアに適用可能である。現在の符号化されるべきサブ画像ブロックの予測信号は、現在の符号化されるべきサブ画像ブロックの左参照ピクセル及び上参照ピクセルの平均によって取得され得る。図７に示されるように、符号化されるべきサブ画像ブロック内の各ピクセルの予測信号は、Ｒ０，１、・・・、Ｒ０，Ｎ、Ｒ１，０、・・・、ＲＮ，０の平均を使用することによって取得され得る。
【００９６】
角度モード
【００９７】
Ｈ．２６５／ＨＥＶＣは、ビデオコンテンツにおいて異なる方向でテクスチャにより良く適応するように３３の角度予測モードを規定している。図９は、本願の実施形態に従う３３の角度予測モードの具体的な方向の概略図である。図９に示されるように、３３の角度予測モードは、水平モード（モード２からモード１７）と、垂直モード（モード１８からモード３４）とに分類され、Ｖ０（モード２６）及びＨ０（モード１０）は、垂直方向及び水平方向を夫々示しており、残りの角度予測モードの予測方向は夫々、垂直方向又は水平方向からの角度偏差と見なされ得る。ここで、角度予測プロセスについて記載するために、垂直方向Ｖ０（モード２６）が一例として使用される。垂直予測は、現在の符号化されるサブ画像ブロックが、現在の符号化されるべきサブ画像ブロックの上で隣接している行内の参照ピクセルを使用することによって予測されることを意味する。現在の符号化されるべきサブ画像ブロック内の各ピクセルの予測信号は、そのピクセルが位置している列に対応する参照ピクセルのピクセル値に等しい。すなわち、Ｐｘ，ｙ＝Ｒｙ，０。他の角度予測モードについては、水平方向又は垂直方向からの角度偏差が存在し、参照ピクセルの位置は、角度偏差に基づき計算され得る。参照ピクセルは、２つの隣接する参照ピクセルの間にあってよい。この場合に、参照ピクセルを取得するために、２つの参照ピクセルの間の計算された位置に対して補間操作が実行される必要があり、予測信号は、取得された参照ピクセルを使用することによって生成される。
【００９８】
イントラフレーム予測法は、復号器側にも適用可能であり、詳細は、本願で再度ここでは記載されない点が留意されるべきである。
【００９９】
更に、本願は、量子化プロセス及び逆量子化プロセスに関係がある。
【０１００】
具体的に、符号器側は、上記の量子化プロセスに関与する。量子化プロセスは、信号の連続的な値又は大量のとり得る離散値を有限な量の離散振幅値にマッピングするプロセスである。ビデオ符号化の間、残留信号が変換された後に、変換係数が取得される。変換係数は、通常、比較的に大きいダイナミックレンジを有している。変換係数は、信号値範囲を有効に減らし、更には、より良い圧縮効果を実装するように、量子化される。ビデオ標準で広く使用されている量子化方法は、スケール量子化である。スケール量子化は、入力値フィールドを等間隔のインターバルに分けるものである。各インターバルに対応する出力値（すなわち、再構成値）はインターバルの中点であり、インターバルの長さは量子化ステップと呼ばれる。具体的な量子化プロセスは、変換係数で量子化ステップを割り、次いで除算結果を四捨五入して、量子化係数を取得するものである。
【０１０１】
復号器側は、上記の逆量子化プロセスに関与する。逆量子化プロセスは、量子化係数に量子化ステップを乗じて、再構成された変換係数を取得するものです。Ｈ．２６４標準及びＨ．２６５標準では、量子化パラメータ（Quantization  Parameter，ＱＰ）が量子化ステップを決定するために使用される。量子化パラメータは０から５１の範囲をとる。その上、量子化パラメータが１ずつ増大されるたびに、量子化ステップは近似的に１２．２５％ずつ増える。
【０１０２】
更に、本願は、画像ダウンサンプリング処理及び画像アップサンプリング処理に関係がある。
【０１０３】
画像ダウンサンプリング処理は、３つの側面、すなわち、１．ダウンサンプリング比、２．ダウンサンプリング位置、３．ダウンサンプリングに使用されるフィルタ、における情報に関係がある。
【０１０４】
ダウンサンプリング比は、ダウンサンプリング後に得られた画像に対する原画像の比であり、水平方向及び垂直方向で別々に示され得る。例えば、画像信号について、水平ダウンサンプリングは２：１の比で実行されてよく、垂直ダウンサンプリングは４：１の比で実行されてよく、あるいは、水平ダウンサンプリングは実行されず、垂直ダウンサンプリングは２：１の比で実行され、あるいは、水平ダウンサンプリング及び垂直ダウンサンプリングは両方とも２：１の比で実行される。
【０１０５】
ダウンサンプリング位置は、ダウンサンプリング点と原サンプリング点との間の位置関係である。例えば、ダウンサンプリング点は、いくつかの原サンプリング点と同じ位置にあってよく、あるいは、ダウンサンプリング点は、いくつかの原サンプリング点の間にある。
【０１０６】
ダウンサンプリングフィルタは、３−ｌｏｂｅランチョスフィルタ、双線形フィルタ、バイキュービックフィルタ、ガウスフィルタ、などであってよい。
【０１０７】
以下は、ダウンサンプリングプロセスについて記載するために、１６×１６解像度の画像ブロックを一例として使用する（実際の画像は、よりずっと大きく、例えば、１９２０×１０８０である。）。図１０は、本願の実施形態に従う画像ダウンサンプリングの概略図である。水平方向及び垂直方向におけるサンプリング比が両方とも２：１であるとすると、ダウンサンプリング点の位置は、水平方向では２つの原サンプリング点の左の位置であり、ダウンサンプリング点の位置は、垂直方向では２つの原サンプリング点の上の位置である。図１０に示されるように、四角で囲まれた丸は、ダウンサンプリング点位置を示し、ダウンサンプリングフィルタは、次の通りである。  
【数１】
0006910532.tif 000002
【０１０８】
フィルタは、単純なローパスフィルタである。ローパスフィルタは、１つの２次元フィルタと見なされても、あるいは、２つの１次元フィルタと見なされてもよい。フィルタが１つの２次元フィルタと見なされる場合には、水平ダウンサンプリング及び垂直ダウンサンプリングの両方が１回のフィルタリング操作で完了され得る。図１０に示されるように、ダウンサンプリングがダウンサンプリング点Ａに対して実行されるとき、８つの隣接する原サンプリング点（三角で囲まれた丸）が使用され、ダウンサンプリング点Ａのピクセル値は上記のフィルタに従って計算される。フィルタが２つの１次元フィルタと見なされる場合には、最初に、水平ダウンサンプリング又は垂直ダウンサンプリングが完了される必要があり、次いで、垂直ダウンサンプリング又は水平ダウンサンプリングが水平ダウンサンプリング結果又は垂直ダウンサンプリング結果に対して実行される。図１０に示されるように、ダウンサンプリングがダウンサンプリング点Ａに対して実行されるとき、最初に、ダウンサンプリング点Ａの左右の原サンプリング点を使用することによって、水平ダウンサンプリングが実行され、次いで、ダウンサンプリング点Ａの上下の原サンプリング点を使用することによって、垂直ダウンサンプリングがダウンサンプリング結果に対して実行され、そして、ダウンサンプリング点Ａのピクセル値は、上記のフィルタに従って計算される。同じ方法が、１６×１６の画像ブロック全体に対してダウンサンプリング処理を実行するために使用される。最終的なダウンサンプリング結果が図１０に示されている。各ダウンサンプリング点の位置は、四角で囲まれた丸によって表されており、ダウンサンプリング点のピクセル値は、フィルタリング操作を通じて取得される。図１０に示されるように、ダウンサンプリング後に取得される画像ブロックは、８×８解像度を有している。
【０１０９】
符号器側又は復号器側は、通常、元の解像度の画像を取得するために、ダウンサンプリング後に取得された画像に対してアップサンプリング処理を実行する必要がある。上記のアップサンプリング処理は、３つの側面、すなわち、１．アップサンプリング比、２．アップサンプリング位置、３．アップサンプリングに使用されるフィルタ、における情報に関係がある。
【０１１０】
アップサンプリング比は、アップサンプリング後に得られた画像に対する、アップサンプリングが実行されていない画像の比であり、水平方向及び垂直方向で別々に示され得る。例えば、アップサンプリングが実行されていない画像信号について、水平アップサンプリングは１：２の比で実行されてよく、垂直アップサンプリングは１：４の比で実行されてよく、あるいは、水平アップサンプリングは実行されず、垂直アップサンプリングは１：２の比で実行され、あるいは、水平アップサンプリング及び垂直アップサンプリングは両方とも１：２の比で実行される。
【０１１１】
アップサンプリング位置は、アップサンプリング後に得られるサンプリング点と、アップサンプリングが実行されないサンプリング点との間の位置関係である。例えば、図１１は、本願の実施形態に従う画像アップサンプリングの概略図である。図１１に示されるように、最初の行で、水平アップサンプリングが１：２のアップサンプリング比で実行された後に得られるサンプリング点の位置は、アップサンプリングが実行されないサンプリング点の右側にあってよく、×は、アップサンプリング後に得られるサンプリング点の位置を表し、丸は、アップサンプリングが実行されないサンプリング点の位置を表す。２行目では、水平アップサンプリングが１：２のアップサンプリング比で実行された後に得られるサンプリング点の位置は、アップサンプリングが実行されないサンプリング点の左側にあってよく、×は、アップサンプリング後に得られるサンプリング点の位置を表し、丸は、アップサンプリングが実行されないサンプリング点の位置を表す。アップサンプリング後に得られるサンプリング点の位置は、上記のダウンサンプリング点の位置選択に対応する必要がある点が留意されるべきである。例えば、ダウンサンプリングの間に、左の原サンプリング点の位置が、ダウンサンプリング点の位置として選択される。この場合に、アップサンプリングの間に、アップサンプリングが実行されない右のサンプリング点（ダウンサンプリング点）の位置が、アップサンプリング後に得られるサンプリング点の位置として選択される。
【０１１２】
アップサンプリングフィルタは、ＤＣＴＩＦフィルタ、双線形補間フィルタ、ｓｉｎｃフィルタ、などであってよい。以下は、アップサンプリングプロセスについて記載するために、８×８解像度の画像ブロック（すなわち、ダウンサンプリング後に得られた上記の画像ブロック）を一例として使用する。水平方向及び垂直方向におけるサンプリング比は両方とも２：１であると仮定される。水平方向において、アップサンプリング後に得られるサンプリング点の位置は、アップサンプリングが実行されない右側のサンプリング点の位置である。垂直方向において、アップサンプリング後に得られるサンプリング点の位置は、アップサンプリングが実行されない下側のサンプリング点の位置である。ここで、ＤＣＴＩＦフィルタが水平アップサンプリング及び垂直アップサンプリングを別々に実行する例が、アップサンプリング処理のプロセスについて記載するために使用される。ＤＣＴＩＦフィルタは（−１，４，−１１，４０，４０，−１１，４，−１）である。水平アップサンプリングが目下実行される必要があると仮定される。図１１において、サンプリング点Ｂ３が挿入される必要があるとすれば、Ｂ３のピクセル値は、次の式：
Ｂ３＝（−Ａ０＋４×Ａ１−１１×Ａ２＋４０×Ａ３＋４０×Ａ４−１１×Ａ５＋４×Ａ６−Ａ７）＞＞６
を使用することによって決定される。
【０１１３】
他の位置、例えばＢ７での補間サンプリング点については、Ｂ７の右側４つのピクセルが使用される必要があり、それらのピクセルは目下取得され得ない。実際には、通常、Ａ７が、Ｂ７のピクセル値を計算するために４回繰り返される。垂直アップサンプリングは水平アップサンプリングと同様であり、詳細は、再びここで記載されない。代替的に、垂直アップサンプリングは、水平アップサンプリングの前に実行されてもよい。図１２は、本願の実施形態に従う画像アップサンプリングの概略図である。図１２に示されるように、×は、アップサンプリング後に得られるサンプリング点を表し、丸は、アップサンプリングが実行されないサンプリング点を表す。
【０１１４】
先行技術では、符号器側は、画像全体に対してダウンサンプリング処理を実行する。しかし、画像全体に含まれる全ての画像ブロックは、異なった特徴を有することがある。例えば、いくつかの画像ブロックは比較的に平坦であり得る。この場合に、符号器側は、それらの画像ブロックに対してダウンサンプリング処理を実行することができる。いくつかの画像ブロックは多数のディテールを有することがある。この場合に、これらのディテールは、ダウンサンプリング処理が実行されると失われる。その結果として、符号器側によって実行される符号化の効果は不十分であり、相応して、復号器側によって取得されるいくつかの再構成された画像ブロックは比較的に不鮮明である。すなわち、復号器側によって取得される再構成された画像ブロックの効果は不十分である。
【０１１５】
上記の技術的問題を解決するために、本願は、画像処理方法、デバイス、及びシステムを提供する。本願は、図３及び図５における符号化の概略図に基づく。図３及び図５に示されるように、画像に含まれている符号化されるべき画像ブロックは、図３に示される原解像度符号化スキーム、又は図５に示されるダウンサンプリング符号化スキームを使用することによって、符号化されてよい。原解像度符号化スキームは、現在の符号化されるべき画像ブロックを直接符号化するものである。ダウンサンプリング符号化スキームは、現在の符号化されるべき画像ブロックに対して最初にダウンサンプリング処理を実行し、次いで、ダウンサンプリング後に得られた現在の符号化されるべき画像ブロックを符号化するものである。通常、テクスチャ画像ブロックは、原解像度符号化スキームを使用することによって符号化され、滑らかな画像ブロックは、ダウンサンプリング符号化スキームを使用することによって符号化される。符号器側は、夫々の符号化されるべき画像ブロックに使用される符号化スキームを記録する必要があり、その記録を符号ストリームに書き込む。従って、復号器側は、記録に基づき、対応する操作を、再構成されるべき画像ブロックに対して実行する。本願の主な考えは次の通りである：復号器側は、原解像度符号化スキーム又はダウンサンプリング符号化スキームを使用することによって、再構成されるべき画像ブロックを符号化し、再構成されるべき画像ブロックの符号化スキームに従って、再構成されるべき画像ブロックのＱＰを決定し、ＱＰに基づいて、再構成されるべき画像ブロックを再構成してよい。相応して、符号器側は、原解像度符号化スキーム又はダウンサンプリング符号化スキームを使用することによって、符号化されるべき画像ブロックを符号化し、符号化されるべき画像ブロックの符号化スキームに従って、符号化されるべき画像ブロックのＱＰを決定し、ＱＰに基づいて符号化を実行してよい。
【０１１６】
図１３は、本願の実施形態に従う画像処理方法のフローチャートである。図１３に示されるように、方法は、次のプロシージャを含む。
【０１１７】
ステップＳ１３０１：原解像度符号化スキームでの現在の画像エリアの第１量子化パラメータと、ダウンサンプリング符号化スキームでの現在の画像エリアの第２量子化パラメータと、現在の画像エリア内の現在の再構成されるべき画像ブロックの符号化スキームと、現在の再構成されるべき画像ブロックの量子化係数と、現在の再構成されるべき画像ブロックの予測信号とを取得するように、符号ストリームをパースし、このとき、現在の再構成されるべき画像ブロックの符号化スキームは、原解像度符号化スキーム又はダウンサンプリング符号化スキームであり、現在の再構成されるべき画像ブロックは、現在の画像エリアの部分である。
【０１１８】
ステップＳ１３０２：現在の再構成されるべき画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータを決定し、このとき、現在の再構成されるべき画像ブロックの量子化パラメータは、第１量子化パラメータ又は第２量子化パラメータである。
【０１１９】
ステップＳ１３０３：現在の再構成された画像ブロックを取得するように、現在の再構成されるべき画像ブロックの量子化パラメータ、量子化係数、及び予測信号に基づき、現在の再構成されるべき画像ブロックを再構成する。
【０１２０】
ステップＳ１３０１について詳細に記載する。具体的に、第１量子化パラメータは、原解像度符号化スキームにおけるビデオレベル（シーケンスレベル）、画像レベル、又は画像スライス（Slice）レベルでの量子化パラメータであってよい。本発明のこの実施形態での画像エリアは画像であってよく、あるいは、画像スライスであってもよい。一例としてビデオレベルを使用することによって、原解像度符号化スキームが同じビデオ内の画像の各フレーム及び画像の各フレーム内の各画像ブロックに使用されるという条件で、第１量子化パラメータは使用され得る。一例として画像レベルを使用することによって、原解像度符号化スキームが同じ画像内の各画像ブロックに使用されるという条件で、第１量子化パラメータは使用され得る。一例として画像スライス（Slice）レベルを使用することによって、原解像度符号化スキームが同じ画像スライス（Slice）内の各画像ブロックに使用されるという条件で、第１量子化パラメータは使用され得る。同様に、第２量子化パラメータは、ダウンサンプリング符号化スキームにおけるビデオレベル（シーケンスレベル）、画像レベル、又は画像スライス（Slice）レベルでの量子化パラメータであってよい。
【０１２１】
任意に、第１量子化パラメータがビデオレベルでの量子化パラメータである場合には、第２量子化パラメータもビデオレベルでの量子化パラメータである。同様に、第１量子化パラメータが画像レベルでの量子化パラメータである場合には、第２量子化パラメータも画像レベルでの量子化パラメータである。第１量子化パラメータが画像スライスレベルでの量子化パラメータである場合には、第２量子化パラメータも画像スライスレベルでの量子化パラメータである。
【０１２２】
第１量子化パラメータの値範囲については、既存の標準を参照されたい。例えば、第１量子化パラメータは、Ｈ．２６５では、０から５１の範囲をとり、第２量子化パラメータは、通常は、第１量子化パラメータよりも小さい。
【０１２３】
第１量子化パラメータ及び第２量子化パラメータは、符号器側によって生成される符号ストリームで直接運ばれてよい。
【０１２４】
代替的に、符号ストリームは、第１量子化パラメータと、現在の画像エリアの量子化パラメータ予測差とを含む。任意に、量子化パラメータ予測差は、第２量子化パラメータを第１量子化パラメータから減じることによって符号器側によって計算される差である。相応して、ダウンサンプリング符号化スキームでの現在の画像エリアの第２量子化パラメータを取得することは、第２量子化パラメータを取得するように、第１量子化パラメータと量子化パラメータ予測差との間の差を計算することを含む。代替的に、量子化パラメータ予測差は、第１量子化パラメータを第２量子化パラメータから減じることによって符号器側によって計算される差である。相応して、ダウンサンプリング符号化スキームでの現在の画像エリアの第２量子化パラメータを取得することは、第２量子化パラメータを取得するように、第１量子化パラメータと量子化パラメータ予測差との和を計算することを含む。代替的に、量子化パラメータ予測差は、符号器側の設定ファイルから直接取得される量子化パラメータ予測差である。この場合に、復号器側は、量子化パラメータ予測差によって表される意味を取得してよい。例えば、量子化パラメータ予測差によって表される意味は、第２量子化パラメータを第１量子化パラメータから減じることによって取得される差であってよい。この場合に、ダウンサンプリング符号化スキームでの現在の画像エリアの第２量子化パラメータを取得することは、第２量子化パラメータを取得するように、第１量子化パラメータと量子化パラメータ予測差との間の差を計算することを含む。代替的に、量子化パラメータ予測差によって表される意味は、第１量子化パラメータを第２量子化パラメータから減じることによって取得される差であってよい。この場合に、ダウンサンプリング符号化スキームでの現在の画像エリアの第２量子化パラメータを取得することは、第２量子化パラメータを取得するように、第１量子化パラメータと量子化パラメータ予測差との和を計算することを含む。量子化パラメータ予測差は、第２量子化パラメータよりも短い。従って、この方法によれば、符号器側のビットオーバーヘッドを低減することができる。
【０１２５】
代替的に、符号ストリームは、第２量子化パラメータ及び量子化パラメータ予測差を含む。第１量子化パラメータは、第２量子化パラメータ及び量子化パラメータ予測差に基づき決定され得る。第１量子化パラメータを決定する方法は、第２量子化パラメータを決定する方法と同様であり、詳細は、再びここで記載されない。
【０１２６】
現在の再構成されるべき画像ブロックの符号化スキームは、符号ストリームで直接運ばれてよい。１以上のビットが、現在の再構成されるべき画像ブロックの符号化スキームを示すために使用されてよい。例えば、現在の再構成されるべき画像ブロックの符号化スキームを示すために１ビットが使用されるとき、０は、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームであることを示すために使用されてよく、１は、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームであることを示すために使用されてよく、あるいは、１は、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームであることを示すために使用されてよく、０は、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームであることを示すために使用されてよい。
【０１２７】
代替的に、現在の再構成されるべき画像ブロックの符号化スキームは、符号ストリーム内の他のパラメータ情報を使用することによって導出されてもよい。
【０１２８】
任意に、復号器側は、現在の再構成されるべき画像ブロックの予測信号を取得するように、現在の再構成されるべき画像ブロックＭ個の参照再構成画像ブロックを使用することによって、現在の再構成されるべき画像ブロックを予測し、このとき、Ｍは、１以上の正の整数である。例えば、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームであり、Ｍ個の参照再構成画像ブロックが、原解像度符号化スキームを使用することによって符号化された参照再構成画像ブロックを含む場合には、現在の再構成されるべき画像ブロックの参照ピクセルは、原解像度符号化スキームを使用することによって符号化された参照再構成画像ブロックのピクセルの中で決定される。現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームであり、Ｍ個の参照再構成画像ブロックが、ダウンサンプリング符号化スキームを使用することによって符号化された参照再構成画像ブロックを含む場合には、現在の再構成されるべき画像ブロックを再構成するために必要とされるピクセルが、ダウンサンプリング符号化スキームを使用することによって符号化された参照再構成画像ブロックのピクセルから取得され、アップサンプリング処理が、現在の再構成されるべき画像ブロックの参照ピクセルを取得するように、現在の再構成されるべき画像ブロックを再構成するために必要とされるピクセルに対して実行される。現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームであり、Ｍ個の参照再構成画像ブロックが、ダウンサンプリング符号化スキームを使用することによって符号化された参照再構成画像ブロックを含む場合には、現在の再構成されるべき画像ブロックの参照ピクセルは、ダウンサンプリング符号化スキームを使用することによって符号化された参照再構成画像ブロックのピクセルの中で決定される。現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームであり、Ｍ個の参照再構成画像ブロックが、原解像度符号化スキームを使用することによって符号化された参照再構成画像ブロックを含む場合には、現在の再構成されるべき画像ブロックを再構成するために必要とされるピクセルが、原解像度符号化スキームを使用することによって符号化された参照再構成画像ブロックのピクセルから取得され、ダウンサンプリング処理が、現在の再構成されるべき画像ブロックの参照ピクセルを取得するように、現在の再構成されるべき画像ブロックを再構成するために必要とされるピクセルに対して実行される。最後に、上記のイントラフレーム予測法によれば、現在の再構成されるべき画像ブロックの予測信号は、現在の再構成されるべき画像ブロックの参照ピクセルを使用することによって取得される。現在の再構成されるべき画像ブロックの予測信号を取得する方法は、本願において限定されない。
【０１２９】
ステップＳ１３０２について詳細に記載する。任意の様態で、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合には、第１量子化パラメータが、現在の再構成されるべき画像ブロックの量子化パラメータとして使用され、あるいは、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合には、第２量子化パラメータが、現在の再構成されるべき画像ブロックの量子化パラメータとして使用される。
【０１３０】
他の任意の様態では、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、第１量子化パラメータは少なくとも１回補正され、得られた補正結果が、現在の再構成されるべき画像ブロックの量子化パラメータとして使用され、あるいは、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、第２量子化パラメータは少なくとも１回補正され、得られた補正結果が、現在の再構成されるべき画像ブロックの量子化パラメータとして使用される。
【０１３１】
例えば、第１量子化パラメータと補正係数との間の差が計算され、その得られた差が、現在の再構成されるべき画像ブロックの量子化パラメータとして使用される。補正係数は実際の要件に基づき設定されてよく、例えば、３であってよい。代替的に、第１量子化パラメータと補正係数との積が計算され、その得られた積が、現在の再構成されるべき画像ブロックの量子化パラメータとして使用される。補正係数は実際の要件に基づき設定されてよく、例えば、０．２であってよい。同様に、第２量子化パラメータも、同じ方法を使用することによって補正されてよい。
【０１３２】
例えば、固定スケール係数が前もって設定され、復号器側は、第１量子化パラメータ及びスケール係数に基づき第２量子化パラメータを直接決定してよい。スケール係数は、０から１の範囲をとる。例えば、水平方向の２：１ダウンサンプリング及び垂直方向の２：１ダウンサンプリングが実行されるとき、スケール係数は、経験に従って、およそ０．８である。すなわち、第２量子化パラメータは、第１量子化パラメータの０．８倍である。ダウンサンプリングスケーリング比が増大し、例えば、水平方向の２：１ダウンサンプリングが実行され、垂直方向のダウンサンプリングが実行されない場合に、スケール係数も増大する。例えば、スケール係数は０．９であってよい。ダウンサンプリングスケーリング比が低減し、例えば、水平方向の４：１ダウンサンプリング及び垂直方向の４：１ダウンサンプリングが実行される場合に、スケール係数も低減する。例えば、スケール係数は０．６であってよい。
【０１３３】
ステップＳ１３０３について詳細に記載する。任意に、エントロピー復号化が、現在の再構成されるべき画像ブロックの量子化係数を取得するように符号ストリームに対して実行されてよい。量子化ステップは、複数の先行技術の方法を使用することによって、量子化パラメータに基づき取得される。再構成された変換係数を取得するために、量子化係数は量子化ステップを乗じられる。現在の再構成されるべき画像ブロックの再構成された残留信号を取得するために、変換係数に対して逆変換が実行される。次いで、現在の再構成されるべき画像ブロックの再構成信号を取得するために、予測信号及び再構成された残留信号が加算される。最後に、現在の再構成されるべき画像ブロックに対応する現在の再構成された画像ブロックが、再構成信号に基づき取得される。
【０１３４】
符号器側が変換操作を実行し、復号器側が逆変換操作を実行する例が、本願のこの実施形態では使用されている点が留意されるべきである。実際には、符号器側は変換操作を実行しなくてもよく、相応して、復号器側も逆変換操作を実行しない。詳細は、以下では記載されない。
【０１３５】
任意に、現在の再構成された画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、方法は、現在の再構成された画像ブロックに対してアップサンプリング処理を実行するために必要とされる隣接再構成画像ブロックのピクセルに基づき、現在の再構成された画像ブロックに対してアップサンプリング処理を実行することを更に含む。詳細については、上記のアップサンプリング処理方法を参照されたい。現在の再構成された画像ブロックに対してアップサンプリング処理を実行するために必要とされる隣接再構成画像ブロックは、アップサンプリング処理を実行するために復号器側によって使用されるフィルタに関係がある。例えば、必要とされる隣接再構成画像ブロックは、上画像ブロック、下画像ブロック、左画像ブロック、及び右画像ブロックであってよい。代替的に、必要とされる隣接再構成画像ブロックは、現在の再構成された画像ブロックの上画像ブロック、下画像ブロック、左画像ブロック、右画像ブロック、左上画像ブロック、左下画像ブロック、右上画像ブロック、及び右下画像ブロックを含む。アップサンプリング処理のプロセスは、本願において限定されない。
【０１３６】
結論として、画像ブロックは本願では各々の特徴を有しており、符号器側は異なるように画像ブロックを符号化するので、復号器側は、現在の再構成されるべき画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータを決定してよい。すなわち、量子化パラメータは、現在の再構成されるべき画像ブロックを再構成するために適切である。従って、復号器側によって取得される再構成された画像ブロックは、より良い効果を有する。
【０１３７】
図１４は、本願の他の実施形態に従う画像処理方法のフローチャートである。図１４に示されるように、方法は、次のプロシージャを含む。
【０１３８】
ステップＳ１４０１：現在の再構成されるべき画像ブロックの量子化パラメータ予測差と、現在の再構成されるべき画像ブロックの量子化係数と、現在の再構成されるべき画像ブロックの符号化スキームと、現在の再構成されるべき画像ブロックの予測信号とを取得するように、符号ストリームをパースし、このとき、符号化スキームは、原解像度符号化スキーム又はダウンサンプリング符号化スキームである。
【０１３９】
ステップＳ１４０２：現在の再構成されるべき画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定する。
【０１４０】
ステップＳ１４０３：現在の再構成されるべき画像ブロックの量子化パラメータ予測子及び量子化パラメータ予測差に基づき、現在の再構成されるべき画像ブロックの量子化パラメータを決定する。
【０１４１】
ステップＳ１４０４：現在の再構成された画像ブロックを取得するように、現在の再構成されるべき画像ブロックの量子化パラメータ、量子化係数、及び予測信号に基づき、現在の再構成されるべき画像ブロックを再構成する。
【０１４２】
ステップＳ１４０１について詳細に記載する。具体的に、量子化パラメータ予測差は、現在の再構成されるべき画像ブロックに対応する量子化パラメータ予測子と、現在の再構成されるべき画像ブロックの量子化パラメータとに基づいて、符号器側によって取得され得る。例えば、符号器側は、現在の再構成されるべき画像ブロックに対応する量子化パラメータ予測子を、現在の再構成されるべき画像ブロックの量子化パラメータから減じて、量子化パラメータ予測差を取得する。代替的に、符号器側は、現在の再構成されるべき画像ブロックに対応する量子化パラメータ予測子を、現在の再構成されるべき画像ブロックの量子化パラメータから減じ、最終的に量子化パラメータ予測差が得られるように差を調整し、量子化パラメータ予測差を符号ストリームに加える。代替的に、符号器側は、現在の再構成されるべき画像ブロックの量子化パラメータを、現在の再構成されるべき画像ブロックに対応する量子化パラメータ予測子から減じて、量子化パラメータ予測差を取得する。代替的に、符号器側は、現在の再構成されるべき画像ブロックの量子化パラメータを、現在の再構成されるべき画像ブロックに対応する量子化パラメータ予測子から減じ、最終的に量子化パラメータ予測差が得られるように差を調整し、量子化パラメータ予測差を符号ストリームに加える。代替的に、量子化パラメータ予測差は、符号器側の設定ファイルから直接取得される量子化パラメータ予測差である。
【０１４３】
前の実施形態では、量子化パラメータ予測差は、現在の画像エリアに対応する量子化パラメータ予測子である点が留意されるべきである。しかし、この実施形態では、量子化パラメータ予測子は、現在の再構成されるべき画像ブロックに対応する量子化パラメータ予測差である。
【０１４４】
現在の再構成されるべき画像ブロックの符号化スキームは、符号ストリームで直接運ばれてよい。１以上のビットが、現在の再構成されるべき画像ブロックの符号化スキームを示すために使用されてよい。例えば、現在の再構成されるべき画像ブロックの符号化スキームを示すために１ビットが使用されるとき、０は、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームであることを示すために使用されてよく、１は、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームであることを示すために使用されてよく、あるいは、１は、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームであることを示すために使用されてよく、０は、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームであることを示すために使用されてよい。
【０１４５】
代替的に、現在の再構成されるべき画像ブロックの符号化スキームは、符号ストリーム内の他のパラメータ情報を使用することによって導出されてもよい。
【０１４６】
復号器側は、現在の再構成されるべき画像ブロックの予測信号を取得するように、現在の再構成されるべき画像ブロックＭ個の参照再構成画像ブロックを使用することによって、現在の再構成されるべき画像ブロックを予測し、このとき、Ｍは、１以上の正の整数である。例えば、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームであり、Ｍ個の参照再構成画像ブロックが、原解像度符号化スキームを使用することによって符号化された参照再構成画像ブロックを含む場合には、現在の再構成されるべき画像ブロックの参照ピクセルは、原解像度符号化スキームを使用することによって符号化された参照再構成画像ブロックのピクセルの中で決定される。現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームであり、Ｍ個の参照再構成画像ブロックが、ダウンサンプリング符号化スキームを使用することによって符号化された参照再構成画像ブロックを含む場合には、現在の再構成されるべき画像ブロックを再構成するために必要とされるピクセルが、ダウンサンプリング符号化スキームを使用することによって符号化された参照再構成画像ブロックのピクセルから取得され、アップサンプリング処理が、現在の再構成されるべき画像ブロックの参照ピクセルを取得するように、現在の再構成されるべき画像ブロックを再構成するために必要とされるピクセルに対して実行される。現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームであり、Ｍ個の参照再構成画像ブロックが、ダウンサンプリング符号化スキームを使用することによって符号化された参照再構成画像ブロックを含む場合には、現在の再構成されるべき画像ブロックの参照ピクセルは、ダウンサンプリング符号化スキームを使用することによって符号化された参照再構成画像ブロックのピクセルの中で決定される。現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームであり、Ｍ個の参照再構成画像ブロックが、原解像度符号化スキームを使用することによって符号化された参照再構成画像ブロックを含む場合には、現在の再構成されるべき画像ブロックを再構成するために必要とされるピクセルが、原解像度符号化スキームを使用することによって符号化された参照再構成画像ブロックのピクセルから取得され、ダウンサンプリング処理が、現在の再構成されるべき画像ブロックの参照ピクセルを取得するように、現在の再構成されるべき画像ブロックを再構成するために必要とされるピクセルに対して実行される。最後に、上記のイントラフレーム予測法によれば、現在の再構成されるべき画像ブロックの予測信号は、現在の再構成されるべき画像ブロックの参照ピクセルを使用することによって取得される。現在の再構成されるべき画像ブロックの予測信号を取得する方法は、本願において限定されない。
【０１４７】
ステップＳ１４０２について詳細に記載する。任意の様態１において、現在の再構成されるべき画像ブロックの量子化パラメータ予測子は、現在の再構成されるべき画像ブロックの符号化スキームに従って直接決定される。例えば、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、現在の再構成されるべき画像ブロックの量子化パラメータ予測子は、量子化パラメータＡとして決定され、あるいは、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、現在の再構成されるべき画像ブロックの量子化パラメータ予測子は、量子化パラメータＢとして決定される。
【０１４８】
任意の様態２において、Ｍ個の再構成された画像ブロックが、前もって設定された規則に従って選択され、Ｍ個の再構成された画像ブロックの量子化パラメータ及びＭ個の再構成された画像ブロックの符号化スキームが取得される。Ｍ個の再構成された画像ブロックは、現在の再構成されるべき画像ブロックと同じ現在の画像エリアに属し、Ｍは正の整数である。現在の再構成されるべき画像ブロックの量子化パラメータ予測子は、Ｍ個の再構成された画像ブロックの量子化パラメータに基づき、現在の再構成されるべき画像ブロックの符号化スキーム及びＭ個の再構成された画像ブロックの符号化スキームに従って決定される。
【０１４９】
前もって設定された規則は、復号化シーケンスにおける現在の再構成されるべき画像ブロックの前の再構成された画像ブロックを選択すること、又は現在の再構成されるべき画像ブロックの上側の再構成された画像ブロック及び左側の再構成された画像ブロックを選択すること、又は復号化シーケンスにおいて、前もって設定された範囲内にある再構成された画像ブロックから、現在の再構成されるべき画像ブロックと同じ符号化スキームを有し且つ現在の再構成されるべき画像ブロックに最も近い再構成された画像ブロックを選択すること、であってよい。前もって設定された規則は、本願において限定されない点が留意されるべきである。
【０１５０】
特に、現在の再構成されるべき画像ブロックが復号化シーケンスにおける現在の画像内の最初の画像ブロックである、すなわち、Ｍ個の再構成された画像ブロックが現在の画像内に存在しない場合に、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームであるときには、原解像度符号化スキームでの現在の画像エリアの第１量子化パラメータが取得され、第１量子化パラメータが現在の再構成されるべき画像ブロックの量子化パラメータ予測子として使用され、あるいは、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームであるときには、ダウンサンプリング符号化スキームでの現在の画像エリアの第２量子化パラメータが取得され、第２量子化パラメータが現在の再構成されるべき画像ブロックの量子化パラメータ予測子として使用される。
【０１５１】
任意の様態３において、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合には、第１量子化パラメータが現在の再構成されるべき画像ブロックの量子化パラメータ予測子として使用され、あるいは、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合には、第２量子化パラメータが現在の再構成されるべき画像ブロックの量子化パラメータ予測子として使用される。第１量子化パラメータは、原解像度符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得される。第２量子化パラメータは、ダウンサンプリング符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得される。現在の再構成されるべき画像ブロックは、現在の画像エリアの部分である。
【０１５２】
任意の様態４において、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合には、第１量子化パラメータが、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を取得するように、量子化パラメータ予測差に基づき補正され、あるいは、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合には、第２量子化パラメータが、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を取得するように、量子化パラメータ予測差に基づき補正される。第１量子化パラメータは、原解像度符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得される。第２量子化パラメータは、ダウンサンプリング符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得される。現在の再構成されるべき画像ブロックは、現在の画像エリアの部分である。
【０１５３】
様態２について詳細に記載する。
【０１５４】
場合１：Ｍ個の再構成された画像ブロックは、１つの再構成された画像ブロックであり、Ｍ個の再構成された画像ブロックの量子化パラメータに基づき、現在の再構成されるべき画像ブロックの符号化スキーム及びＭ個の再構成された画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定することは、１つの再構成された画像ブロックの符号化スキームが現在の再構成されるべき画像ブロックの符号化スキームと同じである場合に、現在の再構成されるべき画像ブロックの量子化パラメータ予測子として１つの再構成された画像ブロックの量子化パラメータを決定すること、又は１つの再構成された画像ブロックの符号化スキームが現在の再構成されるべき画像ブロックの符号化スキームとは異なる場合に、第１量子化パラメータ及び第２量子化パラメータに基づき、１つの再構成された画像ブロックの符号化スキーム及び現在の再構成されるべき画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定することを含む。第１量子化パラメータは、原解像度符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得される。第２量子化パラメータは、ダウンサンプリング符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得される。現在の再構成されるべき画像ブロックは、現在の画像エリアの部分である。
【０１５５】
任意に、１つの再構成された画像ブロックの符号化スキームがダウンサンプリング符号化スキームであり、且つ、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、量子化差分を取得するように第２量子化パラメータが第１量子化パラメータから減じられ、１つの再構成された画像ブロックの量子化パラメータと量子化差分との和が、量子化パラメータ予測子を取得するように計算され、あるいは、１つの再構成された画像ブロックの符号化スキームが原解像度符号化スキームであり、且つ、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、量子化差分を取得するように第２量子化パラメータが第１量子化パラメータから減じられ、１つの再構成された画像ブロックの量子化パラメータと量子化差分との間の差が、量子化パラメータ予測子を取得するように計算される。
【０１５６】
代替的に、Ｍ個の再構成された画像ブロックの符号化スキームが夫々ダウンサンプリング符号化スキームであり、且つ、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、量子化差分を取得するように第２量子化パラメータが第１量子化パラメータから減じられ、量子化差分は補正され、例えば、量子化差分は調整係数を乗じられ、１つの再構成された画像ブロックの量子化パラメータと補正された量子化差分との和が、量子化パラメータ予測子を取得するように計算される。代替的に、１つの再構成された画像ブロックの符号化スキームが原解像度符号化スキームであり、且つ、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、量子化差分を取得するように第２量子化パラメータが第１量子化パラメータから減じられ、量子化差分は補正され、１つの再構成された画像ブロックの量子化パラメータと補正された量子化差分との間の差が、量子化パラメータ予測子を取得するように計算される。
【０１５７】
具体的に、１つの再構成され画像ブロックの符号化スキームが現在の再構成されるべき画像ブロックの符号化スキームと同じである場合に、それは、１つの再構成された画像ブロックの量子化パラメータが量子化パラメータ予測子として直接使用されてよいことを示す。１つの再構成された画像ブロックの符号化スキームがダウンサンプリング符号化スキームであり、且つ、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、それは、量子化パラメータ予測子を取得するために、１つの再構成された画像ブロックの量子化パラメータに値が加えられる必要があることを示す。１つの再構成された画像ブロックの符号化スキームが原解像度符号化スキームであり、且つ、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、それは、量子化パラメータ予測子を取得するために、１つの再構成された画像ブロックの量子化パラメータから値が減じられる必要があることを示す。
【０１５８】
任意に、１つの再構成された画像ブロックは、復号化シーケンスにおける現在の再構成されるべき画像ブロックの前の再構成された画像ブロックである。例えば、Ｈ．２６５標準では、復号化シーケンスが上から下及び左から右であって、現在の再構成されるべき画像ブロックが非左境界画像ブロックであるとすれば、現在の再構成されるべき画像ブロックの前の再構成された画像ブロックは、現在の再構成されるべき画像ブロックの左側にあり、現在の再構成されるべき画像ブロックに隣接している。復号化シーケンスが上から下及び左から右であって、現在の再構成されるべき画像ブロックが左境界画像ブロックであるとすれば、現在の再構成されるべき画像ブロックの前の再構成された画像ブロックは、現在の再構成されるべき画像ブロックの上の行にある最左の再構成された画像ブロックである。
【０１５９】
場合２：Ｍは１よりも大きく、Ｍ個の再構成された画像ブロックの量子化パラメータに基づき、現在の再構成されるべき画像ブロックの符号化スキーム及びＭ個の再構成された画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定することは、Ｍ個の再構成された画像ブロックの符号化スキームが夫々、現在の再構成されるべき画像ブロックの符号化スキームと同じである場合に、現在の再構成されるべき画像ブロックの量子化パラメータ予測子として、Ｍ個の再構成された画像ブロックの量子化パラメータの平均を決定すること、又はＭ個の再構成された画像ブロックの符号化スキームのいずれかが現在の再構成されるべき画像ブロックの符号化スキームとは異なる場合に、第１量子化パラメータ及び第２量子化パラメータに基づき、Ｍ個の再構成された画像ブロックの符号化スキーム及び現在の再構成されるべき画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定することを含む。第１量子化パラメータは、原解像度符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得される。第２量子化パラメータは、ダウンサンプリング符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得される。現在の再構成されるべき画像ブロックは、現在の画像エリアの部分である。
【０１６０】
任意に、Ｍ個の再構成された画像ブロックが、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックを含み、且つ、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、第１量子化パラメータと、第２量子化パラメータと、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとに基づき、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータが計算され、そして、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータに基づき、Ｍ個の再構成された画像ブロックの量子化パラメータの平均が決定される。平均は、現在の再構成されるべき画像ブロックの量子化パラメータ予測子である。Ｍ個の再構成された画像ブロックが、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックを含み、且つ、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータが計算され、第１量子化パラメータと、第２量子化パラメータと、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータと、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータとに基づき、Ｍ個の再構成された画像ブロックの量子化パラメータの平均が決定される。平均は、現在の再構成されるべき画像ブロックの量子化パラメータ予測子である。
【０１６１】
任意に、第１量子化パラメータと、第２量子化パラメータと、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとに基づき、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを計算することは、量子化差分を取得するように第１量子化パラメータから第２量子化パラメータを減じることと、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを取得するように、量子化差分とダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとの和を計算することとを含み、あるいは、量子化差分を取得するように第２量子化パラメータから第１量子化パラメータを減じることと、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを取得するように、量子化差分とダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとの間の差を計算することとを含む。
【０１６２】
これに基づき、任意に、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータに基づき、Ｍ個の再構成された画像ブロックの量子化パラメータの平均を決定することは、Ｍ個の再構成された画像ブロックに含まれ、原解像度符号化スキームを使用することによって符号化されている全て（又はいくつか）の再構成された画像ブロックの補正された量子化パラメータと、Ｍ個の再構成された画像ブロックに含まれ、ダウンサンプリング符号化スキームを使用することによって符号化されている全て（又はいくつかの）再構成された画像ブロックの量子化パラメータとの平均を、現在の再構成されるべき画像ブロックの量子化パラメータ予測子として決定することを含む。
【０１６３】
任意に、第１量子化パラメータと、第２量子化パラメータと、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとに基づき、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを計算することは、量子化差分を取得するように第１量子化パラメータから第２量子化パラメータを減じることと、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを取得するように、量子化差分と原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとの間の差を計算することとを含み、あるいは、量子化差分を取得するように第２量子化パラメータから第１量子化パラメータを減じることと、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを取得するように、量子化差分と原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとの和を計算することとを含む。
【０１６４】
これに基づき、任意に、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータに基づき、Ｍ個の再構成された画像ブロックの量子化パラメータの平均を決定することは、Ｍ個の再構成された画像ブロックに含まれ、ダウンサンプリング符号化スキームを使用することによって符号化されている全て（又はいくつか）の再構成された画像ブロックの補正された量子化パラメータと、Ｍ個の再構成された画像ブロックに含まれ、原解像度符号化スキームを使用することによって符号化されている全て（又はいくつかの）再構成された画像ブロックの量子化パラメータとの平均を、現在の再構成されるべき画像ブロックの量子化パラメータ予測子として決定することを含む。
【０１６５】
任意に、Ｍ個の再構成された画像ブロックは、現在の再構成されるべき画像ブロックの上側の再構成された画像ブロック及び左側の再構成された画像ブロックを含む。
【０１６６】
具体的に、Ｍが２に等しく、Ｍ個の再構成された画像ブロックは、現在の再構成されるべき画像ブロックの上側の再構成された画像ブロック及び左側の再構成された画像ブロックであり、現在の再構成されるべき画像ブロック、上側の再構成された画像ブロック、及び左側の再構成された画像ブロックは、全て、原解像度符号化スキーム又はダウンサンプリング符号化スキームを使用することによって符号化されると仮定される。この場合に、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を取得するために、上側の再構成された画像ブロックの量子化パラメータ及び左側の再構成された画像ブロックの量子化パラメータの平均が計算される。現在の再構成されるべき画像ブロック及び上側の再構成された画像ブロックは両方とも、原解像度符号化スキームを使用することによって符号化され、左側の再構成された画像ブロックは、ダウンサンプリング符号化スキームを使用することによって符号化されると仮定される。この場合に、第１量子化パラメータと第２量子化パラメータとの間の量子化差分が計算され、左側の再構成された画像ブロックの量子化パラメータと量子化差分との和が、左側の再構成された画像ブロックの補正された量子化パラメータを取得するように計算され、上側の再構成された画像ブロックの量子化パラメータ及び左側の再構成された画像ブロックの補正された量子化パラメータの平均が、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を取得するように計算される。現在の再構成されるべき画像ブロック及び上側の再構成された画像ブロックは両方とも、ダウンサンプリング符号化スキームを使用することによって符号化され、左側の再構成された画像ブロックは、原解像度符号化スキームを使用することによって符号化されると仮定される。この場合に、第１量子化パラメータと第２量子化パラメータとの間の量子化差分が計算され、左側の再構成された画像ブロックの量子化パラメータと量子化差分との間の差が、左側の再構成された画像ブロックの補正された量子化パラメータを取得するように計算され、上側の再構成された画像ブロックの量子化パラメータ及び左側の再構成された画像ブロックの補正された量子化パラメータの平均が、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を取得するように計算される。
【０１６７】
現在の再構成されるべき画像ブロックの量子化パラメータ予測子は、通常は、場合２の方法で決定される点が留意されるべきである。現在の再構成されるべき画像ブロックにおいて左側の再構成された画像ブロック又は上側の再構成された画像ブロックが存在しないときに、現在の再構成されるべき画像ブロックの量子化パラメータ予測子は、場合１の方法で決定されてよい。
【０１６８】
場合３：Ｍ個の再構成された画像ブロックは、１つの再構成された画像ブロックであり、Ｍ個の再構成された画像ブロックの量子化パラメータ及びＭ個の再構成された画像ブロックの符号化スキームを取得することは、現在の再構成されるべき画像ブロックと同じ符号化スキームを有している再構成された画像ブロックを、前もって設定された範囲内にある再構成された画像ブロックから探すことを含む。前もって設定された範囲は、現在の画像エリア内の前もって設定された範囲である。任意に、前もって設定された範囲は、現在の再構成されるべき画像ブロックより前に位置し、再構成された画像ブロックが選択される再構成された画像ブロックの数量であってよく、あるいは、前もって設定された範囲は、再構成された画像ブロックが選択されるスライスであってよい。再構成された画像ブロックが見つけられた後、その再構成された画像ブロックの量子化パラメータが取得される。相応して、Ｍ個の再構成された画像ブロックの量子化パラメータに基づき、現在の再構成されるべき画像ブロックの符号化スキーム及びＭ個の再構成された画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定することは、現在の再構成されるべき画像ブロックの量子化パラメータ予測子として、その再構成された画像ブロックの量子化パラメータを使用することを含む。
【０１６９】
任意に、１つの再構成された画像ブロックは、復号化シーケンスにおいて、前もって設定された範囲内にある再構成された画像ブロックの中にあって、現在の再構成されるべき画像ブロックに最も近い再構成された画像ブロックである。
【０１７０】
現在の再構成されるべき画像ブロックと同じ符号化スキームを有している再構成された画像ブロックは、次の２つの任意の様態において、現在の画像エリアにおいて前もって設定された範囲内にある再構成された画像ブロックから見つけられる。
【０１７１】
様態１：現在の再構成されるべき画像ブロックの前の再構成された画像ブロックの符号化スキームが、復号化シーケンスで決定される。現在の再構成されるべき画像ブロックの符号化スキームが、前の再構成された画像ブロックの符号化スキームと同じである場合には、前の再構成された画像ブロックの量子化パラメータが、現在の再構成されるべき画像ブロックの量子化パラメータ予測子として使用される。現在の再構成されるべき画像ブロックの符号化スキームが、前の再構成された画像ブロックの符号化スキームとは異なる場合には、前の再構成された画像ブロックより前にある再構成された画像ブロックの符号化スキームが決定される。現在の再構成されるべき画像ブロックの符号化スキームが、前の再構成された画像ブロックより前にある再構成された画像ブロックの符号化スキームと同じである場合には、前の再構成された画像ブロックより前にある再構成された画像ブロックの量子化パラメータが、現在の再構成されるべき画像ブロックの量子化パラメータ予測子として使用され、そうでない場合には、現在の再構成されるべき画像ブロックと同じ符号化スキームを有している再構成された画像ブロックが見つけられ、その再構成された画像ブロックの量子化パラメータが現在の再構成されるべき画像ブロックの量子化パラメータ予測子として使用されるまで、上記の方法が引き続き実行される。現在の再構成されるべき画像ブロックと同じ符号化スキームを有している再構成された画像ブロックは、通常は、スライスを横断することなしに探索され、すなわち、現在の再構成されるべき画像ブロックが位置しているスライス内で探索される。
【０１７２】
様態２：ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの最新の量子化パラメータが変数ＱＰｄｏｗｎｐｒｅｖに割り当てられ、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの最新の量子化パラメータが変数ＱＰｏｒｇｐｒｅｖに割り当てられる。例えば、復号化シーケンスにおいて、最初の再構成された画像ブロックの符号化スキームが原解像度符号化スキームである場合に、最初の再構成された画像ブロックの量子化パラメータはＱＰｏｒｇｐｒｅｖに割り当てられ、第２の再構成された画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、第２の再構成された画像ブロックの量子化パラメータはＱＰｄｏｗｎｐｒｅｖに割り当てられ、第３の再構成された画像ブロックの符号化スキームが原解像度符号化スキームである場合に、第３の再構成された画像ブロックの量子化パラメータはＱＰｏｒｇｐｒｅｖに割り当てられる、など。このようにして、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの最新の量子化パラメータは、変数ＱＰｄｏｗｎｐｒｅｖに割り当てられ、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの最新の量子化パラメータは、変数ＱＰｏｒｇｐｒｅｖに割り当てられる。現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合には、ＱＰｏｒｇｐｒｅｖに対応する量子化パラメータが、現在の再構成されるべき画像ブロックの量子化パラメータ予測子として使用される。現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合には、ＱＰｄｏｗｎｐｒｅｖに対応する量子化パラメータが、現在の再構成されるべき画像ブロックの量子化パラメータ予測子として使用される。
【０１７３】
上記の任意の様態４について詳細に記載する。現在の再構成されるべき画像ブロックの量子化パラメータ予測子を取得するように、量子化パラメータ予測差に基づき第１量子化パラメータを補正することは、第１量子化パラメータから量子化パラメータ予測差を減じて、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を取得すること、又は第１量子化パラメータから量子化パラメータ予測差を減じ、次いで、差を補正して、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を取得することを含む。同様に、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を取得するように、量子化パラメータ予測差に基づき第２量子化パラメータを補正することは、第２量子化パラメータから量子化パラメータ予測差を減じて、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を取得すること、又は第２量子化パラメータから量子化パラメータ予測差を減じ、次いで、差を補正して、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を取得することを含む。
【０１７４】
ステップＳ１４０３について詳細に記載する。任意に、復号器側は、量子化パラメータ予測子を計算する方法を符号器側と事前交渉する。これに基づき、復号器側は、量子化パラメータ予測子を計算する方法に従って、現在の再構成されるべき画像ブロックの量子化パラメータを逆算してよい。例えば、符号器側が、量子化パラメータ予測差を取得するように、現在の再構成されるべき画像ブロックの量子化パラメータと、現在の再構成されるべき画像ブロックの量子化パラメータ予測子との間の差を計算する場合に、復号器側は、現在の再構成されるべき画像ブロックの量子化パラメータを取得するように、量子化パラメータ予測子と現在の再構成されるべき画像ブロックの量子化パラメータ予測差との和を計算してよい。符号器側が、現在の再構成されるべき画像ブロックの量子化パラメータと現在の再構成されるべき画像ブロックに対応する量子化パラメータ予測子との間の差を計算し、次いで、差に調整係数を乗じて、最終的に量子化パラメータ予測差を取得する場合に、復号器側は、最初に、量子化パラメータ予測差と調整係数との商を計算して除算結果を取得し、次いで、現在の再構成されるべき画像ブロックの量子化パラメータ予測子と除算結果との和を計算して、現在の再構成されるべき画像ブロックの量子化パラメータを取得してよい。
【０１７５】
任意に、復号器側は、量子化パラメータ予測子を計算する方法を符号器側と事前交渉せずに、方法を符号ストリームに加えてもよい。代替的に、符号器側が最初にメッセージを復号器側へ送り、メッセージが方法を運ぶ。
【０１７６】
ステップＳ１４０４はステップＳ１３０３と同じであり、対応する内容及び効果は、再びここで記載されない。
【０１７７】
任意に、ステップＳ１４０４の後で、方法は、現在の符号化されるべき画像ブロックの再構成信号を生成することと、現在の再構成された画像ブロックを取得するように、現在の符号化されるべき画像ブロックを再構成信号に基づいて再構成することと、現在の再構成された画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、現在の再構成された画像ブロックに対してアップサンプリング処理を実行するために必要とされる隣接再構成画像ブロックのピクセルに基づき、現在の再構成された画像ブロックに対してアップサンプリング処理を実行することとを更に含む。現在の再構成された画像ブロックに対して実行されるアップサンプリング処理に関する詳細については、上記のアップサンプリング処理方法を参照されたい。現在の再構成された画像ブロックに対してアップサンプリング処理を実行するために必要とされる隣接再構成画像ブロックは、アップサンプリング処理を実行するために復号器側によって使用されるフィルタに関係がある。例えば、必要とされる隣接再構成画像ブロックは、上画像ブロック、下画像ブロック、左画像ブロック、及び右画像ブロックであってよい。代替的に、必要とされる隣接再構成画像ブロックは、現在の再構成された画像ブロックの上画像ブロック、下画像ブロック、左画像ブロック、右画像ブロック、左上画像ブロック、左下画像ブロック、右上画像ブロック、及び右下画像ブロックを含む。アップサンプリング処理のプロセスは、本願において限定されない。
【０１７８】
結論として、画像ブロックは本願では各々の特徴を有しており、符号器側は異なるように画像ブロックを符号化するので、復号器側は、現在の再構成されるべき画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータを決定してよい。すなわち、量子化パラメータは、現在の再構成されるべき画像ブロックを再構成するために適切である。従って、復号器側によって取得される再構成された画像ブロックは、より良い効果を有する。
【０１７９】
図１５は、本願の更なる他の実施形態に従う画像処理方法のフローチャートである。図１５に示されるように、方法は、次のプロシージャを含む。
【０１８０】
ステップＳ１５０１：原解像度符号化スキームでの現在の画像エリアの第１量子化パラメータと、ダウンサンプリング符号化スキームでの現在の画像エリアの第２量子化パラメータと、現在の画像エリア内の現在の符号化されるべき画像ブロックの符号化スキームと、現在の符号化されるべき画像ブロックの符号化された信号と、現在の符号化されるべき画像ブロックの予測信号とを取得する。
【０１８１】
ステップＳ１５０２：現在の符号化されるべき画像ブロックの符号化スキームに従って、現在の符号化されるべき画像ブロックの量子化パラメータを決定し、このとき、現在の符号化されるべき画像ブロックの量子化パラメータは、第１量子化パラメータ又は第２量子化パラメータであり、あるいは、現在の符号化されるべき画像ブロックの量子化パラメータは、第１量子化パラメータを補正することによって取得される量子化パラメータ、又は第２量子化パラメータを補正することによって取得される量子化パラメータである。
【０１８２】
ステップＳ１５０３：予測信号及び符号化された信号に基づき、現在の符号化されるべき画像ブロックの残留信号を生成する。
【０１８３】
ステップＳ１５０４：現在の符号化されるべき画像ブロックの量子化パラメータに基づき、残留信号を符号化する。
【０１８４】
ステップＳ１５０１について詳細に記載する。具体的に、第１量子化パラメータは、原解像度符号化スキームにおけるビデオレベル（シーケンスレベル）、画像レベル、又は画像スライス（Slice）レベルでの量子化パラメータであってよい。本発明のこの実施形態での画像エリアは画像であってよく、あるいは、画像スライスであってもよい。一例としてビデオレベルを使用することによって、原解像度符号化スキームが同じビデオ内の画像の各フレーム及び画像の各フレーム内の各画像ブロックに使用されるという条件で、第１量子化パラメータは使用され得る。一例として画像レベルを使用することによって、原解像度符号化スキームが同じ画像内の各画像ブロックに使用されるという条件で、第１量子化パラメータは使用され得る。一例として画像スライス（Slice）レベルを使用することによって、原解像度符号化スキームが同じ画像スライス（Slice）内の各画像ブロックに使用されるという条件で、第１量子化パラメータは使用され得る。同様に、第２量子化パラメータは、ダウンサンプリング符号化スキームにおけるビデオレベル（シーケンスレベル）、画像レベル、又は画像スライス（Slice）レベルでの量子化パラメータであってよい。
【０１８５】
任意に、第１量子化パラメータがビデオレベルでの量子化パラメータである場合には、第２量子化パラメータもビデオレベルでの量子化パラメータである。同様に、第１量子化パラメータが画像レベルでの量子化パラメータである場合には、第２量子化パラメータも画像レベルでの量子化パラメータである。第１量子化パラメータが画像スライスレベルでの量子化パラメータである場合には、第２量子化パラメータも画像スライスレベルでの量子化パラメータである。
【０１８６】
第１量子化パラメータの値範囲については、既存の標準を参照されたい。例えば、第１量子化パラメータは、Ｈ．２６５では、０から５１の範囲をとり、第２量子化パラメータは、通常は、第１量子化パラメータよりも小さい。
【０１８７】
任意に、第１量子化パラメータ及び第２量子化パラメータを取得することは、次を含む：第１量子化パラメータ及び第２量子化パラメータは、符号器側の設定ファイルから直接取得される。
【０１８８】
代替的に、第１量子化パラメータ、及び現在の画像エリアの量子化パラメータ予測差が、符号器側の設定ファイルから直接取得される。量子化パラメータ予測差によって表される意味は、第２量子化パラメータを第１量子化パラメータから減じることによって取得される差であってよい。この場合に、ダウンサンプリング符号化スキームでの現在の画像エリアの第２量子化パラメータを取得することは、第２量子化パラメータを取得するように、第１量子化パラメータと量子化パラメータ予測差との間の差を計算することを含む。代替的に、量子化パラメータ予測差によって表される意味は、第１量子化パラメータを第２量子化パラメータから減じることによって取得される差であってよい。この場合に、ダウンサンプリング符号化スキームでの現在の画像エリアの第２量子化パラメータを取得することは、第２量子化パラメータを取得するように、第１量子化パラメータと量子化パラメータ予測差との和を計算することを含む。
【０１８９】
代替的に、第２量子化パラメータ、及び現在の画像エリアの量子化パラメータ予測差が、符号器側の設定ファイルから直接取得される。量子化パラメータ予測差によって表される意味は、上記の量子化パラメータ予測差のそれと同じである。第１量子化パラメータは、第２量子化パラメータ及び量子化パラメータ予測差に基づき決定され得る。第１量子化パラメータを決定する具体的な方法は、第２量子化パラメータを決定する方法と同様であり、詳細は、再びここで記載されない。
【０１９０】
現在の符号化されるべき画像ブロックの符号化スキームは、原解像度符号化スキーム又はダウンサンプリング符号化スキームである。現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームであるとき、符号化された信号は、現在の符号化されるべき画像ブロックの原信号であり、あるいは、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームであるとき、符号化された信号は、現在の符号化されるべき画像ブロックの原信号に対してダウンサンプリング処理が実行された後に取得される信号である。
【０１９１】
現在の符号化されるべき画像ブロックの符号化スキームは、次のいくつかの任意の様態で取得される。
【０１９２】
任意の様態１：現在の符号化されるべき画像ブロックの符号化スキームは、直接取得される。すなわち、現在の符号化されるべき画像ブロックの符号化スキームは決定される。
【０１９３】
任意の様態２：最初に、現在の符号化されるべき画像ブロックに対して原解像度符号化スキームが使用されるときに使用される符号化コストが、第１量子化パラメータに基づき決定され、現在の符号化されるべき画像ブロックに対してダウンサンプリング符号化スキームが使用されるときに使用される符号化コストが、第２量子化パラメータに基づき決定され、第１符号化コスト及び第２符号化コストの中で最も低い符号化コストに対応する符号化スキームが、現在の符号化されるべき画像ブロックの符号化スキームとして使用される。
【０１９４】
任意に、符号器側は、レート歪み最適化（Rate  Distortion  Optimization，ＲＤＯ）
法を使用することによって、現在の符号化された画像ブロックの符号化コストを計算してよい。ＲＤＯ法は、ビデオ圧縮性能を改善する最適な方法である。ＲＤＯ法の原理は、ビデオの損失（画像品質）及びビットレート（符号化に必要とされるデータ量）が、最適な平衡点を達成するように同時に最適化されることである。このアルゴリズムは、当初は、ビデオ圧縮の間に符号器によって使用される。しかし、アルゴリズムはまた、品質及びファイルサイズの両方が符号化の間に考慮されるという条件で、ビデオ及びオーディオを含む様々なマルチメディアを符号化するためにも使用され得る。
【０１９５】
任意に、ＲＤＯ法を使用することによって符号化コストを計算するプロセスは、次の通りである：現在の符号化されるべき画像ブロックは原解像度符号化スキームを使用することによって符号化されるとすると、現在の符号化されるべき画像ブロックの量子化係数を取得した後に、符号器側は、第１量子化パラメータに基づき、現在の符号化されるべき画像ブロックの量子化係数に対して逆量子化を実行して、変換係数を取得し、変換係数に対して逆変換を実行して、再構成された残留信号を取得し、再構成された残留信号と、現在の符号化されるべき画像ブロックに対応する予測信号とを足し合わせて、現在の符号化されるべき画像ブロックの再構成信号を取得し、再構成信号に基づいて、現在の再構成された画像ブロックを取得する必要がある。現在の再構成された画像ブロックと符号化されるべき画像ブロックとの間の誤差が計算され、誤差が小さいほど、第１符号化コストは低い。現在の再構成された画像ブロックと符号化されるべき画像ブロックとの間の誤差を計算することは、現在の再構成された画像ブロック内の各ピクセルと、符号化されるべき画像ブロック内の対応するピクセルとの間の差を計算して、対応する差を取得することと、現在の再構成された画像ブロックにおける全ての差の加重平均を計算することと、最後に、現在の再構成された画像ブロックと符号化されるべき画像ブロックとの間の誤差を取得することとを含む。
【０１９６】
現在の符号化されるべき画像ブロックはダウンサンプリング符号化スキームを使用することによって符号化されるとすると、現在の符号化されるべき画像ブロックの量子化係数を取得した後に、符号器側は、第２量子化パラメータに基づき、現在の符号化されるべき画像ブロックの量子化係数に対して逆量子化を実行して、変換係数を取得し、変換係数に対して逆変換を実行して、再構成された残留信号を取得し、再構成された残留信号と、現在の符号化されるべき画像ブロックに対応する予測信号とを足し合わせて、現在の符号化されるべき画像ブロックの再構成信号を取得し、再構成信号に基づいて、現在の再構成された画像ブロックを取得する必要がある。現在の再構成された画像ブロックと符号化されるべき画像ブロックとの間の誤差が計算され、誤差が小さいほど、第２符号化コストは低い。現在の再構成された画像ブロックと符号化されるべき画像ブロックとの間の誤差を計算することは、現在の再構成された画像ブロック内の各ピクセルと、符号化されるべき画像ブロック内の対応するピクセルとの間の差を計算して、対応する差を取得することと、現在の再構成された画像ブロックにおける全ての差の加重平均を計算することと、最後に、現在の再構成された画像ブロックと符号化されるべき画像ブロックとの間の誤差を取得することとを含む。
【０１９７】
任意に、量子化パラメータと符号化コストとの間には一定のマッピング関係があると仮定される。この場合に、現在の符号化されるべき画像ブロックに原解像度符号化スキームが使用されるときに使用される第１符号化コストは、第１量子化パラメータに基づき直接決定され、現在の符号化されるべき画像ブロックにダウンサンプリング符号化スキームが使用されるときに使用される第２符号化コストは、第２量子化パラメータに基づき直接決定され、第１符号化コスト及び第２符号化コストの中の最低符号化コストに対応する符号化スキームが、現在の符号化されるべき画像ブロックの符号化スキームとして使用される。
【０１９８】
これに基づき、本願では、符号化されるべき画像ブロックに使用される符号化スキームは、最低限の符号化コストを有する符号化スキームである。これは、符号器側によって実行される符号化をより容易にし、符号器側の符号化効率を改善する。
任意の様態３：第１量子化パラメータは、少なくとも１つの第３量子化パラメータを取得するように、少なくとも１回補正され、第２量子化パラメータは、少なくとも１つの第４量子化パラメータを取得するように、少なくとも１回補正され、第３量子化パラメータに基づいて、現在の符号化されるべき画像ブロック符号化に原解像度符号化スキームが使用されるときに使用される第３符号化コストが決定され、第４量子化パラメータに基づいて、現在の符号化されるべき画像ブロックにダウンサンプリング符号化スキームが使用されるときに使用される第４符号化コストが決定され、第３符号化コスト及び第４符号化コストの中の最低符号化コストに対応する符号化スキームが、現在の符号化されるべき画像ブロックの符号化スキームとして使用される。
【０１９９】
例えば、第１量子化パラメータは２回補正され、これは、３を第１量子化パラメータから減じることによって、第３量子化パラメータが取得されるように、最初に第１量子化パラメータを補正することと、６を第１量子化パラメータから減じることによって、第３量子化パラメータが取得されるように、２回目に第１量子化パラメータを補正することとを含む。第２量子化パラメータは２回補正され、これは、３を第２量子化パラメータから減じることによって、第４量子化パラメータが取得されるように、最初に第２量子化パラメータを補正することと、６を第２量子化パラメータから減じることによって、第４量子化パラメータが取得されるように、２回目に第２量子化パラメータを補正することとを含む。次いで、第３符号化コスト及び第４符号化コストは、上記の方法と同様の方法を使用することによって決定されてよく、第３符号化コスト及び第４符号化コストのうちの低い方の符号化コストに対応する符号化スキームが、現在の符号化されるべき画像ブロックの符号化スキームとして使用される。
【０２００】
更に、符号器側は、現在の符号化されるべき画像ブロックの予測信号を取得するように、現在の符号化されるべき画像ブロックのＭ個の参照再構成画像ブロックを使用することによって、現在の符号化されるべき画像ブロックを予測し、このとき、Ｍは、１以上の正の整数である。例えば、現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームであり、Ｍ個の参照再構成画像ブロックが、原解像度符号化スキームを使用することによって符号化された参照再構成画像ブロックを含む場合には、現在の符号化されるべき画像ブロックの参照ピクセルは、原解像度符号化スキームを使用することによって符号化された参照再構成画像ブロックのピクセルの中で決定される。現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームであり、Ｍ個の参照再構成画像ブロックが、ダウンサンプリング符号化スキームを使用することによって符号化された参照再構成画像ブロックを含む場合には、現在の符号化されるべき画像ブロックを再構成するために必要とされるピクセルが、ダウンサンプリング符号化スキームを使用することによって符号化された参照再構成画像ブロックのピクセルから取得され、アップサンプリング処理が、現在の符号化されるべき画像ブロックの参照ピクセルを取得するように、現在の符号化されるべき画像ブロックを再構成するために必要とされるピクセルに対して実行される。現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームであり、Ｍ個の参照再構成画像ブロックが、ダウンサンプリング符号化スキームを使用することによって符号化された参照再構成画像ブロックを含む場合には、現在の符号化されるべき画像ブロックの参照ピクセルは、ダウンサンプリング符号化スキームを使用することによって符号化された参照再構成画像ブロックのピクセルの中で決定される。現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームであり、Ｍ個の参照再構成画像ブロックが、原解像度符号化スキームを使用することによって符号化された参照再構成画像ブロックを含む場合には、現在の符号化されるべき画像ブロックを再構成するために必要とされるピクセルが、原解像度符号化スキームを使用することによって符号化された参照再構成画像ブロックのピクセルから取得され、ダウンサンプリング処理が、現在の符号化されるべき画像ブロックの参照ピクセルを取得するように、現在の符号化されるべき画像ブロックを再構成するために必要とされるピクセルに対して実行される。最後に、上記のイントラフレーム予測法によれば、現在の符号化されるべき画像ブロックの予測信号は、現在の符号化されるべき画像ブロックの参照ピクセルを使用することによって取得される。現在の符号化されるべき画像ブロックの予測信号を取得する方法は、本願において限定されない。
【０２０１】
ステップＳ１５０３について詳細に記載する。現在の符号化されるべき画像ブロックの残留信号を取得するために、符号化された信号と、現在の符号化されるべき画像ブロックの予測信号との間の差が、計算される。現在の符号化されるべき画像ブロックの残留信号を計算する方法は、本願において限定されない。
【０２０２】
ステップＳ１５０４について詳細に記載する。変換操作及び量子化操作が残留信号に対して実行され、変換及び量子化の後に、量子化係数が取得される。残留信号を符号化する方法は、本願において限定されない。いくつかの実施形態において、量子化操作は、量子化係数を取得するように、残留信号に対して直接実行されてよい。すなわち、変換操作は残留信号に対して実行されない。例えば、変換操作は、変換スキップモード（Transform  skip  mode）では、残留信号に対して実行される必要がない。
【０２０３】
符号化スキームを取得する第２の任意の様態に従って、ステップＳ１５０２について詳細に記載する。現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、現在の符号化されるべき画像ブロックの量子化パラメータは第１量子化パラメータとして決定され、あるいは、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、現在の符号化されるべき画像ブロックの量子化パラメータは第２量子化パラメータとして決定される。
【０２０４】
更に、画像処理方法は、符号ストリームを生成することを含む。符号ストリームは、第１量子化パラメータと、第２量子化パラメータと、現在の符号化されるべき画像ブロックの符号化スキームとを含むか、あるいは、符号ストリームは、第１量子化パラメータと、現在の画像エリアの量子化パラメータ予測差と、現在の符号化されるべき画像ブロックの符号化スキームとを含む。符号ストリームを取得するために、現在の符号化されるべき画像ブロックの量子化パラメータに対して、エントロピー符号化が実行される。
【０２０５】
符号化スキームを取得する第３の任意の様態に従って、ステップＳ１５０２について詳細に記載する。現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、少なくとも１つの第３量子化パラメータの１つが、現在の符号化されるべき画像ブロックの量子化パラメータとして決定され、あるいは、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、少なくとも１つの第４量子化パラメータの１つが、現在の符号化されるべき画像ブロックの量子化パラメータとして決定される。
【０２０６】
任意に、現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、最も低い第３符号化コストに対応する第３量子化パラメータが、現在の符号化されるべき画像ブロックの量子化パラメータとして、全ての第３符号化コストのから選択され、あるいは、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、最も低い第４符号化コストに対応する第４量子化パラメータが、現在の符号化されるべき画像ブロックの量子化パラメータとして、全ての第４符号化コストから選択される。
【０２０７】
更に、画像処理方法は、現在の符号化されるべき画像ブロックの量子化パラメータ予測子を取得することと、量子化パラメータ予測子及び現在の符号化されるべき画像ブロックの量子化パラメータに基づき、現在の符号化されるべき画像ブロックの量子化パラメータ予測差を計算することと、符号ストリームを生成することとを含む。符号ストリームは、現在の符号化されるべき画像ブロックの符号化スキームと、現在の符号化されるべき画像ブロックの量子化パラメータ予測差とを含む。
【０２０８】
符号器側は、現在の符号化されるべき画像ブロックに対応する量子化パラメータ予測子を、現在の符号化されるべき画像ブロックの量子化パラメータから減じて、量子化パラメータ予測差を取得する。代替的に、符号器側は、現在の符号化されるべき画像ブロックに対応する量子化パラメータ予測子を、現在の符号化されるべき画像ブロックの量子化パラメータから減じ、最終的に量子化パラメータ予測差が得られるように差を調整し、量子化パラメータ予測差を符号ストリームに加える。代替的に、符号器側は、現在の符号化されるべき画像ブロックの量子化パラメータを、現在の符号化されるべき画像ブロックに対応する量子化パラメータ予測子から減じて、量子化パラメータ予測差を取得する。代替的に、符号器側は、現在の符号化されるべき画像ブロックの量子化パラメータを、現在の符号化されるべき画像ブロックに対応する量子化パラメータ予測子から減じ、次いで、最終的に量子化パラメータ予測差が得られるように差を調整する。代替的に、量子化パラメータ予測差は、符号器側の設定ファイルから直接取得される量子化パラメータ予測差である。
【０２０９】
現在の符号化されるべき画像ブロックの量子化パラメータ予測子は、次のいくつかの任意の様態で取得される。
【０２１０】
任意の様態で、現在の符号化されるべき画像ブロックの量子化パラメータ予測子は、現在の符号化されるべき画像ブロックの符号化スキームに従って直接決定される。例えば、現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、現在の符号化されるべき画像ブロックの量子化パラメータ予測子は、量子化パラメータＡとして決定され、あるいは、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、現在の符号化されるべき画像ブロックの量子化パラメータ予測子は、量子化パラメータＢとして決定される。
【０２１１】
任意の様態２において、Ｍ個の再構成された画像ブロックが、前もって設定された規則に従って選択され、Ｍ個の再構成された画像ブロックの量子化パラメータ及びＭ個の再構成された画像ブロックの符号化スキームが取得され、このとき、Ｍ個の再構成された画像ブロックは、現在の符号化されるべき画像ブロックと同じ現在の画像エリアに属し、Ｍは正の整数であり、現在の符号化されるべき画像ブロックの量子化パラメータ予測子は、Ｍ個の再構成された画像ブロックの量子化パラメータに基づき、現在の符号化されるべき画像ブロックの符号化スキーム及びＭ個の再構成された画像ブロックの符号化スキームに従って決定される。
【０２１２】
前もって設定された規則は、符号化シーケンスにおける現在の符号化されるべき画像ブロックの前の再構成された画像ブロックを選択すること、又は現在の符号化されるべき画像ブロックの上側の再構成された画像ブロック及び左側の再構成された画像ブロックを選択すること、又は符号化シーケンスにおいて、前もって設定された範囲内にある再構成された画像ブロックから、現在の符号化されるべき画像ブロックと同じ符号化スキームを有し且つ現在の符号化されるべき画像ブロックに最も近い再構成された画像ブロックを選択すること、であってよい。前もって設定された規則は、本願において限定されない点が留意されるべきである。
【０２１３】
特に、現在の符号化されるべき画像ブロックが符号化シーケンスにおける現在の画像内の最初の画像ブロックである、すなわち、Ｍ個の再構成された画像ブロックが現在の画像内に存在しない場合に、現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームであるときには、原解像度符号化スキームでの現在の画像エリアの第１量子化パラメータが取得され、第１量子化パラメータが現在の符号化されるべき画像ブロックの量子化パラメータ予測子として使用され、あるいは、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームであるときには、ダウンサンプリング符号化スキームでの現在の画像エリアの第２量子化パラメータが取得され、第２量子化パラメータが現在の符号化されるべき画像ブロックの量子化パラメータ予測子として使用される。
【０２１４】
任意の様態３において、現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合には、第１量子化パラメータが現在の符号化されるべき画像ブロックの量子化パラメータ予測子として使用され、あるいは、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合には、第２量子化パラメータが現在の符号化されるべき画像ブロックの量子化パラメータ予測子として使用される。
【０２１５】
様態２について詳細に記載する。
【０２１６】
場合１：Ｍ個の再構成された画像ブロックは、１つの再構成された画像ブロックであり、Ｍ個の再構成された画像ブロックの量子化パラメータに基づき、現在の符号化されるべき画像ブロックの符号化スキーム及びＭ個の再構成された画像ブロックの符号化スキームに従って、現在の符号化されるべき画像ブロックの量子化パラメータ予測子を決定することは、１つの再構成された画像ブロックの符号化スキームが現在の符号化されるべき画像ブロックの符号化スキームと同じである場合に、現在の符号化されるべき画像ブロックの量子化パラメータ予測子として１つの再構成された画像ブロックの量子化パラメータを決定すること、又は１つの再構成された画像ブロックの符号化スキームが現在の符号化されるべき画像ブロックの符号化スキームとは異なる場合に、第１量子化パラメータ及び第２量子化パラメータに基づき、１つの再構成された画像ブロックの符号化スキーム及び現在の符号化されるべき画像ブロックの符号化スキームに従って、現在の符号化されるべき画像ブロックの量子化パラメータ予測子を決定することを含む。
【０２１７】
任意に、１つの再構成された画像ブロックの符号化スキームがダウンサンプリング符号化スキームであり、且つ、現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、量子化差分を取得するように第２量子化パラメータが第１量子化パラメータから減じられ、１つの再構成された画像ブロックの量子化パラメータと量子化差分との和が、量子化パラメータ予測子を取得するように計算され、あるいは、１つの再構成された画像ブロックの符号化スキームが原解像度符号化スキームであり、且つ、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、量子化差分を取得するように第２量子化パラメータが第１量子化パラメータから減じられ、１つの再構成された画像ブロックの量子化パラメータと量子化差分との間の差が、量子化パラメータ予測子を取得するように計算される。
【０２１８】
代替的に、Ｍ個の再構成された画像ブロックの符号化スキームが夫々ダウンサンプリング符号化スキームであり、且つ、現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、量子化差分を取得するように第２量子化パラメータが第１量子化パラメータから減じられ、次いで、量子化差分は補正される。例えば、量子化差分は調整係数を乗じられる。１つの再構成された画像ブロックの量子化パラメータと補正された量子化差分との和が、量子化パラメータ予測子を取得するように計算される。代替的に、１つの再構成された画像ブロックの符号化スキームが原解像度符号化スキームであり、且つ、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、量子化差分を取得するように第２量子化パラメータが第１量子化パラメータから減じられ、量子化差分は補正され、１つの再構成された画像ブロックの量子化パラメータと補正された量子化差分との間の差が、量子化パラメータ予測子を取得するように計算される。
【０２１９】
具体的に、１つの再構成され画像ブロックの符号化スキームが現在の符号化されるべき画像ブロックの符号化スキームと同じである場合に、それは、１つの再構成された画像ブロックの量子化パラメータが量子化パラメータ予測子として直接使用されてよいことを示す。１つの再構成された画像ブロックの符号化スキームがダウンサンプリング符号化スキームであり、且つ、現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、それは、量子化パラメータ予測子を取得するために、１つの再構成された画像ブロックの量子化パラメータに値が加えられる必要があることを示す。１つの再構成された画像ブロックの符号化スキームが原解像度符号化スキームであり、且つ、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、それは、量子化パラメータ予測子を取得するために、１つの再構成された画像ブロックの量子化パラメータから値が減じられる必要があることを示す。
【０２２０】
任意に、１つの再構成された画像ブロックは、符号化シーケンスにおける現在の符号化されるべき画像ブロックの前の再構成された画像ブロックである。例えば、Ｈ．２６５標準では、符号化シーケンスが上から下及び左から右であって、現在の符号化されるべき画像ブロックが非左境界画像ブロックであるとすれば、現在の符号化されるべき画像ブロックの前の再構成された画像ブロックは、現在の符号化されるべき画像ブロックの左側にあり、現在の符号化されるべき画像ブロックに隣接している。符号化シーケンスが上から下及び左から右であって、現在の符号化されるべき画像ブロックが左境界画像ブロックであるとすれば、現在の符号化されるべき画像ブロックの前の再構成された画像ブロックは、現在の符号化されるべき画像ブロックの上の行にある最右の再構成された画像ブロックである。
【０２２１】
場合２：Ｍは１よりも大きく、Ｍ個の再構成された画像ブロックの量子化パラメータに基づき、現在の符号化されるべき画像ブロックの符号化スキーム及びＭ個の再構成された画像ブロックの符号化スキームに従って、現在の符号化されるべき画像ブロックの量子化パラメータ予測子を決定することは、Ｍ個の再構成された画像ブロックの符号化スキームが夫々、現在の符号化されるべき画像ブロックの符号化スキームと同じである場合に、現在の符号化されるべき画像ブロックの量子化パラメータ予測子として、Ｍ個の再構成された画像ブロックの量子化パラメータの平均を決定すること、又はＭ個の再構成された画像ブロックの符号化スキームのいずれかが現在の符号化されるべき画像ブロックの符号化スキームとは異なる場合に、第１量子化パラメータ及び第２量子化パラメータに基づき、Ｍ個の再構成された画像ブロックの符号化スキーム及び現在の符号化されるべき画像ブロックの符号化スキームに従って、現在の符号化されるべき画像ブロックの量子化パラメータ予測子を決定することを含む。
【０２２２】
任意に、Ｍ個の再構成された画像ブロックが、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックを含み、且つ、現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、第１量子化パラメータと、第２量子化パラメータと、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとに基づき、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータが計算され、そして、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータに基づき、Ｍ個の再構成された画像ブロックの量子化パラメータの平均が決定される。平均は、現在の符号化されるべき画像ブロックの量子化パラメータ予測子である。Ｍ個の再構成された画像ブロックが、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックを含み、且つ、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータが計算され、第１量子化パラメータと、第２量子化パラメータと、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータと、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータとに基づき、Ｍ個の再構成された画像ブロックの量子化パラメータの平均が決定される。平均は、現在の符号化されるべき画像ブロックの量子化パラメータ予測子である。
【０２２３】
任意に、第１量子化パラメータと、第２量子化パラメータと、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとに基づき、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを計算することは、量子化差分を取得するように第１量子化パラメータから第２量子化パラメータを減じることと、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを取得するように、量子化差分とダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとの和を計算することとを含み、あるいは、量子化差分を取得するように第２量子化パラメータから第１量子化パラメータを減じることと、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを取得するように、量子化差分とダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとの間の差を計算することとを含む。
【０２２４】
これに基づき、任意に、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータに基づき、Ｍ個の再構成された画像ブロックの量子化パラメータの平均を決定することは、Ｍ個の再構成された画像ブロックに含まれ、原解像度符号化スキームを使用することによって符号化されている全て（又はいくつか）の再構成された画像ブロックの補正された量子化パラメータと、Ｍ個の再構成された画像ブロックに含まれ、ダウンサンプリング符号化スキームを使用することによって符号化されている全て（又はいくつかの）再構成された画像ブロックの量子化パラメータとの平均を、現在の符号化されるべき画像ブロックの量子化パラメータ予測子として決定することを含む。
【０２２５】
任意に、第１量子化パラメータと、第２量子化パラメータと、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとに基づき、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを計算することは、量子化差分を取得するように第１量子化パラメータから第２量子化パラメータを減じることと、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを取得するように、量子化差分と原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとの間の差を計算することとを含み、あるいは、量子化差分を取得するように第２量子化パラメータから第１量子化パラメータを減じることと、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを取得するように、量子化差分と原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとの和を計算することとを含む。
【０２２６】
これに基づき、任意に、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータに基づき、Ｍ個の再構成された画像ブロックの量子化パラメータの平均を決定することは、Ｍ個の再構成された画像ブロックに含まれ、ダウンサンプリング符号化スキームを使用することによって符号化されている全て（又はいくつか）の再構成された画像ブロックの補正された量子化パラメータと、Ｍ個の再構成された画像ブロックに含まれ、原解像度符号化スキームを使用することによって符号化されている全て（又はいくつかの）再構成された画像ブロックの量子化パラメータとの平均を、現在の符号化されるべき画像ブロックの量子化パラメータ予測子として決定することを含む。
【０２２７】
任意に、Ｍ個の再構成された画像ブロックは、現在の符号化されるべき画像ブロックの上側の再構成された画像ブロック及び左側の再構成された画像ブロックを含む。
【０２２８】
具体的に、Ｍが２に等しく、Ｍ個の再構成された画像ブロックは、現在の符号化されるべき画像ブロックの上側の再構成された画像ブロック及び左側の再構成された画像ブロックであり、現在の符号化されるべき画像ブロック、上側の再構成された画像ブロック、及び左側の再構成された画像ブロックは、全て、原解像度符号化スキーム又はダウンサンプリング符号化スキームを使用することによって符号化されると仮定される。この場合に、現在の符号化されるべき画像ブロックの量子化パラメータ予測子を取得するために、上側の再構成された画像ブロックの量子化パラメータ及び左側の再構成された画像ブロックの量子化パラメータの平均が計算される。現在の符号化されるべき画像ブロック及び上側の再構成された画像ブロックは両方とも、原解像度符号化スキームを使用することによって符号化され、左側の再構成された画像ブロックは、ダウンサンプリング符号化スキームを使用することによって符号化されると仮定される。この場合に、第１量子化パラメータと第２量子化パラメータとの間の量子化差分が計算され、左側の再構成された画像ブロックの量子化パラメータと量子化差分との和が、左側の再構成された画像ブロックの補正された量子化パラメータを取得するように計算され、上側の再構成された画像ブロックの量子化パラメータ及び左側の再構成された画像ブロックの補正された量子化パラメータの平均が、現在の符号化されるべき画像ブロックの量子化パラメータ予測子を取得するように計算される。現在の符号化されるべき画像ブロック及び上側の再構成された画像ブロックは両方とも、ダウンサンプリング符号化スキームを使用することによって符号化され、左側の再構成された画像ブロックは、原解像度符号化スキームを使用することによって符号化されると仮定される。この場合に、第１量子化パラメータと第２量子化パラメータとの間の量子化差分が計算され、左側の再構成された画像ブロックの量子化パラメータと量子化差分との間の差が、左側の再構成された画像ブロックの補正された量子化パラメータを取得するように計算され、上側の再構成された画像ブロックの量子化パラメータ及び左側の再構成された画像ブロックの補正された量子化パラメータの平均が、現在の符号化されるべき画像ブロックの量子化パラメータ予測子を取得するように計算される。
【０２２９】
現在の符号化されるべき画像ブロックの量子化パラメータ予測子は、通常は、場合２の方法で決定される点が留意されるべきである。現在の符号化されるべき画像ブロックにおいて左側の再構成された画像ブロック又は上側の再構成された画像ブロックが存在しないときに、現在の符号化されるべき画像ブロックの量子化パラメータ予測子は、場合１の方法で決定されてよい。
【０２３０】
場合３：Ｍ個の再構成された画像ブロックは、１つの再構成された画像ブロックであり、Ｍ個の再構成された画像ブロックの量子化パラメータ及びＭ個の再構成された画像ブロックの符号化スキームを取得することは、現在の符号化されるべき画像ブロックと同じ符号化スキームを有している再構成された画像ブロックを、前もって設定された範囲内にある再構成された画像ブロックから探すことを含む。前もって設定された範囲は、現在の画像エリア内の前もって設定された範囲である。任意に、前もって設定された範囲は、現在の符号化されるべき画像ブロックより前に位置し、再構成された画像ブロックが選択される再構成された画像ブロックの数量であってよく、あるいは、前もって設定された範囲は、再構成された画像ブロックが選択されるスライスであってよい。再構成された画像ブロックが見つけられた後、その再構成された画像ブロックの量子化パラメータが取得される。相応して、Ｍ個の再構成された画像ブロックの量子化パラメータに基づき、現在の符号化されるべき画像ブロックの符号化スキーム及びＭ個の再構成された画像ブロックの符号化スキームに従って、現在の符号化されるべき画像ブロックの量子化パラメータ予測子を決定することは、現在の符号化されるべき画像ブロックの量子化パラメータ予測子として、その再構成された画像ブロックの量子化パラメータを使用することを含む。
【０２３１】
任意に、１つの再構成された画像ブロックは、符号化シーケンスにおいて、前もって設定された範囲内にある再構成された画像ブロックの中にあって、現在の符号化されるべき画像ブロックに最も近い再構成された画像ブロックである。
【０２３２】
具体的に、現在の符号化されるべき画像ブロックの前の再構成された画像ブロックの符号化スキームは、符号化シーケンスで決定される。現在の符号化されるべき画像ブロックの符号化スキームが、前の再構成された画像ブロックの符号化スキームと同じである場合には、前の再構成された画像ブロックの量子化パラメータが、現在の符号化されるべき画像ブロックの量子化パラメータ予測子として使用される。現在の符号化されるべき画像ブロックの符号化スキームが、前の再構成された画像ブロックの符号化スキームとは異なる場合には、前の再構成された画像ブロックより前にある再構成された画像ブロックの符号化スキームが決定される。現在の符号化されるべき画像ブロックの符号化スキームが、前の再構成された画像ブロックより前にある再構成された画像ブロックの符号化スキームと同じである場合には、前の再構成された画像ブロックより前にある再構成された画像ブロックの量子化パラメータが、現在の符号化されるべき画像ブロックの量子化パラメータ予測子として使用され、そうでない場合には、現在の符号化されるべき画像ブロックと同じ符号化スキームを有している再構成された画像ブロックが見つけられ、その再構成された画像ブロックの量子化パラメータが現在の符号化されるべき画像ブロックの量子化パラメータ予測子として使用されるまで、上記の方法が引き続き実行される。現在の符号化されるべき画像ブロックと同じ符号化スキームを有している再構成された画像ブロックは、通常は、スライスを横断することなしに探索され、すなわち、現在の符号化されるべき画像ブロックが位置しているスライス内で探索される。
【０２３３】
代替的に、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの最新の量子化パラメータが変数ＱＰｄｏｗｎｐｒｅｖに割り当てられ、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの最新の量子化パラメータが変数ＱＰｏｒｇｐｒｅｖに割り当てられる。例えば、符号化シーケンスにおいて、最初の再構成された画像ブロックの符号化スキームが原解像度符号化スキームである場合に、最初の再構成された画像ブロックの量子化パラメータはＱＰｏｒｇｐｒｅｖに割り当てられる。第２の再構成された画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、第２の再構成された画像ブロックの量子化パラメータはＱＰｄｏｗｎｐｒｅｖに割り当てられる。第３の再構成された画像ブロックの符号化スキームが原解像度符号化スキームである場合に、第３の再構成された画像ブロックの量子化パラメータはＱＰｏｒｇｐｒｅｖに割り当てられる。類推によって、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの最新の量子化パラメータは、変数ＱＰｄｏｗｎｐｒｅｖに割り当てられ、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの最新の量子化パラメータは、変数ＱＰｏｒｇｐｒｅｖに割り当てられる。現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合には、ＱＰｏｒｇｐｒｅｖに対応する量子化パラメータが、現在の符号化されるべき画像ブロックの量子化パラメータ予測子として使用される。現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合には、ＱＰｄｏｗｎｐｒｅｖに対応する量子化パラメータが、現在の符号化されるべき画像ブロックの量子化パラメータ予測子として使用される。
【０２３４】
結論として、画像ブロックは本願では各々の特徴を有しており、符号器側は異なるように画像ブロックを符号化するので、符号器側は、現在の符号化されるべき画像ブロックの符号化スキームに従って、現在の符号化されるべき画像ブロックの量子化パラメータを決定してよい。すなわち、量子化パラメータは、現在の符号化されるべき画像ブロックを符号化するために適切である。従って、符号器側は、より良い符号化効果を実装する。
【０２３５】
図１６は、本願の実施形態に従う画像処理デバイスの概略構造図である。図１６に示されるように、デバイスは、パージングモジュール１６０１と、決定モジュール１６０２と、再構成モジュール１６０３とを含む。パージングモジュール１６０１は、原解像度符号化スキームでの現在の画像エリアの第１量子化パラメータと、ダウンサンプリング符号化スキームでの現在の画像エリアの第２量子化パラメータと、現在の画像エリア内の現在の再構成されるべき画像ブロックの符号化スキームと、現在の再構成されるべき画像ブロックの量子化係数と、現在の再構成されるべき画像ブロックの予測信号とを取得するように、符号ストリームをパースするよう構成される。現在の再構成されるべき画像ブロックの符号化スキームは、原解像度符号化スキーム又はダウンサンプリング符号化スキームであり、現在の再構成されるべき画像ブロックは、現在の画像エリアの部分である。
【０２３６】
決定モジュール１６０２は、現在の再構成されるべき画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータを決定するよう構成される。現在の再構成されるべき画像ブロックの量子化パラメータは、第１量子化パラメータ又は第２量子化パラメータである。
【０２３７】
再構成モジュール１６０３は、現在の再構成された画像ブロックを取得するように、現在の再構成されるべき画像ブロックの量子化パラメータ、量子化係数、及び予測信号に基づき、現在の再構成されるべき画像ブロックを再構成するよう構成される。
【０２３８】
任意に、符号ストリームは、第１量子化パラメータ及び第２量子化パラメータを含むか、あるいは、符号ストリームは、第１量子化パラメータと、現在の画像エリアの量子化パラメータ予測差とを含む。相応して、パージングモジュール１６０１は、第１量子化パラメータ及び量子化パラメータ予測差に基づき第２量子化パラメータを計算するよう特に構成される。
【０２３９】
任意に、決定モジュール１６０２は、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、現在の再構成されるべき画像ブロックの量子化パラメータとして第１量子化パラメータを使用するよう、あるいは、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、現在の再構成されるべき画像ブロックの量子化パラメータとして第２量子化パラメータを使用するよう特に構成される。
【０２４０】
本願で提供される画像処理デバイスは、図１３に対応する画像処理方法及び方法の任意の様態を実行してよい。その実施原理及び技術的効果は同様であり、詳細は、再びここで記載されない。
【０２４１】
図１７は、本願の他の実施形態に従う画像処理デバイスの概略構造図である。図１７に示されるように、デバイスは、パージングモジュール１７０１と、第１決定モジュール１７０２と、第２決定モジュール１７０３と、再構成モジュール１７０４とを含む。パージングモジュール１７０１は、現在の再構成されるべき画像ブロックの量子化パラメータ予測差と、現在の再構成されるべき画像ブロックの量子化係数と、現在の再構成されるべき画像ブロックの符号化スキームと、現在の再構成されるべき画像ブロックの予測信号とを取得するように、符号ストリームをパースするよう構成される。符号化スキームは、原解像度符号化スキーム又はダウンサンプリング符号化スキームである。
【０２４２】
第１決定モジュール１７０２は、現在の再構成されるべき画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定するよう構成される。
【０２４３】
第２決定モジュール１７０３は、現在の再構成されるべき画像ブロックの量子化パラメータ予測子及び量子化パラメータ予測差に基づき、現在の再構成されるべき画像ブロックの量子化パラメータを決定するよう構成される。
【０２４４】
再構成モジュール１７０４は、現在の再構成された画像ブロックを取得するように、現在の再構成されるべき画像ブロックの量子化パラメータ、量子化係数、及び予測信号に基づき、現在の再構成されるべき画像ブロックを再構成するよう構成される。
【０２４５】
任意に、第１決定モジュール１７０２は、Ｍが正の整数であるとして、前もって設定された規則に従って、現在の再構成されるべき画像ブロックと同じ現在の画像エリアに属するＭ個の再構成された画像ブロックを選択し、Ｍ個の再構成された画像ブロックの量子化パラメータ及びＭ個の再構成された画像ブロックの符号化スキームを取得し、Ｍ個の再構成された画像ブロックの量子化パラメータに基づき、現在の再構成されるべき画像ブロックの符号化スキーム及びＭ個の再構成された画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定するよう特に構成される。
【０２４６】
任意に、Ｍ個の再構成された画像ブロックは、１つの再構成された画像ブロックであり、第１決定モジュール１７０２は、１つの再構成された画像ブロックの符号化スキームが現在の再構成されるべき画像ブロックの符号化スキームと同じである場合に、現在の再構成されるべき画像ブロックの量子化パラメータ予測子として１つの再構成された画像ブロックの量子化パラメータを決定するよう、あるいは、１つの再構成された画像ブロックの符号化スキームが現在の再構成されるべき画像ブロックの符号化スキームとは異なる場合に、第１量子化パラメータ及び第２量子化パラメータに基づき、１つの再構成された画像ブロックの符号化スキーム及び現在の再構成されるべき画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定するよう特に構成され、このとき、第１量子化パラメータは、原解像度符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得され、第２量子化パラメータは、ダウンサンプリング符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得され、現在の再構成されるべき画像ブロックは、現在の画像エリアの部分である。
【０２４７】
任意に、第１決定モジュール１７０２は、１つの再構成された画像ブロックの符号化スキームがダウンサンプリング符号化スキームであり、且つ、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、量子化差分を取得するように第１量子化パラメータから第２量子化パラメータを減じ、量子化パラメータ予測子を取得するように１つの再構成された画像ブロックの量子化パラメータと量子化差分との和を計算するよう、あるいは、１つの再構成された画像ブロックの符号化スキームが原解像度符号化スキームであり、且つ、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、量子化差分を取得するように第１量子化パラメータから第２量子化パラメータを減じ、量子化パラメータ予測子を取得するように１つの再構成された画像ブロックの量子化パラメータと量子化差分との間の差を計算するよう特に構成される。
【０２４８】
任意に、１つの再構成された画像ブロックは、復号化シーケンスにおける現在の再構成されるべき画像ブロックの前の再構成された画像ブロックである。
【０２４９】
任意に、Ｍは１よりも大きく、第１決定モジュール１７０２は、Ｍ個の再構成された画像ブロックの符号化スキームが夫々、現在の再構成されるべき画像ブロックの符号化スキームと同じである場合に、現在の再構成されるべき画像ブロックの量子化パラメータ予測子としてＭ個の再構成された画像ブロックの量子化パラメータの平均を決定するよう、あるいは、Ｍ個の再構成された画像ブロックの符号化スキームのいずれかが現在の再構成されるべき画像ブロックの符号化スキームとは異なる場合に、第１量子化パラメータ及び第２量子化パラメータに基づき、Ｍ個の再構成された画像ブロックの符号化スキーム及び現在の再構成されるべき画像ブロックの符号化スキームに従って、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を決定するよう特に構成され、このとき、第１量子化パラメータは、原解像度符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得され、第２量子化パラメータは、ダウンサンプリング符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得され、現在の再構成されるべき画像ブロックは、現在の画像エリアの部分である。
【０２５０】
任意に、第１決定モジュール１７０２は、Ｍ個の再構成された画像ブロックが、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックを含み、且つ、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、第１量子化パラメータと、第２量子化パラメータと、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとに基づき、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを計算し、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータに基づき、Ｍ個の再構成された画像ブロックの量子化パラメータの平均を決定し、平均が、現在の再構成されるべき画像ブロックの量子化パラメータ予測子である、よう、あるいは、Ｍ個の再構成された画像ブロックが、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックを含み、且つ、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、第１量子化パラメータと、第２量子化パラメータと、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとに基づき、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを計算し、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータに基づき、Ｍ個の再構成された画像ブロックの量子化パラメータの平均を決定し、平均が、現在の再構成されるべき画像ブロックの量子化パラメータ予測子である、よう特に構成される。
【０２５１】
任意に、第１決定モジュール１７０２は、第１量子化パラメータから第２量子化パラメータを減じて量子化差分を取得し、量子化差分と、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとの和を計算して、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを取得するよう特に構成される。
【０２５２】
任意に、第１決定モジュール１７０２は、第１量子化パラメータから第２量子化パラメータを減じて量子化差分を取得し、量子化差分と、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとの間の差を計算して、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを取得するよう特に構成される。
【０２５３】
任意に、Ｍ個の再構成された画像ブロックは、現在の再構成されるべき画像ブロックの上側の再構成された画像ブロック及び左側の再構成された画像ブロックを含む。
【０２５４】
任意に、Ｍ個の再構成された画像ブロックは、１つの再構成された画像ブロックであり、第１決定モジュール１７０２は、現在の再構成されるべき画像ブロックと同じ符号化スキームを有している再構成された画像ブロックを、前もって設定された範囲内にある再構成された画像ブロックから探し、１つの再構成された画像ブロックの量子化パラメータを取得し、現在の再構成されるべき画像ブロックの量子化パラメータ予測子として１つの再構成された画像ブロックの量子化パラメータを使用するよう特に構成される。
【０２５５】
任意に、１つの再構成された画像ブロックは、復号化シーケンスにおいて、前もって設定された範囲内にある再構成された画像ブロックの中にあって、現在の再構成されるべき画像ブロックに最も近い再構成された画像ブロックである。
【０２５６】
任意に、第１決定モジュール１７０２は、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、現在の再構成されるべき画像ブロックの量子化パラメータ予測子として第１量子化パラメータを使用するよう、あるいは、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、現在の再構成されるべき画像ブロックの量子化パラメータ予測子として第２量子化パラメータを使用するよう特に構成される。第１量子化パラメータは、原解像度符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得され、第２量子化パラメータは、ダウンサンプリング符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得され、現在の再構成されるべき画像ブロックは、現在の画像エリアの部分である。
【０２５７】
任意に、第１決定モジュール１７０２は、現在の再構成されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を取得するように量子化パラメータ予測差に基づき第１量子化パラメータを補正するよう、あるいは、現在の再構成されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、現在の再構成されるべき画像ブロックの量子化パラメータ予測子を取得するように量子化パラメータ予測差に基づき第２量子化パラメータを補正するよう特に構成される。第１量子化パラメータは、原解像度符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得され、第２量子化パラメータは、ダウンサンプリング符号化スキームでの現在の画像エリアの量子化パラメータであって、符号ストリームをパースすることによって取得され、現在の再構成されるべき画像ブロックは、現在の画像エリアの部分である。
【０２５８】
本願で提供される画像処理デバイスは、図１４に対応する画像処理方法及び方法の任意の様態を実行してよい。その実施原理及び技術的効果は同様であり、詳細は、再びここで記載されない。
【０２５９】
図１８は、本願の更なる他の実施形態に従う画像処理デバイスの概略構造図である。図１８に示されるように、デバイスは、第１取得モジュール１８０１と、決定モジュール１８０２と、生成モジュール１８０３と、符号化モジュール１８０４とを含む。第１取得モジュール１８０１は、原解像度符号化スキームでの現在の画像エリアの第１量子化パラメータと、ダウンサンプリング符号化スキームでの現在の画像エリアの第２量子化パラメータと、現在の画像エリア内の現在の符号化されるべき画像ブロックの符号化スキームと、現在の符号化されるべき画像ブロックの符号化された信号と、現在の符号化されるべき画像ブロックの予測信号とを取得するよう構成される。現在の符号化されるべき画像ブロックの符号化スキームは、原解像度符号化スキーム又はダウンサンプリング符号化スキームである。現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合には、符号化された信号は、現在の符号化されるべき画像ブロックの原信号であり、あるいは、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合には、符号化された信号は、現在の符号化されるべき画像ブロックの原信号に対してダウンサンプリング処理が実行された後に取得される信号である。
【０２６０】
決定モジュール１８０２は、現在の符号化されるべき画像ブロックの符号化スキームに従って、現在の符号化されるべき画像ブロックの量子化パラメータを決定するよう構成される。現在の符号化されるべき画像ブロックの量子化パラメータは、第１量子化パラメータ又は第２量子化パラメータであるか、あるいは、現在の符号化されるべき画像ブロックの量子化パラメータは、第１量子化パラメータを補正することによって取得される量子化パラメータ、又は第２量子化パラメータを補正することによって取得される量子化パラメータである。
【０２６１】
生成モジュール１８０３は、予測信号及び符号化された信号に基づき、現在の符号化されるべき画像ブロックの残留信号を生成するよう構成される。
【０２６２】
符号化モジュール１８０４は、現在の符号化されるべき画像ブロックの量子化パラメータに基づき、残留信号を符号化するよう構成される。
【０２６３】
任意に、第１取得モジュール１８０１は、現在の画像エリアの量子化パラメータ予測差を取得し、第１量子化パラメータ及び量子化パラメータ予測差に基づき第２量子化パラメータを計算するよう特に構成される。
【０２６４】
任意に、第１取得モジュール１８０１は、第１量子化パラメータに基づき、原解像度符号化スキームが現在の符号化されるべき画像ブロックに使用される場合に使用される第１符号化コストを決定し、第２量子化パラメータに基づき、ダウンサンプリング符号化スキームが現在の符号化されるべき画像ブロックに使用される場合に使用される第２符号化コストを決定し、現在の符号化されるべき画像ブロックの符号化スキームとして、第１符号化コスト及び第２符号化コストの中で最も低い符号化コストに対応する符号化スキームを使用するよう特に構成される。
【０２６５】
任意に、決定モジュール１８０２は、現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、第１量子化パラメータとして現在の符号化されるべき画像ブロックの量子化パラメータを決定するよう、あるいは、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、第２量子化パラメータとして現在の符号化されるべき画像ブロックの量子化パラメータを決定するよう特に構成される。
【０２６６】
任意に、生成モジュール１８０３は、符号ストリームを生成するよう更に構成される。符号ストリームは、第１量子化パラメータと、第２量子化パラメータと、現在の符号化されるべき画像ブロックの前記符号化スキームとを含むか、あるいは、符号ストリームは、第１量子化パラメータと、現在の画像エリアの量子化パラメータ予測差と、現在の符号化されるべき画像ブロックの符号化スキームとを含む。
【０２６７】
任意に、第１取得モジュール１８０１は、少なくとも１つの第３量子化パラメータを取得するように少なくとも１回第１量子化パラメータを補正し、且つ、少なくとも１つの第４量子化パラメータを取得するように少なくとも１回第２量子化パラメータを補正し、第３量子化パラメータに基づき、原解像度符号化スキームが現在の符号化されるべき画像ブロックに使用される場合に使用される第３符号化コストを決定し、且つ、第４量子化パラメータに基づき、ダウンサンプリング符号化スキームが現在の符号化されるべき画像ブロックに使用される場合に使用される第４符号化コストを決定し、現在の符号化されるべき画像ブロックの符号化スキームとして第３符号化コスト及び第４符号化コストの中で最も低い符号化コストに対応する符号化スキームを使用するよう特に構成される。
【０２６８】
任意に、決定モジュール１８０２は、現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、現在の符号化されるべき画像ブロックの量子化パラメータとして、少なくとも１つの第３量子化パラメータの中で符号化コストが最も低い第３量子化パラメータを決定するよう、あるいは、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、現在の符号化されるべき画像ブロックの量子化パラメータとして、少なくとも１つの第４量子化パラメータの中で符号化コストが最も低い第４量子化パラメータを決定するよう特に構成される。
【０２６９】
任意に、デバイスは、第２取得モジュール１８０５と、計算モジュール１８０６とを更に含む。第２取得モジュール１８０５は、現在の符号化されるべき画像ブロックの量子化パラメータ予測子を取得するよう構成される。計算モジュール１８０６は、量子化パラメータ予測子及び現在の符号化されるべき画像ブロックの量子化パラメータに基づき、現在の符号化されるべき画像ブロックの量子化パラメータ予測差を計算するよう構成される。生成モジュール１８０３は、符号ストリームを生成するよう更に構成される。符号ストリームは、現在の符号化されるべき画像ブロックの符号化スキームと、現在の符号化されるべき画像ブロックの量子化パラメータ予測差とを含む。
【０２７０】
任意に、第２取得モジュール１８０５は、Ｍが正の整数であるとして、前もって設定された規則に従って、現在の符号化されるべき画像ブロックと同じ現在の画像エリアに属するＭ個の再構成された画像ブロックを選択し、Ｍ個の再構成された画像ブロックの量子化パラメータ及びＭ個の再構成された画像ブロックの符号化スキームを取得し、Ｍ個の再構成された画像ブロックの量子化パラメータに基づき、現在の符号化されるべき画像ブロックの符号化スキーム及びＭ個の再構成された画像ブロックの符号化スキームに従って、現在の符号化されるべき画像ブロックの量子化パラメータ予測子を決定するよう特に構成される。
【０２７１】
任意に、Ｍ個の再構成された画像ブロックは、１つの再構成された画像ブロックであり、第２取得モジュール１８０５は、１つの再構成された画像ブロックの符号化スキームが現在の符号化されるべき画像ブロックの符号化スキームと同じである場合に、現在の符号化されるべき画像ブロックの量子化パラメータ予測子として、１つの再構成された画像ブロックの量子化パラメータを決定するよう、あるいは、１つの再構成された画像ブロックの符号化スキームが現在の符号化されるべき画像ブロックの符号化スキームとは異なる場合に、第１量子化パラメータ及び第２量子化パラメータに基づき、１つの再構成された画像ブロックの符号化スキーム及び現在の符号化されるべき画像ブロックの符号化スキームに従って、現在の符号化されるべき画像ブロックの量子化パラメータ予測子を決定するよう特に構成される。
【０２７２】
任意に、第２取得モジュール１８０５は、１つの再構成された画像ブロックの符号化スキームがダウンサンプリング符号化スキームであり、且つ、現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、第１量子化パラメータから第２量子化パラメータを減じて量子化差分を取得し、１つの再構成された画像ブロックの量子化パラメータと量子化差分との和を計算して量子化パラメータ予測子を取得するよう、あるいは、１つの再構成された画像ブロックの符号化スキームが原解像度符号化スキームであり、且つ、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、第１量子化パラメータから第２量子化パラメータを減じて量子化差分を取得し、１つの再構成された画像ブロックの量子化パラメータと量子化差分との間の差を計算して量子化パラメータ予測子を取得するよう特に構成される。
【０２７３】
任意に、１つの再構成された画像ブロックは、符号化シーケンスにおける現在の符号化されるべき画像ブロックの前の再構成された画像ブロックである。
【０２７４】
任意に、Ｍは１よりも大きく、第２取得モジュール１８０５は、Ｍ個の再構成された画像ブロックの符号化スキームが夫々、現在の符号化されるべき画像ブロックの符号化スキームと同じである場合に、現在の符号化されるべき画像ブロックの量子化パラメータ予測子としてＭ個の再構成された画像ブロックの量子化パラメータの平均を決定するよう、あるいは、Ｍ個の再構成された画像ブロックの符号化スキームのいずれかが現在の符号化されるべき画像ブロックの符号化スキームとは異なる場合に、第１量子化パラメータ及び第２量子化パラメータに基づき、Ｍ個の再構成された画像ブロックの符号化スキーム及び現在の符号化されるべき画像ブロックの符号化スキームに従って、現在の符号化されるべき画像ブロックの量子化パラメータ予測子を決定するよう特に構成される。
【０２７５】
任意に、第２取得モジュール１８０５は、Ｍ個の再構成された画像ブロックが、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックを含み、且つ、現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、第１量子化パラメータと、第２量子化パラメータと、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとに基づき、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを計算し、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータに基づき、Ｍ個の再構成された画像ブロックの量子化パラメータの平均を決定し、平均が、現在の符号化されるべき画像ブロックの量子化パラメータ予測子である、よう、あるいは、Ｍ個の再構成された画像ブロックが、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックを含み、且つ、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、第１量子化パラメータと、第２量子化パラメータと、原解像度符号化スキームを使用することによって符号化された前記再構成された画像ブロックの量子化パラメータとに基づき、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを計算し、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータに基づき、Ｍ個の再構成された画像ブロックの量子化パラメータの平均を決定し、平均が、現在の符号化されるべき画像ブロックの量子化パラメータ予測子である、よう特に構成される。
【０２７６】
任意に、第２取得モジュール１８０５は、第１量子化パラメータから第２量子化パラメータを減じて量子化差分を取得し、量子化差分と、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとの和を計算して、ダウンサンプリング符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを取得するよう特に構成される。
【０２７７】
任意に、第２取得モジュール１８０５は、第１量子化パラメータから第２量子化パラメータを減じて量子化差分を取得し、量子化差分と、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの量子化パラメータとの間の差を計算して、原解像度符号化スキームを使用することによって符号化された再構成された画像ブロックの補正された量子化パラメータを取得するよう特に構成される。
【０２７８】
任意に、Ｍ個の再構成された画像ブロックは、現在の符号化されるべき画像ブロックの上側の再構成された画像ブロック及び左側の再構成された画像ブロックを含む。
【０２７９】
任意に、Ｍ個の再構成された画像ブロックは、１つの再構成された画像ブロックであり、第２取得モジュール１８０５は、現在の符号化されるべき画像ブロックと同じ符号化スキームを有している再構成された画像ブロックを、前もって設定された範囲内にある再構成された画像ブロックから探し、１つの再構成された画像ブロックの量子化パラメータ及び１つの再構成された画像ブロックの符号化スキームを取得し、現在の符号化されるべき画像ブロックの量子化パラメータ予測子として１つの再構成された画像ブロックの量子化パラメータを使用するよう特に構成される。
【０２８０】
任意に、１つの再構成された画像ブロックは、符号化シーケンスにおいて、前もって設定された範囲内にある再構成された画像ブロックの中にあって、現在の符号化されるべき画像ブロックに最も近い再構成された画像ブロックである。
【０２８１】
任意に、第２取得モジュール１８０５は、原解像度符号化スキームでの現在の画像エリアの第１量子化パラメータと、ダウンサンプリング符号化スキームでの現在の画像エリアの前記第２量子化パラメータとを取得し、現在の符号化されるべき画像ブロックの符号化スキームが原解像度符号化スキームである場合に、現在の符号化されるべき画像ブロックの量子化パラメータ予測子として第１量子化パラメータを使用するか、あるいは、現在の符号化されるべき画像ブロックの符号化スキームがダウンサンプリング符号化スキームである場合に、現在の符号化されるべき画像ブロックの量子化パラメータ予測子として第２量子化パラメータを使用するよう特に構成される。
【０２８２】
本願で提供される画像処理デバイスは、図１５に対応する画像処理方法及び方法の任意の様態を実行してよい。その実施原理及び技術的効果は同様であり、詳細は、再びここで記載されない。
【０２８３】
図１９は、本願に従う画像処理システムの概略構造図である。図１９に示されるように、システムは、図１３に示される方法を実行するよう構成される画像処理デバイス１９０１と、図１５に示される方法を実行するよう構成される画像処理デバイス１９０２とを含む。
【０２８４】
図２０は、本願に従う画像処理システムの概略構造図である。図２０に示されるように、システムは、図１４に示される方法を実行するよう構成される画像処理デバイス２００１と、図１５に示される方法を実行するよう構成される画像処理デバイス２００２とを含む。
【０２８５】
本願は、画像処理デバイスを提供し、デバイスは、プロセッサと、プロセッサの実行可能命令を記憶するよう構成されたメモリとを含む。プロセッサは、図１３に対応する画像処理方法及び方法の任意の様態を実行してよい。その実施原理及び技術的効果は同様であり、詳細は、再びここで記載されない。
【０２８６】
本願は、画像処理デバイスを提供し、デバイスは、プロセッサと、プロセッサの実行可能命令を記憶するよう構成されたメモリとを含む。プロセッサは、図１４に対応する画像処理方法及び方法の任意の様態を実行してよい。その実施原理及び技術的効果は同様であり、詳細は、再びここで記載されない。
【０２８７】
本願は、画像処理デバイスを提供し、デバイスは、プロセッサと、プロセッサの実行可能命令を記憶するよう構成されたメモリとを含む。プロセッサは、図１５に対応する画像処理方法及び方法の任意の様態を実行してよい。その実施原理及び技術的効果は同様であり、詳細は、再びここで記載されない。
【図１】
0006910532.tif 000003
【図２】
0006910532.tif 000004
【図３】
0006910532.tif 000005
【図４】
0006910532.tif 000006
【図５】
0006910532.tif 000007
【図６】
0006910532.tif 000008
【図７】
0006910532.tif 000009
【図８Ａ】
0006910532.tif 000010
【図８Ｂ】
0006910532.tif 000011
【図９】
0006910532.tif 000012
【図１０】
0006910532.tif 000013
【図１１】
0006910532.tif 000014
【図１２】
0006910532.tif 000015
【図１３】
0006910532.tif 000016
【図１４】
0006910532.tif 000017
【図１５】
0006910532.tif 000018
【図１６】
0006910532.tif 000019
【図１７】
0006910532.tif 000020
【図１８】
0006910532.tif 000021
【図１９】
0006910532.tif 000022
【図２０】
0006910532.tif 000023