(57)【特許請求の範囲】
【請求項１】
拡張された画像フォーマットのための画像データ処理方法において、
拡張された画像フォーマットで生成された画像を、垂直解像度を変えずに、拡張画像フォーマットへ拡張されたＱＣＩＦまたはＣＩＦ画像にスケーリングするステップと、
該スケーリングされた画像の中央から、拡張されていない画像フォーマットのＱＣＩＦまたはＣＩＦ画像を抽出するステップと、
残った画像領域を付加画像データとしてデータ低減を施し、所定の伝送規格に準拠したデータストリームに存在する付加データフィールドに格納するステップとを有していることを特徴とする画像データ処理方法。
【請求項２】
前記拡張された画像フォーマットとして１６：９の画像フォーマットが利用され、拡張されていない画像フォーマットとして４：３の画像フォーマットが用いられる、請求項１記載の方法。
【請求項３】
前記所定の伝送規格としてＩＴＵ−Ｔ勧告のＨ.２６１規格が用いられる、請求項１または２いずれか１項記載の方法。
【請求項４】
前記付加画像データを、データリダクションによって、Ｈ.２６１規格の付加データフィールドＧＳＰＡＲＥに格納する、請求項３記載の方法。
【請求項５】
付加データフィールドの情報を評価できない復号器は、当該付加データフィールドの情報を復号化の際に棄却する、請求項１〜４いずれか１項記載の方法。
【請求項６】
前記スケーリングされたＱＣＩＦまたはＣＩＦ画像並びに付加画像データを、テレビ電話方式に関するＨ.３２０規格に従ったデータストリームに格納する、請求項１〜５いずれか１項記載の方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、拡張された画像フォーマットのための画像データ処理方法に関する。
【０００２】
【従来の技術】
従来の画像データ伝送のための伝送規格、例えばＩＴＵ−Ｔ勧告のＨ.２６１による伝送規格は、縦横比４：３での画像フォーマットの符号化でしか行われていない。他の画像フォーマット、例えば最近のＴＶ画像スクリーンによく使用されている１６：９の画像フォーマットのもとでは伝送できない。
【０００３】
【発明が解決しようとする課題】
本発明の課題は、異なる別の画像フォーマットのもとでも画像データの伝送が可能な画像データ処理方法を提供することである。
【０００４】
【課題を解決するための手段】
前記課題は本発明により、拡張された画像フォーマットで供給される画像データを、拡張されていない画像フォーマットに相応する第１の画像データと、画像フォーマット拡張のための画像情報を含んだ付加画像データに分解するステップと、
前記第１の画像データを所定の伝送規格に従って符号化するステップと、
前記付加画像データにデータ低減を施し、所定の伝送規格で付加データフィールドに結び付けるステップとを有しているようにして解決される。
【０００５】
本発明の手法によれば、拡張された画像フォーマット、例えば縦横比１６：９の画像フォーマットでも、現存の伝送規格、例えばＨ.３２０規格に対して互換性のある伝送が可能である。例えばこれまではそのような画像フォーマットの復号化にはあまり関係のなかったテレビ電話でも、従来の画像フォーマット例えば縦横比４：３の画像フォーマットの画像情報のみを評価し表示するのに、本発明による修正されたビデオデータストリームを利用することができる。例えば縦横比１６：９の拡張された画像フォーマットの利点は、ビデオ会議でも利用可能である。これまでの画像フォーマット、例えば縦横比４：３の画像フォーマットを用いて、会談の全ての参加者に良く見えるように位置付けすることには基本的に問題がある。広角のカメラ設定では全ての視聴者に見えるようにすることはできるが、しかしながら前景や後景（壁、テーブル面、天井など）は消えてしまう。しかしながら拡張された画像フォーマット、例えば縦横比１６：９の拡張画像フォーマットを用いれば、このような問題を十分に考慮することが可能となる。
【０００６】
【発明の実施の形態】
拡張された画像フォーマットで供給される画像データは、拡張されていない画像フォーマットに相応する第１の画像データと、画像フォーマットの拡張に対する画像情報を含んでいる付加画像データに分解される。特にカメラから生成される１６：９の画像フォーマットの画像は、同等に維持される垂直分解能のもとで、拡張されたＱＣＩＦ（quarter common intermediate format）またはＣＩＦ（common intermediate format）の画像の１６：９のフォーマットにスケーリングされる。相応の１６：９の画像フォーマットは、図１に示されており、この場合Ｓは列、Ｚは行である。従来の４：３の縦横比は、１２：１１で提供される画像フォーマットの考慮のもとで算出される。ＣＩＦフォーマットに対しては以下の関係式が成り立つ。
【０００７】
(352/288)×(12/11)＝4/3、ないしは(480/288)×(12/11)≒16/9
１６：９の画像の中心からは、４：３のＱＣＩＦないしＣＩＦ画像が抽出される。これは例えばＨ.２６１規格に相応して符号化され伝送される。抽出された基準画像の左右に残った画像領域（射影部分として示されている）は、Ｈ.２６１規格のデーターリダクション（ＤＣＴ、動き予測）のためのアルゴリズムによって符号化され、Ｈ.２６１規格の第４.２.２章によるＧＳＰＡＲＥフィールドで伝送される。このＨ.２６１規格のデーターストリームに既に存在するＧＳＰＡＲＥフィールドでは、任意の大きさの情報が伝送可能である。標準規格ではこの情報を評価できない復号器がそれを拒否し、ＧＳＰＡＲＥフィールドの終了後に自身に係わるデーターストリームを引続き復号化する。
【０００８】
Ｈ.２６１規格に従って符号化すべき画像は、いわゆるブロックグループ（ＧＯＢ）に細分化されている。このブロックグループＧＯＢは１７６×４８のルミナンスピクセルと８８×２４のクロミナンスピクセルからなっているか、あるいは１６×１６ピクセル毎に３３のマクロブロック（ＭＢ）からなっている（4.2.2,4.2.3/Ｈ.２６１）。図２には、ＣＩＦ画像に基づいてブロックグループＧＯＢとマクロブロックＭＢ並びに１６：９の拡張が示されている。図中の陰影領域ａは、１６：９への画像の拡張が示されている。その際符号１ｅｘから１２ｅｘは、周縁における相応のブロックグループＧＯＢ１〜１２の拡張を表している。図中中央の陰影を付けられていない領域面ｂは、標準のＣＩＦ画像幅を有している。
【０００９】
マクロブロックへの分類整理に基づく画像サイズは常に１６画素の複合的構成であるので、図２に示した４８０画素の画像幅はやや大きすぎる。符号化すべき画像幅を正確に達成し得るためには、右方および左方の画像縁部においてそれぞれ６画素が黒に置換される。なぜなら１６：９のディスプレイ上では現われることがないからである。
【００１０】
標準規格の符号化と付加的画像データの電送は、各ブロックグループヘッダーのＧＳＰＡＲＥフィールドによって行われる（4.2.2/Ｈ261）。これは任意に頻繁に伝送可能であり、それと共に可変の長さのデータの伝送にも理想的である。Ｈ.２６１/４.２.２の規格によれば、全ての復号器がこれらのフィールド内の情報を、それが利用できないときには棄却できるようにしなければならない。図３には、Ｈ.２６１規格のビットストリームで拡張された画像フォーマットの情報の伝送が示されている。符号１ではブロックグループのスタートコードが示されている。また符号２は、グループナンバー、符号３は量子化情報、符号４は、特別な挿入情報を示している。これは後続するＨ.２６１規格のオプショナルデータフィールド５ＧＳＰＡＲＥが存在する場合には論理１にセットされる。ブロック６は、Ｈ.２６１/４.２.３章によるマクロブロックＭＢ（マクロブロックレイヤ）を表している。ブロック４および５は、画像フォーマット拡張のマクロブロックデータを含んでいる。ＧＳＰＡＲＥフィールド５は、マクロブロックの符号化に必要な全てのシンボル、すなわち４.２.３章および４.２.４章によるＭＢＡ（マクロブロックアドレス)、ＭＴＹＰＥ（マクロブロック中に存在するデータ要素に関する情報）、ＭＱＵＡＮＴ（適用されている量子化の方式）、ＭＶＤ（動きベクトルデータ）、ＣＢＰ（伝送すべき変換係数に対する特徴ブロック）、ＴＣＯＥＦＦ（変換係数）、ＥＯＢ（ブロック終端識別子）が伝送されるまで挿入される。
【００１１】
本発明では、完全なダウンコンパーチブルでのＨ.３２０規格による画像データストリーム内で、４：３画像フォーマットのＱＣＩＦまたはＣＩＦ伝送画像を例えば１６：９の縦横比を有するパノラマフォーマットへ拡張するための、付加的画像データの伝送が許容される。またこれまでに記載された１６：９の画像フォーマット以外の別の異なる画像フォーマットを同じ形式で適用することも可能である。従って本発明は拡張画像フォーマットとして１６：９の画像フォーマットに限定されるものではない。
【図面の簡単な説明】
【図１】図１は、拡張された画像フォーマットと拡張されていない画像フォーマットでの縦横比を示したものである。
【図２】画像およびＧＯＢでのマクロブロックの配置構成を示したものである。
【図３】Ｈ.２６１規格に従った画像データの符号化を示したものである。
【符号の説明】
１      スタートコード
２      グループナンバ
３      量子化情報
４      特別な挿入情報
５      オプショナルデーターフィールド
６      マクロブロック
【図１】
0003809036.tif 000002
【図２】
0003809036.tif 000003
【図３】
0003809036.tif 000004