(57)【要約】  観察者に対する3Dディスプレイでの表示のための三次元［3D］画像データの処理システムが説明される。3Dディスプレイ・メタデータは、3Dディスプレイによってサポートされる深さ範囲のような3Dディスプレイの空間表示パラメータを定める。観察者メタデータは、観察距離又は瞳孔間距離のような3Dディスプレイに対する観察者の空間観察パラメータを定める。ソース空間観察構成に対して設定されるソース3D画像データは、ターゲット空間観察構成における3Dディスプレイでの表示のためのターゲット3Dディスプレイ・データを生成するために処理される。最初に、3Dディスプレイ・メタデータ及び観察者メタデータに依存してターゲット空間構成が決定される。そして、ソース3D画像データは、ソース空間観察構成とターゲット空間観察構成の差に基づいてターゲット3D表示データに変換される。
2012518317.tif 000002
【特許請求の範囲】
【請求項１】
観察者に対する3Dディスプレイでの表示のために三次元[3D]画像データを処理する方法であって、
ソース空間観察構成に対して設定されたソース3D画像データを受信し、
前記3Dディスプレイの空間表示パラメータを定める3Dディスプレイ・メタデータを提供し、
前記3Dディスプレイに対する前記観察者の空間観察パラメータを定める観察者メタデータを提供し、
ターゲット空間観察構成における前記3Dディスプレイでの表示のためのターゲット3D表示データを生成するために前記ソース3D画像データを処理し、
前記処理は、
前記3Dディスプレイ・メタデータ及び前記観察者メタデータに依存して前記ターゲット空間構成を決定し、
前記ソース空間観察構成と前記ターゲット空間観察構成の差に基づいて前記ソース3D画像データを前記ターゲット3D表示データに変換する、方法。
【請求項２】
前記観察者メタデータを提供することが、以下の空間観察パラメータのうちの少なくとも１つを提供することを含む、請求項１に記載の方法。
− 前記3Dディスプレイに対する前記観察者の観察距離
− 前記観察者の瞳孔間距離
− 前記3Dディスプレイの面に対する前記観察者の観察角度
− 前記3Dディスプレイの中心に対する観察者位置の観察オフセット
【請求項３】
前記3Dディスプレイ・メタデータを提供することが、以下の空間表示パラメータのうちの少なくとも１つを提供することを含む、請求項１に記載の方法。
- 前記3Dディスプレイのスクリーン・サイズ
- 前記3Dディスプレイによりサポートされる深さ範囲
- 製造者が推奨する前記3Dディスプレイの深さ範囲
- ユーザが好む前記3Dディスプレイの深さ範囲
【請求項４】
観察者に対する3Dディスプレイでの表示のために三次元[3D]画像データを処理するための3D画像装置であって、
ソース空間観察構成に対して設定されたソース3D画像データを受信するための入力手段、
前記3Dディスプレイの空間表示パラメータを定める3Dディスプレイ・メタデータを提供するためのディスプレイ・メタデータ手段、
前記3Dディスプレイに対する前記観察者の空間観察パラメータを定める観察者メタデータを提供するための観察者メタデータ手段、
ターゲット空間観察構成における前記3Dディスプレイでの表示のための3D表示信号を生成するために前記ソース3D画像データを処理するための処理手段、
を有し、
前記処理手段は、
前記3Dディスプレイ・メタデータ及び前記観察者メタデータに依存して前記ターゲット空間構成を決定し、
前記ソース空間観察構成と前記ターゲット空間観察構成の差に基づいて前記ソース3D画像データを前記3D表示信号に変換する、3D画像装置。
【請求項５】
ソース3D画像装置であって、前記3D表示信号を出力して前記観察者メタデータを転送するための画像インタフェース手段を有する、請求項４に記載の装置。
【請求項６】
3D表示装置であって、3D画像データを表示するための3Dディスプレイ、及び、前記3D表示信号を受信して前記観察者メタデータを転送するためのディスプレイ・インタフェース手段を有する、請求項４に記載の装置。
【請求項７】
観察者に対する3Dディスプレイでの表示のために三次元[3D]画像データを提供するための3Dソース装置であって、
ソース空間観察構成に対して設定されるソース3D画像データを受信するための入力手段、
3D表示信号を転送するために前記3Dディスプレイを有する3D表示装置とインタフェースするための画像インタフェース手段、
前記3Dディスプレイに対する前記観察者の空間観察パラメータを定める観察者メタデータを提供するための観察者メタデータ手段、
ターゲット空間観察構成における前記3Dディスプレイでの表示のための前記3D表示信号を生成するための処理手段、を有し、
前記処理手段は、ターゲット空間観察構成における前記3Dディスプレイでの表示のために前記ソース3D画像データを前記3D表示装置が処理することを可能にするために、前記観察者メタデータを前記表示信号に含め、前記処理は、
前記3Dディスプレイ・メタデータ及び前記観察者メタデータに依存して前記ターゲット空間構成を決定し、
前記ソース空間観察構成と前記ターゲット空間観察構成の差に基づいて前記ソース3D画像データを前記3D表示信号に変換する、3Dソース装置。
【請求項８】
3D表示装置であって、
3D画像データを表示するための3Dディスプレイ、
3D表示信号を転送するために、ソース空間観察構成に対して設定されたソース3D画像データを受信するための入力手段を有するソース3D画像装置とインタフェースするためのディスプレイ・インタフェース手段、
前記3Dディスプレイに対する観察者の空間観察パラメータを定める観察者メタデータを提供するための観察者メタデータ手段、
前記3Dディスプレイでの表示のために前記3D表示信号を生成するための処理手段、を有し、
前記処理手段は、ターゲット空間観察構成における前記3Dディスプレイでの表示のために前記ソース3D画像データを前記ソース3D画像装置が処理すること可能にするために、前記3D表示信号において前記ディスプレイ・インタフェース手段を介して前記ソース3D画像装置に前記観察者メタデータを転送するために配置され、前記処理は、
前記3Dディスプレイ・メタデータ及び前記観察者メタデータに依存して前記ターゲット空間構成を決定し、
前記ソース空間観察構成と前記ターゲット空間観察構成の差に基づいて前記ソース3D画像データを前記3D表示信号に変換する、3D表示装置。
【請求項９】
前記観察者メタデータ手段が、空間観察パラメータとして、子供を代表する瞳孔間距離を提供するための子供モードを設定するための手段を有する、請求項４から請求項８のいずれか一項に記載の装置。
【請求項１０】
前記観察者メタデータ手段が、前記3Dディスプレイの観察領域に存在する観察者の少なくとも１つの空間観察パラメータを検出するための観察者検出手段を有する、請求項４から請求項８のいずれか一項に記載の装置。
【請求項１１】
観察者に対する3Dディスプレイでの表示のために三次元[3D]画像データを3D画像装置と3Dディスプレイとの間で転送するための3D表示信号であって、
前記3D画像装置が、ソース空間観察構成に対して配置されたソース3D画像データを受信し、ターゲット空間観察構成における前記3Dディスプレイでの表示のために前記ソース3D画像データを処理することを可能にするための観察者メタデータを有し、前記観察者メタデータは、別のデータチャネルを介して前記3Dディスプレイから前記3D画像装置へ、又は、別のパケットに含まれて前記3D画像装置から前記3Dディスプレイへ転送され、前記処理は、
前記3Dディスプレイ・メタデータ及び前記観察者メタデータに依存して前記ターゲット空間構成を決定し、
前記ソース空間観察構成と前記ターゲット空間観察構成の差に基づいて前記ソース3D画像データを前記3D表示信号に変換する、3D表示信号。
【請求項１２】
HDMI信号であり、前記観察者メタデータが、表示データチャネルを介して前記3Dディスプレイから前記3D画像装置へ、又は、HDMIデータ・アイランド中のパケットに含まれて前記3D画像装置から前記3Dディスプレイへ転送される、請求項１１に記載の信号。
【請求項１３】
観察者に対する3Dディスプレイでの表示のために3D画像装置へ三次元[3D]画像データを転送するための3D画像信号であって、
ソース空間観察構成に対して設定されるソース3D画像データ、及び、ターゲット空間観察構成における前記3Dディスプレイでの表示のために前記ソース3D画像データを前記3D画像装置が処理することを可能にするための前記ソース空間観察構成を示すソース画像メタデータを有し、前記処理は、
3Dディスプレイ・メタデータ及び観察者メタデータに依存して前記ターゲット空間構成を決定し、
前記ソース空間観察構成と前記ターゲット空間観察構成の差に基づいて前記ソース3D画像データを前記3D表示信号に変換する、3D画像信号。
【請求項１４】
請求項１３に記載の3D画像信号を表す物理的に検出可能なマークを有する記録担体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、観察者に対する3Dディスプレイでの表示のための三次元［3D］画像データの処理方法に関する。
【０００２】
本発明はさらに、3Dソース装置及び3D表示装置、並びに、観察者に対する3Dディスプレイでの表示のための三次元［3D］画像データの処理のために配置される3D表示信号に関する。
【０００３】
本発明は、3Dディスプレイでの表示のために3D画像データを処理し、高速のデジタル・インタフェース、例えばHDMを介して、そのような三次元画像データ、例えば3Dビデオを、ソース3D画像装置と3D表示装置との間で転送する分野に関する。
【背景技術】
【０００４】
2Dビデオ・データを供給する装置、例えば、DVDプレーヤーのようなビデオ・プレーヤー又はデジタル・ビデオ信号を提供するセットトップ・ボックスが知られている。ソース装置は、TVセット又はモニタのような表示装置に結合される。画像データは、ソース装置から、適切なインタフェース（好ましくはHDMIのような高速デジタル・インタフェース）を介して転送される。現在、三次元（3D）画像データを供給する3D拡張装置が提案されている。同様に、3D画像データを表示する装置が提案されている。ソース装置から表示装置へ3Dビデオ信号を転送するために、例えば既存のHDMI規格に基づいてそれと互換性がある新たな高いデータ速度のデジタル・インタフェース規格が開発されている。
【０００５】
文献WO2008/038205は、3Dディスプレイでの表示のための3D画像処理の例を説明する。3D画像信号は、3Dディスプレイの別々の深さ範囲でグラフィカル・データと組み合わせられるように処理される。
【０００６】
文献US2005/0219239は、3D画像を処理するシステムを説明する。このシステムは、データベース中のオブジェクトの3Dデータから3D画像信号を生成する。この3Dデータは、詳細にモデル化されたオブジェクトに関し、すなわち三次元構造を持つ。このシステムは、コンピュータでシミュレートされた環境中のオブジェクトに基づく3D世界中に仮想的なカメラを配置して、特定の観察構成のための3D信号を生成する。3D画像信号を生成するために、観察構成のさまざまなパラメータ（例えばディスプレイ・サイズ及び観察距離）が用いられる。情報取得ユニットは、ユーザ入力（例えばユーザとディスプレイとの間の距離）を受信する。
【発明の概要】
【発明が解決しようとする課題】
【０００７】
文献WO2008/038205は、他の3Dデータと組み合わせられるときに観察経験を最適化するための処理の後にソース3D画像データを表示する3D表示装置の例を提供する。従来の3D画像表示システムは、限られた3D深さ範囲に表示されるようにソース3D画像データを処理する。しかしながら、ソース3D画像データを特定の3Dディスプレイで表示するときに、特に、異なるディスプレイ上での特定の観察構成のために配置される3D画像データを表示するときに、3D画像効果の観察者経験が不十分であると判明する場合がある。
【課題を解決するための手段】
【０００８】
任意の個々の3D表示装置で表示されるときに十分な3D経験を観察者に提供する3D画像データの処理のシステムを提供することが本発明の目的である。
【０００９】
この目的のために、本発明の第１の態様によれば、冒頭の段落に記載される方法は、ソース空間観察構成に対して設定されるソース3D画像データを受信し、3Dディスプレイの空間表示パラメータを定める3Dディスプレイ・メタデータを提供し、3Dディスプレイに関する観察者の空間観察パラメータを定める観察者メタデータを提供し、ターゲット空間観察構成における3Dディスプレイでの表示のためのターゲット3D表示データを生成するためにソース3D画像データを処理し、前記処理は、3Dディスプレイ・メタデータ及び観察者メタデータに依存してターゲット空間構成を決定し、ソース空間観察構成とターゲット空間観察構成との間の差に基づいてソース3D画像データをターゲット3D表示データに変換する。
【００１０】
この目的のために、本発明のさらに別の態様では、観察者に対する3Dディスプレイでの表示のために3D画像データを処理するための3D画像装置は、ソース空間観察構成に対して設定されるソース3D画像データを受信するための入力手段、3Dディスプレイの空間表示パラメータを定める3Dディスプレイ・メタデータを提供するためのディスプレイ・メタデータ手段、3Dディスプレイに関する観察者の空間観察パラメータを定める観察者メタデータを提供するための観察者メタデータ手段、ターゲット空間観察構成における3Dディスプレイでの表示のための3D表示信号を生成するためにソース3D画像データを処理するための処理手段を有し、前記処理手段は、3Dディスプレイ・メタデータ及び観察者メタデータに依存してターゲット空間構成を決定し、ソース空間観察構成とターゲット空間観察構成との間の差に基づいてソース3D画像データを3D表示信号に変換するように配置される。
【００１１】
この目的のために、本発明のさらに別の態様では、観察者に対する3Dディスプレイでの表示のための3D画像データを提供するための3Dソース装置は、ソース空間観察構成に対して設定されるソース3D画像データを受信するための入力手段、3D表示信号を転送するために3Dディスプレイを有する3D表示装置とインタフェースするための画像インタフェース手段、3Dディスプレイに関する観察者の空間観察パラメータを定める観察者メタデータを提供するための観察者メタデータ手段、ターゲット空間観察構成における3Dディスプレイでの表示のための3D表示信号を生成するための処理手段を有し、前記処理手段は、ターゲット空間観察構成における3Dディスプレイでの表示のためにソース3D画像データを3D表示装置が処理することを可能にするために表示信号中に観察者メタデータを含めるように配置され、前記処理は、3Dディスプレイ・メタデータ及び観察者メタデータに依存してターゲット空間構成を決定し、ソース空間観察構成とターゲット空間観察構成との間の差に基づいてソース3D画像データを3D表示信号に変換する。
【００１２】
この目的のために、本発明のさらに別の態様では、3D表示装置は、3D画像データを表示するための3Dディスプレイ、3D表示信号を転送するためにソース空間観察構成に対して設定されるソース3D画像データを受信するための入力手段を有するソース3D画像装置とインタフェースするためのディスプレイ・インタフェース手段、3Dディスプレイに関する観察者の空間観察パラメータを定める観察者メタデータを提供するための観察者メタデータ手段、3Dディスプレイでの表示のための3D表示信号を生成するための処理手段を有し、前記処理手段は、表示信号中でディスプレイ・インタフェース手段を介してソース3D画像装置へ、ターゲット空間観察構成における3Dディスプレイでの表示のためにソース3D画像データをソース3D画像装置が処理すること可能にするための観察者メタデータを転送するように配置され、前記処理は、3Dディスプレイ・メタデータ及び観察者メタデータに依存してターゲット空間構成を決定し、ソース空間観察構成とターゲット空間観察構成との間の差に基づいてソース3D画像データを3D表示信号に変換する。
【００１３】
この目的のために、本発明のさらに別の態様では、3D画像装置と3Dディスプレイとの間で観察者に対する3Dディスプレイでの表示のための3D画像データを転送するための3D表示信号は、3D画像装置がソース空間観察構成に対して設定されるソース3D画像データを受信してターゲット空間観察構成における3Dディスプレイでの表示のためにソース3D画像データを処理することを可能にするための観察者メタデータを有し、前記観察者メタデータは、3Dディスプレイから別のデータチャネルを介して3D画像装置へ、又は、別のパケットに含まれて3D画像装置から3Dディスプレイへ転送され、前記処理は、3Dディスプレイ・メタデータ及び観察者メタデータに依存してターゲット空間構成を決定し、ソース空間観察構成とターゲット空間観察構成との間の差に基づいてソース3D画像データを3D表示信号に変換する。
【００１４】
この目的のために、本発明のさらに別の態様では、観察者に対する3Dディスプレイでの表示のために3D画像データを3D画像装置に転送するための3D画像信号は、ソース空間観察構成に対して設定されるソース3D画像データ、及び、ターゲット空間観察構成における3Dディスプレイでの表示のために3D画像装置がソース3D画像データを処理することを可能にするためのソース空間観察構成を示すソース画像メタデータを有し、前記処理は、3Dディスプレイ・メタデータ及び観察者メタデータに依存してターゲット空間構成を決定し、ソース空間観察構成とターゲット空間観察構成との間の差に基づいてソース3D画像データを3D表示信号に変換する。
【００１５】
これらの方策は、ソース3D画像データが、スクリーン寸法のような実際のディスプレイ・メタデータ、並びに、観察距離及び観察者の瞳孔間距離のような実際の観察者メタデータを考慮して、意図された3D経験を観察者に提供するように処理されるという効果を持つ。特に、ソース空間観察構成に対して設定される3D画像データが最初に受信されて、そして実際の観察構成の実際の観察者メタデータに基づいて異なるターゲット空間観察構成のために再構成される。有利には、観察者の両方の目に提供される画像は、意図された3D経験を生成するために、3Dディスプレイ及び観察者の実際の空間観察構成に適合するように適応される。
【００１６】
本発明はさらに以下の認識に基づく。レガシー・ソース3D画像データは、特定の空間観察構成（例えば映画館のための動画）に対して本質的に設定される。本発明者らは、そのようなソース空間観察配置は、特定の空間表示パラメータ（例えばスクリーン・サイズ）を持つ特定の3Dディスプレイが関与し、実際の空間観察パラメータを持つ（例えば、実際の観察距離にいる）少なくとも１人の実際の観察者が関与する実際の観察配置と実質的に異なる場合があることを認識した。さらに、最適な3D体験のためには、観察者の瞳孔間距離は、両方の目における3Dディスプレイによって生成された画像が、人の脳によって自然な3D画像入力として知覚される専用の差を持つことを要求する。例えば、3Dオブジェクトは、ソース3D画像データにおいて本来的に用いられる瞳孔間距離より小さい実際の瞳孔間距離を持つ子供によって知覚されなければならない。本発明者らは、ターゲット空間観察構成は、観察者のそのような空間観察パラメータに影響を受けることを認識した。特にこれは、（特に無限の範囲において）ソースの（処理されていない）3D画像コンテンツに対して、子供の目は発散することを必要とし、それは疲れ目又は嘔気を引き起こすことを意味する。加えて、3D経験は、人々の観察距離によって決まる。提供される解決策は、3Dディスプレイ・メタデータ及び観察者メタデータを提供し、続いて、3Dディスプレイ・メタデータ及び観察者メタデータに基づく計算によってターゲット空間構成を決定する。前記ターゲット空間観察構成に基づいて、ソース空間観察構成とターゲット空間観察構成との間の差に基づいてソース3D画像データを変換することによって、必要とされる3D画像データが生成されることができる。
【００１７】
システムの実施の形態において、観察者メタデータは、以下の空間観察パラメータのうちの少なくとも１つを有する：3Dディスプレイに対する観察者の観察距離；観察者の瞳孔間距離；3Dディスプレイの面に対する観察者の観察角；3Dディスプレイの中心に対する観察者位置の観察オフセット。
【００１８】
その効果は、観察者メタデータが、自然な3D経験を実際の観察者に提供するように3D画像データを計算することを可能にすることである。有利には、いかなる疲労又は疲れ目も、実際の観察者に生じない。何人かの観察者がいる場合、全ての観察者に対して全体的に最適化された観察経験が存在するように、複数の観察者の平均パラメータが考慮される。
【００１９】
システムの実施の形態において、3Dディスプレイ・メタデータは、以下の空間表示パラメータのうちの少なくとも１つを含む：3Dディスプレイのスクリーン・サイズ; 3Dディスプレイによってサポートされる深さ範囲; ユーザが好む3Dディスプレイの深さ範囲。
【００２０】
その効果は、ディスプレイ・メタデータが、自然な3D経験を実際の表示の観察者に提供するように3D画像データを計算することを可能にすることである。有利には、いかなる疲労又は疲れ目も、観察者に生じない。
【００２１】
なお、観察者メタデータ、ディスプレイ・メタデータ及び/又はソース画像メタデータは、ソース3D画像装置及び/又は3D表示装置において利用可能であるか又は検出されることができる。さらに、ターゲット空間観察構成のためのソース3Dデータの処理は、ソース3D画像装置又は3D表示装置において実行されることができる。それゆえに、処理のロケーションにメタデータを提供することは、任意の適切な外部インタフェースを介して、必要とされるメタデータを、検出すること、設定すること、推定すること、初期値を適用すること、生成すること、計算すること及び/又は受信することのいずれかを含むことができる。特に、両装置間で3D表示信号も転送するインタフェース、又は、ソース画像データを提供するインタフェースが、メタデータを転送するために用いられることができる。さらに、必要ならば双方向性である画像データ・インタフェースは、ソース装置から3D表示装置へと、又はその逆に、観察者メタデータを伝達することもできる。したがって、請求されるそれぞれの装置において、システム構成及び利用可能なインタフェースに応じて、メタデータ手段は、メタデータを受信及び/又は転送するためにインタフェースと協調するように配置される。
【００２２】
その効果は、観察者メタデータ及びディスプレイ・メタデータが処理の場所に提供されて転送されるさまざまな構成がもたらされることができることである。有利には、実際の装置は、観察者メタデータを入力又は検出し、続いてそれに依存して3Dソース・データを処理するタスクのために構成されることができる。
【００２３】
システムの実施の形態において、観察者メタデータ手段は、空間観察パラメータとして、子供の代表的な瞳孔間距離を提供するための子供モードを設定するための手段を有する。その効果は、ターゲット空間観察構成が、子供モードを設定することによって、子供のために最適化されることである。有利には、ユーザは、観察者メタデータの詳細を理解する必要はない。
【００２４】
システムの実施の形態において、観察者メタデータ手段は、3Dディスプレイの観察領域に存在する観察者の少なくとも１つの空間観察パラメータを検出するための観察者検出手段を有する。その効果は、システムが自主的に実際の観察者の重要なパラメータを検出することである。有利には、観察者が変わるときに、システムがターゲット空間観察構成を適応させることができる。
【００２５】
本発明による方法、3D装置及び信号の更なる好ましい実施の形態は、添付された請求の範囲に与えられ、その開示は参照として本明細書に組み込まれる。
【００２６】
本発明のこれらの及び他の態様は、以下に一例として記載される実施の形態及び添付の図面から明らかであり、それらを参照して説明される。
【００２７】
図において、既に説明された要素に対応する要素は、同じ参照符号を持つ。
【図面の簡単な説明】
【００２８】
【図１】三次元（3D）画像データを処理するシステムを示す図。
【図２】3D画像データの例を示す図。
【図３】3D画像装置及び3D表示装置メタデータ・インタフェースを示す図。
【図４】メタデータによって拡張されるAVI情報フレームの表。
【発明を実施するための形態】
【００２９】
図1は、三次元（3D）画像データ（例えばビデオ、グラフィックス又は他の視覚的情報）を処理するシステムを示す。3D画像装置10は、3D表示信号56を転送するために3D表示装置13に結合される。
【００３０】
3D画像装置は、画像情報を受信するための入力ユニット51を持つ。例えば、入力ユニット装置は、DVD又はBlu-Rayディスクのような光学記録担体54からさまざまな種類の画像情報を読み出すための光学ディスク・ユニット58を含むことができる。別の態様では、入力ユニットは、ネットワーク55（例えばインターネット又は放送ネットワーク）に結合するためのネットワーク・インタフェース・ユニット59を含むことができ、そのような装置は通常、セットトップ・ボックスと呼ばれる。画像データは、遠隔メディア・サーバ57から読み出されることができる。さらに3D画像装置は、衛星受信機又は表示信号を直接提供するメディア・サーバであることができ、すなわち、表示ユニットに直接結合される3D表示信号を出力する任意の適切な装置であることができる。
【００３１】
3D画像装置は、画像インタフェース装置12を介して表示装置に転送される3D表示信号56を生成するための画像情報を処理するための入力ユニット51に結合される画像処理ユニット52を持つ。処理ユニット52は、表示装置13上での表示のための3D表示信号56に含まれる画像データを生成するために配置される。画像装置は、画像データの表示パラメータ（例えばコントラスト又はカラー・パラメータ）を制御するためのユーザ制御素子15を備える。そのようなユーザ制御素子は周知であり、3D画像装置のさまざまな機能（例えば再生及び記録機能）を制御するため、そして例えばグラフィカル・ユーザインタフェース及び/又はメニューを介して前記表示パラメータを設定するためのさまざまなボタン及び/又はカーソル制御機能を持つ遠隔制御ユニットを含むことができる。
【００３２】
実施の形態において、3D画像装置は、メタデータを提供するためのメタデータ・ユニット11を持つ。メタデータ・ユニットは、3Dディスプレイに対する観察者の空間観察パラメータを定める観察者メタデータを提供するための観察者メタデータ・ユニット111、3Dディスプレイの空間表示パラメータを定める3Dディスプレイ・メタデータを提供するためのディスプレイ・メタデータ・ユニット112を含む。
【００３３】
実施の形態において、観察者メタデータは、以下の空間観察パラメータのうちの少なくとも１つを有する：
−  3Dディスプレイに対する観察者の観察距離;
−  観察者の瞳孔間距離;
−  3Dディスプレイの面に対する観察者の観察角;
−  3Dディスプレイの中心に対する観察者位置の観察オフセット。
【００３４】
実施の形態において、3Dディスプレイ・メタデータは、以下の空間表示パラメータのうちの少なくとも１つを有する：
−  3Dディスプレイのスクリーン・サイズ;
−  3Dディスプレイによってサポートされる深さ範囲;
−  製造者によって推奨される深さ範囲（すなわち、必要とされる品質の3D画像を提供するために指示される範囲であり、それは、サポートされる最大の深さ範囲より小さい場合がある）;
−  ユーザが好む3Dディスプレイの深さ範囲。
なお、深さ範囲として、視差又は像差が示されることができる。上記パラメータは、3Dディスプレイ及び観察者の幾何学的配置を定め、したがって、観察者の左及び右目に対して生成される必要な画像を計算することを可能にする。例えば、オブジェクトが観察者の目の必要とされる距離で知覚される場合、背景に対する左及び右目画像における前記オブジェクトのシフトは、容易に計算されることができる。
【００３５】
3D画像処理ユニット52は、ターゲット空間観察構成における3Dディスプレイでの表示のためのターゲット3D表示データを生成するために、ソース空間観察構成に対して設定されるソース3D画像データを処理する機能のために配置される。前記処理は、最初に、メタデータ・ユニット11から利用可能な3Dディスプレイ・メタデータ及び観察者メタデータに依存してターゲット空間構成を決定することを含む。続いて、ソース3D画像データは、ソース空間観察構成とターゲット空間観察構成の差に基づいて、ターゲット3D表示データに変換される。
【００３６】
空間観察構成を決定することは、実際の観察空間における実際のスクリーンの基本的な構成（スクリーンは所定の物理的サイズ及び更なる3D表示パラメータを持つ）、並びに、実際の観察者の位置及び配置（例えば観察者の目に対するディスプレイ・スクリーンの距離）に基づく。なお、現在のアプローチでは、１人の観察者のみが存在する場合について観察者が議論される。明らかに、複数の観察者が存在する場合もあり、空間観察構成の計算及び3D画像処理は、例えば、平均値、特定の観察領域又は観察者の種類に対して最適な値などを用いて、前記大勢に対して最良の考えられる3D経験に適合するように適応されることができる。
【００３７】
3D表示装置13は、3D画像データを表示するための装置である。この装置は、3D画像装置10から転送される3D画像データを含む3D表示信号56を受信するためのディスプレイ・インタフェース・ユニット14を持つ。表示装置は、ディスプレイの表示パラメータ（例えばコントラスト、カラー又は深さパラメータ）を設定するために、更なるユーザ制御素子16を備える。転送された画像データは、ユーザ制御素子からの設定コマンドに従って画像処理ユニット18において処理され、3D画像データに基づいて3Dディスプレイで3D画像データをレンダリングするための表示制御信号を生成する。この装置は、処理された画像データを表示するために表示制御信号を受信する3Dディスプレイ17を持つ（例えばデュアル又はレンチキュラLCD）。表示装置13は、3Dディスプレイとも呼ばれる任意の種類の立体視ディスプレイであることができ、矢印44によって示される表示深さ範囲を持つ。
【００３８】
実施の形態において、3D画像装置は、メタデータを提供するためのメタデータ・ユニット19を持つ。メタデータ・ユニットは、3Dディスプレイに対する観察者の空間観察パラメータを定める観察者メタデータを提供するための観察者メタデータ・ユニット191、3Dディスプレイの3Dディスプレイ・メタデータ定める空間表示パラメータを提供するためのディスプレイ・メタデータ・ユニット192を含む。
【００３９】
3D画像処理ユニット18は、ターゲット空間観察構成における3Dディスプレイでの表示のためのターゲット3D表示データを生成するために、ソース空間観察構成に対して設定されるソース3D画像データを処理する機能のために配置される。前記処理は、最初に、メタデータ・ユニット19から利用可能な3Dディスプレイ・メタデータ及び観察者メタデータに依存してターゲット空間構成を決定することを含む。続いて、ソース3D画像データは、ソース空間観察構成とターゲット空間観察構成の差に基づいて、ターゲット3D表示データに変換される。
【００４０】
実施の形態において、観察者メタデータを提供することは、例えば、ユーザインタフェース15を介してそれぞれの空間観察パラメータを設定することによって、3D画像装置において実行される。別の態様では、観察者メタデータを提供することは、例えば、ユーザインタフェース16を介してそれぞれの空間観察パラメータを設定することによって、3D表示装置において実行されることができる。さらに、ソース空間観察構成をターゲット空間観察構成に適応させる3Dデータの前記処理は、前記装置のいずれかにおいて実行されることができる。それゆえに、システムのさまざまな配置において、前記メタデータ及び3D画像処理は、画像装置又は3D表示装置において提供される。さらに、両方の装置は、１つの多機能装置に組み合わせられることができる。したがって、前記のさまざまなシステム配置の両方の装置の実施の形態において、画像インタフェース装置12及び/又はディスプレイ・インタフェース・ユニット14は、前記観察者メタデータを送信及び/又は受信するように配置されることができる。さらに、ディスプレイ・メタデータは、3D表示装置からインタフェース14を介して3D画像装置のインタフェース12へと転送されることができる。
【００４１】
前記さまざまなシステム配置において、3D画像データを転送するための3D表示信号は、観察者メタデータを含む。なお、メタデータは、双方向性インタフェースを用いて3D画像データとは異なる方向を持つことができる。観察者メタデータ及び適切な場合にはさらに前記ディスプレイ・メタデータを提供する信号は、ターゲット空間観察構成における3Dディスプレイでの表示のために、ソース空間観察構成に対して設定されるソース3D画像データを3D画像装置が処理することを可能にする。この処理は、上で説明された処理に対応する。3D表示信号は、観察者メタデータ及び/又はディスプレイ・メタデータを定めるために拡張された、周知のHDMIインタフェースのような適切な高速デジタル・ビデオ・インタフェースを通じて転送されることができる（例えば、2006年11月10日の"High Definition Multimedia Interface Specification Version 1.3a"を参照）。
【００４２】
図1はさらに、3D画像データの担体として記録担体54を示す。記録担体は、ディスク形状であり、トラック及び中央のホールを持つ。物理的に検出可能な一連のマークによって構成されるトラックは、情報レイヤ上に実質的に平行の軌道を構成するターンの螺旋又は同心のパターンに従って配置される。記録担体は光学的に読取り可能であり、光学ディスク（例えばCD、DVD又はBD（ブルーレイ・ディスク））と呼ばれる。情報は、トラックに沿った光学的に検出可能なマーク（例えばピット及びランド）によって情報レイヤ上に表される。トラック構造はさらに、通常は情報ブロックと呼ばれる情報のユニットの場所を示すための位置情報（例えばヘッダ及びアドレス）を有する。記録担体54は、3Dのために拡張されたDVD又はBDフォーマットのような事前に決められた記録フォーマット中にビデオのようにデジタル的に符号化された3D画像データを表す情報を担持する。
【００４３】
3D画像データは、例えばトラックのマークによって記録担体上に実現されるか又はネットワーク55を介して読み出され、観察者に対する3Dディスプレイでの表示のために3D画像データを転送するための3D画像信号を提供する。実施の形態において、3D画像信号は、ソース画像データが設定されるソース空間観察構成を示すソース画像メタデータを含む。ソース画像メタデータは、上述のようにターゲット空間観察構成における3Dディスプレイでの表示のためにソース3D画像データを3D画像装置が処理することを可能にする。
【００４４】
なお、特定のソース画像メタデータが提供されない場合、そのようなデータは、メタデータ・ユニットによって、ソース・データの一般的な分類に基づいて、設定されることができる。例えば、3D動画データは、平均サイズの映画館における観察のために考えられていると仮定されることができ、例えば事前に決められたサイズのスクリーンの事前に決められた距離における、中央の観察領域のために最適化されることができる。例えば、TV放送ソース素材のために、平均的な観察者の部屋のサイズ及びTVサイズが仮定されることができる。ターゲット空間観察構成（例えば携帯電話3Dディスプレイ）は、実質的に異なる表示パラメータを持つことができる。それゆえに、上記の変換は、ソース空間観察構成における仮定を用いて遂行されることができる。
【００４５】
以下のセクションは、三次元ディスプレイの概要及び人による深さの知覚を提供する。より真に迫った深さの知覚を提供することができるという点で、3Dディスプレイは2Dディスプレイと異なる。これは、それらが単眼の深さ手がかり及び動作に基づく手がかりのみを示すことができる2Dディスプレイより多くの深さ手がかりを提供するので、達成される。
【００４６】
単眼の（又は静的な）深さ手がかりは、１つの目を用いて静止画像から得られることができる。画家は、絵の中に深さの感覚を生じさせるために、しばしば単眼の手がかりを用いる。これらの手がかりは、相対的なサイズ、地平線に対する高さ、遮蔽、距離感、テクスチャー勾配及びライティング/陰影を含む。動眼手がかり（Oculomotor cue）は、観察者の目の筋肉における緊張から導き出される深さ手がかりである。目は、目を回転させるため及び目のレンズを伸ばすための筋肉を持つ。目のレンズの緊張と緩和は適応と呼ばれ、画像に焦点を合わせるときに行われる。レンズ筋肉の緊張又は緩和の量は、物体がどれだけ離れているか又は近いかのための手掛かりを提供する。目の回転は、両方の目が同じ物体に焦点を合わせるように行われ、それは輻輳と呼ばれる。最後に、運動視差は、観察者の近くの物体が、離れた物体よりも速く移動するように見える効果である。
【００４７】
両眼視差は、両方の目が僅かに異なる画像を見ることから導き出される深さ手がかりである。単眼の深さ手がかりは、任意の2D画像表示タイプに用いられることができ、用いられている。ディスプレイにおいて両眼視差を再現することは、そのディスプレイが、各々の目がディスプレイ上で僅かに異なる画像を見るように、左目及び右目のためのビューを分けることができることを必要とする。
【００４８】
両眼視差を再現することができるディスプレイは、3D又は立体視ディスプレイと呼ばれる特別なディスプレイである。3Dディスプレイは、人の目によって実際に知覚される深さ次元に沿って画像を表示することができ、本明細書において、表示深さ範囲を持つ3Dディスプレイと呼ばれる。それゆえに、3Dディスプレイは、左及び右目に異なるビューを提供する。
【００４９】
２つの異なるビューを提供することができる3Dディスプレイは長年存在している。それらの大部分は、左及び右目ビューを分離する眼鏡を用いることに基づいていた。今では、ディスプレイ技術の発達によって、眼鏡を用いることなく立体ビューを提供することができる新たなディスプレイが市場に参入した。これらのディスプレイは、自動立体視ディスプレイと呼ばれる。
【００５０】
最初のアプローチは、ユーザが眼鏡を用いずに立体ビデオを見ることを可能にする液晶ディスプレイに基づく。これらは、レンチキュラ・スクリーン及びバリア・ディスプレイの２つの技術のいずれかに基づく。レンチキュラ・ディスプレイでは、LCDは、レンチキュラレンズのシートによって覆われる。これらのレンズは、左及び右目が異なるピクセルからの光を受け取るように、ディスプレイからの光を回析する。これは、一方が左目ビューのため、一方が右目ビューのための２つの異なる画像が表示されることを可能にする。
【００５１】
レンチキュラ・スクリーンの代替物はバリア・ディスプレイであり、これは、LCDのピクセルからの光を分離するために、LCDの後ろでバックライトの前の視差バリアを用いる。バリアは、スクリーンの前の規定の位置から、左目が右目と異なるピクセルを見るようなバリアである。バリアは、ディスプレイのロウのピクセルが左及び右目によって交互に見えるように、LCDと観察者との間にあってもよい。バリア・ディスプレイに関する問題は、輝度及び解像度の減少、並びに、非常に狭い観察角である。これにより、バリア・ディスプレイは、例えば９つのビュー及び複数の観察ゾーンを持つレンチキュラ・スクリーンと比べて、リビングルーム・テレビとしては魅力が低いものとなっている。
【００５２】
更なるアプローチは、高いリフレッシュ・レート（例えば120Hz）でフレームを表示することができる高解像度ビーマーと組み合わせてシャッタ眼鏡を用いることに依然として基づく。シャッタ眼鏡方法では左及び右目ビューが交互に表示されるので、高いリフレッシュ・レートが必要とされる。眼鏡を着用している観察者は、60Hzで立体ビデオを知覚する。シャッタ眼鏡方法は、高い品質のビデオ及び高いレベルの深さを可能にする。
【００５３】
自動立体視ディスプレイ及びシャッタ眼鏡方法の両方は、適応-輻輳不整合を被る。これは、深さの量及びこれらの装置を用いて快適に観察可能な時間を制限する。ホログラフィック及び体積ディスプレイのような他の表示技術が存在し、これらはこの問題を被らない。なお、本発明は、深さ範囲を持つ任意のタイプの3Dディスプレイのために用いられることができる。
【００５４】
3Dディスプレイのための画像データは、電子的な（通常デジタルの）データとして利用可能であると仮定される。本発明は、そのような画像データに関し、デジタル領域で画像データを操作する。画像データは、ソースへ転送されるときに、例えばデュアル・カメラを用いることにより、すでに3D情報を含む場合があり、或いは、専用の前処理システムが、2D画像から3D情報を(再)生成するために関与する場合がある。画像データは、スライドのような静止画であることができ、或いは、動くビデオのような動画を含むことができる。通常グラフィカル・データと呼ばれる他の画像データは、記憶されたオブジェクトとして利用可能であるか、又は、アプリケーションによって要求されたときにオン・ザ・フライ(on the fly)で生成されることができる。例えば、メニュー、ナビゲーション・アイテム又はテキスト及びヘルプ注釈のようなユーザ制御情報が、他の画像データに追加されることができる。
【００５５】
立体画像がフォーマットされることができる多くの異なる態様が存在し、3D画像フォーマットと呼ばれる。いくつかのフォーマットは、さらに立体情報を担持するために2Dチャネルを用いることに基づく。例えば、左及び右ビューは、インタレースされることができ、又は、左右や上下に並べて配置されることができる。これらの方法は、立体情報を担持するために、解像度を犠牲にする。他のオプションは色を犠牲にすることであり、このアプローチは、アナグラフ・ステレオと呼ばれる。アナグラフ・ステレオは、補色で２つの別々のオーバレイされた画像を表示することに基づくスペクトル多重化を用いる。着色したフィルタを有する眼鏡を用いることにより、各々の目は、その目の前のフィルタと同じ色の画像のみを見る。したがって、例えば、右目は赤の画像のみを見て、左目は緑の画像のみを見る。
【００５６】
異なる3Dフォーマットは、2D画像及び補助深さ画像（いわゆる深さマップ）を用いる２つのビューに基づき、深さマップは、2D画像中のオブジェクトの深さに関する情報を伝達する。画像+深さと呼ばれるフォーマットは、いわゆる「深さ」又は視差マップと2D画像との組み合わせであるという点で異なる。これは階調画像であり、ピクセルの階調値は、関連する2D画像中の対応するピクセルの視差（又は深さマップの場合には深さ）の量を示す。表示装置は、入力として2D画像を利用して追加のビューを計算するために、視差、深さ又は像差マップを用いる。これは様々な態様で行われることができ、最も単純な形式は、それらのピクセルに関連づけられる視差値に依存して左又は右にピクセルをシフトすることである。Christoph Fehnによる論文"Depth image based rendering, compression and transmission for a new approach on 3D TV"は、この技術の優れた概要を与える(http://iphome.hhi.de/fehn/Publications/fehn_EI2004.pdfを参照)。
【００５７】
図2は3D画像データの例を示す。画像データの左部分は通常はカラーの2D画像21であり、画像データの右部分は深さマップ22である。2D画像情報は、任意の適切な画像フォーマットで表されることができる。深さマップ情報は、おそらく2D画像と比べて減少した解像度で、各々のピクセルのための深さ値を持つ補助データ・ストリームであることができる。深さマップにおいて、階調値は、2D画像中の関連するピクセルの深さを示す。白は観察者に近いことを示し、黒は観察者から離れた大きい深さを示す。3Dディスプレイは、深さマップからの深さ値を用いることにより、そして必要とされるピクセル変換を計算することによって、ステレオのために必要とされる追加のビューを計算することができる。遮蔽は、推定又はホール充填技術を用いて解決されることができる。遮蔽マップ、視差マップ及び/又は背景の前を移動する透明なオブジェクトのための透明度マップのような、更なるフレームが、データ・ストリーム中に含まれることができ、例えば、画像及び深さマップ・フォーマットにさらに追加されることができる。
【００５８】
さらに、ビデオにステレオを追加することは、それがプレーヤー装置（例えばブルーレイ・ディスク・プレーヤー）から立体ディスプレイまで送信されるときのビデオのフォーマットに影響を与える。2Dの場合には、2Dビデオ・ストリーム（復号された画像データ）のみが送信される。ステレオ・ビデオに関して、（ステレオのための）第２のビュー又は深さマップを含む第２のストリームが必要であるので、これは増加する。これは、電気的インタフェース上で必要とされるビットレートを倍にする場合がある。異なるアプローチは、解像度を犠牲にして、第２のビュー又は深さマップが2Dビデオとインタレースされるか又は並べて配置されるようにストリームをフォーマットすることである。
【００５９】
家庭の（DVD/BD/TV）又は家庭外の（電話、携帯型メディア・プレーヤ）複数の装置は、将来的に立体視又は自動立体視ディスプレイでの3Dコンテンツの表示をサポートするだろう。しかしながら、3Dコンテンツは、主に特定のスクリーン・サイズに対して開発される。これは、コンテンツがデジタル映画のために記録されている場合には、家庭のディスプレイのために再構成されることを必要とすることを意味する。解決案は、プレーヤーにおいてコンテンツを再構成することである。画像データ・フォーマットに応じて、これは、深さマップを処理すること（例えば、係数スケーリング）、すなわち、ステレオ・コンテンツのための左又は右ビューをシフトすることを必要とする。そのために、スクリーン・サイズがプレーヤーによって知られていることを必要とする。コンテンツを正しく再利用するために、スクリーン寸法のみが重要というわけではなく、他の要因が考慮されなければならない。これは、例えば観察者であり、例えば、子供の瞳孔間距離は成人より小さい。適切でない3Dデータ（特に無限範囲）は、子供の目が発散することを必要とし、眼精疲労又は嘔気を引き起こす。さらに、3D経験は、人々の観察距離に依存する。観察者及び観察者の3Dディスプレイに対する位置に関するデータは、観察者メタデータと呼ばれる。さらに、ディスプレイは、動的な表示領域、最適な深さ範囲などを持つ場合がある。ディスプレイの深さ範囲の外側では、例えばビュー間のクロストークのようなアーチファクトが非常に大きくなる場合がある。これも、消費者の視聴快適性を減少させる。実際の3D表示データは、ディスプレイ・メタデータと呼ばれる。現在の解決案は、家庭のシステム中のさまざまな装置間でメタデータを記憶し、配信し、そしてアクセス可能とすることである。例えば、メタデータは、ディスプレイのEDID情報を介して転送されることができる。
【００６０】
図3は、3D画像装置及び3D表示装置メタデータ・インタフェースを示す。3D画像装置10と3D表示装置13との間の双方向インタフェース31上でのメッセージが概略的に示される。3D画像装置10（例えば再生装置）は、インタフェースを介してディスプレイ13の能力を読み出し、空間的に及び時間的にディスプレイが取り扱うことができる最高解像度のビデオを送信するために、ビデオのフォーマット及びタイミング・パラメータを調整する。実際には、EDIDと呼ばれる規格が用いられる。拡張ディスプレイ識別データ（EDID）は、画像ソース（例えばグラフィックス・カード）にその能力を説明するために表示装置によって提供されるデータ構造である。それは、最新のパーソナル・コンピュータが、どの種類のモニタが接続されているかを知ることを可能にする。EDIDは、Video Electronics Standards Association（VESA）によって公開された規格によって定められる。さらに、http://www.vesa.org/から入手可能なVESA DisplayPort Standard Version 1, Revision 1a（2008年1月11日）を参照のこと。
【００６１】
従来のEDIDは、製造者名、製品タイプ、蛍光体又はフィルタ・タイプ、ディスプレイによってサポートされるタイミング、表示サイズ、輝度データ及び（デジタル・ディスプレイのみのための）ピクセル・マッピング・データを含む。ディスプレイからグラフィックス・カードへとEDIDを伝送するためのチャネルは、通常、I2Cバスと呼ばれる。EDID及びI2Cの組み合わせは、ディスプレイ・データ・チャネル・バージョン2又はDDC2と呼ばれる。2は、異なるシリアル・フォーマットを用いたVESAの元のDDCからそれを区別する。EDIDは、I2Cバスと互換性があるシリアルPROM（半固定記憶装置）又はEEPROM（電気的消去可能PROM）と呼ばれるメモリ装置において、モニタ中にしばしば記憶される。
【００６２】
再生装置は、DDC2チャネルを通じてディスプレイにE-EDIDリクエストを送信する。ディスプレイは、E-EDID情報を送信することによって応答する。プレーヤーは、最良のフォーマットを決定して、ビデオ・チャネルを通じた伝送を開始する。古いタイプのディスプレイでは、ディスプレイは、DDCチャネル上でE-EDID情報を連続的に送信する。リクエストは送信されない。インタフェース上で使用されるビデオ・フォーマットをさらに定めるために、更なる組織(Consumer Electronics Association; CEA)は、E-EDIDをTVタイプのディスプレイにおける使用に適したものとするために、E-EDIDに対するいくつかの更なる制限及び拡張を定めた。特定のE-EDID要求に加えて（上で参照される）HDMI規格は、多くの異なるビデオ・フォーマットのための識別コード及び関連するタイミング情報をサポートする。例えば、CEA 861-D規格が、インタフェース規格HDMIにおいて採用される。HDMIは、物理リンクを定め、より高レベルのシグナリングを取り扱うためにCEA 861-D及びVESA E-EDID規格をサポートする。VESA E-EDID規格は、ディスプレイが、それが立体視ビデオ伝送をサポートするか及びどのフォーマットでサポートするかを示すことを可能にする。ディスプレイの能力に関するそのような情報はソース装置に逆向きに伝わることに留意する必要がある。既知のVESA規格は、ディスプレイにおける3D処理を制御する順方向3D情報を定めない。
【００６３】
現在のシステムの実施の形態において、ディスプレイは、実際の観察者メタデータ及び/又は実際のディスプレイ・メタデータを提供する。実際のディスプレイ・メタデータは、それが、E-EDID中にあらかじめ含まれるディスプレイ・サイズと異なる（例えばそれより小さい）3D画像データを表示するために使用される表示領域の実際のサイズを定めるという点において、E_EDIDにおけるような既存のディスプレイ・サイズ・パラメータと異なることに留意する必要がある。E-EDIDは、伝統的にPROMから装置に関する静的な情報を提供する。提案される拡張は、表示装置において利用可能なときに観察者メタデータを、及び、ターゲット空間観察構成に対してソース3D画像データを処理するために重要である他のディスプレイ・メタデータを、動的に含める。
【００６４】
実施の形態において、観察者メタデータ及び/又はディスプレイ・メタデータは、例えばデータ・ストリーム中の別々のパケットとして別々に転送されるが、それに関するそれぞれのメタデータ・タイプを識別する。パケットは、3D処理を調整するための更なるメタデータ又は制御データを含むことができる。実際的な実施の形態において、メタデータは、HDMI Data Island中のパケットに挿入される。
【００６５】
オーディオ・ビデオ・データ(AV)ストリームにおいてHDMIで定義されるAuxiliary Video Information（AVI）中にメタデータを包含することの例は、以下の通りである。AVIは、Info Frameとしてソース装置からデジタル・テレビ（DTV）モニタまでAVストリームにおいて伝達される。制御データを交換することによって、両方の装置が前記メタデータの伝送をサポートするかが最初に確立されることができる。
【００６６】
図4は、メタデータによって拡張されるAVI情報フレームの表を示す。AVI情報フレームは、CEAによって定められ、色及び彩度サンプリング、オーバースキャン及びアンダースキャン並びにアスペクト比に関するフレーム・シグナリングを提供するために、HDMI及び他のビデオ伝送規格によって採用される。以下のように、メタデータを実施するために更なる情報が追加された。メタデータは、E-EDID又は同様の態様における任意の他の適切な転送プロトコルを介して転送されることもできることに留意する必要がある。図は、ソースからシンクへの通信を示す。任意の適切なプロトコルによる双方向の又はシンクからソースへの同様の通信が可能である。
【００６７】
図4の通信例において、データ・バイト1の最後のビットF17及びデータ・バイト4の最後のビットF47は、標準的なAVI情報フレームでは予約されている。実施の形態において、これらは、ブラック・バー情報におけるメタデータの存在を示すために用いられる。ブラック・バー情報は、通常、データ・バイト6〜13に含まれる。バイト14-27は、通常、HDMIにおいて予約されている。表の構文は、以下の通りである。F17がセットされる(=1)場合、データ・バイト9〜13は3Dメタデータ・パラメータ情報を含む。デフォルトの場合はF17がセットされず（=0）、これは、3Dメタデータ・パラメータ情報が存在しないことを意味する。
【００６８】
図4に一例として示されるように、以下の情報がAVI又はEDID情報に追加されることができる。
−  ディスプレイによってサポートされる（推奨される）最小視差（又は深さ若しくは像差）
−  ディスプレイによってサポートされる（推奨される）最大視差（又は深さ若しくは像差）
−  ユーザが好む最小深さ（又は視差若しくは像差）
−  ユーザが好む最大深さ（又は視差若しくは像差）
−  （瞳孔間距離を含む）子供モード
−  最小及び最大の観察距離
なお、上記パラメータの組み合わされた値及び/又は別々の最小値及び最大値又は平均値が用いられることができる。さらに、いくつかの情報は、転送される情報中に存在する必要はなく、プレーヤー又はディスプレイにおいてそれぞれ提供され、設定され、及び/又は記憶されることができ、そして特定のディスプレイのために最良な3Dコンテンツを生成するために画像処理ユニットによって用いられることができる。その情報は、全ての利用可能な観察者情報に基づく表示装置における処理を適用することによって最良の可能なレンダリングを行うことを可能にするために、プレーヤーからディスプレイへ転送されることもできる。
【００６９】
観察者メタデータは、自動的な又はユーザ制御された態様で読み出されることができる。例えば、最小及び最大の観察距離は、ユーザ・メニューを介してユーザによって挿入されることができる。子供モードは、リモコン装置のボタンによって制御されることができる。実施の形態において、ディスプレイは、内蔵されたカメラを持つ。そのように既知の画像処理を介して、装置は観察者の顔を検出することができ、それに基づいて、観察距離及び考え得る瞳孔間距離を推定することができる。
【００７０】
ディスプレイ・メタデータの実施の形態において、ディスプレイによってサポートされる推奨される最小又は最大の深さは、ディスプレイ製造者によって提示される。ディスプレイ・メタデータは、メモリに記憶されるか、又は、インターネットのようなネットワークを介して読み出されることができる。
【００７１】
要約すると、3Dディスプレイ又は3D能力があるプレーヤーは、上述のような観察者メタデータ及びディスプレイ・メタデータを交換するために協調して、コンテンツを最適にレンダリングするために3D画像データを処理して、それによってユーザに最良の観察経験を与えるための全ての情報を持つ。
【００７２】
本発明は、プログラム可能な構成要素を用いて、ハードウェア及び/又はソフトウェアで実施されることができることに留意する必要がある。本発明を実施するための方法は、図1を参照して説明される3D画像データの処理に対応する処理ステップを持つ。本発明が家庭の3D表示装置に表示されるべき光学記録担体又はインターネットからの3Dソース画像データを用いる実施の形態によって主に説明されたが、本発明は、3Dディスプレイを有するモバイルPDA若しくは携帯電話、3Dパーソナル・コンピュータディスプレイ・インタフェース又は無線3D表示装置に結合される3Dメディア・センターのような、任意の画像処理環境にも適している。
【００７３】
なお、本明細書において、「有する」「含む」などの用語は、挙げられたもの以外の要素又はステップの存在を除外せず、単数で表現された要素は、そのような要素が複数存在することを除外せず、いかなる参照符号も請求の範囲を制限せず、本発明は、ハードウェア及びソフトウェアの両方によって実施されることができ、いくつかの「手段」又は「ユニット」は、ハードウェア又はソフトウェアの同じアイテムによって表されることができ、プロセッサは、おそらくハードウェア要素と協同して、１つ以上のユニットの機能を果たすことができる。さらに、本発明は、実施の形態に制限されず、上述の新規な特徴又は特徴の組み合わせにも存在する。
【図１】
2012518317.tif 000003
【図２】
2012518317.tif 000004
【図３】
2012518317.tif 000005
【図４】
2012518317.tif 000006
【国際調査報告】
2012518317.tif 000007
2012518317.tif 000008