(57)【要約】  メディアコンテンツストリーミングのための様々な概念が説明されている。空間シーンコンテンツを空間的に異なる方法でストリーミングすることを可能にするものもあり、その結果、ユーザにとっての視覚的品質が向上するか、またはストリーミング検索サイトにおける処理の複雑さまたは必要な帯域幅が減少する。他のものは、さらなる適用シナリオへの適用性を拡大する方法で空間シーンコンテンツをストリーミングすることを可能にする。
2019537338.tif 000002
【特許請求の範囲】
【請求項１】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングするための装置であって、
サーバ（２０）上で利用可能な複数（４６）のメディアセグメント（５８）からメディアセグメントを選択し（５６）、
サーバ（２０）からの選択されたメディアセグメント（６０）であり、ここで、装置は、
前記選択されたメディアセグメントが、前記空間的セクションの第１の部分（６４）が所定の品質で前記選択されたメディアセグメントに符号化され、かつ第１の部分（６４）に空間的に隣接する時間的に変化する空間シーンの第２の部分（６６）が、所定の関係に関して所定の関係を満たすさらなる品質で前記選択されたメディアセグメントに符号化される方法で符号化された時間的に変化する空間的シーン（３０）の空間的セクション（６２）を少なくとも有するように選択を実行し、かつ、
前記選択されたメディアセグメントに含まれる情報（６８）および／または前記サーバ（２０）から得られる信号伝達から所定の関係を導き出す、
ように構成される装置。
【請求項２】
前記複数（４６）のメディアセグメントの各メディアセグメントは、一組の品質レベルのうちの関連する１つで、前記時間的に変化する空間シーン（３０）の関連する時空間部分に符号化されている、請求項１に記載の装置。
【請求項３】
前記複数（４６）のメディアセグメントに符号化された前記時間的に変化する空間シーン（３０）の各時空間部分は、時間的に変化する空間シーン（３０）が空間的に細分されているタイル（５０）における前記時間的に変化する空間シーン（３０）の時間セグメント（５４）である、請求項２に記載の装置。
【請求項４】
前記情報（６４）は、前記さらなる品質と前記所定の品質との間の差の尺度についての許容値を示す、請求項１から３のいずれかに記載の装置。
【請求項５】
前記情報（６８）は、前記ビューセクション（２８）までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定に対する前記許容値を示す、請求項４に記載の装置。
【請求項６】
前記情報は、ビューセクション（２８）までのそれぞれの距離と、それぞれの距離を超えた差を測定するための対応する許容値との差の対のリストとして前記ビューセクション（２８）までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定に対する前記許容値を示す、請求項４または５に記載の装置。
【請求項７】
前記情報（６４）は、前記さらなる品質と前記所定の品質との間の差の測定のための前記許容値を示し、それにより前記許容値は前記ビューセクションまでの距離が増すにつれて増大する、請求項４ないし６のいずれかに記載の装置。
【請求項８】
前記情報（６４）は、前記第２の部分が前記第１の部分と共に前記ビューセクション内にあり得る最大許容時間間隔の表示と共に、さらなる品質と所定の品質との間の差の尺度についての許容値を示す、請求項４ないし７のいずれかに記載の装置。
【請求項９】
前記情報（６４）は、さらなる品質と所定の品質との間の前記差を測定するためのさらなる許容値を、前記第２の部分が前記第１の部分に沿った前記ビューセクション内に存在し得る最大許容時間間隔の表示と共に示す、請求項８に記載の装置。
【請求項１０】
前記情報（６４）が時間的変化および／または空間的に変化することを特徴とする請求項４から９のいずれかに記載の装置。
【請求項１１】
前記情報（６４）は、前記さらなる品質および前記所定の品質について許容される同時設定の対を示す、請求項１から１０のいずれかに記載の装置。
【請求項１２】
前記装置は、前記第１の部分が前記時間的に変化する空間シーン（３０）の時間的に変化するビューセクション（２８）に追従するように前記選択を実行するように構成されている、請求項１に記載の装置。
【請求項１３】
前記装置は、前記時間的に変化するビューセクション（２８）の空間的位置がユーザ入力に従って変化するように構成されている、請求項１２に記載の装置。
【請求項１４】
前記装置は、関心領域に対応するように前記第１の部分を決定するように構成されている、請求項１から１３のいずれかに記載の装置。
【請求項１５】
前記装置は、前記ＲＯＩに関する情報を前記サーバから検索するように構成されている、請求項１４に記載の装置。
【請求項１６】
時間的に変化する空間シーンに関するメディアコンテンツ用のストリーミングサーバであって、
装置による検索のために複数のメディアセグメントを利用可能にし、それによって、装置は、空間的セクションの第１の部分が所定の品質で選択されたメディアセグメントに符号化される方法で符号化された方法で、少なくとも時間的に変化する空間シーンの空間的セクションをその中に符号化する検索のためのメディアセグメントを選択でき、それに応じて、第１の部分と空間的に隣接する時間的に変化する空間シーンの第２の部分がさらなる品質で選択されたメディアセグメントに符号化され、
メディアセグメント内の所定の関係に関する情報および／または装置への信号伝達によって、所定の品質に対するさらなる品質によって満たされるべき所定の関係を有する信号情報とを含むように構成される、ストリーミングサーバ。
【請求項１７】
前記複数のメディアセグメントの各メディアセグメントは、一組の品質レベルのうちの関連する１つで前記時間的に変化する空間シーンの関連する時空間部分を符号化している、請求項１６に記載のストリーミングサーバ。
【請求項１８】
前記複数のメディアセグメントに符号化された前記時間的に変化する空間シーン（３０）の各時空間部分は、時間的に変化する空間シーン（３０）が空間的に細分されるタイル（５０）のそれぞれの１つにおいて、前記時間的に変化する空間シーン（３０）の時間セグメント（５４）である、請求項１７に記載のストリーミングサーバ。
【請求項１９】
前記情報（６４）は、前記さらなる品質と前記所定の品質との間の差の尺度についての許容値を示す、請求項１６ないし請求項１８のいずれかに記載のストリーミングサーバ。
【請求項２０】
前記情報（６８）は、前記ビューセクション（２８）までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差を測定するための前記許容値を示す、請求項１９に記載のストリーミングサーバ。
【請求項２１】
前記情報は、前記ビューセクション（２８）までのそれぞれの距離および前記それぞれの距離を超えた差の測定のための対応する許容値とのペアのリスト（２８）によって、ビューセクション（２８）までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定のための前記許容値を示す、請求項１９または２０に記載のストリーミングサーバ。
【請求項２２】
前記情報は、前記さらなる品質と前記所定の品質との間の差の測定のための前記許容値を示し、それにより前記許容値は、前記ビューセクションまでの距離が増すにつれて増大する、請求項１９ないし２１のいずれかに記載のストリーミングサーバ。
【請求項２３】
前記情報（６４）は、前記第２の部分が前記第１の部分と共にビューセクション内にあってもよい許容される最大許容時間間隔の表示と共に、前記さらなる品質と前記所定の品質との間の差の尺度についての許容値を示す、請求項１９ないし２２のいずれかに記載のストリーミングサーバ。
【請求項２４】
前記情報（６４）は、前記第２の部分が前記第１の部分と共にビューセクション内にあってもよいさらなる最大許容時間間隔の表示と共に、前記さらなる品質と前記所定の品質との間の差の測定に対するさらなる許容値を示す、請求項２３に記載のストリーミングサーバ。
【請求項２５】
前記情報（６４）は時間および／または空間的に変化している、請求項１９ないし２４のいずれかに記載のストリーミングサーバ。
【請求項２６】
前記情報（６４）は、前記さらなる品質および前記所定の品質に関して許容される同時設定のペアを示す、請求項１９ないし２５のいずれかに記載のストリーミングサーバ。
【請求項２７】
前記装置は、ＲＯＩに関する情報を前記装置に送信するように構成されている、請求項１９ないし２６のいずれかに記載のストリーミングサーバ。
【請求項２８】
複数のメディアセグメントのアドレスを計算することに関する情報であって、その情報を使用する装置は、時間的に変化する空間シーンの少なくとも１つの空間セクションをそのように符号化した複数のメディアセグメントからメディアセグメントを選択し検索することができ、それによれば、前記空間セクションの第１の部分が所定の品質で選択されたメディアセグメントに符号化され、それに応じて第１の部分に空間的に隣接する時間的に変化する空間シーンの第２の部分が選択されたメディアセグメントによりさらなる品質に符号化される情報と、
前記所定の品質に関するさらなる品質によって満たされるべき所定の関係に関する情報（６４）とを含む、メディアプレゼンテーション記述。
【請求項２９】
前記複数のメディアセグメントの各メディアセグメント（４６）は、一組の品質レベルのうちの関連する１つで、前記時間的に変化する空間シーン（３０）の関連する時空間部分をその中に符号化している、請求項２８に記載のメディアプレゼンテーション記述。
【請求項３０】
前記複数のメディアセグメント（４６）に符号化された前記時間的に変化する空間シーン（３０）の各時空間部分は、時間的に変化する空間シーン（３０）が空間的に細分されるタイル（５０）のそれぞれ１つにおける前記時間的に変化する空間シーン（３０）の時間セグメント（５４）である、請求項２９に記載のメディアプレゼンテーション記述。
【請求項３１】
前記情報（６４）は、前記さらなる品質と前記所定の品質との間の差の尺度についての許容値を示す、請求項２８ないし３０のいずれかに記載のメディアプレゼンテーション記述。
【請求項３２】
前記情報（６８）は、前記ビューセクション（２８）までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定に対する前記許容値を示す、請求項３１に記載のメディアプレゼンテーション記述。
【請求項３３】
前記情報は、前記ビューセクション（２８）までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定に対する前記許容値をビューセクション（２８）までのそれぞれの距離と、それぞれの距離を超える差を測定するための対応する許容値との対のペアリストにより示す、請求項３１または３２に記載のメディアプレゼンテーション記述。
【請求項３４】
前記情報（６４）は、前記第２の部分が前記第１の部分と共にビューセクション内にあり得る最大で許容される時間間隔の指示と共に、前記追加品質と前記所定品質との間の差の尺度についての前記許容値を示す、請求項３１ないし３４のいずれかに記載のメディアプレゼンテーション記述。
【請求項３５】
前記情報（６４）は、前記第２の部分が前記第１の部分と共にビューセクション内にあり得る最大で許容される時間間隔の指示と共に、前記追加品質と前記所定品質との間の差の尺度についての前記許容値を示す、請求項３１ないし３４のいずれかに記載のメディアプレゼンテーション記述。
【請求項３６】
前記情報（６４）は、最初の部分と一緒にビューセクション内にある前記第２の部分が許容することができるさらなる最大許容時間間隔の指示とともに、前記さらなる品質と前記所定の品質との間の差の測定に関するさらなる許容値を示す、請求項３５に記載のメディアプレゼンテーション記述。
【請求項３７】
前記情報（６４）は時間的に変化および／または空間的に変化している、請求項３１ないし３６のいずれかに記載のメディアプレゼンテーション記述。
【請求項３８】
前記情報（６４）は、前記さらなる品質および前記所定の品質に対して許容される同時設定のペアを示す、請求項３１ないし３７のいずれかに記載のメディアプレゼンテーション記述。
【請求項３９】
前記メディアプレゼンテーション記述は、ＲＯＩに関する情報を含む、請求項３１ないし３８のいずれかに記載のメディアプレゼンテーション記述。
【請求項４０】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングするための装置であって、
サーバ（２０）上で利用可能な複数（４６）のメディアセグメント（５８）からメディアセグメントを選択するように構成され、
前記装置は、
前記空間セクション（６２）の第１の部分（６４）が所定の品質で選択されたメディアセグメントに符号化され、前記第１の部分（６４）と空間的に隣接し、時間的に変化する空間シーンの第２の部分（６６； ７２）が選択されたメディアセグメントに符号化されていないか、または所定の品質に対してさらに低い品質で選択されたメディアセグメントに符号化され、
前記第１の部分（６４）は、前記時間的に変化する空間シーン（３０）の時間的に変化するビュー部分（２８）に続くような方法で、
選択されたメディアセグメントが少なくとも時間的に変化する空間シーン（３０）の空間セクション（６２）をその中に符号化するように選択を実行し、
前記選択されたメディアセグメントに含まれる情報（７４）および／または前記サーバから得られる信号伝達に応じて、前記第１の部分（６４）のサイズおよび／または位置を設定するように構成された装置。
【請求項４１】
前記情報（７４）は、前記時間的に変化するビューセクションのサイズに対する増分またはそのスケーリングの形でサイズを示す、請求項４０に記載の装置。
【請求項４２】
前記情報（７４）は、前記ビューセクションの空間速度の尺度についての所定の値を示す、請求項４０または４１に記載の装置。
【請求項４３】
測定された空間速度が所定の値を超えないユーザのデフォルトパーセンタイルについて、および／または、
測定された空間速度が所定の値を超えないユーザのパーセンタイルを示すパーセンタイル値と共に、および／または、
ビューセクションが所定の領域内にあるユーザのパーセンタイルを示すパーセンタイル値とともに、および／または、
所定の値が適用可能であるビューセクションの動きを制御する１つまたは複数の種類のユーザ入力を示すヒントとともに、
前記情報（７４）は、前記ビューセクションの前記空間速度の尺度についての前記所定の値を示す、請求項４２に記載の装置。
【請求項４４】
ビューセクションｄの空間速度の尺度に対する所定の値が大きいほど、サイズは大きいように設定を行うように構成されている、請求項４２または４３に記載の装置。
【請求項４５】
前記情報（７４）は、前記ビューセクションの移動方向についての確率の尺度についての所定の値を示す、請求項４０または４４に記載の装置。
【請求項４６】
それぞれの移動方向についての可能性が高いほど、第１の部分がそれぞれの方向に延びているように設定を行うように構成されている、請求項４５に記載の装置。
。
【請求項４７】
前記情報（７４）は、時間変化および／または空間変化および／または方向変化の方法で前記所定の空間速度を示す、請求項４０または４６に記載の装置。
【請求項４８】
前記第１の部分（６４）と前記空間部分（６２）とが一致するように構成されている、請求項４０または４７に記載の装置。
【請求項４９】
前記複数のメディアセグメントに符号化された前記時間的に変化する空間シーン（３０）の時空間部分のそれぞれは、時間的に変化する空間シーン（３０）が空間的に細分されるタイル（５０）のそれぞれの１つにおける前記時間的に変化する空間シーン（３０）の時間セグメント（５４）である、請求項４０または４８に記載の装置。
【請求項５０】
前記複数のメディアセグメントの各メディアセグメントは、一組の品質レベルのうちの関連する１つで前記時間的に変化する空間シーンの関連する時空間部分をその中に符号化している、請求項４９に記載の装置。
【請求項５１】
前記装置は、前記情報に応じて前記時間的に変化するビューセクションのサイズとは無関係に前記サイズを設定するように構成される、請求項４０に記載の装置。
【請求項５２】
前記情報は、前記時間変化するビューセクションの異なるサイズオプションに対する前記サイズに対する異なる値を含み、前記装置は、前記時間変化するビューセクションの実際のサイズに適合するサイズオプションに関する情報に含まれる値を使用する、請求項４０に記載の装置。
【請求項５３】
前記情報はタイルの数でサイズを示す、請求項５１または５２に記載の装置。
【請求項５４】
時間的に変化する空間シーンに関するメディアコンテンツ用のストリーミングサーバであって、
装置による検索のために複数のメディアセグメントを利用可能にし、それによって、装置は、空間的セクションの第１の部分が所定の品質で選択されたメディアセグメントに符号化される方法で符号化された方法で、少なくとも時間的に変化する空間シーンの空間的セクションをその中に符号化する検索のためのメディアセグメントを選択でき、それに応じて、第１の部分と空間的に隣接する時間的に変化する空間シーンの第２の部分が前記選択されたメディアセグメントに符号化されないかあるいは所定の品質よりさらに低い品質で選択されたメディアセグメントに符号化され、その結果、前記第１の部分は前記時間的に変化する空間的シーンの時間的に変化するビューセクションに続き、かつ、
第１の部分のサイズおよび／または位置をメディアセグメント内に設定する方法および／または装置への信号伝達によって、情報を通知する、ように構成される、ストリーミングサーバ。
【請求項５５】
メディアプレゼンテーション記述を定義する信号であって、
複数のメディアセグメントのアドレスを計算することに関する情報であって、その情報を使用する装置は、時間的に変化する空間シーンの少なくとも１つの空間セクションをそのように符号化した複数のメディアセグメントからメディアセグメントを選択し検索することができ、それによれば、空間セクションの第１の部分は所定の品質で選択されたメディアセグメントに符号化され、それに応じて、第１の部分に空間的に隣接する時間的に変化する空間シーンの第２の部分は選択されたメディアに符号化されない、あるいは、予め定められた品質と比べてさらに低い品質で選択されたメディアセグメントにセグメント化または符号化され、したがって第１の部分は時間的に変化する空間シーンの時間的に変化するビューセクションに続く情報と、
メディアセグメント内に、および／またはデバイスへの信号伝達によって、サイズおよび／または第１の部分のサイズを設定する方法に関する情報とを含む、
メディアプレゼンテーション記述を定義する信号。
【請求項５６】
前記情報（７４）は、前記時間的に変化するビューセクションのサイズに対する増分またはそのスケーリングの形式でサイズを示す、請求項５５に記載の信号。
【請求項５７】
前記情報（７４）は、前記ビューセクションの空間速度の尺度についての所定の値を示す、請求項５５または５６に記載の信号。
【請求項５８】
測定された空間速度が所定の値を超えないユーザのデフォルトパーセンタイルについて、および／または、
測定された空間速度が所定の値を超えないユーザのパーセンタイルを示すパーセンタイル値と共に、および／または、
ビューセクションが所定の領域内にあるユーザのパーセンタイルを示すパーセンタイル値とともに、および／または、
所定の値が適用可能であるビューセクションの動きを制御する１つまたは複数の種類のユーザ入力を示すヒントと一緒に、
前記情報（７４）は、前記ビューセクションの前記空間速度の尺度についての前記所定の値を示す、請求項５７に記載の信号。
【請求項５９】
ビューセクションｄの空間速度の尺度に対する所定の値が大きいほど、サイズが大きいように設定を実行するように構成された、請求項５７または５８に記載の信号。
【請求項６０】
前記情報（７４）は、前記ビューセクションの移動方向についての確率の尺度についての所定の値を示す、請求項５５または５９に記載の信号。
【請求項６１】
それぞれの移動方向についての可能性が高いほど、第１の部分がそれぞれの方向に延びているように設定を行うように構成された、請求項６０に記載の信号。
【請求項６２】
前記情報（７４）は、時間変化および／または空間変化および／または方向変化する形で前記所定の空間速度を示す、請求項５５または６１のいずれかに記載の信号。
【請求項６３】
前記第１の部分（６４）と前記空間部分（６２）とが一致するように構成されている、請求項５５または６２のいずれかに記載の信号。
【請求項６４】
前記複数のメディアセグメントに符号化された前記時間的に変化する空間シーン（３０）の前記時空間部分のそれぞれは、時間的に変化する空間シーン（３０）が空間的に細分されているタイル（５０）のそれぞれの１つにおいて前記時間的に変化する空間シーン（３０）の時間セグメント（５４）である、請求項５５または６３のいずれかに記載の信号。
【請求項６５】
前記複数のメディアセグメントの各メディアセグメントは、一組の品質レベルのうちの関連する１つのレベルで前記時間的に変化する空間シーンの関連する時空間部分に符号化している、請求項６４に記載の信号。
【請求項６６】
前記装置は、前記情報に応じて前記時間的に変化するビューセクションのサイズから独立した方法で前記サイズに構成される、請求項５５に記載の信号。
【請求項６７】
前記情報は、前記時間変化ビューセクションの異なるサイズオプションに対するサイズに対する異なる値を含み、前記装置は、前記時間変化ビューセクションの実際のサイズに適合するサイズオプションに関する情報に含まれる値を用いる、請求項５５に記載の信号。
【請求項６８】
前記情報がタイルの数でサイズを示す、請求項６５または６６に記載の信号。
【請求項６９】
ビデオを復号化するための復号化パワーがフォーカスされるべき前記ビデオ内の１つまたは複数のサイズの焦点領域の信号伝達、および前記ビデオの推奨される好ましいビューセクション領域を含むビデオビットストリームに符号化されるビデオを有するビデオビットストリーム。
【請求項７０】
ビデオ内の焦点領域のサイズの信号伝達（７４）をビデオビットストリームから導出し、
前記ビデオを復号化するための復号化パワーを前記焦点領域（１１６）に集中させるように構成された、前記ビデオビットストリームから前記ビデオをデコードするためのデコーダ。
【請求項７１】
前記焦点領域を排他的に復号するように構成されている、請求項７０に記載のデコーダ。
【請求項７２】
前記フォーカス領域において前記ビデオの各ピクチャの復号を開始するように構成されている、請求項７０に記載のデコーダ。
【請求項７３】
前記フォーカス領域を復号すると、前記ビデオの各ピクチャの復号を中止するように構成されている、請求項７０に記載のデコーダ。
【請求項７４】
前記信号伝達は、前記サイズを絶対的に示すか、または前記デコーダは、前記信号伝達に含まれるパラメータによって前記焦点領域のサイズをスケーリングするように構成される、請求項７０ないし７３のいずれかに記載のデコーダ。
【請求項７５】
時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための装置（３０）であって、
時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも１つのバージョンで、
少なくとも１つのバージョンのそれぞれについて、時間的に変化する空間シーンのそれぞれのバージョンをタイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示とを
メディアプレゼンテーションの説明から導出し（９０）、
タイルベースのストリーミングに関して、少なくとも１つのバージョンの恩恵を受ける要件と、装置のデバイス機能または装置と対話する別の装置とを一致させる（９２）ように構成されている、装置。
【請求項７６】
請求項７５に記載の装置であって、前記恩恵を受ける要件および前記装置の能力は復号化能力に関係する装置。
【請求項７７】
請求項７５または７６に記載の装置であって、前記恩恵を受ける要件および前記装置の能力は、いくつかの利用可能なデコーダに関する装置。
【請求項７８】
請求項７５から７７のいずれかに記載の装置であって、前記恩恵を受ける要件および前記装置の能力は、レベルおよび／またはプロファイル記述子に関係する装置。
【請求項７９】
前記恩恵を受ける要件および前記装置の能力は、前記時間的に変化する空間シーン（３０）にわたってビューセクションを移動させるための入力装置のタイプに関連する、または前記ビューセクションは入力装置を使用して前記時間的に変化する空間シーン（３０）にわたって移動するスピードに関連する請求項７５ないし７８のいずれかに記載の装置。
【請求項８０】
前記装置は、
メディアプレゼンテーション記述に含まれる計算規則を使用して、選択されたメディアセグメントのアドレスを計算することによって、サーバ（２０）上で利用可能な複数（４６）のメディアセグメント（５８）からメディアセグメントを選択し、
計算されたアドレスを使用してサーバ（２０）から選択されたメディアセグメントを検索し、
装置は、選択されたメディアセグメントが、時間的に変化する空間シーン（３０）の少なくとも１つの空間セクション（６２）をその中に符号化したものを有するように選択を実行するように構成されており、
それによれば、空間セクション（６２）の第１の部分（６４）が所定の品質で選択されたメディアセグメントに符号化され、それに従って時間的に変化する空間シーンの第２の部分（６６； ７２）が第１の部分（６４）に空間的に隣接し、選択されたメディアセグメントに符号化されていないか、または所定の品質に対してさらに低い品質で選択されたメディアセグメントに符号化されており、かつ、
第１の部分（６４）が時間的に変化する空間シーン（３０）の時間的に変化するビュー部分（２８）に続くようにする、請求項７５ないし７９のいずれかに記載の装置。
【請求項８１】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングするためのストリーミングサーバであって、
時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも１つのバージョンで、
少なくとも１つのバージョンのそれぞれについて、時間ベースで変化する空間シーンのそれぞれのバージョンをタイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示が、
導出でき、これにより、装置が、ストリーミングサーバからメディアコンテンツをストリーミングすることが可能となる、
メディアプレゼンテーション記述を提供し（９０）、
タイルベースのストリーミングに関して、少なくとも１つのバージョンの恩恵を受ける要件と、装置のデバイス機能または装置と対話する別の装置とを一致させる（９２）ように構成されたストリーミングサーバ。
【請求項８２】
時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも１つのバージョンに関する情報と、
少なくとも１つのバージョンのそれぞれに対して、時間的に変化する空間シーンの前記それぞれのバージョンを前記タイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示とを含む、メディアプレゼンテーション記述。
【請求項８３】
前記恩恵を受ける要件と前記デバイス機能は復号化機能に関係する請求項８２に記載のメディアプレゼンテーション記述。
【請求項８４】
前記恩恵を受ける要件および前記デバイス機能は、いくつかの利用可能なデコーダに関係する、請求項８２または８３に記載のメディアプレゼンテーション記述。
【請求項８５】
前記恩恵を受ける要件および前記デバイス機能は、レベル記述子および／またはプロファイル記述子に関係する、請求項８２から８４のいずれかに記載のメディアプレゼンテーション記述。
【請求項８６】
前記恩恵を受ける要件および前記デバイス機能は、時間的に変化する空間シーン（３０）にわたってビューセクションを移動させるためのタイプの入力装置に関係する、または入力装置を使用して、ビューセクションが時間的に変化する空間シーン（３０）にわたって移動する速度に関係する、請求項８２に記載のメディアプレゼンテーション記述。
【請求項８７】
前記装置が、前記含まれる計算規則を使用して選択されたメディアセグメントのアドレスを計算することによって、前記サーバ（２０）上で利用可能な複数（４６）のメディアセグメント（５８）からメディアセグメントを選択することを使用可能にするための計算規則をさらに含む、請求項８２ないし８６のいずれかに記載のメディアプレゼンテーション記述。
【請求項８８】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングするための装置であって、
空間的ビューポート位置および少なくとも１つのパラメータに応じて、メディアセグメントのアドレスを計算し、メディアセグメントは時間的に変化する空間シーン（３０）および少なくとも１つのパラメータを記述し、
計算されたアドレスを使用してメディアセグメントを取得する、
ように構成された装置。
【請求項８９】
前記少なくとも１つのパラメータは、視野中心および／または視野深度の１つまたは複数の座標を含む、請求項８８に記載の装置。
【請求項９０】
空間ビューポート位置および少なくとも１つのパラメータに応じて、メディアセグメントのアドレスを計算するための計算規則と、時間的に変化する空間シーンを記述するメディアセグメント（３０）と、計算されたアドレスを使用してメディアセグメントを検索するための少なくとも１つのパラメータとを含む、メディアプレゼンテーション記述。
【請求項９１】
請求項９０に記載のメディアプレゼンテーション記述を提供するように構成された、サーバから時間的に変化する空間シーン（３０）に関係するメディアコンテンツをストリーミング配信することを装置が可能にするストリーミングサーバ。
【請求項９２】
時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための装置であって、
サーバ上で利用可能な複数のメディアセグメントからメディアセグメントを選択するように構成され、
前記装置は、時間的に変化する空間シーンの第１の部分を、第１の部分の空間的近傍と比較して、または第１の部分の空間的近傍が選択されたメディアセグメントに符号化されないような方法で向上した品質でそこに符号化し、
前記第１の部分の空間位置および／または移動を測定する瞬時測定値、および／または
前記第１の部分の空間位置および／または動きを測定する、時間平均などの統計値、および／または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、時間的に変化する空間シーンの品質を測定する瞬間測定、および／または
選択されたメディアセグメントをバッファリングすることに関与するデバイスのバッファのセット（３００）の表示、選択されたメディアセグメントをバッファのセットに分配する際に適用される分配規則の記述、およびバッファの各セットの瞬間的なバッファ充満および／または
復号化の対象となるために前記装置のバッファから出力されていない選択されたメディアセグメントの量の測定値（４２）および／または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、時間的に変化する空間シーンの品質を測定する時間的平均などの統計値、および／または
選択されたメディアセグメントに符号化され、ビューセクションで見える限りにおいて、第１の部分の品質または時間的に変化する空間シーンの品質を測定する瞬間的な測定値、および／または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、第１の部分の品質または時間的に変化する空間シーンの品質を測定する、時間平均などの統計値、および／または
前記ビューセクションによって覆われる視野、および／または
シーン中心に対するユーザ位置またはビュー深度を測定する瞬間測定値（１００）および／または
シーン中心（１００）に対するユーザ位置またはビュー深度を測定する、時間平均などの統計値
を記録するログメッセージを送出するように構成されている、装置。
【請求項９３】
前記選択されたメディアセグメントに符号化され、ビューセクション内に見える限りにおいて、前記第１の部分の品質または前記時間的に変化する空間シーンの品質が、低品質部分が高品質部分とともにビューセクションに表示される持続時間として測定される請求項９２に記載の装置。
【請求項９４】
時間的に変化する空間シーンの第１の部分（６４）が前記ビューセクション（２８）を追加するように前記選択を実行するように構成されている、請求項９２または９３に記載の装置。
【請求項９５】
時間的に変化する空間シーンが選択されたメディアセグメントに符号化されるビューセクション（２８）に入るピクセルの平均密度を測定する尺度
の１つとして選択されたメディアセグメントに符号化され、ビューセクションに表示される限りにおいて、時間的に変化する空間シーンの品質を測定する瞬間測定値を記録する送信ログメッセージを設定する、請求項９２ないし９４のいずれかに記載の装置。
【請求項９６】
前記測定値は、前記選択されたメディアセグメントに符号化されたピクチャのピクセルグリッドに関して空間的に均一な方法で前記ピクセル密度を平均することによって前記ピクセルの平均密度を測定するように構成される、請求項９５に記載の装置。
【請求項９７】
前記測定値は、前記選択されたメディアセグメントに符号化されたピクチャのピクセルグリッドに関して空間的に不均一な方法で前記ピクセル密度を平均することによって前記ピクセルの平均密度を測定するように構成される、請求項９５に記載の装置。
【請求項９８】
選択されたメディアセグメントに符号化されたピクチャのピクセルグリッドに関して空間的に均一な方法でピクセル密度を平均化する、あるいは、
選択されたメディアセグメントに符号化されたピクチャのピクセルグリッドに関して、空間的に不均一な方法でピクセル密度を平均する
ことにより、前記送出ログメッセージが、前記測定値が平均画素密度を測定するかどうかを示すように構成されている、請求項９５に記載の装置。
【請求項９９】
請求項９７または９８に記載の装置であって空間的に不均一な方法でピクセル密度を平均することは、
球状に均一な方法で平均化すること、あるいは
ビューセクション（２８）の中央ビュー方向（３１２）に対して垂直であるビューポート平面（３１０）に関して空間的に均一に平均化すること、
に対応する装置。
【請求項１００】
測定値は、前記平均化を前記ビューセクション（２８）の中央サブセクションに限定する方法でピクセルの密度を平均化することによってピクセルの平均密度を測定し、またはビューセクションのエッジ部分（２０４）と比較して中央サブセクションに、より高い平均重みを適用する（２０２）、請求項９５ないし９９のいずれかに記載の装置。
【請求項１０１】
前記測定値が、それぞれ水平視野断面軸（２０４）および垂直視野断面軸（２０６）に沿って別々に平均ピクセル密度を測定するように構成されている、請求項９５ないし１００のいずれかに記載の装置。
【請求項１０２】
ログメッセージを断続的に送信するように構成されている、請求項９５から１０１のいずれかに記載の装置。
【請求項１０３】
ログメッセージを、それに基づいて装置がダウンロードのための前記メディアセグメントの選択を実行するマニフェストファイルによって制御されるレートで送信するように構成されている、請求項９５ないし１０２のいずれかに記載の装置。
【請求項１０４】
前記サーバ上で利用可能な前記複数のメディアセグメントはそれぞれ、前記時間的に変化する空間シーンの複数の表現のうちの１つに属し、前記表現は、以下の１つまたは複数において異なり、
前記時間的に変化する空間シーンの中に符号化されているシーンセクション（５０）、
前記時間的に変化する空間シーンがそこに符号化される品質
時間的に変動する空間的シーンがその中に符号化される空間的品質変動
但し、前記装置は、選択されたメディアセグメントをバッファのセットに分配する際に適用される分配規則の記述を、各バッファの１つ、または
前記スクリーンセクション
前記品質
前記空間品質分布
表現
の１つもしくは２つ以上への関連付けの形態でログするログメッセージを送信するように構成される、請求項９５ないし１０３のいずれかに記載の装置。
【請求項１０５】
前記表現は、以下のうちの１つまたは複数に従って適応セットに分類され、
時間的に変化する空間シーンのシーンセクションがその中に符号化され、
時間的に変動する空間シーンがその中に符号化される空間品質変動、
装置は、前記選択されたメディアセグメントを１組のバッファに分配する際に適用された前記分配規則の前記記述を各バッファの１つの適応セットへの関連付けの形で記録するあるいは前記選択されたメディアセグメントを１組のバッファに分配する際に適用された前記分配規則の前記記述を各バッファの１つの表現への関連付けの形で記録する送出ログメッセージを構成するように構成される、請求項９５ないし１０４のいずれかに記載の装置。
【請求項１０６】
前記装置は、時間的な測定の形で復号化（４２）を受けるために前記装置のバッファから出力されていない選択されたメディアセグメントの量の測定値を記録するログメッセージを送信するように構成される、請求項９５ないし１０５のいずれかに記載の装置。
【請求項１０７】
前記装置は、選択されたメディアセグメントの量の測定が、メディアセグメント（５８）の時間的長さおよび／またはミリ秒単位でよりも短い時間単位での時間測定の形でおよび／またはとは無関係に独立して定義される復号化（４２）の対象となるために前記装置のバッファから出力されていないように構成される、請求項１０６に記載の装置。
【請求項１０８】
前記装置は、以下の１つ以上で分類された形式で復号化（４２）の対象となるために前記装置のバッファから出力されなかった選択されたメディアセグメントの量の測定値を記録するログメッセージを送出するように構成される、請求項９５ないし１０７のいずれかに記載の装置。
それぞれのメディアセグメントがバッファリングされている前記デコーダのバッファ、
前記それぞれのメディアセグメントに符号化されたシーンセクション、
前記時間的に変化する空間シーンがそれぞれのメディアセグメントに符号化される品質、
前記時間的に変化する空間シーンがそれぞれのメディアセグメントに符号化される空間品質分布。
【請求項１０９】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングするための方法であって、
サーバ（２０）上で利用可能な複数（４６）のメディアセグメント（５８）からメディアセグメントを選択する（５６）工程と、
サーバ（２０）から前記選択されたメディアセグメントを検索し（６０）、前記選択されたメディアセグメントが以下に従って符号化された時間的に変化する空間シーン（３０）の空間セクション（６２）を少なくとも有するように実行され、空間セクションの第１の部分（６４）は所定の品質で選択されたメディアセグメントに符号化され、それに従って、時間的に変化する空間シーンの第２の部分（６６）は空間的に第１の部分（６４）に隣接し、所定の品質に関して所定の関係を満たすさらなる品質で、選択されたメディアセグメントに符号化され、
前記方法は、前記選択されたメディアセグメントに含まれる情報（６８）および／または前記サーバ（２０）から取得された信号伝達から前記所定の関係を導出することをさらに含む、方法。
【請求項１１０】
時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための方法であって、
装置による検索のために複数のメディアセグメントを利用可能にレンダリングし、それによって空間的セクションの第１の部分が所定の品質で選択されたメディアセグメントに符号化されるような方法でかつそれによれば、時間的に変化する空間シーンのうち、第１の部分に空間的に隣接する第２の部分が、さらなる品質で選択されたメディアセグメントに符号化される符号化された時間的に変化する空間的シーンの少なくとも空間的セクションを有する検索用メディアセグメントを装置が選択できるようにするステップと、
メディアセグメント内の、さらなる品質によって満たされることになっている所定の関係に関する情報をシグナリングする、および／または装置への信号伝達によるステップとを含む、方法。
【請求項１１１】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングする方法であって、
サーバ（２０）上で利用可能な複数（４６）のメディアセグメント（５８）からメディアセグメントを選択するステップと、
選択されたメディアセグメントが、
それによれば、空間セクション（６２）の第１の部分（６４）が所定の品質で選択されたメディアセグメントに符号化され、それに従って時間的に変化する空間シーンの第２の部分（６６； ７２）が空間的に隣接し、第１の部分（６４）は、選択されたメディアセグメントに符号化されていないか、または所定の品質に対してさらに低い品質で選択されたメディアセグメントに符号化されており、かつ、
第１の部分（６４）は、時間的に変化する空間シーン（３０）の時間的に変化するビュー部分（２８）に続く、
ように、時間的に変化する空間シーン（３０）の少なくとも１つの空間セクション（６２）をその中に符号化して有するように選択が実行され、前記選択されたメディアセグメントを前記サーバ（２０）から取出すステップとを含み、
方法は、選択されたメディアセグメントに含まれる情報（７４）および／またはサーバから取得された信号伝達に応じて第１の部分（６４）のサイズを設定することをさらに含む、方法。
【請求項１１２】
時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための方法であって、
装置による検索のために複数のメディアセグメントを利用可能にレンダリングし、それによって空間的セクションの第１の部分が所定の品質で選択されたメディアセグメントに符号化されるような方法でおよび前記第１の部分に空間的に隣接する時間的に変化する空間シーンの第２の部分は、選択されたメディアセグメントに符号化されないか、または所定の品質に対してさらに低い品質で選択されたメディアセグメントに符号化されるような方法で符号化された時間的に変化する空間的シーンの少なくとも空間的セクションを有する検索用メディアセグメントを装置が選択できるようにし、その結果、第１の部分は、時間的に変化する空間シーンの時間的に変化するビューセクションに従うステップと、
前記メディアセグメント内、および／または前記装置への信号伝達によって前記第１の部分のサイズをどのように設定するかに関する情報を信号伝達するステップとを含む、方法。
【請求項１１３】
ビデオビットストリームからビデオを復号するための方法であって、
ビデオビットストリームからビデオ内の焦点領域のサイズのシグナリングを導出するステップと、
前記ビデオをデコードするためのデコード能力を前記焦点領域に集中させるステップとを含む方法。
【請求項１１４】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングするためにデバイスによって実行される方法であって、
時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも１つのバージョンと、
少なくとも１つのバージョンのそれぞれに対して、時間ベースで変化する空間シーンのそれぞれのバージョンをタイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示とを、
メディアプレゼンテーション記述から導出するステップと、
タイルベースのストリーミングに関して、少なくとも１つのバージョンの恩恵を受ける要件を、デバイスまたはデバイスと対話する別のデバイスのデバイス機能と一致させる（９２）ステップとを含む、方法。
【請求項１１５】
時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための方法であって、
サーバ上で利用可能な複数のメディアセグメントからメディアセグメントを選択するステップと、
前記サーバから前記選択されたメディアコンテンツを検索し、選択されたメディアセグメントが、第１の部分の空間的近傍と比較して向上した品質でまたは第１の部分の空間的近傍が選択されたメディアセグメントに符号化されないような方法でその中に符号化される時間的に変化する空間シーンの第１の部分を有するように選択を実行するステップとを含み、
前記方法は、
前記第１の部分の空間位置および／または移動を測定する瞬時測定値、および／または
前記第１の部分の空間位置および／または動きを測定する、時間平均などの統計値、および／または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、時間的に変化する空間シーンの品質を測定する瞬間測定、および／または
選択されたメディアセグメントをバッファリングすることに関与するデバイスのバッファのセット（３００）の表示、選択されたメディアセグメントをバッファのセットに分配する際に適用される分配規則の記述、およびバッファの各セットの瞬間的なバッファ充満および／または
復号化の対象となるために前記装置のバッファから出力されていない選択されたメディアセグメントの量の測定値（４２）および／または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、時間的に変化する空間シーンの品質を測定する時間的平均などの統計値、および／または
選択されたメディアセグメントに符号化され、ビューセクションで見える限りにおいて、第１の部分の品質または時間的に変化する空間シーンの品質を測定する瞬間的な測定値、および／または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、第１の部分の品質または時間的に変化する空間シーンの品質を測定する、時間平均などの統計値、および／または
前記視野セクションによって覆われる視野、および／または
シーン中心に対するユーザ位置またはビュー深度を測定する瞬間測定値（１００）および／または
シーン中心（１００）に対するユーザ位置またはビュー深度を測定する、時間平均などの統計値
を記録するログメッセージを送出するステップをさらに含む、方法。
【請求項１１６】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングするための方法であって、
時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも１つのバージョンと、
少なくとも１つのバージョンのそれぞれに対して、時間ベースで変化する空間シーンのそれぞれのバージョンをタイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示と、
導出可能であり、これにより装置がメディアコンテンツをストリーミングサーバからストリーミング可能である
メディアプレゼンテーション記述（９０）を提供するステップと、
タイルベースのストリーミングに関して、タイルベースのストリーミングに関して、少なくとも１つのバージョンの恩恵を受ける要件と、装置のデバイス機能または装置と対話する別の装置とを一致させる（９２）ステップとを含む、方法。
【請求項１１７】
請求項９０に記載のメディアプレゼンテーション記述を提供することを含む、サーバから時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミング配信することを装置に可能にするための方法。
【請求項１１８】
プログラムがコンピュータ上で実行されるとき、請求項１０９ないし１１７のいずれかに記載の方法を実行するためのプログラムコードを有するコンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本願発明は、仮想現実（ＶＲ）ストリーミングで発生するような、空間的に不均等なストリーミングに関する。
【背景技術】
【０００２】
ＶＲストリーミングは通常、非常に高解像度のビデオの送信を伴う。ヒトの中心窩の解像力は１度あたり約６０ピクセルである。３６０°×１８０°の全球の透過を考慮すれば、約２２ｋ×１１ｋピクセルの解像度を送信することになるであろう。そのような高解像度を送信することは非常に高い帯域幅要求をもたらすので、別の解決策は９０°×９０°のＦｏＶを有するヘッドマウントディスプレイ（ＨＭＤ）に示されるビューポートのみを送信することである。この場合、ビデオは約６Ｋ×６Ｋピクセルになる。ビデオ全体を最高の解像度で送信することとビューポートのみを送信することとの間のトレードオフは、ビューポートを高解像度で、いくつかの隣接データ（または球状ビデオの残り）を低解像度または低品質で送信することである。
【０００３】
ＤＡＳＨシナリオでは、前述の混合解像度または混合品質ビデオがＤＡＳＨクライアントによって制御されるように全方向ビデオ（別名球形ビデオ）を提供することができる。ＤＡＳＨクライアントは、コンテンツがどのように提供されているかを説明する情報を知る必要があるだけである。
【０００４】
一例は、ビデオの異なる部分に対する異なる品質および歪みなどの非対称特性を有する異なる投影を用いて異なる表現を提供することであり得る。各表現は所与のビューポートに対応し、そのビューポートは他のコンテンツよりも高い品質／解像度で符号化される。方向情報（コンテンツがより高い品質／解像度で符号化されているビューポートの方向）を知っていると、ＤＡＳＨクライアントは、いつでもユーザの視線方向と一致するように１つまたは他の表現を動的に選択することができる。
【０００５】
全方向ビデオに対してそのような非対称特性を選択するためのＤＡＳＨクライアントに対するより柔軟な選択肢は、ビデオがいくつかの空間領域に分割され、各領域が異なる解像度または品質で利用可能であるときであろう。１つの選択肢は、グリッドに基づいてそれを矩形領域（別名タイル）に分割できることであるが、他の選択肢も考えられる。そのような場合、ＤＡＳＨクライアントは、異なる領域が提供される異なる品質についていくつかのシグナリングを必要とし、かつ、ユーザに表示されるビューポートが他の表示されていないコンテンツよりも高品質になるように、さまざまな品質でさまざまな領域をダウンロードできる。
【０００６】
上記のいずれの場合も、ユーザの操作が発生してビューポートが変更されると、ＤＡＳＨクライアントはユーザの動きに反応して新しいビューポートに合った方法でコンテンツをダウンロードするのにしばらく時間を要するであろう。ユーザが移動してからＤＡＳＨクライアントが新しいビューポートに一致するようにその要求を調整するまでの間に、ユーザは高品質と低品質のいくつかの領域を同時にビューポートに見るであろう。許容可能な品質／解像度の違いはコンテンツに依存するが、ユーザが目撃する品質はいずれにしても低下する。
【０００７】
従って、適応ストリーミングによってストリーミングされた空間シーンコンテンツの部分的な提示に関して、ユーザにとっての軽減、より効率的なレンダリング、またはさらには視覚的品質を向上させるという概念を手元に持つことが好ましい。
【発明の概要】
【発明が解決しようとする課題】
【０００８】
従って、本願発明の目的は、空間シーンコンテンツを空間的に等しくない方法でストリーミングしてユーザの視覚品質を向上させる、またはストリーミング検索サイトにおける処理の複雑さもしくは必要な帯域幅を減少させるための概念を提供すること、またはさらなるアプリケーションシナリオへの適用性を拡大する方法で空間シーンコンテンツをストリーミングするための概念を提供することである。
【０００９】
この目的は、係属中の独立請求項の主題によって達成される。
【課題を解決するための手段】
【００１０】
本願発明の第１の態様は、選択されかつ検索されたメディアセグメントおよび／またはサーバから取得されたシグナリングが、時間的に変化する空間シーンの異なる部分が選択され検索されたメディアセグメントに符号化される品質に適合すべき所定の関係についてのヒントを有する検索装置を提供する場合、空間的に等しくない方法でビデオなどの時間的に変化する空間シーンに関連するストリーミングメディアコンテンツが、ストリーミング受信サイトにおいて匹敵する帯域幅消費における可視品質および／または計算の複雑さに関して改善され得るという発見に基づく。メディアセグメントに含まれる情報および／または例えばマニフェストファイル（メディアプレゼンテーション記述）内のようなサーバから取得された信号化、またはＳＡＮＤメッセージのようなサーバからクライアントへの追加のストリーミング関連制御メッセージにより、検索デバイスはサーバで提供されるメディアセグメントの中から適切に選択を行うことができる。このようにして、ユーザに提示される時間的に変化する空間的シーンのこの空間的セクション上への利用可能な帯域幅の不適切な分布のためにそうでなければ起こり得るので、ビデオコンテンツのバーチャルリアリティストリーミングまたは部分ストリーミングは、品質劣化に対してよりロバストにされ得る。
【００１１】
本発明のさらなる態様は、第１の部分で第１の品質を使用し、第２の部分で第２のより低い品質を使用する、または第２の部分を非ストリーミングのままにしておくなどの空間的に不均等な方法でのビデオなどの時間的に変化する空間シーンに関するメディアコンテンツのストリーミングが、メディアセグメントに含まれる情報および／またはサーバから取得される信号化に応じて第１の部分のサイズおよび／または位置を決定することによって、可視品質が改善されてもよく、および／またはストリーミング検索側での帯域幅消費および／または計算の複雑さの点で複雑さが軽減されてもよいという発見に基づく。例えば、時間的に変化する空間シーンが、タイルベースのストリーミングのためにタイルベースの方法でサーバに提供されると仮定する。すなわち、メディアセグメントは、時間的に変化する空間シーンのスペクトルの時間的部分を表し、その各々は、空間シーンが細分されるタイルの分布の対応するタイル内の空間シーンの時間セグメントであると仮定する。そのような場合、空間シーンにわたってすなわちタイルの粒度で利用可能な帯域幅および／または計算能力をどのように分配するかを決定するのは、検索装置（クライアント）次第である。検索装置は、メディアセグメントの選択を、後続する空間シーンの第１の部分は、空間シーンの時間的に変化するビューセクションをそれぞれ追跡し、例えば現在の帯域幅で実現可能な最高品質および／または計算能力条件であり得る所定の品質で選択され検索されたメディアセグメントに符号化される程度まで実行する。空間シーンの空間的に隣接する第２の部分は、例えば、選択され検索されたメディアセグメントに符号化されなくてもよく、または所定の品質に対して低減されたさらなる品質でそこに符号化されてもよい。そのような状況では、ビューセクションの向きに関係なく、その集合が時間的に変化するビューセクションを完全にカバーする、隣接するタイルの数／合計を計算することは、計算上複雑な問題であり、あるいは実行不可能である。空間シーンを個々のタイルにマッピングするように選択された投影に依存して、タイル当たりの角度シーン適用範囲はこのシーンおよび個々のタイルが相互に重なり得るという事実により変化し得、ビューセクションの向きに関係なく、空間的にビューセクションをカバーするのに十分な隣接タイルの数の計算でさえ、より困難になる。従って、そのような状況では、前述の情報は、タイルの数Ｎまたはタイルの数としてそれぞれ第１の部分のサイズを示すことができる。この手段によって、装置は、所定の品質でそこに符号化されたＮ個のタイルの同じ場所に配置された集合体を有するそれらのメディアセグメントを選択することによって時間的に変化するビューセクションを追跡することができる。これらＮ個のタイルの集合がビューセクションを十分にカバーするという事実は、Ｎを示す情報によって保証され得る。別の例は、メディアセグメントに含まれる情報および／またはサーバから取得される信号化であり、それはビューセクション自体のサイズに対する第１の部分のサイズを示す。例えば、この情報は、時間的に変化するビューセクションの動きを考慮するために、実際のビューセクションの周りに何らかの形で「安全ゾーン」またはプリフェッチゾーンを設定することができる。時間的に変化するビューセクションが空間シーンを横切って移動する速度が大きいほど、安全ゾーンは大きくなる。従って、前述の情報は、インクリメンタル方式またはスケーリング方式など、時間的に変化するビューセクションのサイズに対する方法で第１の部分のサイズを示すことができる。そのような情報に従って第１の部分のサイズを設定する検索装置は、そうでなければ空間シーンの未検索部分または低品質部分がビューセクションに見えるために起こり得る品質劣化を回避することができるであろう。ここでは、このシーンがタイルベースの方法で提供されるのか、他の方法で提供されるのかは無関係である。
【００１２】
本出願の直前の局面に関連して、ビデオビットストリームがビデオを復号化するための復号化能力がフォーカスされるべきであるビデオの中にフォーカス領域のサイズのシグナリングを提供される場合、その中に符号化されたビデオを有するビデオビットストリームはより高い品質で復号可能にされ得る。この手段によって、ビットストリームからビデオを復号するデコーダは、ビデオビットストリームで信号化された焦点領域のサイズを有する部分にビデオの復号にその復号能力を集中させる、または制限さえすることができ、例えば、このように復号化された部分は、利用可能な復号化能力によって復号化可能であり、ビデオの必要な部分を空間的にカバーすることが分かる。例えば、このように信号化された焦点領域のサイズは、ビデオを復号する際の復号待ち時間を考慮に入れてビューセクションのサイズおよびこのビューセクションの動きをカバーするために十分に大きくなるように選択され得る。あるいは、換言すれば、ビデオビットストリームに含まれるビデオの推奨される好ましいビューセクション領域の信号化は、デコーダがこの領域を好ましい方法で扱うことを可能にし、それによってデコーダがそれに応じて復号電力を集中させることができる。エリア固有の復号化パワーフォーカシングを実行することとは無関係に、エリア信号化は、どのメディアセグメント上にダウンロードするか、すなわちどこに配置するか、およびどのようにして品質の向上した部分の寸法を決めるかを選択する段階に転送され得る。
【００１３】
本出願の第１および第２の態様は、膨大な数の検索装置がサーバからメディアコンテンツをストリーミングするという事実を利用して、その後に続く可能性のある情報を取得するという本出願の第３の態様に密接に関連する。第１の部分のサイズまたはサイズおよび／または位置を設定すること、ならびに／または第１の品質と第２の品質との間の所定の関係を適切に設定することを可能にする上述の種類の情報を適切に設定するために使用される。このように、本出願のこの態様によれば、検索デバイス（クライアント）は、瞬間測定値、または第１の部分の空間位置および／または動きを測定する統計値、瞬間測定値、または選択されたメディアセグメントに符号化されている限り、およびビューセクションに見える限りにおいて、時間的に変化する空間シーンの品質を測定する統計値、および選択されたメディアセグメントに符号化され、かつビューセクションに見える限りにおいて、第１の部分の品質または時間的に変化する空間シーンの品質を測定する瞬間測定値または統計値を送る。瞬間測定値および／または統計値には、それぞれの瞬間測定値または統計値が得られた時間に関する時間情報を提供することができる。ログメッセージは、メディアセグメントが提供されているサーバ、またはインバウンドログメッセージを評価する他のデバイスに送信され、それに基づいて、サイズまたはサイズおよび／または位置を設定するために使用される前述の情報の現在の設定を更新する。または第１の部分の位置、および／またはそれに基づいて所定の関係を導き出す。
【００１４】
本出願のさらなる態様によれば、ビデオなどの時間的に変化する空間シーンに関連するストリーミングメディアコンテンツ、特にタイルベースの方法でのストリーミングメディアコンテンツは、時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも１つのバージョンと少なくとも１つのバージョンのそれぞれに対して時間的に変化する空間シーンのそれぞれのバージョンをタイルベースのストリーミングから恩恵を受けるための要件の恩恵の表示とを含むメディアプレゼンテーション記述を提供することによって無用なストリーミング試行の回避に関してより効果的になる。この手段によって、検索装置は、少なくとも１つのバージョンの有益な要件を、検索装置自体またはタイルベースのストリーミングに関して検索装置と対話する他の装置の装置能力と一致させることができる。例えば、利益を得る要件は、復号能力要件に関連し得る。すなわち、ストリーミング／検索されたメディアコンテンツを復号するための復号能力が、時間的に変化する空間シーンのビューセクションをカバーするのに必要なすべてのメディアセグメントを復号するのに十分ではない場合、メディアコンテンツをストリーミングし提示することは、時間、帯域幅、計算能力の面で、無駄であり、それに応じて、いずれにせよそれを試していないことがより効果的である。例えば、あるタイルに関するメディアセグメントは、他のタイルに関するメディアセグメントとは別に、ビデオストリームなどのメディアストリームを形成する場合、復号能力要件は、例えば、それぞれのバージョンに必要ないくつかのデコーダインスタンス化を示すことができる。復号化能力要件は、例えば、所定の復号化プロファイルおよび／またはレベルに適合するために必要とされる復号器インスタンス化の特定の部分などのさらなる情報にも関連し得、またはユーザがそれを介してシーンを見るのに十分な速さでビューポート／セクションを移動するユーザ入力装置の特定の最小能力を示し得る。シーンの内容によっては、動きの能力が低いと、ユーザがシーンの興味深い部分を見るのに十分ではない場合がある。
【００１５】
本願発明のさらなる態様は、時間的に変化する空間シーンに関するメディアコンテンツのストリーミングの拡張に関する。特に、この態様による概念は、空間シーンが実際には時間的に変化するだけでなく、例えばビューおよび位置、ビュー深度または他の何らかの物理的パラメータを示唆する少なくとも１つのさらなるパラメータに関しても変化し得ることである。検索装置は、ビューポート方向および少なくとも１つのさらなるパラメータに応じて、メディアセグメントのアドレスを計算することによって適応ストリーミングを使用することができ、メディアセグメントは時間的に変化する空間シーンおよび少なくとも１つのパラメータを記述し、サーバから計算されたアドレスを使用してメディアセグメントを検索する。
【００１６】
従属請求項の主題である本件出願の上に概説した態様およびそれらの有利な実施形態は、個々にまたはすべて一緒に組合わせることができる。
【００１７】
本件出願の好ましい実施形態は、図面に関して以下に説明される。
【図面の簡単な説明】
【００１８】
【図１】図１は、以下の図に示される実施形態が有利に使用され得る場所に関する例として、仮想現実アプリケーションのためのクライアントおよびサーバのシステムを示す概略図を示す図である。
【図２】図２は、サーバ１０がユーザに提示されるメディアコンテンツ内の許容可能または耐えられる品質変動に関する情報を有する装置を提供する本件出願の一実施形態によるクライアント装置の可能な動作モードを説明するためのメディアセグメント選択プロセスの概略図と共にクライアント装置のブロック図を示す図である。
【図３】図３は、図２の変形例を示す図であり、品質が向上した部分は、ビューポートのビューセクションを追跡している部分ではなく、サーバからクライアントにシグナリングされるメディアシーンコンテンツの関心領域に関するものである。
【図４】図４は、サーバが、品質が向上した部分のサイズまたはサイズおよび／または位置、あるいはメディアシーンの実際に検索されたセクションのサイズまたはサイズおよび／または位置を設定する方法に関する情報を提供する実施例によるメディアセグメント選択プロセスの概略図と共にクライアント装置のブロック図を示す図である。
【図５】図５は、サーバによって送信される情報が、ビューポートの予想される動きに応じてスケーリングするのではなく、部分６４のサイズを直接示すという点で図５の変形形態を示す図である。
【図６】図６は、検索されたセクションが所定の品質を有し、そのサイズがサーバから生じる情報によって決定される、図４の変形を示す図である。
【図７ａ】図７ａは、ビューポートのサイズの対応する拡大によって、所定の品質で検索された部分のサイズを大きくする図４−図６による情報７４がどのように変換されるかを示す概略図である。
【図７ｂ】図７ｂは、ビューポートのサイズの対応する拡大によって、所定の品質で検索された部分のサイズを大きくする図４〜図６による情報７４がどのように変換されるかを示す概略図である。
【図７ｃ】図７ｃは、ビューポートのサイズの対応する拡大によって、所定の品質で検索された部分のサイズを大きくする図４−図６による情報７４がどのように変換されるかを示す概略図である。
【図８ａ】図８ａは、クライアント装置は、ログメッセージをサーバまたは特定の評価部に送信してこれらのログメッセージを評価し、例えば、図２ないし図７ｃに関して説明した情報の種類に対して適切な設定を導出する実施形態を示す概略図である。
【図８ｂ】図８ｂは、タイル上への３６０シーンのタイルベースの立方体投影、およびいくつかのタイルがビューポートの例示的な位置によってどのように覆われるかの例を示す概略図であり、小さな丸はビューポート内の等角分布の位置を示し、ハッチングされたタイルはダウンロードされたセグメント内でハッチングのないタイルよりも高い解像度でエンコードされる。。
【図８ｃ】図８ｃは、クライアントの異なるバッファのバッファ占有率（垂直軸）がどのようにして発生する可能性があるかについて時間軸（水平）に沿って示す図の概略図を示す図であり、ここで、図８ｃは、特定のタイルを符号化する表現をバッファリングするために使用されるバッファを仮定する。。
【図８ｄ】図８ｄは、クライアントの異なるバッファのバッファ占有率（垂直軸）がどのようにして発生する可能性があるかについて時間軸（水平）に沿って示す図の概略図を示す図であり、ここで、図８ｄは、不均一な品質ですなわち、それぞれのバッファに特有のある方向に向かって増加した符号化されたシーンを有する全方向表現をバッファリングするために使用されるバッファを仮定する。。
【図８ｅ】図８ｅは、球形またはビュープレーンの意味での均一性に関して異なるビューポート２８内の異なるピクセル密度測定値の三次元図を示す図である。
【図８ｆ】図８ｆは、球形またはビュープレーンの意味での均一性に関して異なるビューポート２８内の異なるピクセル密度測定値の三次元図を示す図である。
【図９】図９は、サーバがタイルベースのストリーミングを提供する特定のバージョンがクライアントデバイスにとって許容可能であるかどうかを評価するために、デバイスがサーバから生じる情報を検査するとき、クライアント装置のブロック図およびメディアセグメント選択プロセスの概略図を示す図である。
【図１０】図１０は、メディアシーンの時間的な依存性だけでなく別の非時間的パラメータ、すなわちここでは例示的にシーン中心位置の依存性を可能にする実施形態によるサーバによって提供される複数のメディアセグメントを示す概略図を示す図である。
【図１１】図１１は、この情報を利用することができるビデオデコーダの例と共に、ビットストリームに符号化されたビデオ内のフォーカス領域のサイズをステアリングまたは制御する情報を含むビデオビットストリームを示す概略図を示す図である。
【発明を実施するための形態】
【００１９】
本件出願の様々な態様に関する本件出願の実施形態の説明の理解を容易にするために、図１は、本件出願の以下に説明される実施形態が適用され有利に使用され得る環境の例を示す。特に、図１は、適応ストリーミングを介して対話するクライアント１０とサーバ２０とから構成されるシステムを示す。例えば、ＨＴＴＰ上の動的適応ストリーミング（ＤＡＳＨ）をクライアント１０とサーバ２０との間の通信２２に使用することができる。しかしながら、後に概説される実施形態は、ＤＡＳＨの使用に限定されると解釈されるべきではなく、同様に、メディアプレゼンテーション記述（ＭＰＤ）のような用語は、ＤＡＳＨとは異なるように定義されたマニフェストファイルもカバーするように広義であると理解されるべきである。
【００２０】
図１は、仮想現実アプリケーションを実施するように構成されたシステムを示す。すなわち、システムは、ヘッドアップディスプレイ２４を装着しているユーザに、すなわちヘッドアップディスプレイ２４の内部ディスプレイ２６を介して、セクション２８はヘッドアップディスプレイ２４の慣性センサなどの内部方位センサ３２によって例示的に測定されたヘッドアップディスプレイ２４の方位に対応する時間的に変化する空間シーン３０からビューセクション２８を提示するように構成される。すなわち、ユーザに提示されるセクション２８は、その空間位置がヘッドアップディスプレイ２４の向きに対応する、空間シーン３０のセクションを形成する。図１の場合、時間的に変化する空間シーン３０は、全方向ビデオまたは球面ビデオとして描かれているが、図１の説明およびその後に説明される実施形態は、他の例にも同様に容易に移行可能であり、例えば、セクション２８の空間位置を有するビデオからのセクションを提示することは、顔のアクセスまたは目のアクセスと仮想または実際のプロジェクタの壁などとの交差によって決定される。さらに、センサ３２およびディスプレイ２６は、例えば、それぞれ遠隔制御装置および対応するテレビジョンなどの異なる装置によって構成されてもよく、あるいはタブレットまたは携帯電話などのモバイル装置などのハンドヘルド装置の一部であってもよい。最後に、後述する実施形態のいくつかは、ユーザに提示される領域２８が時間的に変化する空間シーン３０を提示する際のむらで常に全体的に時間的に変化する空間シーン３０を覆うシナリオ、例えば、空間的シーンにわたる品質の不均等な分布に関するシナリオにも適用され得る点に留意すべきである。
【００２１】
サーバ２０、クライアント１０、およびサーバ２０で空間コンテンツ３０が提供される方法に関するさらなる詳細は、図１に示されており、以下に説明される。しかしながら、これらの詳細もまた、後に説明される実施形態を限定するものとして扱われるべきではなく、むしろ、後に説明される実施形態のうちのいずれかを実施する方法の例として役立つべきである。
【００２２】
特に、図１に示すように、サーバ２０は、記憶装置３４と、適切にプログラムされたコンピュータ、特定用途向け集積回路などのコントローラ３６とを含むことができる。記憶装置３４は、時間的に変化する空間シーン３０を表すメディアセグメントを記憶している。特定の例は、図１の図に関して以下により詳細に概説される。コントローラ３６は、要求されたメディアセグメント、メディアプレゼンテーション記述をクライアント１０に再送信することによってクライアント１０によって送信された要求に応答し、それ自体でさらなる情報をクライアント１０に送信することができる。これに関する詳細もまた以下に記載される。コントローラ３６は、要求されたメディアセグメントを記憶装置３４から取出すことができる。この記憶装置内には、サーバ２０からクライアント１０に送信された他の信号に、メディアプレゼンテーション記述またはその一部などの他の情報も記憶され得る。
【００２３】
図１に示すように、サーバ２０は、クライアント１０でメディアデータストリームを形成するように、後者からの要求に応答してサーバ２０からクライアント１０に送信されるメディアセグメントを修正するストリーム修正部３８を任意でさらに含んでもよく、例えば、このようにしてクライアント１０によって検索されたメディアセグメントは実際にはいくつかのメディアストリームから集約されるが、１つの単一のメディアストリームは１つの関連デコーダによって復号化可能である。しかしながら、そのようなストリーム修正部３８の存在は任意である。
【００２４】
図１のクライアント１０は、例示的に、クライアント装置またはコントローラ４０、あるいはそれ以上のデコーダ４２および再投影機（reprojector：リプロジェクタとも称す）４４を含むように描かれている。クライアント装置４０は、適切にプログラムされたコンピュータ、マイクロプロセッサ、ＦＰＧＡなどのプログラムされたハードウェア装置、または特定用途向け集積回路などであり得る。クライアント装置４０は、サーバ２０で提供される複数の４６のメディアセグメントの中からサーバ２０から検索されるべきセグメントを選択することを引き受ける。この目的のために、クライアント装置４０は最初にサーバ２０からマニフェストまたはメディアプレゼンテーション記述を検索する。同様に、クライアント装置４０は、空間シーン３０のある必要とされる空間部分に対応する複数４６の中からメディアセグメントのアドレスを計算するための計算規則を取得する。このように選択されたメディアセグメントは、それぞれの要求をサーバ２０に送信することによってクライアント装置４０によってサーバ２０から検索される。これらの要求は計算されたアドレスを含む。
【００２５】
このようにしてクライアント装置４０によって検索されたメディアセグメントは、後者によって復号のために１つ以上のデコーダ４２に転送される。図１の例では、このようにして検索され復号されたメディアセグメントは、各時間的時間単位について、時間的に変化する空間シーン３０のうちの単に空間的セクション４８を表すが、既に上述したように、これは他の態様に従って異なることがあり、例えば、提示されるビューセクション２８は常にシーン全体をカバーする。リプロジェクタ４４は、選択され検索されデコードされたメディアセグメントの検索されデコードされたシーンコンテンツからユーザに表示されるようにビューセクション２８を任意に再投影し切出すことができる。この目的のために、図１に示すように、クライアント装置４０は、例えば、センサ３２からのユーザ方位データに応答してビューセクション２８の空間位置を連続的に追跡し更新し、例えば、シーンセクション２８のこの現在の空間位置、ならびに領域形成ビューセクション２８にマッピングされるように、検索および復号されたメディアコンテンツに適用される再投影マッピングについて、リプロジェクタ４４に通知する。
【００２６】
図１は、空間シーン３０をタイル５０にマッピングするために立方体マッピングが使用された場合を示している。したがって、タイルは、球の形態を有するシーン３０が投影された立方体の長方形の小領域として描かれている。リプロジェクタ４４はこの投影を反転させる。しかしながら、他の例も同様に適用され得る。しかしながら、他の例も同様に適用され得る。例えば、立方体投影の代わりに、切頭ピラミッドまたは切頭なしのピラミッドへの投影を使用することができる。さらに、図１のタイルは、空間シーン３０のカバレッジに関して重複しないように描かれているが、タイルへの細分化（subdivision）は、相互のタイル重複を含み得る。そして以下により詳細に概説されるように、シーン３０をタイル５０に空間的に細分し、各タイルが以下にさらに説明されるように１つの表現を形成することもまた必須ではない。
【００２７】
従って、図１に示すように、空間シーン３０全体が空間的にタイル５０に細分化される。図１の例では、立方体の６つの面のそれぞれが４つのタイルに細分化される。説明のために、タイルが列挙されている。各タイル５０について、サーバ２０は図１に示すようにビデオ５２を提供する。より正確には、サーバ２０は、タイル５０ごとに複数のビデオ５２を提供することさえあり、これらのビデオは品質Ｑ＃が異なる。さらに、ビデオ５２は時間的セグメント５４に時間的に細分化される。すべてのタイルＴ＃のすべてのビデオ５２の時間セグメント５４は、サーバ２０の記憶装置３４に記憶されている複数の４６のメディアセグメントのうちの１つのメディアセグメントを形成するか、またはその中の１つに符号化される。
【００２８】
図１に示されたタイルベースのストリーミングの例でさえも、そこから多くの変形が可能である例を形成するにすぎないことを再度強調しておく。例えば、図１は、より高い品質でのシーン３０の表現に関するメディアセグメントは、品質Ｑ１でシーン３０をその中に符号化したメディアセグメントが属するタイルと一致するタイルに関連することを示唆しているように思われる。この一致は必ずしも必要ではなく、異なる品質のタイルは、シーン３０の異なる投影のタイルにさえ対応し得る。さらに、これまで議論されていないが、図１に示される異なる品質レベルに対応するメディアセグメントは、空間解像度および／または信号対雑音比および／または時間解像度などが異なることがあり得る。
【００２９】
最後に、装置４０によってサーバ２０から個々に検索されることができるメディアセグメントがシーン３０が空間的に細分化されるタイル５０に関するタイルベースのストリーミング概念とは異なり、サーバ２０において提供されるメディアセグメントは代替的に例えば、各々は、シーン３０を、空間的に変化するサンプリング解像度で空間的に完全な方法でその中に符号化しているが、シーン３０内の異なる空間位置で最大のサンプリング解像度を有する。例えば、それは、切頭先端が互いに異なる方向に配向されるであろう切頭ピラミッド上へのシーン３０の投影に関する一連のセグメント５４をサーバ２０に提供することによって達成され得、それによって異なる配向の解像度ピークをもたらす。
【００３０】
さらに、必要に応じてストリーム修正部３８を提示することに関して、クライアント１０とサーバ２０が本明細書で説明される信号を交換するネットワーク装置内で、同じものがクライアント１０の一部であり得るか、またはそれらの間に配置され得る。
【００３１】
サーバ２０およびクライアント１０のシステムをかなり一般的に説明した後、本件出願の第１の態様による実施形態に関するクライアント装置４０の機能をより詳細に説明する。この目的のために、装置４０をより詳細に示す図２を参照する。既に上述したように、装置４０は時間的に変化する空間シーン３０に関するメディアコンテンツをストリーミングするためのものである。図１に関して説明したように、装置４０は、ストリーミングされたメディアコンテンツが空間的にシーン全体に連続的に関連するように構成されてもよいし、単にそのセクション２８に限定されてもよい。いずれにせよ、装置４０は、サーバ２０上で利用可能な複数の４６のメディアセグメントから適切なメディアセグメント５８を選択するための選択部５６と、ＨＴＴＰリクエストのようなそれぞれのリクエストによってサーバ２０から選択されたメディアセグメントを検索するための検索部６０とを含む。上述のように、選択部５６は、メディアプレゼンテーション記述を使用して、選択されたメディアセグメント５８を検索する際にこれらのアドレスを使用して検索部６０で選択されたメディアセグメントのアドレスを計算することができる。例えば、メディアプレゼンテーション記述に示されるアドレスを計算するための計算規則は、品質パラメータＱ、タイルＴ、およびいくつかの時間セグメントｔに依存し得る。アドレスは、例えばＵＲＬであり得る。
【００３２】
また上述したように、選択部５６は、選択されたメディアセグメントが時間的に変化する空間シーンの少なくとも１つの空間セクションを有し、その中に符号化されるように選択を実行するように構成される。空間セクションは、完全にシーンを空間的に連続的にカバーしてもよい。図２は、６１において、装置４０がシーン３０の空間セクション６２をオーバーラップしてビューセクション２８を囲むように適合させる例示的な場合を示す。しかしながら、これは既に上述したように、必ずしもそうであるとは限らず、空間部分は連続的にシーン３０全体を覆ってもよい。
【００３３】
さらに、選択部５６は、選択されたメディアセグメントが空間的に等しくない品質の方法で内部に符号化されたセクション６２を有するように選択を実行する。より正確には、図２にハッチングで示されている、空間セクション６２の第１の部分６４は、所定の品質で選択されたメディアセグメントに符号化されている。この品質は、例えば、サーバ２０によって提供される最高品質であり得るか、または「良い」品質であり得る。装置４２は、例えば、時間的に変化するビューセクション２８を空間的にたどるように、第１の部分６４を動かす、または適合させる。例えば、選択部５６は、ビューセクション２８の現在位置を継承するそれらのタイルの現在の時間的セグメント５４を選択する。その際、選択部５６は、オプションで、以下のさらなる実施形態に関して説明するように、第１の部分６４を構成するタイルの数を一定に保つことができる。いずれにせよ、セクション６２の第２の部分６６は、低品質などの別の品質で選択されたメディアセグメント５８に符号化される。例えば、選択部５６は、部分６４のタイルに空間的に隣接し且つより低い品質に属する現在のタイルの時間セグメントに対応するメディアセグメントを選択する。例えば、選択部５６は、現在の時間セグメントに対応する時間間隔が終了する前に部分６４および重複部分６６を離れるようにビューセクション２８があまりにも速く移動する可能性のある機会に対処するために部分６６に対応するメディアセグメントを主に選択し、かつ、選択部５６は、部分６４を新たに空間的に配置することができるであろう。この状況では、それにもかかわらず、部分６６内に突き出ているセクション２８の部分は、すなわち品質が低下した状態でユーザに提示される可能性がある。
【００３４】
高品質の部分６４内のシーンコンテンツと共にユーザに低減された品質のシーンコンテンツをユーザに事前に提示することによって、どのような品質の劣化が生じ得るのかについて装置４０が評価することは不可能である。特に、これら２つの性質の間の移行が生じ、これはユーザにはっきりと見える可能性がある。少なくとも、そのような遷移は、セクション２８内の現在のシーン内容に応じて可視的であり得る。ユーザの視野内のそのような遷移の悪影響の重大さは、サーバ２０によって提供されるようなシーンコンテンツの特徴であり、装置４０によって予測されないことがある。
【００３５】
従って、図２の実施形態によれば、装置４０は、部分６４の品質と部分６６の品質との間で満たされるべき所定の関係を導出する導出部６６を含む。導出部６６は、メディアセグメント５８内のトランスポートボックス内などのメディアセグメント内に含まれ得る、および／またはメディアプレゼンテーション記述内などのサーバ２０から取得された信号化またはＳＡＮＤメッセージ等のサーバ２０から送信される独自の信号に含まれ得る情報からこの所定の関係を導出する。情報６８がどのように見えるかに関する例が、以下に提示される。情報６８に基づいて導出部６６によって導出された所定の関係７０は、選択を適切に実行するために選択部５６によって使用される。例えば、部分６４および６６の品質の完全に独立した選択と比較した部分６４および６６の品質の選択における制限は、部分６２に関するメディアコンテンツを部分６４および６６上に取出すために利用可能な帯域幅の分布に影響を及ぼす。いずれにせよ、選択部５６は、部分６４および６６が最終的に検索されたメディアセグメントに符号化される品質が所定の関係を満たすようにメディアセグメントを選択する。所定の関係がどのように見えるかについての例もまた以下に示される。
【００３６】
検索部６０によって選択され最終的に検索されたメディアセグメントは、最終的に復号のために１つまたは複数のデコーダ４２に転送される。
【００３７】
第１の例によれば、例えば、情報６８によって具現化されるシグナリングメカニズムは、提供されるビデオコンテンツに対してどの品質の組合わせが許容可能であるかをＤＡＳＨクライアントであり得る装置４０に示す情報６８を含む。例えば、情報６８は、異なる領域６４および６６が最大の品質（または解像度）の差と混在し得ることをユーザまたは装置４０に示す品質ペアのリストであり得る。装置４０は、サーバ１０で提供される最高品質レベルなどの特定の品質レベルを部分６４に必然的に使用し、部分６６が例えば、部分６８の品質レベルのリストの形式で含む情報６８から選択されたメディアセグメントに符号化できる品質レベルを導出するように構成され得る。
【００３８】
情報６８は、部分６８の品質と部分６４の品質との間の差の尺度についての許容値を示すことができる。品質の差の「尺度」として、メディアセグメント５８の品質指標が使用されてもよく、これにより、メディアプレゼンテーション記述において同じものが区別され、かつ、これにより、そのアドレスがメディアプレゼンテーション記述に記述された計算規則を使用して計算される。ＭＰＥＧ−ＤＡＳＨでは、品質を示す対応する属性は、例えば@qualityRankingになる。装置４０は、選択を実行する際に部分６４および６６を選択されたメディアセグメントに符号化することができる選択可能な品質レベルペアにおける制限を考慮することができる。
【００３９】
しかしながら、この差の尺度の代わりに、通常、ビットレートは品質が上がるにつれて単調に増加することを仮定すれば、品質の差は、例えばビットレート差、すなわち部分６４および６６が対応するメディアセグメントにそれぞれ符号化されるビットレートの許容できる差で測定することもできる。情報６８は、部分６４および６６が選択されたメディアセグメントに符号化される品質について許容される対のオプションを示すことができる。情報６８は、部分６４および６６が選択されたメディアセグメントに符号化される品質について許容される対のオプションを示すことができる。あるいは、情報６８は、符号化部分６６の許容品質を単に示し、それにより、メイン部分６４が、例えば可能なまたは利用可能な最高品質などの何らかのデフォルト品質を使用して符号化されると仮定して、許容品質または許容品質差を間接的に示す。例えば、情報６８は、許容可能な表現ＩＤのリストであり得るか、または部分６６に関するメディアセグメントに関して最小ビットレートレベルを示し得る。
【００４０】
しかしながら、代わりに、より緩やかな品質差が望まれることもあり、その場合、品質対の代わりに、品質グループ（２つ以上の品質）が示されることがあり、ここで、セクション２８までの距離、すなわちビューポートに依存して、品質差が増加する。すなわち、情報６８は、ビューセクション２８までの距離に応じた方法で、部分６４と６６の品質の間の差の尺度についての許容できる値を示すことができる。これは、ビューセクションまでのそれぞれの距離と、それぞれの距離を超えた品質の差を測定するための対応する許容値との対のリストによって行われ得る。それぞれの距離以下では、品質差はより小さくなければならない。すなわち、各対は、対応する距離よりも部分２８内の対応する距離よりも遠い部分６６内の部分が、このリスト項目の対応する許容値を超える部分６４の品質への品質差を有する可能性があることを対応する距離について示す。
【００４１】
許容可能値は、ビューセクション２８までの距離が増すにつれて増加してもよい。今説明した品質の違いの受入れは、これらの異なる品質がユーザに表示される時間に左右される。例えば、品質差が大きいコンテンツは、２００マイクロ秒の間だけ表示されるのであれば許容できるかも知れないが、品質差が小さいコンテンツは、５００マイクロ秒の間表示されるのであれば許容可能かも知れない。従って、さらなる例によれば、情報６８は、例えば、上述の品質の組合せに加えて、または許容される品質の差に加えて、組合せ／品質の差が許容され得る時間間隔も含み得る。換言すれば、情報６８は、部分６６が部分６４と同時にビューセクション２８内に示され得る最大許容時間間隔の表示とともに、部分６６と６４の品質間の許容できるまたは最大許容差を示し得る。
【００４２】
既に述べたように、品質の違いの受入れはコンテンツ自体によって異なる。例えば、異なるタイル５０の空間的位置は、容認に影響を与える。低周波信号を含む一様な背景領域における品質差は、前景オブジェクトにおける品質差より許容可能であると予想される。さらに、時間的な位置も、内容の変化による受入率に影響を与える。従って、別の例によれば、情報６８を形成する信号は、例えばＤＡＳＨの表現または期間ごとなど、間欠的に装置４０に送信される。すなわち、情報６８によって示される所定の関係は断続的に更新されてもよい。追加的に及び／又は代替的に、情報６８によって実現されるシグナリングメカニズムは空間的に変わり得る。すなわち、情報６８は、ＤＡＳＨ内のＳＲＤパラメータなどによって空間的に依存するようにすることができる。すなわち、シーン３０の異なる空間領域に関する情報６８によって、異なる所定の関係を示すことができる。
【００４３】
装置４０の実施形態は、図２に関して説明したように、装置４０がビデオコンテンツ３０の検索された部分６２内のプリフェッチされた部分６６による品質劣化を可能な限り低く、セクション２８による位置の変化に適応するように、セクション６２および部分６４の位置を変化させることができるようになる前にセクション２８において一時的に見ることができることを望んでいるという事実に関する。すなわち、図２において、情報６８によってそれらの可能な組合せが関係する限りその質が制限されている部分６４および６６は、部分６２の異なる部分であり、両方の部分６４および６６の間の遷移は移動ビューセクション２８を追跡または走行するために連続的にシフトまたは適応される。図３に示す代替実施形態によれば、装置４０は、部分６４および６６の品質の可能な組合せを制御するために情報６８を使用するが、図３の実施形態によれば、例えばメディアプレゼンテーション記述において定義された方法で、すなわちビューセクション２８の位置から独立した方法で定義された方法で互いに区別または区別される部分として定義される。部分６４および６６の位置ならびにそれらの間の遷移は一定でもよいし、時間的に変化してもよい。 時間的に変動する場合、変動はシーン３０の内容の変化によるものである。例えば、部分６４は、より高い品質の支出が価値がある関心領域に対応し、一方、部分６６は、例えば、低帯域幅条件による品質低下が部分６４に対する品質低下を考慮する前に考慮されるべき部分である。
【００４４】
以下において、装置４０の有利な実施のためのさらなる実施形態が説明される。特に、図４は、構造的に図２−図３に対応する方法で装置４０を示す。図２および図３では、操作モードが本願発明の第２の態様に対応するように変更されている。
【００４５】
すなわち、装置４０は、選択部５６、検索部６０および導出部６６を備える。選択部５６は、サーバ２０によって提供された複数４６のメディアセグメント５８から選択し、検索部６０は、サーバから選択されたメディアセグメントを検索する。図４は、装置４０が図２−図３に関して図示されたように動作すると仮定している。すなわち、選択部５６は、選択されたメディアセグメント５８は、この空間部分が時間的にその空間位置を変化させるビュー部分２８に続くようにして符号化されたシーン３０の空間部分６２を有するように選択を実行する。しかしながら、本願の同じ態様に対応する変形は、図５に関して後で説明され、各時刻ｔに対して、選択され検索されたメディアセグメント５８は、全体のシーンまたはそれに符号化された一定の空間セクション６２を有する。
【００４６】
いずれにせよ、図２および図３に関する説明と同様に、選択部５６は、メディアセグメント５８を選択し、セクション６２内の第１の部分６４が選択され検索されたメディアセグメント５８に所定の品質で符号化される一方、第１の部分６４に空間的に隣接するセクション６２の第２の部分６６が部分６４の所定の品質と比較して低い品質で選択されたメディアセグメントに符号化される。第１の部分６４は、符号化されていない部分７２によって囲まれている間に部分６２を完全に覆っているように、選択部５６がビューポート２８の位置を追跡する移動テンプレートに関するメディアセグメントに選択および検索を制限し、メディアセグメントが所定の品質で完全にセクション６２に符号化されている変形例が図６に示されている。いずれにせよ、選択部５６は、第１の部分６４が時間的に空間位置が変化するビューセクション２８に追従するように選択を実行する。
【００４７】
そのような状況では、どのくらいの大きさのセクション６２または部分６４があるべきかに関してクライアント４０が予測することも容易ではない。シーンの内容に応じて、大部分のユーザは、シーン３０を横切ってビューセクション２８を移動させることにおいて同様に行動することができ、ビューセクション２８がシーン３０を横切って移動すると推定される速度のビューセクション２８の間隔にも同じことが当てはまる。従って、図４−図６の実施形態によれば、情報７４は、それぞれ情報７４から独立した第１の部分６４のサイズ、またはサイズおよび／または位置、あるいはセクション６２のサイズまたはサイズおよび／または位置を設定する際に装置４０を支援するために、サーバ２０によって装置４０に提供される。サーバ２０から装置４０に情報７４を送信する可能性に関しては、図２および図３に関して上述したのと同じことが当てはまる。すなわち、情報は、そのイベントボックス内などのメディアセグメント５８内に含まれてもよく、またはメディアプレゼンテーション記述内の送信、またはＳＡＮＤメッセージなどのサーバ４０から装置４０に送信される独自のメッセージがこの目的のために使用されてもよい。
【００４８】
すなわち、図４−図６の実施形態によれば、選択部５６は、サーバ２０から生じる情報７４に応じて第１の部分６４のサイズを設定するように構成される。図４−図６に示す実施形態では、サイズはタイル５０の単位で設定されているが、図１に関して既に上述したように、状況を空間的に変化する品質でシーン３０をサーバ２０で提供する別の概念を使用する場合は状況がわずかに異なり得る。
【００４９】
一例によれば、情報７０は、例えば、ビューセクション２８のビューポートの所与の移動速度についての確率を含むことができる。情報７４は、既に上述したように、例えばＤＡＳＨクライアントであり得るクライアント装置４０に利用可能にされるメディアプレゼンテーション記述内に生じ得るか、またはイベントボックス、すなわち、ＤＡＳＨの場合のＥＭＳＧまたはＳＡＮＤメッセージ等の情報７４を伝達するためにいくつかの帯域内メカニズムが使用され得る。情報７４は、ＩＳＯファイルフォーマットまたはＭＰＥＧ−２ＴＳなどのＭＰＥＧ−ＤＡＳＨを超えるトランスポートフォーマットなどの任意のコンテナフォーマットに含めることもできる。それはまた、後述するようにＳＥＩメッセージ内のようなビデオビットストリーム内で伝達され得る。換言すれば、情報７４は、視界セクション２８の空間速度の尺度についての所定の値を示し得る。このようにして、情報７４は部分６４のサイズをスケーリングの形で、またはビューセクション２８のサイズに対する増分の形で示す。すなわち、情報７４は、セクション２８のサイズをカバーするのに必要な部分６４についてのある「基本サイズ」から始まり、この「基本サイズ」を増分的にまたはスケーリングすることによって適切に増加させる。例えば、前述のビューセクション２８の周囲の移動速度は、例えば、可能な任意の空間方向に沿ったビューセクション２８の最も遠い位置を決定するように、現在のビューセクション２８の位置の周囲をスケーリングするために使用され得る。この時間間隔の後、例えば、メディアセグメント５８の時間的長さに対応する時間的セグメント５４の持続時間のような部分６４の空間的位置を調整する際の待ち時間を決定する。この持続時間が全方向であるビューポート２８の現在位置の円周に加わる速度時間は、そのような最悪の場合の円周になり得、移動しないビューポート２８を想定する部分６４のある最小拡大に対する部分６４の拡大を決定するために使用され得る。
【００５０】
情報７４は、ユーザ行動の統計の評価にも関連し得る。後で、そのような評価プロセスを実行するのに適した実施形態が説明される。例えば、情報７４は、ある割合のユーザに関する最大速度を示すことができる。例えば、情報７４は、９０％のユーザが０．２ｒａｄ／ｓより遅い速度で移動し、９８％のユーザが０．５ｒａｄ／ｓより低い速度で移動することを示すことができる。情報７４またはそれを搬送するメッセージは、確率−速度ペアが定義されるように、または一定割合のユーザ、例えば常に９９％のユーザに対して最高速度を知らせるメッセージが定義されるように定義することができる。移動速度シグナリング７４は、方向情報、すなわち、２Ｄおける角度または３Ｄにおける２Ｄプラス深さおよびライトフィールドアプリケーションとしても知られるものをさらに含むことができる。情報７４は、異なる移動方向に対する異なる確率−速度対を示すであろう。
【００５１】
換言すれば、情報７４は、例えばメディアセグメントの時間的長さなどの所与の期間に適用することができる。それは、軌跡ベースの（Ｘパーセンタイル、平均ユーザパス）または速度ベースのペア（Ｘパーセンタイル、速度）または距離ベースのペア（Ｘパーセンタイル、口径／直径／推奨）、または面積ベースのペア（Ｘパーセンタイル、推奨される優先領域）またはパス、速度、距離、または優先領域の１つの最大境界値を含む。情報を百分位数に関連付ける代わりに、ほとんどのユーザが一定の速度で移動し、次に多くのユーザがさらに速い速度で移動するというように、単純な頻度ランク付けを行うことができる。追加的または代替的に、情報７４は、ビューセクション２８の速度を示すように制限されないが、表示に従うユーザの割合などの表示または表示がユーザの視聴速度／表示セクションが最も頻繁に記録されたものと一致するかどうかの表示、および表示の一時的持続性の有無にかかわらずの統計的有意性についての表示の有無にかかわらず、ビューセクション２８を追跡するように求められる部分６２および／または６４をそれぞれ指示するために見るべき好ましい領域を同様に示し得る。情報７４は、メディアセグメントの時間長内、またはより詳細には時間セグメント５４の時間的長さなど、ある期間内の視界区間２８の移動距離の尺度などの視界区間２８の速度の別の速度の尺度を示すことができる。あるいは、情報７４は、ビューセクション２８が移動し得る特定の移動方向を区別するように示され得る。これは、特定の方向へのビューセクション２８の速度または速度の表示、ならびに特定の移動方向に関するビューセクション２８の移動距離の標識の両方に関係する。さらに、部分６４の拡張は、全方向的にまたは異なる移動方向を区別する方法で直接的に、情報７４によって示され得る。さらに、情報７４は、移動ビューセクション２８における統計的な振る舞いを説明するためにこれらの値が十分であるユーザのパーセンテージと共にこれらの値を示すという点で、今概説した例のすべてが修正され得る。この点に関して、ビュー速度、すなわちビュー速度セクション２８はかなりのものとすることができ、例えばユーザの頭部の速度値に限定されないことに留意されたい。むしろ、ビューセクション２８は、例えば、ユーザの眼球運動に応じて移動させることができ、その場合、ビュー速度はかなり大きくなり得る。ビューセクション２８はまた、タブレットなどの動きによるなど、他の入力装置の動きに従って動かすこともできる。ユーザがセクション２８を移動させることを可能にするこれらすべての「入力可能性」は、異なる予想されるビューセクション２８の速度をもたらすので、情報７４は、ビューセクション２８の移動を制御するための異なる概念を区別するように設計され得る。すなわち、情報７４は、ビューセクション２８の移動を制御する異なる方法に対して異なるサイズを示すように部分６４のサイズを示すかまたは示されることができ、装置４０は正しいビューセクション制御のために情報７４によって示されるサイズを使用するであろう。すなわち、ビューセクション２８は、ユーザによって制御される、すなわち、装置４０は、ビューセクション２８が頭の動き、眼球の動き、タブレットの動きなどのいずれによって制御されているかを確認し、そのようなビュー部分制御に対応する情報７４の部分に従ってサイズを設定する方法についての知識を得る。
【００５２】
一般に、移動速度は、コンテンツ、期間、表現、セグメント、ＳＲＤ位置ごと、ピクセルごと、タイルごと、たとえば任意の時間的または空間的粒度などでシグナリングすることができる。概説したように、移動速度は頭の動きおよび／または目の動きでも区別することができる。さらに、ユーザの移動確率に関する情報７４は、高解像度プリフェッチ、すなわち、ユーザのビューポートの外側のビデオ領域、または球形の範囲に関する推奨事項として伝えられてもよい。
【００５３】
図７ａから図７ｃは、それぞれ部分６４または部分６２のサイズおよび／またはその位置を修正するために装置４０によって使用される方法で、情報７４に関して説明されたオプションのいくつかを簡単に要約する。図７ａに示す選択肢によれば、装置４０は、信号速度ｖと個々のメディアセグメント５０ａに符号化された時間セグメントの時間長に対応する期間に対応することができる時間長Δｔとの積に対応する距離だけセクション２８の円周を拡大する。追加的に及び／又は代替的に、部分６２及び／又は６４の位置は、速度が大きいほど、セクション２８の現在位置から、又は信号６２及び／又は６４の現在の位置から情報７４により示されたように信号速度若しくは運動方向へのより遠い位置に配置することができる。速度および方向は、情報７４による最近の開発または推奨される好ましい領域の表示の変化を調査または推定することから導出され得る。全方向にｖ×Δｔを適用する代わりに、速度は、異なる空間方向に対して異なる情報７４によって示されてもよい。図７ｄに示された代替案は、情報７４がビューセクション２８の円周を直接拡大する距離を示し得ることを示し、この距離は図７ｂのパラメータｓによって示される。また、方向によって変化する断面の拡大が適用されてもよい。図７ｃは、セクション２８の周囲の拡大が、例えばセクション２８の元の面積と比較した拡大セクションの面積の比の形のような、面積の増加による情報７４によって示され得ることを示す。いずれにせよ、拡大後の領域２８の円周は、図７ａないし７ｃにおいて７６で示される。図７ａ−図７ｃの拡大図は、部分６４が拡大部分７６内の全領域を少なくともその所定の量で覆うように部分６４の寸法を寸法設定または設定するために選択部５６によって使用され得る。明らかに、より大きなセクション７６、より多くのタイルの数は、例えば、部分６４内にある。さらなる代替案によれば、セクション７４は、部分６４を構成するタイルの数の形などで部分６４のサイズを直接示すことができる。
【００５４】
部分６４のサイズをシグナリングする後者の可能性は図５に示される。図５の実施形態は、図４の実施形態が図６の実施形態によって修正されたのと同じ方法で修正することができ、すなわち、セクション６２の全領域を部分６４の品質でセグメント５８によってサーバ２０から取出すことができる。
【００５５】
いずれにせよ、図５の最後で、情報７４は異なる大きさのビューセクション２８の間、すなわちビューセクション２８によって見られる異なる視野の間を区別する。情報７４は、装置４０が現在目指しているビューセクション２８のサイズに応じて部分６４のサイズを単に示す。これにより、装置４０のような装置が部分６４の大きさを計算するかそうでなければ部分６４の大きさを推測する問題に対処する必要なしに、図４、６および図７に関して説明したように、セクション２８のいかなる移動にもかかわらず、部分６４がビューセクション２８を覆うことで十分であるように、異なる視野または異なる大きさのビューセクション２８を有する装置によってサーバ２０のサービスを使用できる。図１の説明から明らかになるように、例えば、どの一定数のタイルが、ある大きさのビューセクション２８、すなわち、フィールド空間的位置決め３０についてのビューセクション２８の方向に関係なく、ある大きさの視野を完全に覆うのに十分であるかについて評価することはほとんど容易である。ここで、情報７４はこの状況を軽減し、装置４０は情報７４内で装置４０に適用されるビューセクション２８のサイズに使用されるべき部分６４のサイズの値を単純に調べることができる。すなわち、図５の実施形態によれば、ＤＡＳＨクライアント、またはイベントボックスまたはＳＡＮＤメッセージなどのいくつかの曲がったメカニズムに利用可能にされたメディアプレゼンテーション記述は、球形の範囲またはそれぞれ表現の集合またはタイルの集合の視野に関する情報７４を含むことができる。一例は、図１に示すようにＭ個の表現を有するタイル張りのオファリングであり得る。情報７４は、例えば図１に示すように６×４タイルにタイル状に並べられた立方体表現の中から、所与の端部装置の視野をカバーするためにダウンロードする推奨数ｎ ＜Ｍ（表現と呼ばれる）を示すことができ、１２枚のタイルで９０°×９０°の視野をカバーするのに十分であると考えられる。端部装置の視野が必ずしもタイルの境界と完全に揃っているとは限らないため、この推奨は、装置４０単独では自明に生成することはできない。装置４０は、例えば少なくともＮ個のタイル、すなわちＮ個のタイルに関するメディアセグメント５８をダウンロードすることによって情報７４を使用することができる。情報を利用する別の方法は、端部装置の現在のビュー中心に最も近いセクション６２内のＮ個のタイルの品質を強調すること、すなわちセクション６２の部分６４を構成するためにＮ個のタイルを使用することである。
【００５６】
図８ａに関して、本願発明のさらなる態様に関する実施形態が説明される。ここで、図８ａは、図１ないし図７に関して上述した可能性のいずれかに従って互いに通信するクライアント装置１０およびサーバ２０を示す。すなわち、装置１０は、図２−図７に関して説明した実施形態のいずれかに従って具現化することができる。あるいは、図１に関して上述したように、これらの詳細事項がなくても単に動作することができる。しかしながら、好ましくは、装置１０は、図２−図７に関して上述した実施形態のいずれかに従って具体化され、さらに、図８ａに関してここで説明された動作モードを継承する。特に、装置１０は、図２−図７に関して上述したように内部的に構成されており、すなわち、装置４０は、選択部５６、検索部６０、およびオプションで導出部６６を含む。選択部５６は、不均等なストリーミングを目的とする選択、すなわち、品質が空間的に変化するようにおよび／またはエンコードされていない部分があるように、メディアコンテンツが選択され検索されたメディアセグメントに符号化されるようにメディアセグメントを選択する選択を行う。しかしながら、これに加えて、装置４０は、サーバ２０に送出するログメッセージ送信機８０または例えば以下のようにログインしたログメッセージを評価する装置８２を含む。
第１の部分６４の空間位置および／または移動を測定する瞬間的な測定値または統計値
選択されたメディアセグメントに符号化され、ビューセクション２８に見える限りにおいて、時間的に変化する空間シーンの品質を測定する瞬間測定値または統計値および／または
選択されたメディアセグメントに符号化され、ビューセクション２８に見える限りにおいて、第１の部分の品質または時間的に変化する空間シーン３０の品質を測定する瞬間測定値または統計値
【００５７】
動機は以下の通り。
【００５８】
前述のように、最も興味深い地域やスピードと確率のペアなどの統計を導出できるようにするには、ユーザからの報告メカニズムが必要である。ＩＳＯ／ＩＥＣ ２３００９−１の附属書Ｄに定義されているものに追加のＤＡＳＨメトリクスが必要である。
【００５９】
１つのメトリックはＤＡＳＨメトリクスとしてのクライアントのＦｏＶであり、ＤＡＳＨクライアントはメトリクスサーバ（ＤＡＳＨサーバまたは別のものと同じにすることも可能）にＦｏＶの観点からエンドデバイスの特性を返送する。
2019537338.tif 000003
【００６０】
１つのメトリックはＶｉｅｗｐｏｒｔＬｉｓｔである。ＤＡＳＨクライアントは、各クライアントが時間内に監視していたビューポートをメトリックサーバ（ＤＡＳＨサーバまたは別のサーバと同じにすることも可能）に返送する。そのようなメッセージのインスタンス化は次のようになる。
2019537338.tif 000004
【００６１】
ビューポート（関心領域）メッセージに関しては、潜在的に所与の粒度（非常に小さい動きの報告を回避するかしないかを問わず）または所与の周期性を用いて、ビューポート変更が発生するたびに報告するようにＤＡＳＨクライアントに依頼することができる。そのようなメッセージは、属性@reportViewPortPeriodicityまたは要素または記述子としてＭＰＤに含めることができる。ＳＡＮＤメッセージやその他の方法で、帯域外で示されることもある。
【００６２】
ビューポートはタイルの粒度で通知することもできる。
【００６３】
追加的または代替的に、ログメッセージは、シーン中心からの現在のユーザ距離および／または現在のビュー深度など、図１０に関して以下で論じるパラメータのうちのいずれかなど、ユーザ入力に応じて変化する他の現在のシーン関連パラメータについて報告することができる。
【００６４】
もう１つのメトリックはViewportSpeedListである。ＤＡＳＨクライアントは、移動が発生したときに特定のビューポートについて移動速度を表示する。
2019537338.tif 000005
【００６５】
このメッセージは、クライアントがビューポート移動を実行した場合にのみ送信される。ただし、サーバは、前の場合と同様に、メッセージが移動が大きい場合にのみ送信されるように指示することができる。そのような設定は、@ minViewportDifferenceForReportingのように、サイズをピクセル単位、角度単位、またはメッセージを送信するために変更する必要があるその他の大きさを通知するようなものである。
【００６６】
上記のように非対称品質が提供されるＶＲ−ＤＡＳＨサービスのもう１つの重要なことは、ユーザがビューポートの非対称表現または異なる品質／解像度表現から他のビューポートについてより適切な別の表現または表現のセットに切り替える速度を評価することである。そのような測定基準では、サーバは、ＱｏＥに影響を及ぼす関連要因を理解するのに役立つ統計を導出することができる。そのようなメトリックは次のようになる。
2019537338.tif 000006
【００６７】
あるいは、前述の期間を平均値として与えることもできる。
2019537338.tif 000007
【００６８】
他のＤＡＳＨメトリクスに関して、これらのメトリクスのすべてに、測定が実行された時刻を追加で含めることができる。
2019537338.tif 000008
【００６９】
場合によっては、品質が異なるコンテンツがダウンロードされ、質の悪い（または質の良いものと質の悪いものが混在した）コンテンツが長時間表示されると（２、３秒程度）、ユーザが不満を感じてセッションを終了することがある。
2019537338.tif 000009
【００７０】
あるいは、最大品質の違い、またはビューポートのmax＿qualityとmin＿qualityを報告することもできる。
【００７１】
図８ａに関する上記の説明から明らかになったように、タイルベースのＤＡＳＨストリーミングサービス事業者が（例えば、解像度比、ビットレートおよびセグメント期間に関して）有意義な方法でそのサービスを設定および最適化するためには、サービス事業者が、クライアント報告メカニズムを必要とする統計を導出することができる場合に有利であり、その例は上述されている。非特許文献１（［Ａ１］）の附属書Ｄに加えて、上で定義されたものに対する追加のＤＡＳＨメトリクスが以下に示される。
【００７２】
図１に示すように、立方体投影のビデオを使用したタイルベースのストリーミングサービスを想像されたい。クライアント側での再構成は図８ｂに示されており、ここで、小さい円１９８は、クライアントのビューポート２８内で、水平方向および垂直方向に等角的に分布したビュー方向の二次元分布の、個々のタイル５０によって覆われる画像領域への投影を示す。ハッチングを付したタイルは高解像度タイルを示し、従って高解像度部分６４を形成し、一方、ハッチングなしで示したタイル５０は低解像度タイルを示し、従って低解像度部分６６を形成する。セグメント選択およびダウンロードの最後の更新以降にビューポート２８が変更されたときに部分的に低解像度のタイルがユーザに提示され、これにより、ダウンロード可能なセグメント５８にコード化されたタイル５０の投影面またはピクセルアレイがあるキューブ上に各タイルの解像度が決定されることを見ることができる。
【００７３】
上記の説明はどちらかといえば一般的に、ビューポートでビデオがユーザに提示される品質を示すフィードバックまたはログメッセージを示しているが、以下では、これに関して適用可能なより具体的かつ有利な測定基準について概説する。ここで説明されている測定基準は、クライアント側から報告され、有効ビューポート解決と呼ばれることがある。クライアントのビューポートでの有効な解決策をサービスオペレータに示すことが想定されている。報告された有効ビューポート解像度が、ユーザが低解像度タイルの解像度に向けた解像度のみを提示されたことを示す場合、サービスオペレータは、それに応じてタイリング構成、解像度比またはセグメント長を変更してより高い有効ビューポート解像度を達成することができる。
【００７４】
一実施形態は、セグメント５８にコード化されたタイル５０のピクセルアレイが存在する投影図面で測定された、ビューポート２８内の平均ピクセル数であろう。測定は、ビューポイント２８の覆われた視野（ＦｏＶ）に関して、水平方向２０４と垂直方向２０６とを区別することができ、またはそれらに対して特定的であり得る。次の表は、概説されたビューポート品質尺度を知らせるためにログメッセージに含めることができる適切なシンタックスおよびセマンティックスの可能な例を示す。
2019537338.tif 000010
【００７５】
水平方向と垂直方向への分解は、代わりに平均ピクセル数にスカラー値を使用することで中断できる。ログメッセージの受信者、すなわち評価部８２にも報告され得るビューポート２８の開口またはサイズの指示と共に、平均カウントはビューポート内のピクセル密度を示す。
【００７６】
メトリックに対して考慮されるＦｏＶを実際にユーザに提示されるビューポートのＦｏＶより小さくすることは有利であり、それによって周辺視野にのみ使用され、したがって主観的品質認識に影響を及ぼさないビューポートの境界に向かう領域を除外する。この代替案は、ビューポート２８のそのような中央部分にあるピクセルを囲む破線２０２によって示されている。ビューポート２８の全体的なＦｏＶに関して報告されたメトリックについて考慮されたＦｏＶ２０２を報告することはまた、ログメッセージ受信者８２に示され得る。次の表は、前の例の対応する拡張を示している。
2019537338.tif 000011
【００７７】
さらなる実施形態によれば、平均画素密度は、EffectiveFoVResolutionH / Vを含む例に関してこれまで説明した例の場合に有効なように投影面内で空間的に均一な方法で品質を平均することによって測定されるのではないが、この平均化を、ピクセル、すなわち投影面にわたって不均一に重み付けする。平均化は、球状に一様な方法で実行されてもよい。一例として、平均化は、円１９８がそうであるように分布したサンプル点に関して一様に実行されてもよい。換言すれば、局所投影面距離の増加と共に二次的に減少し、視点と接続する線に対する投影の局所傾斜の正弦に従って増加する重みによって局所密度を重み付けすることによって平均化を実行することができる。メッセージは、例えば均一球サンプリンググリッドを使用することによって、利用可能な投影のいくつかの固有のオーバーサンプリング（Equirectangular Projectionなど）を調整するためのオプションの（フラグ制御）ステップを含むことができる。いくつかの投射は大きなオーバーサンプリングの問題を持たず、オーバーサンプリングのコンピューティング除去を強制することは不必要な複雑さの問題につながり得る。これはEquirectangular Projectionに限定されてはならない。レポート作成では、水平方向と垂直方向の解像度を区別する必要はないが、それらを組合わせることは可能である。以下に一実施形態を示す。
2019537338.tif 000012
【００７８】
投影領域内の縦横に配列されたピクセル３０８の画素密度の平均化を実行して、投影の局所的密度に従って画素密度の局所的重みを投影面上の点３０２に設定するために、平均化における等角均一性の適用は、ビューポート２８内にある限り、ビューポイント３０６を中心とする球３０４上の等角的に水平および垂直に分布した点３０２がタイル、ここでは立方体の投影面３０８上にどのように投影されるかを示すことによって図８ｅに示され、投影面上への点３０２の投影１９８の局所密度に応じて画素密度の局所重みを設定するように、タイルの、投影領域内に縦横に配列されたピクセル３０８の画素密度の平均化を実行する。全く同様のアプローチが図８ｆに描かれている。ここで、点３０２はビュー方向３１２に垂直なビューポート平面内に等間隔に、すなわち縦横に均等に分布され、投影面３０８への投影は点１９８を定義し、その局所密度は、局所密度画素密度３０８（ビューポート２８内の高解像度タイルおよび低解像度タイルのために変化する）が平均に寄与する重みを制御する。最新の表などの上記の例では、図８ｅに示されたものの代わりに図８ｆの代替物を使用することができる。
【００７９】
以下では、図８ａに例示的に示されているように複数のメディアバッファ３００を有するＤＡＳＨクライアント１０（図１参照）、すなわちダウンロードされたセグメント５８を後の１つ以上の復号化部５８に転送するＤＡＳＨクライアント１０に関するさらなる種類のログメッセージが記述される実施形態について説明する。セグメント５８のバッファ上への分配は異なる方法で行うことができる。例えば、３６０ビデオの特定の領域が互いに別々にダウンロードされるように、またはダウンロード後に別々のバッファにバッファリングされるように配信を行うことができる。以下の例は、図１に示すように＃１〜＃２４のインデックスを付けられたどのタイルＴ（対数が２５の合計を有する）が＃1〜＃Mの品質（1が最高、Mが最低）のどの品質Ｑにおいて個々にダウンロード可能な表現Ｒ＃１〜＃Ｐに符号化されるかを示すことによって異なる分布、およびこれらのＰ表現Ｒをどのようにして（オプションで）ＭＰＤ内の＃１〜＃Ｓのインデックスを付けた適応セットＡにグループ化することができるか、Ｐ表現Ｒのセグメント５８をどのようにして＃１〜＃Ｎのインデックスを付けたバッファに分配することができるかを示す。
2019537338.tif 000013
【００８０】
ここでは、表現がサーバで提供され、ダウンロードのためにＭＰＤに告知され、それらの各々は１つのタイル５０、すなわちシーンの１つのセクションに関係する。１つのタイル５０に関する表現であるが、このタイル５０を異なる品質で符号化することは、グループ化は任意であるが正確にはこのグループ化はバッファへの関連付けに使用される適応セットにおいて要約されるであろう。従って、この例によれば、タイル５０ごとに、換言すればビューポート（ビューセクション）符号化ごとに、１つのバッファが存在することになる。
別の表現セットと分布は次のようになる。
2019537338.tif 000014
【００８１】
この例によれば、各表現は全領域をカバーすることになるが、高品質の領域は一方の半球に焦点を合わせ、他方、より低い品質は他方の半球に使用される。この方法で使われる正確な品質が異なる、つまり高品質の半球の位置が等しい表現は、１つの適応セットにまとめられ、この特性に従って、ここでは例として６つのバッファに分配される。
【００８２】
従って、以下の説明では、アダプテーションセットなどに関連付けられた、異なるビューポート符号化、タイルなどのビデオサブ領域などによるバッファへのそのような分配が適用されると仮定する。図８ｃは、２つの別々のバッファ、例えば、最後の、しかし最も小さい表に示されているような、タイルベースのストリーミングシナリオにおけるタイル１およびタイル２に対する経時的なバッファ満杯度レベルを示す。クライアントがそのすべてのバッファの満杯レベルを報告することを可能にすることは、サービスオペレータが彼のサービス設定の経験の質（ＱｏＥ）の影響を理解するために他のストリーミングパラメータとデータを相関させることを可能にする。
【００８３】
そこからの利点は、クライアント側の複数のメディアバッファのバッファ満杯がメトリックと共に報告され、識別されてバッファのタイプに関連付けられることができることである。関連タイプは、例えば
・Tile（タイル）
・Viewport（ビューポート）
・Region（領域）
・AdaptationSet（アダプテーションセット）
・Representation（表現）
・Low quality version of the whole content（コンテンツ全体の低品質版）
【００８４】
本願発明の一実施形態が表１に与えられており、表１には識別および関連付けと共に各バッファに対するバッファレベルステータスイベントを報告するためのメトリックが定義されている。
表１：バッファレベルのリスト
2019537338.tif 000015
【００８５】
ビューポート依存エンコーディングを使用するさらなる実施形態は以下の通りである。
【００８６】
ビューポートに依存するストリーミングのシナリオでは、ＤＡＳＨクライアントは特定の視聴方向（ビューポート）に関連するいくつかのメディアセグメントをダウンロードしてプリバッファする。プリバッファコンテンツの量が多すぎてクライアントがその表示方向を変更した場合、ビューポートの変更後に再生されるプリバッファコンテンツの部分は表示されず、それぞれのメディアバッファはパージされる。このシナリオは図８ｄに描かれている。
【００８７】
別の実施形態は、同じコンテンツの複数の表現（品質／ビットレート）、および場合によってはビデオコンテンツが符号化される空間的に均一な品質を有する従来のビデオストリーミングシナリオに関する。
その場合、分布は次のようになる：
2019537338.tif 000016
【００８８】
すなわち、ここでは、各表現は、例えばパノラマ３６０シーンではないかもしれないが異なる品質、すなわち空間的に均一な品質であるシーン全体をカバーし、これらの表現はバッファ上に個別に分配されるであろう。最後の３つの表に示されたすべての例は、サーバで提供される表現のセグメント５８がバッファに分配される方法を限定しないものとして扱われるべきである。異なる方法が存在し、その規則は、表現へのセグメント５８のメンバーシップ、適応セットへのセグメント５８のメンバーシップ、それぞれのセグメントが属する表現へのシーンの空間的に不均等なコーディングの局所的に向上した品質の方向、方向付けに基づき得て、シーンがそれぞれのセグメントにエンコードされる品質は、以下のように属する。
【００８９】
クライアントは、表現ごとにバッファを維持し、利用可能なスループットが上昇したときに、再生前に残りの低品質／ビットレートメディアバッファを消去し、既存の低品質／ビットレートバッファ内の期間の高品質メディアセグメントをダウンロードすることを決定できる。タイルおよびビューポート依存エンコーディングに基づくストリーミングのために同様の実施形態を構築することができる。
【００９０】
サーバ側で利益なしにコストを導入し、クライアント側で品質を低下させるので、サービス運営者は、提示されずにダウンロードされたデータ量とデータの種類を理解することに興味があるかもしれない。従って、本願発明は、「メディアダウンロード」および「メディアプレゼンテーション」という２つのイベントを容易に解釈できるように相関させる報告メトリックを提供することである。本願発明は、各メディアセグメントのダウンロードおよび再生状態についての冗長に報告された情報が分析されることを回避し、パージイベントのみの効率的な報告を可能にする。本願発明はまた、上記のようなバッファの同定およびタイプへの関連付けを含む。本願発明の一実施形態を表２に示す。
表2：削除イベントの一覧
2019537338.tif 000017
【００９１】
図９は、どのようにして装置４０を有利に実施するかのさらなる実施形態を示している。図９の装置４０は、図１−図８に関して上述した例のいずれにも対応することができる。すなわち、それはおそらく図８ａに関して上述したようにロックメッセンジャーを含んでもよいが、図５ないし図７ｃに関してしかし有する必要はなく上述したように図２および図３または情報７４に関して上述したように情報６８を有する必要はなく、使用してもよい。図９に関しては、しかしながら、図２ないし８の説明と異なり、タイルベースのストリーミングアプローチが実際に適用されると仮定されている。すなわち、シーンコンテンツ３０は、図２ないし図８に関して上記の選択肢として説明したタイルベースの方法でサーバ２０に提供される。
【００９２】
装置４０の内部構造は図９に示されたものと異なっていてもよいが、装置４０は図２ないし図８に関して既に議論した選択部５６および検索部６０、さらにオプションで導出部６６を備えるように例示的に示されている。しかしながら、さらに、装置４０はメディアプレゼンテーション記述アナライザ９０および適合部９２を含む。ＭＰＤ分析部９０は、サーバ２０から取得されたメディアプレゼンテーション記述から、時間的に変化する空間シーン３０がタイルベースのストリーミングのために提供される少なくとも１つのバージョンを導出し、かつ少なくとも１つのバージョンのそれぞれに対して時間的に変化する空間シーンのそれぞれのバージョンをタイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示を導出するためのものである。「バージョン」の意味は以下の説明から明らかになるであろう。特に、適合部９２は、このようにして得られた利益要件を、１つまたは複数のデコーダ４２の復号能力、デコーダ４２の数などの、装置４０または装置４０と対話する別の装置の能力と一致させる。図９の概念の基礎となる背景または考えは以下の通りである。タイルベースのアプローチでは、一定の大きさのビューセクション２８を仮定すると、一定の数のタイルがセクション６２に含まれている必要があることを想像されたい。さらに、あるタイルに属するメディアセグメントは、別のタイルに属するメディアセグメントの復号化とは別に、別個の復号化インスタンス化によって復号化されるべき１つのメディアストリームまたはビデオストリームを形成すると仮定することができる。従って、対応するメディアセグメントがセレクタ５６によって選択されるセクション６２内のある数のタイルの移動集約は、例えば対応する数の形のそれぞれの復号化資源の存在、すなわち、対応する数のデコーダ４２などのある復号化能力を必要とする。そのような数のデコーダが存在しない場合、サーバ２０によって提供されるサービスはクライアントにとって有用ではないのかもしれない。従って、サーバ２０によって提供されるＭＰＤは、「恩恵を受ける要件」、すなわち提供されるサービスを使用するのに必要なデコーダの数を示すことができる。しかしながら、サーバ２０は、異なるバージョンに対してＭＰＤを提供してもよい。すなわち、異なるバージョンのための異なるＭＰＤがサーバ２０によって利用可能であり得るか、またはサーバ２０によって提供されるＭＰＤは、内部で、サービスが使用され得る異なるバージョン間を区別するように構成され得る。例えば、バージョンは、視野、すなわち視野セクション２８のサイズにおいて異なり得る。異なるサイズの視野は、セクション６２内のタイルの数が異なることで明らかになり、したがって、たとえば、これらのバージョンでは異なる数のデコーダが必要になる可能性があるという点で、利点要件が異なる場合がある。他の例も考えられる。例えば、視野が異なるバージョンは同じ複数のメディアセグメント４６を含み得るが、別の例によれば、サーバ３０においてシーン３０がタイルストリーミング用に提供される異なるバージョンは、対応するバージョンに従って含まれる複数４６のメディアセグメントさえも異なり得る。例えば、１つのバージョンによるタイル分割は、他のバージョンによるシーンのタイルハイフン分割と比較して粗いので、例えば、より少ない数のデコーダを必要とする。
【００９３】
適合部９２は、恩恵を受ける要件と一致し、したがって対応するバージョンを選択するか、またはすべてのバージョンを完全に拒否する。
【００９４】
しかしながら、有益な要件はさらに、１つまたは複数のデコーダ４２が対処できなければならないプロファイル／レベルに関係し得る。例えば、ＤＡＳＨ ＭＰＤはプロファイルを示すことを可能にする複数の位置を含む。典型的なプロファイルは、属性、ＭＰＤに存在する可能性がある要素、および各表現に対して提供されるストリームのビデオまたはオーディオプロファイルを記述する。
【００９５】
恩恵を受ける要件のさらなる例は、例えば、ビューポート２８をシーン全体に移動させるためのクライアント側の能力に関するものである。有益な要件は、提供されたシーンコンテンツを本当に楽しむことができるようにするためにユーザがビューポートを移動するために利用可能であるべき必要なビューポート速度を示すことができる。適合部は、例えば、この要件が満たされているかどうか、例えばＨＭＤ２６のような差込まれたユーザ入力装置であるかどうかをチェックするであろう。あるいは、ビューポートを移動させるための異なる種類の入力装置が方向の意味での典型的な移動速度に関連付けられていると仮定すると、一連の「十分な種類の入力装置」を有益な要件として示すことができる。
【００９６】
球面ビデオのタイルストリーミングサービスでは、例えば品質の数、タイルの数等、動的に設定することができる設定パラメータが多すぎる。タイルが別々のデコーダによってデコードされる必要がある独立したビットストリームである場合、タイルの数が多すぎると、少ないデコーダを有するハードウェアデバイスがすべてのビットストリームを同時にデコードすることは不可能であり得る。可能性はこれを自由度として残して、ＤＡＳＨ装置がすべての可能な表現を解析して、すべての表現または装置のＦｏＶをカバーする所与の数を復号するのに必要なデコーダの数を数えることであり、そのＤＡＳＨクライアントがコンテンツを消費できるか否かを導くことである。但し、相互運用性と機能のネゴシエーションのより賢い解決策は、プロファイルがサポートされている場合は提供されたＶＲコンテンツが消費される可能性があるというクライアントへの約束として使用される一種のプロファイルにマッピングされるＭＰＤでシグナリングを使用することである。そのようなシグナリングは、urn :: dash-mpeg :: vr :: 2016のようなＵＲＮの形式で行われるべきであり、それはＭＰＤレベルまたは適応セットのいずれかでパックされることができる。このプロファイリングは、X profileのＮ個のデコーダでコンテンツを消費するのに十分であることを意味する。プロファイルに応じて、ＤＡＳＨクライアントはＭＰＤまたはＭＰＤ（アダプテーションセット）の一部を無視または受入れることができる。さらに、ＸｌｉｎｋやＭＰＤチェーニングなど、選択に関するシグナリングがほとんど利用できないなど、すべての情報が含まれていないメカニズムもいくつか存在する。このような状況では、ＤＡＳＨクライアントは、コンテンツを消費できるかどうかを導出できない。ＸｌｉｎｋまたはＭＰＤ Ｃｈａｉｎｉｎｇまたは同様のメカニズムを実行することが理にかなっているかどうかにかかわらず、ＤＡＳＨクライアントができるように、そのようなｕｒｎ（または同様のもの）を使用して、デコーダの数および各デコーダのプロファイル/レベルに関してデコード機能を公開することが必要である。シグナリングはまた、Ｘ個のプロファイル／レベルを有するＮ個のデコーダ、またはＹ個のプロファイル／レベルを有するＺ個のデコーダのような異なる動作点を意味し得る。
【００９７】
図１０はさらに、図１−図９に関して提示された上記の実施形態および説明のいずれかを示す。クライアント、装置４０、サーバなどに対する図１−９の実施形態は、時間的に変動する空間シーンが時間的に変動するだけでなく、他のパラメータにも依存する程度まで、提供されるサービスが拡張される範囲まで拡張され得る。例えば、図１０は、サーバ上にもたらされる利用可能な複数のメディアセグメントがビューセンター１００の異なる位置に対するシーンコンテンツ３０を記述する図１の変形例を示す。図１０に示す概略図では、シーン中心は単に１つの方向Ｘに沿って変化するように描かれているが、ビュー中心が２次元または３次元などの２つ以上の空間方向に沿って変化し得ることは明らかである。これは、例えば、ある仮想環境におけるユーザの位置の変化に対応する。仮想環境内のユーザの位置に応じて、利用可能なビューが変わり、それに応じてシーン３０が変わる。従って、タイルおよび時間的セグメント、ならびに異なる品質に細分されたシーン３０を記述するメディアセグメントに加えて、さらなるメディアセグメントは、シーンセンター１００の異なる位置に対するシーン３０の異なるコンテンツを記述する。装置４０または選択部５６はそれぞれ、ビューセクション位置およびパラメータＸなどの少なくとも１つのパラメータに応じて、選択プロセス内で検索されることになる複数４６のうちのメディアセグメントのアドレスを計算し、その後、これらのメディアセグメントは、計算されたアドレスを使用してサーバから取得される。この目的のために、メディアプレゼンテーション記述は、時間ｔと同様にタイルインデックス、品質インデックス、シーン中心位置に依存する機能を記述してもよく、それぞれのメディアセグメントの対応するアドレスをもたらす。従って、図１０の実施形態によれば、メディアプレゼンテーション記述は、図１ないし図９に関して上述したパラメータに加えて、１つ以上の追加パラメータに依存するそのような計算規則を含むであろう。パラメータＸは、それぞれのシーン表現がサーバ２０内の複数の４６内の対応するメディアセグメントによって符号化されるレベルのいずれかに量子化され得る。
【００９８】
代替として、Ｘは、ビュー深度、すなわち半径方向におけるシーン中心１００からの距離を定義するパラメータであり得る。ビュー中心部分Ｘが異なる異なるバージョンでシーンを提供することは、ユーザがシーンを「歩く」ことを可能にする一方で、ビューの深さが異なる異なるバージョンでシーンを提供することは、ユーザがシーンを前後に「放射状にズーム」することを可能にする。
【００９９】
従って、複数の非同心円ビューポートの場合、ＭＰＤは現在のビューポートの位置に関するさらなるシグナリングを使用することができる。シグナリングは、セグメント、表現または期間レベルなどで行うことができる。
【０１００】
非同心球：ユーザが移動するためには、異なる球の空間的関係がＭＰＤ内でシグナリングされるべきである。これは、球の直径に関して任意の単位で座標（ｘ、ｙ、ｚ）を用いて行われ得る。また、球の直径は球ごとに表示する必要がある。球は、中心にいるユーザにコンテンツが問題ないような追加のスペースを加えたものとして使用するには「十分に十分」なものである。ユーザがその合図の直径を超えて移動する場合は、別の球を使用して内容を表示する必要がある。ユーザがその示された直径を超えて移動する場合は、別の球を使用して内容を表示する必要がある。
【０１０１】
ビューポートの例示的なシグナリングは、空間内の所定の中心点に対して行われ得る。各ビューポートはその中心点を基準にして示される。 ＭＰＥＧ − ＤＡＳＨでは、これはAdaptationSet要素において示され得る。
2019537338.tif 000018
【０１０２】
最後に、図１１は、参照番号７４に関して上述したものなどのまたはそれに類似の情報が、ビデオ１１２が符号化されるビデオビットストリーム１１０に存在し得ることを示す。そのようなビデオ１１０を復号するデコーダ１１４は、情報７４を使用して、ビデオ１１０を復号するための復号電力が焦点を合わせられるべきビデオ１１２内の焦点領域１１６のサイズを決定し得る。情報７４は、例えば、ビデオビットストリーム１１０のＳＥＩメッセージ内で伝達され得る。例えば、フォーカスエリアを排他的にデコードすることができ、あるいはデコーダ１１４は、例えば左上のピクチャコーナーではなくフォーカスエリアでビデオの各ピクチャのデコードを開始するように構成することができ、および／またはデコーダ１１４はフォーカス領域１１６をデコードしたときのビデオの各ピクチャのデコードを中止できる。追加または代替として、情報７４は、どの空間セクションをカバーするか、または向上したもしくは所定の品質でカバーするためにどのセグメントをダウンロードまたはストリーミングするかを決定するために後続のレンダラまたはビューポートコントロールまたはクライアントのストリーミング装置またはセグメントセレクタに転送されるために単にデータストリームに存在し得る。情報７４は、例えば、上で概説したように、ビューセクション６２またはセクション６６をこのセクションと一致するように、または覆うように、または追跡するように配置するための推奨として推奨される好ましいセクションを示す。クライアントのセグメントセレクタによって使用される可能性がある。図４−図７ｃに関する説明に関してそうであったように、情報７４は、タイルの数のように、領域１１６の寸法を絶対的に設定することができ、または領域１１６の速度を設定することができ、ビデオの興味深いコンテンツを時空間的に追跡するために、例えばユーザ入力などに従って移動させ、それによって速度の指示の増加と共に増加するようにエリア１１６をスケーリングする。
【０１０３】
いくつかの態様が装置の文脈で説明されてきたが、これらの態様が対応する方法の説明も表すことは明らかであり、ブロックまたはデバイスは方法ステップまたは方法ステップの特徴に対応する。同様に、方法ステップの文脈で説明された態様はまた、対応する装置の対応するブロックまたは項目または特徴の説明を表す。方法ステップのいくつかまたはすべては、例えばマイクロプロセッサ、プログラム可能なコンピュータまたは電子回路のようなハードウェア装置によって（または使用して）実行されてもよい。いくつかの実施形態では、そのような装置によって１つまたは複数の最も重要な方法ステップを実行することができる。
【０１０４】
ストリーミング信号、ＭＰＤまたは上述した信号のうちの任意の他のものなどの上記で発生する信号は、デジタル記憶媒体に記憶でき、または無線伝送媒体またはインターネットなどの有線伝送媒体などの伝送媒体で伝送できる。
【０１０５】
特定の実施要件に応じて、本発明の実施形態はハードウェアまたはソフトウェアで実施することができる。電子的に読取り可能な制御信号が記憶されているデジタル記憶媒体、例えばフロッピーディスク（登録商標）、ＤＶＤ、ブルーレイ、ＣＤ、ＲＯＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭまたはＦＬＡＳＨメモリを使用して実施することができる。それらは、それぞれの方法が実行されるようにプログラム可能なコンピュータシステムと協働する（または協働することができる）。従って、デジタル記憶媒体はコンピュータ可読であり得る。
【０１０６】
本発明によるいくつかの実施形態は、本明細書に記載の方法のうちの１つが実行されるように、プログラム可能なコンピュータシステムと協働することができる電子的に読取り可能な制御信号を有するデータキャリアを含む。
【０１０７】
一般に、本発明の実施形態は、プログラムコードを有するコンピュータプログラム製品として実装することができ、プログラムコードは、コンピュータプログラム製品がコンピュータ上で動作するときに方法のうちの１つを実行するように動作可能である。プログラムコードは、例えば機械可読キャリアに格納することができる。
【０１０８】
他の実施形態は、機械可読キャリアに格納された、本明細書に記載の方法のうちの１つを実行するためのコンピュータプログラムを含む。
【０１０９】
言換えれば、本願発明の方法の一実施形態は、したがって、コンピュータプログラムがコンピュータ上で実行されるときに、本明細書に記載の方法のうちの１つを実行するためのプログラムコードを有するコンピュータプログラムである。
【０１１０】
従って、本願発明の方法のさらなる実施形態は、本明細書に記載の方法のうちの１つを実行するためのコンピュータプログラムを記録したデータ記憶媒体（またはデジタル記憶媒体、またはコンピュータ可読媒体）である。データ記憶媒体、デジタル記憶媒体、または記録された媒体は通常、有形および／または非一時的である。
【０１１１】
従って、本願発明の方法のさらなる実施形態は、本明細書に記載の方法のうちの１つを実行するためのコンピュータプログラムを表すデータストリームまたは一連の信号である。データストリームまたは一連の信号は、例えばインターネットなどのデータ通信接続を介して転送されるように構成されてもよい。
【０１１２】
さらなる実施形態は、本明細書に記載の方法のうちの１つを実行するように構成または適合された処理手段、例えばコンピュータ、またはプログラマブルロジックデバイスを含む。
【０１１３】
さらなる実施形態は、本明細書に記載の方法のうちの１つを実行するためのコンピュータプログラムをインストールしたコンピュータを含む。
【０１１４】
本願発明によるさらなる実施形態は、本明細書に記載の方法のうちの１つを実行するためのコンピュータプログラムを（例えば、電子的または光学的に）受信機に転送するように構成された装置またはシステムを含む。受信機は、例えば、コンピュータ、モバイル機器、メモリ機器などであり得る。装置またはシステムは、例えば、コンピュータプログラムを受信機に転送するためのファイルサーバを含み得る。
【０１１５】
いくつかの実施形態では、プログラマブルロジックデバイス（例えばフィールドプログラマブルゲートアレイ）を使用して、本明細書に記載の方法の機能の一部または全部を実行することができる。いくつかの実施形態では、フィールドプログラマブルゲートアレイは、本明細書に記載の方法のうちの１つを実行するためにマイクロプロセッサと協働し得る。一般に、方法は、任意のハードウェア装置によって実行されることが好ましい。
【０１１６】
本明細書に記載の装置は、ハードウェア装置を使用して、またはコンピュータを使用して、またはハードウェア装置とコンピュータとの組合せを使用して実施することができる。
【０１１７】
本明細書に記載の装置、または本明細書に記載の装置の任意の構成要素は、少なくとも部分的にハードウェアおよび／またはソフトウェアで実施することができる。
【０１１８】
本明細書に記載の方法は、ハードウェア装置を使用して、またはコンピュータを使用して、あるいはハードウェア装置とコンピュータとの組合わせを使用して実行することができる。
【０１１９】
本明細書に記載の方法、または本明細書に記載の装置の任意の構成要素は、少なくとも部分的にハードウェアおよび／またはソフトウェアによって実行することができる。
【０１２０】
上述の実施形態は、本願発明の原理を説明するための例示にすぎない。本明細書に記載された構成および詳細の修正および変形は、他の当業者にとって明らかであろうことが理解される。したがって、差し迫った特許請求の範囲によってのみ限定され、本明細書の実施形態の説明および説明のために提示された具体的な詳細によっては限定されないことが意図されている。
【先行技術文献】
【非特許文献】
【０１２１】
【非特許文献１】[A1]   ISO/IEC 23009-1:2014, Information technology -- Dynamic adaptive streaming over HTTP (DASH) -- Part 1: Media presentation description and segment formats
【図１】
2019537338.tif 000019
【図２】
2019537338.tif 000020
【図３】
2019537338.tif 000021
【図４】
2019537338.tif 000022
【図５】
2019537338.tif 000023
【図６】
2019537338.tif 000024
【図７ａ】
2019537338.tif 000025
【図７ｂ】
2019537338.tif 000026
【図７ｃ】
2019537338.tif 000027
【図８ａ】
2019537338.tif 000028
【図８ｂ】
2019537338.tif 000029
【図８ｃ】
2019537338.tif 000030
【図８ｄ】
2019537338.tif 000031
【図８ｅ】
2019537338.tif 000032
【図８ｆ】
2019537338.tif 000033
【図９】
2019537338.tif 000034
【図１０】
2019537338.tif 000035
【図１１】
2019537338.tif 000036
【手続補正書】
【提出日】令和1年6月12日(2019.6.12)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングするための装置であって、
サーバ（２０）上で利用可能な複数（４６）のメディアセグメント（５８）からメディアセグメントを選択し（５６）、
サーバ（２０）からの選択されたメディアセグメント（６０）を検索し、ここで、装置は、
前記選択されたメディアセグメントが、前記空間的セクションの第１の部分（６４）が所定の品質で前記選択されたメディアセグメントに符号化され、かつ第１の部分（６４）に空間的に隣接する時間的に変化する空間シーンの第２の部分（６６）が、所定の関係に関して所定の関係を満たすさらなる品質で前記選択されたメディアセグメントに符号化される方法で符号化された時間的に変化する空間的シーン（３０）の空間的セクション（６２）を少なくとも有するように選択を実行し、かつ、
前記選択されたメディアセグメントに含まれる情報（６８）および／または前記サーバ（２０）から得られる信号伝達から所定の関係を導き出す、
ように構成される装置。
【請求項２】
前記複数（４６）のメディアセグメントの各メディアセグメントは、一組の品質レベルのうちの関連する１つで、前記時間的に変化する空間シーン（３０）の関連する時空間部分に符号化されている、請求項１に記載の装置。
【請求項３】
前記複数（４６）のメディアセグメントに符号化された前記時間的に変化する空間シーン（３０）の各時空間部分は、時間的に変化する空間シーン（３０）が空間的に細分されているタイル（５０）における前記時間的に変化する空間シーン（３０）の時間セグメント（５４）である、請求項２に記載の装置。
【請求項４】
前記情報（６８）は、前記さらなる品質と前記所定の品質との間の差の尺度についての許容値を示す、請求項１から３のいずれかに記載の装置。
【請求項５】
前記情報（６８）は、前記ビューセクション（２８）までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定に対する前記許容値を示す、請求項４に記載の装置。
【請求項６】
前記情報は、ビューセクション（２８）までのそれぞれの距離と、それぞれの距離を超えた差を測定するための対応する許容値との差の対のリストとして前記ビューセクション（２８）までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定に対する前記許容値を示す、請求項４または５に記載の装置。
【請求項７】
前記情報（６４）は、前記さらなる品質と前記所定の品質との間の差の測定のための前記許容値を示し、それにより前記許容値は前記ビューセクションまでの距離が増すにつれて増大する、請求項４ないし６のいずれかに記載の装置。
【請求項８】
前記情報（６４）は、前記第２の部分が前記第１の部分と共に前記ビューセクション内にあり得る最大許容時間間隔の表示と共に、さらなる品質と所定の品質との間の差の尺度についての許容値を示す、請求項４ないし７のいずれかに記載の装置。
【請求項９】
前記情報（６４）は、さらなる品質と所定の品質との間の前記差を測定するためのさらなる許容値を、前記第２の部分が前記第１の部分に沿った前記ビューセクション内に存在し得る最大許容時間間隔の表示と共に示す、請求項８に記載の装置。
【請求項１０】
前記情報（６４）が時間的変化および／または空間的に変化することを特徴とする請求項４から９のいずれかに記載の装置。
【請求項１１】
前記情報（６４）は、前記さらなる品質および前記所定の品質について許容される同時設定の対を示す、請求項１から１０のいずれかに記載の装置。
【請求項１２】
前記装置は、前記第１の部分が前記時間的に変化する空間シーン（３０）の時間的に変化するビューセクション（２８）に追従するように前記選択を実行するように構成されている、請求項１に記載の装置。
【請求項１３】
前記装置は、前記時間的に変化するビューセクション（２８）の空間的位置がユーザ入力に従って変化するように構成されている、請求項１２に記載の装置。
【請求項１４】
前記装置は、関心領域に対応するように前記第１の部分を決定するように構成されている、請求項１から１３のいずれかに記載の装置。
【請求項１５】
前記装置は、前記ＲＯＩに関する情報を前記サーバから検索するように構成されている、請求項１４に記載の装置。
【請求項１６】
時間的に変化する空間シーンに関するメディアコンテンツ用のストリーミングサーバであって、
装置による検索のために複数のメディアセグメントを利用可能にし、それによって、装置は、空間的セクションの第１の部分が所定の品質で選択されたメディアセグメントに符号化される方法で符号化された方法で、少なくとも時間的に変化する空間シーンの空間的セクションをその中に符号化する検索のためのメディアセグメントを選択でき、それに応じて、第１の部分と空間的に隣接する時間的に変化する空間シーンの第２の部分がさらなる品質で選択されたメディアセグメントに符号化され、
メディアセグメント内の所定の関係に関する情報および／または装置への信号伝達によって、所定の品質に対するさらなる品質によって満たされるべき所定の関係を有する信号情報とを含むように構成される、ストリーミングサーバ。
【請求項１７】
前記複数のメディアセグメントの各メディアセグメントは、一組の品質レベルのうちの関連する１つで前記時間的に変化する空間シーンの関連する時空間部分を符号化している、請求項１６に記載のストリーミングサーバ。
【請求項１８】
前記複数のメディアセグメントに符号化された前記時間的に変化する空間シーン（３０）の各時空間部分は、時間的に変化する空間シーン（３０）が空間的に細分されるタイル（５０）のそれぞれの１つにおいて、前記時間的に変化する空間シーン（３０）の時間セグメント（５４）である、請求項１７に記載のストリーミングサーバ。。
【請求項１９】
前記情報（６４）は、前記さらなる品質と前記所定の品質との間の差の尺度についての許容値を示す、請求項１６ないし請求項１８のいずれかに記載のストリーミングサーバ。
【請求項２０】
前記情報（６８）は、前記ビューセクション（２８）までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差を測定するための前記許容値を示す、請求項１９に記載のストリーミングサーバ。
【請求項２１】
前記情報は、前記ビューセクション（２８）までのそれぞれの距離および前記それぞれの距離を超えた差の測定のための対応する許容値とのペアのリスト（２８）によって、ビューセクション（２８）までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定のための前記許容値を示す、請求項１９または２０に記載のストリーミングサーバ。
【請求項２２】
前記情報は、前記さらなる品質と前記所定の品質との間の差の測定のための前記許容値を示し、それにより前記許容値は、前記ビューセクションまでの距離が増すにつれて増大する、請求項１９ないし２１のいずれかに記載のストリーミングサーバ。
【請求項２３】
前記情報（６４）は、前記第２の部分が前記第１の部分と共にビューセクション内にあってもよい許容される最大許容時間間隔の表示と共に、前記さらなる品質と前記所定の品質との間の差の尺度についての許容値を示す、請求項１９ないし２２のいずれかに記載のストリーミングサーバ。
【請求項２４】
前記情報（６４）は、前記第２の部分が前記第１の部分と共にビューセクション内にあってもよいさらなる最大許容時間間隔の表示と共に、前記さらなる品質と前記所定の品質との間の差の測定に対するさらなる許容値を示す、請求項２３に記載のストリーミングサーバ。
【請求項２５】
前記情報（６４）は時間および／または空間的に変化している、請求項１９ないし２４のいずれかに記載のストリーミングサーバ。
【請求項２６】
前記情報（６４）は、前記さらなる品質および前記所定の品質に関して許容される同時設定のペアを示す、請求項１６ないし２５のいずれかに記載のストリーミングサーバ。
【請求項２７】
前記装置は、ＲＯＩに関する情報を前記サーバに送信するように構成されている、請求項１９ないし２６のいずれかに記載のストリーミングサーバ。
【請求項２８】
複数のメディアセグメントのアドレスを計算することに関する情報であって、その情報を使用する装置は、時間的に変化する空間シーンの少なくとも１つの空間セクションをそのように符号化した複数のメディアセグメントからメディアセグメントを選択し検索することができ、それによれば、前記空間セクションの第１の部分が所定の品質で選択されたメディアセグメントに符号化され、それに応じて第１の部分に空間的に隣接する時間的に変化する空間シーンの第２の部分が選択されたメディアセグメントによりさらなる品質に符号化される情報と、
前記所定の品質に関するさらなる品質によって満たされるべき所定の関係に関する情報（６４）とを含む、メディアプレゼンテーション記述。
【請求項２９】
前記複数のメディアセグメントの各メディアセグメント（４６）は、一組の品質レベルのうちの関連する１つで、前記時間的に変化する空間シーン（３０）の関連する時空間部分をその中に符号化している、請求項２８に記載のメディアプレゼンテーション記述。
【請求項３０】
前記複数のメディアセグメント（４６）に符号化された前記時間的に変化する空間シーン（３０）の各時空間部分は、時間的に変化する空間シーン（３０）が空間的に細分されるタイル（５０）のそれぞれ１つにおける前記時間的に変化する空間シーン（３０）の時間セグメント（５４）である、請求項２９に記載のメディアプレゼンテーション記述。
【請求項３１】
前記情報（６４）は、前記さらなる品質と前記所定の品質との間の差の尺度についての許容値を示す、請求項２８ないし３０のいずれかに記載のメディアプレゼンテーション記述。
【請求項３２】
前記情報（６８）は、前記ビューセクション（２８）までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定に対する前記許容値を示す、請求項３１に記載のメディアプレゼンテーション記述。
【請求項３３】
前記情報は、前記ビューセクション（２８）までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定に対する前記許容値をビューセクション（２８）までのそれぞれの距離と、それぞれの距離を超える差を測定するための対応する許容値との対のペアリストにより示す、請求項３１または３２に記載のメディアプレゼンテーション記述。
【請求項３４】
前記情報（６４）は、前記第２の部分が前記第１の部分と共にビューセクション内にあり得る最大で許容される時間間隔の指示と共に、前記追加品質と前記所定品質との間の差の尺度についての前記許容値を示す、請求項３１ないし３４のいずれかに記載のメディアプレゼンテーション記述。
【請求項３５】
前記情報（６４）は、前記第２の部分が前記第１の部分と共にビューセクション内にあり得る最大で許容される時間間隔の指示と共に、前記追加品質と前記所定品質との間の差の尺度についての前記許容値を示す、請求項３１ないし３４のいずれかに記載のメディアプレゼンテーション記述。
【請求項３６】
前記情報（６４）は、最初の部分と一緒にビューセクション内にある前記第２の部分が許容することができるさらなる最大許容時間間隔の指示とともに、前記さらなる品質と前記所定の品質との間の差の測定に関するさらなる許容値を示す、請求項３５に記載のメディアプレゼンテーション記述。
【請求項３７】
前記情報（６４）は時間的に変化および／または空間的に変化している、請求項３１ないし３６のいずれかに記載のメディアプレゼンテーション記述。
【請求項３８】
前記情報（６４）は、前記さらなる品質および前記所定の品質に対して許容される同時設定のペアを示す、請求項２８ないし３７のいずれかに記載のメディアプレゼンテーション記述。
【請求項３９】
前記メディアプレゼンテーション記述は、ＲＯＩに関する情報を含む、請求項３１ないし３８のいずれかに記載のメディアプレゼンテーション記述。
【請求項４０】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングするための装置であって、
サーバ（２０）上で利用可能な複数（４６）のメディアセグメント（５８）からメディアセグメントを選択するように構成され、
前記装置は、
前記空間セクション（６２）の第１の部分（６４）が所定の品質で選択されたメディアセグメントに符号化され、前記第１の部分（６４）と空間的に隣接し、時間的に変化する空間シーンの第２の部分（６６； ７２）が選択されたメディアセグメントに符号化されていないか、または所定の品質に対してさらに低い品質で選択されたメディアセグメントに符号化され、
前記第１の部分（６４）は、前記時間的に変化する空間シーン（３０）の時間的に変化するビュー部分（２８）に続くような方法で、
選択されたメディアセグメントが少なくとも時間的に変化する空間シーン（３０）の空間セクション（６２）をその中に符号化するように選択を実行し、
前記選択されたメディアセグメントに含まれる情報（７４）および／または前記サーバから得られる信号伝達に応じて、前記第１の部分（６４）のサイズおよび／または位置を設定するように構成された装置。
【請求項４１】
前記情報（７４）は、前記時間的に変化するビューセクションのサイズに対する増分またはそのスケーリングの形でサイズを示す、請求項４０に記載の装置。
【請求項４２】
前記情報（７４）は、前記ビューセクションの空間速度の尺度についての所定の値を示す、請求項４０または４１に記載の装置。
【請求項４３】
測定された空間速度が所定の値を超えないユーザのデフォルトパーセンタイルについて、および／または、
測定された空間速度が所定の値を超えないユーザのパーセンタイルを示すパーセンタイル値と共に、および／または、
ビューセクションが所定の領域内にあるユーザのパーセンタイルを示すパーセンタイル値とともに、および／または、
所定の値が適用可能であるビューセクションの動きを制御する１つまたは複数の種類のユーザ入力を示すヒントとともに、
前記情報（７４）は、前記ビューセクションの前記空間速度の尺度についての前記所定の値を示す、請求項４２に記載の装置。
【請求項４４】
ビューセクションの空間速度の尺度に対する所定の値が大きいほど、サイズは大きいように設定を行うように構成されている、請求項４２または４３に記載の装置。
【請求項４５】
前記情報（７４）は、前記ビューセクションの移動方向についての確率の尺度についての所定の値を示す、請求項４０または４４に記載の装置。
【請求項４６】
それぞれの移動方向についての可能性が高いほど、第１の部分がそれぞれの方向に延びているように設定を行うように構成されている、請求項４５に記載の装置。
。
【請求項４７】
前記情報（７４）は、時間変化および／または空間変化および／または方向変化の方法で前記所定の空間速度を示す、請求項４０または４６に記載の装置。
【請求項４８】
前記第１の部分（６４）と前記空間部分（６２）とが一致するように構成されている、請求項４０または４７に記載の装置。
【請求項４９】
前記複数のメディアセグメントに符号化された前記時間的に変化する空間シーン（３０）の時空間部分のそれぞれは、時間的に変化する空間シーン（３０）が空間的に細分されるタイル（５０）のそれぞれの１つにおける前記時間的に変化する空間シーン（３０）の時間セグメント（５４）である、請求項４０または４８に記載の装置。
【請求項５０】
前記複数のメディアセグメントの各メディアセグメントは、一組の品質レベルのうちの関連する１つで前記時間的に変化する空間シーンの関連する時空間部分をその中に符号化している、請求項４９に記載の装置。
【請求項５１】
前記装置は、前記情報に応じて前記時間的に変化するビューセクションのサイズとは無関係に前記サイズを設定するように構成される、請求項４０に記載の装置。
【請求項５２】
前記情報は、前記時間変化するビューセクションの異なるサイズオプションに対する前記サイズに対する異なる値を含み、前記装置は、前記時間変化するビューセクションの実際のサイズに適合するサイズオプションに関する情報に含まれる値を使用する、請求項４０に記載の装置。
【請求項５３】
前記情報はタイルの数でサイズを示す、請求項５１または５２に記載の装置。
【請求項５４】
時間的に変化する空間シーンに関するメディアコンテンツ用のストリーミングサーバであって、
装置による検索のために複数のメディアセグメントを利用可能にし、それによって、装置は、空間的セクションの第１の部分が所定の品質で選択されたメディアセグメントに符号化される方法で符号化された方法で、少なくとも時間的に変化する空間シーンの空間的セクションをその中に符号化する検索のためのメディアセグメントを選択でき、それに応じて、第１の部分と空間的に隣接する時間的に変化する空間シーンの第２の部分が前記選択されたメディアセグメントに符号化されないかあるいは所定の品質よりさらに低い品質で選択されたメディアセグメントに符号化され、その結果、前記第１の部分は前記時間的に変化する空間的シーンの時間的に変化するビューセクションに続き、かつ、
第１の部分のサイズおよび／または位置をメディアセグメント内に設定する方法および／または装置への信号伝達によって、情報を通知する、ように構成される、ストリーミングサーバ。
【請求項５５】
メディアプレゼンテーション記述を定義する信号であって、
複数のメディアセグメントのアドレスを計算することに関する情報であって、その情報を使用する装置は、時間的に変化する空間シーンの少なくとも１つの空間セクションをそのように符号化した複数のメディアセグメントからメディアセグメントを選択し検索することができ、それによれば、空間セクションの第１の部分は所定の品質で選択されたメディアセグメントに符号化され、それに応じて、第１の部分に空間的に隣接する時間的に変化する空間シーンの第２の部分は選択されたメディアに符号化されない、あるいは、予め定められた品質と比べてさらに低い品質で選択されたメディアセグメントにセグメント化または符号化され、したがって第１の部分は時間的に変化する空間シーンの時間的に変化するビューセクションに続く情報と、
メディアセグメント内に、および／または装置への信号伝達によって、サイズおよび／または第１の部分のサイズを設定する方法に関する情報とを含む、
メディアプレゼンテーション記述を定義する信号。
【請求項５６】
前記情報（７４）は、前記時間的に変化するビューセクションのサイズに対する増分またはそのスケーリングの形式でサイズを示す、請求項５５に記載の信号。
【請求項５７】
前記情報（７４）は、前記ビューセクションの空間速度の尺度についての所定の値を示す、請求項５５または５６に記載の信号。
【請求項５８】
測定された空間速度が所定の値を超えないユーザのデフォルトパーセンタイルについて、および／または、
測定された空間速度が所定の値を超えないユーザのパーセンタイルを示すパーセンタイル値と共に、および／または、
ビューセクションが所定の領域内にあるユーザのパーセンタイルを示すパーセンタイル値とともに、および／または、
所定の値が適用可能であるビューセクションの動きを制御する１つまたは複数の種類のユーザ入力を示すヒントと一緒に、
前記情報（７４）は、前記ビューセクションの前記空間速度の尺度についての前記所定の値を示す、請求項５７に記載の信号。
【請求項５９】
ビューセクションｄの空間速度の尺度に対する所定の値が大きいほど、サイズが大きいように設定を実行するように構成された、請求項５７または５８に記載の信号。
【請求項６０】
前記情報（７４）は、前記ビューセクションの移動方向についての確率の尺度についての所定の値を示す、請求項５５または５９に記載の信号。
【請求項６１】
それぞれの移動方向についての可能性が高いほど、第１の部分がそれぞれの方向に延びているように設定を行うように構成された、請求項６０に記載の信号。
【請求項６２】
前記情報（７４）は、時間変化および／または空間変化および／または方向変化する形で前記所定の空間速度を示す、請求項５５または６１のいずれかに記載の信号。
【請求項６３】
前記第１の部分（６４）と前記空間部分（６２）とが一致するように構成されている、請求項５５または６２のいずれかに記載の信号。
【請求項６４】
前記複数のメディアセグメントに符号化された前記時間的に変化する空間シーン（３０）の前記時空間部分のそれぞれは、時間的に変化する空間シーン（３０）が空間的に細分されているタイル（５０）のそれぞれの１つにおいて前記時間的に変化する空間シーン（３０）の時間セグメント（５４）である、請求項５５または６３のいずれかに記載の信号。
【請求項６５】
前記複数のメディアセグメントの各メディアセグメントは、一組の品質レベルのうちの関連する１つのレベルで前記時間的に変化する空間シーンの関連する時空間部分に符号化している、請求項６４に記載の信号。
【請求項６６】
前記装置は、前記情報に応じて前記時間的に変化するビューセクションのサイズから独立した方法で前記サイズに構成される、請求項５５に記載の信号。
【請求項６７】
前記情報は、前記時間変化ビューセクションの異なるサイズオプションに対するサイズに対する異なる値を含み、前記装置は、前記時間変化ビューセクションの実際のサイズに適合するサイズオプションに関する情報に含まれる値を用いる、請求項５５に記載の信号。
【請求項６８】
前記情報がタイルの数でサイズを示す、請求項６５または６６に記載の信号。
【請求項６９】
ビデオを復号化するための復号化パワーがフォーカスされるべき前記ビデオ内のサイズおよび／または焦点領域の１つ以上の位置の信号伝達、および前記ビデオの推奨される好ましいビューセクション領域を含むビデオビットストリームに符号化されるビデオを有するビデオビットストリーム。
【請求項７０】
ビューセクション（２８）の動きを制御する異なる方法を区別するようにサイズおよび／または位置を示す、請求項６９に記載のビデオビットストリーム。
【請求項７１】
頭の動き、目の動き、およびタブレットの動きによるビューセクション制御のうちの少なくとも２つを区別するようにサイズおよび／または位置を示す、請求項６９に記載のビデオビットストリーム。
【請求項７２】
ユーザの行動の統計によって得られた頻度ランクに従ってランク付けされた方法でサイズおよび／または位置を複数回示す、請求項６９または７０に記載のビデオビットストリーム。
【請求項７３】
前記信号伝達は、前記ビデオビットストリームのＳＥＩメッセージによって構成される、請求項６９ないし７２のいずれかに記載のビデオビットストリーム。
【請求項７４】
符号化したビデオを有するビットストリームを復号化するためのデコーダであって、
前記デコーダは、ビデオを復号化するための復号化能力がフォーカスされるべきビデオ内の焦点領域
、および
ビデオの推奨される優先表示領域
の１つ以上のサイズおよび／または位置の信号伝達を導出するように構成されたデコーダ。
【請求項７５】
前記信号伝達は、ビューセクション（２８）の動きを制御する異なる方法を区別するようにサイズおよび／または位置を示すことを特徴とする請求項７４に記載のデコーダ。
【請求項７６】
前記信号伝達は、頭の動き、目の動き、およびタブレットの動きによるビューセクション制御のうちの少なくとも２つを区別するようにサイズおよび／または位置を示す、請求項７４に記載のデコーダ。
【請求項７７】
前記信号伝達は、ユーザの行動の統計によって得られた頻度のランク付けに従ってランク付けされた方法でサイズおよび／または位置を複数回示す、請求項７４に記載のデコーダ。
【請求項７８】
前記信号伝達または前記サイズおよび／または位置の情報を前記レンダラまたはビューポートコントロールまたはストリーミング装置に転送するように構成された、請求項７４ないし７７のいずれかに記載のデコーダ。
【請求項７９】
前記ビデオビットストリームのＳＥＩメッセージから前記信号化を導出するように構成された、請求項７４から７８のいずれかに記載のデコーダ。
【請求項８０】
サーバからビデオビットストリームをストリーミングするための装置であって、
前記ビデオを復号化するための復号化能力がフォーカスされるべきビデオ内の１つまたは複数の焦点領域のサイズおよび／または位置、ならびにビデオの推奨される好ましいビューセクション領域に関する情報をサーバから検索し、かつ、前記サーバから前記ビデオビットストリームを適応的にストリーミングする際に情報を使用するように構成された、装置。
【請求項８１】
符号化したビデオを有するビデオビットストリームを復号化する方法であって、前記復号化は、前記ビデオビットストリームから、
前記ビデオを復号化するための復号化能力がフォーカスされるべきビデオ内の焦点領域、および
前記ビデオの推奨される優先表示領域
の１つまたは複数のサイズおよび／または位置の信号化を導出するように構成されている、方法。
【請求項８２】
サーバーからビデオビットストリームを復号するための方法であって、
前記ビデオを復号化するための復号化能力がフォーカスされるべき前記ビデオ内の１つまたは複数の焦点領域のサイズおよび／または位置、ならびにビデオの推奨される好ましいビューセクション領域に関する情報をサーバから検索し、かつ、前記サーバから前記ビデオビットストリームを適応的にストリーミングする際に情報を使用するように構成されている、方法。
【請求項８３】
ビデオ内の焦点領域のサイズの信号伝達（７４）をビデオビットストリームから導出し、
前記ビデオを復号化するための復号化パワーを前記焦点領域（１１６）に集中させるように構成された、前記ビデオビットストリームから前記ビデオをデコードするためのデコーダ。
【請求項８４】
前記焦点領域を排他的に復号するように構成されている、請求項８３に記載のデコーダ。
【請求項８５】
前記フォーカス領域において前記ビデオの各ピクチャの復号を開始するように構成されている、請求項８３に記載のデコーダ。
【請求項８６】
前記フォーカス領域を復号すると、前記ビデオの各ピクチャの復号を中止するように構成されている、請求項８３に記載のデコーダ。
【請求項８７】
前記信号伝達は、前記サイズを絶対的に示すか、または前記デコーダは、前記信号伝達に含まれるパラメータによって前記焦点領域のサイズをスケーリングするように構成される、請求項８３ないし８６のいずれかに記載のデコーダ。
【請求項８８】
時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための装置（３０）であって、
時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも１つのバージョンで、
少なくとも１つのバージョンのそれぞれについて、時間的に変化する空間シーンのそれぞれのバージョンをタイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示とを
メディアプレゼンテーションの説明から導出し（９０）、
タイルベースのストリーミングに関して、少なくとも１つのバージョンの恩恵を受ける要件と、装置のデバイス機能または装置と対話する別の装置を一致させる（９２）ように構成されている、装置。
【請求項８９】
請求項８８に記載の装置であって、前記恩恵を受ける要件および前記装置の能力は復号化能力に関係する装置。
【請求項９０】
請求項８８または８９に記載の装置であって、前記恩恵を受ける要件および前記装置の能力は、いくつかの利用可能なデコーダに関する装置。
【請求項９１】
請求項８８ないし９０のいずれかに記載の装置であって、前記恩恵を受ける要件および前記装置の能力は、レベルおよび／またはプロファイル記述子に関係する装置。
【請求項９２】
前記恩恵を受ける要件および前記装置の能力は、前記時間的に変化する空間シーン（３０）にわたってビューセクションを移動させるための入力装置のタイプに関連する、または前記ビューセクションは入力装置を使用して前記時間的に変化する空間シーン（３０）にわたって移動するスピードに関連する請求項８８ないし９１のいずれかに記載の装置。
【請求項９３】
前記装置は、
メディアプレゼンテーション記述に含まれる計算規則を使用して、選択されたメディアセグメントのアドレスを計算することによって、サーバ（２０）上で利用可能な複数（４６）のメディアセグメント（５８）からメディアセグメントを選択し、
計算されたアドレスを使用してサーバ（２０）から選択されたメディアセグメントを検索し、
装置は、選択されたメディアセグメントが、時間的に変化する空間シーン（３０）の少なくとも１つの空間セクション（６２）をその中に符号化したものを有するように選択を実行するように構成されており、
それによれば、空間セクション（６２）の第１の部分（６４）が所定の品質で選択されたメディアセグメントに符号化され、それに従って時間的に変化する空間シーンの第２の部分（６６； ７２）が第１の部分（６４）に空間的に隣接し、選択されたメディアセグメントに符号化されていないか、または所定の品質に対してさらに低い品質で選択されたメディアセグメントに符号化されており、かつ、
第１の部分（６４）が時間的に変化する空間シーン（３０）の時間的に変化するビュー部分（２８）に続くようにする、請求項８８ないし９２のいずれかに記載の装置。
【請求項９４】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングするためのストリーミングサーバであって、
時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも１つのバージョンで、
少なくとも１つのバージョンのそれぞれについて、時間ベースで変化する空間シーンのそれぞれのバージョンをタイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示が、
導出でき、これにより、装置が、ストリーミングサーバからメディアコンテンツをストリーミングすることが可能となる、
メディアプレゼンテーション記述を提供し（９０）、
タイルベースのストリーミングに関して、少なくとも１つのバージョンの恩恵を受ける要件と、装置のデバイス機能または装置と対話する別の装置とを一致させる（９２）ように構成されたストリーミングサーバ。
【請求項９５】
時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも１つのバージョンに関する情報と、
少なくとも１つのバージョンのそれぞれに対して、時間的に変化する空間シーンの前記それぞれのバージョンを前記タイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示とを含む、メディアプレゼンテーション記述。
【請求項９６】
前記恩恵を受ける要件と前記デバイス機能は復号化機能に関係する請求項９５に記載のメディアプレゼンテーション記述。
【請求項９７】
前記恩恵を受ける要件および前記デバイス機能は、いくつかの利用可能なデコーダに関係する、請求項９５または９６に記載のメディアプレゼンテーション記述。
【請求項９８】
前記恩恵を受ける要件および前記デバイス機能は、レベル記述子および／またはプロファイル記述子に関係する、請求項９５ないし９７のいずれかに記載のメディアプレゼンテーション記述。
【請求項９９】
前記恩恵を受ける要件および前記デバイス機能は、時間的に変化する空間シーン（３０）にわたってビューセクションを移動させるためのタイプの入力装置に関係する、または入力装置を使用して、ビューセクションが時間的に変化する空間シーン（３０）にわたって移動する速度に関係する、請求項９５ないし９８に記載のメディアプレゼンテーション記述。
【請求項１００】
前記装置が、前記含まれる計算規則を使用して選択されたメディアセグメントのアドレスを計算することによって、前記サーバ（２０）上で利用可能な複数（４６）のメディアセグメント（５８）からメディアセグメントを選択することを使用可能にするための計算規則をさらに含む、請求項９５ないし９９のいずれかに記載のメディアプレゼンテーション記述。
。
【請求項１０１】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングするための装置であって、
空間的ビューポート位置および少なくとも１つのパラメータに応じて、メディアセグメントのアドレスを計算し、メディアセグメントは時間的に変化する空間シーン（３０）および少なくとも１つのパラメータを記述し、
計算されたアドレスを使用してメディアセグメントを取得する、
ように構成された装置。
【請求項１０２】
前記少なくとも１つのパラメータは、視野中心および／または視野深度の１つまたは複数の座標を含む、請求項１０１に記載の装置。
【請求項１０３】
空間ビューポート位置および少なくとも１つのパラメータに応じて、メディアセグメントのアドレスを計算するための計算規則と、時間的に変化する空間シーンを記述するメディアセグメント（３０）と、計算されたアドレスを使用してメディアセグメントを検索するための少なくとも１つのパラメータとを含む、メディアプレゼンテーション記述。
【請求項１０４】
請求項１０３に記載のメディアプレゼンテーション記述を提供するように構成された、サーバから時間的に変化する空間シーン（３０）に関係するメディアコンテンツをストリーミング配信することをデバイスに可能にするストリーミングサーバ。
【請求項１０５】
時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための装置であって、
サーバ上で利用可能な複数のメディアセグメントからメディアセグメントを選択するように構成され、
前記装置は、時間的に変化する空間シーンの第１の部分を、第１の部分の空間的近傍と比較して、または第１の部分の空間的近傍が選択されたメディアセグメントに符号化されないような方法で向上した品質でそこに符号化し、
前記第１の部分の空間位置および／または移動を測定する瞬時測定値、および／または
前記第１の部分の空間位置および／または動きを測定する、時間平均などの統計値、および／または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、時間的に変化する空間シーンの品質を測定する瞬間測定、および／または
選択されたメディアセグメントをバッファリングすることに関与するデバイスのバッファのセット（３００）の表示、選択されたメディアセグメントをバッファのセットに分配する際に適用される分配規則の記述、およびバッファの各セットの瞬間的なバッファ充満および／または
復号化の対象となるために前記装置のバッファから出力されていない選択されたメディアセグメントの量の測定値（４２）および／または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、時間的に変化する空間シーンの品質を測定する時間的平均などの統計値、および／または
選択されたメディアセグメントに符号化され、ビューセクションで見える限りにおいて、第１の部分の品質または時間的に変化する空間シーンの品質を測定する瞬間的な測定値、および／または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、第１の部分の品質または時間的に変化する空間シーンの品質を測定する、時間平均などの統計値、および／または
前記ビューセクションによって覆われる視野、および／または
シーン中心に対するユーザ位置またはビュー深度を測定する瞬間測定値（１００）および／または
シーン中心（１００）に対するユーザ位置またはビュー深度を測定する、時間平均などの統計値
を記録するログメッセージを送出するように構成されている、装置。
【請求項１０６】
前記選択されたメディアセグメントに符号化され、ビューセクション内に見える限りにおいて、前記第１の部分の品質または前記時間的に変化する空間シーンの品質が、低品質部分が高品質部分とともにビューセクションに表示される持続時間として測定される請求項１０５に記載の装置。
【請求項１０７】
時間的に変化する空間シーンの第１の部分（６４）が前記ビューセクション（２８）を追加するように前記選択を実行するように構成されている、請求項１０５または１０６に記載の装置。
【請求項１０８】
時間的に変化する空間シーンが選択されたメディアセグメントに符号化されるビューセクション（２８）に入るピクセルの平均密度を測定する尺度
の１つとして選択されたメディアセグメントに符号化され、ビューセクションに表示される限りにおいて、時間的に変化する空間シーンの品質を測定する瞬間測定値を記録する送信ログメッセージを設定する、請求項１０５ないし１０７のいずれかに記載の装置。
【請求項１０９】
前記測定値は、前記選択されたメディアセグメントに符号化されたピクチャのピクセルグリッドに関して空間的に均一な方法で前記ピクセル密度を平均することによって前記ピクセルの平均密度を測定するように構成される、請求項１０８に記載の装置。
【請求項１１０】
前記測定値は、前記選択されたメディアセグメントに符号化されたピクチャのピクセルグリッドに関して空間的に不均一な方法で前記ピクセル密度を平均することによって前記ピクセルの平均密度を測定するように構成される、請求項１０８に記載の装置。
【請求項１１１】
選択されたメディアセグメントに符号化されたピクチャのピクセルグリッドに関して空間的に均一な方法でピクセル密度を平均化する、あるいは、
選択されたメディアセグメントに符号化されたピクチャのピクセルグリッドに関して、空間的に不均一な方法でピクセル密度を平均する
ことにより、前記送出ログメッセージが、前記測定値が平均ピクセル密度を測定するかどうかを示すように構成されている、請求項１０８に記載の装置。
【請求項１１２】
請求項１１０または１１１に記載の装置であって空間的に不均一な方法でピクセル密度を平均することは、
球状に均一な方法で平均化すること、あるいは
ビューセクション（２８）の中央ビュー方向（３１２）に対して垂直であるビューポート平面（３１０）に関して空間的に均一に平均化すること、
に対応する装置。
【請求項１１３】
測定値は、前記平均化を前記ビューセクション（２８）の中央サブセクションに限定する方法でピクセルの密度を平均化することによってピクセルの平均密度を測定し、またはビューセクションのエッジ部分（２０４）と比較して中央サブセクションに、より高い平均重みを適用する（２０２）、請求項１０８ないし１１２のいずれかに記載の装置。
【請求項１１４】
前記測定値が、それぞれ水平視野断面軸（２０４）および垂直視野断面軸（２０６）に沿って別々に平均ピクセル密度を測定するように構成されている、請求項１０８ないし１１３のいずれかに記載の装置。
【請求項１１５】
ログメッセージを断続的に送信するように構成されている、請求項１０８ないし１１４のいずれかに記載の装置。
【請求項１１６】
ログメッセージを、それに基づいて装置がダウンロードのための前記メディアセグメントの選択を実行するマニフェストファイルによって制御されるレートで送信するように構成されている、請求項１０８ないし１１５のいずれかに記載の装置。
【請求項１１７】
前記サーバ上で利用可能な前記複数のメディアセグメントはそれぞれ、前記時間的に変化する空間シーンの複数の表現のうちの１つに属し、前記表現は、以下の１つまたは複数において異なり、
前記時間的に変化する空間シーンの中に符号化されているシーンセクション（５０）、
前記時間的に変化する空間シーンがそこに符号化される品質
時間的に変動する空間的シーンがその中に符号化される空間的品質変動
但し、前記装置は、選択されたメディアセグメントをバッファのセットに分配する際に適用される分配規則の記述を、各バッファの１つ、または
前記スクリーンセクション
前記品質
前記空間品質分布
表現
の１つもしくは２つ以上への関連付けの形態でログするログメッセージを送信するように構成される、請求項１０８ないし１１６のいずれかに記載の装置。
【請求項１１８】
前記表現は、以下のうちの１つまたは複数に従って適応セットに分類され、
時間的に変化する空間シーンのシーンセクションがその中に符号化され、
時間的に変動する空間シーンがその中に符号化される空間品質変動、
装置は、前記選択されたメディアセグメントを１組のバッファに分配する際に適用された前記分配規則の前記記述を各バッファの１つの適応セットへの関連付けの形で記録するあるいは前記選択されたメディアセグメントを１組のバッファに分配する際に適用された前記分配規則の前記記述を各バッファの１つの表現への関連付けの形で記録する送出ログメッセージを構成するように構成される、請求項１０８ないし１１７のいずれかに記載の装置。
【請求項１１９】
前記装置は、時間的な測定の形で復号化（４２）を受けるために前記装置のバッファから出力されていない選択されたメディアセグメントの量の測定値を記録するログメッセージを送信するように構成される、請求項１０８ないし１１８のいずれかに記載の装置。
【請求項１２０】
前記装置は、選択されたメディアセグメントの量の測定が、メディアセグメント（５８）の時間的長さおよび／またはミリ秒単位でよりも短い時間単位での時間測定の形でおよび／またはとは無関係に独立して定義される復号化（４２）の対象となるために前記装置のバッファから出力されていないように構成される、請求項１１９に記載の装置。
【請求項１２１】
前記装置は、以下の１つ以上で分類された形式で復号化（４２）の対象となるために前記装置のバッファから出力されなかった選択されたメディアセグメントの量の測定値を記録するログメッセージを送出するように構成される、請求項１０８ないし１２０のいずれかに記載の装置。
それぞれのメディアセグメントがバッファリングされている前記デコーダのバッファ、
前記それぞれのメディアセグメントに符号化されたシーンセクション、
前記時間的に変化する空間シーンがそれぞれのメディアセグメントに符号化される品質、
前記時間的に変化する空間シーンがそれぞれのメディアセグメントに符号化される空間品質分布。
【請求項１２２】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングするための方法であって、
サーバ（２０）上で利用可能な複数（４６）のメディアセグメント（５８）からメディアセグメントを選択する（５６）工程と、
サーバ（２０）から前記選択されたメディアセグメントを検索し（６０）、前記選択されたメディアセグメントが以下に従って符号化された時間的に変化する空間シーン（３０）の空間セクション（６２）を少なくとも有するように実行され、空間セクションの第１の部分（６４）は所定の品質で選択されたメディアセグメントに符号化され、それに従って、時間的に変化する空間シーンの第２の部分（６６）は空間的に第１の部分（６４）に隣接し、所定の品質に関して所定の関係を満たすさらなる品質で、選択されたメディアセグメントに符号化され、
前記方法は、前記選択されたメディアセグメントに含まれる情報（６８）および／または前記サーバ（２０）から取得された信号伝達から前記所定の関係を導出することをさらに含む、方法。
【請求項１２３】
時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための方法であって、
装置による検索のために複数のメディアセグメントを利用可能にレンダリングし、それによって空間的セクションの第１の部分が所定の品質で選択されたメディアセグメントに符号化されるような方法でかつそれによれば、時間的に変化する空間シーンのうち、第１の部分に空間的に隣接する第２の部分が、さらなる品質で選択されたメディアセグメントに符号化される符号化された時間的に変化する空間的シーンの少なくとも空間的セクションを有する検索用メディアセグメントを装置が選択できるようにするステップと、
メディアセグメント内の、さらなる品質によって満たされることになっている所定の関係に関する情報をシグナリングする、および／または装置への信号伝達によるステップとを含む、方法。
【請求項１２４】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングする方法であって、
サーバ（２０）上で利用可能な複数（４６）のメディアセグメント（５８）からメディアセグメントを選択するステップと、
選択されたメディアセグメントが、
それによれば、空間セクション（６２）の第１の部分（６４）が所定の品質で選択されたメディアセグメントに符号化され、それに従って時間的に変化する空間シーンの第２の部分（６６； ７２）が空間的に隣接し、第１の部分（６４）は、選択されたメディアセグメントに符号化されていないか、または所定の品質に対してさらに低い品質で選択されたメディアセグメントに符号化されており、かつ、
第１の部分（６４）は、時間的に変化する空間シーン（３０）の時間的に変化するビュー部分（２８）に続く、
ように、時間的に変化する空間シーン（３０）の少なくとも１つの空間セクション（６２）をその中に符号化して有するように選択が実行され、前記選択されたメディアセグメントを前記サーバ（２０）から取出すステップとを含み、
方法は、選択されたメディアセグメントに含まれる情報（７４）および／またはサーバから取得された信号伝達に応じて第１の部分（６４）のサイズを設定することをさらに含む、方法。
【請求項１２５】
時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための方法であって、
装置による検索のために複数のメディアセグメントを利用可能にレンダリングし、それによって空間的セクションの第１の部分が所定の品質で選択されたメディアセグメントに符号化されるような方法でおよび前記第１の部分に空間的に隣接する時間的に変化する空間シーンの第２の部分は、選択されたメディアセグメントに符号化されないか、または所定の品質に対してさらに低い品質で選択されたメディアセグメントに符号化されるような方法で符号化された時間的に変化する空間的シーンの少なくとも空間的セクションを有する検索用メディアセグメントを装置が選択できるようにし、その結果、第１の部分は、時間的に変化する空間シーンの時間的に変化するビューセクションに従うステップと、
前記メディアセグメント内、および／または前記装置への信号伝達によって前記第１の部分のサイズをどのように設定するかに関する情報を信号伝達するステップとを含む、方法。
【請求項１２６】
ビデオビットストリームからビデオを復号するための方法であって、
ビデオビットストリームからビデオ内の焦点領域のサイズの信号伝達を導出するステップと、
前記ビデオをデコードするためのデコード能力を前記焦点領域に集中させるステップとを含む方法。
【請求項１２７】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングするためにデバイスによって実行される方法であって、
時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも１つのバージョンと、
少なくとも１つのバージョンのそれぞれに対して、時間ベースで変化する空間シーンのそれぞれのバージョンをタイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示とを、
メディアプレゼンテーション記述から導出するステップと、
タイルベースのストリーミングに関して、少なくとも１つのバージョンの恩恵を受ける要件を、デバイスまたはデバイスと対話する別のデバイスのデバイス機能と一致させる（９２）ステップとを含む、方法。
【請求項１２８】
時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための方法であって、
サーバ上で利用可能な複数のメディアセグメントからメディアセグメントを選択するステップと、
前記サーバーから前記選択されたメディアコンテンツを検索し、選択されたメディアセグメントが、第１の部分の空間的近傍と比較して向上した品質でまたは第１の部分の空間的近傍が選択されたメディアセグメントに符号化されないような方法でその中に符号化される時間的に変化する空間シーンの第１の部分を有するように選択を実行するステップとを含み、
前記方法は、
前記第１の部分の空間位置および／または移動を測定する瞬時測定値、および／または
前記第１の部分の空間位置および／または動きを測定する、時間平均などの統計値、および／または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、時間的に変化する空間シーンの品質を測定する瞬間測定、および／または
選択されたメディアセグメントをバッファリングすることに関与するデバイスのバッファのセット（３００）の表示、選択されたメディアセグメントをバッファのセットに分配する際に適用される分配規則の記述、およびバッファの各セットの瞬間的なバッファ充満および／または
復号化の対象となるために前記装置のバッファから出力されていない選択されたメディアセグメントの量の測定値（４２）および／または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、時間的に変化する空間シーンの品質を測定する時間的平均などの統計値、および／または
選択されたメディアセグメントに符号化され、ビューセクションで見える限りにおいて、第１の部分の品質または時間的に変化する空間シーンの品質を測定する瞬間的な測定値、および／または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、第１の部分の品質または時間的に変化する空間シーンの品質を測定する、時間平均などの統計値、および／または
前記視野セクションによって覆われる視野、および／または
シーン中心に対するユーザ位置またはビュー深度を測定する瞬間測定値（１００）および／または
シーン中心（１００）に対するユーザ位置またはビュー深度を測定する、時間平均などの統計値
を記録するログメッセージを送出するステップをさらに含む、方法。
【請求項１２９】
時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミングするための方法であって、
時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも１つのバージョンと、
少なくとも１つのバージョンのそれぞれに対して、時間ベースで変化する空間シーンのそれぞれのバージョンをタイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示と、
導出可能であり、これにより装置がメディアコンテンツをストリーミングサーバーからストリーミング可能である
メディアプレゼンテーション記述（９０）を提供するステップと、
タイルベースのストリーミングに関して、タイルベースのストリーミングに関して、少なくとも１つのバージョンの恩恵を受ける要件と、装置のデバイス機能または装置と対話する別の装置とを一致させる（９２）ステップとを含む、方法。
【請求項１３０】
請求項１０３に記載のメディアプレゼンテーション記述を提供することを含む、サーバから時間的に変化する空間シーン（３０）に関するメディアコンテンツをストリーミング配信することをデバイスに可能にするための方法。
【請求項１３１】
プログラムがコンピュータ上で実行されるとき、請求項８１,８２および１２２ないし１３０のいずれかに記載の方法を実行するためのプログラムコードを有するコンピュータプログラム。
【国際調査報告】
2019537338.tif 000037
2019537338.tif 000038
2019537338.tif 000039
2019537338.tif 000040
2019537338.tif 000041