【手続補正書】
【提出日】令和2年2月12日(2020.2.12)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
３６０度ビデオデータを処理するように構成された装置であって、
前記３６０度ビデオデータを記憶するように構成されたメモリと、
ユーザの現在の視野を決定するためのセンサデータを受信するための入力と、
ベースライン解像度で３６０度グラフィックス領域ビデオデータを生成するようにグラフィックス領域において前記記憶されたビデオデータを処理するように構成された第１のグラフィックス処理ユニットと、
ピクセル領域ビデオデータを生成するようにピクセル領域において前記記憶されたビデオデータの一部分を符号化するように構成されたビデオエンコーダと、ここにおいて、前記一部分は、前記記憶された３６０度ビデオデータ内の現在の視野（ＦＯＶ）に対応し、前記ピクセル領域ビデオデータは、前記３６０度グラフィックス領域ビデオデータよりも高い解像度で生成される、
前記３６０度グラフィックス領域ビデオデータおよび前記現在のＦＯＶピクセル領域ビデオデータを備えるハイブリッドビデオデータを送信するためのインターフェースと
を備える、装置。
【請求項２】
エクイレクタングラーキャンバスを形成するように前記ビデオデータを共にスティッチングするように構成された１つまたは複数のプロセッサをさらに備え、前記第１のグラフィックス処理ユニットは、前記キャンバスをテクスチャに変換することと、スフィアの内側に前記テクスチャをレンダリングすることとを行うようにさらに構成される、請求項１に記載の装置。
【請求項３】
前記第１のグラフィックスプロセッサは、第１のフレームレートで前記インターフェースを介して前記テクスチャを送信するように構成され、前記ビデオエンコーダは、前記第１のフレームレートよりも大きい第２のフレームレートで前記インターフェースを介して前記ピクセル領域ビデオデータを送信するようにさらに構成される、請求項２に記載の装置。
【請求項４】
前記１つまたは複数のプロセッサは、キューブマップまたは角錐投影法のうちの１つに前記キャンバスをマッピングするように構成され、前記ビデオエンコーダは、複数の解像度で複数のタイルを符号化することと、ユーザの視野内にある前記複数のタイルのうちの１つまたは複数のタイルを送信することとを行うように構成される、請求項２に記載の装置。
【請求項５】
前記１つまたは複数のプロセッサは、前記現在の視野に基づいてサラウンドサウンドビデオを適応させるように構成される、請求項２に記載の装置。
【請求項６】
前記ビデオエンコーダは、第１の解像度で前記視野の中心にあるタイルを送信することと、前記第１の解像度よりも少ない第２の解像度で、前記視野内にはあるが前記視野の中心にはないタイルを送信することとを行うように構成される、請求項５に記載の装置。
【請求項７】
ビデオデータを処理するように構成された装置であって、
ハイブリッドビデオデータを備えるビデオストリームを記憶するように構成されたメモリと、前記ハイブリッドビデオデータは、ベースライン解像度の３６０度グラフィックス領域ビデオデータと、前記３６０度グラフィックス領域ビデオデータよりも高い解像度で符号化された現在の視野（ＦＯＶ）ピクセル領域ビデオデータとを備える、
前記記憶されたビデオストリームを、前記３６０度グラフィックス領域データと現在のＦＯＶピクセル領域ビデオデータとを備えるグラフィックスストリームにパースするように構成された１つまたは複数のプロセッサと、
現在のＦＯＶを決定するためのユーザの運動適応を感知するセンサと、
前記グラフィックスストリームからのテクスチャ情報を用いて球面上にキャンバスを生成することと、現在のＦＯＶをレンダリングすることとを行うように構成されたグラフィックス処理ユニットと、
前記ピクセル領域ビデオデータを復号するように構成されたビデオデコーダと、
前記現在のＦＯＶグラフィックス領域データ上に、より高い解像度の前記現在のＦＯＶピクセル領域ビデオデータをオーバーレイするためのディスプレイプロセッサと、
センサデータを出力するための出力と、
を備える、装置。
【請求項８】
前記ビデオデコーダは、前記ユーザの前記視野内にある複数のタイルを復号することと、低解像度タイルである前記複数のタイルのうちのタイルと、高解像度タイルである前記複数のタイルのうちのタイルとの両方をアップサンプリングすることと、単一画像オーバーレイを形成するように前記低解像度タイルと前記高解像度タイルとを組み合わせることとを行うように構成される、請求項７に記載の装置。
【請求項９】
前記ディスプレイプロセッサは、前記グラフィックスビデオデータのＦＯＶが、前記センサデータを使用して決定された前記現在のＦＯＶの外側にあるかどうかを決定することと、前記グラフィックスビデオデータの前記ＦＯＶが前記現在のＦＯＶ内にあるときのみ前記単一画像オーバーレイを形成することとを行うようにさらに構成される、請求項７に記載の装置。
【請求項１０】
前記センサデータは、頭部運動の軌跡に基づく前記ユーザの感知された運動適応を備える、請求項９に記載の装置。
【請求項１１】
３６０度ビデオデータを処理する方法であって、
前記３６０度ビデオデータを記憶することと、
ベースライン解像度で３６０度グラフィックス領域ビデオデータを生成するようにグラフィックス領域において前記記憶されたビデオデータを処理することと、
ユーザの現在の視野（ＦＯＶ）を決定するためのセンサデータを受信することと、
ピクセル領域ビデオデータを生成するようにピクセル領域において前記記憶されたビデオデータの一部分を符号化することと、ここにおいて、前記一部分は、前記３６０度ビデオデータ内の現在のＦＯＶに対応し、前記ピクセル領域ビデオデータは、前記３６０度グラフィックス領域ビデオデータよりも高い解像度で生成される、
前記３６０度グラフィックス領域ビデオデータおよび前記現在のＦＯＶピクセル領域ビデオデータを備えるハイブリッドビデオデータを送信することと
を備える、方法。
【請求項１２】
第１のフレームレートで前記グラフィックス領域ビデオデータを送信することと、
前記第１のフレームレートよりも大きい第２のフレームレートで前記ピクセル領域ビデオデータを送信することと
をさらに備える、請求項１１に記載の方法。
【請求項１３】
第１の解像度で前記視野の中心にあるタイルを前記ピクセル領域において符号化することと、
前記第１の解像度よりも少ない第２の解像度で、前記視野内にはあるが前記視野の中心にはないタイルを前記ピクセル領域において符号化することと
をさらに備える、請求項１１に記載の方法。
【請求項１４】
ビデオデータを処理する方法であって、
ハイブリッドビデオデータを備えるビデオストリームを記憶することと、前記ハイブリッドビデオデータは、ベースライン解像度の３６０度グラフィックス領域ビデオデータと、前記３６０度グラフィックス領域ビデオデータよりも高い解像度で符号化された現在のＦＯＶピクセル領域ビデオデータとを備える、
前記記憶されたビデオストリームをグラフィックスストリームおよび現在のＦＯＶピクセル領域ビデオデータにパースすることと、
現在のＦＯＶを決定するためのユーザの運動適応を感知することと、
前記グラフィックスストリームからのテクスチャ情報を用いて球面上にキャンバスを生成するためにグラフィックス処理ユニットを使用することと、
ビデオデコーダを使用して前記ピクセル領域ビデオデータを復号することと、
前記現在の視野をレンダリングするために、前記現在のＦＯＶグラフィックス領域データ上に、より高い解像度の前記現在のＦＯＶピクセル領域ビデオデータをオーバーレイすることと
を備える、方法。
【請求項１５】
前記ピクセル領域ビデオデータから、前記ユーザの前記視野内にある複数のタイルを復号することと、
低解像度タイルである前記複数のタイルのうちのタイルと、高解像度タイルである前記複数のタイルのうちのタイルとの両方をアップサンプリングすることと、
単一画像オーバーレイを形成するように前記低解像度タイルと前記高解像度タイルとを組み合わせることと
をさらに備える、請求項１４に記載の方法。