【手続補正書】
【提出日】令和1年7月30日(2019.7.30)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
ライトフィールドコンテンツをエンコードする方法において、
−  前記ライトフィールドコンテンツと関連付けられた光線の組について、前記ライトフィールドコンテンツの２プレーンパラメータ化から光線毎に４つの座標を取得することと、
−  前記組からのそれぞれの光線について、第１の２Ｄ光線図内のポイントを定義する、前記２プレーンパラメータ化で使用される２つのプレーンに対して垂直であるプレーン上への前記組からの前記光線の投影に対応する、前記４つの座標からの２つの座標を取得することと、
−  前記第１の２Ｄ光線図内の対象のラインを供給する前記第１の２Ｄ光線図に対して離散ラドン変換を適用することと、
−  前記対象のラインを、エンコードされた対象のラインにエンコードすることと、
−  前記エンコードされた対象のラインを保存することと
を含むことを特徴とする方法。
【請求項２】
前記対象のラインの前記エンコードは、ブレゼンハムアルゴリズムを適用することを更に含む、請求項１に記載のライトフィールドコンテンツをエンコードする方法。
【請求項３】
第１のプレーン及び第２のプレーンと呼称される、前記２プレーンパラメータ化で使用される前記２つのプレーンは、矩形要素を含む離散化されたプレーンであり、前記第１のプレーン内の矩形要素の長辺の最大値は、
【数１】
2018537877.tif 000001
に等しく、ここで、ｚfは、ピクセルピッチｐを有するカメラ装置に含まれるセンサアレイの深度値であり、ｆは、前記カメラ装置の焦点距離であり、及びｚ1は、前記第１のプレーンと関連付けられた第１の深度値であり、前記第２のプレーン内の矩形要素の長辺の最大値は、
【数２】
2018537877.tif 000002
に等しく、ここで、ｚ2は、前記第２の第１のプレーンと関連付けられた第２の深度値である、請求項１又は２に記載のライトフィールドコンテンツをエンコードする方法。
【請求項４】
前記保存は、前記第１の２Ｄ光線図内の第１のエンコードされた対象のラインに属する少なくとも１つの第１のポイント
【数３】
2018537877.tif 000003
について、
−  第２の２Ｄ光線図内の第２のエンコードされた対象のラインに属する少なくとも第２のポイントと関連付けられた光線の放射輝度を保存することであって、前記第２のエンコードされた対象のラインは、前記第１のエンコードされた対象のラインと同じスロープを有する、保存すること、及び光線の存在を示す第１の追加情報を保存すること、並びに／又は
−  光線が、前記第２のエンコードされた対象のラインに属する少なくとも第３のポイントと関連付けられていないことを示す第２の追加情報を保存すること
を含む、請求項１〜３のいずれか一項に記載のライトフィールドコンテンツをエンコードする方法。
【請求項５】
前記第１及び／又は第２の追加情報はビットであり、前記光線の放射輝度は３バイト値によってエンコードされる、請求項４に記載のライトフィールドコンテンツをエンコードする方法。
【請求項６】
投影の少なくとも１つの中心の座標及び前記投影の少なくとも１つの中心と関連付けられた半径を推定することを更に含み、前記推定は、
−  前記第１の２Ｄ光線図内の対象のラインの少なくとも１つのスロープパラメータｍ及び太さパラメータ
【数４】
2018537877.tif 000004
を取得することであって、前記対象のラインは、投影の中心ｘ3，ｙ3，ｚ3及び半径Ａと関連付けられる、取得することと、
−  前記少なくとも１つのスロープパラメータｍ及び前記太さパラメータ
【数５】
2018537877.tif 000005
から前記投影の中心の座標ｘ3，ｙ3，ｚ3及び前記半径Ａを推定することと
を含む、請求項１〜５のいずれか一項に記載のライトフィールドコンテンツをエンコードする方法。
【請求項７】
第１のプレーン及び第２のプレーンと呼称される、前記２プレーンパラメータ化で使用される前記２つのプレーンは、それぞれ第１の深度値ｚ1及び第２の深度値ｚ2と関連付けられ、前記推定は、
【数６】
2018537877.tif 000006
を取得することを含む、請求項６に記載のライトフィールドコンテンツをエンコードする方法。
【請求項８】
前記エンコードされた対象のラインの前記保存は、エンコードされた対象のラインと関連付けられたスロープを保存することと、前記第１の２Ｄ光線図内のエンコードされた対象のラインに属するそれぞれのポイントについて、第２の２Ｄ光線図に属するポイントの組を保存することと、前記第１の２Ｄ光線図内の処理済みのエンコードされた対象のラインと関連付けられたスロープが、前記第１の２Ｄ光線図内の他のエンコードされた対象のラインと関連付けられた別のスロープよりも大きい場合、前記第１の２Ｄ光線図内のポイントが、前記処理済みのエンコードされた対象のラインと前記他のエンコードされた対象のラインとの間の交差に属する際に、前記第２の２Ｄ光線図に属する前記ポイントの組の前記保存を回避することとを更に含む、請求項１〜７のいずれか一項に記載のライトフィールドコンテンツをエンコードする方法。
【請求項９】
前記回避は、閉塞を示す情報を保存することを更に含む、請求項８に記載のライトフィールドコンテンツをエンコードする方法。
【請求項１０】
前記情報はヌル値である、請求項９に記載のライトフィールドコンテンツをエンコードする方法。
【請求項１１】
コンピュータによって実行されると、ライトフィールドコンテンツをエンコードする方法を実装するためのコンピュータ実行可能命令の組を含むコンピュータプログラムを保存するコンピュータ可読且つ非一時的記憶媒体であって、前記命令は、実行されると、請求項１〜１０のいずれか一項に記載の方法を実行するように前記コンピュータを構成する命令を含む、コンピュータ可読且つ非一時的記憶媒体。
【請求項１２】
ライトフィールドコンテンツをエンコードする電子装置において、メモリと、前記メモリに結合された少なくとも１つのプロセッサとを含み、前記少なくとも１つのプロセッサは、
−  前記ライトフィールドコンテンツと関連付けられた光線の組について、前記ライトフィールドコンテンツの２プレーンパラメータ化から光線毎に４つの座標を取得することと、
−  前記組からのそれぞれの光線について、第１の２Ｄ光線図内のポイントを定義する、前記２プレーンパラメータ化で使用される２つのプレーンに対して垂直であるプレーン上への前記組からの前記光線の投影に対応する、前記４つの座標からの２つの座標を取得することと、
−  前記第１の２Ｄ光線図内の対象のラインを供給する前記第１の２Ｄ光線図に対して離散ラドン変換を適用することと、
−  前記対象のラインをエンコードすることと、
−  前記エンコードされた対象のラインを保存することと
を行うように構成されることを特徴とする電子装置。
【請求項１３】
前記少なくとも１つのプロセッサは、ブレゼンハムアルゴリズムによって前記対象のラインをエンコードするように更に構成される、請求項１２に記載のライトフィールドコンテンツをエンコードする電子装置。
【請求項１４】
第１のプレーン及び第２のプレーンと呼称される、前記２プレーンパラメータ化で使用される前記２つのプレーンは、矩形要素を含む離散化されたプレーンであり、前記第１のプレーン内の矩形要素の長辺の最大値は、
【数７】
2018537877.tif 000007
に等しく、ここで、ｚfは、ピクセルピッチｐを有するカメラ装置に含まれるセンサアレイの深度値であり、ｆは、前記カメラ装置の焦点距離であり、及びｚ1は、前記第１のプレーンと関連付けられた第１の深度値であり、前記第２のプレーン内の矩形要素の長辺の最大値は、
【数８】
2018537877.tif 000008
に等しく、ここで、ｚ2は、第２の第１のプレーンと関連付けられた第２の深度値である、請求項１２又は１３に記載のライトフィールドコンテンツをエンコードする電子装置。
【請求項１５】
前記少なくとも１つのプロセッサは、前記第１の２Ｄ光線図内の第１のエンコードされた対象のラインに属する少なくとも１つの第１のポイント
【数９】
2018537877.tif 000009
について、
−  第２の２Ｄ光線図内の第２のエンコードされた対象のラインに属する少なくとも第２のポイントと関連付けられた光線の放射輝度を保存することであって、前記第２のエンコードされた対象のラインは、前記第１のエンコードされた対象のラインと同じスロープを有する、保存すること、及び光線の存在を示す第１の追加情報を保存すること、並びに／又は
−  光線が、前記第２のエンコードされた対象のラインに属する少なくとも第３のポイントと関連付けられていないことを示す第２の追加情報を保存すること
を行うように更に構成される、請求項１２〜１４のいずれか一項に記載のライトフィールドコンテンツをエンコードする電子装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０２５１
【補正方法】変更
【補正の内容】
【０２５１】
本開示の一実施形態では、図３４に描かれる電子装置は、画像（従来の２Ｄ画像又はライトフィールドのサンプリング）をキャプチャするように構成されたカメラ装置に含むことができる。これらの画像は、１つ又は複数のメモリユニット上に保存される。従って、これらの画像は、ビットストリームデータ（即ち、ビットのシーケンス）と見なすことができる。また、ビットストリームは、バイトストリーム上で変換されることが可能であり、且つこの逆も真であることは明らかである。
上記実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
（付記１）
ライトフィールドコンテンツをエンコードする方法において、
−  前記ライトフィールドコンテンツと関連付けられた光線の組（４０１）について、前記ライトフィールドコンテンツの２プレーン（４０２、４０３）パラメータ化から光線毎に４つの座標を取得すること（２０００）と、
−  前記組からのそれぞれの光線について、第１の２Ｄ光線図（Π（ｘ1，ｘ2），Π（ｙ1，ｙ2））内のポイントを定義する、前記２プレーンパラメータ化で使用される２つのプレーンに対して垂直であるプレーン（４０４、４０５、Ｐ）上への前記組からの前記光線の投影に対応する、前記４つの座標からの２つの座標を取得すること（２００１）と、
−  前記第１の２Ｄ光線図内の対象のラインを供給する前記第１の２Ｄ光線図（Π（ｘ1，ｘ2），Π（ｙ1，ｙ2））に対して離散ラドン変換を適用すること（２００２）と、
−  前記対象のラインを、エンコードされた対象のラインにエンコードすること（２００３）と、
−  前記エンコードされた対象のラインを保存すること（２００４）と
を含むことを特徴とする方法。
（付記２）
前記対象のラインの前記エンコード（２００３）は、ブレゼンハムアルゴリズムを適用することを更に含む、付記１に記載のライトフィールドコンテンツをエンコードする方法。
（付記３）
第１のプレーン及び第２のプレーンと呼称される、前記２プレーンパラメータ化で使用される前記２つのプレーンは、矩形要素（Δｘ1、Δｙ1；Δｘ2、Δｙ2）を含む離散化されたプレーン（２７５、２７６）であり、前記第１のプレーン内の矩形要素の長辺の最大値は、
【数１】
2018537877.tif 000010
に等しく、ここで、ｚfは、ピクセルピッチｐを有するカメラ装置に含まれるセンサアレイの深度値であり、ｆは、前記カメラ装置の焦点距離であり、及びｚ1は、前記第１のプレーンと関連付けられた第１の深度値であり、前記第２のプレーン内の矩形要素の長辺の最大値は、
【数２】
2018537877.tif 000011
に等しく、ここで、ｚ2は、前記第２の第１のプレーンと関連付けられた第２の深度値である、付記１又は２に記載のライトフィールドコンテンツをエンコードする方法。
（付記４）
前記保存（２００４）は、前記第１の２Ｄ光線図内の第１のエンコードされた対象のラインに属する少なくとも１つの第１のポイント
【数３】
2018537877.tif 000012
について、
−  第２の２Ｄ光線図（Π（ｘ1，ｘ2），Π（ｙ1，ｙ2））内の第２のエンコードされた対象のラインに属する少なくとも第２のポイント（（ｙ1，ｙ2）；（ｘ1，ｘ2））と関連付けられた光線の放射輝度を保存することであって、前記第２のエンコードされた対象のラインは、前記第１のエンコードされた対象のラインと同じスロープを有する、保存すること、及び光線の存在を示す第１の追加情報を保存すること、並びに／又は
−  光線が、前記第２のエンコードされた対象のラインに属する少なくとも第３のポイント（（ｙ1，ｙ2）；（ｘ1，ｘ2））と関連付けられていないことを示す第２の追加情報を保存すること
を含む、付記１〜３のいずれか一項に記載のライトフィールドコンテンツをエンコードする方法。
（付記５）
前記第１及び／又は第２の追加情報はビットであり、前記光線の放射輝度は３バイト値によってエンコードされる、付記４に記載のライトフィールドコンテンツをエンコードする方法。
（付記６）
投影の少なくとも１つの中心の座標及び前記投影の少なくとも１つの中心と関連付けられた半径を推定することを更に含み、前記推定は、
−  前記第１の２Ｄ光線図内の対象のラインの少なくとも１つのスロープパラメータｍ及び太さパラメータ
【数４】
2018537877.tif 000013
を取得することであって、前記対象のラインは、投影の中心ｘ3，ｙ3，ｚ3及び半径Ａと関連付けられる、取得することと、
−  前記少なくとも１つのスロープパラメータｍ及び前記太さパラメータ
【数５】
2018537877.tif 000014
から前記投影の中心の座標ｘ3，ｙ3，ｚ3及び前記半径Ａを推定することと
を含む、付記１〜５のいずれか一項に記載のライトフィールドコンテンツをエンコードする方法。
（付記７）
第１のプレーン及び第２のプレーンと呼称される、前記２プレーンパラメータ化で使用される前記２つのプレーンは、それぞれ第１の深度値ｚ1及び第２の深度値ｚ2と関連付けられ、前記推定は、
【数６】
2018537877.tif 000015
を取得することを含む、付記６に記載のライトフィールドコンテンツをエンコードする方法。
（付記８）
前記エンコードされた対象のラインの前記保存（２００４）は、エンコードされた対象のラインと関連付けられたスロープを保存することと、前記第１の２Ｄ光線図内のエンコードされた対象のラインに属するそれぞれのポイントについて、第２の２Ｄ光線図に属するポイントの組を保存することと、前記第１の２Ｄ光線図内の処理済みのエンコードされた対象のラインと関連付けられたスロープが、前記第１の２Ｄ光線図内の他のエンコードされた対象のラインと関連付けられた別のスロープよりも大きい場合、前記第１の２Ｄ光線図内のポイントが、前記処理済みのエンコードされた対象のラインと前記他のエンコードされた対象のラインとの間の交差に属する際に、前記第２の２Ｄ光線図に属する前記ポイントの組の前記保存を回避することとを更に含む、付記１〜７のいずれか一項に記載のライトフィールドコンテンツをエンコードする方法。
（付記９）
前記回避は、閉塞を示す情報を保存することを更に含む、付記８に記載のライトフィールドコンテンツをエンコードする方法。
（付記１０）
前記情報はヌル値である、付記９に記載のライトフィールドコンテンツをエンコードする方法。
（付記１１）
コンピュータによって実行されると、ライトフィールドコンテンツをエンコードする方法を実装するためのコンピュータ実行可能命令の組を含むコンピュータプログラムを保存するコンピュータ可読且つ非一時的記憶媒体であって、前記命令は、実行されると、付記１〜１０のいずれか一項に記載の方法を実行するように前記コンピュータを構成する命令を含む、コンピュータ可読且つ非一時的記憶媒体。
（付記１２）
ライトフィールドコンテンツをエンコードする電子装置において、メモリと、前記メモリに結合された少なくとも１つのプロセッサとを含み、前記少なくとも１つのプロセッサは、
−  前記ライトフィールドコンテンツと関連付けられた光線（４０１）の組について、前記ライトフィールドコンテンツの２プレーン（４０２、４０３）パラメータ化から光線毎に４つの座標を取得すること（２０００）と、
−  前記組からのそれぞれの光線について、第１の２Ｄ光線図（Π（ｘ1，ｘ2），Π（ｙ1，ｙ2））内のポイントを定義する、前記２プレーンパラメータ化で使用される２つのプレーンに対して垂直であるプレーン（４０４、４０５、Ｐ）上への前記組からの前記光線の投影に対応する、前記４つの座標からの２つの座標を取得すること（２００１）と、
−  前記第１の２Ｄ光線図内の対象のラインを供給する前記第１の２Ｄ光線図（Π（ｘ1，ｘ2），Π（ｙ1，ｙ2））に対して離散ラドン変換を適用すること（２００２）と、
−  前記対象のラインをエンコードすること（２００３）と、
−  前記エンコードされた対象のラインを保存すること（２００４）と
を行うように構成されることを特徴とする電子装置。
（付記１３）
前記少なくとも１つのプロセッサは、ブレゼンハムアルゴリズムによって前記対象のラインをエンコードするように更に構成される、付記１２に記載のライトフィールドコンテンツをエンコードする電子装置。
（付記１４）
第１のプレーン及び第２のプレーンと呼称される、前記２プレーンパラメータ化で使用される前記２つのプレーンは、矩形要素（Δｘ1、Δｙ1；Δｘ2、Δｙ2）を含む離散化されたプレーン（２７５、２７６）であり、前記第１のプレーン内の矩形要素の長辺の最大値は、
【数７】
2018537877.tif 000016
に等しく、ここで、ｚfは、ピクセルピッチｐを有するカメラ装置に含まれるセンサアレイの深度値であり、ｆは、前記カメラ装置の焦点距離であり、及びｚ1は、前記第１のプレーンと関連付けられた第１の深度値であり、前記第２のプレーン内の矩形要素の長辺の最大値は、
【数８】
2018537877.tif 000017
に等しく、ここで、ｚ2は、第２の第１のプレーンと関連付けられた第２の深度値である、付記１２又は１３に記載のライトフィールドコンテンツをエンコードする電子装置。
（付記１５）
前記少なくとも１つのプロセッサは、前記第１の２Ｄ光線図内の第１のエンコードされた対象のラインに属する少なくとも１つの第１のポイント
【数９】
2018537877.tif 000018
について、
−  第２の２Ｄ光線図（Π（ｘ1，ｘ2），Π（ｙ1，ｙ2））内の第２のエンコードされた対象のラインに属する少なくとも第２のポイント（（ｙ1，ｙ2）；（ｘ1，ｘ2））と関連付けられた光線の放射輝度を保存することであって、前記第２のエンコードされた対象のラインは、前記第１のエンコードされた対象のラインと同じスロープを有する、保存すること、及び光線の存在を示す第１の追加情報を保存すること、並びに／又は
−  光線が、前記第２のエンコードされた対象のラインに属する少なくとも第３のポイント（（ｙ1，ｙ2）；（ｘ1，ｘ2））と関連付けられていないことを示す第２の追加情報を保存すること
を行うように更に構成される、付記１２〜１４のいずれか一項に記載のライトフィールドコンテンツをエンコードする電子装置。