【手続補正書】
【提出日】平成28年2月18日(2016.2.18)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
第１のダイナミックレンジの輝度で表示される画像である第１の画像の符号化データと、前記画像の輝度のダイナミックレンジの前記第１のダイナミックレンジから第２のダイナミックレンジへの変換に関する情報である変換情報とを含む符号化ストリームから、前記符号化データと前記変換情報を抽出する抽出部と、
前記抽出部により抽出された前記符号化データを復号し、前記第１の画像を生成する復号部と
を備え、
前記画像の輝度のダイナミックレンジの変換はニー変換とニーポイントに基づいて行われ、
前記変換情報は、連続する複数の前記画像に前記変換情報を適用するかどうかを示す情報を含む
ように構成された
復号装置。
【請求項２】
前記抽出部により抽出された前記変換情報に基づいて、前記復号部により生成された前記第１の画像を、前記第２のダイナミックレンジの輝度で表示される前記画像である第２の画像に変換する変換部と
をさらに備える
請求項１に記載の復号装置。
【請求項３】
前記変換情報は、前記第１のダイナミックレンジの前記ニーポイントを表す変換前情報と、前記ニーポイントに対応する前記第２のダイナミックレンジの輝度を表す変換後情報とを含む
ように構成された
請求項２に記載の復号装置。
【請求項４】
前記変換情報は、複数の前記変換前情報と前記変換後情報のペアを含む
ように構成された
請求項３に記載の復号装置。
【請求項５】
前記抽出部により抽出された前記変換情報に含まれる複数の前記ペアから所定数の前記ペアを、前記変換情報に含まれる順に選択する選択部
をさらに備える
請求項４に記載の復号装置。
【請求項６】
前記ペアの重要度の高い順を表す重要度情報に基づいて、前記変換情報に含まれる複数の前記ペアから所定数の前記ペアを選択する選択部
をさらに備え、
前記抽出部は、前記符号化ストリームに含まれる前記重要度情報を抽出する
ように構成された
請求項４に記載の復号装置。
【請求項７】
前記選択部により選択された前記所定数のペアを伝送する伝送部
をさらに備える
請求項６に記載の復号装置。
【請求項８】
前記変換情報は、前記第１の画像の輝度の最大値と前記第２の画像の輝度の最大値の少なくとも一方を含む
ように構成された
請求項２に記載の復号装置。
【請求項９】
前記変換情報は、前記第１の画像を表示する表示部の明るさの想定値と、前記第２の画像を表示する表示部の明るさの想定値の少なくとも一方を含む
ように構成された
請求項２に記載の復号装置。
【請求項１０】
復号装置が、
第１のダイナミックレンジの輝度で表示される画像である第１の画像の符号化データと、前記画像の輝度のダイナミックレンジの前記第１のダイナミックレンジから第２のダイナミックレンジへの変換に関する情報である変換情報とを含む符号化ストリームから、前記符号化データと前記変換情報を抽出する抽出ステップと、
前記抽出ステップの処理により抽出された前記符号化データを復号し、前記第１の画像を生成する復号ステップと
を含み、
前記画像の輝度のダイナミックレンジの変換はニー変換とニーポイントに基づいて行われ、
前記変換情報は、連続する複数の前記画像に前記変換情報を適用するかどうかを示す情報を含む
復号方法。
【請求項１１】
画像の輝度のダイナミックレンジの第１のダイナミックレンジから第２のダイナミックレンジへの変換に関する情報である変換情報を設定する設定部と、
前記第１のダイナミックレンジの輝度で表示される前記画像である第１の画像を符号化して符号化データを生成する符号化部と、
前記設定部により設定された前記変換情報と、前記符号化部により生成された前記第１の画像の符号化データとを含む符号化ストリームを伝送する伝送部と
を備え、
前記画像の輝度のダイナミックレンジの変換はニー変換とニーポイントに基づいて行われ、
前記変換情報は、連続する複数の前記画像に前記変換情報を適用するかどうかを示す情報を含む
ように構成された
符号化装置。
【請求項１２】
前記変換情報は、前記第１のダイナミックレンジの前記ニーポイントを表す変換前情報と、前記ニーポイントに対応する前記第２のダイナミックレンジの輝度を表す変換後情報とを含む
ように構成された
請求項１１に記載の符号化装置。
【請求項１３】
前記変換情報は、複数の前記変換前情報と前記変換後情報のペアを含む
ように構成された
請求項１２に記載の符号化装置。
【請求項１４】
前記変換情報は、重要度の高い順に複数の前記変換前情報と前記変換後情報のペアを含む
ように構成された
請求項１３に記載の符号化装置。
【請求項１５】
前記伝送部は、前記ペアの重要度の高い順を表す重要度情報を伝送する
ように構成された
請求項１３に記載の符号化装置。
【請求項１６】
前記変換情報は、前記第１の画像の輝度の最大値と、前記第２のダイナミックレンジの輝度で表示される前記画像である第２の画像の輝度の最大値の少なくとも一方を含む
ように構成された
請求項１１に記載の符号化装置。
【請求項１７】
前記変換情報は、前記第１の画像を表示する表示部の明るさの想定値と、前記第２のダイナミックレンジの輝度で表示される前記画像である第２の画像を表示する表示部の明るさの想定値の少なくとも一方を含む
ように構成された
請求項１１に記載の符号化装置。
【請求項１８】
符号化装置が、
画像の輝度のダイナミックレンジの第１のダイナミックレンジから第２のダイナミックレンジへの変換に関する情報である変換情報を設定する設定ステップと、
前記第１のダイナミックレンジの輝度で表示される前記画像である第１の画像を符号化して符号化データを生成する符号化ステップと、
前記設定ステップの処理により設定された前記変換情報と、前記符号化ステップの処理により生成された前記第１の画像の符号化データとを含む符号化ストリームを伝送する伝送ステップと
を含み、
前記画像の輝度のダイナミックレンジの変換はニー変換とニーポイントに基づいて行われ、
前記変換情報は、連続する複数の前記画像に前記変換情報を適用するかどうかを示す情報を含む
符号化方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
本開示の第１の側面の復号装置は、第１のダイナミックレンジの輝度で表示される画像である第１の画像の符号化データと、前記画像の輝度のダイナミックレンジの前記第１のダイナミックレンジから第２のダイナミックレンジへの変換に関する情報である変換情報とを含む符号化ストリームから、前記符号化データと前記変換情報を抽出する抽出部と、前記抽出部により抽出された前記符号化データを復号し、前記第１の画像を生成する復号部とを備え、前記画像の輝度のダイナミックレンジの変換はニー変換とニーポイントに基づいて行われ、前記変換情報は、連続する複数の前記画像に前記変換情報を適用するかどうかを示す情報を含むように構成された復号装置である。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】変更
【補正の内容】
【００１７】
本開示の第１の側面においては、第１のダイナミックレンジの輝度で表示される画像である第１の画像の符号化データと、前記画像の輝度のダイナミックレンジの前記第１のダイナミックレンジから第２のダイナミックレンジへの変換に関する情報である変換情報とを含む符号化ストリームから、前記符号化データと前記変換情報が抽出され、抽出された前記符号化データが復号されて、前記第１の画像が生成される。前記画像の輝度のダイナミックレンジの変換はニー変換とニーポイントに基づいて行われ、前記変換情報は、連続する複数の前記画像に前記変換情報を適用するかどうかを示す情報を含む。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
本開示の第２の側面の符号化装置は、画像の輝度のダイナミックレンジの第１のダイナミックレンジから第２のダイナミックレンジへの変換に関する情報である変換情報を設定する設定部と、前記第１のダイナミックレンジの輝度で表示される前記画像である第１の画像を符号化して符号化データを生成する符号化部と、前記設定部により設定された前記変換情報と、前記符号化部により生成された前記第１の画像の符号化データとを含む符号化ストリームを伝送する伝送部とを備え、前記画像の輝度のダイナミックレンジの変換はニー変換とニーポイントに基づいて行われ、前記変換情報は、連続する複数の前記画像に前記変換情報を適用するかどうかを示す情報を含むように構成された符号化装置である。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】変更
【補正の内容】
【００２０】
本開示の第２の側面においては、画像の輝度のダイナミックレンジの第１のダイナミックレンジから第２のダイナミックレンジへの変換に関する情報である変換情報が設定され、前記第１のダイナミックレンジの輝度で表示される前記画像である第１の画像が符号化されて符号化データが生成され、前記変換情報と前記第１の画像の符号化データとを含む符号化ストリームが伝送される。前記画像の輝度のダイナミックレンジの変換はニー変換とニーポイントに基づいて行われ、前記変換情報は、連続する複数の前記画像に前記変換情報を適用するかどうかを示す情報を含む。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００２７
【補正方法】変更
【補正の内容】
【００２７】
【図１】SDR画像を説明する図である。
【図２】HDR画像を説明する図である。
【図３】本開示の符号化の概要を説明する図である。
【図４】本開示の復号の概要を説明する図である。
【図５】ニー伸長を説明する図である。
【図６】本開示を適用した符号化装置の一実施の形態の構成例を示すブロック図である。
【図７】knee_function_info SEIのシンタクスの例を示す図である。
【図８】図７のknee_function_info SEIに設定される各情報を説明する図である。
【図９】knee_function_info SEIに設定される変換情報の例を示す図である。
【図１０】knee_function_info SEIに設定される変換情報の例を示す図である。
【図１１】符号化装置のストリーム生成処理を説明するフローチャートである。
【図１２】本開示を適用した復号装置の一実施の形態の構成例を示すブロック図である。
【図１３】図１２の復号装置の画像生成処理を説明するフローチャートである。
【図１４】knee_function_info SEIのシンタクスの他の例を示す図である。
【図１５】図１４のknee_function_info SEIに設定される各情報を説明する図である。
【図１６】本開示を適用した符号化装置の第１実施の形態の構成例を示すブロック図である。
【図１７】図１６の設定部により設定されるknee_function_info SEIのシンタクスの第１の例を示す図である。
【図１８】図１７のknee_function_info SEIに設定される各情報を説明する図である。
【図１９】図１７のDR変換情報の例を示す図である。
【図２０】図１７のDR変換情報の例を示す図である。
【図２１】図１６の符号化装置のストリーム生成処理を説明するフローチャートである。
【図２２】本開示を適用した復号装置の第２実施の形態の構成例を示すブロック図である。
【図２３】図２２の復号装置の画像生成処理を説明するフローチャートである。
【図２４】図１７のDR変換情報の他の例を示す図である。
【図２５】図１７のDR変換情報の他の例を示す図である。
【図２６】図１７のDR変換情報が含まれるtone_mapping_info_SEIのシンタクスの例を示す図である。
【図２７】図１７のDR変換情報が含まれるtone_mapping_info_SEIのシンタクスの他の例を示す図である。
【図２８】図１６の設定部により設定されるknee_function_info SEIのシンタクスの第２の例を示す図である。
【図２９】図２８のknee_function_info SEIに設定される各情報を説明する図である。
【図３０】図２８のDR変換情報の例を示す図である。
【図３１】図２８のDR変換情報の例を示す図である。
【図３２】図２８のDR変換情報が含まれるtone_mapping_info_SEIのシンタクスの例を示す図である。
【図３３】ニーポイント数が限定される場合に図２８のknee_function_info SEIに設定される各情報を説明する図である。
【図３４】ニーポイント数が限定される場合の図２８のknee_function_info SEIの例を示す図である。
【図３５】ニーポイント数が限定される場合の図３２のtone_mapping_info_SEIの例を示す図である。
【図３６】図１６の設定部により設定されるknee_function_info SEIのシンタクスの第３の例を示す図である。
【図３７】図３６のknee_function_info SEIに設定される各情報を説明する図である。
【図３８】図３６のDR変換情報の例を示す図である。
【図３９】図３６のDR変換情報が含まれるtone_mapping_info_SEIのシンタクスの例を示す図である。
【図４０】図１６の設定部により設定されるknee_function_info SEIのシンタクスの第４の例を示す図である。
【図４１】図４０のknee_function_info SEIに設定される各情報を説明する図である。
【図４２】図４０のDR変換情報の例を示す図である。
【図４３】図４０のDR変換情報の例を示す図である。
【図４４】図４０のknee_function_info SEIが複数設定されている場合の復号装置の動作を説明する図である。
【図４５】図４０のDR変換情報が含まれるtone_mapping_info_SEIのシンタクスの例を示す図である。
【図４６】DR変換情報が配置されるMP4のボックスを説明する図である。
【図４７】ToneMapInfoのシンタクスの例を示す図である。
【図４８】本開示を適用した符号化装置の第３実施の形態の第１の構成におけるSemanticsの第２実施の形態とは異なる点を示す図である。
【図４９】本開示を適用した復号システムの一実施の形態の第１の構成例を示すブロック図である。
【図５０】図４９の復号システムで受け取られるknee_function_info SEIで定義されるニーポイントおよびニー変換の関数の例を示す図である。
【図５１】図５０のニー変換の近似関数の例を示す図である。
【図５２】図５０のニー変換の近似関数の例を示す図である。
【図５３】図４９の復号装置の復号処理を説明するフローチャートである。
【図５４】図４９の表示装置の表示処理を説明するフローチャートである。
【図５５】本開示を適用した符号化装置の第３実施の形態の第２の構成におけるknee_function_info SEIのシンタクスの例を示す図である。
【図５６】図５５のSemanticsの第２実施の形態とは異なる点を示す図である。
【図５７】図５５のknee_function_info SEIで定義されるニーポイントおよびニー変換の関数の例を示す図である。
【図５８】図５７のニー変換の近似関数の例を示す図である。
【図５９】図５７のニー変換の近似関数の例を示す図である。
【図６０】approximate_knee_function_info SEIのシンタクスの例を示す図である。
【図６１】CRTの入力電気信号と表示輝度の関係を示す図である。
【図６２】輝度に比例する電気信号を示す図である。
【図６３】入力電気信号と表示輝度の関係を示す図である。
【図６４】図６１の関数と逆特性の関数を示す図である。
【図６５】画像が撮像されてから表示されるまでの処理の流れの一例を示す図である。
【図６６】SDR画像用のOETFを示す図である。
【図６７】HDR画像用のOETFを示す図である。
【図６８】第４実施の形態における光電変換処理の概要を説明する図である。
【図６９】第４実施の形態における電光変換処理の概要を説明する図である。
【図７０】本開示を適用した符号化装置の第４実施の形態の構成例を示すブロック図である。
【図７１】図７０の符号化装置のストリーム生成処理を説明するフローチャートである。
【図７２】本開示を適用した復号装置の第４実施の形態の構成例を示すブロック図である。
【図７３】図７２の復号装置の画像生成処理を説明するフローチャートである。
【図７４】コンピュータのハードウエアの構成例を示すブロック図である。
【図７５】多視点画像符号化方式の例を示す図である。
【図７６】本開示を適用した多視点画像符号化装置の構成例を示す図である。
【図７７】本開示を適用した多視点画像復号装置の構成例を示す図である。
【図７８】階層画像符号化方式の例を示す図である。
【図７９】スペーシャルなスケーラブル符号化の例を説明する図である。
【図８０】テンポラルなスケーラブル符号化の例を説明する図である。
【図８１】信号雑音比のスケーラブル符号化の例を説明する図である。
【図８２】本開示を適用した階層画像符号化装置の構成例を示す図である。
【図８３】本開示を適用した階層画像復号装置の構成例を示す図である。
【図８４】本開示を適用したテレビジョン装置の概略構成例を示す図である。
【図８５】本開示を適用した携帯電話機の概略構成例を示す図である。
【図８６】本開示を適用した記録再生装置の概略構成例を示す図である。
【図８７】本開示を適用した撮像装置の概略構成例を示す図である。
【図８８】スケーラブル符号化利用の一例を示すブロック図である。
【図８９】スケーラブル符号化利用の他の例を示すブロック図である。
【図９０】スケーラブル符号化利用のさらに他の例を示すブロック図である。
【図９１】本開示を適用したビデオセットの概略的な構成の一例を示している。
【図９２】本開示を適用したビデオプロセッサの概略的な構成の一例を示している。
【図９３】本開示を適用したビデオプロセッサの概略的な構成の他の例を示している。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００８３
【補正方法】変更
【補正の内容】
【００８３】
輝度レンジ情報は、第１実施の形態のように入力ニー位置情報（knee_point_of_input）が出力ニー位置情報（knee_point_of_output）以上であるとき、即ち、復号側でニー伸長が行われる場合、出力輝度レンジ情報である。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００９０
【補正方法】変更
【補正の内容】
【００９０】
＜第２実施の形態＞
（符号化装置の第２実施の形態の構成例）
図１６は、本開示を適用した符号化装置の第２実施の形態の構成例を示すブロック図である。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】０１３３
【補正方法】変更
【補正の内容】
【０１３３】
表示制御部９４は、変換部９３から供給される表示画像を表示部９５に表示させる。これにより、表示部９５がHDRディスプレイである場合、HDR画像が表示部９５に表示され、表示部９５がSDRディスプレイである場合、SDR画像が表示部９５に表示される。表示部９５は、HDRディスプレイまたはSDRディスプレイであり、表示制御部９４から供給される表示画像を表示する。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】０２０８
【補正方法】変更
【補正の内容】
【０２０８】
（knee_function_info SEIのシンタクスの第４の例）
図４０は、図１６の設定部７１により設定されるknee_function_info SEIのシンタクスの第４の例を示す図であり、図４１は、図４０のknee_function_info SEIに設定される各情報（のSemantics）を説明する図である。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】０２６８
【補正方法】変更
【補正の内容】
【０２６８】
７番目のニーポイントの変換前位置情報（input_knee_point[7]）は700であり、変換後位置情報（output_knee_point[7]）は836であり、８番目のニーポイントの変換前位置情報（input_knee_point[8]）は900であり、変換後位置情報（output_knee_point[8]）は949である。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】０３２８
【補正方法】変更
【補正の内容】
【０３２８】
例えば、図６６に示すように、最大輝度が100cd/m2であるSDR画像用のBT.709のOETFを用いてSDR画像を光電変換する場合、そのSDR画像の輝度は、0乃至1023の1024個のコードで表現される。これに対して、図６７に示すように、最大輝度が400cd/m2であるHDR画像用のOETFを用いてSDR画像を光電変換する場合、そのSDR画像の輝度は、例えば、0乃至501の502個のコード値で表現される。