(57)【要約】  利便性の高い静止画データを得ることができる画像処理装置を提供する。画像処理装置は、撮像により得られた静止画データを取得する取得部と、取得部に取得された静止画データを用いて、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データおよび第２静止画データを含む、論理的に１つのデータ単位を生成する生成部と、生成部によって生成されたデータ単位を出力する出力部と、を備える。
2018021261.tif 000002
【特許請求の範囲】
【請求項１】
撮像により得られた静止画データを取得する取得部と、
前記取得部に取得された前記静止画データを用いて、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データおよび第２静止画データを含む、論理的に１つのデータ単位を生成する生成部と、
前記生成部によって生成された前記データ単位を出力する出力部と、を備える、
画像処理装置。
【請求項２】
前記生成部は、前記第１静止画データおよび前記第２静止画データを含む１つのファイルを前記データ単位として生成する、
請求項１に記載の画像処理装置。
【請求項３】
前記生成部は、前記第１静止画データを含む１つの第１静止画ファイルと、前記第２静止画データを含み、かつ、ファイル名のボディが前記第１静止画ファイルと同じである第２静止画ファイルとを含んで構成されるオブジェクトを、前記データ単位として生成する、
請求項１に記載の画像処理装置。
【請求項４】
前記生成部は、前記第１静止画データを再生することによって、前記第２静止画データの再生による画像よりも高品位な画像を再生できることを示す補助情報を前記データ単位にさらに付加する、
請求項１から３のいずれか１項に記載の画像処理装置。
【請求項５】
前記生成部は、前記第１静止画データによる静止画の輝度が、高輝度領域を優先しているか否かを示す輝度領域情報、または、低輝度領域を優先しているか否かを示す輝度領域情報を含んだ前記補助情報を前記データ単位に付加する、
請求項４に記載の画像処理装置。
【請求項６】
前記第１静止画データは、ＨＤＲ（Ｈｉｇｈ  Ｄｙｎａｍｉｃ  Ｒａｎｇｅ）の画像データであり、
前記第２静止画データは、ＳＤＲ（Ｓｔａｎｄａｒｄ  Ｄｙｎａｍｉｃ  Ｒａｎｇｅ）の画像データである、
請求項１から５のいずれか１項に記載の画像処理装置。
【請求項７】
輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データおよび第２静止画データを含む、論理的に１つのデータ単位を取得する取得部と、
前記取得部により取得された前記データ単位に含まれる前記第１静止画データおよび前記第２静止画データのうちの一方を再生する再生部と、を備える、
再生装置。
【請求項８】
撮像により得られた静止画データを取得し、
取得した前記静止画データを用いて、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データおよび第２静止画データを含む、論理的に１つのデータ単位を生成し、
生成した前記データ単位を出力する、
画像処理方法。
【請求項９】
輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データおよび第２静止画データを含む、論理的に１つのデータ単位を取得し、
取得した前記データ単位に含まれる前記第１静止画データおよび前記第２静止画データのうちの一方を再生する、
再生方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、画像処理装置、再生装置、画像処理方法、および、再生方法に関する。
【背景技術】
【０００２】
特許文献１は、露出の異なる複数の画像を合成することにより、ダイナミックレンジの広いＨＤＲ（Ｈｉｇｈ  Ｄｙｎａｍｉｃ  Ｒａｎｇｅ）静止画を記録する撮像装置を開示している。【０００３】
しかしながら、特許文献１に開示された技術では、利便性の高い静止画データを得ることが難しかった。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１５−０５６８０７号公報
【発明の概要】
【０００５】
本開示は、利便性の高い静止画データを得ることができる画像処理装置と、再生装置、画像処理方法、および再生方法を提供する。
【０００６】
本開示における画像処理装置は、撮像により得られた静止画データを取得する取得部と、前記取得部に取得された前記静止画データを用いて、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データおよび第２静止画データを含む、論理的に１つのデータ単位を生成する生成部と、前記生成部によって生成された前記データ単位を出力する出力部と、を備える。
【０００７】
また、本開示における再生装置は、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データおよび第２静止画データを含む、論理的に１つのデータ単位を取得する取得部と、前記取得部により取得された前記データ単位に含まれる前記第１静止画データおよび前記第２静止画データのうちの一方を再生する再生部と、を備える。
【０００８】
なお、これらの全般的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なＣＤ−ＲＯＭなどの記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラムおよび記録媒体の任意な組み合わせで実現されてもよい。
【０００９】
本開示における画像処理装置は、利便性の高い静止画データを得ることができる。
【図面の簡単な説明】
【００１０】
【図１】図１は、映像技術の進化について説明するための図である。
【図２】図２は、ＨＤＲ表示技術について説明するための図である。
【図３Ａ】図３Ａは、ＰＱ（Ｐｅｒｃｅｐｔｕａｌ  Ｑｕａｎｔｉｚａｔｉｏｎ）方式を説明するための図である。
【図３Ｂ】図３Ｂは、ＨＬＧ（Ｈｙｂｒｉｄ  Ｌｏｇ  Ｇａｍｍａ）方式を説明するための図である。
【図４】図４は、ＨＤＲに対応しているＨＤＲ画像の一例と、ＳＤＲに対応しているＳＤＲ画像の一例とを比較して示した図である。
【図５】図５は、ＨＤＲまたはＳＤＲに対応した撮像装置と、撮像装置によって得られる画像データのファイルフォーマットと、画像データを表示する表示装置または画像データを印刷する印刷装置と、について説明するための図である。
【図６】図６は、２つの画像を合成することによりダイナミックレンジを拡大した画像を得るＨＤＲ撮影モードについて説明するための図である。
【図７】図７は、２つの画像を合成することによりダイナミックレンジを拡大した画像を得るＨＤＲ撮影モードについて説明するための図である。
【図８】図８は、ＨＤＲ表示用に撮像されたＨＤＲ画像について説明するための図である。
【図９】図９は、動画の色空間と静止画の色空間との違いについて説明するための図である。
【図１０】図１０は、Ｕｌｔｒａ  ＨＤ  Ｂｌｕ−ｒａｙ（登録商標、以下同様）とＢｌｕ−ｒａｙとを比較して示した図である。
【図１１】図１１は、輝度の範囲（レンジ）が広いＨＤＲ画像を生成するＨＤＲ撮像装置を説明するための図である。
【図１２】図１２は、ＨＤＲ静止画ファイルフォーマットについて説明するための図である。
【図１３】図１３は、マルチピクチャーフォーマットについて説明するための図である。
【図１４】図１４は、ＪＰＥＧデータとＨＤＲ拡張用の差分データとを関連付けて扱うＪＰＥＧ  ＸＴ方式を説明するための図である。
【図１５】図１５は、実施の形態１における画像処理装置の構成の一例を模式的に示すブロック図である。
【図１６】図１６は、論理的に１つのデータ単位が２種類の静止画データを含む１つのファイルを備えて構成される場合の一例を模式的に示す図である。
【図１７】図１７は、管理データに含まれる情報の一例を模式的に示す図である。
【図１８】図１８は、第１静止画データの静止画を構成する各画素の輝度値と、各輝度値の画素の数との関係の一例をヒストグラムとして示す図である。
【図１９】図１９は、第１静止画データの静止画を構成する各画素の輝度値と、各輝度値の画素の数との関係の他の一例をヒストグラムとして示す図である。
【図２０】図２０は、論理的に１つのデータ単位が２つのファイルを備えて構成される場合の一例を模式的に示す図である。
【図２１】図２１は、論理的に１つのデータ単位が２つのファイルを備えて構成される場合の他の一例を模式的に示す図である。
【図２２】図２２は、実施の形態１における生成部の構成の一例を模式的に示すブロック図である。
【図２３】図２３は、実施の形態１における生成部の構成の一例を模式的に示すブロック図である。
【図２４】図２４は、実施の形態１における画像処理装置の画像処理に係る動作の一例を示すフローチャートである。
【図２５】図２５は、実施の形態１における生成部による生成処理の一例を示すフローチャートである。
【図２６】図２６は、実施の形態１における生成部による生成処理の一例を示すフローチャートである。
【図２７】図２７は、実施の形態１における実施例１を説明するための図である。
【図２８】図２８は、実施の形態１における実施例２を説明するための図である。
【図２９】図２９は、実施の形態１における実施例３を説明するための図である。
【図３０】図３０は、実施の形態１における実施例４を説明するための図である。
【図３１】図３１は、実施の形態１における実施例５を説明するための図である。
【図３２】図３２は、実施の形態１における再生装置の構成の一例を模式的に示すブロック図である。
【図３３】図３３は、実施の形態１における再生装置の再生処理に係る動作の一例を示すフローチャートである。
【図３４】図３４は、実施の形態１における補助情報の具体的な一例について説明するための図である。
【発明を実施するための形態】
【００１１】
（本開示の目的）
本開示は、ＨＤＲ（Ｈｉｇｈ  Ｄｙｎａｍｉｃ  Ｒａｎｇｅ）表示技術と、ＨＤＲ撮像技術との２つの技術を使い、ＨＤＲ静止画という新たなユーザ価値と新たな写真文化を提供するためのものである。上記の新たなユーザ価値とは、臨場感を向上させ、かつ、白飛び（明るい領域の階調が損なわれた状態）および黒潰れ（暗い領域の階調が損なわれた状態）等が低減された静止画データを生成することである。また、上記の新たな写真文化とは、ＨＤＲ静止画の撮像に対応しているカメラで撮像することにより得られたＨＤＲ静止画を、ＨＤＲ表示に対応する表示装置（以下、「ＨＤＲ表示装置」という）に表示して鑑賞することである。なお、ＨＤＲ静止画は、ＨＤＲ写真ともいう。
【００１２】
本開示は、ＳＤＲ表示には対応しているがＨＤＲ表示には対応していない表示装置（以下、「ＳＤＲ表示装置」という）およびＳＤＲ静止画の印刷には対応しているがＨＤＲ静止画の印刷には対応していない印刷装置（以下、「ＳＤＲ印刷装置」という）においても表示または印刷が可能な静止画データを生成することができる画像処理装置および画像処理方法を提供する。つまり、本開示は、ＨＤＲ静止画の画像処理に対応した装置に対してだけでなく、ＳＤＲ静止画の画像処理には対応しているがＨＤＲ静止画の画像処理には対応していない装置に対しても、ＨＤＲ静止画の再生を行うことが可能な静止画データを提供することで、ＨＤＲ静止画データの利便性を向上させることができる画像処理装置および画像処理方法を提供する。なお、本開示において、ＨＤＲ静止画の再生は、ＨＤＲ静止画の表示、および、ＨＤＲ静止画を画像処理することによる印刷、を含む。つまり、本開示において、再生は、表示および印刷を含む。
【００１３】
このようなＨＤＲ静止画の静止画データのデータフォーマットを決める場合、ＳＤＲ静止画に対応する従来のＳＤＲ表示装置またはＳＤＲ印刷装置との互換性を維持するか否かを定める必要がある。通常、新たなデータフォーマットを導入する際には、既存の機器との互換性が重視される。
【００１４】
従来の装置との互換性を維持するために、例えば、新たなＨＤＲ静止画データを、その属性等を拡張して、従来の標準的データフォーマットであるＪＰＥＧ（Ｊｏｉｎｔ  Ｐｈｏｔｏｇｒａｐｈｉｃ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）に格納することが考えられる。しかし、ＪＰＥＧには階調が８ビットという制約があるため、階調が１０ビット以上のＨＤＲ静止画データをＪＰＥＧに格納することは困難である。
【００１５】
ＪＰＥＧの制約に対応し、かつ従来の装置との互換性を維持するために、ＳＤＲ静止画データであるＪＰＥＧデータと新たなＨＤＲ静止画データとの２つのデータを１つのファイルに格納し、そのファイルに、互換性を実現できるＪＰＧの拡張子をつけることが考えられる。
【００１６】
しかし、そのような対応で従来の装置との互換性を図ろうとすると、編集ソフトや表示ソフトでそのＪＰＥＧファイルを表示または編集する際に、ＪＰＥＧファイル形式における制約により、そのＪＰＥＧファイルに格納されたＨＤＲ写真データが消去される可能性がある。これらのことから、従来の装置との互換性を断念し、ＨＤＲに最適なフォーマットを採用することが望ましいと考えられる。一方、その場合、現行の印刷装置、表示装置、またはカメラ等において、ＨＤＲに対応するために必要となる修正・変更等（実装負担ともいう）は、できるだけ少ないことが望ましい。
【００１７】
例えばスマートフォン等の高機能な携帯端末の普及により、そのような携帯端末を使用するユーザは、その携帯端末上で実現されるＨＤＲ合成によって、ＨＤＲ静止画データを得ることが可能である。そのため、ユーザ自身が、ＳＤＲ撮影ファイル（従来のＪＰＥＧファイル）とＨＤＲ撮影ファイルとをそれぞれ個別に生成して管理することが、従来よりも容易になった。つまり、カメラ等の撮像装置でＨＤＲ静止画データを生成するときに、従来のＪＰＥＧファイルを同時に生成し、ＨＤＲ静止画データとＳＤＲ静止画データとの２つのデータを１つのファイルに格納するのではなく、それらを個別に管理できるようにするオプションをその撮像装置に設けることも可能となっている。
【００１８】
ＨＤＲ用の新しいデータフォーマット機能をテレビジョンセットや動画記録機能付きカメラに設ける場合は、例えば、それらの機器にＨＥＶＣのエンコーダが搭載されていれば、ＨＥＶＣ圧縮による静止画のデータフォーマットを用いることができる。しかし、ＨＥＶＣ圧縮による静止画のデータフォーマットを得るために、動画記録機能に対応していないカメラに、動画圧縮用のＨＥＶＣのエンコーダを搭載することは、現実的ではない。また、そのようなカメラでは、非圧縮のデータを格納できる、ＴＩＦＦ（Ｔａｇｇｅｄ  Ｉｍａｇｅ  Ｆｉｌｅ  Ｆｏｒｍａｔ）ベースのＨＤＲ静止画データへの対応を検討することも必要となる。
【００１９】
ＨＤＲ静止画データをＳＤＲ印刷装置で印刷することを想定した場合、その装置において、データフォーマットの候補の１つとして、ＨＬＧ（Ｈｙｂｒｉｄ  Ｌｏｇ  Ｇａｍｍａ）のような、従来の装置との互換性のあるＨＤＲ技術を使うことも想定される。
【００２０】
本開示によれば、従来の装置との互換性の有無、従来の装置における実装負担の有無、等、ＨＤＲ静止画データフォーマットへの多様な要求に応えることができる画像処理装置および再生装置を実現することができる。
【００２１】
（ＨＤＲ表示技術の背景）
図１は、映像技術の進化について説明するための図である。
【００２２】
これまで、映像の高画質化としては、表示画素数の拡大に主眼がおかれていた。そして、従来の７２０×４８０画素のＳｔａｎｄａｒｄ  Ｄｅｆｉｎｉｔｉｏｎ  （ＳＤ）映像に代えて、１９２０×１０８０画素のＨｉｇｈ  Ｄｅｆｉｎｉｔｉｏｎ（ＨＤ）映像が普及している。
【００２３】
近年、更なる高画質化のために、３８４０×２１６０画素のＵｌｔｒａ  Ｈｉｇｈ  Ｄｅｆｉｎｉｔｉｏｎ（ＵＨＤ）映像、あるいは、さらに画素数が多い４０９６×２１６０画素の映像（いわゆる、４Ｋ映像）が提案されている。また、４Ｋ映像とともに、ダイナミックレンジの拡張、色域の拡大、フレームレートの追加、等も検討されている。
【００２４】
ダイナミックレンジに関しては、暗部階調を維持しつつ、現行のテレビジョン信号での表現が困難な鏡面反射光等の明るい光を、より現実に近い明るさで表現するための方式として、ＨＤＲ（Ｈｉｇｈ  Ｄｙｎａｍｉｃ  Ｒａｎｇｅ）が提案されている。これまでのテレビジョン信号は、ＳＤＲ（Ｓｔａｎｄａｒｄ  Ｄｙｎａｍｉｃ  Ｒａｎｇｅ）と呼ばれ、最高輝度が１００ｎｉｔであった。一方、ＨＤＲでは、１０００ｎｉｔ以上まで最高輝度を拡大することが想定されている。そして、ＳＭＰＴＥ（Ｓｏｃｉｅｔｙ  ｏｆ  Ｍｏｔｉｏｎ  Ｐｉｃｔｕｒｅ  ａｎｄ  Ｔｅｌｅｖｉｓｉｏｎ  Ｅｎｇｉｎｅｅｒｓ）、ＩＴＵ−Ｒ（Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎ  Ｕｎｉｏｎ−Ｒａｄｉｏｃｏｍｍｕｎｉｃａｔｉｏｎ  Ｓｅｃｔｏｒ）等において、マスタリングディスプレー用の規格の標準化も進行中である。ＨＤＲの具体的な適用先としては、ＨＤやＵＨＤと同様に、放送やパッケージメディア（Ｂｌｕ−ｒａｙ  Ｄｉｓｃ等）、インターネット配信、等がある。
【００２５】
（ＨＤＲ表示技術）
図２は、ＨＤＲ表示技術について説明するための図である。
【００２６】
ＨＤＲは、単なる非常に明るいテレビジョンセットを実現するための方式ではない。ＨＤＲとは、映像の輝度の範囲（レンジ）を、ＳＤＲの一例であるｂｔ．７０９（Ｂｒｏａｄｃａｓｔｉｎｇ  Ｓｅｒｖｉｃｅ  （Ｔｅｌｅｖｉｓｉｏｎ）７０９）の規格で定められた０．１ｎｉｔ−１００ｎｉｔから、０−１０，０００ｎｉｔ（ＳＴ  ２０８４の場合）に拡張して、従来は表現できなかった、明るい太陽や空や光線の反射等の表現を可能にしたり、明るい部分と暗い部分とを同時に記録することを可能にしたりする方式である。なお、ここでいう輝度とは、光学的な輝度のことであり、光源の明るさを表す物理量のことである。ＨＤＲには、撮像後にグレーディング処理（映像の色やトーンを調整する処理）を行う映像（パッケージされる映像）およびＩＰ（Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）配信される映像等に適したＳＭＰＴＥ  ＳＴ２０８４方式と、ライブ放送の映像およびユーザに撮像された映像等に適したＨｙｂｒｉｄ  Ｌｏｇ  Ｇａｍｍａ（ＨＬＧ）との２つの方式がある。
【００２７】
ＨＤＲの表示技術には、ＳＤＲとＨＤＲとの互換性を実現できるＨＬＧ方式と、ＳＤＲとＨＤＲとの単純な表示互換性がないＰＱ方式とがある。
【００２８】
図３Ａは、ＰＱ方式を説明するための図である。図３Ｂは、ＨＬＧ方式を説明するための図である。
【００２９】
図３Ａに示すように、ＳＭＰＴＥ  ＳＴ２０８４（ＰＱ）は、ＳＤＲとＨＤＲとの互換性がない方式である。この方式の場合、ＳＤＲとＨＤＲとは、個別にグレーディングされて個別に伝送される。また、この方式の場合、Ｕｌｔｒａ  ＨＤ  Ｂｌｕ−ｒａｙで再生された映像を、ＳＤＲＴＶ（ＳＤＲには対応しているが、ＨＤＲには対応していないテレビジョンセット）に表示させる場合は、ＨＤＲの映像データをＳＤＲの映像データに変換するＳＤＲ変換が必要となる。
【００３０】
図３Ｂに示すように、ＩＴＵ−Ｒ  ２１００  Ｈｙｂｒｉｄ  Ｌｏｇ  Ｇａｍｍａ（ＨＬＧ）は、ＳＤＲとＨＤＲとの互換性を有する方式である。この方式の場合、ＨＬＧ用のグレーディングが行われ、ＨＬＧ用ストリームのみが伝送される。ＨＬＧ用ストリームは、ＳＤＲに対する互換性がある。このため、ＨＤＲの映像データを、ＳＤＲＴＶに表示させる場合に、ＨＤＲの映像データをＳＤＲの映像データに変換するＳＤＲ変換は不要である。
【００３１】
図４は、ＨＤＲに対応しているＨＤＲ画像の一例と、ＳＤＲに対応しているＳＤＲ画像の一例とを比較して示した図である。図４には、室内の比較的暗い景色と窓の外の比較的明るい景色とが混在する、明暗差が相対的に大きい１枚の画像を、ＨＤＲ画像とＳＤＲ画像とで示す。
【００３２】
ＨＤＲ画像は、ＨＤＲ静止画データまたはＨＤＲ動画データを再生することで得られる画像である。ＳＤＲ画像は、ＳＤＲ静止画データまたはＳＤＲ動画データを再生することで得られる画像である。図４に例示するように、ＨＤＲ画像では、窓の外の比較的明るい景色と、室内の比較的暗い景色とが、ともに適切な明るさで表現されている。一方、ＳＤＲ画像では、窓の外の比較的明るい景色が表現されるように露出が調整されているため、室内の比較的暗い景色は、暗くなりすぎて一部に黒潰れが生じ、見えにくくなっている。仮に、室内の景色が適切に表現されるように露出が調整された場合は、窓の外の景色は、明るくなりすぎて一部に白飛びが生じ、見えにくくなってしまう（図示せず）。このように、ＨＤＲ画像は、ＳＤＲ画像において実現が困難であった、比較的明るい景色と比較的暗い景色とが混在する、明暗差が相対的に大きい１枚の画像において白飛びと黒潰れとの両方を低減した階調性の高い画像を実現することができる。
【００３３】
図５は、ＨＤＲまたはＳＤＲに対応した撮像装置と、撮像装置によって得られる画像データのファイルフォーマットと、画像データを表示する表示装置または画像データを印刷する印刷装置と、について説明するための図である。
【００３４】
図５に示すＨＤＲ撮像装置１０は、ＨＤＲでの撮像に対応している。ＨＤＲ撮像装置１０は、ＨＤＲ撮像部１１と、ＳＤＲ撮像部１４と、変換部１２と、ＪＰＥＧ圧縮部１３と、を備える。ＨＤＲ撮像装置１０は、ＨＤＲ撮像部１１においてＨＤＲ撮影モードで撮像されて得られた画像データが、ＳＤＲ表示装置４０で表示される、またはＳＤＲ印刷装置５０で印刷される、ことに対応できるように構成されている。具体的には、ＨＤＲ撮像装置１０では、ＨＤＲ撮像部１１においてＨＤＲ撮影モードで撮像されて得られたＨＤＲ画像のＨＤＲ静止画データが、変換部１２においてＳＤＲ静止画データに変換される。そして、ＨＤＲ撮像装置１０では、変換部１２での変換により得られたＳＤＲ静止画データが、ＪＰＥＧ圧縮部１３においてＪＰＥＧ圧縮され、その圧縮により得られたＪＰＥＧフォーマットのＳＤＲ静止画データが出力される。また、ＨＤＲ撮像装置１０では、ＳＤＲ撮像部１４において従来の撮映モード（ＳＤＲ撮映モード）で撮像されて得られたＳＤＲ画像のＳＤＲ静止画データについても、ＪＰＥＧ圧縮部１３でＪＰＥＧ圧縮され、圧縮により得られたＪＰＥＧフォーマットのＳＤＲ静止画データが出力される。
【００３５】
ＳＤＲ撮像装置２０は、ＳＤＲ撮像部２１と、ＪＰＥＧ圧縮部２２と、を備える。ＳＤＲ撮像装置２０では、ＨＤＲ撮像装置１０において従来の撮映モード（ＳＤＲ撮映モード）で撮像が行われる場合と同様に、ＳＤＲ撮像部２１での撮像で得られたＳＤＲ画像のＳＤＲ静止画データが、ＪＰＥＧ圧縮部２２でＪＰＥＧ圧縮され、その圧縮により得られたＪＰＥＧフォーマットのＳＤＲ静止画データが出力される。
【００３６】
したがって、ＨＤＲ表示装置３０、ＳＤＲ表示装置４０、およびＳＤＲ印刷装置５０では、ＨＤＲ撮像によるＨＤＲ静止画データがＳＤＲ変換されて得られたＳＤＲ静止画データ、または、ＳＤＲ撮像によるＳＤＲ静止画データを取得して、当該ＳＤＲ静止画データによるＳＤＲ画像を再生（表示または印刷）していた。
【００３７】
次に、ＨＤＲ撮影モードについて図６および図７を用いて説明する。
【００３８】
図６および図７は、２つの画像を合成することによりダイナミックレンジを拡大した画像を得るＨＤＲ撮影モードについて説明するための図である。
【００３９】
スマートフォンおよびデジタルカメラ等には、輝度の範囲（レンジ）が広い映像を撮像できるＨＤＲ撮影モードを有するものがある。ＨＤＲ撮影モードでは、図６および図７の（ａ）に示すように、輝度の範囲（レンジ）が広いＨＤＲ画像データを得るために、２重露光（同一被写体を互いに異なる露光状態で複数回撮像する手法）等で得られた２つのＳＤＲ画像が、ＳＤＲで定められた輝度の範囲に収まるように合成される。これにより、図６および図７の（ｂ）に示すように、ＨＤＲ画像をＳＤＲ表示装置で表示することが可能になる。
【００４０】
次に、図８を用いて、ＨＤＲ表示用に撮像されたＨＤＲ画像について説明する。
【００４１】
図８は、ＨＤＲ表示用に撮像されたＨＤＲ画像について説明するための図である。
【００４２】
図８に示すように、ＨＤＲ表示用のＨＤＲ画像は、撮像の対象となるシーンの明るさが、ＳＤＲ撮影モードよりも広い輝度の範囲（レンジ）で撮像される。この撮像により得られた画像データがグレーディングされてＨＤＲ表示用のＨＤＲ画像が生成され、そのＨＤＲ画像が各装置に伝送されて再生される。ＨＤＲ画像は、ＳＤＲ画像よりも輝度の範囲（レンジ）が広いため、そのままではＳＤＲ表示装置で表示することはできない。ＨＤＲ画像をＳＤＲ表示装置で表示するためには、ＨＤＲ画像からＳＤＲ画像への変換が必要となる。
【００４３】
一方、図６および図７を用いて説明したＨＤＲ撮影モードでは、合成後の画像は、ＳＤＲで定められた輝度の範囲に収まるように生成されているため、ＨＤＲ表示装置３０とＳＤＲ表示装置４０（またはＳＤＲ印刷装置５０）との双方で再生することが可能である。
【００４４】
次に、図９を用いて、動画の色空間と静止画の色空間との違いについて説明する。
【００４５】
図９は、動画の色空間と静止画の色空間との違いについて説明するための図である。
【００４６】
動画の色空間に関する規格であるｂｔ．７０９と、静止画の色空間に関する規格であるｓＲＧＢ（ｓｔａｎｄａｒｄ  ＲＧＢ）とは、名称は異なるが互いに同じ色空間を示す。また、ｂｔ．７０９またはｓＲＧＢで定義される色空間よりも拡張された色空間も定義されている。
【００４７】
ＵＬＴＲＡ  ＨＤのために規格化されたｂｔ．２０２０は、ＤＣＩ（Ｄｉｇｉｔａｌ  Ｃｉｎｅｍａ  Ｉｎｉｔｉａｔｉｖｅｓ）  Ｐ３またはＡｄｏｂｅＲＧＢよりも広い色空間である。このため、ｂｔ．２０２０によってＤＣＩ  Ｐ３およびＡｄｏｂｅＲＧＢの色空間をカバーできる。なお、ＤＣＩ  Ｐ３の色空間とＡｄｏｂｅＲＧＢの色空間とは、面積は互いに同程度であるが、領域は互いに異なる。
【００４８】
図１０は、Ｕｌｔｒａ  ＨＤ  Ｂｌｕ−ｒａｙとＢｌｕ−ｒａｙとを比較して示した図である。
【００４９】
図１０に示すように、Ｕｌｔｒａ  ＨＤ  Ｂｌｕ−ｒａｙは、解像度、色空間、ＨＤＲ（最大輝度）、圧縮技術、および転送レートの全ての項目においてＢｌｕ−ｒａｙを上回っている。
【００５０】
図５に戻って説明を続ける。近年、ＨＤＲ画像を表示するためのＨＤＲ画像データを、ＳＤＲ変換をせずに表示することができる、ＨＤＲＴＶ等のＨＤＲ表示装置が提案されている。
【００５１】
一方、ＨＤＲ撮影モード（ＨＤＲ撮像機能）を有するカメラでは、ＨＤＲＴＶとは異なり、主に、逆光補正等を目的としてＨＤＲ技術が使用されている。そして、そのカメラでＨＤＲ技術を使用して撮像された静止画像は、主にＳＤＲ表示装置またはＳＤＲ印刷装置で再生される。そのため、そのカメラは、映像用のＨＤＲ画像データを生成することが可能な撮像素子を備え、ＨＤＲ技術を用いた撮像が可能であるにも関わらず、ＨＤＲ撮影モードで撮像したＨＤＲ画像をＳＤＲ変換し、ＳＤＲ静止画データを出力する。このように、ＨＤＲ撮像機能を有するカメラでは、ＨＤＲＴＶの表示能力を活かすような輝度の範囲（レンジ）が広いＨＤＲ画像データを生成することが可能であるにもかかわらず、一般的にはＨＤＲ画像データが生成されていなかった。
【００５２】
図１１は、輝度の範囲（レンジ）が広いＨＤＲ画像を生成するＨＤＲ撮像装置１０Ａを説明するための図である。
【００５３】
ＨＤＲＴＶ（例えば、ＨＤＲ表示装置３０）のＨＤＲ表示機能を活かすためには、ＨＤＲ表示用のＨＤＲ画像データが生成されたときに、ＨＤＲ画像データをＳＤＲ画像データに変換せず、そのままのＨＤＲ画像データをＨＤＲＴＶで表示すればよい。
【００５４】
図１１に示すＨＤＲ撮像装置１０Ａは、ＨＤＲ撮像部１１と、ＳＤＲ撮像部１４と、変換部１２と、ＪＰＥＧ圧縮部１３と、ＨＤＲ画像補正部１５と、ＨＤＭＩ（登録商標、以下同様）（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｔｅｒｆａｃｅ）出力部１６と、を備える。ＨＤＲ撮像装置１０Ａは、ＨＤＲ画像データを生成するために、ＨＤＲ画像補正部１５においてＨＤＲ画像補正を行う。
【００５５】
ＨＤＲ画像補正部１５では、例えば、ＨＤＲ撮像部１１で撮像が行われることにより得られたＲＡＷデータを、ＰＱカーブ等のＨＤＲ−ＥＯＴＦ（ＨＤＲ−Ｅｌｅｃｔｒｏ−Ｏｐｔｉｃａｌ  Ｔｒａｎｓｆｅｒ  Ｆｕｎｃｔｉｏｎ）を用いて、ＨＤＲＴＶ（例えば、ＨＤＲ１０規格に対応したＨＤＲ表示装置３０）で表示可能な１０ビット画像に変換する。そして、ＨＤＲ撮像装置１０Ａは、ＨＤＲ画像補正部１５により得られたＨＤＲ画像データを、ＨＤＭＩ出力部１６からＨＤＲＴＶ（例えば、ＨＤＲ表示装置３０）に出力する。これにより、そのＨＤＲ画像データを受信したＨＤＲＴＶ（例えば、ＨＤＲ表示装置３０）では、そのＨＤＲ画像データに応じたＨＤＲ画像が表示される。
【００５６】
ただし、この場合、ＨＤＲ撮像装置１０ＡとＨＤＲ表示装置３０とが、ＨＤＭＩ  ２．０規格に対応したＨＤＭＩケーブルで相互接続される必要がある。すなわち、ＨＤＲ撮像装置１０Ａは、ＨＤＭＩ  ２．０規格に対応していない装置に対しては、そのＨＤＲ画像データをそのまま送信することができない。この問題に対応するためには、ＨＤＭＩ  ２．０規格に対応していない装置に対してもＨＤＲ画像データを送信できるような、ＨＤＲ静止画ファイルフォーマットが必要となる。言い換えると、この問題に対応するためには、ＳＤＲ静止画ファイルフォーマットで、ＨＤＲ撮像装置１０Ａと、ＨＤＲ表示装置３０、ＳＤＲ表示装置４０、およびＳＤＲ印刷装置５０との間でデータ交換ができるように、ＨＤＲ形式のまま保存およびデータ交換するためのＨＤＲ静止画ファイルフォーマットが必要である。しかしながら、ＨＤＲ静止画ファイルフォーマットには次に示すような問題がある。
【００５７】
図１２は、ＨＤＲ静止画ファイルフォーマットについて説明するための図である。
【００５８】
図１２に示すＨＤＲ撮像装置１０Ｂは、ＨＤＲ撮像部１１と、ＳＤＲ撮像部１４と、変換部１２と、ＪＰＥＧ圧縮部１３と、ＨＤＲ画像補正部１５と、ＪＰＥＧ圧縮部１３Ａと、を備える。
【００５９】
ＨＤＲ静止画ファイルフォーマットには、ＳＤＲ静止画ファイルフォーマットの１つであるＪＰＥＧのような、広く普及しているファイルフォーマットがない。
【００６０】
ＨＤＲ画像データを格納するファイルフォーマットには、色空間をｂｔ．２０２０の領域まで拡張し、広い輝度範囲をカバーすることが必要とされる。また、ＨＤＲ画像には、静止画の場合に目立ちやすいバンディング等を抑えるために、最低でも１０ビット、できれば１２ビット以上の階調を表示できることが望ましい。一方、ＪＰＥＧファイルフォーマットは、ＳＤＲに制限されるとともにｓＲＧＢで定義される色空間に制限され、さらに、階調は８ビットに制限される。
【００６１】
ＨＤＲ静止画データを格納するファイルフォーマットとして、ＪＰＥＧベースのファイルフォーマットを使用する場合は、ＪＰＥＧファイルフォーマットを、ｂｔ．２０２０で定義される色空間とし、ＨＤＲに拡張して圧縮すればよい。このように、ＪＰＥＧベースのファイルフォーマットにＨＤＲ静止画データを格納することは、技術的には可能である。なお、図１２には、ＨＤＲ撮像装置１０ＢのＪＰＥＧ圧縮部１３Ａにおいて、ＨＤＲ静止画データを格納するファイルフォーマットとして、ＪＰＥＧベースのファイルフォーマットを使用する例を示している。しかし、ＪＰＥＧベースのファイルフォーマットには、画像の品質に関して、階調表示能力の不足によるバンディング等の問題がある。そのため、ＨＤＲ静止画データを格納するファイルフォーマットとしてＪＰＥＧベースのファイルフォーマットを使用することは、実用化されていない。
【００６２】
このように、ＨＤＲ静止画データを格納するのにＪＰＥＧファイルフォーマットを使用することには、上述したような問題がある。そして、現状では有力なＨＤＲ静止画ファイルフォーマットがない。このため、ＨＤＲ表示装置３０では、ＨＤＲ静止画ファイルフォーマットがサポートされていない。
【００６３】
ここで、ＳＤＲ静止画データとＨＤＲ静止画データとの２種類のデータを格納するファイルフォーマットについて考える。
【００６４】
図１３は、マルチピクチャーフォーマットについて説明するための図である。
【００６５】
複数の写真データを１つのファイルに格納することが可能なフォーマットとして、マルチピクチャーフォーマットがある。マルチピクチャーフォーマットでは、例えば、主画像（ＨＤＲ静止画データ）と、主画像をテレビジョンセット等のモニタに表示するのに適したサイズ（ＳＤＲ静止画データ）にした静止画像（以下、モニタ表示用画像ともいう）とを、互いに関連付けて記録することができる。また、マルチピクチャーフォーマットでは、多視点（立体視）画像等、個別のファイルである複数の静止画データを、互いに関連付けて１つのファイルに記録することができる。
【００６６】
マルチピクチャーフォーマットには、図１３の（ａ）に示すＢａｓｅｌｉｎｅ  ＭＰ  ファイルと、図１３の（ｂ）に示すＥｘｔｅｎｄｅｄ  ＭＰ  ファイルとの２つの方式がある。
【００６７】
図１３の（ａ）に示すＢａｓｅｌｉｎｅ  ＭＰ  ファイルは、主画像（ＨＤＲ静止画データ）とモニタ表示用画像（ＳＤＲ静止画データ）とを互いに関連付けて１つのファイルに記録することができる。Ｂａｓｅｌｉｎｅ  ＭＰ  ファイルの拡張子は「．ＪＰＧ」である。Ｂａｓｅｌｉｎｅ  ＭＰ  ファイルを用いると、従来機器または従来のソフトウェアで、主画像に対応するモニタ表示用画像を再生でき、主画像（ＨＤＲ静止画データ）をＨＤＲ表示装置にそのまま表示することもできる。Ｂａｓｅｌｉｎｅ  ＭＰ  ファイルの利点は、既存の表示装置および印刷装置で、互換性のために格納されている、主画像に対応するモニタ表示用画像（つまりＳＤＲ静止画データ）を、再生することができることである。一方、画像編集ソフトが、Ｂａｓｅｌｉｎｅ  ＭＰ  ファイルを通常のＪＰＥＧファイルと誤解して、２個目の画像データ（ＨＤＲ静止画データ）を消去する可能性がある。これは、Ｂａｓｅｌｉｎｅ  ＭＰ  ファイルには、１つのファイル内に２つのデータが格納されているが、１つのファイル内に１つのデータを格納するＪＰＥＧファイルの拡張子「．ＪＰＧ」が使用されているためである。ただし、マルチピクチャーフォーマットを編集できる画像編集ソフトの場合には、上記した問題は発生しない。
【００６８】
図１３の（ｂ）に示すＥｘｔｅｎｄｅｄ  ＭＰ  ファイルは、例えば立体視等に用いられる２つのマルチビュー画像（マルチビュー画像１とマルチビュー画像２）等を、互いに関連付けて１つのファイルに記録することができる。Ｅｘｔｅｎｄｅｄ  ＭＰ  ファイルは、従来機器または従来のソフトウェアを用いて再生または保存等を行う際に一方の画像が消失しないように、新規の拡張子を持つファイル形式として定義される。Ｅｘｔｅｎｄｅｄ  ＭＰ  ファイルの利点は、ＪＰＥＧファイルに準ずる１つのファイル内に２つのデータが格納されているが、ＪＰＥＧファイルの拡張子「．ＪＰＧ」が使用されていないことである。このため、マルチピクチャーフォーマット対応の画像編集ソフト以外の画像編集ソフトでは、このファイルを編集できない。したがって、Ｅｘｔｅｎｄｅｄ  ＭＰ  ファイルの場合、Ｂａｓｅｌｉｎｅ  ＭＰ  ファイルのように、画像編集ソフトが通常のＪＰＥＧファイルと誤解して、２個目の画像データを消す可能性は少ない。Ｅｘｔｅｎｄｅｄ  ＭＰ  ファイルの問題は、拡張子がＪＰＥＧと異なるため、既存の表示装置および印刷装置で再生することができないことである。
【００６９】
図１４は、ＪＰＥＧデータとＨＤＲ拡張用の差分データとを関連付けて扱うＪＰＥＧ  ＸＴ方式を説明するための図である。
【００７０】
図１４に示すＨＤＲ撮像装置１０Ｃは、ＨＤＲ撮像部１１と、ＳＤＲ撮像部１４と、変換部１２と、ＪＰＥＧ圧縮部１３と、ＨＤＲ画像補正部１５と、ＪＰＥＧ  ＸＴ圧縮部１３Ｂと、を備える。
【００７１】
ＨＤＲ静止画用の規格として、ＪＰＥＧ  ＸＴ（ＩＳＯ  １８４７７）がある。この規格は、ＳＤＲ静止画データを格納したＪＰＥＧデータとＨＤＲ拡張用の差分データとを互いに関連付けて扱うための方式を定めている。この規格に準ずるＨＤＲ撮像装置１０Ｃでは、ＪＰＥＧ  ＸＴ圧縮部１３Ｂが、ＨＤＲ画像補正部１５でＨＤＲ画像補正が施されたＨＤＲ画像データに対して、ＪＰＥＧ  ＸＴ圧縮処理を行う。これにより、ＨＤＲ撮像装置１０Ｃでは、ＳＤＲ画像の再生に用いられるＳＤＲ静止画データ（ＪＰＥＧ）と、ＨＤＲ静止画生成用の差分データとが得られる。
【００７２】
ＪＰＥＧ  ＸＴの利点は、既存のＪＰＥＧデータを再生可能な装置で、ＳＤＲ静止画データを利用できることである。すなわち、ＪＰＥＧ  ＸＴにより、既存のＪＰＥＧデータを再生可能な装置でＳＤＲ静止画データを再生することが可能となる。
【００７３】
一方、ＪＰＥＧ  ＸＴによるＨＤＲ静止画を再生する場合、表示装置または印刷装置において、ＨＤＲ静止画生成用の差分データとＳＤＲ静止画データとを組み合わせて再生しなければならない。そのためには、通常のＨＤＲ表示機能とは異なるＪＰＥＧ  ＸＴのＨＤＲ静止画ファイルフォーマットに対応した特殊な処理が、表示装置または印刷装置において必要となる。すなわち、ＪＰＥＧ  ＸＴの問題点は、既存のＨＤＲＴＶ（例えば、図１４に示すＨＤＲ表示装置３０、等）において、ＪＰＥＧ  ＸＴのＨＤＲ静止画生成用の差分データを含むデータを再生することができないことである。すなわち、既存の表示装置または印刷装置では、ＪＰＥＧ  ＸＴに含まれたＳＤＲ静止画ファイルしか再生することができない。このように、ＪＰＥＧ  ＸＴのＨＤＲ静止画は、ＪＰＥＧ  ＸＴのＨＤＲ静止画ファイルフォーマットの再生に対応した表示装置（すなわち、通常のＨＤＲ表示機能とは異なるＪＰＥＧ  ＸＴのＨＤＲ静止画ファイルフォーマットを再生するための特殊な処理が可能な表示装置、例えば、図１４に示すＨＤＲ表示装置６０、等）でしか再生（表示）することができない。また、ＪＰＥＧ  ＸＴを生成するためには、撮像装置（例えば、ＨＤＲ撮像装置１０Ｃ）においても、ＪＰＥＧ  ＸＴ圧縮処理のような特殊な処理を実行する機能（例えば、ＪＰＥＧ  ＸＴ圧縮部１３Ｂ）が必要となる。また、ＪＰＥＧ  ＸＴに含まれた、既存の表示装置および印刷装置に対して互換性を有するＳＤＲ静止画データ（ＪＰＥＧデータ）を、画像編集ソフト等で編集した場合、ＨＤＲ静止画生成用の差分データが消失する可能性がある。さらに、ＪＰＥＧ  ＸＴに含まれるＨＤＲ静止画生成用の差分データは、差分形式のデータのため、ＨＤＲ写真としての編集が困難である。さらに、画像編集ソフト等でＪＰＥＧ  ＸＴに含まれるＳＤＲ静止画データを編集すると、ＪＰＥＧ  ＸＴのＨＤＲ静止画ファイルフォーマットの再生に対応した表示装置（例えば、図１４に示すＨＤＲ表示装置６０、等）において、ＨＤＲ静止画生成用の差分データをＳＤＲ静止画データと組み合わせて再生することができなくなる可能性がある。
【００７４】
以上のように、ＪＰＥＧ  ＸＴは、解決すべき問題が多く、ＨＤＲ撮像装置およびＨＤＲ表示装置ではあまり使用されていない。
【００７５】
これらのことから、ＳＤＲ静止画データおよびＨＤＲ静止画データの２種類の静止画データを容易に扱うためのデータフォーマットが必要とされている。
【００７６】
以下に説明する画像処理装置は、そのようなデータフォーマットを生成するためのものである。
【００７７】
以下、適宜図面を参照しながら、実施の形態を詳細に説明する。ただし、必要以上に詳細な説明は省略する場合がある。例えば、すでによく知られた事項の詳細説明、および実質的に同一の構成に対する重複説明等を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。
【００７８】
なお、添付図面および以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより特許請求の範囲に記載の主題を限定することは意図されていない。
【００７９】
また、各図は、必ずしも厳密に図示されたものではなく、本開示をわかりやすく示すために適宜省略等を行った模式図である。また、各図において、実質的に同じ構成要素については同じ符号を付し、説明を省略または簡略化する場合がある。
【００８０】
（１．実施の形態１）
図１５は、実施の形態１における画像処理装置１００の構成の一例を模式的に示すブロック図である。
【００８１】
画像処理装置１００は、取得部１１０と、生成部１２０と、出力部１３０と、を備える。画像処理装置１００は、撮像装置に組み込まれていてもよいし、単独の装置として実現されてもよい。
【００８２】
取得部１１０は、イメージセンサ等の撮像部（図示せず）で撮像が行われることにより得られた静止画データを取得する。このとき、暗い輝度から明るい輝度までの広い範囲（レンジ）の明るさを含むように撮像が行われることで、静止画データは、例えば０から１０，０００ｎｉｔまでの輝度を含むＨＤＲ画像のデータとして生成される。取得部１１０は、例えば、所定のプログラム（上述の各処理を実行するように作成されたプログラム）を実行するプロセッサおよび所定のプログラムを格納しているメモリにより実現されてもよい。また、取得部１１０は、上述の各処理を実行する専用回路により実現されてもよい。
【００８３】
生成部１２０は、取得部１１０に取得された静止画データを用いて、論理的に１つのデータ単位を生成する。本実施の形態において、論理的に１つのデータ単位とは、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データおよび第２静止画データを含んで構成される１つのデータのことである。
【００８４】
ここで、論理的に１つのデータ単位の具体例について、図１６〜図１９を用いて説明する。
【００８５】
図１６は、論理的に１つのデータ単位Ｄ１０が２種類の静止画データ（第１静止画データＤ１２および第２静止画データＤ１３）を含む１つのファイルＦ１０を備えて構成される場合の一例を模式的に示す図である。
【００８６】
図１７は、管理データＤ１１に含まれる情報の一例を模式的に示す図である。
【００８７】
図１８は、第１静止画データＤ１２の静止画を構成する各画素の輝度値と、各輝度値の画素の数との関係の一例をヒストグラムとして示す図である。
【００８８】
図１９は、第１静止画データＤ１２の静止画を構成する各画素の輝度値と、各輝度値の画素の数との関係の他の一例をヒストグラムとして示す図である。
【００８９】
なお、図１８、図１９において、横軸は輝度値を表し、縦軸は画素の数を表す。
【００９０】
図２０は、論理的に１つのデータ単位Ｄ２０が２つのファイル（第１静止画ファイルＦ２１および第２静止画ファイルＦ２２）を備えて構成される場合の一例を模式的に示す図である。図２０に示す例では、第１静止画ファイルＦ２１は第１静止画データＤ２２を含み、第２静止画ファイルＦ２２は第２静止画データＤ２４を含む。
【００９１】
図２１は、論理的に１つのデータ単位Ｄ３０が２つのファイル（第１静止画ファイルＦ３２および第２静止画ファイルＦ３３）を備えて構成される場合の他の一例を模式的に示す図である。図２１に示す例では、第１静止画ファイルＦ３２は第１静止画データＤ３２を含み、第２静止画ファイルＦ３３は第２静止画データＤ３３を含む。
【００９２】
生成部１２０は、論理的に１つのデータ単位を生成する。生成部１２０は、例えば、図１６に例示するように、第１静止画データＤ１２および第２静止画データＤ１３を含む１つのファイルＦ１０をデータ単位Ｄ１０として生成してもよい。この場合、生成部１２０により生成されるデータ単位Ｄ１０は、１つのファイルＦ１０で構成される。ファイルＦ１０は、管理データＤ１１、第１静止画データＤ１２および第２静止画データＤ１３を含む。第１静止画データＤ１２は、例えばＨＤＲの画像データであり、第２静止画データＤ１３は、例えばＳＤＲの画像データである。ファイルＦ１０のファイル名は、例えば、「ＤＳＣ０００１．ＨＤＲ」である。また、生成部１２０は、図１６に示すデータ単位Ｄ１０に、さらに補助情報（図１７参照）を付加してもよい。補助情報は、第１静止画データＤ１２を再生することによって、第２静止画データＤ１３を再生する場合よりも高品位な画像を再生できることを示す情報を含んでいてもよい。
【００９３】
管理データＤ１１は、第１静止画データＤ１２および第２静止画データＤ１３を管理するデータである。管理データＤ１１は、図１７に例示するように、日付情報、サイズ情報、第１格納アドレス、第２格納アドレス、および補助情報を含む。
【００９４】
日付情報は、第１静止画データＤ１２の元となる静止画および第２静止画データＤ１３の元となる静止画が撮像された日付を示す情報である。サイズ情報は、第１静止画データＤ１２による静止画のサイズ（解像度）および第２静止画データＤ１３による静止画のサイズ（解像度）を示す情報である。第１格納アドレスは、ファイルＦ１０において第１静止画データＤ１２が格納されているアドレスを示す情報である。第２格納アドレスは、ファイルＦ１０において第２静止画データＤ１３が格納されているアドレスを示す情報である。
【００９５】
ここで、補助情報について図１８および図１９を用いて説明する。
【００９６】
補助情報は、第１静止画データＤ１２による静止画の輝度が高輝度領域を優先しているか否かを示す輝度領域情報を含んでいてもよい。例えば、図１８に示すように、輝度値が高輝度領域に多く分布しているＨＤＲ静止画の場合、生成部１２０は、高輝度領域に輝度値が多く分布していることを示す輝度領域情報を補助情報として含む管理データＤ１１を生成してもよい。
【００９７】
また、補助情報は、第１静止画データＤ１２による静止画の輝度が低輝度領域を優先している否かを示す輝度領域情報を含んでいてもよい。例えば、図１９に示すように、輝度値が低輝度領域に多く分布しているＨＤＲ静止画の場合、生成部１２０は、低輝度領域に輝度値が多く分布していることを示す輝度領域情報を補助情報として含む管理データＤ１１を生成してもよい。
【００９８】
なお、高輝度領域は、低輝度領域よりも輝度が高い領域である。高輝度領域と低輝度領域とは、互いに重複しないように設定されてもよいし、互いに重複する領域を含むように設定されてもよい。高輝度領域は、例えば、ＳＤＲの最高輝度値よりも高い輝度の領域として設定されてもよい。低輝度領域は、例えば、ＳＤＲの最高輝度値以下の輝度の領域として設定されてもよい。
【００９９】
生成部１２０は、第１静止画データＤ１２を解析することで、第１静止画データＤ１２による静止画に関して、その静止画を構成する全ての画素数に対して、輝度値が高い方から（または輝度値が低い方から）所定の割合以上の画素数が占める輝度領域を特定し、当該輝度領域を示す輝度領域情報を補助情報として含む管理データＤ１１を生成してもよい。また、輝度領域情報は、ユーザにより設定された情報であってもよい。
【０１００】
また、生成部１２０は、図２０に例示するように、第１静止画データＤ２２を含む１つの第１静止画ファイルＦ２１と、第２静止画データＤ２４を含み、かつ、ファイル名のボディ（拡張子を除くファイル名）が第１静止画ファイルＦ２１と同じ第２静止画ファイルＦ２２とにより構成されるオブジェクトを、データ単位Ｄ２０として生成してもよい。この場合、生成部１２０により生成されるデータ単位Ｄ２０は、第１静止画ファイルＦ２１および第２静止画ファイルＦ２２の２つのファイルを含んで構成される。
【０１０１】
第１静止画ファイルＦ２１は、第１管理データＤ２１および第１静止画データＤ２２を含む。また、第１静止画ファイルＦ２１のファイル名は、例えば、「ＤＳＣ０００２．ＨＤＲ」である。第２静止画ファイルＦ２２は、第２管理データＤ２３および第２静止画データＤ２４を含む。また、第２静止画ファイルＦ２２のファイル名は、例えば、「ＤＳＣ０００２．ＪＰＧ」である。このように、第１静止画ファイルＦ２１のファイル名のボディ（拡張子を除くファイル名）と、第２静止画ファイルＦ２２のファイル名のボディ（拡張子を除くファイル名）とは、ともに「ＤＳＣ０００２」であり互いに同じである。
【０１０２】
なお、第１静止画データＤ２２は、第１静止画データＤ１２と同様に、ＨＤＲの画像データである。第２静止画データＤ２４は、第２静止画データＤ１３と同様に、ＳＤＲの画像データである。
【０１０３】
第１管理データＤ２１は、図１７に示した管理データＤ１１から第２格納アドレスを除いた情報により構成される。第２管理データＤ２３は、図１７に示した管理データＤ１１から第１格納アドレスを除いた情報により構成される。
【０１０４】
なお、図２０では、第１静止画ファイルＦ２１に第１管理データＤ２１が含まれ、第２静止画ファイルＦ２２に第２管理データＤ２３が含まれる構成例を説明したが、本開示は何らこの構成例に限定されない。例えば、生成部１２０は、図２１に例示するように、第１静止画データＤ３２を含む１つの第１静止画ファイルＦ３２と、第２静止画データＤ３３を含み、かつ、ファイル名のボディ（拡張子を除くファイル名）が第１静止画ファイルＦ３２と同じ第２静止画ファイルＦ３３と、管理データＤ３１を含み、かつ、ファイル名のボディ（拡張子を除くファイル名）が第１静止画ファイルＦ３２と同じ管理ファイルＦ３１と、により構成されるオブジェクトを、データ単位Ｄ３０として生成してもよい。この場合、生成部１２０により生成されるデータ単位Ｄ３０は、管理ファイルＦ３１、第１静止画ファイルＦ３２および第２静止画ファイルＦ３３の３つのファイルを含んで構成される。
【０１０５】
管理ファイルＦ３１は、管理データＤ３１を含む。管理ファイルＦ３１のファイル名は、例えば、「ＤＳＣ０００３．ＩＮＦＯ」である。第１静止画ファイルＦ３２は、第１静止画データＤ３２を含む。第１静止画ファイルＦ３２のファイル名は、例えば、「ＤＳＣ０００３．ＨＤＲ」である。第２静止画ファイルＦ３３は、第２静止画データＤ３３を含む。第２静止画ファイルＦ３３のファイル名は、例えば、「ＤＳＣ０００３．ＪＰＧ」である。このように、管理ファイルＦ３１のファイル名のボディ（拡張子を除くファイル名）と、第１静止画ファイルＦ３２のファイル名のボディ（拡張子を除くファイル名）と、第２静止画ファイルＦ３３のファイル名のボディ（拡張子を除くファイル名）とは、ともに「ＤＳＣ０００３」であり互いに同じである。
【０１０６】
管理データＤ３１は、図１７に示した管理データＤ１１と実質的に同じである。また、第１静止画データＤ３２は、第１静止画データＤ１２と同様に、ＨＤＲの画像データである。第２静止画データＤ３３は、第２静止画データＤ１３と同様に、ＳＤＲの画像データである。
【０１０７】
図１５に示す出力部１３０は、生成部１２０によって生成されたデータ単位を出力する。
【０１０８】
図２２は、実施の形態１における生成部１２０の構成の一例を模式的に示すブロック図である。
【０１０９】
生成部１２０は、ＨＤＲ画像処理部１２１と、変換部１２３と、フォーマット部１２５と、を有する。生成部１２０は、図２２に破線で示すように、さらに、ＨＤＲ画像圧縮部１２２およびＳＤＲ画像圧縮部１２４の少なくとも一方を有していてもよい。言い換えると、生成部１２０は、ＨＤＲ画像圧縮部１２２およびＳＤＲ画像圧縮部１２４の少なくとも一方を有していない構成であってもよい。
【０１１０】
ＨＤＲ画像処理部１２１は、取得部１１０により取得された静止画データ（例えば、ＲＡＷデータ）に対してＨＤＲ−ＥＯＴＦを用いて１０ビット画像への変換（ＨＤＲ画像処理）を行うことにより、その静止画データを、ＨＤＲ表示用のダイナミックレンジを有するＨＤＲ静止画データに変換する。ＨＤＲ画像処理部１２１は、非圧縮のＨＤＲ静止画データを出力する。
【０１１１】
ＨＤＲ画像圧縮部１２２は、ＨＤＲ画像処理部１２１から出力された非圧縮のＨＤＲ静止画データを圧縮し、圧縮されたＨＤＲ静止画データを生成する。ＨＤＲ画像圧縮部１２２は、圧縮されたＨＤＲ静止画データをフォーマット部１２５に出力する。
【０１１２】
変換部１２３は、非圧縮のＨＤＲ静止画データをＳＤＲ変換し、非圧縮のＳＤＲ静止画データを生成する。
【０１１３】
ＳＤＲ画像圧縮部１２４は、変換部１２３から出力された非圧縮のＳＤＲ静止画データを圧縮し、圧縮されたＳＤＲ静止画データを生成する。ＳＤＲ画像圧縮部１２４は、圧縮されたＳＤＲ静止画データをフォーマット部１２５に出力する。
【０１１４】
フォーマット部１２５は、ＨＤＲ画像圧縮部１２２で圧縮されたＨＤＲ静止画データと、ＳＤＲ画像圧縮部１２４で圧縮されたＳＤＲ静止画データとを含む論理的に１つのデータ単位を生成し、生成したデータ単位を出力部１３０に出力する。
【０１１５】
なお、静止画データには、その静止画データの元となる画像が撮像されたときの撮像に関する情報（以下、撮像情報という）が含まれていてもよい。撮像情報は、例えば、撮像装置であるカメラの絞り値、シャッター速度、ＩＳＯ（Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｏｒｇａｎｉｚａｔｉｏｎ  ｆｏｒ  Ｓｔａｎｄａｒｄｉｚａｔｉｏｎ）感度、ピクチャーコントロール、等を示す情報を含む。生成部１２０は、撮像情報を用いて、生成部１２０を構成する機能ブロックによる各処理を行ってもよい。
【０１１６】
なお、図２２には、生成部１２０が変換部１２３を有する構成例を示したが、本開示はこの構成例に限定されない。画像処理装置１００は、例えば、生成部１２０に代えて、生成部１２０Ａを備えていてもよい。生成部１２０Ａは、変換部１２３の代わりにＳＤＲ画像処理部１２３Ａを有する点が、生成部１２０と異なる。
【０１１７】
図２３は、実施の形態１における生成部１２０Ａの構成の一例を模式的に示すブロック図である。
【０１１８】
なお、生成部１２０Ａは、生成部１２０と比較して、ＳＤＲ画像処理部１２３Ａの構成のみが異なる。そのため、以下では、ＳＤＲ画像処理部１２３Ａの説明のみを行う。
【０１１９】
ＳＤＲ画像処理部１２３Ａは、取得部１１０により取得された静止画データ（例えば、ＲＡＷデータ）に対してＳＤＲ−ＥＯＴＦ（ＳＤＲ−Ｅｌｅｃｔｒｏ−Ｏｐｔｉｃａｌ  Ｔｒａｎｓｆｅｒ  Ｆｕｎｃｔｉｏｎ）を用いて８ビット画像への変換（ＳＤＲ画像処理）を行うことにより、その静止画データを、ＳＤＲ表示用のダイナミックレンジを有するＳＤＲ静止画データに変換する。ＳＤＲ画像処理部１２３Ａは、非圧縮のＨＤＲ静止画データを出力する。
【０１２０】
ＳＤＲ画像圧縮部１２４は、ＳＤＲ画像処理部１２３Ａから出力された非圧縮のＳＤＲ静止画データを圧縮し、圧縮されたＳＤＲ静止画データを生成する。
【０１２１】
生成部１２０Ａも、生成部１２０と同様に、撮像情報を用いて、生成部１２０Ａを構成する機能ブロックによる各処理を行ってもよい。
【０１２２】
図２４は、実施の形態１における画像処理装置１００の画像処理に係る動作の一例を示すフローチャートである。
【０１２３】
画像処理装置１００の取得部１１０は、静止画データを取得する（ステップＳ１０１）。
【０１２４】
生成部１２０は、ステップＳ１０１で取得部１１０により取得された静止画データを用いて、論理的に１つのデータ単位を生成する（ステップＳ１０２）。論理的に１つのデータ単位は、輝度のダイナミックレンジが互いに異なり、かつ、互い独立して再生可能なＨＤＲ静止画データとＳＤＲ静止画データとを含む。
【０１２５】
出力部１３０は、ステップＳ１０２で生成部１２０により生成された論理的に１つのデータ単位を出力する（ステップＳ１０３）。
【０１２６】
なお、ステップＳ１０２の生成処理に関しては、図２２に示した生成部１２０で行われる処理と、図２３に示した生成部１２０Ａで行われる処理とで差異がある。以下、その差異を、フローチャートを用いて説明する。
【０１２７】
図２５は、実施の形態１における生成部１２０による生成処理の一例を示すフローチャートである。
【０１２８】
ＨＤＲ画像処理部１２１は、ステップＳ１０１で取得された静止画データに対して所定の画像処理を行うことにより、その静止画データをＨＤＲ静止画データに変換する（ステップＳ１１１）。ＨＤＲ画像処理部１２１は、そのＨＤＲ静止画データ（非圧縮のＨＤＲ静止画データ）を出力する。
【０１２９】
ＨＤＲ画像圧縮部１２２は、ステップＳ１１１でＨＤＲ画像処理部１２１から出力された非圧縮のＨＤＲ静止画データを圧縮する（ステップＳ１１２）。なお、ステップＳ１１２の処理は行われなくてもよい。したがって、図２５では、ステップＳ１１２を破線で示す。
【０１３０】
変換部１２３は、ステップＳ１１１でＨＤＲ画像処理部１２１から出力された非圧縮のＨＤＲ静止画データをＳＤＲ変換する（ステップＳ１１３）。変換部１２３は、ＳＤＲ変換により得られた非圧縮のＳＤＲ静止画データを出力する。
【０１３１】
ＳＤＲ画像圧縮部１２４は、ステップＳ１１３で変換部１２３から出力された非圧縮のＳＤＲ静止画データを圧縮する（ステップＳ１１４）。なお、ステップＳ１１４の処理は行われなくてもよい。したがって、図２５では、ステップＳ１１４を破線で示す。
【０１３２】
フォーマット部１２５は、ステップＳ１１２でＨＤＲ画像圧縮部１２２により生成された圧縮されたＨＤＲ静止画データ（または、ステップＳ１１１でＨＤＲ画像処理部１２１から出力された非圧縮のＨＤＲ静止画データ）と、ステップＳ１１４でＳＤＲ画像圧縮部１２４により生成された圧縮されたＳＤＲ静止画データ（または、ステップＳ１１３で変換部１２３から出力された非圧縮のＳＤＲ静止画データ）と、を含む論理的に１つのデータ単位を生成する（ステップＳ１１５）。
【０１３３】
なお、上述したように、生成部１２０で実行される図２５に示したフローチャートにおいて、ステップＳ１１２の処理およびステップＳ１１４の処理の少なくとも一方は行われなくてもよい。
【０１３４】
図２６は、実施の形態１における生成部１２０Ａによる生成処理の一例を示すフローチャートである。
【０１３５】
なお、図２６のフローチャートに示す生成処理は、図２５のフローチャートに示した生成処理と比較して、ステップＳ１１３の代わりにステップＳ１１３Ａを行う点のみが異なる。そのため、以下では、ステップＳ１１３Ａについてのみ説明する。
【０１３６】
生成部１２０ＡのＳＤＲ画像処理部１２３Ａは、ステップＳ１０１で取得された静止画データに対して所定の画像処理を行うことにより、その静止画データをＳＤＲ静止画データに変換する（ステップＳ１１３Ａ）。ＳＤＲ画像処理部１２３Ａは、そのＳＤＲ静止画データ（非圧縮のＳＤＲ静止画データ）を出力する。
【０１３７】
ステップＳ１１３Ａの後は、図２５に示したフローチャートと同様に、ステップＳ１１４またはステップＳ１１５が行われる。
【０１３８】
次に、画像処理装置１００を含むＨＤＲ撮像装置による動作の具体例について説明する。なお、以下では、すでに説明した構成要素にはその構成要素と同じ符号を付し、その構成要素の説明を省略している。
【０１３９】
（１−１−１．実施例１）
図２７は、実施の形態１における実施例１を説明するための図である。実施例１には、マルチピクチャーフォーマット方式を用いて、ＨＤＲ静止画データとＳＤＲ静止画データとを含む１つのファイルを生成する構成例を示す。
【０１４０】
実施例１におけるＨＤＲ撮像装置１０Ｄは、マルチピクチャーフォーマット方式を用いて、ＨＤＲ静止画データとＳＤＲ静止画データとを含む１つのファイルを生成してもよい。図２７に示すように、ＨＤＲ撮像装置１０Ｄは、ＨＤＲ撮像部１１、変換部１２、ＪＰＥＧ圧縮部１３、マルチピクチャーフォーマット生成部１３Ｃ、ＳＤＲ撮像部１４、およびＨＤＲ画像補正部１５を備える。ＨＤＲ撮像装置１０Ｄが備える各構成要素のうち、変換部１２、ＪＰＥＧ圧縮部１３、マルチピクチャーフォーマット生成部１３ＣおよびＨＤＲ画像補正部１５は、図１５および図２２を用いて説明した画像処理装置１００の生成部１２０および出力部１３０に対応している。
【０１４１】
ＨＤＲ撮像部１１は、ＨＤＲ撮影モードで撮像を行うことで、ＨＤＲ画像（ＨＤＲ静止画）を生成する。ＨＤＲ撮像部１１は、例えば、レンズ、イメージセンサ、プロセッサ、メモリ、等により実現される。
【０１４２】
変換部１２は、画像処理装置１００の生成部１２０の変換部１２３（図２２参照）に対応する処理部である。変換部１２は、ＨＤＲ撮像部１１から出力された非圧縮のＨＤＲ静止画データをＳＤＲ変換することで、非圧縮のＳＤＲ静止画データを生成する。変換部１２は、生成した非圧縮のＳＤＲ静止画データをＪＰＥＧ圧縮部１３に出力する。変換部１２は、例えば、プロセッサ、メモリ、等により実現される。
【０１４３】
ＪＰＥＧ圧縮部１３は、画像処理装置１００の生成部１２０のＳＤＲ画像圧縮部１２４（図２２参照）に対応する処理部である。ＪＰＥＧ圧縮部１３は、入力された非圧縮のＳＤＲ静止画データをＪＰＥＧ圧縮することで、圧縮されたＳＤＲ静止画データを生成する。ＪＰＥＧ圧縮部１３は、例えば、プロセッサ、メモリ、等により実現される。
【０１４４】
ＨＤＲ画像補正部１５は、画像処理装置１００の生成部１２０のＨＤＲ画像処理部１２１（図２２参照）に対応する処理部である。ＨＤＲ画像補正部１５は、ＨＤＲ撮像部１１から取得されるＲＡＷデータから、ＨＤＲ表示装置３０およびＨＤＲ表示装置６１等のＨＤＲＴＶで表示可能な非圧縮のＨＤＲ静止画データを生成する。ＨＤＲ画像補正部１５は、例えば、プロセッサ、メモリ、等により実現される。
【０１４５】
マルチピクチャーフォーマット生成部１３Ｃは、画像処理装置１００の、生成部１２０のフォーマット部１２５（図２２参照）、および出力部１３０（図１５参照）に対応する処理部である。マルチピクチャーフォーマット生成部１３Ｃは、マルチピクチャーフォーマット方式で、非圧縮のＨＤＲ静止画データと、ＪＰＥＧ圧縮されたＳＤＲ静止画データと、を１つのファイルに格納して、ＨＤＲ静止画ファイルフォーマットのＨＤＲ静止画ファイル（ＪＰＥＧ  ＭＰＦ）Ｆ１００を生成する。そして、マルチピクチャーフォーマット生成部１３Ｃは、生成したＨＤＲ静止画ファイルＦ１００を出力する。マルチピクチャーフォーマット生成部１３Ｃでは、ＨＤＲ静止画ファイルＦ１００を生成する際に、変換部１２から出力されたＳＤＲ静止画データを用いてＪＰＥＧ圧縮部１３で生成された圧縮されたＳＤＲ静止画データが用いられてもよく、あるいは、ＳＤＲ撮像部１４において撮像が行われることで得られたＳＤＲ静止画データを用いてＪＰＥＧ圧縮部１３で生成された圧縮されたＳＤＲ静止画データが用いられてもよい。
【０１４６】
マルチピクチャーフォーマット生成部１３Ｃによって生成されるＨＤＲ静止画ファイルＦ１００の構成は、例えば、図１６に示したデータ単位Ｄ１０のファイルＦ１０の構成に対応する。マルチピクチャーフォーマット生成部１３Ｃは、例えば、プロセッサ、メモリ、等により実現される。
【０１４７】
ＳＤＲ撮像部１４は、従来の撮影モード（ＳＤＲ撮影モード）で撮像を行うことで、ＳＤＲ画像（ＳＤＲ静止画）を生成する。ＳＤＲ撮像部１４は、例えば、レンズ、イメージセンサ、プロセッサ、メモリ、等により実現される。
【０１４８】
なお、上述の各処理部は、プロセッサおよびメモリに代えて、上述の各処理を実行する専用回路により実現されてもよい。
【０１４９】
ＨＤＲ静止画ファイルＦ１００には、ＳＤＲ静止画データ（ＳＤＲ互換用のＪＰＥＧデータ）とＨＤＲ静止画データとの２つのデータが格納されている。そのＨＤＲ静止画データは、図１６に示した第１静止画データＤ１２に対応し、そのＳＤＲ静止画データは、図１６に示した第２静止画データＤ１３に対応する。そして、ＨＤＲ静止画ファイルＦ１００は、拡張子が「．ＪＰＧ」である。したがって、ＨＤＲ静止画ファイルＦ１００は、マルチピクチャーフォーマットに対応しているＨＤＲ表示装置６１だけでなく、マルチピクチャーフォーマットに対応していないＨＤＲ表示装置３０、ＳＤＲ表示装置４０およびＳＤＲ印刷装置５０においても、再生（表示または印刷）することができる。
【０１５０】
このように、実施例１の利点は、既存のＪＰＥＧファイルを再生可能な装置（例えば、ＳＤＲ表示装置４０およびＳＤＲ印刷装置５０、等）において、ＳＤＲ−ＪＰＥＧ（ＪＰＥＧ圧縮部１３で生成された、圧縮されたＳＤＲ静止画データ）の再生が可能である点である。また、実施例１の利点は、既存のＨＤＲＴＶ（例えば、ＨＤＲ表示装置３０およびＨＤＲ表示装置６１）に、ＨＤＲ静止画ファイルＦ１００を表示させるための機能を比較的容易に実装できる点である。また、実施例１の利点は、撮像装置においても、ＨＤＲ専用処理の実現が比較的容易な点である。
【０１５１】
なお、実施例１では、ＨＤＲ静止画ファイルＦ１００の拡張子を「．ＪＰＧ」とする構成例を説明したが、本開示はこの構成例に限定されない。例えば、新たな拡張子を持つマルチピクチャーフォーマット方式のファイルが生成されてもよい。上述したように、「．ＪＰＧ」の拡張子を有しＪＰＥＧファイルを編集できる画像編集ソフトで編集可能なファイルからは、その画像編集ソフトによってＨＤＲ静止画データが削除される可能性がある。しかし、新たな拡張子を持つファイルは、そのファイル内に格納されるＨＤＲ静止画データおよびＳＤＲ静止画データの２つのデータに対して、その拡張子を有するファイルを編集できる専用の画像編集ソフトでしか編集できないため、ＨＤＲ静止画データが削除される可能性が低減される。新たな拡張子を持つマルチピクチャーフォーマット方式のファイルは、このような利点を有する。ただし、新たな拡張子を持つマルチピクチャーフォーマット方式のファイルは、既存の装置（例えば、ＳＤＲ表示装置４０およびＳＤＲ印刷装置５０、等）で再生することは困難である。
【０１５２】
（１−１−２．実施例２）
図２８は、実施の形態１における実施例２を説明するための図である。実施例２には、ＨＥＶＣ（Ｈｉｇｈ  Ｅｆｆｉｃｉｅｎｃｙ  Ｖｉｄｅｏ  ｃｏｄｉｎｇ）動画ファイル方式を用いて、ＨＤＲ静止画データとＳＤＲ静止画データとを含む１つのデータ単位を生成する構成例を示す。
【０１５３】
実施例２におけるＨＤＲ撮像装置１０Ｅは、ＨＥＶＣ動画ファイル形式のＨＤＲ静止画データと、ＳＤＲ静止画データと、を含む１つのデータ単位を生成してもよい。図２８に示すように、ＨＤＲ撮像装置１０Ｅは、ＨＤＲ撮像部１１、変換部１２、ＪＰＥＧ圧縮部１３、ＨＥＶＣ圧縮部１３Ｄ、ＳＤＲ撮像部１４、ＨＤＲ画像補正部１５Ａ、およびデータ単位生成部１７を備える。ＨＤＲ撮像装置１０Ｅが備える各構成要素のうち、変換部１２、ＪＰＥＧ圧縮部１３、ＨＥＶＣ圧縮部１３Ｄ、ＨＤＲ画像補正部１５、およびデータ単位生成部１７は、図１５および図２２を用いて説明した画像処理装置１００の生成部１２０および出力部１３０に対応している。なお、図２８に示すＨＤＲ撮像部１１、変換部１２、ＪＰＥＧ圧縮部１３、およびＳＤＲ撮像部１４は、図２７に示した同名の構成要素と実質的に同じ構成であるので説明を省略する。
【０１５４】
ＨＤＲ画像補正部１５Ａは、画像処理装置１００の生成部１２０のＨＤＲ画像処理部１２１（図２２参照）に対応する処理部である。ＨＤＲ画像補正部１５Ａは、ＨＤＲ撮像部１１から取得されるＲＡＷデータを、ＨＤＲ−ＥＯＴＦを用いてＨＤＲ表示装置３０等のＨＤＲＴＶで表示可能なＨＤＲ画像データに変換することで、非圧縮のＨＤＲ画像データを生成する。ＨＤＲ画像補正部１５Ａは、例えば、プロセッサ、メモリ、等により実現される。
【０１５５】
ＨＥＶＣ圧縮部１３Ｄは、画像処理装置１００の生成部１２０のＨＤＲ画像圧縮部１２２（図２２参照）に対応する処理部である。ＨＥＶＣ圧縮部１３Ｄは、非圧縮のＨＤＲ画像データを、ＨＥＶＣ形式の動画として圧縮する。ＨＥＶＣ圧縮部１３Ｄは、例えば、プロセッサ、メモリ、等により実現される。
【０１５６】
データ単位生成部１７は、画像処理装置１００の、生成部１２０のフォーマット部１２５（図２２参照）、および出力部１３０（図１５参照）に対応する処理部である。データ単位生成部１７は、ＨＥＶＣ動画形式に圧縮されたＨＤＲ静止画データを含むＨＤＲ静止画ファイルＦ１１０と、ＪＰＥＧ圧縮されたＳＤＲ静止画データを含むＳＤＲ静止画ファイルＦ１２０と、を含んで構成され、かつ、それぞれのファイル名のボディ（拡張子を除くファイル名）が互いに共通するオブジェクトを、データ単位Ｄ２００として生成する。そして、データ単位生成部１７は、生成したデータ単位Ｄ２００を出力する。
【０１５７】
なお、データ単位生成部１７では、データ単位Ｄ２００の生成に、変換部１２から出力されたＳＤＲ静止画データを用いてＪＰＥＧ圧縮部１３で生成された圧縮されたＳＤＲ静止画データが用いられてもよく、あるいは、ＳＤＲ撮像部１４において撮像が行われることで得られたＳＤＲ静止画データを用いてＪＰＥＧ圧縮部１３で生成された圧縮されたＳＤＲ静止画データが用いられてもよい。
【０１５８】
データ単位生成部１７によって生成されるデータ単位Ｄ２００の構成は、例えば、図２０に示したデータ単位Ｄ２０の構成に対応する。データ単位生成部１７は、例えば、プロセッサ、メモリ、等により実現される。
【０１５９】
なお、上述の各処理部は、プロセッサおよびメモリに代えて、上述の各処理を実行する専用回路により実現されてもよい。
【０１６０】
実施例２の利点は、ＨＤＲ静止画データがＨＥＶＣ動画形式のファイルとなるため、既存の装置（例えば、ＨＤＲ表示装置３０、等）で表示することができる点である。また、撮像装置は、ＨＥＶＣ動画形式による記録機能があれば、実施例２に示した構成を比較的容易に実現できる。
【０１６１】
（１−１−３．実施例３）
図２９は、実施の形態１における実施例３を説明するための図である。実施例３には、ＴＩＦＦ（Ｔａｇｇｅｄ  Ｉｍａｇｅ  Ｆｉｌｅ  Ｆｏｒｍａｔ）形式を用いて、ＨＤＲ静止画データとＳＤＲ静止画データとを含む１つのデータ単位を生成する構成例を示す。
【０１６２】
実施例３におけるＨＤＲ撮像装置１０Ｆは、非圧縮のＴＩＦＦ形式のＨＤＲ静止画データと、非圧縮のＴＩＦＦ形式のＳＤＲ静止画データと、を含む１つのデータ単位を生成してもよい。図２９に示すように、ＨＤＲ撮像装置１０Ｆは、ＨＤＲ撮像部１１、変換部１２、ＪＰＥＧ圧縮部１３、ＳＤＲ撮像部１４、ＨＤＲ画像補正部１５Ｂ、およびＴＩＦＦ出力部１７Ａを備える。ＨＤＲ撮像装置１０Ｆが備える各構成要素のうち、変換部１２、ＨＤＲ画像補正部１５Ｂ、およびＴＩＦＦ出力部１７Ａは、図１５および図２２を用いて説明した画像処理装置１００の生成部１２０および出力部１３０に対応している。なお、図２９に示すＨＤＲ撮像部１１、変換部１２、ＪＰＥＧ圧縮部１３、およびＳＤＲ撮像部１４は、図２７に示した同名の構成要素と実質的に同じ構成であるので説明を省略する。
【０１６３】
ＨＤＲ画像補正部１５Ｂは、画像処理装置１００の生成部１２０のＨＤＲ画像処理部１２１（図２２参照）に対応する処理部である。ＨＤＲ画像補正部１５Ｂは、ＨＤＲ撮像部１１から取得されるＲＡＷデータを、ＨＤＲ表示装置６２等のＨＤＲＴＶ（ＨＬＧ（Ｈｙｂｒｉｄ  Ｌｏｇ−Ｇａｍｍａ）対応の表示装置）で表示可能な、ＨＤＲ−ＯＥＴＦ（ＨＬＧ）の１６／１２ビット画像（ＨＤＲ静止画データ）に変換する。これにより、ＴＩＦＦ形式のデータを再生可能な再生装置（例えば、ＨＤＲ表示装置６２）であれば、ＨＬＧデータはＳＤＲ互換があるため、そのＨＤＲ静止画データをそのまま再生できる。ＨＤＲ画像補正部１５Ｂは、例えば、プロセッサ、メモリ、等により実現される。
【０１６４】
ＴＩＦＦ出力部１７Ａは、画像処理装置１００の、生成部１２０のフォーマット部１２５（図２２参照）、および出力部１３０（図１５参照）に対応する処理部である。ＴＩＦＦ出力部１７Ａは、ＨＤＲ静止画データを含むＴＩＦＦ静止画ファイルＦ２１０と、ＳＤＲ静止画データを含むＴＩＦＦ静止画ファイルＦ２２０とを、ＴＩＦＦファイル形式で１つのデータ単位Ｄ３００として生成し、生成したデータ単位Ｄ３００を出力する。
【０１６５】
なお、ＴＩＦＦ出力部１７Ａは、ＨＤＲ静止画データとＳＤＲ静止画データとの２つのデータをそれぞれＴＩＦＦファイルに格納する際に、ＴＩＦＦのタグとして、ＨＤＲタグ（ＳＤＲ、ＨＤＲ（ＨＬＧ（Ｓｙｓｔｅｍ  Ｇａｍｍａ  １．２））、ＨＤＲ（ＰＱ）を識別するもの）および色空間タグ（ｓＲＧＢ、Ａｄｏｂｅ  ＲＧＢ、ｂｔ．２０２０を識別するもの）をつけたものをファイルフォーマットとして用いてもよい。ＴＩＦＦ出力部１７Ａは、データ単位Ｄ３００の生成に、変換部１２から出力されたＳＤＲ静止画データが用いられてもよく、あるいは、ＳＤＲ撮像部１４において撮像が行われることで得られたＳＤＲ静止画データが用いられてもよい。
【０１６６】
ＴＩＦＦ出力部１７Ａによって生成されるデータ単位Ｄ３００の構成は、例えば、図２０に示したデータ単位Ｄ２０の構成に対応する。ＴＩＦＦ出力部１７Ａは、例えば、プロセッサ、メモリ、等により実現される。
【０１６７】
なお、従来の装置（例えば、ＳＤＲ表示装置４０、ＳＤＲ印刷装置５０、または既存のＨＤＲ表示装置３０、等）では、実施例３に示すフォーマットのデータは扱えない。このため、ＨＤＲ撮像装置１０Ｆでは、変換部１２においてＨＤＲ静止画データがＳＤＲ変換され、その変換により得られたＳＤＲ静止画データがＪＰＥＧ圧縮部１３によりＪＰＥＧ圧縮されて生成された圧縮されたＳＤＲ静止画データが、別ファイルとして同時に生成（記録）されてもよい。
【０１６８】
ＴＩＦＦ形式を用いる利点は、ＨＤＲ表示装置側にＴＩＦＦ表示機能を実装するだけでＴＩＦＦファイルに対応することが可能であり、実現が容易である点である。また、撮像装置は、ＴＩＦＦ形式のファイルフォーマットでのデータ単位Ｄ３００を生成するための生成機能を付加するだけでよいので、実施例３に示した構成を比較的容易に実現できる。また、このような新ファイルフォーマットに対応した装置（例えば、ＨＤＲ表示装置６２またはＳＤＲ印刷装置６３、等）では、データ単位Ｄ３００中のＴＩＦＦ静止画ファイルＦ２１０あるいはＴＩＦＦ静止画ファイルＦ２２０のいずれも再生可能である。また、ＴＩＦＦ対応のＨＤＲＴＶ（例えば、ＨＤＲ表示装置６２、等）は、ＨＬＧのＨＤＲ静止画データと、ｂｔ．２０２０で定義される広い色域のＳＤＲ静止画データとのいずれも表示することができる。
【０１６９】
なお、上述の各処理部は、プロセッサおよびメモリに代えて、上述の各処理を実行する専用回路により実現されてもよい。
【０１７０】
（１−１−４．実施例４）
図３０は、実施の形態１における実施例４を説明するための図である。実施例４には、ＨＥＶＣのＩピクチャを生成する方式（Ｉピクチャの圧縮方式）を用いて、ＨＤＲ静止画データとＳＤＲ静止画データとを含む１つのデータ単位を生成する構成例を示す。
【０１７１】
実施例４におけるＨＤＲ撮像装置１０Ｇは、ＨＥＶＣのＩピクチャの圧縮方式を用いて、ＨＤＲ静止画データとＳＤＲ静止画データとを含む１つのデータ単位を生成してもよい。図３０に示すように、ＨＤＲ撮像装置１０Ｇは、ＨＤＲ撮像部１１、変換部１２、ＪＰＥＧ圧縮部１３、ＳＤＲ撮像部１４、ＨＤＲ画像補正部１５Ｂ、およびＨＥＶＣ圧縮部１７Ｂを備える。ＨＤＲ撮像装置１０Ｇが備える各構成要素のうち、変換部１２、ＨＤＲ画像補正部１５Ｂ、およびＨＥＶＣ圧縮部１７Ｂは、図１５および図２２を用いて説明した画像処理装置１００の生成部１２０および出力部１３０に対応している。なお、図３０に示すＨＤＲ撮像部１１、変換部１２、ＪＰＥＧ圧縮部１３、ＳＤＲ撮像部１４、およびＨＤＲ画像補正部１５Ｂは、図２９に示した同名の構成要素と実質的に同じ構成であるので説明を省略する。
【０１７２】
ＨＥＶＣ圧縮部１７Ｂは、画像処理装置１００の生成部１２０のＨＤＲ画像圧縮部１２２、ＳＤＲ画像圧縮部１２４、フォーマット部１２５（図２２参照）、および出力部１３０（図１５参照）に対応する処理部である。ＨＥＶＣ圧縮部１７Ｂは、ＨＤＲ画像補正部１５Ｂから出力されたＨＤＲ静止画データを、ＨＥＶＣのＩピクチャとして圧縮する。また、ＨＥＶＣ圧縮部１７Ｂは、変換部１２から出力されたＳＤＲ静止画データを、ＨＥＶＣのＩピクチャとして圧縮する。また、ＨＥＶＣ圧縮部１７Ｂは、圧縮により得られたＨＥＶＣのＩピクチャとしてのＨＤＲ静止画データを含むＨＥＶＣ−Ｉ静止画ファイルＦ３１０と、ＨＥＶＣのＩピクチャとしてのＳＤＲ静止画データを含むＨＥＶＣ−Ｉ静止画ファイルＦ３２０と、を含んで構成され、かつ、それぞれのファイル名のボディ（拡張子を除くファイル名）が互いに共通するオブジェクトを、データ単位Ｄ４００として生成する。そして、ＨＥＶＣ圧縮部１７Ｂは、生成したデータ単位Ｄ４００を出力する。
【０１７３】
なお、ＨＥＶＣ圧縮部１７Ｂは、ＨＤＲ静止画データとＳＤＲ静止画データとの２つのデータをそれぞれＨＥＶＣ−Ｉファイルに格納する際に、ＨＤＲタグ（ＳＤＲ、ＨＤＲ（ＨＬＧ（Ｓｙｓｔｅｍ  Ｇａｍｍａ  １．２））、ＨＤＲ（ＰＱ）を識別するもの）と色空間タグ（ｓＲＧＢ、Ａｄｏｂｅ  ＲＧＢ、ｂｔ．２０２０を識別するもの）をつけたものをファイルフォーマットとして用いてもよい。ＨＥＶＣ圧縮部１７Ｂは、データ単位Ｄ４００の生成に、変換部１２から出力されたＳＤＲ静止画データが用いられてもよく、あるいは、ＳＤＲ撮像部１４において撮像が行われることで得られたＳＤＲ静止画データが用いられてもよい。
【０１７４】
ＨＥＶＣ圧縮部１７Ｂによって生成されるデータ単位Ｄ４００の構成は、例えば、図２０に示したデータ単位Ｄ２０の構成に対応する。ＨＥＶＣ圧縮部１７Ｂは、例えば、プロセッサ、メモリ、等により実現される。
【０１７５】
なお、従来の装置（例えば、ＳＤＲ表示装置４０、ＳＤＲ印刷装置５０、または既存のＨＤＲ表示装置３０、等）では、実施例４に示すフォーマットのデータは扱えない。このため、ＨＤＲ撮像装置１０Ｇでは、変換部１２においてＨＤＲ静止画データがＳＤＲ変換され、その変換により得られたＳＤＲ静止画データがＪＰＥＧ圧縮部１３によりＪＰＥＧ圧縮されて生成された圧縮されたＳＤＲ静止画データが、別ファイルとして同時に生成（記録）されてもよい。
【０１７６】
また、ＨＥＶＣ圧縮部１７Ｂは、マルチピクチャーフォーマット方式で、ＨＤＲ静止画データと、ＳＤＲ静止画データとを１つのファイルに格納した、ＨＤＲ静止画ファイルフォーマットのＨＤＲ静止画ファイル（ＪＰＥＧ  ＭＰＦ）を生成してもよい。つまり、ＨＥＶＣ圧縮部１７Ｂは、図１６に示したデータ単位Ｄ１０と同様の構成のＨＤＲ静止画ファイルを生成してもよい。
【０１７７】
また、ＨＥＶＣ圧縮部１７Ｂは、マルチピクチャーフォーマット方式とは異なる、ＨＤＲ静止画データと、ＳＤＲ静止画データとを１つのファイルに格納するＨＤＲ静止画ファイルフォーマットのＨＤＲ静止画ファイルを生成してもよい。
【０１７８】
ＨＥＶＣのＩピクチャの圧縮方式を用いる利点は、既存のＨＤＲ表示装置にはＨＥＶＣデコード機能が搭載されているため、ＨＥＶＣのＩピクチャの表示または再生を比較的容易に実装可能な点である。また、４Ｋ動画の撮像に対応した撮像装置は、ＨＥＶＣ圧縮機能を搭載していることが多いため、ＨＤＲ静止画データおよびＳＤＲ静止画データをＨＥＶＣのＩピクチャとして圧縮する機能の実装を比較的容易に実現できる。また、ＨＥＶＣのＩピクチャを再生できる印刷装置（例えば、ＳＤＲ印刷装置６３、等）では、ＨＤＲのＨＥＶＣ−Ｉ静止画ファイルＦ３１０あるいはＳＤＲのＨＥＶＣ−Ｉ静止画ファイルＦ３２０のいずれも印刷することができる。また、ＨＥＶＣのＩピクチャを表示可能なＨＤＲＴＶ（例えば、ＨＤＲ表示装置６２、等）は、ＨＬＧのＨＤＲ静止画と、ｂｔ．２０２０で定義される広い色域のＳＤＲ静止画とのいずれも表示することができる。
【０１７９】
なお、上述の各処理部は、プロセッサおよびメモリに代えて、上述の各処理を実行する専用回路により実現されてもよい。
【０１８０】
（１−１−５．実施例５）
図３１は、実施の形態１における実施例５を説明するための図である。実施例５には、ＪＰＥＧ２０００で圧縮する方式を用いて、ＨＤＲ静止画データとＳＤＲ静止画データとを含む１つのデータ単位を生成する構成例を示す。
【０１８１】
実施例５におけるＨＤＲ撮像装置１０Ｈは、ＪＰＥＧ２０００の圧縮方式を用いて、ＨＤＲ静止画データとＳＤＲ静止画データとを含む１つのデータ単位を生成してもよい。図３１に示すように、ＨＤＲ撮像装置１０Ｈは、ＨＤＲ撮像部１１、変換部１２、ＪＰＥＧ圧縮部１３、ＳＤＲ撮像部１４、ＨＤＲ画像補正部１５Ｂ、およびＪＰＥＧ２０００圧縮部１７Ｃを備える。ＨＤＲ撮像装置１０Ｈが備える各構成要素のうち、変換部１２、ＨＤＲ画像補正部１５Ｂ、およびＪＰＥＧ２０００圧縮部１７Ｃは、図１５および図２２を用いて説明した画像処理装置１００の生成部１２０および出力部１３０に対応している。なお、図３１に示すＨＤＲ撮像部１１、変換部１２、ＪＰＥＧ圧縮部１３、ＳＤＲ撮像部１４、およびＨＤＲ画像補正部１５Ｂは、図２９に示した同名の構成要素と実質的に同じ構成であるので説明を省略する。
【０１８２】
ＪＰＥＧ２０００圧縮部１７Ｃは、画像処理装置１００の生成部１２０のＨＤＲ画像圧縮部１２２、ＳＤＲ画像圧縮部１２４、フォーマット部１２５（図２２参照）、および出力部１３０（図１５参照）に対応する処理部である。ＪＰＥＧ２０００圧縮部１７Ｃは、ＨＤＲ画像補正部１５Ｂから出力されたＨＤＲ静止画データを、ＪＰＥＧ２０００の方式で圧縮する。また、ＪＰＥＧ２０００圧縮部１７Ｃは、変換部１２から出力されたＳＤＲ静止画データを、ＪＰＥＧ２０００の方式で圧縮する。また、ＪＰＥＧ２０００圧縮部１７Ｃは、圧縮により得られたＪＰＥＧ２０００形式のＨＤＲ静止画データを含むＪＰＥＧ２０００静止画ファイルＦ４１０と、ＪＰＥＧ２０００形式のＳＤＲ静止画データを含むＪＰＥＧ２０００静止画ファイルＦ４２０と、を含んで構成され、かつ、それぞれのファイル名のボディ（拡張子を除くファイル名）が互いに共通するオブジェクトを、データ単位Ｄ５００として生成する。そして、ＪＰＥＧ２０００圧縮部１７Ｃは、生成したデータ単位Ｄ５００を出力する。
【０１８３】
なお、ＪＰＥＧ２０００圧縮部１７Ｃは、ＨＤＲ静止画データとＳＤＲ静止画データとの２つのデータをそれぞれＪＰＥＧ２０００ファイルとして格納する際に、ＨＤＲタグ（ＳＤＲ、ＨＤＲ（ＨＬＧ（Ｓｙｓｔｅｍ  Ｇａｍｍａ  １．２））、ＨＤＲ（ＰＱ）を識別するもの）と色空間タグ（ｓＲＧＢ、Ａｄｏｂｅ  ＲＧＢ、ｂｔ．２０２０を識別するもの）をつけたものをファイルフォーマットとして用いてもよい。ＪＰＥＧ２０００圧縮部１７Ｃは、データ単位Ｄ５００の生成に、変換部１２から出力されたＳＤＲ静止画データが用いられてもよく、あるいは、ＳＤＲ撮像部１４において撮像が行われることで得られたＳＤＲ静止画データが用いられてもよい。
【０１８４】
ＪＰＥＧ２０００圧縮部１７Ｃによって生成されるデータ単位Ｄ５００の構成は、例えば、図２０に示したデータ単位Ｄ２０の構成に対応する。ＪＰＥＧ２０００圧縮部１７Ｃは、例えば、プロセッサ、メモリ、等により実現される。
【０１８５】
なお、従来の装置（例えば、ＳＤＲ表示装置４０、ＳＤＲ印刷装置５０、または既存のＨＤＲ表示装置３０、等）では、実施例５に示すフォーマットのデータは扱えない。このため、ＨＤＲ撮像装置１０Ｈでは、変換部１２においてＨＤＲ静止画データがＳＤＲ変換され、その変換により得られたＳＤＲ静止画データがＪＰＥＧ圧縮部１３によりＪＰＥＧ圧縮されて生成された圧縮されたＳＤＲ静止画データが、別ファイルとして同時に生成（記録）されてもよい。
【０１８６】
また、ＪＰＥＧ２０００圧縮部１７Ｃは、マルチピクチャーフォーマット方式で、ＨＤＲ静止画データと、ＳＤＲ静止画データとを１つのファイルに格納した、ＨＤＲ静止画ファイルフォーマットのＨＤＲ静止画ファイル（ＪＰＥＧ  ＭＰＦ）を生成してもよい。つまり、ＪＰＥＧ２０００圧縮部１７Ｃは、図１６に示したデータ単位Ｄ１０と同様の構成のＨＤＲ静止画ファイルを生成してもよい。
【０１８７】
また、ＪＰＥＧ２０００圧縮部１７Ｃは、マルチピクチャーフォーマット方式とは異なる、ＨＤＲ静止画データと、ＳＤＲ静止画データとを１つのファイルに格納するＨＤＲ静止画ファイルフォーマットのＨＤＲ静止画ファイルを生成してもよい。
【０１８８】
ＪＰＥＧ２０００の圧縮方式を用いる利点は、既存のＨＤＲ表示装置にはＪＰＥＧ２０００に対応する機能を比較的容易に実装することが可能である点である。また、ＪＰＥＧ２０００対応のＨＤＲＴＶ（例えば、ＨＤＲ表示装置６２、等）では、ＨＤＲのＪＰＥＧ２０００静止画ファイルＦ４１０あるいはＳＤＲのＪＰＥＧ２０００静止画ファイルＦ４２０のいずれも再生できる。また、ＪＰＥＧ２０００対応のＨＤＲＴＶ（例えば、ＨＤＲ表示装置６２、等）では、ＨＬＧのＨＤＲ静止画と、ｂｔ．２０２０で定義される広い色域のＳＤＲ静止画とのいずれも表示することができる。
【０１８９】
なお、上述の各処理部は、プロセッサおよびメモリに代えて、上述の各処理を実行する専用回路により実現されてもよい。
【０１９０】
（１−１−６．実施例６）
図３２は、実施の形態１における再生装置の構成の一例を模式的に示すブロック図である。
【０１９１】
図３２に示すように、再生装置２００は、取得部２１０と、再生部２２０と、を備える。再生装置２００は、表示部（図示せず）をさらに有し、再生した結果を表示部に表示する表示装置として実現されてもよい。また、再生装置２００は、印刷部をさらに有し、再生した結果を紙等の印刷媒体に印刷する印刷装置として実現されてもよい。
【０１９２】
取得部２１０は、論理的に１つのデータ単位を取得する。論理的に１つのデータ単位は、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能なＨＤＲ静止画データおよびＳＤＲ静止画データを含む。
【０１９３】
再生部２２０は、取得部２１０により取得されたデータ単位に含まれるＨＤＲ静止画データおよびＳＤＲ静止画データのうちの一方を再生する。再生部２２０は、データ単位に付加されている補助情報に応じて、ＨＤＲ静止画データを選択して再生してもよい。また、再生部２２０は、補助情報に輝度領域情報が含まれている場合、ＨＤＲ静止画データの輝度領域のうちの、輝度領域情報によって優先することが示された輝度領域が全て含まれるようにそのＨＤＲ静止画データの輝度調整を行い、輝度調整が行われた画像データを再生してもよい。例えば、再生部２２０は、輝度領域情報が高輝度領域を優先していることを示すＨＤＲ静止画データ（例えば、図１８に示したＨＤＲ静止画データ）を再生する場合、そのＨＤＲ静止画データを、優先していることが示された高輝度領域が全て含まれるように輝度調整が行われた画像データに変換し、変換後の画像データを再生してもよい。あるいは、再生部２２０は、輝度領域情報が低輝度領域を優先していることを示すＨＤＲ静止画データ（例えば、図１９に示したＨＤＲ静止画データ）を再生する場合、そのＨＤＲ静止画データを、優先していることが示された低輝度領域が全て含まれるように輝度調整が行われた画像データに変換し、変換後の画像データを再生してもよい。
【０１９４】
次に、再生装置２００の再生処理に係る動作を、フローチャートを用いて説明する。
【０１９５】
図３３は、実施の形態１における再生装置２００の再生処理に係る動作の一例を示すフローチャートである。
【０１９６】
再生装置２００の取得部２１０は、データ単位を取得する（ステップＳ２０１）。
【０１９７】
再生部２２０は、ステップＳ２０１で取得部２１０により取得されたデータ単位に含まれるＨＤＲ静止画データおよびＳＤＲ静止画データのうちの一方を再生する（ステップＳ２０２）。
【０１９８】
なお、取得部２１０および再生部２２０は、例えば、所定のプログラム（上述の各処理を実行するように作成されたプログラム）を実行するプロセッサおよび所定のプログラムを格納しているメモリにより実現されてもよく、あるいは、プロセッサおよびメモリに代えて、上述の各処理を実行する専用回路により実現されてもよい。
【０１９９】
（１−１−７．実施例７）
次に、再生装置２００の動作の具体例を説明する。
【０２００】
図３４は、実施の形態１における補助情報の具体的な一例について説明するための図である。
【０２０１】
上述したように、画像処理装置１００（図１５参照）は、データ単位の生成時に、補助情報を付加してもよい。つまり、画像処理装置１００は、補助情報を付加したデータ単位を生成し、補助情報が付加されたデータ単位を出力してもよい。
【０２０２】
この構成の場合、補助情報に、高品位な画像を再生できることを示す情報が含まれていてもよい。例えば、再生装置２００が新しい静止画フォーマットに対応したＳＤＲ再生装置である場合、当該ＳＤＲ再生装置がＳＤＲ静止画データを再生するときに、ＪＰＥＧ形式のＳＤＲ画像を表示する（図３４に示すＢのルート）のか、あるいは、ＨＤＲ画像（ＨＬＧ）をＳＤＲ変換したＳＤＲ画像を表示する（図３４に示すＡのルート）のか、の判断に使うための情報が補助情報に含まれていてもよい。例えば、補助情報には、ＳＤＲ再生装置がＨＤＲ画像（ＨＬＧ）をＳＤＲ変換して表示すると、高品位な画像を再生できることを示す情報が含まれていてもよい。
【０２０３】
また、補助情報には、ＨＤＲ静止画データによる静止画の輝度が、高輝度領域を優先しているか否かを示す輝度領域情報、または、低輝度領域を優先しているか否かを示す輝度領域情報が含まれていてもよい。つまり、補助情報には、ＨＤＲ画像生成時に高輝度領域が優先された静止画像かどうかのフラグ、またはＨＤＲ画像生成時に低輝度領域が優先された静止画像かどうかフラグが含まれていてもよい。また、この場合の補助情報には、その静止画像生成時に優先された高輝度領域または低輝度領域を定める閾値が含まれていてもよい。
【０２０４】
また、補助情報には、ＳＤＲ表示装置にＳＤＲ画像を表示するときに、ＨＤＲ画像をＳＤＲ画像に変換するのではなく、ＪＰＥＧ形式のＳＤＲ画像をそのまま表示する、という撮影者の指示を示す指示用フラグ（変換禁止フラグ）が含まれていてもよい。
【０２０５】
これらの、ＨＤＲ静止画データ、ＳＤＲ静止画データ、および管理情報は、１つのファイルに格納されてもよい。これらの、ＨＤＲ静止画データ、ＳＤＲ静止画データ、および管理情報は、ファイル名のボディ（拡張子を除くファイル名）が互いに共通化され、ＤＣＦ（Ｄｅｓｉｇｎ  ｒｕｌｅ  ｆｏｒ  Ｃａｍｅｒａ  Ｆｉｌｅ  Ｓｙｓｔｅｍ）オブジェクトの複数ファイルとして互いに関連付けされた、論理的に１つのデータ単位として生成されてもよい。
【０２０６】
（１−２．効果、等）
以上のように、本実施の形態において、画像処理装置は、撮像により得られた静止画データを取得する取得部と、取得部に取得された静止画データを用いて、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データおよび第２静止画データを含む、論理的に１つのデータ単位を生成する生成部と、生成部によって生成されたデータ単位を出力する出力部と、を備える。
【０２０７】
また、本実施の形態において、再生装置は、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データおよび第２静止画データを含む、論理的に１つのデータ単位を取得する取得部と、取得部により取得されたデータ単位に含まれる第１静止画データおよび第２静止画データのうちの一方を再生する再生部と、を備える。
【０２０８】
また、本実施の形態において、画像処理方法は、撮像により得られた静止画データを取得し、取得した静止画データを用いて、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データおよび第２静止画データを含む、論理的に１つのデータ単位を生成し、生成したデータ単位を出力する。
【０２０９】
また、本実施の形態において、再生方法は、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データおよび第２静止画データを含む、論理的に１つのデータ単位を取得し、取得したデータ単位に含まれる第１静止画データおよび第２静止画データのうちの一方を再生する。
【０２１０】
なお、画像処理装置１００は画像処理装置の一例である。取得部１１０は画像処理装置が備える取得部の一例である。生成部１２０および生成部１２０Ａは、それぞれが生成部の一例である。出力部１３０は出力部の一例である。なお、マルチピクチャーフォーマット生成部１３Ｃ、データ単位生成部１７、ＴＩＦＦ出力部１７Ａ、ＨＥＶＣ圧縮部１７Ｂ、ＪＰＥＧ２０００圧縮部１７Ｃは、それぞれが出力部１３０に対応する。ＨＤＲ静止画データは第１静止画データの一例である。ＳＤＲ静止画データは第２静止画データの一例である。再生装置２００は再生装置の一例である。取得部２１０は再生装置が備える取得部の一例である。データ単位Ｄ１０、データ単位Ｄ２０、データ単位Ｄ３０、データ単位Ｄ２００、データ単位Ｄ３００、データ単位Ｄ４００、およびデータ単位Ｄ５００は、それぞれが、画像処理装置の生成部で生成されるデータ単位の一例であり、再生装置の取得部で取得されるデータ単位の一例である。再生部２２０は再生部の一例である。
【０２１１】
例えば、実施の形態１に示した例では、画像処理装置１００は、取得部１１０と、生成部１２０と、出力部１３０と、を備える。取得部１１０は、静止画データを取得する。生成部１２０は、取得部１１０により取得された静止画データを用いて、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データ（ＨＤＲ静止画データ）および第２静止画データ（ＳＤＲ静止画データ）を含む、論理的に１つのデータ単位を生成する。出力部１３０は、生成部１２０によって生成されたデータ単位（例えば、データ単位Ｄ１０、等）を出力する。
【０２１２】
また、実施の形態１に示した例では、再生装置２００は、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データ（ＨＤＲ静止画データ）および第２静止画データ（ＳＤＲ静止画データ）を含む、論理的に１つのデータ単位（例えば、データ単位Ｄ１０、等）を取得する取得部２１０と、取得部２１０により取得されたデータ単位（例えば、データ単位Ｄ１０、等）に含まれる第１静止画データ（ＨＤＲ静止画データ）および第２静止画データ（ＳＤＲ静止画データ）のうちの一方を再生する再生部２２０と、を備える。
【０２１３】
このように構成された画像処理装置１００は、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能なＨＤＲ静止画データおよびＳＤＲ静止画データを含む、論理的に１つのデータ単位を出力することができる。また、再生装置２００は、そのデータ単位を取得して再生することができる。このため、画像処理装置１００は、そのデータ単位を出力し、当該データ単位に含まれるＨＤＲ静止画データまたはＳＤＲ静止画データのいずれかを再生装置（例えば、再生装置２００）で再生することができる。したがって、画像処理装置１００は、ユーザにとって利便性の高い静止画データを提供することができる。
【０２１４】
画像処理装置において、生成部は、第１静止画データおよび第２静止画データを含む１つのファイルをデータ単位として生成してもよい。
【０２１５】
なお、第１静止画データＤ１２は第１静止画データの一例である。第２静止画データＤ１３は第２静止画データの一例である。ファイルＦ１０は、第１静止画データおよび第２静止画データを含む１つのファイルの一例である。データ単位Ｄ１０は生成部が生成するデータ単位の一例である。なお、ＨＤＲ静止画ファイルＦ１００はファイルＦ１０に対応する。
【０２１６】
例えば、実施の形態１に示した例では、画像処理装置１００において、生成部１２０は、第１静止画データＤ１２（ＨＤＲ静止画データ）および第２静止画データＤ１３（ＳＤＲ静止画データ）を含む１つのファイルＦ１０をデータ単位Ｄ１０として生成する。
【０２１７】
このように構成された画像処理装置１００では、ＨＤＲ静止画データおよびＳＤＲ静止画データが別々に管理されることが防止される。
【０２１８】
画像処理装置において、生成部は、第１静止画データを含む１つの第１静止画ファイルと、第２静止画データを含み、かつ、ファイル名のボディが第１静止画ファイルと同じである第２静止画ファイルとを含んで構成されるオブジェクトを、データ単位として生成してもよい。
【０２１９】
なお、第１静止画データＤ２２および第１静止画データＤ３２は、それぞれが第１静止画データの一例である。第２静止画データＤ２４および第２静止画データＤ３３は、それぞれが第２静止画データの一例である。第１静止画ファイルＦ２１および第１静止画ファイルＦ３２は、それぞれが第１静止画ファイルの一例である。第２静止画ファイルＦ２２および第２静止画ファイルＦ３３は、それぞれが第２静止画ファイルの一例である。ＤＳＣ０００２およびＤＳＣ０００３は、それぞれがファイル名のボディ（拡張子を除くファイル名）の一例である。データ単位Ｄ２０およびデータ単位Ｄ３０は、それぞれが、生成部が生成するデータ単位の一例である。なお、ＨＤＲ静止画ファイルＦ１１０、ＴＩＦＦ静止画ファイルＦ２１０、ＨＥＶＣ−Ｉ静止画ファイルＦ３１０、およびＪＰＥＧ２０００静止画ファイルＦ４１０は、それぞれが第１静止画ファイルＦ２１（または第１静止画ファイルＦ３２）に対応する。ＳＤＲ静止画ファイルＦ１２０、ＴＩＦＦ静止画ファイルＦ２２０、ＨＥＶＣ−Ｉ静止画ファイルＦ３２０、およびＪＰＥＧ２０００静止画ファイルＦ４２０は、それぞれが第２静止画ファイルＦ２２（または第２静止画ファイルＦ３３）に対応する。データ単位Ｄ２００、データ単位Ｄ３００、データ単位Ｄ４００、およびデータ単位Ｄ５００は、それぞれがデータ単位Ｄ２０（またはデータ単位Ｄ３０）に対応する。
【０２２０】
例えば、実施の形態１に示した例では、画像処理装置１００において、生成部１２０は、ＨＤＲ静止画データ（例えば、第１静止画データＤ２２）を含む１つのＨＤＲ静止画ファイル（例えば、第１静止画ファイルＦ２１）と、ＳＤＲ静止画データ（例えば、第２静止画データＤ２４）を含み、かつ、ファイル名のボディ（例えば、ＤＳＣ０００２）がＨＤＲ静止画ファイル（例えば、第１静止画ファイルＦ２１）のファイル名のボディ（例えば、ＤＳＣ０００２）と同じであるＳＤＲ静止画ファイル（例えば、第２静止画ファイルＦ２２）とを含んで構成されるオブジェクトを、データ単位（例えば、データ単位Ｄ２０）として生成してもよい。
【０２２１】
このように構成された画像処理装置１００により、再生装置（例えば、再生装置２００）では、その再生装置がＨＤＲ静止画ファイルまたはＳＤＲ静止画ファイルの再生に対応していれば、対応しているファイルを用いて、画像を再生することができる。
【０２２２】
画像処理装置において、生成部は、第１静止画データを再生することによって、第２静止画データの再生による画像よりも高品位な画像を再生できることを示す補助情報をデータ単位にさらに付加してもよい。
【０２２３】
なお、管理データＤ１１に含まれる補助情報は、補助情報の一例である。
【０２２４】
例えば、実施の形態１に示した例では、画像処理装置１００において、生成部１２０は、ＨＤＲ静止画データ（例えば、第１静止画データＤ１２）を再生することによって、ＳＤＲ静止画データ（例えば、第２静止画データＤ１３）の再生による画像よりも高品位な画像を再生できることを示す補助情報をデータ単位（例えば、データ単位Ｄ１０）に付加する。
【０２２５】
このように構成された画像処理装置１００により、そのデータ単位（例えば、データ単位Ｄ１０）を受け取った再生装置（例えば、再生装置２００）は、補助情報に応じて、その再生装置の再生能力を最大限に生かした品質で静止画を再生することができる。
【０２２６】
画像処理装置において、生成部は、第１静止画データによる静止画の輝度が、高輝度領域を優先しているか否かを示す輝度領域情報、または、低輝度領域を優先しているか否かを示す輝度領域情報を含んだ補助情報をデータ単位に付加してもよい。
【０２２７】
例えば、実施の形態１に示した例では、画像処理装置１００において、生成部１２０は、ＨＤＲ静止画データ（第１静止画データ）による静止画の輝度が、高輝度領域を優先しているか否かを示す輝度領域情報、または、低輝度領域を優先しているか否かを示す輝度領域情報を含んだ補助情報をデータ単位に付加してもよい。
【０２２８】
このように構成された画像処理装置１００により、そのデータ単位を受け取った再生装置（例えば、再生装置２００）は、補助情報に応じて、その再生装置の再生能力を有効に活用した品質で静止画を再生することができる。
【０２２９】
画像処理装置において、第１静止画データは、ＨＤＲの画像データであってもよく、第２静止画データは、ＳＤＲの画像データであってもよい。
【０２３０】
例えば、実施の形態１に示した例では、画像処理装置１００において、第１静止画データはＨＤＲの画像データであり、第２静止画データはＳＤＲの画像データである。
【０２３１】
（他の実施の形態）
以上のように、本出願において開示する技術の例示として、実施の形態１を説明した。しかしながら、本開示における技術は、これに限定されず、変更、置き換え、付加、省略等を行った実施の形態にも適用できる。また、上記実施の形態１の実施例１〜７で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。
【０２３２】
なお、上記実施の形態において、各構成要素は、専用のハードウェアで構成されてもよく、あるいは、各構成要素に適したソフトウェアプログラムをプロセッサが実行することによって実現されてもよい。各構成要素は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）またはプロセッサ等のプログラム実行部が、ハードディスクまたは半導体メモリなどの記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。ここで、上記実施の形態の画像処理方法または再生方法等を実現するソフトウェアは、次のようなプログラムである。
【０２３３】
すなわち、このプログラムは、コンピュータに、撮像により得られた静止画データを取得し、取得した静止画データを用いて、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データおよび第２静止画データを含む、論理的に１つのデータ単位を生成し、生成したデータ単位を出力する画像処理方法を実行させる。
【０２３４】
または、このプログラムは、コンピュータに、輝度のダイナミックレンジが互いに異なり、かつ、互いに独立して再生することが可能な第１静止画データおよび第２静止画データを含む、論理的に１つのデータ単位を取得し、取得したデータ単位に含まれる第１静止画データおよび第２静止画データのうちの一方を再生する再生方法を実行させる。
【０２３５】
なお、添付図面および詳細な説明に記載された構成要素の中には、課題解決のために必須な構成要素だけでなく、上記技術を例示するために、課題解決のためには必須でない構成要素も含まれ得る。そのため、それらの必須ではない構成要素が添付図面や詳細な説明に記載されていることをもって、直ちに、それらの必須ではない構成要素が必須であるとの認定をするべきではない。
【０２３６】
また、上述の実施の形態は、本開示における技術を例示するためのものであるから、特許請求の範囲またはその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。
【産業上の利用可能性】
【０２３７】
本開示は、利便性の高い静止画データを得ることができる画像処理装置、当該静止画データを再生できる再生装置、画像処理方法、および、再生方法に適用可能である。具体的には、カメラ等の撮像装置、テレビ等の表示装置、または印刷装置等に、本開示は適用可能である。
【符号の説明】
【０２３８】
１０，１０Ａ，１０Ｂ，１０Ｃ，１０Ｄ，１０Ｅ，１０Ｆ，１０Ｇ，１０Ｈ    ＨＤＲ撮像装置
１１    ＨＤＲ撮像部
１２    変換部
１３，１３Ａ    ＪＰＥＧ圧縮部
１３Ｂ    ＪＰＥＧ  ＸＴ圧縮部
１３Ｃ    マルチピクチャーフォーマット生成部
１３Ｄ    ＨＥＶＣ圧縮部
１４    ＳＤＲ撮像部
１５，１５Ａ，１５Ｂ    ＨＤＲ画像補正部
１６    ＨＤＭＩ出力部
１７    データ単位生成部
１７Ａ    ＴＩＦＦ出力部
１７Ｂ    ＨＥＶＣ圧縮部
１７Ｃ    ＪＰＥＧ２０００圧縮部
２０    ＳＤＲ撮像装置
２１    ＳＤＲ撮像部
２２    ＪＰＥＧ圧縮部
３０，６０，６１，６２    ＨＤＲ表示装置
４０    ＳＤＲ表示装置
５０，６３    ＳＤＲ印刷装置
１００    画像処理装置
１１０    取得部
１２０，１２０Ａ    生成部
１２１    ＨＤＲ画像処理部
１２２    ＨＤＲ画像圧縮部
１２３    変換部
１２３Ａ    ＳＤＲ画像処理部
１２４    ＳＤＲ画像圧縮部
１２５    フォーマット部
１３０    出力部
２００    再生装置
２１０    取得部
２２０    再生部
Ｄ１０，Ｄ２０，Ｄ３０    データ単位
Ｄ１１，Ｄ３１    管理データ
Ｄ１２，Ｄ２２，Ｄ３２    第１静止画データ
Ｄ１３，Ｄ２４，Ｄ３３    第２静止画データ
Ｄ２１    第１管理データ
Ｄ２３    第２管理データ
Ｄ２００，Ｄ３００，Ｄ４００，Ｄ５００    データ単位
Ｆ１０    ファイル
Ｆ２１，Ｆ３２    第１静止画ファイル
Ｆ２２，Ｆ３３    第２静止画ファイル
Ｆ３１    管理ファイル
Ｆ１００，Ｆ１１０    ＨＤＲ静止画ファイル
Ｆ１２０    ＳＤＲ静止画ファイル
Ｆ２１０，Ｆ２２０    ＴＩＦＦ静止画ファイル
Ｆ３１０，Ｆ３２０    ＨＥＶＣ−Ｉ静止画ファイル
Ｆ４１０，Ｆ４２０    ＪＰＥＧ２０００静止画ファイル
【図１】
2018021261.tif 000003
【図２】
2018021261.tif 000004
【図３Ａ】
2018021261.tif 000005
【図３Ｂ】
2018021261.tif 000006
【図４】
2018021261.tif 000007
【図５】
2018021261.tif 000008
【図６】
2018021261.tif 000009
【図７】
2018021261.tif 000010
【図８】
2018021261.tif 000011
【図９】
2018021261.tif 000012
【図１０】
2018021261.tif 000013
【図１１】
2018021261.tif 000014
【図１２】
2018021261.tif 000015
【図１３】
2018021261.tif 000016
【図１４】
2018021261.tif 000017
【図１５】
2018021261.tif 000018
【図１６】
2018021261.tif 000019
【図１７】
2018021261.tif 000020
【図１８】
2018021261.tif 000021
【図１９】
2018021261.tif 000022
【図２０】
2018021261.tif 000023
【図２１】
2018021261.tif 000024
【図２２】
2018021261.tif 000025
【図２３】
2018021261.tif 000026
【図２４】
2018021261.tif 000027
【図２５】
2018021261.tif 000028
【図２６】
2018021261.tif 000029
【図２７】
2018021261.tif 000030
【図２８】
2018021261.tif 000031
【図２９】
2018021261.tif 000032
【図３０】
2018021261.tif 000033
【図３１】
2018021261.tif 000034
【図３２】
2018021261.tif 000035
【図３３】
2018021261.tif 000036
【図３４】
2018021261.tif 000037
【手続補正書】
【提出日】平成31年1月17日(2019.1.17)
【手続補正１】
【補正対象書類名】図面
【補正対象項目名】図１
【補正方法】変更
【補正の内容】
【図１】
2018021261.tif 000038
【手続補正２】
【補正対象書類名】図面
【補正対象項目名】図１０
【補正方法】変更
【補正の内容】
【図１０】
2018021261.tif 000039
【国際調査報告】
2018021261.tif 000040
2018021261.tif 000041
2018021261.tif 000042
2018021261.tif 000043