【手続補正書】
【提出日】平成29年2月22日(2017.2.22)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮影指示に応答して被写体像のＲＡＷ画像データを生成する撮像手段と、
複数の異なる現像パラメータを用いて、前記ＲＡＷ画像データから複数の第１画像データを生成する第１の現像手段と、
記録媒体に前記ＲＡＷ画像データおよび複数の第１の画像データを記録する記録手段と、
前記複数の第１の画像データから任意の画像データを選択する第１の選択手段と、
前記選択された画像データに対応する現像パラメータを用いて、前記記録媒体に記録されたＲＡＷ画像データから第２の画像データを生成する第２の現像手段と、
を有することを特徴とする撮像装置。
【請求項２】
前記ＲＡＷ画像データが静止画データの場合、前記第２の現像手段が、前記第１の現像手段よりも高画質な画像が得られる現像処理を実行し、
前記ＲＡＷ画像データが動画データの場合、前記第１の現像手段が、前記第２の現像手段よりも高画質な画像が得られる現像処理を実行することを特徴とする請求項１記載の撮像装置。
【請求項３】
前記第２の現像手段は、前記ＲＡＷ画像データの再生のための現像処理を実行することを特徴とする請求項１または２に記載の撮像装置。
【請求項４】
前記第１の現像手段は、前記ＲＡＷ画像データが動画データの場合、前記ＲＡＷ画像データの代表画像から前記複数の第１の画像データを生成することを特徴とする請求項１乃至３のいずれか１項に記載の撮像装置。
【請求項５】
前記代表画像は、予め設定された条件に基づいて抽出されることを特徴とする請求項４に記載の撮像装置。
【請求項６】
前記条件は、抽出する画像の特徴、画像を抽出する時間間隔又はフレーム間隔、抽出するフレーム期間又はフレーム数、の少なくとも１つを含むことを特徴とする請求項５に記載の撮像装置。
【請求項７】
前記第１の選択手段は、前記複数の第１の画像データを選択可能に表示する表示手段と、
前記表示された前記複数の第１の画像データの選択を受け付ける入力手段と、
をさらに有することを特徴とする請求項１乃至６のいずれか１項に記載の撮像装置。
【請求項８】
前記第１の現像手段は、前記第２の現像手段よりも処理負荷が低い現像処理を実行することを特徴とする請求項１乃至７のいずれか１項に記載の撮像装置。
【請求項９】
前記第１の現像手段は、前記第２の現像手段よりも工程の数が少ないか又は精度が低いか、の少なくとも一方である現像処理を実行することを特徴とする請求項１から８のいずれか１項に記載の撮像装置。
【請求項１０】
第１の現像手段は、複数の代表画像のそれぞれに対して、複数の異なる現像パラメータを用いて複数の第１の画像データを生成することを特徴とする請求項４乃至９のいずれか１項に記載の撮像装置。
【請求項１１】
前記複数の代表画像を選択可能に表示する第２の選択手段をさらに有し、
第１の選択手段は、第２の選択手段により選択された代表画像から生成された複数の第１の画像データから任意の画像データを選択させることを特徴とする請求項１０に記載の撮像装置。
【請求項１２】
前記ＲＡＷ画像データが動画データの場合、撮影時に前記ＲＡＷ画像データから動画像データを生成する第３の現像手段をさらに有し、
第３の現像手段は第２の現像手段より簡易な現像手段であることを特徴とする請求項１乃至１１のいずれか１項に記載の撮像装置。
【請求項１３】
前記第３の現像手段により生成された動画を、所定のフレームごとに、第２の現像手段により生成された第２の画像データにより置き換えることを特徴とする請求項１２に記載の撮像装置。
【請求項１４】
撮影指示に応答して被写体像のＲＡＷ画像データを生成するステップと、
複数の異なる現像パラメータを用いて、前記ＲＡＷ画像データから複数の第１の画像データを生成するステップと、
記録媒体に前記ＲＡＷ画像データおよび前記複数の第１の画像データを記録するステップと、
前記複数の第１の画像データから任意の画像データを選択するステップと、
前記選択された画像データに対応する現像パラメータを用いて、前記記録媒体に記録されたＲＡＷ画像データから第２の画像データを生成するステップと、
を有することを特徴とする撮像装置の制御方法。
【請求項１５】
請求項１４に記載の撮像装置の制御方法の各ステップをコンピュータによって実行させるためのプログラム。
【請求項１６】
請求項１５に記載のプログラムを格納した、コンピュータで読み取り可能な記録媒体。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
上述の目的は、撮影指示に応答して被写体像のＲＡＷ画像データを生成する撮像手段と、複数の異なる現像パラメータを用いて、ＲＡＷ画像データから複数の第１画像データを生成する第１の現像手段と、記録媒体にＲＡＷ画像データおよび複数の第１の画像データを記録する記録手段と、複数の第１の画像データから任意の画像データを選択する第１の選択手段と、選択された画像データに対応する現像パラメータを用いて、記録媒体に記録されたＲＡＷ画像データから第２の画像データを生成する第２の現像手段と、を有することを特徴とする撮像装置によって達成される。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】変更
【補正の内容】
【００２９】
パラメータ撮影モードにおいて、現像パラメータ生成部１１７は、現像処理された画像データから例えば逆光状態を判定した場合には、ブラケット撮影のように露出量を異ならせた現像結果が得られるような複数の現像パラメータを生成することができる。また、現像パラメータ生成部１１７は、画像内の合焦位置を評価値算出部１０５の評価結果から判定し、合焦位置付近を拡大するような現像パラメータを生成することができる。これらは単なる例示であり、現像パラメータ生成部１１７は他の条件に基づく現像パラメータを生成可能であるが、撮影された画像データに基づいた現像パラメータの生成を自動的に行うことができる。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００７７
【補正方法】変更
【補正の内容】
【００７７】
図６は、パラメータ動画撮影モードで記録される情報の例を示す図である。
本実施形態の撮像装置１００は、１回の動画撮影毎に動画情報ＭＳを生成する。動画情報には、１つのＲＡＷ動画ファイルＲＭと選択現像パラメータ情報ＳＥに加え、Ｎ（≧２）種類の簡易現像用パラメータＬＰ１〜ＬＰＮ、高画質現像用パラメータＨＰ１〜ＨＰＮ、高画質静止画ファイルＨＦ１〜ＨＦＮが含まれる。簡易現像用パラメータＬＰＮ、高画質現像用パラメータＨＰＮ、高画質静止画ファイルＨＦＮはそれぞれ関連付けられており、高画質画像ファイルから対応する現像パラメータ（ＬＰＮ、ＨＰＮ）を容易に特定可能である。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００７８
【補正方法】変更
【補正の内容】
【００７８】
選択現像パラメータ情報ＳＥは再生時や後述する後現像時に用いられる現像パラメータを特定する情報である。選択現像パラメータ情報ＳＥは例えばＳ９０８でＲＥＣ中からＲＥＣ中で無くなった際（撮影直後）にユーザによって指定されたり、制御部１６１により自動的に決定されたりする。
なお、パラメータ動画撮影モードでない、通常の動画撮影モードにおいては、ＲＡＷ動画像ファイルＲＭ、現像パラメータＬＰＮ、ＨＰＮ、簡易動画ファイルＬＭＮがそれぞれ１種類記録され、高画質静止画ファイルは記録されない。そのため、選択現像パラメータ情報ＳＥは常に第１の現像パラメータを特定する情報となる。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００９５
【補正方法】変更
【補正の内容】
【００９５】
図７のＳ８０５以降で行う高画質現像処理は、撮影直後など、後述する後現像が適用されていないタイミングで実施されることが想定される。本実施形態では、撮影と撮影の合間や、撮影モードやスリープ状態などユーザ操作待ちの、比較的装置の処理負荷が小さい状態の時に後述する静止画の後現像が逐次実行され、簡易現像による静止画ファイルが自然と高画質現像による静止画ファイルに置き換わる。そうして置き換えが進むに従って、Ｓ８０５以降の高画質現像は発生するケースが減少し、速やかに高画質画像を出力できるようになり、操作性が一層高まっていく。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】０１０９
【補正方法】変更
【補正の内容】
【０１０９】
なお、静止画と同様、動画についても、後述する後現像処理によって順次高画質化されていく。そのため、撮影後の時間経過に従って、Ｓ１２０４〜Ｓ１２０６における高画質現像処理が再生時に実施される可能性が低下し、速やかに高画質画像を出力できる確率が高まるので、操作性が一層高まっていく。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】０１１６
【補正方法】変更
【補正の内容】
【０１１６】
図１０においてアイドル状態の処理が開始されると、制御部１６１が、ユーザの設定に基づいて、後現像を行うか否かを判定し（Ｓ１５０１）、後現像を行わない場合はアイドル処理を終了して元の処理に復帰し、後現像を行う場合はＳ１５２０に遷移する。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】０１１７
【補正方法】変更
【補正の内容】
【０１１７】
後現像を行う場合、制御部１６１は、記録媒体１５２に記録されている各ＲＡＷファイルについて、後現像処理により高画質静止画ファイルが記録されているか（後現像済みかどうか）判定する（Ｓ１５２０）。例えば制御部１６１は、ＲＡＷファイルのヘッダに含まれる現像ステータスを参照し、対応する静止画ファイルが簡易現像部１１１で処理されたことを示す情報が含まれていればＲＡＷファイルの後現像が行われていないと判定する。あるいは、制御部１６１は、ＲＡＷファイルのメタデータに含まれる静止画ファイル名を有する静止画ファイルを記録媒体１５２内で探索する。これは、静止画撮影モードで撮影されていれば、記録媒体１５２には、１回の撮影開始指示に対して１つ以上の静止画ファイルとＲＡＷファイルが互いに関連付けられて記録されていることに基づく。そして、見つかった静止画ファイルのメタデータ部に格納されている現像ステータスを参照し、簡易現像部１１１で処理されたことを示す情報が含まれていればＲＡＷファイルに後現像が行われていないと判定する。あるいは、一連の静止画に対し、後現像処理の実行有無を示すテーブルを別に用意しておき、このテーブルを参照して判定するようにしても良い。なお、複数の現像パラメータが選択されている可能性がある場合、制御部１６１は、選択現像パラメータ情報ＳＥで特定される現像パラメータに対応する静止画ファイルが全て高画質現像されたものかどうかで判定する。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】０１１８
【補正方法】変更
【補正の内容】
【０１１８】
記録媒体１５２に記録されたＲＡＷファイルの全てが後現像処理済みである場合（Ｓ１５２０，ＮＯ）、制御部１６１は後現像処理を行わない場合と同様、アイドル処理を終了して元の処理に復帰する。一方、記録媒体１５２に記録されているＲＡＷファイルに後現像処理が行われていないものが存在した場合、制御部１６１は処理をＳ１５２１に遷移させる。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】０１１９
【補正方法】変更
【補正の内容】
【０１１９】
制御部１６１は、記録媒体１５２に記録されている、後現像処理が行われていないＲＡＷファイルに対応するＲＡＷ画像データが、バッファ部１１５にも記憶されているかどうか調べる（Ｓ１５２１）。そして、制御部１６１は、ＲＡＷファイルがバッファ部１１５に残っていれば直接、バッファ部１１５に残っていなければＳ１５２２で記録媒体１５２からＲＡＷファイルを読み出した後、処理をＳ１５２３に進める。バッファ部１１５には直近に撮影されたものから予め定められた数のＲＡＷファイルが保持されている。そのため、制御部１６１は後現像処理を行うＲＡＷファイルが、記録媒体１５２に記録されているＲＡＷファイルのうち、直近に撮影されたものから予め定められた数に含まれていれば、バッファ部１１５に記憶されていることが分かる。なお、記録再生部１５１から記録時のＲＡＷファイルの情報を取得し、バッファ部１１５に記憶されているＲＡＷファイルと、記録媒体１５２に記録されているＲＡＷファイルとの対応関係を保存しておいてもよい。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】０１２１
【補正方法】変更
【補正の内容】
【０１２１】
制御部１６１は、記録媒体１５２からＲＡＷファイルを読み出す場合、古いものから順に読みだしてバッファ部１１５に記憶する。そして、バッファ部１１５の記憶領域が一杯になった場合、最も古いＲＡＷ画像データをバッファ部１１５から削除し、新たに撮影、あるいは、記録媒体１５２から読み出されたＲＡＷ画像データをバッファ部１１５に格納する。こうすることにより、直前に撮影されたＲＡＷ画像データは常にバッファに保持されているので、Ｓ１５２２をスキップし、高速に処理できる。さらに、直前に撮影された画像から時刻を遡って、後現像を実行するようにすれば、バッファ部１１５に保持されている画像から優先的に処理が完了できるため、処理の効率化ができる。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】０１２２
【補正方法】変更
【補正の内容】
【０１２２】
Ｓ１５２３において、制御部１６１は後現像処理するＲＡＷ画像データをＲＡＷ伸張部１１４に供給する。ＲＡＷ伸張部１１４はＲＡＷ画像データが圧縮処理されたものであれば伸張処理してＲＡＷ画像データを復元してから、一方、圧縮処理されていなければそのまま出力する。ＲＡＷ画像データが圧縮されているものかどうかは、圧縮時に例えばＲＡＷ画像データの先頭に識別可能な情報を記録しておくことなどによって判別可能である。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】０１２３
【補正方法】変更
【補正の内容】
【０１２３】
ＲＡＷ伸張部１１４が出力したＲＡＷ画像データは、現像部１１０に供給される。後現像処理時には高画質現像部１１２で現像処理を行い、簡易現像部１１１では現像処理しないように制御部１６１が動作を制御する。Ｓ１５２４で制御部１６１は、記録再生部１５１を制御し、選択現像パラメータ情報ＳＥで特定される現像パラメータのうち、高画質現像パラメータを記録媒体１５２から読み出し、現像パラメータ生成部１１７に供給する。現像パラメータ生成部１１７は、この現像パラメータを高画質現像部１１２に設定する。なお、高画質現像パラメータは、Ｓ１５２２で読み出してもよい。
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】０１２７
【補正方法】変更
【補正の内容】
【０１２７】
高画質現像部１１２で現像処理された画像データは、静止画圧縮部１４１に供給され、静止画圧縮部１４１は、取得した画像データに対して高能率符号化処理（静止画圧縮）を施し（Ｓ１５２５）、高画質静止画データを生成する。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】０１２８
【補正方法】変更
【補正の内容】
【０１２８】
Ｓ１５２６において、記録再生部１５１が高画質静止画データを含む静止画ファイルを記録媒体１５２に記録する。
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】０１２９
【補正方法】変更
【補正の内容】
【０１２９】
Ｓ１５２７は、アイドル状態でなくなったかどうかの判断処理であり、例えば予め定められた、アイドル状態を脱するイベントが発生したかどうかの判断処理であってよい。イベントは例えば、撮影準備指示や撮影開始指示の入力、再生処理の実行指示の入力、ＣＰＵの稼働率が閾値を超えるなどであってよい。なお、これらのイベント発生は、実際にはＳ１５２７で示されるタイミングで実施するのではなく、アイドル処理中に制御部１６１がバックグラウンドで監視している。イベントの発生を検知した時点で実施中の動作を中断もしくは中止するか、静止画記録が終了するまでは実行を継続するかは予め定めておくことができる。例えば、Ｓ１５２２〜Ｓ１５２６のどの処理を実行中かに応じて処理を継続するか中断もしくは中止するかが異なってもよい。また、発生したイベントに応じて対応が異なってもよい。例えば撮影開始指示のようにタイムラグが問題になるイベントが発生した場合は直ちに撮影処理に移行し、再生開始指示のように緊急性がさほど高くないイベントの場合には静止画記録が終了してから再生処理に移行するようにしてもよい。
【手続補正１８】
【補正対象書類名】明細書
【補正対象項目名】０１３０
【補正方法】変更
【補正の内容】
【０１３０】
処理を中断する場合、制御部１６１は、中断した処理を次にアイドル状態になった際に再開できるように必要な情報を記憶する中断処理を行う（Ｓ１５２８）。中断処理は例えば途中まで処理が終わったデータの保存や、どこまで処理が終わっているのかを示す情報の保存などを含む。一方、処理を中止する場合には、次回の処理において未処理のＲＡＷファイルの処理を行えば良いため、中断処理を実施しなくてもよい。
【手続補正１９】
【補正対象書類名】明細書
【補正対象項目名】０１３１
【補正方法】変更
【補正の内容】
【０１３１】
アイドル状態でなくなった場合、制御部１６１はアイドル処理を実行する前に実施していた動作モードとイベントに応じた処理に移行する。例えば静止画撮影モードからアイドル処理に移行していた場合に撮影指示が入力された場合、制御部１６１は静止画撮影モードの処理をＳ１５０２の処理から復帰させる。
【手続補正２０】
【補正対象書類名】明細書
【補正対象項目名】０１３２
【補正方法】変更
【補正の内容】
【０１３２】
Ｓ１５２６で記録処理が終了した後、アイドル状態が継続していれば、処理をＳ１５２０に戻し、後現像が未処理のＲＡＷ画像データが残っている場合には、上述した処理を繰り返して実行する。
【手続補正２１】
【補正対象書類名】明細書
【補正対象項目名】０１３３
【補正方法】変更
【補正の内容】
【０１３３】
なお、Ｓ１５２６で記録される高画質静止画ファイルは、ＲＡＷファイルと同時に記録された簡易静止画ファイルと同じファイル名で記録する。これは、読み出したＲＡＷファイルのメタデータ部に含まれる静止画ファイル名を記録再生部１５１が記憶しておくことで実現できる。バッファ部１１５に残っているＲＡＷ画像データを用いる場合には、記録媒体１５２に記録された対応するＲＡＷファイルのメタデータを参照すればよい。あるいは、記録再生部１５１が簡易静止画ファイルを記録する際にファイル名を制御部１６１に通知し、制御部１６１がバッファ部１１５内のＲＡＷ画像データと対応付けて保存するようにしてもよい。このようなファイル名とすることで、記録媒体１５２内の簡易静止画ファイルを高画質静止画ファイルで置き換えることができる。
また、記録再生部１５１は、高画質静止画ファイルを記録する際に、対応するＲＡＷファイルにおけるメタデータ内の現像ステータスを高画質現像済（又は後現像済）を示す情報で更新する。
【手続補正２２】
【補正対象書類名】明細書
【補正対象項目名】０１３６
【補正方法】変更
【補正の内容】
【０１３６】
動画ファイルの後現像処理を中断する場合、Ｓ１５２８の中断処理では、例えば、動画圧縮部１４２が所定フレーム数を単位とした符号化を行う場合、記録媒体１５２に符合化単位で高画質動画ファイルが書き込まれるまで待つ。そして、高画質動画ファイルを書き込む（簡易動画ファイルに上書きする）際に、後現像中のＲＡＷ動画データのファイル名と、何フレーム目まで処理が終わっているかの情報を記録再生部１５１が保存しておく。そして、次回アイドル状態になったらこの情報を用いて後現像処理を再開する。なお、動画の後現像処理時には、符合化単位で高画質動画ファイルを書き込む毎にファイルをクローズして記録媒体１５２の管理情報を更新してもよいし、中断時にこれらの書き込み終了処理を実施してもよい。前者の方が処理が煩雑であるが、後現像処理から他の処理に移行するまでに要する時間が短いほか、ファイルが破損する可能性は小さくできる。なお、イベントによっては直ちに処理を中止してもよいことは静止画の後現像処理と同様であるが、この場合でも記録媒体１５２における処理中の動画ファイルをクローズする点で異なる。
【手続補正２３】
【補正対象書類名】明細書
【補正対象項目名】０１３８
【補正方法】変更
【補正の内容】
【０１３８】
静止画像ファイルにおいては、後現像により、簡易現像静止画ファイルＬＩＮのうち、選択現像パラメータ情報ＳＥで特定される現像パラメータに対応したものが置き換えられる。図１１（ａ）では、例として選択現像パラメータ情報ＳＥで特定される現像パラメータが「２」であるため、簡易現像静止画ファイルＬＩ２が高画質現像パラメータＨＰ２を用いた後現像で生成される高画質現像静止画ファイルＨＩ２に置き換えられる。後現像により生成された高画質現像画ファイルＨＩＮは、簡易現像静止画ファイルＬＩＮと同様、対応する簡易現像パラメータＬＰＮと高画質現像パラメータＨＰＮに関連付けて記録される。従って、高画質現像静止画ファイルＨＩＮから、現像に用いられた現像パラメータを容易に特定することができる。
【手続補正２４】
【補正対象書類名】明細書
【補正対象項目名】０１３９
【補正方法】変更
【補正の内容】
【０１３９】
動画像ファイルにおいては、後現像により簡易動画ファイルＬＭＮが置き換えられる。図１１（ｂ）では、例として選択現像パラメータ情報ＳＥで特定される現像パラメータが「１」と「２」の２つの場合を示す。この場合、簡易動画ファイルＬＭ１が後現像により生成される高画質動画ファイルＨＭ１で置き換えられるほか、新たに高画質動画ファイルＨＭ２が生成されて記録される。高画質動画ファイルＨＭＮは対応する現像パラメータＬＰＮおよびＬＰＨと関連付けて記録される。
【手続補正２５】
【補正対象書類名】図面
【補正対象項目名】図２
【補正方法】変更
【補正の内容】
【図２】
2015179909.tif 000001
【手続補正２６】
【補正対象書類名】図面
【補正対象項目名】図６
【補正方法】変更
【補正の内容】
【図６】
2015179909.tif 000002
【手続補正２７】
【補正対象書類名】図面
【補正対象項目名】図１０
【補正方法】変更
【補正の内容】
【図１０】
2015179909.tif 000003
【手続補正２８】
【補正対象書類名】図面
【補正対象項目名】図１１
【補正方法】変更
【補正の内容】
【図１１】
2015179909.tif 000004