【手続補正書】
【提出日】令和1年8月6日(2019.8.6)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮影条件を取得する取得手段と、
連続する複数のＲＡＷ画像フレームを含むＲＡＷデータを記録手段に記録させる制御手段と、を有し、
前記制御手段は、前記撮影条件に応じて、一部のＲＡＷ画像フレームにオプティカルブラック領域の情報を含めて、前記ＲＡＷデータを記録させることを特徴とする画像処理装置。
【請求項２】
前記制御手段は、前記ＲＡＷ画像フレームごとに、前記オプティカルブラック領域の情報を含めるか否かを判断することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記制御手段が、前記オプティカルブラック領域の情報を前記ＲＡＷ画像フレームに含めると判断した場合に、前記記録手段の前記ＲＡＷ画像フレームの映像信号を記録する領域を拡張して当該オプティカルブラック領域を記録させるか、または前記ＲＡＷ画像フレームの主画像領域に前記映像信号を記録させ、副画像領域に当該オプティカルブラック領域の情報を記録させることを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記制御手段は、ノイズ量またはノイズパターンが変化する撮影条件の場合に、前記オプティカルブラック領域の情報を前記ＲＡＷ画像フレームに含めることを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
【請求項５】
前記制御手段は、センサ感度の変化が所定の変化量よりも大きいときに、前記オプティカルブラック領域の情報を前記ＲＡＷ画像フレームに含めることを特徴とする請求項４に記載の画像処理装置。
【請求項６】
前記制御手段は、前記ノイズ量またはノイズパターンが変化する撮影条件であると判断した直後に撮像されたＲＡＷ画像フレームに、前記オプティカルブラック領域の情報を含めることを特徴とする請求項４に記載の画像処理装置。
【請求項７】
前記制御手段は、所定の枚数のＲＡＷ画像フレームが撮像された後に撮像されたＲＡＷ画像フレームに、前記オプティカルブラック領域の情報を含めることを特徴とする請求項１乃至６のいずれか１項に記載の画像処理装置。
【請求項８】
前記制御手段は、前記オプティカルブラック領域の情報を、前記ＲＡＷデータの先頭または最終のＲＡＷ画像フレームに含めることを特徴とする請求項１乃至７のいずれか１項に記載の画像処理装置。
【請求項９】
前記制御手段は、前記オプティカルブラック領域の情報を前記ＲＡＷデータの最終のＲＡＷ画像フレームに含める際に、前記ＲＡＷデータの撮影開始から撮影終了までの間のピークセンサ感度または平均センサ感度を用いて当該ノイズ除去に使用する情報を生成することを特徴とする請求項８に記載の画像処理装置。
【請求項１０】
前記制御手段は、前記ＲＡＷ画像フレームと、当該ＲＡＷ画像フレームに前記オプティカルブラック領域の情報を含めたか否かを関連付けて、前記ＲＡＷデータを記録させることを特徴とする請求項１乃至９のいずれか１項に記載の画像処理装置。
【請求項１１】
前記制御手段は、前記撮影条件に応じて、さらに遮光画像を記録させることを特徴とする請求項１乃至１０のいずれか１項に記載の画像処理装置。
【請求項１２】
複数のＲＡＷ画像フレームを含むＲＡＷデータを記録手段に記録させる画像処理装置の制御方法であって、
撮影条件を取得する取得工程と、
連続する複数のＲＡＷ画像フレームを含むＲＡＷデータを記録手段に記録させる制御工程と、を有し、
前記撮影条件に応じて、一部のＲＡＷ画像フレームにオプティカルブラック領域の情報を含めて、前記前記ＲＡＷデータを記録させることを特徴とする制御方法。
【請求項１３】
請求項１乃至１１のいずれか１項に記載の画像処理装置が備える各手段としてコンピュータを機能させるためのプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
本発明の一実施形態の画像処理装置は、撮影条件を取得する取得手段と、連続する複数のＲＡＷ画像フレームを含むＲＡＷデータを記録手段に記録させる制御手段と、を有し、前記制御手段は、前記撮影条件に応じて、一部のＲＡＷ画像フレームにオプティカルブラック領域の情報を含めて、前記ＲＡＷデータを記録させる。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
映像信号の外側の遮光領域は、映像信号に含まれる暗電流成分等のノイズ信号を取得するために利用できる。この遮光領域のことをＯＢ領域（オプティカルブラック領域）と呼んでいる。ＯＢ領域に含まれるランダムノイズ成分を解析することにより、高度なノイズ除去（ノイズリダクション、ＮＲ）を行うことができる。ＯＢ領域がカットされてしまうことで、ＲＡＷ画像データを現像処理する際にノイズ成分に応じたＮＲ処理を施すことができなくなってしまう。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
また、露光時間を長くした場合や高温環境下では映像信号に固定パターンノイズが発生する場合がある。映像信号に含まれる固定パターンノイズは、遮光画像を撮影することによりノイズ成分を検出することができる。映像信号から固定パターンノイズのノイズ成分を減算することによりノイズを除去する。静止画撮影では、撮像処理が完了した後に遮光画像の撮影を行うことで固定パターンノイズの除去を行うことができるが、動画撮影では、遮光画像の撮影を行うことにより映像が欠落してしまう。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００２１
【補正方法】変更
【補正の内容】
【００２１】
図２は、ＲＡＷ動画データのフレーム種別の特徴を説明する図である。具体的には、ＯＢ領域（オプティカルブラック領域）の記録の有無と、遮光画像を取得するダーク撮影の有無により、ＲＡＷ画像フレームを４つの種別に分類している。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】変更
【補正の内容】
【００２９】
図４は、ＲＡＷ画像フレームにおける映像領域とＯＢ領域を示す図である。領域３０１は、映像領域を示し、動画として表示される映像部分である。領域３０２、領域３０４、及び領域３０６は、ＯＢ領域を示し、イメージセンサの暗電流成分を分析するために使用する領域である。領域３０３は、固定パターンノイズが発生した例を示し、映像領域内に横スジとムラが生じている様子を示している。領域３０５には、領域３０３における固定パターンノイズが抽出されている。遮光してダーク撮影をおこなうことにより固定パターンノイズを抽出することができる。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００３５
【補正方法】変更
【補正の内容】
【００３５】
以上のように、本実施形態によれば、ＲＡＷ動画データを記録する画像処理装置において、ノイズ量またはノイズパターンが変化する撮影条件の場合に、所定のＲＡＷ画像フレームにＯＢ領域や遮光画像等のノイズ除去に使用する情報を付加する。このため、データ容量を抑制しつつ各種ノイズ除去に必要となる情報を記録することができ、ＲＡＷ動画データの現像時において、ランダムノイズ及び固定パターンノイズ等の各種ノイズ除去に必要な処理を適用することを可能とする。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】変更
【補正の内容】
【００３６】
なお、本実施形態では、固定パターンノイズの検出方法として遮光画像を用いる方法を説明したが、これに限定されるものではない。例えば、水平方向に生じる横スジのような固定パターンノイズであれば、ＯＢ領域を用いて解析することも可能である。