【手続補正書】
【提出日】平成29年1月24日(2017.1.24)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮像光学系の射出瞳の異なる領域を透過した光束をそれぞれ光電変換して信号を出力する複数の光電変換部と、前記複数の光電変換部に対応する１つのマイクロレンズとからなる、複数の単位画素を有する撮像手段から得られた信号を処理する画像処理装置であって、
前記複数の光電変換部それぞれから出力された信号が飽和しているかどうかを判定する判定手段と、
前記複数の光電変換部のうち、前記判定手段により飽和していると判定された信号を出力した第１の光電変換部と同じマイクロレンズに対応する他の光電変換部である第２の光電変換部から出力された信号を補正する際の補正の特性と前記第２の光電変換部から出力された信号のレベルに基づいて、前記第１の光電変換部から出力された信号が飽和していない場合に得られる補正後の信号レベルを推定する推定手段と
を有することを特徴とする画像処理装置。
【請求項２】
前記判定手段は、更に、前記第１の光電変換部と同じマイクロレンズに対応する他の光電変換部から出力された信号が飽和しているか、及び、予め決められた閾値より小さいかを判定し、前記推定手段は、前記判定の結果、飽和しておらず、且つ前記閾値以上の光電変換部を、前記第２の光電変換部として、前記推定を行うことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記推定手段は、前記判定の結果、前記他の光電変換部が全て飽和しているか、または全て前記閾値より小さい場合に、前記他の光電変換部のうち、最も感度の低い光電変換部から出力された信号を補正する際の補正の特性及び該光電変換部が飽和した場合の信号のレベルに基づいて、前記推定を行うことを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記撮像手段により撮影を行ったときの撮影条件を取得する取得手段と、
異なる撮影条件について、前記補正の特性を記憶した記憶手段と
を更に有することを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
【請求項５】
撮像光学系の射出瞳の異なる領域を透過した光束をそれぞれ光電変換して信号を出力する複数の光電変換部と、前記複数の光電変換部に対応する１つのマイクロレンズとからなる、複数の単位画素を有する撮像手段から得られた信号を処理する画像処理装置であって、
前記複数の光電変換部それぞれから出力された信号が飽和しているかどうかを判定する判定手段と、
前記複数の光電変換部のうち、前記判定手段により飽和していると判定された信号を出力した第１の光電変換部の感度と、該第１の光電変換部と同じマイクロレンズに対応する他の光電変換部である第２の光電変換部の感度との差に基づいて、前記第１の光電変換部から出力された信号と、前記第２の光電変換部から出力された信号との差が、前記感度の差を維持するように、前記第１の光電変換部から出力された信号を補正する補正手段と
を有することを特徴とする画像処理装置。
【請求項６】
前記複数の光電変換部のうち、前記第１の光電変換部の感度と、前記第２の光電変換部の感度との差に基づいて、前記第１の光電変換部から出力された信号と、前記第２の光電変換部から出力された信号との差が、前記感度の差を維持するように、前記第１の光電変換部から出力された信号を補正する補正手段と、
前記複数の単位画素の同じ位置に配置された光電変換部から出力された信号から得られた複数の画像間の視差が予め決められた第１の条件により大きいと判断された場合に、前記補正手段を選択し、前記視差が予め決められた第２の条件により小さいと判断された場合に、前記推定手段を選択する選択手段と
を有することを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
【請求項７】
前記撮像手段により撮影を行ったときの絞り値及び焦点距離を取得する取得手段と、
撮影した画像の合焦度を検出する検出手段とを更に有し、
前記選択手段は、前記絞り値が予め決められた第１の閾値以上の場合、及び、前記焦点距離が予め決められた第２の閾値以下で、前記合焦度が予め決められた第３の閾値以上の場合に、前記視差が小さいと判断し、前記絞り値が前記第１の閾値より小さく、前記焦点距離が前記第２の閾値よりも長い場合、及び、前記絞り値が前記第１の閾値より小さく、前記合焦度が前記第３の閾値よりも低い場合に、前記視差が大きいと判断することを特徴とする請求項６に記載の画像処理装置。
【請求項８】
前記複数の光電変換部のうち、前記第１の光電変換部の感度と、前記第２の光電変換部の感度との差に基づいて、前記第１の光電変換部から出力された信号と、前記第２の光電変換部から出力された信号との差が、前記感度の差を維持するように、前記第１の光電変換部から出力された信号を補正する補正手段と、
前記複数の単位画素の同じ位置に配置された光電変換部から出力された信号から得られた複数の画像の輝度差が予め決められた第１の条件により大きいと判断された場合に、前記補正手段を選択し、前記輝度差が予め決められた第２の条件により小さいと判断された場合に、前記推定手段を選択する選択手段と
を有することを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
【請求項９】
撮影した画像のシーンを解析する解析手段を更に有し、
前記選択手段は、前記画像が、逆光または夜景の場合に、前記輝度差が大きいと判断し、それ以外の場合に、前記輝度差が小さいと判断することを特徴とする請求項８に記載の画像処理装置。
【請求項１０】
前記複数の光電変換部から出力された信号を、前記単位画素ごとに加算する加算手段を更に有することを特徴とする請求項１乃至９のいずれか１項に記載の画像処理装置。
【請求項１１】
前記複数の単位画素の同じ位置に配置された光電変換部から出力された信号から複数の画像を構成し、当該複数の画像間の相関値に基づいて、焦点検出を行う焦点検出手段を更に有することを特徴とする請求項１乃至１０のいずれか１項に記載の画像処理装置。
【請求項１２】
前記撮像手段と、
請求項１乃至１１のいずれか１項に記載の画像処理装置と
を有することを特徴とする撮像装置。
【請求項１３】
撮像光学系の射出瞳の異なる領域を透過した光束をそれぞれ光電変換して信号を出力する複数の光電変換部と、前記複数の光電変換部に対応する１つのマイクロレンズとからなる、複数の単位画素を有する撮像手段から得られた信号を処理する画像処理方法であって、
判定手段が、前記複数の光電変換部それぞれから出力された信号が飽和しているかどうかを判定する判定工程と、
推定手段が、前記複数の光電変換部のうち、前記判定工程により飽和していると判定された信号を出力した第１の光電変換部と同じマイクロレンズに対応する他の光電変換部である第２の光電変換部から出力された信号を補正する際の補正の特性と前記第２の光電変換部から出力された信号のレベルに基づいて、前記第１の光電変換部から出力された信号が飽和していない場合に得られる補正後の信号レベルを推定する推定工程と
を有することを特徴とする画像処理方法。
【請求項１４】
撮像光学系の射出瞳の異なる領域を透過した光束をそれぞれ光電変換して信号を出力する複数の光電変換部と、前記複数の光電変換部に対応する１つのマイクロレンズとからなる、複数の単位画素を有する撮像手段から得られた信号を処理する画像処理方法であって、
判定手段が、前記複数の光電変換部それぞれから出力された信号が飽和しているかどうかを判定する判定工程と、
補正手段が、前記複数の光電変換部のうち、前記判定工程により飽和していると判定された信号を出力した第１の光電変換部の感度と、該第１の光電変換部と同じマイクロレンズに対応する他の光電変換部である第２の光電変換部の感度との差に基づいて、前記第１の光電変換部から出力された信号と、前記第２の光電変換部から出力された信号との差が、前記感度の差を維持するように、前記第１の光電変換部から出力された信号を補正する補正工程と
を有することを特徴とする画像処理方法。
【請求項１５】
補正手段が、前記複数の光電変換部のうち、前記第１の光電変換部の感度と、前記第２の光電変換部の感度との差に基づいて、前記第１の光電変換部から出力された信号と、前記第２の光電変換部から出力された信号との差が、前記感度の差を維持するように、前記第１の光電変換部から出力された信号を補正する補正工程と、
選択手段が、前記複数の単位画素の同じ位置に配置された光電変換部から出力された信号から得られた複数の画像間の視差が予め決められた第１の条件により大きいと判断された場合に、前記補正工程を選択し、前記視差が予め決められた第２の条件により小さいと判断された場合に、前記推定工程を選択する選択工程と
を有することを特徴とする請求項１３に記載の画像処理方法。
【請求項１６】
補正手段が、前記複数の光電変換部のうち、前記第１の光電変換部の感度と、前記第２の光電変換部の感度との差に基づいて、前記第１の光電変換部から出力された信号と、前記第２の光電変換部から出力された信号との差が、前記感度の差を維持するように、前記第１の光電変換部から出力された信号を補正する補正工程と、
選択手段が、前記複数の単位画素の同じ位置に配置された光電変換部から出力された信号から得られた複数の画像の輝度差が予め決められた第１の条件により大きいと判断された場合に、前記補正工程を選択し、前記輝度差が予め決められた第２の条件により小さいと判断された場合に、前記推定工程を選択する選択工程と
を有することを特徴とする請求項１３に記載の画像処理方法。
【請求項１７】
コンピュータを、請求項１乃至１１のいずれか１項に記載の画像処理装置の各手段として機能させるためのプログラム。
【請求項１８】
請求項１７に記載のプログラムを記憶したコンピュータが読み取り可能な記憶媒体。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
上記目的を達成するために、撮像光学系の射出瞳の異なる領域を透過した光束をそれぞれ光電変換して信号を出力する複数の光電変換部と、前記複数の光電変換部に対応する１つのマイクロレンズとからなる、複数の単位画素を有する撮像手段から得られた信号を処理する本発明の画像処理装置は、前記複数の光電変換部それぞれから出力された信号が飽和しているかどうかを判定する判定手段と、前記複数の光電変換部のうち、前記判定手段により飽和していると判定された信号を出力した第１の光電変換部と同じマイクロレンズに対応する他の光電変換部である第２の光電変換部から出力された信号を補正する際の補正の特性と前記第２の光電変換部から出力された信号のレベルに基づいて、前記第１の光電変換部から出力された信号が飽和していない場合に得られる補正後の信号レベルを推定する推定手段とを有する。