【手続補正書】
【提出日】平成29年4月20日(2017.4.20)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
射出瞳の一部に対応する撮像画像データである瞳分割画像データを含んだ複数の撮像画像データを縮小して、複数の縮小画像データを生成する縮小手段と、
縮小画像データの一対を用いてデフォーカス量の空間的な分布を表す分布画像データを生成する処理を、前記複数の縮小画像データのうち、前記瞳分割画像データの縮小画像データを含んだ少なくとも一対に対して行う生成手段と、
前記分布画像データに基づいて、該分布画像データに対応する瞳分割画像データから、予め定められた画像処理の適用対象となる画素のデータを抽出する抽出手段と、
前記抽出した画素のデータと、前記分布画像データと、射出瞳の全体に対応する撮像画像データとを出力する出力手段と、
を有することを特徴とする撮像装置。
【請求項２】
複数の前記分布画像データが生成された場合、前記出力手段は複数の前記分布画像データを合成した分布画像データを出力することを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記射出瞳の全体に対応する撮像画像データが、前記複数の撮像画像データに含まれる複数の前記瞳分割画像データから生成されることを特徴とする請求項１または２に記載の撮像装置。
【請求項４】
前記分布画像データに基づいて、前記射出瞳の全体に対応する撮像画像データの縮小画像データを構成する画素データのうち、予め定められた範囲のデフォーカス量を有する画素データに対して、前記予め定められた画像処理を適用する画像処理手段をさらに有することを特徴とする請求項１から請求項３のいずれか１項に記載の撮像装置。
【請求項５】
前記画像処理手段は、複数の前記分布画像データが生成された場合、前記分布画像データごとに前記予め定められた画像処理を適用した縮小画像データを生成したのち、合成することを特徴とする請求項４に記載の撮像装置。
【請求項６】
請求項１から請求項５のいずれか１項に記載の撮像装置の前記出力手段が出力した、前記抽出した画素のデータと、前記分布画像データと、前記射出瞳の全体に対応する撮像画像データとを取得する取得手段と、
前記抽出した画素のデータに基づいて、前記分布画像データを、前記射出瞳の全体に対応する撮像画像データにおけるデフォーカス量の分布を表す分布画像データに変換する変換手段と、
前記変換された前記分布画像データに基づいて、前記射出瞳の全体に対応する撮像画像データを構成する画素データのうち、予め定められた範囲のデフォーカス量を有する画素データに対して、前記予め定められた画像処理を適用する画像処理手段と、
を有することを特徴とする画像処理装置。
【請求項７】
前記取得した前記分布画像データが、縮小画像データの画素ごとのデフォーカス量を表し、
前記変換手段は、前記射出瞳の全体に対応する撮像画像データの画素ごとのデフォーカス量を表すように前記分布画像データを拡大したのち、前記抽出した画素のデータに対応する画素のデフォーカス量を再計算することにより、前記分布画像データを前記射出瞳の全体に対応する撮像画像データにおけるデフォーカス量の分布を表す分布画像データに変換することを特徴とする請求項６に記載の画像処理装置。
【請求項８】
前記撮像装置の外部装置であることを特徴とする請求項６または７に記載の画像処理装置。
【請求項９】
請求項１から請求項５のいずれか１項に記載の撮像装置と、請求項８に記載の画像処理装置とが通信可能に接続されてなる画像処理システム。
【請求項１０】
前記撮像装置に内蔵されていることを特徴とする請求項６または７に記載の画像処理装置。
【請求項１１】
撮像画像データの一対を用いてデフォーカス量の空間的な分布を表す分布画像データを生成する処理を、射出瞳の一部に対応する撮像画像データである瞳分割画像データを含んだ複数の撮像画像データのうち、前記瞳分割画像データを含んだ少なくとも一対に対して行う生成手段と、
前記分布画像データから、前記分布画像データよりも密度が低いデフォーカス量分布を表す分布画像データを生成する縮小手段と、
前記生成手段が生成した前記分布画像データを構成する画素データから、予め定められた画像処理の適用対象となるデフォーカス量を有する画素データを抽出する抽出手段と、
前記抽出した画素データと、前記縮小手段が生成した前記分布画像データと、射出瞳の全体に対応する撮像画像データとを出力する出力手段と、
を有することを特徴とする撮像装置。
【請求項１２】
複数の前記分布画像データが生成された場合、前記縮小手段は複数の前記分布画像データのそれぞれを縮小し、前記出力手段は前記縮小手段が縮小した複数の前記分布画像データを合成した分布画像データを出力することを特徴とする請求項１１に記載の撮像装置。
【請求項１３】
前記射出瞳の全体に対応する撮像画像データが、前記複数の撮像画像データに含まれる複数の前記瞳分割画像データから生成されることを特徴とする請求項１１または１２に記載の撮像装置。
【請求項１４】
前記縮小手段が生成した分布画像データに基づいて、前記射出瞳の全体に対応する撮像画像データの縮小画像データを構成する画素データのうち、予め定められた範囲のデフォーカス量を有する画素データに対して、前記予め定められた画像処理を適用する画像処理手段をさらに有することを特徴とする請求項１１から請求項１３のいずれか１項に記載の撮像装置。
【請求項１５】
複数の前記分布画像データが生成された場合、前記縮小手段は複数の前記分布画像データのそれぞれを縮小し、前記画像処理手段は、前記縮小手段が縮小した前記分布画像データごとに前記予め定められた画像処理を適用した縮小画像データを生成したのち、合成することを特徴とする請求項１４に記載の撮像装置。
【請求項１６】
請求項１１から請求項１５のいずれか１項に記載の撮像装置の前記出力手段が出力した、前記抽出した画素データと、前記縮小手段が生成した前記分布画像データと、前記射出瞳の全体に対応する撮像画像データとを取得する取得手段と、
前記縮小手段が生成した前記分布画像データを、前記射出瞳の全体に対応する撮像画像データに対応する分布画像データに変換する拡大手段と、
前記射出瞳の全体に対応する撮像画像データを構成する画素データのうち、前記抽出した画像データに対応する画素データに対して、前記予め定められた画像処理を適用する画像処理手段と、
を有することを特徴とする画像処理装置。
【請求項１７】
前記撮像装置の外部装置であることを特徴とする請求項１６に記載の画像処理装置。
【請求項１８】
請求項１１から請求項１５のいずれか１項に記載の撮像装置と、請求項１７に記載の画像処理装置とが通信可能に接続されてなる画像処理システム。
【請求項１９】
前記撮像装置に内蔵されていることを特徴とする請求項１６に記載の画像処理装置。
【請求項２０】
射出瞳の一部に対応する撮像画像データである瞳分割画像データを含んだ複数の撮像画像データを縮小して、複数の縮小画像データを生成する縮小手段と、
縮小画像データの一対を用いてデフォーカス量の空間的な分布を表す分布画像データを生成する処理を、前記複数の縮小画像データのうち、前記瞳分割画像データの縮小画像データを含んだ少なくとも一対に対して行う生成手段と、
前記分布画像データと、前記複数の撮像画像データとを出力する出力手段と、
を有することを特徴とする撮像装置。
【請求項２１】
請求項２０に記載の撮像装置の前記出力手段が出力した、前記分布画像データと、前記複数の撮像画像データとを取得する取得手段と、
前記複数の撮像画像データと、前記分布画像データとに基づいて、前記分布画像データを前記複数の撮像画像データに対応したデフォーカス量の分布を表す分布画像データに変換する変換手段と、
前記変換された前記分布画像データに基づいて、前記複数の撮像画像データから得られる、射出瞳の異なる一部に対応する複数の瞳分割画像データについて、予め定められた範囲のデフォーカス量を有する画素データに対して前記予め定められた画像処理を適用する画像処理手段と、
を有することを特徴とする画像処理装置。
【請求項２２】
前記複数の撮像画像データが射出瞳の全体に対応する撮像画像データを含み、前記複数の瞳分割画像データの少なくとも１つが、前記複数の撮像画像データに含まれる瞳分割画像データと前記射出瞳の全体に対応する撮像画像データとから算出されることを特徴とする請求項２１に記載の画像処理装置。
【請求項２３】
前記画像処理が適用された画像データを合成する合成手段をさらに有することを特徴とする請求項２１または２２に記載の画像処理装置。
【請求項２４】
前記撮像装置の外部装置であることを特徴とする請求項２１から請求項２３のいずれか１項に記載の画像処理装置。
【請求項２５】
請求項２０に記載の撮像装置と、請求項２４に記載の画像処理装置とが通信可能に接続されてなる画像処理システム。
【請求項２６】
前記撮像装置に内蔵されていることを特徴とする請求項２１から請求項２３のいずれか１項に記載の画像処理装置。
【請求項２７】
縮小手段が、射出瞳の一部に対応する撮像画像データである瞳分割画像データを含んだ複数の撮像画像データを縮小して、複数の縮小画像データを生成する縮小工程と、
生成手段が、縮小画像データの一対を用いてデフォーカス量の空間的な分布を表す分布画像データを生成する処理を、前記複数の縮小画像データのうち、前記瞳分割画像データの縮小画像データを含んだ少なくとも一対に対して行う生成工程と、
抽出手段が、前記分布画像データに基づいて、該分布画像データに対応する瞳分割画像データから、予め定められた画像処理の適用対象となる画素のデータを抽出する抽出工程と、
出力手段が、前記抽出した画素のデータと、前記分布画像データと、射出瞳の全体に対応する撮像画像データとを出力する出力工程と、
を有することを特徴とする撮像装置の制御方法。
【請求項２８】
取得手段が、請求項１から請求項５のいずれか１項に記載の撮像装置の前記出力手段が出力した、前記抽出した画素のデータと、前記分布画像データと、前記射出瞳の全体に対応する撮像画像データとを取得する取得工程と、
変換手段が、前記抽出した画素のデータに基づいて、前記分布画像データを、前記射出瞳の全体に対応する撮像画像データにおけるデフォーカス量の分布を表す分布画像データに変換する変換工程と、
画像処理手段が、前記変換された前記分布画像データに基づいて、前記射出瞳の全体に対応する撮像画像データを構成する画素データのうち、予め定められた範囲のデフォーカス量を有する画素データに対して、前記予め定められた画像処理を適用する画像処理工程と、
を有することを特徴とする画像処理装置の制御方法。
【請求項２９】
生成手段が、撮像画像データの一対を用いてデフォーカス量の空間的な分布を表す分布画像データを生成する処理を、射出瞳の一部に対応する撮像画像データである瞳分割画像データを含んだ複数の撮像画像データのうち、前記瞳分割画像データを含んだ少なくとも一対に対して行う生成工程と、
縮小手段が、前記分布画像データから、前記分布画像データよりも密度が低いデフォーカス量分布を表す分布画像データを生成する縮小工程と、
抽出手段が、前記生成工程で生成された前記分布画像データを構成する画素データから、予め定められた画像処理の適用対象となるデフォーカス量を有する画素データを抽出する抽出工程と、
出力手段が、前記抽出した画素データと、前記縮小工程でが生成された前記分布画像データと、射出瞳の全体に対応する撮像画像データとを出力する出力工程と、
を有することを特徴とする撮像装置の制御方法。
【請求項３０】
取得手段が、請求項１１から請求項１５のいずれか１項に記載の撮像装置の前記出力手段が出力した、前記抽出した画素データと、前記縮小手段が生成した前記分布画像データと、前記射出瞳の全体に対応する撮像画像データとを取得する取得工程と、
拡大手段が、前記縮小手段が生成した前記分布画像データを、前記射出瞳の全体に対応する撮像画像データに対応する分布画像データに変換する拡大工程と、
画像処理手段が、前記射出瞳の全体に対応する撮像画像データを構成する画素データのうち、前記抽出した画像データに対応する画素データに対して、前記予め定められた画像処理を適用する画像処理工程と、
を有することを特徴とする画像処理装置の制御方法。
【請求項３１】
縮小手段が、射出瞳の一部に対応する撮像画像データである瞳分割画像データを含んだ複数の撮像画像データを縮小して、複数の縮小画像データを生成する縮小工程と、
生成手段が、縮小画像データの一対を用いてデフォーカス量の空間的な分布を表す分布画像データを生成する処理を、前記複数の縮小画像データのうち、前記瞳分割画像データの縮小画像データを含んだ少なくとも一対に対して行う生成工程と、
出力手段が、前記分布画像データと、前記複数の撮像画像データとを出力する出力工程と、
を有することを特徴とする撮像装置の制御方法。
【請求項３２】
取得手段が、請求項２０に記載の撮像装置の前記出力手段が出力した、前記分布画像データと、前記複数の撮像画像データとを取得する取得工程と、
変換手段が、前記複数の撮像画像データと、前記分布画像データとに基づいて、前記分布画像データを前記複数の撮像画像データに対応したデフォーカス量の分布を表す分布画像データに変換する変換工程と、
画像処理手段が、前記変換された前記分布画像データに基づいて、前記複数の撮像画像データから得られる、射出瞳の異なる一部に対応する複数の瞳分割画像データについて、予め定められた範囲のデフォーカス量を有する画素データに対して前記予め定められた画像処理を適用する画像処理工程と、
を有することを特徴とする画像処理装置の制御方法。
【請求項３３】
撮像装置が有するコンピュータを、請求項１から５、１１から１５、２０のいずれか１項に記載の撮像装置の各手段として機能させるためのプログラム。
【請求項３４】
撮像装置が有するコンピュータを、請求項１０、１９、２６のいずれか１項に記載の画像処理装置として機能させるためのプログラム。
【請求項３５】
コンピュータを、請求項６から８、１６、１７、２１から２４のいずれか１項に記載の画像処理装置の各手段として機能させるためのプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００６５
【補正方法】変更
【補正の内容】
【００６５】
この場合、画像処理部２０６のＤｅｆ量分布算出部４０１では、Ｒｐ（ｘ，ｙ）とｇ（ｘ，ｙ）の代わりにＤｅｆｐ（ｘ，ｙ）が入力される。Ｄｅｆ量分布算出部４０１は、Ｄｅｆｐ（ｘ，ｙ）に含まれる画素データ（デフォーカス量）で、画像拡大部４０２からのＤｅｆｅ（ｘ，ｙ）に対応する画素データを置換して、更新デフォーカス分布画像データＤｅｆ’（ｘ，ｙ）を生成する。この場合、Ｄｅｆｐ（ｘ，ｙ）の分解能は元画像における分解能に等しいため、再計算の必要が無い。
なお、本実施形態においては、図２に示すようにマイクロレンズ１つに対して一対の光電変換部が水平方向に配置された画素配列の撮像部１０５を用いた場合について説明した。しかし、本発明は他の方向に配置された一対の光電変換部を有する撮像部や、マイクロレンズ１つに対して３つ以上の光電変換部が配置された撮像部を用いる場合にも適用可能である。