【手続補正書】
【提出日】平成28年2月9日(2016.2.9)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
ライトフィールドデータを取得する画像取得手段と、
前記ライトフィールドデータの中の被写体を選択する選択手段と、
前記選択手段により選択された複数の被写体を関連付ける関連付け手段と、
前記ライトフィールドデータを再構成し、複数の画像を生成する再構成手段であって、前記関連付け手段により関連付けられた複数の被写体のそれぞれが前記複数の画像のうちの少なくとも１枚において、ボケていないか、同じようにボケている複数の画像を再構成する再構成手段と、
前記再構成手段により再構成された前記複数の画像を、前記関連付け手段により関連付けられた複数の被写体が、ボケていないか、同じようにボケている１枚の画像が生成されるように合成する合成手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
前記選択手段は、ユーザが操作するための操作部材を備えることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記操作部材は、タッチパネルであることを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記選択手段は、被写体の動きを追尾することを特徴とする請求項１に記載の画像処理装置。
【請求項５】
前記選択手段により選択した被写体を区別可能に表示する表示手段をさらに備えることを特徴とする請求項１に記載の画像処理装置。
【請求項６】
前記選択手段により選択した被写体の前記ライトフィールドデータ内での代表座標情報を、前記ライトフィールドデータに付加して記録する記録手段をさらに備えることを特徴とする請求項１に記載の画像処理装置。
【請求項７】
前記選択手段により選択した被写体のうち、前記ライトフィールドデータ内で最も大きな割合を占める被写体に焦点が合った再構成画像を、前記複数の画像を合成する際の基準画像とすることを特徴とする請求項１に記載の画像処理装置。
【請求項８】
前記選択手段により選択した被写体のうち、撮像装置に対して最も近い被写体に焦点が合った再構成画像を、前記複数の画像を合成する際の基準画像とすることを特徴とする請求項１に記載の画像処理装置。
【請求項９】
前記選択手段により選択した被写体のうち、個人が認証できた被写体に焦点が合った再構成画像を、前記複数の画像を合成する際の基準画像とすることを特徴とする請求項１に記載の画像処理装置。
【請求項１０】
前記選択手段により選択した被写体のうち、人物だと認識できた被写体に焦点が合った再構成画像を、前記複数の画像を合成する際の基準画像とすることを特徴とする請求項１に記載の画像処理装置。
【請求項１１】
前記選択手段により選択した被写体のうち、人物だと認識できない被写体に焦点が合った再構成画像を、前記複数の画像を合成する際の基準画像とすることを特徴とする請求項１に記載の画像処理装置。
【請求項１２】
前記ライトフィールドデータを取得する撮像装置から前記選択手段により選択された被写体までの距離を算出する算出手段と、前記関連付け手段により関連付けられた被写体が前記撮像装置のリフォーカス可能範囲外に存在する場合にリフォーカスにより合焦不可能なことをユーザに知らせる警告手段と、をさらに備えることを特徴とする請求項１に記載の画像処理装置。
【請求項１３】
前記リフォーカス可能範囲外とは、前記算出手段で算出した被写体までの距離が、前記撮像装置の最短撮影距離よりも近いことであることを特徴とする請求項１２に記載の画像処理装置。
【請求項１４】
前記警告手段は、警告文を表示することを特徴とする請求項１２に記載の画像処理装置。
【請求項１５】
前記警告手段は、リフォーカス可能範囲外に存在する被写体を強調表示することを特徴とする請求項１２に記載の画像処理装置。
【請求項１６】
前記警告手段は、ユーザに移動を促すメッセージを表示することを特徴とする請求項１２に記載の画像処理装置。
【請求項１７】
被写体像を撮像し、前記ライトフィールドデータを生成する撮像手段をさらに備えることを特徴とする請求項１に記載の画像処理装置。
【請求項１８】
前記撮像手段は、マイクロレンズアレイと撮像素子とを備え、前記マイクロレンズアレイのそれぞれのマイクロレンズは前記撮像素子の複数の画素に対応することを特徴とする請求項１７に記載の画像処理装置。
【請求項１９】
前記合成手段により合成された画像は、前記選択手段により選択された被写体に焦点が合っており、その他の被写体に焦点が合っていない画像であることを特徴とする請求項１に記載の画像処理装置。
【請求項２０】
前記合成手段により合成された画像は、前記選択手段により選択された被写体がボケておらず、その他の被写体がボケている画像であることを特徴とする請求項１に記載の画像処理装置。
【請求項２１】
ライトフィールドデータを取得する画像取得工程と、
前記ライトフィールドデータの中の被写体を選択する選択工程と、
前記選択工程により選択された複数の被写体を関連付ける関連付け工程と、
前記ライトフィールドデータを再構成し、複数の画像を生成する再構成工程であって、前記関連付け工程により関連付けられた複数の被写体のそれぞれが前記複数の画像のうちの少なくとも１枚において、ボケていないか、同じようにボケている複数の画像を再構成する再構成工程と、
前記再構成工程により再構成された前記複数の画像を、前記関連付け工程により関連付けられた複数の被写体が、ボケていないか、同じようにボケている１枚の画像が生成されるように合成する合成工程と、
を備えることを特徴とする画像処理装置の制御方法。
【請求項２２】
前記ライトフィールドデータを取得する撮像装置から前記選択工程により選択された被写体までの距離を算出する算出工程と、前記関連付け工程により関連付けられた被写体が前記撮像装置のリフォーカス可能範囲外に存在する場合にリフォーカスにより合焦不可能なことをユーザに知らせる警告工程と、をさらに備えることを特徴とする請求項２１に記載の画像処理装置の制御方法。
【請求項２３】
前記ライトフィールドデータは、それぞれが複数の画素に対応する複数のマイクロレンズを有する撮像手段により撮像されることを特徴とする請求項２１に記載の画像処理装置の制御方法。
【請求項２４】
請求項２１に記載の制御方法の各工程をコンピュータに実行させるためのプログラム。
【請求項２５】
請求項２１に記載の制御方法の各工程をコンピュータに実行させるためのプログラムを記憶したコンピュータが読み取り可能な記憶媒体。
【請求項２６】
それぞれが複数の画素に対応する複数のマイクロレンズを有する撮像手段であって、被写体を撮像し、ライトフィールドデータを生成する撮像手段と、
前記ライトフィールドデータの中の被写体を選択する選択手段と、
前記選択手段により選択された複数の被写体を関連付ける関連付け手段と、
前記ライトフィールドデータを再構成し、複数の画像を生成する再構成手段であって、前記関連付け手段により関連付けられた複数の被写体のそれぞれが前記複数の画像のうちの少なくとも１枚において、ボケていないか、同じようにボケている複数の画像を再構成する再構成手段と、
前記再構成手段により再構成された前記複数の画像を、前記関連付け手段により関連付けられた複数の被写体が、ボケていないか、同じようにボケている１枚の画像が生成されるように合成する合成手段と、
を備えることを特徴とする撮像装置。
【請求項２７】
それぞれが複数の画素に対応する複数のマイクロレンズを有する撮像手段を備える撮像装置の制御方法であって、
被写体を撮像し、ライトフィールドデータを生成する生成工程と、
前記ライトフィールドデータの中の被写体を選択する選択工程と、
前記選択工程により選択された複数の被写体を関連付ける関連付け工程と、
前記ライトフィールドデータを再構成し、複数の画像を生成する再構成工程であって、前記関連付け工程により関連付けられた複数の被写体のそれぞれが前記複数の画像のうちの少なくとも１枚において、ボケていないか、同じようにボケている複数の画像を再構成する再構成工程と、
前記再構成工程により再構成された前記複数の画像を、前記関連付け工程により関連付けられた複数の被写体が、ボケていないか、同じようにボケている１枚の画像が生成されるように合成する合成工程と、
を備えることを特徴とする撮像装置の制御方法。
【請求項２８】
請求項２７に記載の制御方法の各工程をコンピュータに実行させるためのプログラム。
【請求項２９】
請求項２７に記載の制御方法の各工程をコンピュータに実行させるためのプログラムを記憶したコンピュータが読み取り可能な記憶媒体。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】発明の名称
【補正方法】変更
【補正の内容】
【発明の名称】画像処理装置、撮像装置及びそれらの制御方法、プログラム、記憶媒体
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
本発明は上述した課題に鑑みてなされたものであり、その目的は、ユーザーが意図する複数の被写体に同程度に焦点が合った画像を容易に再構成できる撮像装置を提供することである。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
本発明に係わる画像処理装置は、ライトフィールドデータを取得する画像取得手段と、前記ライトフィールドデータの中の被写体を選択する選択手段と、前記選択手段により選択された複数の被写体を関連付ける関連付け手段と、前記ライトフィールドデータを再構成し、複数の画像を生成する再構成手段であって、前記関連付け手段により関連付けられた複数の被写体のそれぞれが前記複数の画像のうちの少なくとも１枚において、ボケていないか、同じようにボケている複数の画像を再構成する再構成手段と、前記再構成手段により再構成された前記複数の画像を、前記関連付け手段により関連付けられた複数の被写体が、ボケていないか、同じようにボケている１枚の画像が生成されるように合成する合成手段と、を備えることを特徴とする。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
本発明によれば、ユーザーが意図する複数の被写体に同程度に焦点が合った画像を容易に再構成できる撮像装置を提供することが可能となる。