【手続補正書】
【提出日】平成26年12月17日(2014.12.17)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
被写体を異なる視点から撮影した複数のサブ画像から構成されるライトフィールド画像を取得するライトフィールド画像取得部と、
前記ライトフィールド画像から再構成した被写体の画像である再構成画像のひな形を定義するひな形定義部と、
前記ひな形定義部が定義した再構成画像を構成する画素である再構成画素と、前記サブ画像の少なくとも一つと、の対応の強さを示す係数である画像重みを定義した画像重み定義部と、
前記複数のサブ画像を構成するサブ画像画素から、前記ひな形定義部が定義した再構成画像を構成する再構成画素に対応する画素である対応画素を抽出する対応画素抽出部と、
前記再構成画素の画素値を、前記対応画素抽出部が抽出した対応画素の画素値と、前記画像重み定義部が定義する当該再構成画素と当該対応画素の属するサブ画像とに対応する画像重みと、に基づいて求めることにより、前記再構成画像を生成する再構成画像生成部と、
を有することを特徴とする再構成画像生成装置。
【請求項２】
前記ライトフィールド画像を取得した撮影パラメータを取得する撮影パラメータ取得部をさらに有し、
前記画像重み定義部は、
前記ひな形定義部が定義した再構成画像を構成する画素である再構成画素と、前記サブ画像の少なくとも一つと、の対応の強さを示す係数である画像重みを定義したテーブルである、前記撮影パラメータ取得部が取得した撮影パラメータに応じるメインテーブルを取得するメインテーブル取得部を有し、
前記再構成画像生成部は、
前記再構成画素の画素値を、前記対応画素抽出部が抽出した対応画素の画素値と、前記メインテーブル取得部が取得したメインテーブルが定義する当該再構成画素と当該対応画素の属するサブ画像とに対応する画像重みと、に基づいて求めることにより、前記再構成画像を生成する、
ことを特徴とする請求項１に記載の再構成画像生成装置。
【請求項３】
前記ライトフィールド画像は、前記被写体からの光線を捉えるメインレンズと、前記メインレンズが捉えた光線をさらに捉える前記複数の視点のそれぞれに対応する複数のサブレンズと、を用いて撮影され、
前記撮影パラメータは、前記メインレンズの焦点距離を少なくとも含む、
ことを特徴とする請求項２に記載の再構成画像生成装置。
【請求項４】
前記再構成画像を含む面と前記メインレンズとの距離を示す情報を含む再構成設定を取得する再構成設定取得部をさらに有し、
前記メインテーブル取得部は、前記撮影パラメータ取得部が取得した撮影パラメータと前記再構成設定取得部が取得した再構成設定に応じるメインテーブルを取得する、
ことを特徴とする請求項３に記載の再構成画像生成装置。
【請求項５】
前記撮影パラメータ取得部が取得した撮影パラメータと前記再構成設定取得部が取得した再構成設定と、予め記憶されている前記メインレンズと前記サブレンズとの相対位置と、から前記再構成画素に対応する被写体の部分から発された光線が前記サブレンズに到達する点であるサブレンズ到達点を取得するサブレンズ到達点取得部をさらに備え、
前記メインテーブル取得部が取得するメインテーブルは、前記サブレンズ到達点取得部が取得したサブレンズ到達点から所定距離以上遠い位置にある前記サブレンズに対応するサブ画像の前記画像重みが小さい、
ことを特徴とする請求項４に記載の再構成画像生成装置。
【請求項６】
前記再構成設定取得部が取得した再構成設定に含まれる前記再構成画像を含む面と前記メインレンズとの距離が小さいほど、前記メインテーブル取得部が取得するメインテーブルの画像重みに係る所定距離が大きくなる、
ことを特徴とする請求項５に記載の再構成画像生成装置。
【請求項７】
前記撮影パラメータ取得部が取得した撮影パラメータに含まれる前記メインレンズの焦点距離が小さいほど、前記メインテーブル取得部が取得するメインテーブルの画像重みに係る所定距離が大きくなる、
ことを特徴とする請求項５又は６に記載の再構成画像生成装置。
【請求項８】
前記撮影パラメータ取得部が取得する撮影パラメータは、前記メインレンズの有効径をさらに含み、
前記撮影パラメータ取得部が取得した撮影パラメータに含まれる前記メインレンズの有効径が大きいほど、前記メインテーブル取得部が取得するメインテーブルの画像重みに係る所定距離が大きくなる、
ことを特徴とする請求項５乃至７の何れか１項に記載の再構成画像生成装置。
【請求項９】
前記ひな形定義部が定義した再構成画像を構成する画素である再構成画素と、前記サブ画像の一つである注目サブ画像に含まれるサブ画素の少なくとも一つと、の対応の強さを示す係数である画素重みを定義したテーブルである、前記撮影パラメータ取得部が取得した撮影パラメータに応じるサブテーブルを取得するサブテーブル取得部をさらに有し、
前記再構成画像生成部は、前記再構成画素の画素値を、前記対応画素抽出部が抽出した対応画素の画素値と、前記メインテーブル取得部が取得したメインテーブルが定義する当該再構成画素と当該対応画素の属するサブ画像とに対応する画像重みと、前記サブテーブル取得部が取得したサブテーブルが定義する当該再構成画素と当該対応画素とに対応する画素重みに基づいて決定する、
ことを特徴とする請求項２乃至７の何れか１項に記載の再構成画像生成装置。
【請求項１０】
被写体を異なる視点から撮影した複数のサブ画像から構成されるライトフィールド画像を取得する工程と、
前記ライトフィールド画像から再構成した被写体の画像である再構成画像のひな形を定義する工程と、
前記定義した再構成画像を構成する画素である再構成画素と、前記サブ画像の少なくとも一つと、の対応の強さを示す係数である画像重みを定義した工程と、
前記複数のサブ画像を構成するサブ画像画素から、前記定義した再構成画像を構成する再構成画素に対応する画素である対応画素を抽出する工程と、
前記再構成画素の画素値を、前記抽出した対応画素の画素値と、前記画像重みが定義された当該再構成画素と当該対応画素の属するサブ画像とに対応する画像重みと、に基づいて求めることにより、前記再構成画像を生成する工程と、
を含むことを特徴とする再構成画像生成方法。
【請求項１１】
コンピュータに、
被写体を異なる視点から撮影した複数のサブ画像から構成されるライトフィールド画像を取得する処理、
前記ライトフィールド画像から再構成した被写体の画像である再構成画像のひな形を定義する処理、
前記定義した再構成画像を構成する画素である再構成画素と、前記サブ画像の少なくとも一つと、の対応の強さを示す係数である画像重みを定義する処理、
前記複数のサブ画像を構成するサブ画像画素から、前記定義した再構成画像を構成する再構成画素に対応する画素である対応画素を抽出する処理、
前記再構成画素の画素値を、前記抽出した対応画素の画素値と、前記画像重みが定義された当該再構成画素と当該対応画素の属するサブ画像とに対応する画像重みと、に基づいて求めることにより、前記再構成画像を生成する処理、
を実行させることを特徴とするプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
上記目的を達成するため、本願発明に係る再構成画像生成装置は、
被写体を異なる視点から撮影した複数のサブ画像から構成されるライトフィールド画像を取得するライトフィールド画像取得部と、
前記ライトフィールド画像から再構成した被写体の画像である再構成画像のひな形を定義するひな形定義部と、
前記ひな形定義部が定義した再構成画像を構成する画素である再構成画素と、前記サブ画像の少なくとも一つと、の対応の強さを示す係数である画像重みを定義した画像重み定義部と、
前記複数のサブ画像を構成するサブ画像画素から、前記ひな形定義部が定義した再構成画像を構成する再構成画素に対応する画素である対応画素を抽出する対応画素抽出部と、
前記再構成画素の画素値を、前記対応画素抽出部が抽出した対応画素の画素値と、前記画像重み定義部が定義する当該再構成画素と当該対応画素の属するサブ画像とに対応する画像重みと、に基づいて求めることにより、前記再構成画像を生成する再構成画像生成部と、
を有することを特徴とする。