【手続補正書】
【提出日】平成29年7月31日(2017.7.31)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
複眼撮像装置を用いて撮影された第一の画像を取得するステップと、
前記第一の画像の撮影条件情報を取得するステップと、
前記撮影条件情報に応じて、前記複眼撮像装置における互いに異なる複数の焦点距離を有する複数の光学系の光学特性情報を取得するステップと、
前記光学特性情報に基づいて前記第一の画像を補正するステップと、
補正された前記第一の画像から得られる光線の位置および角度の情報に基づいて第二の画像を生成するステップを有し、
前記光学特性情報は、前記複数の光学系の収差に関する情報と周辺光量に関する情報の少なくとも一方を含むことを特徴とする画像処理方法。
【請求項２】
前記複数の焦点距離は固定であり、
前記複数の光学系は、
第一の焦点距離を有する複数の第一の光学系と、
前記第一の焦点距離とは異なる第二の焦点距離を有する複数の第二の光学系を有することを特徴とする請求項１の画像処理方法。
【請求項３】
前記光学特性情報は、倍率色収差補正情報、歪曲収差補正情報、および、周辺光量補正情報の少なくとも一つを含むことを特徴とする請求項１または２に記載の画像処理方法。
【請求項４】
前記光学特性情報は、光学伝達関数、または、該光学伝達関数に基づいて生成された画像回復フィルタを含むことを特徴とする請求項１乃至３のいずれか１項に記載の画像処理方法。
【請求項５】
前記光学特性情報は、前記複数の光学系に応じて異なることを特徴とする請求項１乃至４のいずれか１項に記載の画像処理方法。
【請求項６】
前記第二の画像は、前記補正された第一の画像に対して再構成処理を行うことにより生成されることを特徴とする請求項１乃至５のいずれか１項に記載の画像処理方法。
【請求項７】
前記第二の画像は、前記補正された第一の画像に対して前記再構成処理を行った後、電子ズーム処理を行うことにより生成されることを特徴とする請求項６に記載の画像処理方法。
【請求項８】
前記複数の焦点距離は、広角側の第一の焦点距離および望遠側の第二の焦点距離を含み、
前記第二の画像は、前記第一の焦点距離と前記第二の焦点距離との間の第三の焦点距離に相当する画角を有する画像であることを特徴とする請求項７に記載の画像処理方法。
【請求項９】
前記第二の画像は、前記第一の焦点距離に相当する画角を有する前記第一の画像に対して前記再構成処理を行った後、前記電子ズーム処理を行うことにより生成されることを特徴とする請求項８に記載の画像処理方法。
【請求項１０】
前記第二の画像は、前記第一の焦点距離および前記第二の焦点距離のそれぞれに相当する画角を有する前記第一の画像に対して前記再構成処理を行った後、前記電子ズーム処理および画像合成処理を行うことにより生成されることを特徴とする請求項８に記載の画像処理方法。
【請求項１１】
前記補正された第一の画像の前記再構成処理を行う際に、該補正された第一の画像を用いて、前記複数の焦点距離のそれぞれに関する自由視点画像を生成することを特徴とする請求項６乃至１０のいずれか１項に記載の画像処理方法。
【請求項１２】
前記複数の焦点距離のそれぞれに関する前記自由視点画像は、互いに一致する視点を有することを特徴とする請求項１１に記載の画像処理方法。
【請求項１３】
前記第二の画像を生成する際に、前記複数の光学系のうち特定の光学系の光学特性情報に基づいて前記第一の画像のうち特定の第一の画像を補正することを特徴とする請求項１乃至１２のいずれか１項に記載の画像処理方法。
【請求項１４】
複眼撮像装置を用いて撮影された第一の画像を取得する画像取得手段と、
前記第一の画像の撮影条件情報を取得する撮影条件取得手段と、
前記撮影条件情報に応じて、前記複眼撮像装置における互いに異なる複数の焦点距離を有する複数の光学系の光学特性情報を取得する光学特性取得手段と、
前記光学特性情報に基づいて前記第一の画像を補正する補正手段と、
補正された前記第一の画像から得られる光線の位置および角度の情報に基づいて第二の画像を生成する画像処理手段を有し、
前記光学特性情報は、前記複数の光学系の収差に関する情報と周辺光量に関する情報の少なくとも一方を含むことを特徴とする画像処理装置。
【請求項１５】
互いに異なる複数の焦点距離を有する複数の光学系と、
前記複数の光学系のそれぞれに対応して設けられた複数の撮像素子と、
前記複数の光学系および前記複数の撮像素子を用いて撮影された第一の画像を取得する画像取得手段と、
撮影条件情報を取得する撮影条件取得手段と、
前記撮影条件情報に応じて、前記複数の光学系の光学特性情報を取得する光学特性取得手段と、
前記光学特性情報に基づいて前記第一の画像を補正する補正手段と、
補正された前記第一の画像から得られる光線の位置および角度の情報に基づいて第二の画像を生成する画像処理手段を有し、
前記光学特性情報は、前記複数の光学系の収差に関する情報と周辺光量に関する情報の少なくとも一方を含むことを特徴とする複眼撮像装置。
【請求項１６】
請求項１乃至１３のいずれか１項に記載の画像処理方法をコンピュータに実行させることを特徴とする画像処理プログラム。
【請求項１７】
請求項１６に記載の画像処理プログラムを記憶していることを特徴とする記憶媒体。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】発明の名称
【補正方法】変更
【補正の内容】
【発明の名称】画像処理方法、画像処理装置、複眼撮像装置、画像処理プログラム、および、記憶媒体
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
そこで本発明は、互いに異なる複数の焦点距離を有する複数の光学系を介して得られた撮影画像から高精細画像を生成可能な画像処理方法、画像処理装置、複眼撮像装置、画像処理プログラム、および、記憶媒体を提供する。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
本発明の一側面としての画像処理方法は、複眼撮像装置を用いて撮影された第一の画像を取得するステップと、前記第一の画像の撮影条件情報を取得するステップと、前記撮影条件情報に応じて、前記複眼撮像装置における互いに異なる複数の焦点距離を有する複数の光学系の光学特性情報を取得するステップと、前記光学特性情報に基づいて前記第一の画像を補正するステップと、補正された前記第一の画像から得られる光線の位置および角度の情報に基づいて第二の画像を生成するステップを有し、前記光学特性情報は、前記複数の光学系の収差に関する情報と周辺光量に関する情報の少なくとも一方を含む。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
本発明の他の側面としての画像処理装置は、複眼撮像装置を用いて撮影された第一の画像を取得する画像取得手段と、前記第一の画像の撮影条件情報を取得する撮影条件取得手段と、前記撮影条件情報に応じて、前記複眼撮像装置における互いに異なる複数の焦点距離を有する複数の光学系の光学特性情報を取得する光学特性取得手段と、前記光学特性情報に基づいて前記第一の画像を補正する補正手段と、補正された前記第一の画像から得られる光線の位置および角度の情報に基づいて第二の画像を生成する画像処理手段を有し、前記光学特性情報は、前記複数の光学系の収差に関する情報と周辺光量に関する情報の少なくとも一方を含む。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正の内容】
【００１４】
本発明の他の側面としての複眼撮像装置は、互いに異なる複数の焦点距離を有する複数の光学系と、前記複数の光学系のそれぞれに対応して設けられた複数の撮像素子と、前記複数の光学系および前記複数の撮像素子を用いて撮影された第一の画像を取得する画像取得手段と、撮影条件情報を取得する撮影条件取得手段と、前記撮影条件情報に応じて、前記複数の光学系の光学特性情報を取得する光学特性取得手段と、前記光学特性情報に基づいて前記第一の画像を補正する補正手段と、補正された前記第一の画像から得られる光線の位置および角度の情報に基づいて第二の画像を生成する画像処理手段を有し、前記光学特性情報は、前記複数の光学系の収差に関する情報と周辺光量に関する情報の少なくとも一方を含む。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
本発明の他の側面としての画像処理プログラムは、前記画像処理方法をコンピュータに実行させる。