【手続補正書】
【提出日】平成26年1月10日(2014.1.10)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
レンズ部と、
前記レンズ部により結像される被写体像を画像信号に変換する撮像素子と、
前記撮像素子から取得される画像の各画素の位置情報に対応して、該画素位置における画像を復元処理するために使用する復元フィルタを記憶する第１の記憶部と、
前記撮像素子から取得した画像の画素毎に、該画素の位置情報に対応する復元フィルタを前記第１の記憶部から読み出し、読み出した復元フィルタを使用したデコンボリューション処理を行う復元処理部と、
前記撮像素子から取得した画像の画素毎に、該画素の位置情報に対応した画像の補正処理を行う補正部と、
前記撮像素子から取得した画像の処理対象の画素に対し、該画素の位置情報に対応する前記復元処理部による復元処理と前記補正部による補正処理とを同時に行わせる制御部と、
を備えたことを特徴とする撮像装置。
【請求項２】
前記第１の記憶部は、１画面を複数の領域に分割した分割領域毎に復元フィルタを記憶し、
前記復元処理部は、処理対象の画素の位置情報に基づいて、前記第１の記憶部から前記位置情報に対応する分割領域の復元フィルタとその近傍の分割領域の復元フィルタとを読み出し、読み出した複数の復元フィルタの係数を前記位置情報に基づいて補間して復元フィルタを生成し、生成した復元フィルタを使用してデコンボリューション処理を行うことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記補正部は、前記レンズ部、又は前記レンズ部及び撮像素子による画像の歪みを補正する歪み補正部であることを特徴とする請求項１又は２に記載の撮像装置。
【請求項４】
前記歪み補正部は、歪み補正後の画像の各画素の位置に関連づけて歪み補正前の画像における対応画素の位置情報を記憶する第２の記憶部を有し、歪み補正後の画像の各画素の位置に基づいて前記第２の記憶部から対応画素の位置情報を読み出し、読み出した位置情報に基づいて前記取得した画像から画素を読み出し、読み出した画素を再配置することにより歪み補正することを特徴とする請求項３に記載の撮像装置。
【請求項５】
前記第２の記憶部は、歪み補正によって生じる画像サイズの変動を相殺するための電子変倍処理を考慮して、歪み補正及び電子変倍処理後の画像の各画素の位置に関連づけて歪み補正及び電子変倍処理前の画像における対応画素の位置情報を記憶し、
前記歪み補正部は、歪み補正及び電子変倍処理後の画像の各画素の位置に基づいて前記第２の記憶部から対応画素の位置情報を読み出し、読み出した位置情報に基づいて前記取得した画像から画素を読み出し、読み出した画素を再配置することにより歪み補正するとともに、前記電子変倍処理を行うことを特徴とする請求項４に記載の撮像装置。
【請求項６】
前記補正部は、前記レンズ部、又は前記レンズ部及び撮像素子によるシェーディングを補正するシェーディング補正部であることを特徴とする請求項１から５のいずれか１項に記載の撮像装置。
【請求項７】
前記シェーディング補正部は、画像の各画素の位置に関連づけてシェーディングデータを記憶する第３の記憶部を有し、処理対象の画素の位置に基づいて前記第３の記憶部から対応するシェーディンデータを読み出し、読み出したシェーディングデータに基づいて処理対象の画像をシェーディング補正することを特徴とする請求項６に記載の撮像装置。
【請求項８】
レンズ部と、前記レンズ部により結像される被写体像を画像信号に変換する撮像素子とを有するカメラモジュールから画像を取得する工程と、
前記取得される画像の各画素の位置情報に対応して、該画素位置における画像を復元処理するために使用する復元フィルタを記憶する第１の記憶部から復元フィルタを読み出し、前記取得した画像の画素毎に、前記読み出した復元フィルタを使用したデコンボリューション処理を行う復元処理工程と、
前記取得した画像の画素毎に、該画素の位置情報に対応した画像の補正処理を行う補正工程と、を含み、
前記取得した画像の処理対象の画素に対し、該画素の位置情報に対応する前記復元処理工程による復元処理と前記補正工程による補正処理とを同時に行うようにしたことを特徴とする画像処理方法。
【請求項９】
前記第１の記憶部は、１画面を複数の領域に分割した分割領域毎に復元フィルタを記憶しており、
前記復元処理工程は、処理対象の画素の位置情報に基づいて、前記第１の記憶部から前記位置情報に対応する分割領域の復元フィルタとその近傍の分割領域の復元フィルタとを読み出し、読み出した複数の復元フィルタの係数を前記位置情報に基づいて補間して復元フィルタを生成し、生成した復元フィルタを使用してデコンボリューション処理を行うことを特徴とする請求項８に記載の画像処理方法。
【請求項１０】
前記補正工程は、前記レンズ部、又は前記レンズ部及び撮像素子による歪み補正することを特徴とする請求項８又は９に記載の画像処理方法。
【請求項１１】
前記歪み補正する補正工程は、歪み補正後の画像の各画素の位置に関連づけて歪み補正前の画像における対応画素の位置情報を記憶する第２の記憶部から、歪み補正後の画像の各画素の位置に対応する位置情報を読み出し、読み出した位置情報に基づいて前記取得した画像から画素を読み出し、読み出した画素を再配置することにより歪み補正することを特徴とする請求項１０に記載の画像処理方法。
【請求項１２】
前記第２の記憶部は、歪み補正によって生じる画像サイズの変動を相殺するための電子変倍処理を考慮して、歪み補正及び電子変倍処理後の画像の各画素の位置に関連づけて歪み補正及び電子変倍処理前の画像における対応画素の位置情報を記憶しており、
前記歪み補正する工程は、歪み補正及び電子変倍処理後の画像の各画素の位置に基づいて前記第２の記憶部から対応画素の位置情報を読み出し、読み出した位置情報に基づいて前記取得した画像から画素を読み出し、読み出した画素を再配置することにより歪み補正するとともに、前記電子変倍処理を行うことを特徴とする請求項１１に記載の画像処理方法。
【請求項１３】
前記補正工程は、前記レンズ部、又は前記レンズ部及び撮像素子によるシェーディングを補正するシェーディング補正工程であることを特徴とする請求項８から１２のいずれか１項に記載の画像処理方法。
【請求項１４】
前記シェーディング補正工程は、画像の各画素の位置に関連づけてシェーディングデータを記憶する第３の記憶部から、処理対象の画素の位置に基づいて対応するシェーディンデータを読み出し、読み出したシェーディングデータに基づいて処理対象の画像をシェーディング補正することを特徴とする請求項１３に記載の画像処理方法。
【請求項１５】
カメラモジュールから画像を取得する工程と、
前記取得される画像の各画素の位置情報に対応して、該画素位置における画像を復元処理するために使用する復元フィルタを記憶する第１の記憶部から復元フィルタを読み出し、前記取得した画像の画素毎に、前記読み出した復元フィルタを使用したデコンボリューション処理を行う復元処理工程と、
前記取得した画像の画素毎に、該画素の位置情報に対応した画像の補正処理を行う補正工程と、を含み、
前記取得した画像の処理対象の画素に対し、該画素の位置情報に対応する前記復元処理工程による復元処理と前記補正工程による補正処理とを同時に行うようにしたことを特徴とする画像処理方法。
【請求項１６】
カメラモジュールから取得される画像の各画素の位置情報に対応して、該画素位置における画像を復元処理するために使用する復元フィルタを記憶する第１の記憶部と、
前記カメラモジュールから取得した画像の画素毎に、該画素の位置情報に対応する復元フィルタを前記第１の記憶部から読み出し、読み出した復元フィルタを使用したデコンボリューション処理を行う復元処理部と、
前記カメラモジュールから取得した画像の画素毎に、該画素の位置情報に対応した画像の補正処理を行う補正部と、
前記カメラモジュールから取得した画像の処理対象の画素に対し、該画素の位置情報に対応する前記復元処理部による復元処理と前記補正部による補正処理とを同時に行わせる制御部と、
を備えたことを特徴とする画像処理装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】発明の名称
【補正方法】変更
【補正の内容】
【発明の名称】撮像装置、画像処理方法及び画像処理装置
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００１
【補正方法】変更
【補正の内容】
【０００１】
本発明は撮像装置、画像処理方法及び画像処理装置に係り、特に画像の復元処理を含む画像処理に関する。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
本発明はこのような事情に鑑みてなされたもので、画像の復元処理と他の補正処理とを含む全体の画像処理の処理時間の短縮化を図ることができる撮像装置、画像処理方法及び画像処理装置を提供することを目的とする。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
前記目的を達成するために本発明の一の態様に係る撮像装置は、レンズ部と、前記レンズ部により結像される被写体像を画像信号に変換する撮像素子と、前記撮像素子から取得される画像の各画素の位置情報に対応して、該画素位置における画像を復元処理するために使用する復元フィルタを記憶する第１の記憶部と、前記撮像素子から取得した画像の画素毎に、該画素の位置情報に対応する復元フィルタを前記第１の記憶部から読み出し、読み出した復元フィルタを使用したデコンボリューション処理を行う復元処理部と、前記撮像素子から取得した画像の画素毎に、該画素の位置情報に対応した画像の補正処理を行う補正部と、前記撮像素子から取得した画像の処理対象の画素に対し、該画素の位置情報に対応する前記復元処理部による復元処理と前記補正部による補正処理とを同時に行わせる制御部と、を備えたことを特徴としている。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
本発明の他の態様に係る画像処理方法は、レンズ部と、前記レンズ部により結像される被写体像を画像信号に変換する撮像素子とを有するカメラモジュールから画像を取得する工程と、前記取得される画像の各画素の位置情報に対応して、該画素位置における画像を復元処理するために使用する復元フィルタを記憶する第１の記憶部から復元フィルタを読み出し、前記取得した画像の画素毎に、前記読み出した復元フィルタを使用したデコンボリューション処理を行う復元処理工程と、前記取得した画像の画素毎に、該画素の位置情報に対応した画像の補正処理を行う補正工程と、を含み、前記取得した画像の処理対象の画素に対し、該画素の位置情報に対応する前記復元処理工程による復元処理と前記補正工程による補正処理とを同時に行うようにしたことを特徴としている。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００２４
【補正方法】変更
【補正の内容】
【００２４】
本発明の更に他の態様に係る画像処理方法において、前記シェーディング補正工程は、画像の各画素の位置に関連づけてシェーディングデータを記憶する第３の記憶部から、処理対象の画素の位置に基づいて対応するシェーディンデータを読み出し、読み出したシェーディングデータに基づいて処理対象の画像をシェーディング補正することを特徴としている。
本発明の更に他の態様に係る画像処理方法は、カメラモジュールから画像を取得する工程と、前記取得される画像の各画素の位置情報に対応して、該画素位置における画像を復元処理するために使用する復元フィルタを記憶する第１の記憶部から復元フィルタを読み出し、前記取得した画像の画素毎に、前記読み出した復元フィルタを使用したデコンボリューション処理を行う復元処理工程と、前記取得した画像の画素毎に、該画素の位置情報に対応した画像の補正処理を行う補正工程と、を含み、前記取得した画像の処理対象の画素に対し、該画素の位置情報に対応する前記復元処理工程による復元処理と前記補正工程による補正処理とを同時に行うようにしたことを特徴としている。
本発明の更に他の態様に係る画像処理装置は、カメラモジュールから取得される画像の各画素の位置情報に対応して、該画素位置における画像を復元処理するために使用する復元フィルタを記憶する第１の記憶部と、前記カメラモジュールから取得した画像の画素毎に、該画素の位置情報に対応する復元フィルタを前記第１の記憶部から読み出し、読み出した復元フィルタを使用したデコンボリューション処理を行う復元処理部と、前記カメラモジュールから取得した画像の画素毎に、該画素の位置情報に対応した画像の補正処理を行う補正部と、前記撮像素子から取得した画像の処理対象の画素に対し、該画素の位置情報に対応する前記復元処理部による復元処理と前記補正部による補正処理とを同時に行わせる制御部と、を備えたことを特徴としている。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】変更
【補正の内容】
【００２５】
本発明によれば、ボケた画像の復元処理と、画像の位置情報を使用する他の補正処理とを同時に行うようにしたため、前記復元処理と他の補正処理とを含む全体の画像処理の処理時間の短縮化を図ることができる。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００２７
【補正方法】変更
【補正の内容】
【００２７】
以下、添付図面に従って本発明に係る撮像装置、画像処理方法及び画像処理装置の実施の形態について説明する。