【手続補正書】
【提出日】平成29年1月6日(2017.1.6)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
第１画像データと第２画像データを連続して取得する画像取得部と、
上記第１画像データの少なくとも一部と上記第２画像データの少なくとも一部について、画素毎の差分値を得る減算処理部と、
上記差分値に対して、画像の空間周波数に基づくフィルタ処理を行うフィルタ処理部と、
上記フィルタ処理後の差分値と所定値の比較結果に基づいて突発性の画素欠陥の有無の判断を行い、判断結果を出力する突発性画素欠陥検出部と、
上記判断結果が上記突発性の画素欠陥である場合には、画素欠陥と判断された上記第１画像データと、上記第２画像データの画素は合成せず、一方、上記突発性の画素欠陥でない場合には、上記第１画像データの少なくとも一部に上記第２画像データの少なくとも一部を合成する画像合成部と、
を有することを特徴とする画像合成装置。
【請求項２】
上記画素毎の差分値が所定の閾値を超えたか否かに基づいて数値を与え、または上記画素毎の差分値を元に所定の変換特性に基づいて数値を与える数値変換部を含み、
上記フィルタ処理部は、上記数値変換部によって与えられた数値と、更に周囲の画素の上記数値変換部によって与えられた数値を合成処理の判断として用いる、
ことを特徴とする請求項１に記載の画像合成装置。
【請求項３】
上記フィルタ処理部は、上記第１画像データや上記第２画像データの差分に対して、フィルタ処理を行う画素からの距離に応じた重み付けを行うことを特徴とする請求項１に記載の画像合成装置。
【請求項４】
上記減算処理部は、同色画素毎の差分値を得ることを特徴とする請求項１に記載の画像合成装置。
【請求項５】
上記第１画像データおよび上記第２画像データの少なくとも一方はベイヤー配列の画像データであり、
上記ベイヤー配列の画像データを補間処理する現像処理部と、
上記補間処理された画素の少なくとも輝度値を得る色空間変換部と、
を更に含み、
上記減算処理部は、少なくとも上記現像処理部が出力する画素値の差分を取得するか、または上記色空間変換部が出力する画素毎の輝度値の差分を取得する、
ことを特徴とする請求項１に記載の画像合成装置。
【請求項６】
上記画像合成部における合成は複数の上記画像データを用いて合成であり、通常合成、加算合成、加算平均合成、比較明合成、覆い焼き合成、スクリーン合成、オーバレイ合成、および比較暗合成の画像処理のうちの少なくとも１つであることを特徴とする請求項１に記載の画像合成装置。
【請求項７】
上記画像合成部による合成済み画像データを出力し、表示する表示部を更に含むことを特徴とする請求項１に記載の画像合成装置。
【請求項８】
上記画像合成部による合成済み画像データを保持し、出力する記録部と、
被写体像を結像する光学系と、
上記光学系によって結像した被写体像を撮像し、第２画像データとして出力する撮像部と、
を更に含み、
上記記録部は、上記画像合成部による合成済み画像データを記録することを特徴とする請求項１に記載の画像合成装置。
【請求項９】
第１画像データと第２画像データを連続して取得する画像取得部と、
上記第１画像データおよび上記第２画像データに対して、空間周波数に基づくフィルタ処理を行うフィルタ処理部と、
上記フィルタ処理部による上記第１画像データのフィルタ処理出力の少なくとも一部と上記第２画像データのフィルタ出力について、画素毎の差分値を得る減算処理部と、
上記差分値と所定値の比較結果に基づいて突発性の画素欠陥の有無の判断を行い、判断結果を出力する突発性画素欠陥検出部と、
上記判断結果が上記突発性の画素欠陥である場合には、画素欠陥と判断された上記第１画像データと、上記第２画像データの画素は合成せず、一方、上記突発性の画素欠陥でない場合には、上記第１画像データの少なくとも一部に上記第２画像データの少なくとも一部を合成する画像合成部と、
を有することを特徴とする画像合成装置。
【請求項１０】
第１画像データと第２画像データを連続して取得する画像取得ステップと、
上記第１画像データの少なくとも一部と上記第２画像データの少なくとも一部の画素毎の差分値を取得する差分値取得ステップと、
上記差分値に対して、画像の空間周波数に基づくフィルタ処理を行うフィルタ処理ステップと、
上記フィルタ処理後の差分値と所定値の比較結果に基づいて突発性の画素欠陥の有無の判断を行い、判断結果を出力する突発性画素欠陥検出ステップと、
上記判断結果が上記突発性の画素欠陥である場合には、画素欠陥と判断された上記第１画像データと、上記第２画像データの画素は合成せず、一方、上記突発性の画素欠陥でない場合には、上記第１画像データの少なくとも一部に上記第２画像データの少なくとも一部を合成する合成ステップと、
を有することを特徴とする画像合成方法。
【請求項１１】
上記第１画像データと上記第２画像データの少なくとも一方はベイヤー配列の画像データであり、
上記ベイヤー配列の画像データを補間処理する補間処理ステップと、
上記補間処理された画素の少なくとも輝度値を取得する輝度値取得ステップと、
を更に含み、
上記差分値取得ステップでは、同色同画素毎の差分値の取得、所定の閾値を越えたかどうかに基づく差分値の取得、所定の関数に基づく差分値の取得、上記補間処理した画素毎のＲＧＢ値の取得、および上記画素毎の輝度値の差分値の取得の内の少なくとも１つを実行し、
上記フィルタ処理ステップは、フィルタ処理を行う画素からの距離に応じた重み付けを行い、
上記合成ステップは複数の画像データを用いた合成であり、通常合成、加算合成、比較明合成、加算平均合成、覆い焼き合成、スクリーン合成、オーバレイ合成、および比較暗合成の画像処理のうちの少なくとも１つを実行する、
ことを特徴とする請求項１０に記載の画像合成方法。
【請求項１２】
上記合成ステップにおける合成済み画像データを出力し、表示する表示ステップ、
および上記第１画像データを保持、出力し、被写体像を撮像して上記第２画像データとして出力し、上記合成済み画像データを出力する出力ステップ、
の内の少なくとも１つのステップを実行することを特徴とする請求項１０に記載の画像合成方法。
【請求項１３】
画像合成をコンピュータに実行させるためのプログラムにおいて、
第１画像データと第２画像データを連続して取得する画像取得ステップと、
上記第１画像データの少なくとも一部と上記第２画像データの少なくとも一部の画素毎の差分値を取得する差分値取得ステップと、
上記差分値に対して、画像の空間周波数に基づくフィルタ処理を行うフィルタ処理ステップと、
上記フィルタ処理後の差分値と所定値の比較結果に基づいて突発性の画素欠陥の有無の判断を行い、判断結果を出力する突発性画素欠陥検出ステップと、
上記判断結果が上記突発性の画素欠陥である場合には、画素欠陥と判断された上記第１画像データと、上記第２画像データの画素は合成せず、一方、上記突発性の画素欠陥でない場合には、上記第１画像データの少なくとも一部に上記第２画像データの少なくとも一部を合成する合成ステップと、
をコンピュータに実行させることを特徴とするプログラム。
【請求項１４】
上記第１画像データと上記第２画像データの少なくとも一方はベイヤー配列の画像データであり、
上記ベイヤー配列の画像データを補間処理する補間処理ステップと、
上記補間処理された画素の少なくとも輝度値を取得する輝度値取得ステップと、
を更に含み、
上記差分値取得ステップでは、同色同画素毎の差分値の取得、所定の閾値を越えたかどうかに基づく差分値の取得、所定の関数に基づく差分値の取得、上記補間処理した画素毎のＲＧＢ値の取得、および上記画素毎の輝度値の差分値の取得の内の少なくとも１つを実行し、
上記フィルタ処理ステップは、フィルタ処理を行う画素からの距離に応じた重み付けを行い、
上記合成ステップは複数の画像データを用いた合成であり、通常合成、加算合成、比較明合成、加算平均合成、覆い焼き合成、スクリーン合成、オーバレイ合成、および比較暗合成の画像合成のうちの少なくとも１つを実行する、
ことを特徴とする請求項１３に記載のプログラム。
【請求項１５】
上記合成ステップにおける合成済み画像データを出力し、表示する表示ステップ、
および上記第１画像データを保持、出力し、被写体像を撮像して上記第２画像データとして出力し、上記合成済み画像データを出力する出力ステップ、
の内の少なくとも１つのステップを実行することを特徴とする請求項１３に記載のプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
上記目的を達成するため第１の発明に係る画像合成装置は、第１画像データと第２画像データを連続して取得する画像取得部と、上記第１画像データの少なくとも一部と上記第２画像データの少なくとも一部について、画素毎の差分値を得る減算処理部と、上記差分値に対して、画像の空間周波数に基づくフィルタ処理を行うフィルタ処理部と、上記フィルタ処理後の差分値と所定値の比較結果に基づいて突発性の画素欠陥の有無の判断を行い、判断結果を出力する突発性画素欠陥検出部と、上記判断結果が上記突発性の画素欠陥である場合には、画素欠陥と判断された上記第１画像データと、上記第２画像データの画素は合成せず、一方、上記突発性の画素欠陥でない場合には、上記第１画像データの少なくとも一部に上記第２画像データの少なくとも一部を合成する画像合成部と、を有する。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
第３の発明に係る画像合成装置は、上記第１の発明において、上記フィルタ処理部は、上記第１画像データや上記第２画像データの差分に対して、フィルタ処理を行う画素からの距離に応じた重み付けを行う。
第４の発明に係る画像合成装置は、上記第１の発明において、上記減算処理部は、同色画素毎の差分値を得る。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
第８の発明に係る画像合成装置は、上記第７の発明において、上記画像合成部による合成済み画像データを保持し、出力する記録部と、被写体像を結像する光学系と、上記光学系によって結像した被写体像を撮像し、第２画像データとして出力する撮像部と、を更に含み、上記記録部は、上記画像合成部による合成済み画像データを記録する。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正の内容】
【００１４】
第９の発明に係る画像合成装置は、第１画像データと第２画像データを連続して取得する画像取得部と、上記第１画像データおよび上記第２画像データに対して、空間周波数に基づくフィルタ処理を行うフィルタ処理部と、上記フィルタ処理部による上記第１画像データのフィルタ処理出力の少なくとも一部と上記第２画像データのフィルタ出力について、画素毎の差分値を得る減算処理部と、上記差分値と所定値の比較結果に基づいて突発性の画素欠陥の有無の判断を行い、判断結果を出力する突発性画素欠陥検出部と、上記判断結果が上記突発性の画素欠陥である場合には、画素欠陥と判断された上記第１画像データと、上記第２画像データの画素は合成せず、一方、上記突発性の画素欠陥でない場合には、上記第１画像データの少なくとも一部に上記第２画像データの少なくとも一部を合成する画像合成部と、を有する。
第１０の発明に係る画像合成方法は、第１画像データと第２画像データを連続して取得する画像取得ステップと、上記第１画像データの少なくとも一部と上記第２画像データの少なくとも一部の画素毎の差分値を取得する差分値取得ステップと、上記差分値に対して、画像の空間周波数に基づくフィルタ処理を行うフィルタ処理ステップと、上記フィルタ処理後の差分値と所定値の比較結果に基づいて突発性の画素欠陥の有無の判断を行い、判断結果を出力する突発性画素欠陥検出ステップと、上記判断結果が上記突発性の画素欠陥である場合には、画素欠陥と判断された上記第１画像データと、上記第２画像データの画素は合成せず、一方、上記突発性の画素欠陥でない場合には、上記第１画像データの少なくとも一部に上記第２画像データの少なくとも一部を合成する合成ステップと、を有する。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】変更
【補正の内容】
【００１７】
第１３の発明に係るプログラムは、画像合成をコンピュータに実行させるためのプログラムにおいて、第１画像データと第２画像データを連続して取得する画像取得ステップと、上記第１画像データの少なくとも一部と上記第２画像データの少なくとも一部の画素毎の差分値を取得する差分値取得ステップと、上記差分値に対して、画像の空間周波数に基づくフィルタ処理を行うフィルタ処理ステップと、上記フィルタ処理後の差分値と所定値の比較結果に基づいて突発性の画素欠陥の有無の判断を行い、判断結果を出力する突発性画素欠陥検出ステップと、上記判断結果が上記突発性の画素欠陥である場合には、画素欠陥と判断された上記第１画像データと、上記第２画像データの画素は合成せず、一方、上記突発性の画素欠陥でない場合には、上記第１画像データの少なくとも一部に上記第２画像データの少なくとも一部を合成する合成ステップと、をコンピュータに実行させる。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００５１
【補正方法】変更
【補正の内容】
【００５１】
図４に示す流れ図において、まず、画像取得部１２は、ＲＡＷ画像Ａを取得し（＃１）、またＲＡＷ画像Ｂ（＃３）を取得する。ここで、ＲＡＷ画像Ａは、画像合成部１７によって合成された画像データである。したがって、ＲＡＷ画像Ａは、イメージセンサ４から２回目の画像データが読み出された後の画像データである。またＲＡＷ画像Ｂは、イメージセンサ４から読み出された画像データ、または画像合成部１７によって合成された画像データである。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００８８
【補正方法】変更
【補正の内容】
【００８８】
ステップ＃５３における判定の結果、周辺画素の出力の総和が設定値以上であれば、注目画素の合成処理を行う（＃５７）。ここでは、画像合成部１７が画像合成を行うにあたって、ＲＡＷ画像データＡの注目画素の合成処理を行う。すなわち、ステップ＃５３における判定の結果、ＲＡＷ画像データＢの注目画素の値がＲＡＷ画像データＡの注目画素の値よりも大きいこと（＃５１Ｙｅｓ）から、突発性の画素欠陥の可能性があるが、ステップＳ５３の判定により、周辺画素の画像データの値も大きいことから、突発性の画素欠陥でないと判定されるからである。
【手続補正９】
【補正対象書類名】図面
【補正対象項目名】図１１
【補正方法】変更
【補正の内容】
【図１１】
2015136054.tif 000001