【手続補正書】
【提出日】平成22年3月23日(2010.3.23)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
複数のフレーム画像を取得するフレーム画像取得部と、
前記フレーム画像取得部が取得した各フレーム画像にそれぞれ座標を設定し、設定した座標毎に、前記各フレーム画像から同一座標の画素値を取得し、取得した同一座標の複数の画素値のうちから静止体を示す静止体画素値を取得し、前記座標毎に取得した前記静止体画素値に基づいて前記静止体の静止体画像を生成する静止体画像生成部と、
前記静止体画像生成部が生成した前記静止体画像と前記各フレーム画像との同一座標の画素値の差を取得して、取得した前記画素値の差に基づいて、設定した座標毎に、前記静止体画像と前記動体を示す動体画像とを判別するための判別パラメータを取得する判別パラメータ取得部と、
前記判別パラメータ取得部が座標毎に取得した判別パラメータを用いて前記フレーム画像毎に前記動体画像を判別し、判別した前記動体画像が存在する動体領域を前記フレーム画像毎に取得する動体領域取得部と、
前記フレーム画像毎に、前記動体領域取得部が取得した前記動体領域の座標と前記静止体画像生成部が生成した前記静止体画像の座標とを対応させ、前記動体領域の座標に前記フレーム画像の座標を対応させて前記フレーム画像の画素値を前記静止体画像の座標に登録することにより、前記静止体画像と複数の前記動体画像とが重なり合ったストロボ画像を生成するストロボ画像生成部と、を備えた、
ことを特徴とする画像処理装置。
【請求項２】
前記判別パラメータ取得部は、設定した座標毎に、
数１に従い、前記静止体画像生成部が生成した前記静止体画像と前記各フレーム画像との同一座標(x,y)における画素値の差を取得し、
数２に従い、前記静止体画像と第ｎフレーム画像との同一座標(x,y)における第１の標準偏差を取得し、
数３に従い、同一座標(x,y)における前記第１の標準偏差を超える、静止体画像の画素値と前記第ｎフレーム画像の画素値との差を取得し、
数４に従い、第２の標準偏差を、前記動体画像を判別するための判別パラメータとして取得し、
前記動体領域取得部は、
数５に従い、前記第ｎフレーム画像の座標(x,y)において、数１に示す前記画素値の差が、数４に従って取得した前記第２の標準偏差以上の場合には、当該画素値を有効とし、前記第２の標準偏差未満の場合には、当該画素値を無効とするデータを取得し、取得したデータを重ね合わせて、前記静止体画像の透過画素座標を特定する領域マスクデータを作成し、作成した前記領域マスクデータを用いて、前記動体領域を取得する、
ことを特徴とする請求項１に記載の画像処理装置。
【数１】
2008278386.tif 000001
【数２】
2008278386.tif 000002
【数３】
2008278386.tif 000003
【数４】
2008278386.tif 000004
【数５】
2008278386.tif 000005
【請求項３】
前記動体領域取得部は、前記第ｎフレーム画像の座標(x,y)において当該画素値を有効、無効とするデータに対し、膨張処理、縮退処理及び穴埋め処理のうちの少なくとも１つの処理を行うことにより、取得した前記動体領域を補正する、
ことを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記静止体画像生成部は、前記各フレーム画像のそれぞれに対して高調波成分を濾波するフィルタ部を備え、前記フィルタ部で前記高調波成分を濾波した前記各フレーム画像から同一座標の画素値を取得し、取得した同一座標の複数の画素値のうちから前記静止体画素値を取得し、前記座標毎に取得した前記静止体画素値に基づいて前記静止体画像を生成する、
ことを特徴とする請求項１乃至３のいずれか１項に記載の画像処理装置。
【請求項５】
前記静止体画像生成部は、前記各フレーム画像の特徴点を取得し、前記各フレーム画像の特徴点の座標を対応させることにより、前記各フレーム画像間の位置ズレ補正を行い、前記位置ズレ補正を行った前記各フレーム画像から同一座標の画素値を取得し、取得した同一座標の複数の画素値のうちから前記静止体画素値を取得し、前記座標毎に取得した前記静止体画素値に基づいて前記静止体画像を生成する、
ことを特徴とする請求項１乃至４のいずれか１項に記載の画像処理装置。
【請求項６】
動体と該動体後方の静止体とを連写して複数のフレーム画像を取得する撮影部と、
前記撮影部が取得した前記複数のフレーム画像に画像処理を行う請求項１乃至５のいずれか１項に記載の画像処理装置と、を備えた、
ことを特徴とする撮影装置。
【請求項７】
複数のフレーム画像を取得するステップと、
取得した各フレーム画像にそれぞれ座標を設定し、設定した座標毎に、前記各フレーム画像から同一座標の画素値を取得するステップと、
取得した同一座標の複数の画素値のうちから静止体を示す静止体画素値を取得するステップと、
前記座標毎に取得した前記静止体画素値に基づいて前記静止体の静止体画像を生成するステップと、
生成した前記静止体画像と各フレーム画像との同一座標の画素値の差を取得して、取得した前記画素値の差に基づいて、設定した座標毎に、前記静止体画像と前記動体を示す動体画像とを判別するための判別パラメータを取得するステップと、
前記座標毎に取得した前記判別パラメータを用いて前記フレーム画像毎に前記動体画像を判別し、判別した前記動体画像が存在する動体領域を取得するステップと、
前記フレーム画像毎に、取得した前記動体領域の座標と生成した前記静止体画像の座標とを対応させ、前記動体領域の座標に前記フレーム画像の座標を対応させて前記フレーム画像の画素値を前記静止体画像の座標に登録することにより、前記静止体画像と複数の前記動体画像とが重なり合ったストロボ画像を生成するステップと、を備えた、
ことを特徴とする画像処理方法。
【請求項８】
コンピュータに、
複数のフレーム画像を取得する手順、
取得した各フレーム画像にそれぞれ座標を設定し、設定した座標毎に、前記各フレーム画像から同一座標の画素値を取得する手順、
取得した同一座標の複数の画素値のうちから静止体を示す静止体画素値を取得する手順、
前記座標毎に取得した前記静止体画素値に基づいて前記静止体の静止体画像を生成する手順、
生成した前記静止体画像と各フレーム画像との同一座標の画素値の差を取得して、取得した前記画素値の差に基づいて、設定した座標毎に、前記静止体画像と前記動体を示す動体画像とを判別するための判別パラメータを取得する手順、
前記座標毎に取得した前記判別パラメータを用いて前記フレーム画像毎に前記動体画像を判別し、判別した前記動体画像が存在する動体領域を取得する手順、
前記フレーム画像毎に、取得した前記動体領域の座標と生成した前記静止体画像の座標とを対応させ、前記動体領域の座標に前記フレーム画像の座標を対応させて前記フレーム画像の画素値を前記静止体画像の座標に登録することにより、前記静止体画像と複数の前記動体画像とが重なり合ったストロボ画像を生成する手順、
を実行させるためのプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正の内容】
【００１４】
この目的を達成するため、本発明の第１の観点に係る画像処理装置は、
複数のフレーム画像を取得するフレーム画像取得部と、
前記フレーム画像取得部が取得した各フレーム画像にそれぞれ座標を設定し、設定した座標毎に、前記各フレーム画像から同一座標の画素値を取得し、取得した同一座標の複数の画素値のうちから静止体を示す静止体画素値を取得し、前記座標毎に取得した前記静止体画素値に基づいて前記静止体の静止体画像を生成する静止体画像生成部と、
前記静止体画像生成部が生成した前記静止体画像と前記各フレーム画像との同一座標の画素値の差を取得して、取得した前記画素値の差に基づいて、設定した座標毎に、前記静止体画像と前記動体を示す動体画像とを判別するための判別パラメータを取得する判別パラメータ取得部と、
前記判別パラメータ取得部が座標毎に取得した判別パラメータを用いて前記フレーム画像毎に前記動体画像を判別し、判別した前記動体画像が存在する動体領域を前記フレーム画像毎に取得する動体領域取得部と、
前記フレーム画像毎に、前記動体領域取得部が取得した前記動体領域の座標と前記静止体画像生成部が生成した前記静止体画像の座標とを対応させ、前記動体領域の座標に前記フレーム画像の座標を対応させて前記フレーム画像の画素値を前記静止体画像の座標に登録することにより、前記静止体画像と複数の前記動体画像とが重なり合ったストロボ画像を生成するストロボ画像生成部と、を備えたことを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】削除
【補正の内容】
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】削除
【補正の内容】
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】削除
【補正の内容】
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】削除
【補正の内容】
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】削除
【補正の内容】
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】削除
【補正の内容】
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００２１
【補正方法】削除
【補正の内容】
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００２２
【補正方法】削除
【補正の内容】
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】変更
【補正の内容】
【００２３】
前記判別パラメータ取得部は、設定した座標毎に、
数１に従い、前記静止体画像生成部が生成した前記静止体画像と前記各フレーム画像との同一座標(x,y)における画素値の差を取得し、
数２に従い、前記静止体画像と第ｎフレーム画像との同一座標(x,y)における第１の標準偏差を取得し、
数３に従い、同一座標(x,y)における前記第１の標準偏差を超える、静止体画像の画素値と前記第ｎフレーム画像の画素値との差を取得し、
数４に従い、第２の標準偏差を、前記動体画像を判別するための判別パラメータとして取得し、
前記動体領域取得部は、
数５に従い、前記第ｎフレーム画像の座標(x,y)において、数１に示す前記画素値の差が、数４に従って取得した前記第２の標準偏差以上の場合には、当該画素値を有効とし、前記第２の標準偏差未満の場合には、当該画素値を無効とするデータを取得し、取得したデータを重ね合わせて、前記静止体画像の透過画素座標を特定する領域マスクデータを作成し、作成した前記領域マスクデータを用いて、前記動体領域を取得するようにしてもよい。
【数１】
2008278386.tif 000006
【数２】
2008278386.tif 000007
【数３】
2008278386.tif 000008
【数４】
2008278386.tif 000009
【数５】
2008278386.tif 000010
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００２４
【補正方法】削除
【補正の内容】
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】変更
【補正の内容】
【００２５】
前記動体領域取得部は、前記第ｎフレーム画像の座標(x,y)において当該画素値を有効、無効とするデータに対し、膨張処理、縮退処理及び穴埋め処理のうちの少なくとも１つの処理を行うことにより、取得した前記動体領域を補正するようにしてもよい。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】変更
【補正の内容】
【００２６】
前記静止体画像生成部は、前記各フレーム画像のそれぞれに対して高調波成分を濾波するフィルタ部を備え、前記フィルタ部で前記高調波成分を濾波した前記各フレーム画像から同一座標の画素値を取得し、取得した同一座標の複数の画素値のうちから前記静止体画素値を取得し、前記座標毎に取得した前記静止体画素値に基づいて前記静止体画像を生成するようにしてもよい。
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００２７
【補正方法】変更
【補正の内容】
【００２７】
前記静止体画像生成部は、前記各フレーム画像の特徴点を取得し、前記各フレーム画像の特徴点の座標を対応させることにより、前記各フレーム画像間の位置ズレ補正を行い、前記位置ズレ補正を行った前記各フレーム画像から同一座標の画素値を取得し、取得した同一座標の複数の画素値のうちから前記静止体画素値を取得し、前記座標毎に取得した前記静止体画素値に基づいて前記静止体画像を生成するようにしてもよい。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００２９
【補正方法】変更
【補正の内容】
【００２９】
本発明の第３の観点に係る画像処理方法は、
複数のフレーム画像を取得するステップと、
取得した各フレーム画像にそれぞれ座標を設定し、設定した座標毎に、前記各フレーム画像から同一座標の画素値を取得するステップと、
取得した同一座標の複数の画素値のうちから静止体を示す静止体画素値を取得するステップと、
前記座標毎に取得した前記静止体画素値に基づいて前記静止体の静止体画像を生成するステップと、
生成した前記静止体画像と各フレーム画像との同一座標の画素値の差を取得して、取得した前記画素値の差に基づいて、設定した座標毎に、前記静止体画像と前記動体を示す動体画像とを判別するための判別パラメータを取得するステップと、
前記座標毎に取得した前記判別パラメータを用いて前記フレーム画像毎に前記動体画像を判別し、判別した前記動体画像が存在する動体領域を取得するステップと、
前記フレーム画像毎に、取得した前記動体領域の座標と生成した前記静止体画像の座標とを対応させ、前記動体領域の座標に前記フレーム画像の座標を対応させて前記フレーム画像の画素値を前記静止体画像の座標に登録することにより、前記静止体画像と複数の前記動体画像とが重なり合ったストロボ画像を生成するステップと、を備えたことを特徴とする。
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】００３０
【補正方法】削除
【補正の内容】
【手続補正１８】
【補正対象書類名】明細書
【補正対象項目名】００３１
【補正方法】削除
【補正の内容】
【手続補正１９】
【補正対象書類名】明細書
【補正対象項目名】００３２
【補正方法】変更
【補正の内容】
【００３２】
本発明の第４の観点に係るプログラムは、
コンピュータに、
複数のフレーム画像を取得する手順、
取得した各フレーム画像にそれぞれ座標を設定し、設定した座標毎に、前記各フレーム画像から同一座標の画素値を取得する手順、
取得した同一座標の複数の画素値のうちから静止体を示す静止体画素値を取得する手順、
前記座標毎に取得した前記静止体画素値に基づいて前記静止体の静止体画像を生成する手順、
生成した前記静止体画像と各フレーム画像との同一座標の画素値の差を取得して、取得した前記画素値の差に基づいて、設定した座標毎に、前記静止体画像と前記動体を示す動体画像とを判別するための判別パラメータを取得する手順、
前記座標毎に取得した前記判別パラメータを用いて前記フレーム画像毎に前記動体画像を判別し、判別した前記動体画像が存在する動体領域を取得する手順、
前記フレーム画像毎に、取得した前記動体領域の座標と生成した前記静止体画像の座標とを対応させ、前記動体領域の座標に前記フレーム画像の座標を対応させて前記フレーム画像の画素値を前記静止体画像の座標に登録することにより、前記静止体画像と複数の前記動体画像とが重なり合ったストロボ画像を生成する手順、を実行させるためのものである。
【手続補正２０】
【補正対象書類名】明細書
【補正対象項目名】００３３
【補正方法】削除
【補正の内容】
【手続補正２１】
【補正対象書類名】明細書
【補正対象項目名】００３４
【補正方法】削除
【補正の内容】