【手続補正書】
【提出日】平成20年3月12日(2008.3.12)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
複数の画面の画像信号の位相相関を演算する相関演算手段と、
前記位相相関の演算の結果得られる前記画面の座標位置における振幅の値に基づいてシーンチェンジを検出する検出手段と
を備える画像処理装置。
【請求項２】
前記相関演算手段は、SPOMFを演算する
請求項１に記載の画像処理装置。
【請求項３】
前記相関演算手段は、
複数の画面の画像信号をフーリエ変換するフーリエ変換手段と、
フーリエ変換して得られた値からクロスパワースペクトルを演算するクロスパワースペクトル演算手段と、
前記クロスパワースペクトルを逆フーリエ変換する逆フーリエ変換手段と
を備える請求項２に記載の画像処理装置。
【請求項４】
前記検出手段は、
前記振幅の数を計数する計数手段と、
前記振幅の数が基準値より多いとき、シーンチェンジであると判定する判定手段と
を備える請求項１に記載の画像処理装置。
【請求項５】
前記検出手段は、前記振幅の値を正規化する正規化手段をさらに備え、
前記計数手段は、正規化された前記振幅の数を計数する
請求項４に記載の画像処理装置。
【請求項６】
複数の画面の前記画像信号から、前記画面の一部の領域の画像信号を抽出する抽出手段をさらに備え、
前記相関演算手段は、抽出された領域の画像信号の位相相関を演算する
請求項１に記載の画像処理装置。
【請求項７】
抽出された前記画面の一部の領域を縮小した画像信号を生成する縮小手段をさらに備え、
前記相関演算手段は、縮小された領域の画像信号の位相相関を演算する
請求項６に記載の画像処理装置。
【請求項８】
複数の画面の画像信号から非画像の画面の画像信号を検出する非画像検出手段をさらに備え、
前記相関演算手段は、複数の画面の画像信号が非画像の画面の画像信号でない場合に演算を行う
請求項１に記載の画像処理装置。
【請求項９】
前記非画像検出手段は、
前記画像信号をフーリエ変換するフーリエ変換手段と、
前記フーリエ変換された信号から交流成分を検出する交流成分検出手段と、
検出された前記交流成分が交流成分の閾値より少ない場合、前記相関演算手段による演算を禁止するように制御する制御手段と
を備える請求項８に記載の画像処理装置。
【請求項１０】
複数の画面の画像信号の差分を演算する差分演算手段をさらに備え、
前記相関演算手段は、演算された前記差分が差分の閾値より大きいとき演算を実行する
請求項９に記載の画像処理装置。
【請求項１１】
１つの画面を分割した画像信号が得られるように、前記画面の画像信号を分割する分割手段をさらに備え、
前記相関演算手段は、分割された画面の画像信号のそれぞれの位相相関を演算する
請求項１に記載の画像処理装置。
【請求項１２】
前記相関演算手段の演算結果を利用して、代表画面を検出する代表画面検出手段をさらに備える請求項１に記載の画像処理装置。
【請求項１３】
前記代表画面検出手段は、前記相関演算手段の演算の結果得られた動きベクトルの最小値に対応する画面を代表画面として検出する
請求項１２に記載の画像処理装置。
【請求項１４】
前記画面の画像信号をフーリエ変換するフーリエ変換手段と、
フーリエ変換された画像信号の振幅スペクトルを演算する振幅スペクトル演算手段と、
前記振幅スペクトルを対数極座標に変換する座標変換手段と、
前記対数極座標に変換された信号の位相相関を演算し、その位相相関に基づいて、画面を回転するか、またはスケーリングするための変換処理を行う変換手段とをさらに備え、
前記相関演算手段は、変換処理された画像信号の位相相関を演算する
請求項１に記載の画像処理装置。
【請求項１５】
複数の画面の画像信号の位相相関を演算し、
前記位相相関の演算の結果得られる前記画面の座標位置における振幅の値に基づいてシーンチェンジを検出する
ステップを備える画像処理方法。
【請求項１６】
複数の画面の画像信号の位相相関を演算し、
前記位相相関の演算の結果得られる前記画面の座標位置における振幅の値に基づいてシーンチェンジを検出する
ステップをコンピュータに実行させるプログラム。
【請求項１７】
請求項１６に記載のプログラムが記録されている記録媒体。
【請求項１８】
複数の画面の画像信号のそれぞれの平均値を演算する平均値演算手段と、
複数の画面の画像信号と、演算されたそれぞれの前記平均値との差分を演算する差分演算手段と、
演算された差分をマッチングするマッチング手段と、
マッチングの結果得られる前記画面の座標位置における振幅の値に基づいてシーンチェンジを検出する検出手段と
を備える画像処理装置。
【請求項１９】
複数の画面の前記画像信号から、前記画面の一部の領域の画像信号を抽出する抽出手段をさらに備え、
前記平均値演算手段は、抽出された領域の画像信号の前記平均値を演算する
請求項１８に記載の画像処理装置。
【請求項２０】
抽出された前記画面の一部の領域を縮小した画像信号を生成する縮小手段をさらに備え、
前記平均値演算手段は、縮小された領域の画像信号の前記平均値を演算する
請求項１９に記載の画像処理装置。
【請求項２１】
複数の画面の画像信号のそれぞれの平均値を演算し、
複数の画面の画像信号と、演算されたそれぞれの前記平均値との差分を演算し、
演算された差分をマッチングし、
マッチングの結果得られる前記画面の座標位置における振幅の値に基づいてシーンチェンジを検出する
ステップを備える画像処理方法。
【請求項２２】
複数の画面の画像信号のそれぞれの平均値を演算し、
複数の画面の画像信号と、演算されたそれぞれの前記平均値との差分を演算し、
演算された差分をマッチングし、
マッチングの結果得られる前記画面の座標位置における振幅の値に基づいてシーンチェンジを検出する
ステップをコンピュータに実行させるプログラム。
【請求項２３】
請求項２２に記載のプログラムが記録されている記録媒体。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】削除
【補正の内容】
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００２４
【補正方法】削除
【補正の内容】
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】削除
【補正の内容】
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００３７
【補正方法】削除
【補正の内容】
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００５２
【補正方法】変更
【補正の内容】
【００５２】
本発明の他の側面はまた、複数の画面の画像信号のそれぞれの平均値を演算し（例えば、図33のステップS304）、複数の画面の画像信号と、演算されたそれぞれの前記平均値との差分を演算し（例えば、図33のステップS305）、演算された差分をマッチングし（例えば、図33のステップS306）、マッチングの結果得られる前記画面の座標位置における振幅の値に基づいてシーンチェンジを検出する（例えば、図34のステップS309乃至S313）ステップを備える画像処理方法またはプログラムである。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００６６
【補正方法】変更
【補正の内容】
【００６６】
ステップS1において、画像入力部11A,11Bはそれぞれ異なる画面の画像を入力する。領域抽出部12A,12Bは、ステップS1で画像入力部11A,11Bより入力された画像から所定の領域を抽出する。具体的には、図４に示されるように、１画面の大きさが720画素×480画素である場合、上から16画素、下から80画素、左端部から104画素、右端部から104画素の外周の範囲が除かれ、その内部の512画素×384画素の範囲の領域が抽出される。テロップなどの文字は、画面の周囲に表示されることが多いため、このような画面の周囲の画像信号を除くことにより、テロップなどの画像や、画面の周囲に模様のある外枠の画像がシーンチェンジの検出に利用され、誤検出されることが防止される。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００７３
【補正方法】変更
【補正の内容】
【００７３】
領域抽出部12A,12Bで抽出された異なるフレームの画像うち、その一方のフレームの画像がフラッシュなどにより白くつぶれてしまった非画像であり、他方のフレームの画像がそうではない通常の画像である場合、両者は相関がない（すなわち、シーンチェンジである）と判断されることが多い。しかしながら、このような場合には、実際にはシーンチェンジではなく、たまたま連続する画面の１つがフラッシュにより明るい画像として表示されているにすぎない。そこでこのようなフレームが、シーンチェンジとして検出されるのは好ましくない。フラッシュなどにより画像が白くつぶれしている場合の高速フーリエ変換の係数は交流成分が少なくなる。そこで、交流成分が予め設定されている閾値より少ない場合には、ステップS14において、判定部33A,33Bは、現在処理しているフレームは、シーンチェンジではないと判定する。これにより、白くつぶれた画像がシーンチェンジと誤検出されることが抑制される。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】０１２９
【補正方法】変更
【補正の内容】
【０１２９】
すなわち、図29の実施の形態においては、画像入力部11A、領域抽出部12A、並びに画像縮小部13Aによる処理結果から、非画像検出部14Aにより非画像が検出されるとともに、画像入力部11B、領域抽出部12A、並びに画像縮小部13Bの処理結果から、非画像検出部14Bにより非画像が検出される。非画像検出部14Aのフーリエ変換部31A（演算部15のフーリエ変換部としての機能をも有する）の出力は、演算部15のクロスパワースペクトル検出部51の一方の入力に直接供給されている。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】０１３０
【補正方法】変更
【補正の内容】
【０１３０】
これに対して、非画像検出部14Bのフーリエ変換部31Bの出力は、回転／スケーリング変換部304に供給されている。回転／スケーリング変換部304は、フーリエ変換部31Bより入力された画像の回転またはスケーリングを、回転／スケーリング検出部303からの制御信号に基づいて変換し、演算部15のフーリエ変換部341に出力する。フーリエ変換部341は、回転／スケーリング変換部304からの信号をフーリエ変換し、クロスパワースペクトル検出部51の他方の入力に供給する。