【手続補正書】
【提出日】平成23年11月2日(2011.11.2)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
動画シーケンス全体にわたる時間窓を定義するフレームのセットに対して、該フレームのセット内に、時間窓全体にわたる基準フレームからの移動の範囲内にある、少なくとも１つのフレームに関する前記基準フレームの領域の変化を記述するモーション推定にアクセスするステップであって、
前記モーション推定は、前記セットの１以上のフレーム間の１以上の領域に関連する並進運動のモーションを記述する直交関係にあるモーションベクトル成分のペアを少なくとも含み、
前記基準フレームと前記少なくとも１つのフレームの前記領域は、少なくともある画像特徴の一部分を含むステップと、
時間窓全体にわたってモーション推定を平滑化するステップを含む方法であって、
前記平滑化ステップは、
モーション推定の直交関係にあるモーションベクトル成分の各ペアについて、モーション推定の時間的平滑化に対応する平滑された値を計算するステップと、
時間窓全体にわたる計算された平滑化された値からモーション推定の軌道を決定するステップと、
前記モーション推定の軌道を、基準フレームについて計算された平滑化された値が基準フレームにおける領域の既知の位置に一致するようずらすステップと、
時間窓全体にわたる平滑化された値を、ずらされた軌道から帰結する平滑化された値で置き換えるステップとを含む、
方法。
【請求項２】
前記領域がブロックである、請求項１記載の方法。
【請求項３】
前記平滑化は、フレームのセット内で、少なくとも部分的に、前記画像特徴の整列を容易にすることを特徴とする請求項１に記載の方法。
【請求項４】
対応するフレーム領域への変化を記述するフレームのセット中のフレームに関連する合成成分を決定するステップと、
モーション推定の平滑化に付随して、該合成成分を補償するステップとをさらに含み、
前記合成成分は、前記動画シーケンスのフレームに関連するフレームジッター特性、又は、前記動画シーケンスのフレームに関連するフィルムの周期変化特性、の少なくとも１つを含む、
請求項１に記載の方法。
【請求項５】
該複数の成分は、
前記セットの１以上のフレーム間の１以上の領域に関連する回転運動のモーションを記述する角度成分、又は、
前記セットの１以上のフレーム間の１以上の領域に関連するアフィンモーションを記述する成分、
のうちの少なくとも１つを含む、
請求項１に記載の方法。
【請求項６】
第１のフレーム及び第２のフレームに対応する領域は、複数の領域関係のうちの第１の領域関係を具備し、
前記画像特徴は少なくとも部分的に１以上の領域関係にわたって分配され、
前記モーション推定は複数のモーション推定のうちの１つを含み、
各モーション推定は、前記領域関係の１つにわたる変化を記述し、
前記方法は、
前記アクセスするステップと前記平滑化するステップとを、前記領域関係のそれぞれについての各モーション推定について繰り返すことをさらに含む、
請求項１に記載の方法。
【請求項７】
前記モーション推定は、独立変数に関して窓全体にわたるモーションを記述し、前記独立変数は、時間、温度、又は、動画シーケンス内のモーションが関連する他の特性のうちの少なくとも1つに関することを特徴とする請求項１に記載の方法。
【請求項８】
前記フレームセットのフレームは実質的に前記窓全体にわたって周期的に間隔をあけている、または前記フレームセットのフレームは実質的に前記窓全体にわたって周期的以外の仕方で間隔をあけていることを特徴とする、
請求項１に記載の方法。
【請求項９】
前記動画シーケンスのフレームセットは、該フレームのセット内に、時間窓の少なくとも一部分にわたる第１のフレームからと第２のフレームからの移動の範囲内にある、少なくとも第３のフレームを含み、
前記方法さらには、
前記フレームセットの各フレームに関して、前記アクセスするステップと前記平滑化するステップを繰り返すことを含む、
請求項１に記載の方法。
【請求項１０】
前記平滑化ステップは、アクセスしたモーション推定の各々に対応する前記平滑化された値を、重み付けした推定値と比較するステップを含み、
該重み付けした推定値は、モーション推定が第２のフレームの対応する領域に関する第１のフレームの領域の変化を予測する精度に関する信頼度のレベルに基づいて重み付けられたモーション推定のセットを含み、
前記計算された平滑化された値が重み付けした推定値と許容範囲内で匹敵する場合、前記平滑化された値を選択し、
前記平滑化された値を使って動画シーケンス内のフレームセットのフレームを呈示することを含む、
請求項９に記載の方法。
【請求項１１】
前記信頼度のレベルが、前記第１のフレームの前記領域および前記第２のフレームの対応する領域の対応するピクセル値の差の絶対値の和から導出される、請求項１０記載の方法。
【請求項１２】
前記計算された平滑化された値が重み付けした推定値との比較が、前記フレームセットのサブセットの１以上のフレームについて、許容範囲外である場合、前記サブセットの前記１以上のフレームについて前記平滑化するステップを繰り返すことをさらに含み、該平滑化するステップはさらに、
前記サブセットの前記１以上のフレームのモーション推定の各成分についてそれに続く平滑化された値を計算するステップであって、ここで該それに続く平滑化された値は、元の平滑化された値と重み付けした推定値との間の値に制限されるステップと、
前記計算されたそれに続く平滑化された値が重み付けした推定値と前記許容範囲内で匹敵する場合、前記それに続く平滑化された値を選択するステップと、
該それに続く平滑化された値を使って、前記動画シーケンス内のフレームセットのフレームのサブセットの前記１以上のフレームを呈示するステップとを含む、
請求項１０に記載の方法。
【請求項１３】
動画シーケンスの画像特徴の整列を容易にする少なくとも１つのプロセッサと、
命令の１以上の格納されたシーケンスを具備するコンピュータ読取可能媒体と、
を具備する装置であって、前記命令は、
前記少なくとも１つのプロセッサによって実行されたとき、前記少なくとも１つのプロセッサに、請求項１ないし１２のうちいずれか一項記載の方法を実行させることを特徴とする、動画シーケンスの処理を行う装置。
【請求項１４】
前記装置は、
コンピュータと、
ビデオデコーダ又はビデオエンコーダのうちの少なくとも１つと、
テレビジョンと、
少なくとも１つの光学的にエンコードされた媒体用のプレーヤーアプリケーションと、
ストリーミングデジタル信号のプレーヤーアプリケーションと、
画像処理アプリケーションからの情報を表示するためのモニターと、
ネットワーク構成要素と、
ポータブル通信装置と、
医学的画像処理装置と、
科学的画像処理装置と、
ビデオ編集システムと、
ビデオ処理システムと、
ゲームプレイ装置と、
のうちの少なくとも１つを具備することを特徴とする請求項１３に記載の装置。
【請求項１５】
コンピュータシステムの１以上のプロセッサで命令を実行したとき、該１以上のプロセッサに、請求項１ないし１２のうちいずれか一項記載の方法のステップを実行させるエンコードされた命令を有するコンピュータ読取可能媒体。
【請求項１６】
装置の動作方法であって、
動画シーケンスのフレームの領域に対して、フレームのセットのサブセット全体にわたる前記領域のモーションを記述し、該セット中の各フレームを独立変数の値と関連付け、該独立変数の関数として、前記セット中の少なくとも１つの他のフレームに関しての、前記セット中のフレームの前記領域への変化を記述する、モーション推定にアクセスするステップであって、前記モーション推定は、前記セットの１以上のフレーム間の１以上の領域に関連する並進運動のモーションを記述する直交関係にあるモーションベクトル成分のペアを少なくとも含む、ステップと、
前記独立変数にわたって前記モーション推定を平滑化するステップとを含み、前記平滑化ステップは、
モーション推定の直交関係にあるモーションベクトル成分の各ペアについて、前記独立変数にわたる前記モーション推定の平滑化に対応する平滑された値を計算するステップと、
アクセスしたモーション推定の各々に対応する前記平滑化された値を、重み付けした推定値と比較するステップであって、該重み付けした推定値は、モーション推定が第２のフレームの対応する領域に関する第１のフレームの領域の変化を予測する精度に関する信頼度のレベルに基づいて重み付けられたモーション推定のセットを含む、ステップと、
前記計算された平滑化された値が重み付けした推定値と許容範囲内で匹敵する場合、前記平滑化された値を選択するステップと、
前記平滑化された値を使って動画シーケンス内のフレームセットのフレームを呈示するステップとを含む、
方法。
【請求項１７】
前記独立変数が時間である、
および／または
前記領域がブロックである、
請求項１６に記載の方法。
【請求項１８】
前記信頼度のレベルが、前記第１のフレームの前記領域および前記第２のフレームの対応する領域の対応するピクセル値の差の絶対値の和から導出される、請求項１６記載の方法。
【請求項１９】
前記平滑化は、フレームのセット内で、少なくとも部分的に、二つ以上のフレームに存在する画像特徴の整列を容易にする、
および／または
前記独立変数は、時間、フレーム番号、距離、温度、又はそれにわたってモーションを記述することができる他の性質のうちの少なくとも１つに関する
および／または
前記モーション推定が、複数の成分関数を含み、該複数の成分関数は、回転運動のモーションを記述する角度成分関数と、アフィンモーションを記述するアフィン角度成分関数と、色の変化を記述する色成分関数と、空間分解能の変化を記述する分解能成分関数とのうちの少なくとも１つを含む、
および／または
あるフレームの全モーション推定を平滑化するためにそのフレームのすべての領域について前記の各ステップを繰り返す、
および／または
動画シーケンスの全モーション推定を平滑化するためにその動画シーケンスの全フレームについて前記の各ステップを繰り返す、
請求項１６に記載の方法。