(57)【要約】【課題】原画像から、幅と高さの間の比率が縮小比と呼ばれる予め決定された値に等しい、縮小画像と呼ばれる縮小サイズの画像を生成する画像処理方法を提供する。【解決手段】本発明の画像処理方法は、原画像において１つの矩形の画像部分を選択するステップ１００、及び縮小画像を生成するために矩形の画像部分を抽出するステップ１４０を含み、本発明の本質的な特徴によれば、第一の比率ＲＦと呼ばれる、矩形の画像部分の幅ＰＬと高さＰＨとの間の比率が縮小比ＲＲに等しくない場合、矩形の画像部分の幅又は高さは、第二の比率と呼ばれる、変更された矩形の画像部分の幅と高さの間の比率が縮小率ＲＲに等しいようなやり方で、原画像のそれぞれの画素に関連する知覚的な関心の値に従って抽出ステップ１４０の前に変更される１３０。【選択図】図１
2008192156.tif 000002
【特許請求の範囲】
【請求項１】
原画像から、幅と高さの間の比率が縮小比と呼ばれる予め決定された値に等しい、縮小画像と呼ばれる縮小サイズの画像を生成する画像処理方法であって、
前記原画像において１つの矩形の画像部分を選択するステップと、
前記縮小画像を生成するために前記矩形の画像部分を抽出するステップとを含み、
当該方法は、
第一の比率と呼ばれる、前記矩形の画像部分の幅と高さとの間の比率が前記縮小比に等しくない場合、前記矩形の画像部分の幅又は高さは、第二の比率と呼ばれる、変更された矩形の画像部分の幅と高さの間の比率が前記縮小比率に等しいようなやり方で、前記原画像のそれぞれの画素に関連する知覚的な関心の値に従って前記抽出ステップの前に変更される、
ことを特徴とする画像処理方法。
【請求項２】
前記第一の比率が前記縮小比よりも小さい場合、前記矩形の画像部分の幅は、右への第一の値及び左への第二の値だけ増加され、
前記第一及び第二の値は、
第一の増加による増加された幅と前記高さとの間の比が前記縮小比に等しいように前記第一の増加を計算するステップと、
右への前記第一の増加の前記矩形の画像部分の幅を増加することで得られる更なる画像部分の画素に関連する知覚的な関心の値から第一の平均の特徴の値を計算するステップと、
左への前記第一の増加の前記矩形の画像部分の幅を増加することで得られる更なる画像部分の画素に関連する知覚的な関心の値から第二の平均の特徴の値を計算するステップと、
前記第一の平均の特徴の値と、全体の平均の特徴の値と呼ばれる、前記第一及び第二の平均の特徴の値の合計との間の比と、前記第一の増加との積である第一の値を計算するステップと、
前記第二の平均の特徴の値と、前記全体の平均の特徴の値との間の比と、前記第一の増加との積である前記第二の値を計算するステップと、
に従って決定される請求項１記載の方法。
【請求項３】
前記第一の比率が前記縮小比よりも大きい場合、前記矩形の画像部分の高さは、上方に第一の値、及び下方に第二の値だけ増加され、
前記第一及び第二の値は、
前記幅と前記第二の増加による前記増加された高さとの間の比が前記縮小比に等しいように前記高さの第二の増加を計算するステップと、
上方に前記第二の増加の前記画像部分の高さを増加することで得られる更なる画像部分の画素に関連される知覚的な関心の値から第一の平均の特徴の値を計算するステップと、
下方に前記第二の増加の前記画像部分の高さを増加することで得られる更なる画像部分の画素に関連される知覚的な関心の値から第二の平均の特徴の値を計算するステップと、
前記第一の平均の特徴の値と、全体の平均の特徴の値と呼ばれる、前記第一及び第二の特徴の値の合計との間の比と前記第二の増加との積として前記第一の値を計算するステップと、
前記第二の平均の特徴の値と前記全体の平均の特徴の値との間の比と、前記第二の増加との積として前記第二の値を計算するステップと、
に従って決定される請求項１又は２記載の方法。
【請求項４】
前記原画像は幾つかの画像の系列に属しており、
当該方法は、系列のそれぞれの画像に適用され、
現在の画像の矩形の画像部分の幅又は高さの変更ステップの後、距離が低減されるように予め決定された閾値よりも大きな距離だけ前記現在の画像に先行する画像の矩形の画像部分の対応するサイドから、前記矩形の画像部分のサイドの少なくとも１つが分離される場合、前記矩形の画像部分のサイドの少なくとも１つを移動することからなる前記矩形の画像部分の時間的な適合ステップを含む、
請求項１乃至３のうちの何れか記載の方法。
【請求項５】
原画像は幾つかの画像の系列に属し、
当該方法は、系列のそれぞれの画像に適用され、
現在の画像の矩形の画像部分の幅又は高さの変更ステップの後、距離が低減されるように予め決定された閾値よりも大きな距離だけ前記現在の画像に先行する画像の矩形の画像部分の対応するサイドから、前記矩形の画像部分の全てのサイドのそれぞれが分離される場合、前記矩形の画像部分の全てのサイドを移動することからなる前記矩形の画像部分の時間的な適合ステップを含む、
請求項１乃至３のうちの何れか記載の方法。
【請求項６】
前記原画像は幾つかの画像の系列に属し、
当該方法は、系列のそれぞれの画像に適用され、
現在の画像の矩形の画像部分の幅又は高さの変更ステップの後、Ｎ及びＮ’を正の整数として、変更されたパラメータが前記現在の画像に先行するＮ個の画像、及び前記現在の画像に後続するＮ’個の画像の矩形の画像部分の対応するパラメータを含む値のセットの中間値に等しいように、高さ、幅及び中心の座標を含むパラメータのなかから前記矩形の画像部分の少なくとも１つのパラメータを変更することからなる前記矩形の画像部分の時間的な適合ステップを含む、
請求項１乃至３のうちの何れか記載の方法。
【請求項７】
前記Ｎ＝Ｎ’である、
請求項６記載の方法。
【請求項８】
前記系列はショットと呼ばれる画像のグループに分割され、前記現在の画像に先行するＮ個の画像と前記現在の画像に後続するＮ’個の画像は、前記現在の画像として同じショットに属する、
請求項６又は７記載の方法。
【請求項９】
前記時間的に適合された矩形の画像部分の幅と高さとの間の比が前記縮小比に等しくない場合、前記時間的な適合ステップは、前記時間的に適合され変更された矩形の画像部分の幅と高さとの間の比が前記縮小比に等しいように、前記現在の原画像のそれぞれの画素と関連される知覚的な関心の値に従って前記時間的に適合された矩形の画像部分の幅又は高さの変更ステップにより後続される、
請求項４乃至８の何れか記載の方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、原画像から縮小サイズの画像を生成する画像処理方法に関する。
【背景技術】
【０００２】
固定された画像又はビデオのセットにおけるナビゲーションアプリケーションにとって、全てのビデオ画像を一見して表示できることは有効である。この目的のため、前記画像又はビデオが同じスクリーンに同時に表示され、容易に比較することができるように、それぞれ固定された画像又はそれぞれのビデオ画像の縮小サイズのバージョンを生成することは関心のあることである。同様に、たとえば移動電話といった小型サイズのスクリーンを有する移動機器でのビデオコンテンツのブロードキャストアプリケーションのため、小型サイズのスクリーンでそれらを表示するため、ビデオのそれぞれの画像の縮小サイズのバージョンを生成することが必要である。
【０００３】
原画像又はビデオからこれら縮小された画像又はビデオを生成するための当業者に知られている方法は、前記原画像又はビデオをサブサンプリングすることからなる。サイズにおける重要な低減のケースでは、幾つかの画像部分はそれらが余りに小さいのでユーザにより使用することが不可能である。
【特許文献１】US  2002/191861  A1  (CHEATLE  STEPHEN  PHILIP  [GB])
【特許文献２】US  2005/025387  A1  (LUO  JIEBO  [US])
【非特許文献１】XIN  FAN  ET  AL:  “Looking  into  Video  Frames  on  Small  Displays”  INTERNET  CITATION,  [Online]
【非特許文献２】CHEN  L-Q  ET  AL:  “A  VISUAL  ATTENTION  MODEL  FOR  ADAPTING  IMAGES  ON  SMALL  DISPLAYS”  MULTIMEDIA  SYSTEMS,  ACM,  NEW  YORK,  NY,  US
【発明の開示】
【発明が解決しようとする課題】
【０００４】
本発明の目的は、従来技術の少なくとも１つの問題に対処することである。
【課題を解決するための手段】
【０００５】
本発明は、原画像から、縮小比と呼ばれる、幅と高さの間の比率が予め決定された値に等しい縮小サイズの画像を生成する画像処理方法に関するものであり、原画像において１つの矩形の画像部分を選択し、矩形の画像部分を抽出して縮小画像を生成するステップを含む。
【０００６】
本発明の本質的な特徴によれば、第一の比率と呼ばれる、矩形の画像部分の幅と高さの間の比率が縮小比に等しくない場合、矩形の画像部分の幅又は高さは、第二の比率と呼ばれる、変更された矩形の画像部分の幅と高さの間の比率が縮小比率に等しいようなやり方で、原画像のそれぞれの画素に関連する知覚による関心の値に従って抽出ステップの前に変更される。
【０００７】
特定の特徴によれば、第一の比率が縮小比よりも小さい場合、矩形の画像部分の幅は、右への第一の値及び左への第二の値により増加される。第一及び第二の値は、以下のステップに従って決定される。第一の増加の増加された幅と高さの間の比が縮小比に等しいように第一の増加する計算するステップ、右への第一の増加の矩形の画像部分の幅を増加することで得られる更なる画像部分の画素に関連する知覚的な関心の値から第一の平均の特徴の値（saliency  value）を計算するステップ、左への第一の増加の矩形の画像部分の幅を増加することで得られる更なる画像部分の画素に関連する知覚的な関心の値から第二の平均の特徴の値を計算するステップ、第一の平均の特徴の値と、全体の平均の特徴の値と呼ばれる、第一及び第二の平均の特徴の値の合計との間の比と、第一の増加との積である第一の値を計算するステップ、第二の平均の特徴の値と、全体の平均の特徴の値との間の比と、第一の増加との積である第二の値を計算するステップ。
【０００８】
別の特定の特性によれば、第一の比率が縮小比よりも大きい場合、矩形の画像部分の高さは、上方に第一の値、及び下方に第二の値だけ増加され、第一及び第二の値は、以下のステップに従って決定される。幅と第二の増加により増加された高さとの間の比が縮小比に等しいように高さの第二の増加を計算するステップ、上方に第二の増加の画像部分の高さを増加することで得られる更なる画像部分の画素に関連される知覚的な関心の値から第一の平均の特徴の値を計算するステップ、下方に第二の増加の画像部分の高さを増加することで得られる更なる画像部分の画素に関連される知覚的な関心の値から第二の平均の特徴の値を計算するステップ、第一の平均の特徴の値と、全体の平均の特徴の値と呼ばれる、第一及び第二の特徴の値の合計との間の比と第二の増加との積として第一の値を計算するステップ、第二の平均の特徴の値と、全体の平均の特徴の値との間の比と第二の増加との積として第二の値を計算するステップ。
【０００９】
特定の実施の形態によれば、原画像は幾つかの画像の系列に属しており、本方法は、系列のそれぞれの画像に適用され、現在の画像の矩形の画像部分の幅又は高さの変更ステップの後、距離が低減されるように予め決定された閾値よりも大きな距離だけ現在の画像に先行する画像の矩形の画像部分の対応するサイドから、矩形の画像部分のサイドの少なくとも１つが分離される場合、矩形の画像部分のサイドの少なくとも１つを移動することからなる矩形の画像部分の時間的な適合（temporally  adapting）ステップを含む。
【００１０】
別の特定の実施の形態によれば、原画像は幾つかの画像の系列に属し、本方法は、系列のそれぞれの画像に適用され、現在の画像の矩形の画像部分の幅又は高さの変更ステップの後、距離が低減されるように予め決定された閾値よりも大きな距離だけ現在の画像に先行する画像の矩形の画像部分の対応するサイドから、矩形の画像部分の全てのサイドのそれぞれが分離される場合、矩形の画像部分の全てのサイドを移動することからなる矩形の画像部分の時間的な適合ステップを含む。
【００１１】
別の特定の実施の形態によれば、原画像は幾つかの画像の系列に属し、本方法は、系列のそれぞれの画像に適用され、現在の画像の矩形の画像部分の幅又は高さの変更ステップの後、Ｎ及びＮ’を正の整数として、変更されたパラメータが現在の画像に先行するＮ画像、及び現在の画像に後続するＮ’画像の矩形の画像部分の対応するパラメータを含む値のセットの中間値に等しいように、高さ、幅及び中心の座標といったパラメータのなかから矩形の画像部分の少なくとも１つのパラメータを変更することからなる矩形の画像部分の時間的な適合ステップを含む。
【００１２】
特定の特性によれば、Ｎ＝Ｎ’である。
【００１３】
別の特定の特性によれば、系列はショットと呼ばれる画像のグループに分割され、現在の画像に先行するＮ画像と現在の画像に後続するＮ’画像は現在の画像として同じショットに属する。
【００１４】
有利なことに、時間的に適合された矩形の画像部分の幅と高さとの間の比が縮小された比に等しくない場合、時間的な適合ステップは、時間的に適合され変更された矩形の画像部分の幅と高さとの間の比が縮小された比率に等しいように、現在の原画像のそれぞれの画素と関連される知覚的な関心の値に従う時間的に適合される矩形の画像部分の幅又は高さの変更ステップにより後続される。
【００１５】
本発明は、添付図面を参照して、限定することなしに、有利な実施の形態及び実現により良好に理解され、例示される。
【発明を実施するための最良の形態】
【００１６】
本発明は、原画像から、その幅と高さとの間の比率が縮小比率と呼ばれ、ＲＲとして示される予め決定された比率に等しい縮小サイズの画像を生成する方法に関する。画像について記載される本発明は、ビデオのような画像系列に適用することができる。
【００１７】
図１を参照して、本発明は、原画像の矩形部分の第一の選択ステップ１００を含む。かかる選択は、原画像の画素の知覚的な関心を特徴づけるデータから実行される。この目的のため、図２を参照して、原画像（図２（ａ））に関連する特徴マップ（図２（ｂ））は、原画像における特徴の部分、すなわち知覚的な関心が高い部分を識別するやり方で予め決定された閾値で２値化される。生成されるバイナリマップ（図２（ｃ））は、画素の関連される特徴の値が予め決定された閾値よりも低い場合に、第一の値（たとえばゼロ）を原画像のそれぞれの画素と関連付け、さもなければ第二の値（たとえば２５５）を関連付けする。図３を参照して、バウンディングＲＥは、第二の値が関連付けされる画素により構成される原画像のゾーンを囲むように原画像で位置合わせされる。バウンディングボックスは、選択された画像部分の境界を決定する。特徴マップは、たとえば特許出願EP03293216.2（公開1544792）で記載される方法を適用することで得られる。かかるマップは、ｓPで示される特徴の値を原画像のそれぞれの画素Ｐと関連付けする。画像部分の選択は、任意の他の方法に従って行うことができる。変形例に拠れば、人間のオペレータにより手動で実行される。かかるゾーンは、関心のあるエリア又は領域名の下で従来技術において知られる。
【００１８】
ステップ１１０は、ステップ１００で選択された画像部分の幅ＰＬと高さＰＨの間の比率ＲＦを計算することからなる。  
ステップ１２０は、ＲＦをＲＲと比較することからなる。ＲＦがＲＲに等しい場合、ステップ１００で選択された画像部分の抽出を進めることで、ステップ１４０の間に生成される。さもなければ、選択された画像部分の高さ又は幅は、変更された画像部分の幅と高さとの間の比がＲＲに等しいやり方で、ステップ１３０の間に変更される。
【００１９】
より詳細には、図４を参照して、ステップ１３０は、ＲＦがＲＲよりも小さい場合にバウンディングボックスの幅を増加するステップ１３１、ＲＦがＲＲよりも大きい場合にバウンディングボックスの高さを増加するステップ１３２からなる。本発明の１つの本質的な特徴によれば、バウンディングボックスの幅又は高さは、原画像の画素の知覚的な関心を考慮することで増加される。図５を参照して、ＲＦ＜＜ＲＲのケースで、バウンディングボックスの幅における増加ＡＬは、以下のやり方でステップ１３１０の間に計算される。ＡＬ＝ＰＬ*ＲＲ／ＲＦ−ＰＬ。ステップ１３１１の間、図７を参照して、平均の特徴の値は、左にバウンディングボックスＲＥの幅を増加することで得られる、幅ＡＬ及び高さＰＨの、更なるボックスＲＡＧにおいて計算される。更なるボックスＲＡＧの平均の特徴ＳＭＧは、以下のように計算される。
【００２０】
【数１】
2008192156.tif 000003
ここでｎａｇは更なるボックスＲＡＧにおける画素数である。
【００２１】
同様に、ステップ１３１２の間、図８を参照して、平均の特徴の値は、右へバウンディングボックスＲＥの幅を増加することで得られる、幅ＡＬと高さＰＨの更なるボックスＲＡＤにおいて計算される。更なるボックスＲＡＤの平均の特徴ＳＭＤは、以下のように計算される。
【００２２】
【数２】
2008192156.tif 000004
ここでｎａｄは更なるボックスＲＡＤにおける画素数である。すなわちｎａｄ＝ｎａｇである。
【００２３】
ステップ１３１３の間、全体の平均の特徴の値ＳＭＴは、以下のように計算される。ＳＭＴ＝ＳＭＧ＋ＳＭＤ  
ステップ１３１４の間、左への幅における増加ＡＬＧは、以下のように計算される。
ＡＬＧ＝ＳＭＧ*ＡＬ／ＳＭＴ
同様に、ステップ１３１５の間、右への幅における増加ＡＬＤは、以下のように計算される。
ＡＬＤ＝ＳＭＤ*ＡＬ／ＳＭＴ
変更されたバウンディングボックスＲＥＭは、図９に示される。ＰＨに等しい高さ及びＡＬＧ＋ＡＬＤ＋ＰＬに等しい幅、すなわちＡＬ＋ＰＬに等しい幅を有する。したがって、変更されたバウンディングボックスＲＥＭの幅と高さとの間の比は、（ＡＬ＋ＰＬ）／ＰＨに等しく、すなわちＰＬ*ＲＲ／（ＲＦ*ＰＨ）＝ＲＲに等しい。
【００２４】
図６を参照して、ＲＦ＞ＲＲのケースでは、バウンディングボックスの高さＡＨにおける増加は、以下のやり方でステップ１３２０の間に計算される。
ＡＨ＝ＰＨ*ＲＦ／ＲＲ−ＰＨ。
ステップ１３２１の間、図１０を参照して、平均の特徴の値は、上にバウンディングボックスＲＥの高さを増加することで得られる、幅ＰＬと高さＡＨの更なるボックスＲＡＨで計算される。更なるボックスＲＡＨの平均の特徴ＳＭＨは、以下のように計算される。
【００２５】
【数３】
2008192156.tif 000005
ここでｎａｈは更なるボックスＲＡＨにおける画素数である。
同様に、ステップ１３２２の間、図１１を参照して、平均の特徴の値は、下にバウンディングボックスＲＥの高さを増加することで得られる、幅ＰＬと高さＡＨの更なるボックスＲＡＢで計算される。更なるボックスＲＡＢの平均の特徴ＳＭＢは、以下のように計算される。
【００２６】
【数４】
2008192156.tif 000006
ここでｎａｂは更なるボックスＲＡＢにおける画素数である。すなわちｎａｂ＝ｎａｈである。
【００２７】
ステップ１３２３の間、全体の平均の特徴の値ＳＭＴは、以下のように計算される。ＳＭＴ＝ＳＭＢ＋ＳＭＨ。  
ステップ１３２４の間、上への高さにおける増加ＡＨＨは、以下のように計算される
ＡＨＨ＝ＳＭＨ*ＡＨ／ＳＭＴ。  
同様に、ステップ１３２５の間、下への高さにおける増加ＡＨＢは、以下のように計算される。
ＡＨＢ＝ＳＭＢ*ＡＨ／ＳＭＴ。
【００２８】
変更されたバウンディングボックスＲＥＭは、図１２に示される。このバウンディングボックスは、ＡＨＨ＋ＡＨＢ＋ＰＨに等しい高さ、すなわちＡＨ＋ＰＨに等しい高さとＰＬに等しい幅を有する。変更されたバウンディングボックスＲＥＭの幅と高さの間の比は、ＰＬ／（ＡＨ＋ＰＨ）に等しく、すなわちＰＬ／（ＰＨ*ＲＦ／ＲＲ）＝ＲＲに等しい。
【００２９】
ステップ１４０は、変更されたバウンディングボックスＲＥＭにより境界が設定される画像部分を原画像から抽出することで縮小された画像を生成することからなる。
【００３０】
有利なことに、本発明によれば、バウンディングボックスは、知覚的な関心が高い画素を変更されたバウンディングボックスＲＥＭが含むように、その幅と高さとの間の比が比率ＲＲに等しいボックスを得るために変更される。
【００３１】
ステップ１００で決定されたバウンディングボックスＲＥが原画像のエッジのうちの１つの近くに位置される場合、更なるボックスが原画像を残すことが可能である。このケースでは、変更されたバウンディングボックスＲＥＭの決定ステップの間、原画像の外に配置される画素は、反対のサイドに配置される。
【００３２】
図１５により例示される本発明の特定の実施の形態によれば、本方法は、縮小サイズのビデオを生成するためにビデオのそれぞれの画像に適用される。有利なことに、本方法は、ステップ１４０の前に適用される時間的な適合ステップ１３５を更に含む。本方法は、ＡＲＥＭt-1で示されるそれ自身が時間的に適合された変更されたバウンディングボックスからのインデックスｔの画像において、インデックスｔの画像に時間的に先行するインデックスｔ−１の画像において、変更されたバウンディングボックスＲＥＭtを時間的に適合することからなる。このステップは、連続する画像間のジャーキー効果（jerky  effect）が防止されるのを可能にし、これらの効果は、変更されたバウンディングウィンドウＲＥＭの、ある原画像のロケーションから別の原画像のロケーションへの強い変動によるものである。縮小されたビデオの再生の間、オブザーバに流動性の印象が与えられるのを可能にする。図１３を参照して、ｄｇ（それぞれｄｄ）は、インデックスｔの現在の画像の変更されたバウンディングボックスＲＥＭtの左サイド（それぞれ右サイド）と、インデックスｔ−１の前の画像の時間的に適合された変更されたバウンディングボックスＡＲＥＭt-1の左サイド（それぞれ右サイド）を分離する距離である。また、ｄｈ（それぞれｄｂ）は、インデックスｔの画像の変更されたバウンディングボックスＲＥＭtの上サイド（それぞれ下サイド）と、インデックスｔ−１の前の画像の時間的に適合された変更されたバウンディングボックスＡＲＥＭt-1の上サイド（それぞれ下サイド）とを分離する距離である。
【００３３】
距離ｄｄ，ｄｇ，ｄｈ及びｄｂは、以下のやり方で変更される。  
ｄｄ＞ＴＨＤである場合、ｄｄｍ＝ｄｄ−ｄｄ／αCV、さもなければｄｄｍ＝ｄｄ。  
ｄｇ＞ＴＨＤである場合、ｄｇｍ＝ｄｇ−ｄｇ／αCV、さもなければｄｇｍ＝ｄｇ。  
ｄｈ＞ＴＨＤである場合、ｄｈｍ＝ｄｈ−ｄｈ／αCV、さもなければｄｈｍ＝ｄｈ。  
ｄｂ＞ＴＨＤである場合、ｄｂｍ＝ｄｂ−ｄｂ／αCV、さもなければｄｂｍ＝ｄｂ。
【００３４】
変形例に拠れば、距離ｄｄ，ｄｇ、ｄｈ及びｄｂは、以下のやり方で変更される。  
（ｄｄANDｄｇANDｄｈANDｄｂ）＞ＴＨＤである場合、ｄｄｍ＝ｄｄ−ｄｄ／αCV，ｄｇｍ＝ｄｇ−ｄｇ／αCV，ｄｈｍ＝ｄｈ−ｄｈ／αCV，及びｄｂｍ＝ｄｂ−ｄｂ／αCVである。この場合、“AND”は論理積の演算子である。ＴＨＤは、予め決定された閾値である。ＣＩＦフォーマットにおける画像の系列について、ＴＨＤ＝２０である。ｄｄｍ，ｄｇｍ，ｄｈｍ及びｄｂｍは、ｄｄ，ｄｇ，ｄｈ及びｄｂのそれぞれ変更された値である。αCVは時間的な収束速度である。αCVが大きい場合、ウィンドウＡＲＥＭtの位置はウィンドウＡＲＥＭt-1の位置に関して変化しない。変更されたバウンディングボックスＲＥＭtのサイドは、現在の画像の時間的に適合された変更されたバウンディングボックスＡＲＥＭtの左サイド（それぞれ右サイド）と、前の画像の時間的に適合された変更されたバウンディングボックスＡＲＥＭt-1の左サイド（それぞれ右サイド）とを分離する距離がｄｇｍ（それぞれｄｄｍ）に等しいようなやり方で、及び、現在の画像の変更されたバウンディングボックスＲＥＭtの上サイド（それぞれ下サイド）と、時間的に適合された変更されたバウンディングボックスＡＲＥＭt-1の上サイド（それぞれ下サイド）と、を分離する距離がｄｈｍ（それぞれｄｂｍ）に等しいようなやり方で移動される。
【００３５】
時間的な適合ステップ１３５は、バウンディングボックスのサイズを変更する。したがって、このステップの後、バウンディングボックスＡＲＥＭtの幅と高さの比がＲＲに等しいようにステップ１１０から１３０を再び行うことが必要である。
【００３６】
本発明の別の実施の形態によれば、バウンディングボックスの時間的な適合ステップ１３５は、ショット当たり実行される。ショットは、系列の他の画像のショットの２つの変化により分離される連続する画像のグループである。このため、系列のショットのそれぞれの画像において、ステップ１１０〜１３０に従って変更されたバウンディングボックスからパラメータが抽出される。これらのパラメータは、変更されたバウンディングボックスＲＥＭの中心の座標（Ｃx，Ｃy）、その高さＨ及びその幅Ｌである。長さＮの時間的なメディアンフィルタは、幾つかの画像に適用される。増加する順序に従ってパラメータのそれぞれの値をソートすること、中間の値を選択することからなる。値の数が偶数である場合、２つの中間の値の平均が選択される。計算の例は、長さＮ＝９のフィルタについて与えられる。インデックスｔの画像に先行する３つの画像とインデックスｔの画像に後続する３つの画像とに関連するパラメータの値から、インデックスｔの画像のＲＥＭに関連するそれぞれのパラメータについて、中間値が計算され、以下の表に一覧される。
【００３７】
【表１】
2008192156.tif 000007
増加する順序で分類されるパラメータＣXの値は、以下の通りである。２２７，２２７，２３０，２３０，２３１，２３１，２３３，２３５及び２３６。中間の値は、インデックスｔの画像の時間的に適合されたバウンディングボックス（ＡＲＥＭt）のＣXの新たな値となる値２３１である。他のパラメータの中間値は、以下の通りである。Ｃy＝１７２，Ｌ＝１５９及びＨ＝１３１である。
【００３８】
インデックスｔの画像において、フィルタリング後のバウンディングボックスは、幅が１５９画素で高さ１３１画素からなる座標（２３１，１７２）の画素にセンタリングされるボックスである。それぞれのバウンディングボックスについて、このように変更されたパラメータは、互いに更に相関され、時間的な整合が増加される（又は画像間のジャークが低減される）。
【００３９】
当然、ショットのＮ／２の最初の画像とＮ／２の最後の画像について、メディアンフィルタリングを適用することは可能ではない。このケースでは、ショットのＮ個の最初の画像（それぞれショットのＮ個の最後の画像）が適用される。たとえば、Ｎ＝９である場合、ショットの４つの最初の画像のバウンディングボックスのパラメータ（Ｃx，Ｃy，Ｌ，Ｈ）は同じである。それぞれのパラメータの値は、ショットの対応するパラメータの９つの最初の値のメディアンフィルタリングにより得られる中間値に等しい。
【００４０】
勿論、本発明は、上述された実施の形態の例に制限されない。特に、当業者は、説明された実施の形態に対する変形を実施し、それらを結合してそれら様々な利点からの利益を得る場合がある。
【００４１】
上述された方法は、画像系列のサマリ、ナビゲーション、インデックスのような多くのアプリケーション向けに使用することができる。また、本発明は、ＰＤＡ、モバイルフォン又はデジタルカメラスクリーンのような小型スクリーンでの画像又は画像の系列の視聴を改善するために使用することができる。
【図面の簡単な説明】
【００４２】
【図１】本発明の特定の実施の形態に係る方法のステップを例示する図である。
【図２】画像（ａ）、関連する特徴マップ（ｂ）及び特徴マップを閾値により得られるバイナリマップ（ｃ）を示す図である。
【図３】画像の特徴ゾーンを囲んでいるバウンディングボックスを示す図である。
【図４】本発明に係る方法のステップを例示する図である。
【図５】バウンディングボックスの幅を増加するために適用される本発明に係る方法のステップを例示する図である。
【図６】バウンディングボックスの高さを増加するために適用される本発明に係る方法のステップを例示する図である。
【図７】バウンディングボックスＲＥとボックスＲＥの左に位置される更なるボックスＲＡＧを示す図である。
【図８】バウンディングボックスＲＥとボックスＲＥの右に位置される更なるボックスＲＡＤを示す図である。
【図９】本発明の方法に係る更なる変更されたボックスＲＥＭを示す図である。
【図１０】バウンディングボックスＲＥとボックスＲＥの上に位置される更なるボックスＲＡＨを示す図である。
【図１１】バウンディングボックスＲＥとボックスＲＥの下に位置される更なるボックスＲＡＢを示す図である。
【図１２】本発明の方法に係る更なる変更されたボックスＲＥＭを示す図である。
【図１３】インデックスｔ−１の画像と関連される時間的に適合されるボックスＡＲＥＭt-1と時間的な適合の前にインデックスｔの画像と関連されるバウンディングボックスＲＥＭを示す図である。
【図１４】インデックスｔ−１の画像と関連される時間的に適合されるボックスＡＲＥＭt-1と時間的な適合の前後でインデックスｔの画像と関連されるバウンディングボックスＲＥＭを示す図である。
【図１５】本発明の別の特定の実施の形態に係る方法のステップを例示する図である。
【符号の説明】
【００４３】
１００：原画像の矩形部分を選択するステップ
１１０：選択された画像部分の幅と高さの間の比率を計算するステップ
１２０：第一の比率ＲＦを縮小比ＲＲと比較するステップ
１３０：変更された画像部分の幅と高さとの間の比がＲＲに等しくなるように、選択された画像部分の高さ又は幅を変更するステップ
１３１：ＲＦがＲＲよりも小さい場合にバウンディングボックスの幅を増加するステップ
１３２：ＲＦがＲＲよりも大きい場合にバウンディングボックスの高さを増加するステップ
１４０：縮小画像を生成するために矩形の画像部分を抽出するステップ
【図１】
2008192156.tif 000008
【図２】
2008192156.tif 000009
【図３】
2008192156.tif 000010
【図４】
2008192156.tif 000011
【図５】
2008192156.tif 000012
【図６】
2008192156.tif 000013
【図７】
2008192156.tif 000014
【図８】
2008192156.tif 000015
【図９】
2008192156.tif 000016
【図１０】
2008192156.tif 000017
【図１１】
2008192156.tif 000018
【図１２】
2008192156.tif 000019
【図１３】
2008192156.tif 000020
【図１４】
2008192156.tif 000021
【図１５】
2008192156.tif 000022