(57)【要約】【課題】入力画像組を表示デバイス上に提示する方法を提供する。【解決手段】まず始めに、入力画像組から表示画像組を選択する。選択した各画像に３Ｄレイアウトを割り当て、仮想カメラに３Ｄ軌跡を割り当てる。レイアウトおよび軌跡に従って表示画像組のうちアクティブな画像組をレンダリングする。アクティブな画像組はコレクタ画像を含む。このコレクタ画像は、表示デバイスの画像平面のコレクタフレームに静的にレンダリングされ、アクティブな画像組の残りの画像は画像平面上で動的にレンダリングされる。次に、レイアウトおよび軌跡をユーザ入力に従って動画化し、終了条件に達するまでレンダリングおよび動画化を繰り返す。【選択図】図１３
2004240974.tif 000002
【特許請求の範囲】
【請求項１】
画像組の提示方法であって、
前記画像組から表示画像組を選択するステップと、
前記表示画像組の各画像に３Ｄレイアウトを割り当てるステップと、
仮想カメラに３Ｄ軌跡を割り当てるステップと、
アクティブな画像組が表示デバイスの画像平面のコレクタフレームに静的にレンダリングされるコレクタ画像を含み、前記アクティブな画像組の残りの画像が前記画像平面上で動的にレンダリングされる、前記レイアウトおよび前記軌跡に従って前記表示画像組のうち前記アクティブな画像組をレンダリングするステップと、
前記レイアウトおよび前記軌跡をユーザ入力に従って動画化するステップと、
終了条件に達するまで前記レンダリングおよび動画化を繰り返すステップと
を含む画像組の提示方法。
【請求項２】
３Ｄ座標、サイズ、および向きが前記表示画像組の各画像に割り当てられる請求項１記載の画像組の提示方法。
【請求項３】
前記軌跡は直線状である請求項１記載の画像組の提示方法。
【請求項４】
前記軌跡は曲線状である請求項１記載の画像組の提示方法。
【請求項５】
前記画像組はビデオであり、前記アクティブな画像組は前記ビデオの要約である請求項１記載の画像組の提示方法。
【請求項６】
前記選択するステップは周期的に行われる請求項１記載の画像組の提示方法。
【請求項７】
前記仮想カメラを前記軌跡に沿って前記ユーザ入力によって指示されるレートでトラバースさせるステップをさらに含む請求項１記載の画像組の提示方法。
【請求項８】
前記トラバースさせるステップは反転可能である請求項７記載の画像組の提示方法。
【請求項９】
前記レイアウトは直線状である請求項１記載の画像組の提示方法。
【請求項１０】
前記レイアウトは環状である請求項１記載の画像組の提示方法。
【請求項１１】
前記レイアウトは螺旋状である請求項１記載の画像組の提示方法。
【請求項１２】
閲覧者に対する画像の奥行が前記画像のサイズによって示される請求項１記載の画像組の提示方法。
【請求項１３】
前記コレクタ画像は、前記アクティブな画像組の１番目の画像であり、奥行が最も近い請求項１２記載の画像組の提示方法。
【請求項１４】
前記レイアウト内で画像を意味的にグループ分けするステップをさらに含む請求項１記載の画像組の提示方法。
【請求項１５】
前記表示画像組に論理的な遷移画像を挿入するステップをさらに含む請求項１記載の画像組の提示方法。
【請求項１６】
前記遷移画像は透明である請求項１５記載の画像組の提示方法。
【請求項１７】
ユーザ入力デバイスの作動に必要な時間の推定に従って前記トラバースを停止させるステップをさらに含む請求項１記載の画像組の提示方法。
【請求項１８】
テレビ信号の複数の放送チャンネルから前記表示画像組を選択するステップをさらに含む請求項１記載の画像組の提示方法。
【請求項１９】
前記表示画像組中でターゲット画像を特定するステップと、
前記仮想カメラを前記軌跡に沿って前記ターゲット画像間の距離に対応するレートでトラバースさせるステップと
をさらに含む請求項７記載の画像組の提示方法。
【請求項２０】
どの２つのターゲット画像間でもトラバース時間は一定である請求項１９記載の画像組の提示方法。
【請求項２１】
画像組を記憶するメモリと、
前記画像組から表示画像組を選択するように構成されたクエリエンジンと、
前記表示画像組の各画像に３Ｄレイアウトを割り当てる手段と、
仮想カメラに３Ｄ軌跡を割り当てる手段と、
アクティブな画像組が表示デバイスの画像平面のコレクタフレームに静的にレンダリングされるコレクタ画像を含み、前記アクティブな画像組の残りの画像が前記画像平面上で動的にレンダリングされる、前記レイアウトおよび前記軌跡に従って前記表示画像組のうち前記アクティブな画像組を表示するように構成されたレンダリングエンジンと、
前記レイアウトおよび前記軌跡をユーザ入力に従って動画化する手段と、
終了条件に達するまで前記レンダリングおよび動画化を繰り返す手段と
を備える画像組の提示システム。
【請求項２２】
複数のコレクタフレームが用いられる請求項１記載の画像組の提示方法。
【請求項２３】
静的な画像の代わりにビデオが用いられる請求項１記載の画像組の提示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、概して画像の提示に関し、特に高速スキャニングのための画像の提示に関する。
【背景技術】
【０００２】
物理世界では、本のページを素早くパラパラとめくれば本の全体的な主旨を理解することができる。このタスクは本に挿絵があればさらに容易となる。これと同じ技法を用いれば、本の中の既知のターゲット、すなわち読者が以前に見たことがあり、ここで再び見つけようとしているページを見つけることができる。提供されたもの（offering）の主旨を理解することや既知のターゲットを探索することは、電子情報用途でもよく直面するタスクであるため、本のページをパラパラとめくるのと同様の技法がデジタル世界において必要とされている。
【０００３】
電子媒体において標準的に行われていることは、情報を静的に「ページ」に提示することである。制御部（controls）が設けられるため、ユーザは別のページに移ることができるが、「ページ」の組を前後へ素早くめくることはできない。
【０００４】
本のページをパラパラとめくることに似た最も近い活動は、ビデオの早送りまたは巻き戻し、あるいはテレビ信号チャンネルの「サーフィング」である。しかしながら、これらの制御部では、ユーザが提示の速度および方向を最大限に有利に制御することはできず、これらの方法は通常、ビデオ以外の情報について概要を掴んだりターゲットを絞る方法としては利用できない。
【０００５】
長年にわたり、心理学者は、高速系列視覚提示（rapid serial visual presentation：ＲＳＶＰ）として知られる一種の提示を通じて人間の視知覚を研究してきた。人間は、短く提示された画像を非常に素早く処理できることが知られている。読書に伴う認知過程および画像またはテキストを高速でフラッシュさせた場合の視知覚を調査する実験には長い歴史がある。最近編纂された論文集に、この業績の概要および歴史的概観が記載されている（Coltheart編「瞬時記憶：短い視覚刺激の認知（Fleeting Memories: Cognition of Brief Visual Stimuli）」（MIT Press, 1999）を参照）。
【０００６】
人は、通常１５０〜３００ミリ秒の範囲の一連の短い不連続な固視で視覚情報を処理すると考えられている。これらの固視の合間には、衝動性眼球運動（サッカード）が素早く行われる。詳細の知覚と理解は不連続な固視の中心部で行われ、視野の周辺部での曖昧な知覚は、次のサッカードのターゲットを決定する過程で用いられる。
【０００７】
一般に視知覚は、記憶の長期的保持に繋がり得る段階を追って進行すると考えられている。しかしながら、視覚情報は見てすぐに忘れてしまう可能性がある。記憶保持に繋がる以降の認知処理段階には視知覚に干渉し得る資源が必要であり、またその逆も同様である。
【０００８】
ヒューマン−コンピュータインタフェースで用いられる従来技術のＲＳＶＰ方法のうち、最も基本的なものは、心理学の文献で研究されている条件にほぼ一致する単一画像の時間的なシーケンスを用いる。各連続画像は、前に表示されていた画像と入れ替わる。その提示方法は、スライドショーまたはキーホール（keyhole）モードと呼ばれている（Tseら著「ビデオのブラウジングを増強する動的なキーフレーム提示技法（Dynamic Key Frame Presentation Techniques for Augmenting Video Browsing）」（Proceedings of the Working Conference on Advanced Visual Interfaces (AVI '98), pp.185-194, 1998）およびSpenceら著「高速、系列および視覚：可能性のある提示技法（Rapid, Serial and Visual: A Presentation Technique with Potential）」（Information Visualization, 1, 1, pp.13-19, 2002）を参照）。
【０００９】
図１〜図４は、カルーセルモード１００（図１を参照）、動的コラージュモード２００（図２を参照）、浮動モード３００（図３を参照）、およびシェルフ（shelf）モード４００（図４を参照）を含む他の変形を示す。これらのモードは全て、画像のさらなる移動または入れ替えを用いる。
【００１０】
これまで、ヒューマン−コンピュータインタフェースにおけるＲＳＶＰ方法の効果に関しては初期の発見しかなかった。これまでの実験は単に、スライドショーモードで高速提示された視覚情報を人が抽出できることを確認しただけのようである。Tseらは、ビデオのブラウジングのための一定レートのスライドショー方法を調査した。ユーザは、画像を非常に高速（例えば１秒間に８フレーム）で提示した場合でも映画の主旨を抽出することができた。
【００１１】
しかしながら、他のＲＳＶＰ方法も、ユーザがより高い柔軟性を持って自身の注意を制御できるようにすることによって利点を提供するかもしれないとの仮説が立てられている。ユーザは、関連のない画像の排除が早いほど、関連のある画像に長く集中することができる。しかしながら、より複雑な２Ｄ空間／時間レイアウトを用いた予備実験（例えばカルーセルモード１００および動的コラージュモード２００）では、スライドショーモードに勝る利点を何ら示すことができなかった。例えば、動的コラージュモードをスライドショーモードと比べた準備的実験がWittenburgら著「速射画像のブラウジング：要件と業界イニシアチブ（Browsing Through Rapid-Fire Imaging: Requirements and Industry Initiatives）」（Proceedings of Electronic Imaging '2000: Internet Imaging, pp. 48-56, 2000）に記載されている。Wittenburgらは、ユーザが提示の速度および方向を完全に制御できる場合のインターネットショッピングにおけるタスクに関する実験を記載している。Wittenburgらは、スライドショーＲＳＶＰモードを動的コラージュモードならびにより従来的なウェブページ提示方法と比較した。動的コラージュモードでは、画像が後の画像で遮蔽されるか、またはディスプレイから消去されるまで、中心点２０１の周囲に連続的かつセミランダムに画像を配置した。カルーセルモード１００とは異なり、画像の移動や拡大縮小（scale）の変更は行わない。製品の画像を３つのモード、すなわちスライドショー、動的コラージュ、およびウェブページで示した。ユーザには、２つのタスクを実行してもらった。第１のタスクは主旨抽出タスクであった。第２のタスクはターゲット製品の有無を判断することであった。関連のある結果としては、性能上の違いが認められなくともユーザは動的コラージュおよびウェブページモードよりもスライドショーモードを好むことが分かった。
【００１２】
スライドショーモード以外の従来技術の方法は、ユーザが多数の高速に変化する画像に同時に注意を向け、かつ／または新たな２Ｄの場所にある画像へ注視を移さなければならないため、過大な認知処理をユーザに要求する。これらの方法には、２Ｄでの追跡を要求するもの（例えばカルーセルモード１００）や、注視を移して異なる場所に焦点を合わせることを要求するもの（例えば動的コラージュモード２００）がある。画像が移動するか、あるいは画像が新たな場所にポップアップする変形に付加的な知的オーバーヘッド（cognitive overhead）が要求されても驚くべきことではないだろう。
【００１３】
De Bruijnらは、ＲＳＶＰインタフェース方法に関連する視線追跡実験を記載している（De Bruijnら著「高速系列視覚提示中の注視パターン（Patterns of Eye Gaze during Rapid Serial Visual Presentation）」（Proceedings of the Working Conference on Advanced Visual Interfaces (AVI 2002), pp.209-217, 2002）を参照）。追跡（例えばカルーセル）または異なる位置に焦点を合わせること（例えば動的コラージュ）を要するいくつかのＲＳＶＰの代案を比較する。試験したＲＳＶＰの変形モードについて、注視パターンに関していくつかの観察を行う。De Bruijnらは、シェルフモード４００に異なる視線追跡方法が用いられることを観察した。１人のユーザは、提示の背景部分に退く前の新たな画像が出現する領域のみに焦点を合わせているようだった。別のユーザは、移動中の画像を追跡しているようだった。この観察から、ユーザが自身のタスク（例えばターゲット画像を探索することに対してシーケンスの主旨を抽出すること）に合わせて注意の焦点を変えるのを支援する新たな方法が必要とされているという仮説が立つ。
【発明の開示】
【発明が解決しようとする課題】
【００１４】
したがって、人間の視覚および認知能力を利用して電子マルチメディアコンテントの提示およびブラウジングを向上させることが望ましい。
【課題を解決するための手段】
【００１５】
本発明は、高速スキャニングに適した方法で画像を対話的に提示するシステムおよび方法を提供する。本方法は、自然な人間の認知能力を利用して、３次元空間で閲覧者に近づいたり遠ざかったりするように移動するオブジェクトを追跡する。
【００１６】
本発明は、高速提示される視覚情報の処理を可能にする焦点領域を過度な視線の移動なしで統合する。レイアウトの改良が、一時的に関連付けられているか、または論理的にグループ分けされている画像に適用される。さらなる革新により、コレクション全体の中のターゲット化した画像を進めていくために相対的な時間的順序付けが可能となる。
【発明の効果】
【００１７】
本発明は、視覚的に表現できる画像のコレクションから選択を行わねばならない多数の表示システムに適用することができる。例としては、録画ビデオのブラウジングおよび検索、テレビ番組の選択、人さがし、および仮想のまたは仮想的に拡大した小売環境におけるカタログからの商品の選択が挙げられる。
【発明を実施するための最良の形態】
【００１８】
序論
本発明は、人間の視覚系、具体的には奥行および周辺の知覚を有効に利用した、画像を提示およびブラウジングするための方法およびシステムを提供する。本方法は、高速系列視覚提示（ＲＳＶＰ）のより親しまれたスライドショーモードと統合され、いくつかの空間および時間レイアウト技法を用いて改良される。調節可能な速度レートでの前後への直線状のトラバーサルのための共通の制御部の組を含める。
【００１９】
システム構造と方法
図１３および図１４に示されるように、方法１３００は画像組１０１で開始する。この画像組は、コンピュータシステムのメモリに記憶することができる。画像は静止画、テキスト文書のページ、製品の写真、またはビデオ中の画像シーケンスであり得る。ステップ１１０では表示画像組１１１を選択する。選択は、要約、周期的選択（例えば１０番目のフレーム毎）または何らかの他の選択過程であり得る。
【００２０】
ステップ１２０では、表示画像組にレイアウト１２１を割り当てる。各画像について、レイアウトには、３Ｄ座標、サイズ、および向きが含まれる。またステップ１２０では、仮想カメラ１４１０に３Ｄ軌跡１２２を割り当てる。ステップ１３０では、レイアウト１２１および軌跡１２２に応じてアクティブな画像組１４００をレンダリングする。アクティブな組１４００はコレクタ画像１４０１を含み、残りの画像は動的である。線１２２は、カメラ１４１０の軌跡を示す。コレクタ画像は、後述のコレクタフレームに静的に表示され、アクティブな組の残りの画像はコレクタフレームに向かって移動する。軌跡およびアクティブな組は基本的に、表示組１１１を通る移動窓を与える。後述するように、この窓は前後の異なる方向に異なるレートで移動することができる。
【００２１】
動画化ステップ１４０では、おそらくはユーザ入力１４１を用いてレイアウトおよび軌跡を変更する。次に、全ての表示画像がレンダリングされるか、ユーザが本方法を終了するまで、レンダリング１３０および動画化１４０のステップを繰り返す。
【００２２】
表示画像の選択
画像組１０１（例えばビデオフレーム、製品または顔の写真、本のページ等）が与えられると、表示画像組１１１を選択する（１１０）。この表示組は、任意数の元の組の画像をその全部まで含み得る。表示組１１１を選択するために用いられる過程は、ビデオのキーフレームまたはＩフレームの使用、ビデオの要約、あるいは周期的またはランダムな選択を含む任意数の既知の技法であり得る。表示組の画像は、関連または非関連画像のシーケンスであり得る。
【００２３】
表示画像へのレイアウトの割り当て
方法１３００は、表示組１１１中の各画像に３Ｄ座標、サイズ、および向きを割り当てる（１２０）。レイアウトは、直線状、曲線状、螺旋状、Ｓ字状であるか、あるいは何らかの他の機能に従い得る。図５ないし図７に示すように、画像５００のレイアウトは、表示画像の中心点５０３から中心点５０４までの線によって形成される３次元の軌跡に沿って配置される。
【００２４】
仮想カメラへの軌跡の割り当て
仮想カメラ１４１０の軌跡は、直線状５１０、曲線状６０２、またはＳ字状７０２であり得る。
【００２５】
アクティブな画像のレンダリング
軌跡１２２に沿った各画像の「奥行」は画像のサイズによって示され、画像が小さいほど閲覧者から遠いことになる。最も近い画像は、表示デバイスの画像平面または表示「画面」にある画像である。
【００２６】
表示画像の動画化
図９に示すように、ユーザは、軌跡１２２に沿ったカメラ１４１０のトラバーサルを制御する。トラバーサルは、可変速度でいずれの方向にも行われる。カメラが移動するに従い、画像は、軌跡１２２に沿った方向に応じて近づいたり遠ざかったりするように見える。
【００２７】
図５ないし図７に示すように、動画化の視覚効果は、画像５００のシーケンスを焦点５０４に近づいたり遠ざかったりするように進める（５０２）ものである。これは時間的に進み、シーケンスを順方向に移動する場合、奥行次元で遠い画像は、近い画像よりも焦点５０４に到達するのが遅い。
【００２８】
画像の提示は、高速道路での標識の出現にたとえられる。このたとえで、ユーザは車両の速度および（前後）方向の両方を制御することができる。フロントガラス９０１から外を見ると、標識は、まず遠くから現れて次第に近づいてきて、規則的な時間的および空間的間隔で通過していくように見える。ユーザが反対方向に移動している場合、標識は肩越しに視界に現れ、遠くへ逆行していく。
【００２９】
コレクタフレーム
上述のような本発明の基本動作モードにおいて、画像は、ユーザにどんどん近づいてきて、最終的には画像平面を通過して消失するように見える。これは、車両が道路沿いの標識を通過するときに運転手が車内で前方を直視している場合に起こる事象の標準的なたとえである。
【００３０】
関連する画像（例えばビデオの同じシーン中のキーフレーム）間で連続性を維持するという利点を持つ基本表示モードの変形を提供する。また、軌跡の終点付近に静的な焦点５０４を設ける。したがって、ユーザは、高速で変化するシーケンスを表示する際に注視を移す必要がない。
【００３１】
図１０ａ〜図１０ｃに示すように、軌跡に沿った一定の奥行位置にあるコレクタフレーム１０１０を用いる。視覚画像は、近づいてくるに従い、最終的にはコレクタフレーム１０１０の位置（画面前方）に達する。画像がコレクタフレームの平面に達すると、通過する代わりに、もともと表示されていた最後の画像と入れ替わる。換言すれば、アクティブな組の１番目の画像１４０１は、コレクタフレームに静的に保持され、アクティブな組の他の画像はコレクタフレームに近づいてくるように見える。他の画像がコレクタフレームの画像を遮蔽することはない。視覚的な観点から見れば、コレクタフレームは視覚焦点の領域の役割を果たし、そのコンテントは、シーケンス中の画像の進みよりも遥かに遅いレートで（例えば１秒に１回）入れ替わる。
【００３２】
コレクタフレームは、従来のビデオプレーヤの主表示領域に似ている。したがって、本方法は、従来のビデオプレーヤの早送りと巻き戻しの利点を、ユーザが画像シーケンスにおいて焦点の前方または後方を見ることを可能にする距離技法と組み合わせる。
【００３３】
本方法はユーザの周辺視野も利用する。ユーザがコレクタフレーム１０１０に焦点を合わせている間、画像シーケンスはユーザの周辺視野において後方から進んでくる。したがってユーザには、前景のコレクタフレームに焦点を合わせたままで、周辺の高レベルの情報、例えばシーンの変化または画像コンテントの意味的なグループ分けが予想できる。
【００３４】
意味的な間隔およびグループ分け
基本的な場合に、画像は、３Ｄ軌跡に沿って単一グループとして均等な間隔が空けられている。しかしながら画像は、不均等な間隔を空けて複数のグループにすることもできる。このような間隔は、論理的に順序付けられたシーンまたは章のように、あるいはコストにより順序付けられた製品またはサービスのカテゴリのように、画像を時間で意味的に表すことができる。これは全てレイアウト次第である。
【００３５】
遷移画像
図８に示すような意味的な間隔およびグループ分けを可能にするために、シーケンス中のグループ間に論理的な遷移画像８０１を挿入する。この遷移画像は、シーケンス中の１つのグループから次のグループへの任意の形態の視覚的遷移を表すことができる。遷移画像は単に、シーケンス中の空いた位置、すなわち透明画像８０２とすることができる。
【００３６】
グループおよび遷移フレームの使用は、何らかの１次元の線形または非線形目盛（例えばコンテントのオブジェクトの一時的配置）の上にマッピングすることができる、画像コンテント間の任意の意味的に一貫した関係を反映する。
【００３７】
画像シーケンスのトラバーサルの停止
心理学の文献から、初期の低レベルの視覚処理に対する認識とそれに続く反応には認知資源が用いられることが知られている。これにより、従来技術のＲＳＶＰモードを用いる際、よくある「行き過ぎ（overshooting）」の問題が生じる。これは、ビデオにおいて特定の所望のシーンまたは画像を検索する場合に非常によく見られる。
【００３８】
ＲＳＶＰシーケンスが高速表示されると、高速表示される画像を処理してこれに反応するために必要な知的オーバーヘッドにより、所望の画像と後の画像が入れ替わってしまう問題が必然的に生じる。その場合ユーザは、所望の画像を取り出すために逆戻りしなければならず、おそらくはまた所望の画像を行き過ぎてしまう。画像シーケンスを行ったり来たりする（oscillate）間に時間が無駄になる。
【００３９】
したがって、シーケンスの軌跡に沿った高速トラバーサルを停止させる新規の技法を提供する。本方法は、所望の画像のところで止まる可能性が高くなるように停止イベントの後に「逆戻りする」公式を含む。
【００４０】
所望の画像は、画像の認識に必要な推定時間（すなわち約１５０ミリ秒）と、制御動作という運動野の運動（motor movement）（スイッチを離す、あるいはマウスを制御アイコンから離す、等）を行うために必要な推定時間（すなわち約１００ミリ秒）とに基づいて決定する。したがって、停止イベントが信号伝達されたとき、所望の画像は、停止イベントが信号伝達される約２５０ミリ秒前に焦点５０４に表示されていた画像である。例えば、毎秒３０フレームでは、８コマ前のフレームが表示されることになる。
【００４１】
ターゲット化したトラバーサル
図１１に示されるように、本発明は、ターゲットフレーム組１１１が与えられた場合のシーケンスの半自動的トラバーサルも可能にする。まず始めに、クエリまたはメニュー動作を用いて、入手可能な画像組１０１全体からコンテント、すなわち表示すべき画像シーケンス１１１を選択する（１１０）。
【００４２】
例えば、画像が様々なテレビチャンネルで入手可能なビデオコンテントを表す場合、ユーザは、スポーツチャンネルのみを選択することができる。あるいは、監視システムによってあるシーンの画像を取得することができる。次にユーザは、特定の時間、選択した動きレベル、または認識した人物の画像を選択することができる。
【００４３】
ターゲットフレーム組１１１を選択すると、ユーザは、先に述べた方法で方向および速度の制御部を操作し、図１２のコントローラ１２００を用いて前または後へ、速くまたはゆっくりと移動する。しかしながらトラバーサルレートは、１つのターゲットフレームから次のターゲットフレームへの遷移にかかる時間が一定となるように、ターゲットフレームからの距離にも依存する。ここで、距離は３Ｄ座標により測定される。これにより、コレクタフレーム１０１０における通過画像の速度ならびにフレームレートが、最も近いターゲットフレームから画像がどれだけ遠いかによって変化するという効果が知覚される。
【００４４】
例えば、遠く離れたターゲットフレーム間のトラバーサルにかかる時間は、間隔の近いターゲットフレーム間のトラバーサルと同じである。またターゲットフレームは、他の画像よりも長くコレクタフレームに留まる。ターゲット化したトラバーサル中、ユーザは、シーケンスをトラバースさせるグローバルフレームレートを制御する。１つのターゲット化したフレームから次のターゲット化したフレームへの他の全てのレート、およびコレクタフレームの入れ替えレートは、ユーザ制御のグローバルフレームレートに比例する。
【００４５】
代替実施形態
本発明は、ある種の視覚的スキャニングまたは探索が必要とされるのであれば、様々な表示用途に用いることができる。
【００４６】
チャンネルサーフィング
この用途において、ブラウジングするチャンネル画像はテレビ番組を表す。全ての受信番組の放送を循環するチューナ（チャンネルセレクタ）がチャンネル画像を抽出することができる。全番組の１回の循環で各番組から１つの画像を抽出する。あるいは、放送局が代表的なチャンネル画像を提供することもできる。
【００４７】
図１２に示されるように、制御デバイス１２００は、速度および方向の制御のためのスイッチ１２１０を有する。好ましい実施形態において、スイッチはロッカスイッチである。ロッカスイッチは、前後方向の一定範囲にわたって速度の連続制御を可能にする。
【００４８】
ユーザがロッカスイッチを押すと、現在の番組は中断され、システムはチャンネルサーフィンモードに入る。次にユーザは、チャンネル画像を順方向または逆方向に、制御可能な速度レートでトラバースする。ユーザがロッカスイッチを離すと、システムは、コレクタフレームのチャンネル画像に対応する番組を表示する。本実施形態は、時間をずらしたビデオプログラミングに拡張することができる。クエリモジュールを用いて、ブラウジング可能なシーケンスを構成する候補番組の組を選択する。
【００４９】
ビデオのスキミング（skimming）
この実施形態では、本発明の方法を用いて、ビデオをブラウジング、スキミング、または検索する。ビデオの要約化方法により、ブラウジング可能なシーケンスに含めるキーフレームを決める。この要約化方法には、よく知られたショット検出またはシーン解析技法を用いることができる。シーケンス中の各キーフレームの日時６０１における位置を、そのキーフレームに関連したデータに示し、図６に示すようにコレクタフレームの下に表示する。
【００５０】
製品のブラウジング
この実施形態における画像は製品のものである。ユーザは、ブラウジングまたはスキミングする特定の製品を選択する。製品画像は、価格、サイズ、色、製造者または他の属性でグループ分けすることができる。
【００５１】
人さがし
この実施形態における画像は人物のものである。このようなコンテントの取得は、ディレクトリサービス、政府機関、または監視ビデオによって行うことができる。顔の画像シーケンスは、時間、場所、または類似度で順序付けすることができる。
【００５２】
本発明を好ましい実施形態例として説明してきたが、本発明の精神および範囲内で様々な他の適応および修正を行うことができることが理解される。したがって、添付の特許請求項の目的は、本発明の真の精神および範囲に含まれる変形および修正をすべて網羅することである。
【図面の簡単な説明】
【００５３】
【図１】従来技術のカルーセル表示モードにより表示された画像を示す図である。
【図２】従来技術の動的コラージュモードにより表示された画像を示す図である。
【図３】従来技術の浮動モードにより表示された画像を示す図である。
【図４】従来技術のシェルフモードにより表示された画像を示す図である。
【図５】本発明による直線状の３次元軌跡に沿って表示された画像を示す図である。
【図６】本発明による曲線状の３次元軌跡に沿って表示された画像を示す図である。
【図７】本発明によるＳ字状の３次元軌跡に沿って表示された画像を示す図である。
【図８】遷移画像によって分離された画像グループを示す図である。
【図９】本発明による画像制御を示す図である。
【図１０ａ】本発明によるコレクタフレームを示す図である。
【図１０ｂ】本発明によるコレクタフレームを示す図である。
【図１０ｃ】本発明によるコレクタフレームを示す図である。
【図１１】本発明による、ターゲットフレームを有する画像の半自動的な提示を示す図である。
【図１２】ユーザ入力デバイスのブロック図である。
【図１３】本発明による提示方法のフロー図である。
【図１４】本発明によるアクティブな画像組のブロック図である。
【図１】
2004240974.tif 000003
【図２】
2004240974.tif 000004
【図３】
2004240974.tif 000005
【図４】
2004240974.tif 000006
【図５】
2004240974.tif 000007
【図６】
2004240974.tif 000008
【図７】
2004240974.tif 000009
【図８】
2004240974.tif 000010
【図９】
2004240974.tif 000011
【図１０ａ】
2004240974.tif 000012
【図１０ｂ】
2004240974.tif 000013
【図１０ｃ】
2004240974.tif 000014
【図１１】
2004240974.tif 000015
【図１２】
2004240974.tif 000016
【図１３】
2004240974.tif 000017
【図１４】
2004240974.tif 000018
【外国語明細書】
2004240974.tif 000019
2004240974.tif 000020
2004240974.tif 000021
2004240974.tif 000022
2004240974.tif 000023
2004240974.tif 000024
2004240974.tif 000025
2004240974.tif 000026
2004240974.tif 000027
2004240974.tif 000028
2004240974.tif 000029
2004240974.tif 000030
2004240974.tif 000031
2004240974.tif 000032
2004240974.tif 000033
2004240974.tif 000034
2004240974.tif 000035
2004240974.tif 000036
2004240974.tif 000037
2004240974.tif 000038
2004240974.tif 000039
2004240974.tif 000040
2004240974.tif 000041
2004240974.tif 000042
2004240974.tif 000043
2004240974.tif 000044
2004240974.tif 000045
2004240974.tif 000046
2004240974.tif 000047
2004240974.tif 000048
2004240974.tif 000049
2004240974.tif 000050
2004240974.tif 000051
2004240974.tif 000052
2004240974.tif 000053
2004240974.tif 000054
2004240974.tif 000055
2004240974.tif 000056
2004240974.tif 000057