(57)【要約】      （修正有）【課題】ネットワークで利用可能なビデオマテリアルをユーザの要求に基づいて複数のサムネイル画面で表示し、番組選択の利便性を高める。【解決手段】ビデオアイテムの再生のために、候補となる１つ以上のビデオアイテムの少なくとも１つの代表画像を有するカタログエントリによって、該ビデオアイテムのカタログを表示するビデオ表示装置は、選択及びドラッグ操作によって、表示されたカタログエントリをサイズ変更するユーザ操作子と、カタログエントリのサイズ変更に応じて、ビデオアイテムに関する複数の別個の代表画像を表示のために選択し、カタログエントリのサイズが拡大されるにつれて、各代表画像の表示サイズを、カタログエントリサイズの変化に関して実質的に一定のままに維持しながら、表示される代表画像の数を増加させる制御手段とを備える。【選択図】  図３
2006197566.tif 000002
【特許請求の範囲】
【請求項１】
ビデオアイテムの再生のために、候補となる１つ以上のビデオアイテムの少なくとも１つの代表画像を有するカタログエントリによって、該ビデオアイテムのカタログを表示するビデオ表示装置において、
選択及びドラッグ操作によって、上記表示されたカタログエントリをサイズ変更するユーザ操作子と、
上記カタログエントリのサイズ変更に応じて、上記ビデオアイテムに関する複数の別個の代表画像を表示のために選択し、該カタログエントリのサイズが拡大されるにつれて、各代表画像の表示サイズを、上記カタログエントリサイズの変化に関して実質的に一定のままに維持しながら、表示される代表画像の数を増加させる制御手段とを備えるビデオ表示装置。
【請求項２】
上記カタログエントリは、ｎを１以上の整数として、ｎ個の代表画像を有し、該ｎ個の代表画像は、対応するビデオアイテム内のそれぞれの所定の時間的位置から抽出されることを特徴とする請求項１記載のビデオ表示装置。
【請求項３】
ｎが２以上である場合、上記所定の時間的位置は、上記ビデオアイテムに関して実質的に等間隔であることを特徴とする請求項２記載のビデオ表示装置。
【請求項４】
上記代表画像は、上記ビデオアイテム内の統計的に重要な順序に並べられた画像のセットからなることを特徴とする請求項１記載のビデオ表示装置。
【請求項５】
他の代表画像を収容するために上記カタログエントリのサイズが拡大されると、既に表示されている代表画像は、表示され続けることを特徴とする請求項１記載のビデオ表示装置。
【請求項６】
上記ユーザ操作子は、マウスポインタ制御装置であることを特徴とする請求項１記載のビデオ表示装置。
【請求項７】
上記各代表画像は、該代表画像に対応する時間的位置においてビデオ再生を開始するリンクを提供することを特徴とする請求項１記載のビデオ表示装置。
【請求項８】
選択及びドラッグ操作によって、表示されたカタログエントリをサイズ変更するためのユーザ操作子を有する装置において、ビデオアイテムの再生のために、候補となる１つ以上のビデオアイテムの少なくとも１つの代表画像を有するカタログエントリによって、該ビデオアイテムのカタログを表示するビデオ表示方法において、
上記カタログエントリのサイズ変更に応じて、上記ビデオアイテムに関する複数の別個の代表画像を表示のために選択し、該カタログエントリのサイズが拡大されるにつれて、各代表画像の表示サイズを、上記カタログエントリサイズの変化に関して実質的に一定のままに維持しながら、表示される代表画像の数を増加させるステップを有するビデオ表示方法。
【請求項９】
請求項８記載のビデオ表示方法を実現するプログラムコードを有するコンピュータソフトウェア。
【請求項１０】
請求項９記載のコンピュータソフトウェアを提供する提供媒体。
【請求項１１】
当該提供媒体は、記録媒体であることを特徴とする請求項１０記載の提供媒体。
【請求項１２】
当該提供媒体は、伝送媒体であることを特徴とする請求項１０記載の提供媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明はビデオ表示装置に関する。
【背景技術】
【０００２】
例えば、コンピュータベースのビデオ表示システム等のビデオ表示システムにおいて、ユーザがどのようなビデオマテリアルが利用可能な状態であるかを知るために手作業でマテリアルを検索する作業は、繁雑で時間がかかる作業である。
【０００３】
ビデオマテリアルの断片のコンテンツを示すために、所謂代表画像（「サムネイル」又は「キーフレーム」と呼ばれることも多い。）を用いる手法も提案されている。代表画像は、マテリアルの断片内の固定された位置の画像、例えば、第１のフレームから抽出される。マテリアルの長い断片では、このような単一の画像では、マテリアルのコンテンツ全体を適切に表現できないことも多い。特に、連続した第１のフレームの画像が、例えば、空白の画像又はテストパターン等であることが多いので、この画像は有効ではないことがある。
【０００４】
このような問題を解決するために、複数の代表画像を用いる手法も提案されている。非特許文献１には、ユーザが１つ又は２つの詳細さのレベルを選択でき、各レベルが、より多くの数の代表画像を提供する構成が開示されている。
【０００５】
【非特許文献１】"A hierarchical keyframe user interface for browsing video over the internet", M. Guillemot et al, IDIAP-COM 03-02, August 2003
【発明の開示】
【課題を解決するための手段】
【０００６】
本発明に係るビデオ表示装置は、ビデオアイテムの再生のために、候補となる１つ以上のビデオアイテムの少なくとも１つの代表画像を有するカタログエントリによって、ビデオアイテムのカタログを表示し、選択及びドラッグ操作によって、表示されたカタログエントリをサイズ変更するユーザ操作子と、カタログエントリのサイズ変更に応じて、ビデオアイテムに関する複数の別個の代表画像を表示のために選択し、カタログエントリのサイズが拡大されるにつれて、各代表画像の表示サイズを、カタログエントリサイズの変化に関して実質的に一定のままに維持しながら、表示される代表画像の数を増加させる制御手段とを備える。
【０００７】
本発明の実施形態では、ユーザは、１回の、速やかなインタラクションによって、ビデオアイテムのコンテンツを問い合わせることができ、ユーザは、ビデオアイテムを視聴するか否かを十分に判断することができる。
【０００８】
ユーザがカタログエントリを拡大すると、システムは、その空間に、そのビデオアイテムに関するより多くの代表画像をインテリジェントに表示する。ユーザがカタログエントリを拡大するほど、ユーザは、より多くの情報を見ることができる。この拡張可能性により、ユーザは、ビデオアイテムのコンテンツが、ユーザが求めているものであるか否かを判断するために、必要なだけの情報を確認することができる。ユーザが十分な確認を終えると、ユーザは、（例えば、マウスから指を離すことによって）単に選択及びドラッグ操作を終了させ、次の操作に移行することができる。
【０００９】
本発明により、ユーザは、インタフェース内の更なる画面又はパネル（例えば、「更なる情報（More Info）」、「詳細（Details）」、「ストーリーボード（storyboard）」等）を開くことなく、速やかにカタログを問い合わせることができる。
【００１０】
上述した非特許文献１では、カタログリストをユーザに表示する。各代表画像の隣には、「＋」ボタンが設けられている。代表画像が表現しているアイテムのストーリーボードを見るためには、ユーザは、「＋」ボタンをクリックしなければならない。更なる各画像の隣には、更なる「＋」ボタンが設けられており、ユーザは、更なる画像の下位のショットを表示するために、この更なる「＋」ボタンをクリックしなければならない。
【００１１】
この手法には次のような問題点がある：
（ａ）単一のアイテムを問い合わせるために、３回の操作が必要であり、煩雑である。
【００１２】
（ｂ）「＋」ボタンは、「更なる情報」ボタン又は「ストーリーボード」ボタンと同様のものであり、従来のストーリーボードに対して、これを上回る利点はない。
【００１３】
（ｃ）システムがユーザに表示する代表画像の数は固定されており、確認が十分であるとユーザが判断した時点での選択肢がない。
【００１４】
本発明は、簡単なクリック及びドラッグ操作によって、ユーザが確認する情報量を変更できる、有利で、簡潔で、柔軟で便利なユーザインタフェース構成によって、これらの問題を解決する。
【００１５】
本発明の更なる側面は、特許請求の範囲において定義されている。
【発明を実施するための最良の形態】
【００１６】
図１は、ビデオ再生システムの構成を示しており、ビデオ再生システムは、プログラム及びデータを保存するディスク記憶装置３０を含むプロセッサユニット２０と、イーサネット（登録商標）ネットワーク又はインターネット等のネットワーク５０に接続されるネットワークインタフェースカード４０と、例えば陰極線管等の表示装置６０と、キーボード７０及びマウス８０等のユーザ入力装置とを備える汎用コンピュータ１０に基づいて実現される。このビデオ再生システムは、ディスク記憶装置３０に保存され、又は例えば、ネットワーク５０又はリムーバブルディスク（図示せず）を介して提供され、又はディスク記憶装置３０にプリインストールされているプログラムによって制御されて動作する。
【００１７】
表示装置６０に表示される表示画面の具体例を図２に示す。説明を明瞭にするために、ここでは、必ずしも表示画面の全ての特徴を示しておらず、重要な特徴、すなわち、再生ウィンドウ１００、ビデオプレーヤ操作子１１０及び代表キーフレーム（画像）１３０を含むカタログ領域１２０のみを示している。
【００１８】
それぞれの代表キーフレーム１３０は、ビデオマテリアルのそれぞれ異なる断片に対応している。キーフレーム１３０は、例えば断片（以下、ビデオアイテムともいう。）の第１のフレームの画像であってもよく、例えば、色ヒストグラムの解析等の統計的手法によって、「最も代表している」画像として抽出してもよい。このような技術は、既知であるため、本明細書ではこれ以上説明しない。
【００１９】
ユーザは、キーフレーム１３０にマウスポインタを置き、一回の「クリック」操作を行うことによってビデオマテリアルのアイテムを選択できる。これにより、選択されたビデオアイテムの第１のフレームが「一時停止された（paused）」形式で再生ウィンドウ１００に表示される。そして、操作子１１０から再生操作子を選択することによって、再生を開始できる。
【００２０】
これに代えて、キーフレーム１３０を「ダブルクリック」することによって、再生ウィンドウ１００において、対応するビデオアイテムの（最初からの）再生を開始してもよい。
【００２１】
カタログ１２０内の各エントリ（キーフレーム）は、サイズ変更可能である。図３Ａ〜図３Ｄは、サイズ変更可能なカタログエントリ及びサイズ変更技術の目的を図式的に示している。
【００２２】
図３Ａには、キーフレーム１３０が示されている。図３Ａ〜図３Ｄにおいて、このキーフレーム１３０を同定するために、キーフレーム１３０には、キーフレーム「Ａ」のラベルを付す。
【００２３】
ユーザは、マウスポインタ１６０を用いて、キーフレーム１３０を「掴み」（クリック及びホールド）、キーフレーム１３０をサイズ変更することができる。この操作により、実際には、最初のキーフレームＡのサイズ又は位置は変更されず、ウィンドウ、領域又はボックス１５０（ここでは、必ずしも矩形の形状である必要はないが、「ボックス」と呼ぶ。）が開き、より多くのキーフレームが収容されるように拡大される。
【００２４】
これにより、図３Ｂに示すように、更なるキーフレーム１３２（「Ｂ」のラベルが付されている。）が収容される。図３Ｃでボックス１５０が更に拡張され、更に２つのキーフレーム１３４、１３６（「Ｃ」及び「Ｄ」）が収容される。図３Ｄでは、ボックス１５０の形状が変更され、これにより、２つの更なるキーフレーム１３８、１４０が収容される。なお、これらのキーフレーム１３８、１４０には、「Ｅ」、「Ｆ」のラベルを付しているが、これらは、事実上キーフレーム「Ｃ」、「Ｄ」と同一であってもよい。或いは、「Ｅ」、「Ｆ」は、「Ｃ」、「Ｄ」とは異なるフレームであってもよい。
【００２５】
通常、この処理中に、最初のキーフレーム１３０に対するある表示位置に一旦キーフレームが表示されると、ボックス１５０がそのキーフレームを収容できる程度の大きさを保っている限り、そのキーフレームはその位置に表示され続ける。
【００２６】
好ましくは、キーフレームは、キーフレームの全体としてのみ追加される。すなわち、ボックス１５０が拡大され、１つ以上の更なるキーフレームを収容する十分な大きさである閾値サイズを超えると、単一のステップで、１つ以上の更なるキーフレームが追加される。すなわち、部分的なキーフレームは、表示されない。なお、これ以外の処理も可能であり、すなわち、ボックスが少しでも拡大されると、１つ又は複数のキーフレームの一部が出現するような構成としてもよい。
【００２７】
以下、図４及び図５を参照して、キーフレーム「Ｂ〜Ｆ」の抽出について説明する。
【００２８】
まず、図２に示すように、少なくとも幾つかのキーフレーム１３０において、１つのキーフレーム１３０からボックス１５０を大きく拡大すると、表示画面内の他の重要な部分が隠れてしまうことがある。なお、この実施形態では、キーフレームの１つが再生を開始するよう選択されると、ボックス１５０は、直ちに消去され、したがって、再生ウィンドウが再び表示される。
【００２９】
ボックス１５０が拡大されると、ビデオアイテムの異なる部分からのキーフレームが表示される。したがって、ボックス１５０が拡大されると、ビデオアイテムのコンテンツ全体の内容をユーザがより把握しやすくなる。また、各キーフレームがビデオアイテム内の対応する時間的位置を有している場合、（上述のように、シングルクリック又はダブルクリック操作によって）キーフレームが選択されると、ビデオ再生は、そのキーフレームに対応する時間的位置からセットアップ又は開始されることが好ましい。このように、キーフレームは、ビデオマテリアル内の異なる時間的位置へのリンクを提供する。これは、ユーザがビデオマテリアルの断片を素早く把握するのに非常に有用である。
【００３０】
この手法では、原理的には、幾つのキーフレームを表示してもよい。もちろん、キーフレームのサイズに対する表示装置６０の表示画面に表示可能な画像サイズによる制限はある。好ましくは、キーフレームは、ボックス１５０が拡大されても、同じサイズを維持し、すなわち、表示されるキーフレームの数が多くなっても、各キーフレームのサイズは大きくも小さくもならない。
【００３１】
ビデオマテリアルアイテムからの一組の代表キーフレームを図４に示す。図４では、ビデオアイテムは、水平方向が時間の流れを表す水平バー２００によって表現されている。垂直バー２１０は、既知のシーン変化検知アルゴリズムで検出されるビデオマテリアル内のシーン変化を図式的に示している。すなわち、シーンは垂直バー２１０において変化し、これに基づいてビデオアイテム２００は、各シーンに対応する各セグメントに分割され、キーフレームＧ〜Ｌは、それぞれの個々のシーンに由来する。（これは、各シーンの中心のフレーム、例えば、上述のように、各シーンを「最も代表する」フレームであってもよい。）
キーフレームＧ〜Ｌには、格付けされた順序が関連付けられている。この順序に基づき、キーフレームの１つ（例えば、第１のシーン「Ｇ」からのキーフレーム）をカタログ１２０に表示する単一のキーフレーム１３０として選択する。これに続いて、キーフレームに順序を関連付け、ボックス１５０が拡大されるに従って、この順序に基づく順番でキーフレームを表示する。例えば、シーンの長さの順又はマテリアル内のシーンの位置等に基づいてキーフレームを順序付けしてもよい。もちろん、マテリアル内のシーンの数が、表示できるキーフレームの所定数に満たない場合、例えば、シーン内で離れたフレームを選択することによって、それぞれのシーンから、複数のキーフレームを抽出してもよい。
【００３２】
表示するキーフレームを抽出するための他の手法を図５Ａ〜図５Ｅに示す。ここでは、第１のキーフレームＭをビデオマテリアルの第１のフレームとして選択する。図５Ｂでは、第２のキーフレームＮを、マテリアルの最後のフレームとして選択している。第３のキーフレームＯが必要であれば、マテリアルの中央（又は略々中央）のキーフレームを選択する。
【００３３】
図５Ｄ及び図５Ｅでは、様々なオプションを示している。第４のキーフレームが必要であれば、１つのオプションとして、２つの既存のキーフレーム間のギャップを再分割し、新たなキーフレームＰを提供してもよい。これは、次のキーフレーム位置が図５Ｄの位置２２０となることを意味する。この構成には、新たなキーフレームＰを追加しても既に表示されたキーフレームが変更されないという利点がある。なお、図５Ｅに示す変形例では、各ステージにおいて、１つ以上の新たなキーフレームが追加されると、キーフレームは、ビデオマテリアル内で時間的に等間隔に区切られている。これは、図５Ｃからの先行するキーフレームＯが表示されなくなり、これに代えて、新たなキーフレームＯ’及びＰ’が表示されることを意味する。この手法には、如何なるステージにおいても、画面上に表示されるキーフレームが時間的に等間隔に区切られ、したがって、ビデオマテリアル全体に亘るコンテンツを特に好適に表現できるという利点がある。
【００３４】
本発明は、ソフトウェア、プログラミング可能なハードウェア（例えば、ＦＰＧＡ、ＡＳＩＣ）、ハードウェア又はこれらの組合せによって実現できる。また、本発明をソフトウェアコンポーネントとして実現する場合、本発明は、このようなソフトウェアを提供する提供媒体（例えば、記録媒体、伝送媒体等）を含む。
【００３５】
図面を参照して本発明を詳細に説明したが、本発明は上述の実施の形態の詳細に限定されるものではなく、当業者は、請求の範囲に定義された本発明の思想及び範囲から逸脱することなく、上述の実施の形態を様々に変更及び修正することができる。
【図面の簡単な説明】
【００３６】
【図１】ビデオ再生システムの構成を示す図である。
【図２】表示画面を示す図である。
【図３】Ａ〜Ｄは、サイズ変更可能なカタログエントリを示す図である。
【図４】一組の代表キーフレームを示す図である。
【図５】Ａ〜Ｅは、代表キーフレームの他の組を示す図である。
【図１】
2006197566.tif 000003
【図２】
2006197566.tif 000004
【図３】
2006197566.tif 000005
【図４】
2006197566.tif 000006
【図５】
2006197566.tif 000007
【外国語明細書】
2006197566000001.pdf
2006197566000002.pdf
2006197566000003.pdf
2006197566000004.pdf