(57)【要約】【課題】動画の検索をサムネールを見ながら簡単に行う方法。ＶＨＳの早送りより、圧倒的に高速な検索が可能になる。その操作感は、マイクロフィルムの高速検索の様に、ストレスを感じない程度の性能を目指す。【解決手段】動画のシーンチェンジを自動検出し、そのチェンジ部分の静止画または動画クリップを抽出し、それらを集めてサムネール表示をし、同時に各サムネールに対応する動画の名称とシリアル番号、サムネールの番号等を記録し、所望のサムネールの上でダブルクリックをする事により、イベントを発生させてサムネールを選択し、そのサムネールの番号と動画ＩＤから、原動画像の特定シーンを表示させる。【選択図】        図１
2004363968.tif 000002
【特許請求の範囲】
【請求項１】
例えば複数のＤＶＤ−ＲＯＭに記録された動画のシーンチェンジ部分を検出し、それらの静止画群と動画上の位置情報をワンセットで保存し、同時にＤＶＤ−ＲＯＭに記載されたシリアル番号を記録し、該静止画をインデックス状に表示させ、必要に応じてインデックス画像をスクロール表示させ、所望のシーンの上をダブルクリックする等してイベントを発生させ、それに対応するシーンの番号と、動画の名称、ＤＶＤ−ＲＯＭのシリアル番号を知り、所望のＤＶＤ−ＲＯＭを見いだすと共に、そのＤＶＤ−ＲＯＭをプレーヤーにセットしたら、該シーン番号に基づき、所望のシーンに移動させると共に、その部分の動画像をＤＶＤ−ＲＯＭから読み出し表示させる事を特徴とする動画検索方法および装置。
【請求項２】
例えば複数のＤＶＤ−ＲＯＭに記録された動画のシーンチェンジ部分を検出し、それらの動画クリップ群と動画上の位置情報をワンセットで保存し、同時にＤＶＤ−ＲＯＭに記載されたシリアル番号を記録し、該動画クリップをインデックス状に表示させ、必要に応じてインデックス画像をスクロール表示させ、あるいは該動画クリップを再生して動画の感覚をつかみ、所望のシーンの上をダブルクリックする等してイベントを発生させ、それに対応するシーンの番号と、動画の名称、ＤＶＤ−ＲＯＭのシリアル番号を知り、所望のＤＶＤ−ＲＯＭを見いだすと共に、そのＤＶＤ−ＲＯＭをプレーヤーにセットしたら、該シーン番号に基づき、所望のシーンに移動させると共に、その部分の動画像をＤＶＤ−ＲＯＭから読み出し表示させる事を特徴とする動画検索方法および装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、デジタル記録された動画の検索方法のひとつで、インデックス状に表示されたサムネール画像をスクロールさせながら、所望の画像が見つかったら、それに対応するＤＶＤ−ＲＯＭを特定すると共に、そのＤＶＤ−ＲＯＭをプレーヤーにセットすれば、選択したシーンに自動的にジャンプする動画の検索方法および装置に関してのものである。
【０００２】
この発明の第一の目的は、１枚のＤＶＤ−ＲＯＭに１本の映画が納められていると、ＤＶＤ−ＲＯＭの個人ライブラリーは、すぐに１００枚〜２００枚のオーダーになってしまう。映像コンテンツは、裏側が美しくデザインされたＤＶＤ−ＲＯＭだけではなく、インターネット経由でダウンロードした有料コンテンツをＤＶＤ−Ｒに焼いたものや、ＢＳ／ＣＳデジタル放送をダビングしてＤＶＤ−Ｒに焼いたエアチェックもの、個人のデジタルビデオカメラで撮影した映像をノンリニア編集してＤＶＤ−Ｒに焼いたもの等が混在し、やがて個人の管理能力を越えてしまう。
【０００３】
本発明は、この様な状況に鑑み、容易に動画検索が行える環境を提供せんがためのものである。
【０００４】
【従来の技術】
類似の効果を得る従来として、
特開平９−２２４２１６
特開平１１−３３４６
特開平１０−１３７７３
特開平９−２９７７５０，１０−１０５７３２
等があるが、いずれも静止画のサムネールを抽出する方法に関するものであり、本願の様に動画のサムネール画像を抽出し、あたかも、元の動画を等速で再生しているかの様に検索できる技術は存在しない。
【０００５】
【発明が解決しようとする課題】
本発明を正しく理解するために、ＶＨＳビデオテープに記録された２時間の映画の中から、所望のシーンを見つけだす方法を考えてみよう。まずテープを巻き戻し、動画を少し再生する。所望のシーンではないので、テープを早送りし、時々停止／再生してシーンをチェックし、所望のシーンに出会うまで繰り返す。この作業で目的のシーンに到達するまでに５〜１０分はかかる。
【０００６】
【課題を解決するための手段】
本発明では、シーンの変化点の動画を数秒間切り出して連結した、特別なサムネール動画を用いて検索するので、あたかも「早送り速度が無限大の」ＶＨＳカセットプレーヤーを操作しているかの様な感覚で、スピーディーな目視検索が可能である。しかも、サムネール動画はコンピューターファイルで出来ているので、マウスで「画面表示ノブ」をドラッグするだけで、高速逆転／逆転／停止／再生／高速再生が簡単にシームレスに行えるので、従来の静止画のサムネールを見てシーンを検索する方法に比べて、格段に高速で楽しいマルチメディア検索方法が実現できる。
【０００７】
【発明の実施の形態】
以下、本発明を図面を用いて詳しく説明する。
【０００８】
図１は本発明の原理を説明する図である。同図において、１は動画情報を記録してあるＤＶＤ−ＲＯＭ、２は動画情報から自動的にシーンチェンジ部分を検出し、それぞれの代表的なシーン情報を静止画または動画クリップとして抽出するシーン検出回路。
【０００９】
３は、シーン検出回路２が、ＤＶＤ−ＲＯＭの情報を読み取って、動画に表示したシーンのサムネール全体である。シーン検出回路２は公知の方法を用いる。
【００１０】
シーン検出回路２が自動的に検出したシーン群３は、シーン番号７と共に記録メディア６に記録される。具体的には、シーン・アロケーション・テーブル（ＳＡＴ）４によってＤＶＤ−ＲＯＭメディアとシーン・インデックスファイルとを関連付ける。
【００１１】
次に、シーンの連続から成るサムネール・ファイル５を生成し、記録メディア６に保存する。シーンの１コマ１コマは、独立したファイルから成っており、サムネール・ポインターによってリンクが張られている。
【００１２】
図１に於いて、４は何百枚ものＤＶＤ−ＲＯＭメディアとサムネール・データーベースをリンクさせる為のシーン・アロケーション・テーブル（ＳＡＴ）である。ＤＶＤ−ＲＯＭには、１枚１枚にシリアル番号が振られており、そのシリアル番号を記録する事によりＤＶＤ−ＲＯＭメディアの管理ができる。
【００１３】
ＤＶＤ−ＲＯＭ１は、ＤＶＤ−ＲＯＭの種類毎に異なるＩＤ番号（シリアル番号）を持ち、図示しないＤＶＤ−ＲＯＭドライブがそれを読み取り、図示しないアプリケーションに渡す。アプリケーションは、ＤＶＤ−ＲＯＭ１から読み取ったシーンチェンジ毎のサムネール情報３を保存する。本発明では、ＤＶＤ−ＲＯＭ１のシリアル番号、記録メディア６のボリューム名、記録メディア６に記録されるサムネール・ファイル５（後述）が記録されたファイル名、ＤＶＤ−ＲＯＭ１の属性とパラメーターがＳＡＴに記録される。新しいＤＶＤ−ＲＯＭを挿入する度に、上記データのブロックが増えていく。個々の項目は可変長であり、（説明は省くが）ＩＤ、レングス、情報の３つからなる。
【００１４】
ＳＡＴ４は、通常コンピューターのＮＶ−ＲＡＭ（ノンボラタイルＲＡＭ）領域に書き込まれる。従って、コンピューターの電源を落としても情報が消える事はない。しかし、ＮＶ−ＲＡＭの容量は小さいので、必要最小限の情報を記憶し、サムネール情報はサムネール・ファイル５に記録し、記録メディア６に記憶する。記録メディア６は、ハードディスク、ＤＶＤ−ＲＡＭ等が最適である。
【００１５】
サムネール・ファイル５には、ＤＶＤ−ＲＯＭ１のシリアル番号、動画ドキュメント３の動画ＩＤ、サムネールに対応する特定動画名称から成るヘッダー部分と、サムネール・ブロックとから成っている。サムネール・ブロックは、サムネール番号、サムネール・ブロックのレングス、サムネールの種類、サムネールを指し示すポインタから成る。サムネールはＪＰＥＧ画像で、別ファイルとする。従って、サムネール・ポインタにはパス情報が書き込まれる。動画ＩＤは通常ファイル名である。
【００１６】
ユーザーは、動画サムネールウインドウ３をスクロールさせながら、所望のシーンを目視で見つける。そのシーンが動画クリップであれば、その場で動画クリップを再生して内容を確認する事ができる。サムネールをダブルクリックすると、そのシーンのプロパティを有するイベントが発生する。アプリケーションは、そのイベントに基づき、サムネール・ファイル５の中から所定のサムネールのシーン番号と動画ＩＤを検索し、動画ＩＤは画面に表示すると共に、ＤＶＤ−ＲＯＭの挿入待ち状況になり、ユーザーが所定のＤＶＤ−ＲＯＭを挿入したら、そのシリアル番号と、ＳＡＴに記載されたシリアル番号を比較し、間違いの無いことを確認した後、シーン番号の示すシーンにジャンプして、その部分の動画像を表示する。
【００１７】
図２は、本発明によるサムネール動画の作成例と、その再生例である。１０は、再生時間が例えば１５分のオリジナルの動画、１１は１０から作成したサムネール動画、１２はそのサムネールの再生例である。オリジナルの動画１０には、シーンが急激に変化する「シーンチェンジ」が６カ所（▲１▼〜▲６▼）ある事を示す。各シーンチェンジの先頭から所定時間（例えば３秒）ずつ動画を切り取り（斜線部分）、それらを改めてサムネール動画１１として結合する。こうして出来たサムネール動画は、上記の例では１８秒になり、オリジナルから大幅に短縮される。
【００１８】
このサムネール動画を再生する時は、サムネールだけを再生すると１８秒で終わってしまうが、本発明の様に、早送りボタンを押下（１３）している時はサムネール動画部分を再生し、早送りボタンを離している時はオリジナル動画からデータを持ってくると、完全な形の高速検索が実現できる。例えば、上記の例では、早送りボタンを▲１▼と▲２▼の部分で押下し、▲３▼の直前か▲３▼の前半部分でボタンを離すと、▲３▼の斜線部分の再生が終わったら、オリジナルの動画の（３）の部分からデータを導入して再生を続け、再び▲４▼の所で早送りボタンを押下したら、▲４▼のサムネール動画にジャンプして再生し、▲５▼の直前か▲５▼の前半部分でボタンを離すと、▲５▼の斜線部分の再生が終わったら、オリジナルの動画の（５）の部分からデータを導入して再生を続け、再び▲６▼の所で早送りボタンを押下したら、▲６▼のサムネールにジャンプして再生する、という動作をする。
【００１９】
この様な操作により、オリジナルの動画の所望のシーンを高速に検索する事ができる。早送りボタンを押下している時の動画の動きは、決してビデオテープの早送りの様な「ちょこまか」した動きではなく、シーンチェンジ部分だけを切り出した３秒ずつの「等速の」動画なので、内容が良く分かり、音声も自然に再生させる事ができる。
【００２０】
図３は、本発明による動画検索のフローチャートであり、図２で示したサムネール動画の再生例を説明するためのものである。サムネール検索が開始されると、図３の開始２０にジャンプし、サムネール動画の再生が開始される（２１）。この例では、サムネール動画の再生中は早送りボタンが押下され続ける必要がある仕様になっているので、ラウンドロビンまたは割り込みにより早送りボタンの押下をチェックする（２２）。早送りボタンの押下が中止された事が検知されると、その時再生していたサムネール番号を読み（２３）、そのサムネールの再生の終了を待つ（２４）。サムネール動画の再生は、ハードウエアまたはソフトウエアで行われるが、ソフトウエアの場合でも、一般的なマルチタスク処理により、別タスクで実行されるので、それからのメッセージ受信の形でサムネールの終了を知る。ここでは既に早送りボタンは離されているので、サムネール番号と同じ番号のオリジナル動画部分を再生する（２５）。早送りボタンが再び押下されたら（２６）、シーケンスの最初に戻って同じフローを繰り返すが、早送りボタンが押下されなければ、そのままオリジナル動画の再生を続け、最後まで行って停止する。
【００２１】
【発明の効果】
この様な操作により、サムネール画像から簡単に所定の動画像の特定シーンを見つけだす事ができる。
【図面の簡単な説明】
【図１】本発明による動画検索方法および装置の原理図を示す。
【図２】本発明によるサムネール動画の作成例と、その再生例。
【図３】本発明による動画検索のフローチャート。
【図１】
2004363968.tif 000003
【図２】
2004363968.tif 000004
【図３】
2004363968.tif 000005