【誤訳訂正書】
【提出日】平成19年8月31日(2007.8.31)
【誤訳訂正１】
【訂正対象書類名】明細書
【訂正対象項目名】全文
【訂正方法】変更
【訂正の内容】
【書類名】        明細書
【発明の名称】  同期したオーディオとビデオをキャプチャしオーサリングし再生するために音声認識およびスクリプトを使用する装置および方法
【特許請求の範囲】
【請求項１】  複数のビデオ・ソースから生成されるビデオ・プログラムを編集するためのコンピュータ・システムであって、各ビデオ・ソースが１つ以上のビデオ・クリップを有し、各クリップがこれに関連したオーディオを有し、前記コンピュータ・システムが、
１つ以上の所定の音パターンを認識するために前記オーディオを分析するための手段と、
前記認識した音パターンを使って、前記複数のビデオ・ソースからクリップを取り出すための手段と、
編集プロセスの間に、前記取り出したクリップをディスプレイに送るのを制御するための手段と、
編集の間に、前記取り出したクリップからの選択を容易にするための手段と、
選択したクリップをタイムラインに配置するための手段と、
を備えたコンピュータ・システム。
【請求項２】  請求項１記載のコンピュータ・システムであって、さらに、前記認識した音パターンを使用して前記ビデオ・プログラムの部分のキャプチャを制御するための手段を含む、コンピュータ・システム。
【請求項３】  請求項１記載のコンピュータ・システムであって、前記オーディオが前記ビデオ・プログラムのオーディオ・トラックである、コンピュータ・システム。
【請求項４】  請求項１記載のコンピュータ・システムであって、前記オーディオが前記ビデオ・プログラムと関連する解説である、コンピュータ・システム。
【請求項５】  請求項１記載のコンピュータ・システムであって、前記所定の音パターンが単語である、コンピュータ・システム。
【請求項６】  請求項１記載のコンピュータ・システムであって、前記所定の音パターンが音響効果である、コンピュータ・システム。
【請求項７】  請求項１記載のコンピュータ・システムであって、前記分析するための手段が、スクリプトを使用して、クリップをこのクリップが表す前記スクリプトの部分と自動的にマッチングさせる、コンピュータ・システム。
【請求項８】  請求項７記載のコンピュータ・システムであって、さらに
コンピュータ・ユーザー・インタフェース上に前記スクリプトを表示するための手段と、
編集者が前記スクリプトの部分を選択できるようにするための手段と、
前記スクリプトの前記選択した部分とマッチングする音パターンを持つビデオ・セグメントを提供するための手段と、
編集者が選べる選択肢として、前記提供したビデオ・セグメントを表示するための手段と、
を備えた、コンピュータ・システム。
【請求項９】  請求項１記載のコンピュータ・システムであって、前記分析するための手段が、前記オーディオにおいて所定の音パターンを識別し、さらに、可能なスライス・ポイントをユーザに示すための手段を含む、コンピュータ・システム。
【請求項１０】  請求項２記載のコンピュータ・システムであって、前記キャプチャを制御するための手段が、前記オーディオにおいて所定の音パターンを識別し、さらに、第１の音パターンを識別したときにビデオ・クリップのキャプチャを開始させるための手段を含む、コンピュータ・システム。
【請求項１１】  請求項１０記載のコンピュータ・システムであって、前記キャプチャを制御するための手段が、さらに、第２の音パターンを識別したときに前記ビデオ・クリップのキャプチャを終了させるための手段を含む、コンピュータ・システム。
【請求項１２】  請求項１記載のコンピュータ・システムであって、前記オーディオが、ビデオ・セグメントに対して解説を提供する者からの生のオーディオ入力であり、前記分析するための手段が、前記オーディオにおいて所望の単語を識別し、さらに、前記オーディオにおいて識別した所望の単語に従って前記ビデオ・クリップをログ記録するための手段を含む、コンピュータ・システム。
【請求項１３】  ビデオ・プログラムをデジタル的に編集するためのコンピュータ・システムであって、前記編集を、１つ以上のビデオ・ソースを用いて前記ビデオ・プログラムに関連したスクリプトに基づき行い、前記ビデオ・ソースの各々が１つ以上のビデオ・クリップと１つの共通のオーディオ部分とを含み、前記システムが、
１つ以上の所定の音パターンを認識するために前記オーディオを分析するための手段と、
前記スクリプトの範囲を選択するための手段と、
前記スクリプトの前記選択した範囲とマッチングする音パターンを含む１つ以上のクリップを、前記１つ以上のビデオ・ソースから取り出すための手段と、
前記スクリプトの前記選択した範囲とマッチングする音パターンを含む前記１つ以上のクリップを表示するための手段と、
前記クリップのうちの少なくとも一つを選択できるようにするための手段と、
選択したクリップをタイムラインに配置するための手段と、
を備えたコンピュータ・システム。
【発明の詳細な説明】
【０００１】
発明の技術分野
本発明は、データのキャプチャ、処理、編集、表示、取り出しおよび再生に際して、音声認識を使用することに関する。特に、本発明は、同期したオーディオとビデオのデータをキャプチャし、オーサリングし、再生することに役立つものである。
【０００２】
発明の背景
音声認識技術が数十年間にわたって開発されてきているが、コンピュータおよびその他の装置に対する音声支援の業務や、会話をワープロの文字などに書き換えること以外は、音声認識が一般に使用されるアプリケーションはほとんどない。同期したオーディオとビデオに対する音声認識の使用は、主としてビデオ・データベースの検索用索引を開発するためであった。そのようなシステムは、例えば、１９９５年のＡＣＭ国際マルチメディア会議と展示会の議事録の３５〜４３ページのM.G.Brownらによる「放送ニュースの内容に基づく自動検索（Automatic Content Based Retrieval Of Broadcast News）」、１９９６年のデジタル図書館に関するＡＣＭ国際会議の議事録の１９〜２７ページのWei Liらによる「デジタル・ビデオ図書館に関する構想（Vision: Digital Video Library）、１９９５年のユーザ・インタフェースおよびソフトウェア技術に関する第８回ＡＣＭシンポジウムの議事録の７９〜８０ページのA.G.Hauptmannらによる「マルチメディア情報検索のためのスピーチ（Speech For Multimedia Information Retrieval）」、１９９６年５月のＩＣＡＳＳＰ’９６の議事録の２９９〜３０２ページのPhilippe Gelinによる「ビデオ・サウンドトラックの索引を作るためのキーワードの見つけ方（Keyword Spotting for Video Soundtrack Indexing）」、米国特許第５，６４９，０６０号（Ellozyらによる）、米国特許第５，１９９，０７７号（Wilcoxらによる）、１９９１年３月のＩＢＭ技術開示公報（IBM Technical Disclosure Bulletin）のＮｏ．１０Ａの２９５〜２９６ページの「相互に関係するオーディオと動画トラック（Correlating Audio and Moving Image Tracks）」、米国特許第５，５６４，２２７号（Mauldinらによる）、１９９５年の人工知能を備えたツールに関する第７回ＩＥＥＥ国際会議の議事録の２８８〜２９４ページのA.G.Hauptmannによる「インフォメディア・デジタル・ビデオ図書館の音声認識に関する用途と限界」、１９８４年のＩＣＡＳＳＰ’８４の議事録の２．７．１〜２．７．３ページのH.C.Leungらによる「連続するスピーチに対する音声の文字化を自動調整するための手順（A Procedure for Automatic Alignment Of Phonetic Transcriptions With Continuous Speech）」、ヨーロッパ特許出願０５０７７４３（Stenograph社）、１９９６年のマルチメディア９６の議事録の３０６〜３１３ページのY-L.Changらによる「内容に基づいてビデオの索引を作るための統合された画像とスピーチの分析（Integrated Image And Speech Analysis For Content Based Video Indexing）」、そして１９９６年春のＩＥＥＥマルチメディアのＶｏｌ．３のＮｏ．１の６３〜７３ページのR.Kazmanらによる「ビデオ会議の索引を作るための４つのパラダイム（Four Paradigms for Indexing Video Conferences）」に示されるが、それらのすべてを本文に援用する。
【０００３】
同期したオーディオおよびビデオのシーケンスのようなマルチメディア・プログラムを編集するための現在の技術は、マサチューセッツ州チュークスベリのAvid Technology社製のメディア・コンポーザやフィルム・コンポーザ・システムのようなシステムを含む。これらのシステムのうちのいくつかは、ビデオ・プログラムを表わすためにタイムラインを使用する。しかしながら、利用可能なメディア・データの管理は、時間集約型の手動によるログ記録作業を必要とすることがある。例えば米国特許第４，４７４，９９４号（Ettlinger）に示されるようなシステムで、スクリプトの注釈およびスクリプトが使用される場合、この処理は困難かもしれない。映画、テレビ番組、放送ニュース制作のためにそういったツールを使用して、同期したオーディオとビデオのシーケンスをキャプチャしオーサリングし再生する際の手助けになるかもしれない、単なる索引の作成というよりも、もっと多くの用途が音声認識にはある。
【０００４】
発明の開示
オーディオ・トラックあるいはライブや記録された解説のようなビデオ・プログラムと関連したオーディオは、単語や音響効果のような１つ以上の前もって決められた音パターンを、認識したり検知したりすることで分析することができる。認識されたり検知された音パターンは、編集中にビデオのキャプチャや送り出しを制御することによってビデオ処理を向上させるために利用したり、あるいは編集中にクリップやつなぎ目の選択を容易にするために利用したりしてもよい。
【０００５】
例えば、ビデオ・セグメントをこれらセグメントが表すスクリプト部分と自動的にマッチングさせるために、音パターン認識をスクリプトと組み合わせて使用してもよい。編集者がスクリプト部分を選択できるように、コンピュータ・ユーザー・インタフェース上にスクリプトを表示してもよい。スピーチまたは音響効果のいずれかに関して同じ音パターンを有する、マッチングするビデオ・セグメントを、編集者による選択のための選択肢として表示してもよい。これらの選択肢は、それらが同じオリジナルからのものでなかったり、同じ持続時間のものでなくても、等価なメディアであると見なしてもよい。
【０００６】
さらに音パターン認識は、編集プロセスで起こり得るつなぎ目を識別するために利用してもよい。例えば編集者は、希望するビデオ・セグメントの終りあるいは始めを確認するために、サウンド・トラックに音が単に存在しているか否かよりも、特定の話された単語や音を捜することもできる。
【０００７】
オーディオ・トラックの中に希望する音や単語が存在することは、キャプチャのプロセスでキャプチャしようとしているビデオ・セグメントの始めか終わりかを確認するために利用してもよいし、記録を開始する目印として利用してもよい。その単語や音は、音パターン認識を使用して、オーディオ・トラック中において識別してもよい。さらに希望するその単語や音は、多分キャプチャの間に見ているビデオ・セグメントに対する、あるいは記録中のライブ・イベントに対する解説を提供する者からの生のオーディオ入力において識別してもよい。その単語や音は、例えばスクリプトから選択してもよいし、あるいは個々のユーザが入力した１つ以上のキーワードに基づいてもよい。例えば、ニュースの編集者は、特定のセグメントが希望する１つ以上のキーワードを含んでいる場合、衛星供給を自動的にキャプチャしてもよい。スクリプトの中の自然な途切れを利用する場合、ビデオを、それをキャプチャするときにセグメントかクリップに自動的に分割することができる。
【０００８】
さらに音声認識は、個人によって素材のログ記録を提供するために使用してもよい。例えば、検査中のビデオ・セグメントに対するあるいは記録中のライブ・イベントに対する解説を提供する者からの生のオーディオ入力を、記録し、希望する単語に対する分析を行ってもよい。その解説は、ビデオ素材をログ記録するために一般に使用されるような小さな語彙集に基づいて編成してもよいし、あるデータベースの中でその素材の索引を作るために使用してもよい。
【０００９】
実施の形態
以下、本発明について、そのより完全な理解は、添付図面と共に読むべき以降の詳細な説明から得られる。尚、図面においては、同じ参照番号は同じ構成を示す。尚、本文において引用する参考文献はすべて、本文に援用する。
【００１０】
図１は、編集処理を向上させるために、音声認識とビデオ・プログラムのスクリプトとを組み合わせて使用する本発明の１つの実施例を示す。この実施例においては、特にスピーチだけでなく音響効果についての音パターン認識を、ビデオ・セグメントを、このセグメントが表すスクリプト部分と自動的にマッチングさせるために、スクリプトと組み合わせて使用してもよい。本発明のこの実施例では、コンピュータのユーザー・インタフェースを通して、編集者にスクリプトを示してもよい。本発明に従って修正してもよい、スクリプトをユーザに表示する１つのシステムは、米国特許第４，７４６，９９４号（Ettlinger）に示されている。
【００１１】
この実施例では、グラフィカル・ユーザ・インターフェース４０が、スクリプトの１部分（４２で示す）、およびビデオ・クリップの中からスクリプトの選択された部分と関連した選択されたフレームとを表示する。スクリプトの１部分は、ユーザ入力４４に従って選択してもよい。また、スクリプトの選択された部分のためのビデオ・プログラムを完成させるために使用されるべき、ビデオ・クリップの選択をユーザ入力によって指示してもよい。選択されたスクリプト範囲あるいは選択されたクリップは、４６で示すように、編集システム４８に供給する。選択されたスクリプト範囲を受け取ると、編集システムは、５０で示すように、スクリプト部分とそのスクリプトに対し可能なクリップの中からのフレームとを表示する。この情報を確認するため、編集システム４８は、データベース５２へスクリプト範囲を供給する。それに応えて、データベースは、それにマッチングするクリップの集合５６を返す。対応するビデオ・クリップは、スクリプト５４の選択された範囲を含む内容を持つ。このマッチングは、対応するソースのタイムコードとマッチングさせるというよりもむしろ、同等の物であることを示すために使用してもよいし、米国特許第５，５８４，００６号（Reber）で示されるような方法で使用してもよい。あるショットの選択されたフレームを受け取ったことに応答して、編集システム４８は、編集中のビデオ・プログラムの表現を更新してもよい。
【００１２】
データベース５２は、ビデオの多数のソースやテークから、ビデオやオーディオをキャプチャすることによって得られるビデオ・クリップのデータで占めるようにしてもよい。このキャプチャ・プロセスにおいて、キャプチャしたオーディオ・トラック６０を、音声認識モジュール６２に供給する。音声認識は、この分野の人々に知られている多くの技術を用いて実行することができる。例えば、音声認識モジュールは、ＩＢＭ社製のViaVoiceで使用されているような、パターン認識のHidden Markovモデルに基づいた形式を使用してもよいし、音素アプローチを使用してもよい。さまざまな他の技術を、米国特許第５，６２３，６０９号（Kaye）において示されるように用いてもよい。音声認識プロセスへの別の入力を、スクリプト６４とすることもできる。スクリプト６４は、認識したスピーチをマッチングさせるターゲットを提供することによって音声認識処理を改善するのに使用してもよい。いくつかの例では、例えば対話が自然な形である場合、テキストは音声認識のみから生成されるはずである。また、６６で示すように、音声認識モジュール６２は、オーディオに対応するタイムコードを受け取るが、それは、オーディオにおいて認識したスピーチに従って、スクリプトをタイムコードに整列するために使用してもよい。このように音声認識モジュール６２の出力は、ビデオ・クリップが表わすある範囲のスクリプトまたはテキストであり、そしてスクリプトまたはテキストのタイムコードで整列させたバージョンのものである。６８で示すように、このデータはデータベース５２に格納してもよい。
【００１３】
音声認識モジュール６２によって実行される音声認識処理の１つの実施例は、スクリプトと、オーディオ中の音パターンと、タイムコードとを、次のような手順を用いてマッチングさせることになる。まず、最も容易に確実に検知されるテキスト中のポイントや、単語や、音節は時刻のマッチングを図り、クリップ内に印を付ける。それらのポイントは、使用したパターン認識処理が、そのマッチングの正確さに関し十分なレベルの確かさを示したポイントである。この段階の結果は、次のタイムラインによって視覚化することができる。
【００１４】
【表１】
2003517738.tif 000001
【００１５】
既知の有効なポイント間に位置する単語や句に対して、より精密なマッチングを求めるための最良の近似を行うために、既知の有効ポイント間にわたり時間補間を用いて再帰的な分析を使用することもできる。この段階は、例えば、次の結果を提供する。
【００１６】
【表２】
2003517738.tif 000002
【００１７】
例えば次の結果を提供する、さらなる再帰的分析を行う段階を実行してもよい。
【００１８】
【表３】
2003517738.tif 000003
【００１９】
この再帰的なマッチング処理は、より小さな節を補間して、すべてのスクリプトをオーディオ・トラックにマッピングして、一つの画像であるフィールドかフレームに、あるいは二つのそれにまでタイミングの精度を分解する。こうして、いかなる単語や音節であっても、その始めと終了する時刻が、一連のタイムコード・アドレスに渡ってほどよく確実にマッピングされる。この時間のマッピングを行うために使用する再帰の回数は、希望するタイミングの精度、およびシステムの計算時間と負荷の制御が可能となるよう、ユーザが定義できるようにしてもよい。スクリプトのマッピングに対するフレームは、例えば次のようになる。
【００２０】
【表４】
2003517738.tif 000004
【００２１】
タイムコードへのスクリプトのマッピングは、実際には、テキストの音声表現や他の音パターンにスクリプトを必然的にマッピングすることを含むことができ、そして次にそれは、例えば、アレイや参照テーブルやリストや他のデータ構造を用いて、タイムコードあるいはオーディオ・トラックの時間次元における他の分解要素にマッピングされる。
【００２２】
音声認識モジュールは、編集システム４８もサポートするコンピュータ・システムが実行するソフトウェアを含んでもよい。あるいは、この計算負荷を主プロセッサーから外し、専用のハードウェアを用いて実行するようにしてもよい。
【００２３】
スピーチの平均速度は、毎分１００〜１２５語の範囲にある。これらの単語は、一般に１５０〜２００の音節で構成される。もしタイミングのマーカが、スクリプトの各音節か音パターンに対して保存されていたなら、その結果は、スクリプトのテキストとスピーチの間に、平均して１秒当たり約３回の割で時間基準がマッチングし、あるいはおよそ１０フレームに約一回の割でタイミングのマッチングが生ずる。この分解能は、スクリプトを用いて、ワード・プロセッサー・インターフェースにより駆動される合理的なドラフト編集をサポートする上で、十分に微細な細分性を提供する。上で示したように、スピーチをテキストにマッチングさせること、それに続く各単語や音節のタイムコード・フレーム・マッピングによって、最小限のトレーニングを受けた個人が、標準のワープロ・インターフェースを使用して、希望する対話テキストをカットしたり貼り付けたり、またビデオ・シーケンスのドラフト・カットを容易に組み立てることが可能になるだろう。ドラフト編集をすることで、すばやく一つの物語を大ざっぱに定めることができるだろう。その後、それぞれの移行においてフレーム・トリミング機能を呼び出すことで、対話のタイミングと流れを微調整することが可能となるだろう。米国特許出願第０８／６８７，９２６号の中で示されているように、スクリプトを、さらに断片に分割し、大ざっぱに物語を生成するためストーリー・ボードと関連付けることもできる。
【００２４】
この同じ対話が、いくつかのカメラ・アングルから、および（または）いくつかのテークにわたって記録されている場合、編集システム４８は、スクリプトの中で強調表示された単語や節を含むすべてのテークから、１つ以上のフレームを見つけて提示することができる。その場合、ユーザは希望するカメラ視点やテークをプレビューして選択することができる。テキストからの直接編集をさらに助けるものとして、システムはスクリプト・マークを生成したり、編集したテキストを、スクリプト・クラークのカメラ・カバーレージ表記に従って異なった色やフォントで表示することもできる。
【００２５】
また、オーディオ・トラックを、スクリプトが利用可能でないところで、文字化することもできる。音声認識処理へのこのテキスト入力には、所定の音パターンを持たせることができる音響効果を含ませることもできる。話された対話を、時刻注釈付きでかつ同期させたスクリプト・テキストに変換することは、制作工程を非常に加速するだろう。
【００２６】
スクリプトを使ってビデオ・プログラムを編集するのに用いるための２つの例示のグラフィカル・ユーザ・インターフェースを、図２〜図６と関連させて説明する。スクリプト・ベースの編集は、例えば米国特許第４,７４６,９９４号に記載されており、Avid Technology社から利用可能である。本発明の１つの実施例では、図２に示すように、ユーザー・インタフェースが基本的なワード・プロセッサーに似ている。ディスプレイ・エリア８０はスクリプト（８２に）と、ビューしているスクリプト部分のインディケータ（８４に）を表示している。スクリプトの任意の部分を強調表示させると、編集システムは、強調表示されたテキスト９４のいくつかの部分にマッチングする編集候補として、強調表示された対話のいくつかあるいは全部を含む対応クリップをすべて取り出す。対応するショットのリストは、８６のように示してもよい。このショットによってカバーされるスクリプト範囲は、スクリプト・クラークの注釈付き制作スクリプトと同様に、範囲矢印８８と共に８２の表示テキスト中に現われる。各クリップの代表的なフレームを９０に表示してもよい。ユーザは入力装置を使って、候補となるショットを選択することができる。選択された候補ショットは、プログラムのタイムライン９２に転送することができる。ショットが選択されプログラムのタイムラインに配置された後、ユーザは、図３に示すように、ショットを選択してもよい別のセグメントに移ることもできる。ユーザは９６の新たなテキストを強調表示させてもよい。候補クリップ９０を試聴した後、選択したショット、例えばショット１６をプログラムのタイムラインに配置してもよい。
【００２７】
図４は、グラフィカル・ユーザ・インターフェースの別の実施例で、自動対話フィルム編集インターフェースである。この実施例では、タイムコードを直接使用することはほとんどない。タイムコードは説明の目的のために示すが、省略してもよい。
【００２８】
図４の左側の縦の列１００に、スクリプトが配列されている。細い水平のカーソルライン１０２および１０４は、ショット間の編集ポイントを示す。より太いカーソルライン１０６および１０８は、スクリプト列１００のアクティブの部分を強調表示しているボックス１１０の上端と下端の境界である。ライン１０６あるいは１０８は、ユーザが希望するところならどこにでも位置決めすることができ、これにより、そのラインを例えばマウスを用いて移動させることによって、スクリプトの希望する部分を「キャプチャ」することができる。上側のカーソルライン１０６は、希望するスクリプト部分内の最初の単語の丁度上に置くことができる。上側のカーソルライン１０６を解放すると、その候補ショットが右側の列１２０に表示され、この選択したスクリプト中の最初の単語とマッチングするよう同期させられる。下側のカーソルライン１０８は、そのショットに対するスクリプト対話の希望する範囲を決めるためにセットすることができる。この範囲は、この選択されたスクリプトを含む候補ショットを識別するために使用する。下側のカーソルライン１０８をスクリプトのより多くのあるいはより少ない部分をカバーするために移動させると、カーソルが解放された時に、異なった候補が現われたり消えたりすることになる。この選択した対話に対して、どの候補ショットも選ばない場合は、プレースホルダー１１６が画面に示される。
【００２９】
次に、図５を参照すると、列１２０に表示されたものの中から、例えばマウスを使って、一つのショットを選ぶことができる。１つのショットが列１２０から選ばれた後、１１８に示されるように、そのショットからの一つのフレームが列１２２に表示される。いったん一つの候補を最終的に採択すると、上側カーソルライン１０６は、この編集の末尾の最後の単語に続くこのスクリプトの次の単語へと進むことができる。中央にあるフレームの列１２２は、その左にあるスクリプトに関係するように組み立てられたシーケンスである。その右縁に沿って制御１１２を持つフレームは、現在の編集イベントである。列１２０における異なる候補フレームを選択することは、ビデオ・スイッチャを操作するのとほとんど同様に、列１２２内のイベント画像を切り替えるために使用することができる。
【００３０】
図６では、始めのカーソルライン１３０を、図５に示した編集の最後の単語より少し前にさかのぼったポイントに示している。この場合、その対話を、先のショット内のタイムコードに変換して、そのショットの終わりに対し近似マッチング・トリミングを自動的に実行することができる。ライン１３０および１３２間に示すように、対話の新たな範囲にわたってカーソルを再位置決めすることによって、再びその候補のすべてを、その選択したテキストをカバーするため事前に資格認定することができ、またその画面はそれら候補ショットの始めのフレームを表示するために更新することができる。
【００３１】
本発明の別の実施例では、図７に示すように、音声認識モジュール７０が、オーディオ信号と、１つ以上の選択された単語や音パターン、それとできればタイムコードを受け取る。選択された単語や音パターンは、スクリプトに類似しているが、音声認識モジュールが使用して、ある所与の範囲のオーディオ・ストリーム中に、その選択した単語や音パターンが存在するか否かを示す２進波形７６を出力する。この出力信号は、種々の目的のために使用することができる。まず第１に、編集者がオーディオ・トラックのつなぎ目を識別できるように、この出力信号を表示してもよい。例えばこの信号は、米国特許第５，６３４，０２０号（Norton）で示されるような編集インターフェースにおいて使用してもよく、それは音の単なる存在の有無だけでなく、選択された単語や音パターンの存在の有無を示す。１つの実施例では、スクリプトから選択された単語を、キャプチャ中のビデオ内のポイントを自動的に識別するために使用してもよい。このプロセスを活用すれば、スクリプトの自然な切れ目を使用し、ビデオが処理されるとき、そのビデオをセグメントかクリップに自動的に分割することができる。
【００３２】
選択した単語や音パターンの検出はまた、ビデオ情報のキャプチャを制御するために使用してもよい。例えば、ある単語の存在を、記録を始めるために使用してもよいし、また一方で、別の単語や音パターンの存在を、記録を止めるべきであることを示すために使用してもよい。その認識イベントは、米国特許出願第０７／８６６，５２０号に記載された方法で記録を開始したり止めたりする不連続点として考えることもできる。さらに、音声認識モジュール７０のその出力は、ＰＣＴ国際公開ＷＯ第９６／２６６０１号、あるいは米国特許出願第０８／８３５，１０４号に記載されたようなシステムを用いて、記録をトリガするイベントを知らせるようにしてもよい。
【００３３】
音声認識モジュール７０へのオーディオ入力は、ビデオ信号に対応するオーディオ・トラックとしてもよい。あるいは、そのオーディオ入力７４は、ビデオ・セグメントに対しある者が提供する解説からのライブのオーディオ入力のような第２のオーディオ・トラックとしてもよい。例えば、ある者は、記録されたビデオ素材をログ記録していてもよい。そのログ記録プロセスに関係する単語の小さな部分集合は、ビデオ・セグメントをインデックスするために利用してもよい。この実施例では、グラフィカル・ユーザ・インターフェース４０は、編集者がそのカテゴリに関連するクリップを選択することができるように、ログ記録された語彙集から選択された単語を表示してもよい。さらに、そのオーディオ入力は記録中のライブ・イベントに対する解説としてもよい。
【００３４】
別の実施例では、ニュース情報の衛星供給をキャプチャしてもよい。ＰＣＴ国際公開ＷＯ第９７／３９４１１号で示されるようなニュース環境の中で、システムのキャプチャ・モジュールが、各ジャーナリストや編集者のための選択した単語や音パターン７２を知らせている場合には、編集者やジャーナリストには受信したビデオ情報を通知するようにしてもよい。このキャプチャ・モジュールは、マッチングしたビデオ・セグメントを受け取ると、ビデオ・クリップを自動的にジャーナリストのワークステーションで見られるようにし向けてもよい。またこの機能は、ビデオを用いないで、電話線やラジオを使ってのオーディオ信号だけをモニターすることによって使用することもでき、また米国特許出願第０８／８３５，１０４号に記載されているようなシステムを用いて、オーディオのキャプチャを制御するためのイベントとして、オーディオ信号中に選択された単語や音パターンが出現することを利用して、クリップを自動キャプチャするために使用してもよい。
【００３５】
以上に本発明のいくつかの実施例について説明したが、当業者には明らかなように、上述のものは単なる説明のためのものであって限定するものではなく、単なる例示として提示したものである。多くの修正や他の実施例は、この分野の一般的な技術の一つの範囲内にあり、したがって添付の特許請求の範囲に記載した本発明およびその均等の範囲に入るものであることを意図している。
【図面の簡単な説明】
【図１】
本発明の１つの実施例におけるシステムのブロック図である。
【図２】
図１のシステムに関して使用するためのグラフィカル・ユーザ・インターフェースの１つの実施例を示す。
【図３】
図２に示したグラフィカル・ユーザ・インターフェースの別の図を示す。
【図４】
図１のシステムの別の実施例におけるグラフィカル・ユーザ・インターフェースを示す。
【図５】
図４のグラフィカル・ユーザ・インターフェースの別の図を示す。
【図６】
図４のグラフィカル・ユーザ・インターフェースの別の図を示す。
【図７】
本発明の第２の実施例を示すブロック図である。
【誤訳訂正２】
【訂正対象書類名】図面
【訂正対象項目名】図１
【訂正方法】変更
【訂正の内容】
【図１】
2003517738.tif 000005
【誤訳訂正３】
【訂正対象書類名】図面
【訂正対象項目名】図２
【訂正方法】変更
【訂正の内容】
【図２】
2003517738.tif 000006
【誤訳訂正４】
【訂正対象書類名】図面
【訂正対象項目名】図３
【訂正方法】変更
【訂正の内容】
【図３】
2003517738.tif 000007
【誤訳訂正５】
【訂正対象書類名】図面
【訂正対象項目名】図７
【訂正方法】変更
【訂正の内容】
【図７】
2003517738.tif 000008