(57)【要約】補助情報要素を含む同期オーディオ／ビデオ信号を元の言語からターゲット言語に処理するためのマルチリンガルトランスクリプションシステムが提供される。本システムは、前記補助情報成分からテキストデータをフィルタリングし、前記テキストデータを前記ターゲット言語に翻訳し、前記翻訳されたテキストデータを表示すると同時に前記同期信号のオーディオ及びビデオ成分を再生する。更に、本システムは、複数の言語データベースを記憶するためのメモリを提供し、当該複数の言語データベースは、比喩インタプリタ及び類語辞書を含むと共に、随意に、前記翻訳されたテキストの品詞を識別するためのパーサを含んでもよい。補助情報成分は、オーディオ／ビデオ信号と関連したあらゆる言語テキスト、即ち、ビデオテキスト、音声認識ソフトウェアによって生成されるテキスト、プログラムトランスクリプト、電子番組ガイド情報、クローズドキャプションテキスト等、を有してよい。
2005504395.tif 000002
【特許請求の範囲】
【請求項１】
オーディオ／ビデオ信号及び当該オーディオ／ビデオ信号に時間的に関連したテキストデータを有する補助情報信号を処理するための方法において、
前記テキストデータが受信される元の言語の前記テキストデータの部分を順次分析するステップと、
テキストデータの前記部分をターゲット言語に順次翻訳するステップと、
翻訳されたテキストデータの前記部分を表示すると同時に前記部分の各々に時間的に関連した前記オーディオ／ビデオ信号を再生するステップと、
を有する方法。
【請求項２】
請求項1に記載の方法において、更に、
前記オーディオ/ビデオ信号及び前記補助情報信号を受信するステップと、
前記オーディオ／ビデオ信号をオーディオ成分及びビデオ成分に分離するステップと、
前記テキストデータを前記補助情報信号からフィルタリングするステップと、
を有する方法。
【請求項３】
請求項1に記載の方法において、テキストデータの前記部分を順次分析する前記ステップは、分析下のテキストデータの前記部分に存在する語句が繰り返されているかどうかを決定するステップと、前記語句が繰り返されていると決定されたら、前記語句の最初の出現後の全ての出現において前記語句を類似した意味の異なった語句で置換するステップとを含む、方法。
【請求項４】
請求項1に記載の方法において、テキストデータの前記部分を順次分析する前記ステップは、口語表現及び比喩の1つが考慮中のテキストデータの前記部分に存在するかどうかを決定するステップと、前記の曖昧な表現を意図される意味を表す標準的な語句で置換するステップとを含む、方法。
【請求項５】
請求項1に記載の方法において、更に、翻訳されたテキストデータの前記部分を順次分析し、口語表現及び比喩の1つが翻訳されたテキストデータの前記部分に存在するかどうかを決定するステップと、前記の曖昧な表現を意図される意味を表す標準的な語句で置換するステップとを含む方法。
【請求項６】
請求項1に記載の方法において、テキストデータの前記部分を順次分析する前記ステップは、考慮中のテキストデータの前記部分の単語の品詞を決定して、当該品詞を前記表示される翻訳されたテキストデータと共に表示するステップを含む、方法。
【請求項７】
請求項1に記載の方法において、更に、テキストデータの前記部分及び翻訳されたテキストデータの前記部分を文化／歴史情報データベースを参照して分析し、解析結果を表示するステップを有する方法。
【請求項８】
請求項2に記載の方法において、前記テキストデータは、クローズドキャプション、スピーチからテキストへのトランスクリプション又は前記ビデオ成分中に存在するOCRにより認識された重ね合わせられたテキストである、方法。
【請求項９】
請求項1に記載の方法において、前記同期オーディオ／ビデオ信号は、ラジオ／テレビジョン信号、サテライトフィード、デジタルデータストリーム又はビデオカセットレコーダからの信号である、方法。
【請求項１０】
請求項1に記載の方法において、前記オーディオ／ビデオ信号及び前記補助情報信号は統合された信号として受信され、当該方法は、更に、前記統合された信号をオーディオ成分、ビデオ成分及び補助情報成分に分離するステップを有する方法。
【請求項１１】
請求項10に記載の方法において、前記テキストデータは他の補助データから分離される、方法。
【請求項１２】
請求項10に記載の方法において、前記オーディオ成分、前記ビデオ成分及び前記補助情報成分は同期されている、方法。
【請求項１３】
請求項1に記載の方法において、更に、テキストデータの前記部分を前記ターゲット言語に順次翻訳する前記ステップを実行する際の難度レベルを決定するための個人選択レベルを設定するステップを有する方法。
【請求項１４】
請求項13に記載の方法において、前記難度レベルは、所定の数の類似した語句の出現に基づいて自動的に向上される、方法。
【請求項１５】
請求項13に記載の方法において、前記難度レベルは、所定の期間に基づいて自動的に向上される、方法。
【請求項１６】
オーディオ／ビデオ信号及び当該オーディオ／ビデオ信号に時間的に関連したテキストデータを有する補助情報成分を処理するための装置において、
前記信号をオーディオ成分、ビデオ成分及び関連したテキストデータに分離するための1つ又は2つ以上のフィルタと、
前記テキストデータが受信される元の言語の前記テキストデータの部分を分析するためのマイクロプロセッサであって、テキストデータの前記部分をターゲット言語に翻訳すると共に前記ビデオ成分及び関連した翻訳されたテキストデータを出力のためにフォーマットするためのソフトウェアを有するマイクロプロセッサと、
前記翻訳されたテキストデータの前記部分を表示すると同時に前記ビデオ成分を表示するためのディスプレイと、
前記部分の各々に時間的に関連した前記信号の前記オーディオ成分を再生するための増幅器と、
を有する装置。
【請求項１７】
請求項16に記載の装置において、更に、前記信号を受信するための受信器と、テキストデータを前記補助情報成分から抽出するためのフィルタとを有する装置。
【請求項１８】
請求項16に記載の装置において、複数の言語データベースを記憶するためのメモリを更に有し、前記言語データベースは比喩インタプリタを含む、装置。
【請求項１９】
請求項16に記載の装置において、前記言語データベースは類語辞書を含む、装置。
【請求項２０】
請求項18に記載の装置において、前記メモリは、更に、前記言語データベースに相互参照される複数の文化／歴史情報データベースを記憶する、装置。
【請求項２１】
請求項16に記載の装置において、前記マイクロプロセッサは、更に、テキストデータの前記部分を文中における前記部分の品詞、形式及び構文関係を提示することにより説明するためのパーサソフトウェアを有する、装置。
【請求項２２】
前記マイクロプロセッサは、口語表現及び比喩の1つが考慮中のテキストデータの前記部分及び翻訳されたテキストデータの前記部分に存在するかどうかを決定し、前記の曖昧な表現を意図される意味を表す標準的な語句で置換する、装置。
【請求項２３】
請求項16に記載の装置において、前記マイクロプロセッサは、テキストデータの前記部分を前記ターゲット言語に翻訳する際の難度レベルを決定するための個人選択レベルを設定する、装置。
【請求項２４】
請求項23に記載の装置において、前記マイクロプロセッサは、前記難度レベルを所定の数の類似した語句の出現に基づいて自動的に向上させる、装置。
【請求項２５】
請求項23に記載の装置において、前記マイクロプロセッサは、前記難度レベルを所定の期間に基づいて自動的に向上させる、装置。
【請求項２６】
同期オーディオ／ビデオ信号を処理するための受信器であって、前記オーディオ／ビデオ信号は当該オーディオ／ビデオ信号に時間的に関連した補助情報成分を含む、受信器において、
前記信号を受信するための入力手段と、
前記信号をオーディオ成分、ビデオ成分及び前記補助情報成分に分離するための非多重化手段と、
テキストデータを前記補助情報成分から抽出するためのフィルタ手段と、
前記信号が受信された元の言語の前記テキストデータを分析するためのマイクロプロセッサと、
前記テキストデータをターゲット言語に翻訳するための翻訳手段と、
前記信号の前記翻訳されたテキストデータ、前記ビデオ成分及び前記オーディオ成分をディスプレイ手段及びオーディオ手段を含む装置に出力するための出力手段と、
を有する受信器。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、一般にマルチリンガルトランスクリプションシステムに関し、より詳細には、補助情報成分を含む同期オーディオ／ビデオ信号を元の言語からターゲット言語に処理するトランスクリプションシステムに関するものである。好適には、補助情報成分は、同期オーディオ／ビデオ信号と一体化されたクローズドキャプションテキスト信号である。
【背景技術】
【０００２】
クローズドキャプションは、聾者又は難聴者にテレビジョンへのアクセスを与えるよう設計された支援技術(assistive technology)である。この技術は、テレビジョン信号のオーディオ部分をテレビジョンスクリーン上で表示される文字として表示するという点で字幕と類似している。テレビジョン信号のビデオ成分の永久画像である字幕とは違い、クローズドキャプションは、テレビジョン信号内で送信される符合化されたデータとして隠されており、バックグラウンドノイズ及び音響効果に関する情報を提供する。クローズドキャプションを見ることを望むビューアは、セットトップデコーダ又は内蔵デコーダ回路を有するテレビジョンを用いなければならない。キャプションは、テレビジョン信号の垂直帰線消去期間に存在するライン21のデータ領域に組み込まれている。1993年7月から、米国で販売される13インチ以上のスクリーンを備えたテレビジョンセットは、テレビジョンデコーダ回路法によって要求されるとおり、内蔵デコーダ回路を有している。
【０００３】
幾つかのテレビジョンショーは、リアルタイムで、即ちスペシャルイベント又はニュース番組の生放送の最中に、キャプションされ、キャプションは、動作から僅かに数秒間遅れて表示され、言われたことを表示する。速記者が、放送を聞いて、キャプションを信号にフォーマットする特別なコンピュータプログラムに単語を入力し、これら信号は、テレビジョン信号と混合させられるために出力される。他のショーは、ショーが作成されたあとに加えられるキャプションを持っている。キャプションライタは、音響効果を説明する語句を加えることができるように、スクリプトを用いて、ショーのサウンドトラックを聞く。
【０００４】
聴覚障害者を支援することに加えて、クローズドキャプションは種々の状況において利用されることができる。例えば、クローズドキャプションは、プログラムのオーディオ部分が聞こえない雑音の多い環境(即ち空港ターミナル又は鉄道駅)において有用でありうる。有利には、人々は、英語を学ぶため又は読み書きを覚えるためにクローズドキャプションを用いる。この目的を達成するために、1996年8月6日発行のWen F. Changの米国特許第5,543,851号('851特許)は、キャプションデータを有するテレビジョン信号を処理するクローズドキャプション処理システムを開示する。テレビジョン信号を受信した後に、'851特許のシステムは、テレビジョン信号からキャプションデータを除去して、当該キャプションデータをディスプレイスクリーンに提供する。次にユーザは、表示されたテキストの一部を選択し、選択されたテキストの定義又は翻訳を要求するコマンドを入力する。次に、キャプションされたデータの全てはディスプレイから除去され、各個々の単語の定義及び／又は翻訳が決定され表示される。
【０００５】
'851特許のシステムは、 個々の単語を定義して翻訳するためにクローズドキャプションを利用するが、単語が使用されている文脈とは関係なく翻訳されるため、このシステムは、効率的な学習ツールではない。例えば、1つの単語は、文構造に対する該単語の関係に関係なく、又は、該単語が比喩を表す語群の一部であるかどうかに関係なく、翻訳される。加えて、'851特許のシステムは、翻訳を表示すると同時にキャプションされたテキストを除去するため、ユーザは、翻訳を読むために、見ているショーの一部よりも先行しなければならない。次にユーザは、続いているショーを見るのを継続するために、表示されたテキストモードに戻らなければならない。
【発明の開示】
【発明が解決しようとする課題】
【０００６】
従って、本発明の目的は、従来技術の翻訳システムの欠点を克服するマルチリンガルトランスクリプションシステムを提供することである。
【０００７】
本発明の他の目的は、同期オーディオ／ビデオ信号と関連した補助情報(例えばクローズドキャプション)をターゲット言語に翻訳し、翻訳された情報を表示すると同時にオーディオ／ビデオ信号を再生するシステム及び方法を提供することである。
【０００８】
本発明の他の目的は、補助情報が分析され、曖昧さ(例えば比喩、俗語等)を除去して品詞を識別して、新しい言語を学習するための効果的なツールを提供するような、同期オーディオ／ビデオ信号と関連した補助情報を翻訳するシステム及び方法を提供することである。
【課題を解決するための手段】
【０００９】
上記の目的を達成するために、マルチリンガルトランスクリプションシステムが提供される。このシステムは、同期オーディオ／ビデオ信号及び関連した補助情報成分を受信するための受信器と、前記信号をオーディオ成分、ビデオ成分及び前記補助情報成分に分離するための第1のフィルタと、必要に応じて、テキストデータを前記補助情報成分から抽出するための同一の又は第2のフィルタと、前記テキストデータが受信された元の言語の前記テキストデータを分析するための、前記テキストデータをターゲット言語に翻訳して、翻訳されたテキストデータを前記関連したビデオ成分とフォーマットする翻訳ソフトウェアを実行するようにプログラムされたマイクロプロセッサと、前記翻訳されたテキストデータを表示すると同時に前記関連したビデオ成分を表示するためのディスプレイと、前記信号の前記関連したオーディオ成分を再生するための増幅器とを含む。更に、本システムは、複数の言語データベースを記憶するための記憶手段を提供し、当該複数の言語データベースは、比喩インタプリタ及び類語辞書を含むと共に、随意に、前記翻訳されたテキストの品詞を識別するためのパーサを含んでもよい、更に、このシステムは、翻訳されたテキストデータを表す音声を合成するためのテキストを音声に変換する合成器を提供する。
【００１０】
補助情報成分は、オーディオ／ビデオ信号と関連したあらゆる言語テキスト、即ち、ビデオテキスト、音声認識ソフトウェアによって生成されるテキスト、プログラムトランスクリプト、電子番組ガイド情報、クローズドキャプションテキスト等、を有してよい。補助情報成分と関連したオーディオ／ビデオ信号は、アナログ信号、デジタルストリーム又は公知技術の複数の情報成分を有することができる他のあらゆる信号であってよい。
【００１１】
本発明のマルチリンガルトランスクリプションシステムは、テレビジョンセット、テレビジョン若しくはコンピュータに結合されるセットトップボックス、サーバ又はコンピュータに備わったコンピュータ実行可能プログラム等のスタンドアロン装置において実施されることができる。
【００１２】
本発明の他の側面によれば、オーディオ／ビデオ信号及び関連した補助情報成分を処理するための方法が提供される。本方法は、前記信号を受信するステップと、前記信号をオーディオ成分、ビデオ成分及び前記補助情報成分に分離するステップと、必要に応じて、テキストデータを前記補助情報成分から抽出するステップと、前記テキストデータが受信された元の言語の前記テキストデータを分析するステップと、前記テキストデータをターゲット言語に翻訳するステップと、前記翻訳されたテキストデータを前記関連したビデオ成分と同期させるステップと、前記翻訳されたテキストデータを表示すると同時に前記関連したビデオ成分を表示して前記信号の前記関連したオーディオ成分を再生するステップとを含む。信号を該信号の種々の成分に分離することなしに、テキストデータが元々受信された信号から分離されることができること、又は、テキストデータは音声からテキストへの変換により生成されることができることは理解される。加えて、本方法は元のテキストデータ及び翻訳されたテキストデータを分析し、比喩又は俗語があるかどうか決定し、比喩又は俗語を意図された意味を表す標準の用語で置換することを提供する。更に、本方法は、テキストデータが分類される品詞を決定して、当該品詞分類を表示される翻訳されたテキストデータと共に表示することを提供する。
【発明を実施するための最良の形態】
【００１３】
本発明の上記の及び他の目的、特徴及び利点は、添付の図面と共に以下の詳細な説明を考慮することにより、一層明らかになる。
【００１４】
本発明の好適な実施例は、以下で添付の図面を参照して説明される。以下の説明において、不必要な細部で本発明を不明瞭にすることを回避するために、周知の機能又は構成は詳述しない。
【００１５】
図1を参照すると、本発明による、関連した補助情報成分を含む同期オーディオ／ビデオ信号を処理するシステム10が示される。システム10は、同期オーディオ／ビデオ信号を受信するための受信器12を含む。受信器は、放送テレビジョン信号を受信するためのアンテナ、ケーブルテレビジョンシステム若しくはビデオカセットレコーダから信号を受信するためのカプラ、衛星通信を受信するためのサテライトディッシュ及びダウンコンバータ、又は、電話線、DSL線、ケーブル線若しくはワイヤレス接続を介してデジタルデータストリームを受信するためのモデムであってよい。
【００１６】
次に、受信された信号は、当該受信された信号をオーディオ成分22、ビデオ成分18及び補助情報成分16に分離するための第1のフィルタ14に送信される。次に、補助情報成分16及びビデオ成分18は、当該補助情報成分16及びビデオ成分18からテキストデータを抽出するための第2のフィルタ20に送信される。加えて、オーディオ成分22は、マイクロプロセッサ24に送信される。該マイクロプロセッサ24の機能は以下で説明される。
【００１７】
補助情報成分16は、ビデオテキスト、音声認識ソフトウェアによって生成されるテキスト、プログラムトランスクリプト、電子番組ガイド情報及びクローズドキャプションテキスト等のオーディオ／ビデオ信号に組み込まれるトランスクリプトテキストを含んでよい。一般に、テキストのデータは、放送、データストリーム等における対応したオーディオ及びビデオと時間的に関連がある又は同期している。ビデオテキストは、画像を背景にしてディスプレイの前面に表示される重畳され又は重ね合わせられたテキストである。例えば、テレビジョンニュース番組のアンカーの名前は、多くの場合ビデオテキストとして現れる。ビデオテキストは、また、表示された画像に埋め込まれたテキスト、例えば、ビデオ画像からOCR(光学的文字認識)型ソフトウェアプログラムを通じて識別され抽出されることができる道路標識(street sign)という形をとってもよい。加えて、補助情報成分16を持ったオーディオ／ビデオ信号は、アナログ信号、デジタルストリーム又は当該技術分野で知られる複数の情報成分を有することができる他のいかなる信号であってもよい。例えば、オーディオ／ビデオ信号は、ユーザデータフィールドに埋め込まれた補助情報成分を有するMPEGストリームであってよい。更に、補助情報成分は、補助情報をオーディオ／ビデオ信号と関連させるための情報(例えばタイムスタンプ)を有する、オーディオ／ビデオ信号とは分離した別個の信号として、送信されることができる。
【００１８】
図1を再度参照すると、第1のフィルタ14及び第2のフィルタ20が、上述した信号を分離して必要に応じてテキストを補助情報成分から抽出することができる、単一の一体型フィルタ又はあらゆる既知のフィルタリング装置又は部品であってよいと理解される。例えば、放送テレビジョン信号の場合には、オーディオ及びビデオを分離して搬送波を除去するための第1のフィルタと、補助情報をビデオから分離するためのA/Dコンバータ及びデマルチプレクサとして動作するための第2のフィルタとがある。他方ではデジタルテレビジョン信号の場合には、システムは、信号を分離して、そこからテキストデータを抽出するように機能する単一のデマルチプレクサにより構成されていてもよい。
【００１９】
次に、テキストデータ26は、ビデオ成分18と共にマイクロプロセッサ24に送信される。次に、テキストデータ26は、オーディオ／ビデオ信号が受信された元の言語でマイクロプロセッサ24のソフトウェアによって分析される。マイクロプロセッサ24は、テキストデータ26の幾つかの分析を実行するために、記憶手段28(即ちメモリ)と相互作用する。記憶手段28は、テキストデータ26を分析する際にマイクロプロセッサ24を補助するための幾つかのデータベースを含んでもよい。そのようなデータベースの1つは、抽出されたテキストデータ26に現れる比喩を意図された意味を表す標準の用語で置換するために用いられる比喩インタプリタ30である。例えば、語句「once in a blue moon」が抽出されたテキストデータ26に現れる場合、この語句は、語句「very rare」によって置換され、比喩が後に外国語に翻訳されたときに意味不明になってしまうことを防止する。他のこのようなデータベースは、頻出する語句を類似した意味を有する異なった語句で置換するための類語辞書データベース32及びユーザに用語の意義を知らせるための文化／歴史データベース34を含んでよく、この文化／歴史データベース34は、例えば、日本語から翻訳する際に、ユーザにその語句が年長者に宛てられる「改まった」ものであるか、対等の人間に宛てられるのにふさわしいものであるかを強調する。
【００２０】
テキストデータの分析の難度レベルは、ユーザの個人選択レベルによって設定されてよい。例えば、本発明のシステムの新しいユーザは、難度レベルを「低い」に設定してもよく、この場合、類語辞書データベースを用いて単語が置換されるときに単純な単語が挿入される。反対に、難度レベルが「高い」に設定されると、翻訳される単語に対して多音節語又は複雑な語句が挿入されてよい。加えて、特定のユーザの個人選択レベルは、あるレベルがマスターされた後に、自動的に難度が増加する。例えば、本システムは、ユーザが特定の単語又は熟語を所定の回数経験した後にはユーザのための難度レベルを適応的に増加させることを学び、ここで、所定の回数は、ユーザによって設定されるか又は予め設定されたデフォルトであってよい。
【００２１】
抽出されたテキストデータ26が、比喩データベース及び文法、慣用語、口語表現等を修正することができる他のあらゆるデータベースによって、曖昧さを除去するために分析されて処理されたあと、テキストデータ26は、変換ソフトウェアから成る翻訳器36によって変換される。この翻訳器36は、ターゲット言語においてマイクロプロセッサ24により制御される、システムの別個の部品又はソフトウェアモジュールであってよい。更に、翻訳されたテキストは、その品詞(即ち名詞、動詞等)形式及び文中の構文関係を識別することにより翻訳されたテキストを説明するパーサ38によって処理されてもよい。翻訳器36及びパーサ38は、言語間辞書データベース37に処理を依存してもよい。
【００２２】
種々のデータベース30、32、34、37と関連してマイクロプロセッサ24により実行される分析が、翻訳の前に抽出されたテキストデータのみならず翻訳された(即ち外国語の)テキストに対して実行されることができることが理解される。例えば、比喩データベースが、翻訳されたテキストの普通のテキストを比喩で置換するために参照されてもよい。加えて、抽出されたテキストデータは、パーサ38によって変換の前に処理されることができる。
【００２３】
次に、翻訳されたテキストデータ46は、フォーマットされ、関係のあるビデオに関連づけられて、元の受信された信号のビデオ成分18と共にディスプレイ40に送信され、対応するビデオと同時に表示されると共にオーディオ手段42即ち増幅器を通じてオーディオ成分22が再生される。それに応じて、翻訳されたテキストデータ46を関連するオーディオ及びビデオと同期させるために、送信の適当な遅延が行われてもよい。
【００２４】
随意に、元の受信された信号のオーディオ成分22は、音を消されることができ、翻訳されたテキストデータ46は、テキストを音声に変換する合成器44によって処理されて、翻訳されたテキストデータ46を表す音声を合成して、プログラムを実質的にターゲット言語に「吹き替える」ことができる。テキストを音声に変換する合成器の3つの可能なモードは、(1) ユーザによって示される単語だけを発音することと、(2) 全ての翻訳されたテキストデータを発音することと、(3) ユーザによって設定される個人選択レベルによって決定される特定の難度レベルの単語(例えば多音節語)のみを発音することとを含む。
【００２５】
更に、パーサ38及びマイクロプロセッサ24の文化／歴史データベース34との対話によって作成される結果は、新しい言語の学習を容易にするために、関連するビデオ成分18及び翻訳されたテキストデータ46と同時にディスプレイ40に表示されてもよい。
【００２６】
本発明のマルチリンガルトランスクリプションシステム10は、全てのシステムコンポーネントがテレビジョンに備わったスタンドアロンテレビジョンで実現されてよい。システムは、更に、受信器12、第1のフィルタ14、第2のフィルタ20、マイクロプロセッサ24、記憶手段28、翻訳器36、パーサ38及びテキストを音声に変換するコンバータ44がセットトップボックスに含まれ、表示手段40及びオーディオ手段42がテレビジョン又はコンピュータによって提供される、テレビジョン又はコンピュータに結合されたセットトップボックスとして実施されることができる。
【００２７】
本発明のマルチリンガルトランスクリプションシステム10のユーザによる起動及び対話は、テレビジョンと関連してして用いられる型のリモートコントロールと同様のリモートコントロールを通じて達成されることができる。代替的には、ユーザはシステムにハードワイヤ又はワイヤレス接続を介して結合されるキーボードによって、システムを制御することができる。ユーザ対話を通じて、ユーザは、文化／歴史情報がいつ表示されるべきか、テキストを音声に変換するコンバータが吹き替えのためにいつ稼動させられるべきであるか、そして、翻訳が如何なる難度レベルで、即ち個人的な嗜好レベルで、処理されるべきか、を決定することができる。加えて、ユーザは、特定の外国の言語データベースを稼動させるために国別コードを入力することができる。
【００２８】
本発明のマルチリンガルトランスクリプションシステムの他の実施例において、本システムはインターネットサービスプロバイダを通じてインターネットにアクセスする。一旦テキストデータが翻訳されると、ユーザは検索クエリの翻訳されたテキストを用いてインターネット上で検索を実行することができる。オーディオ／ビデオ信号の補助情報成分から得られるテキストを用いてインターネット検索を実行するための類似したシステムは、2000年7月27日のThomas McGee、Nevenka Dimitrova及びLalitha Agnihotriによる米国出願第09/627188号「TRANSCRIPT TRIGGERS FOR VIDEO ENHANCEMENT」(整理番号US000198)において開示されており、この出願は、共通の譲受人が所有しており、ここに参照として組み込まれるものとする。検索が実行されると、検索結果が表示手段40にウェブページとして若しくはウェブページの一部として表示されて又はディスプレイの画像上に重ね合わせられる。代替的には、単純なUniform Resource Locator(URL)、有益なメッセージ又はウェブページの非テキスト部分(例えば画像、オーディオ及びビデオ)が、ユーザに返される。
【００２９】
本発明の好適な実施例は上記で好適なシステムと関連して説明されたが、本発明の実施例は、プログラム制御の下で動作する汎用プロセッサ若しくは特殊目的プロセッサ、又は、図2を参照して以下で説明される、補助情報要素を含む同期オーディオ／ビデオ信号を処理するための方法に適応されたプログラマブル命令の組を実行するための他の回路を用いて実現されることができる。
【００３０】
図2を参照すると、関連した補助情報成分を有する同期オーディオ／ビデオ信号を処理するための方法が示される。本方法は、前記信号を受信するステップ102と、前記信号をオーディオ成分、ビデオ成分及び補助情報成分に分離するステップ104と、必要に応じてテキストデータを前記補助情報成分から抽出するステップ106と、前記テキストデータを前記信号が受信された元の言語で分析するステップ108と、前記テキストデータストリームをターゲット言語に翻訳するステップ114と、前記翻訳されたテキストを前記オーディオ及びビデオ成分と関連させ、フォーマットするステップと、前記信号の前記ビデオ成分を表示して前記オーディオ成分を再生すると同時に前記翻訳されたテキストデータを表示するステップ120とを含む。加えて、本方法は元のテキストデータ及び翻訳されたテキストデータを分析して比喩又は俗語があるかどうか決定するステップ110を提供し、比喩又は俗語を意図された意味を表す標準の用語で置換する(112)。更に、本方法は、特定の用語が繰り返されているかを決定し(116)、用語が繰り返されていると決定される場合、用語118の最初の出現の後の全ての出現において、当該用語を類似した意味の異なった用語で置換する。随意に、本方法は、テキストデータが分類される品詞を決定することを提供して、表示される翻訳されたテキストデータと共に品詞分類を表示する。
【００３１】
本発明は、好適な実施例を参照して詳細に説明されたが、これらは例示のアプリケーションを表すに過ぎない。従って、当業者は添付の請求項により規定される本発明の範囲及び精神内で多くの変形例を作ることができることは明確に理解されるべきである。例えば、補助情報成分は、視聴の最中に当該補助情報成分をオーディオ／ビデオ信号と同期させるためのタイムスタンプ情報を有する別々に送信された信号であってよく、あるいは代わりに、補助情報成分は、元々受信された信号を当該信号の種々の成分に分離することなく抽出されることができる。加えて、補助情報、オーディオ及びビデオ成分は、記憶媒体(即ちフロッピーディスク、ハードドライブ、CD-ROM等)の異なった部分に存在することができ、ここで、全ての成分はタイムスタンプ情報を有するため、全ての成分は視聴の最中に同期することができる。
【図面の簡単な説明】
【００３２】
【図１】本発明によるマルチリンガルトランスクリプションシステムを示すブロック図である。
【図２】本発明による補助情報要素を含む同期オーディオ／ビデオ信号を処理するための方法を示すフローチャートである。
【図１】
2005504395.tif 000003
【図２】
2005504395.tif 000004
【国際公開パンフレット】
2005504395.tif 000005
2005504395.tif 000006
2005504395.tif 000007
2005504395.tif 000008
2005504395.tif 000009
2005504395.tif 000010
2005504395.tif 000011
2005504395.tif 000012
2005504395.tif 000013
2005504395.tif 000014
2005504395.tif 000015
2005504395.tif 000016
2005504395.tif 000017
2005504395.tif 000018
2005504395.tif 000019
2005504395.tif 000020
2005504395.tif 000021
2005504395.tif 000022
【国際調査報告】
2005504395.tif 000023
2005504395.tif 000024
2005504395.tif 000025
2005504395.tif 000026
2005504395.tif 000027
2005504395.tif 000028