(57)【要約】オーディオ情報（Ａｉ）及び場合によってはビデオ情報（Ｖｉ）を含む少なくとも２つの入力信号（Ｓｉ）を処理する方法及び装置であって、入力信号（Ｓ１）の再生に加えて少なくとも１つの他の入力信号（Ｓ２）のテキスト情報（Ｔ２）の再生を可能にする当該方法及び装置を提供するために、入力信号（Ｓ１）を再生する再生装置（１０）と、少なくとも１つの第２入力信号（Ｓ２）のオーディオ情報（Ａ２）に含まれるテキスト情報（Ｔ２）を決定する音声認識手段（１１）と、決定されたテキスト情報（Ｔ２）を再生する視覚的再生装置（１２）とが設けられる。再生装置（１０，１２）は、例えば共通モニタ（１３）により形成されることができる。
2005536104.tif 000002
【特許請求の範囲】
【請求項１】
オーディオ情報及び場合によってはビデオ情報を含む少なくとも２つの入力信号を処理する方法において、第１入力信号のオーディオ情報及び場合によってはビデオ情報が、音響再生及び場合によっては視聴覚再生のために処理され、少なくとも１つの第２入力信号が音声認識手段に印加され、前記少なくとも１つの第２入力信号に含まれるオーディオ情報に関するテキスト情報が前記音声認識手段を用いて決定され、前記決定されたテキスト情報が視覚的に再生される方法。
【請求項２】
前記テキスト情報が、流れるテキストとして再生される、請求項１に記載の方法。
【請求項３】
前記テキスト情報がバッファされ、遅延された様式で再生される、請求項１に記載の方法。
【請求項４】
前記第１入力信号のビデオ情報及び前記テキスト情報が共通モニタ上で再生される、請求項１に記載の方法。
【請求項５】
前記第２入力信号が選択される、請求項１に記載の方法。
【請求項６】
前記第２入力信号が、記憶された情報に基づいて選択される、請求項５に記載の方法。
【請求項７】
前記音声認識手段のパラメータが、前記第２入力信号の前記テキスト情報に基づいて修正される、請求項１に記載の方法。
【請求項８】
前記テキスト情報が、記憶されたテキストと比較される、請求項１に記載の方法。
【請求項９】
前記テキスト情報が、記憶されたテキストに対応する場合に再生される、請求項８に記載の方法。
【請求項１０】
前記テキスト情報と記憶されたテキストとが対応する場合に、前記第２入力信号のオーディオ情報及び場合によってはビデオ情報が、前記第１入力信号のオーディオ情報及び場合によってはビデオ情報の代わりに再生される、請求項８に記載の方法。
【請求項１１】
前記入力信号がテレビ信号である、請求項１に記載の方法。
【請求項１２】
オーディオ情報及び場合によってはビデオ情報を含む少なくとも２つの入力信号を処理する装置において、第１入力信号を再生する再生装置と、少なくとも１つの第２入力信号のオーディオ情報に含まれるテキスト情報を決定する音声認識手段と、前記決定されたテキスト情報を再生する視覚的再生装置とを含む装置。
【請求項１３】
前記第１入力信号を再生する前記再生装置と、前記決定されたテキスト情報を再生する前記視覚的再生装置とが、共通モニタにより形成される、請求項１２に記載の装置。
【請求項１４】
前記決定されたテキスト情報を記憶する記憶手段が設けられる、請求項１２に記載の装置。
【請求項１５】
前記入力信号を選択する制御手段が設けられる、請求項１２に記載の装置。
【請求項１６】
情報用のメモリが設けられ、前記メモリは、前記入力信号が前記メモリに記憶された情報に基づいて選択されるような様式で前記制御手段に接続される、請求項１５に記載の装置。
【請求項１７】
前記第２入力信号の前記テキスト情報に基づいて前記音声認識手段のパラメータを切り替える切替装置が設けられる、請求項１２に記載の装置。
【請求項１８】
前記テキスト情報を記憶されたテキストと比較する比較ユニットが設けられる、請求項１２に記載の装置。
【請求項１９】
前記比較ユニットが前記視覚的再生装置に接続される、請求項１８に記載の装置。
【請求項２０】
前記比較ユニットに接続され、前記入力信号の再生を切り替える切替ユニットが設けられる、請求項１８に記載の装置。
【請求項２１】
前記第１入力信号を再生する前記再生装置がテレビ受信器により形成される、請求項１２に記載の装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、オーディオ情報及び場合によってはビデオ情報をも含む少なくとも２つの入力信号を処理する方法において、第１入力信号のオーディオ情報及び場合によってはビデオ情報が、音響再生及び場合によっては視聴覚再生のために処理される当該方法に関する。
【０００２】
本発明は、オーディオ情報及び場合によってはビデオ情報をも含む少なくとも２つの入力信号を処理する装置において、第１入力信号の再生のための再生装置を有する当該装置にも関する。
【背景技術】
【０００３】
テレビ番組のオーディオ及びビデオ情報に加えて、例えば見出し、株式市場データ又は他の現在の情報を含むテキストを持つテレビ信号を提供することは既知である。また、第２のテレビ信号を表示画面の小部分に視覚的に再生することも既知である。いわゆるＰＩＰ（ピクチャ・イン・ピクチャ）方法におけるこの他のテレビ信号のオーディオ信号は再生されない。聴覚障害又は難聴の人のために再生されるテレビ信号のオーディオ信号を少なくとも部分的に視覚的に再生する挿入テキストも既知である。
【０００４】
米国特許公開公報５５５７３３８Ａは、ピクチャが主ピクチャ及び副ピクチャを有し、且つ追加としてサブタイトルの形式のテキスト情報が前記主ピクチャ内で再生され、当該テキスト情報が副画像内で再生される放送に関するテレビシステムを開示している。この場合トランスミッタは、前記副ピクチャの情報と一緒に前記テキスト情報を送信しなければならない。このシステムは、テキスト情報が前記副ピクチャに加えて再生されるいわゆるＰＩＰ（ピクチャ・イン・ピクチャ）方法の拡張例を構成する。
【発明の開示】
【発明が解決しようとする課題】
【０００５】
本発明の目的は、再生される入力信号に加えて、少なくとも１つの他の入力信号が再生されることができる、記載された種類の方法及び装置を提供することである。従って、少なくとも１つの他の音響又は視聴覚入力信号の受信は、音響又は視聴覚入力信号が既に受信されている場合でも可能にされる。例えば過度の環境雑音のために入力信号の音響受信が可能ではない場所でもこの方法を使用することは可能であるべきである。
【課題を解決するための手段】
【０００６】
この方法に関して本発明の目的は、オーディオ情報及び場合によってはビデオ情報をも含む少なくとも２つの入力信号を処理する方法において、１つの入力信号のオーディオ情報及び場合によってはビデオ情報が、音響再生及び場合によっては視聴覚再生のために処理され、少なくとも１つの第２入力信号が音声認識手段に印加され、前記少なくとも１つの第２入力信号に含まれるオーディオ情報に関するテキスト情報が、前記音声認識手段を用いて決定され、前記決定されたテキスト情報が視覚的に再生される当該方法を用いて達成される。
【０００７】
従って、本発明による前記方法は、異なる入力信号が、ここで生じる音声が認識され、視覚的に再生されるテキストに変換されるような様式で処理されることを可能にする。これは、例えば、テレビ放送の受信中に異なるテレビ放送のテキストがピクチャに挿入されることを可能にする。ユーザはこのようにテレビ放送の受信中に他の話題に関する情報を知らされることができる。音声が認識される入力信号は、この場合異なる外部ソース、例えばラジオレシーバ、ビデオレコーダ又は電話線から生じることもできる。ラジオ局からオーディオ信号の形式で受信された情報は、従って、テレビ放送の再生中にテキストとして再生されることができる。留守番電話に回される着信電話呼び出しを視覚的に再生することも可能であり、これにより前記ユーザは前記電話呼び出しに関する情報を得ることができ、例えば前記電話呼び出しを受けるか否かを決定することができる。音声認識は、オーディオ情報及び場合によってはビデオ情報をも含む入力情報を実際に処理し、第１入力信号に加えてこのような入力信号を再生することを可能にする。
【０００８】
本発明の目的は、オーディオ情報及び場合によってはビデオ情報をも含む少なくとも２つの入力信号を処理する装置において、１つの入力信号を再生する再生装置と、少なくとも１つの第２入力信号のオーディオ情報を含むテキスト情報を決定する音声認識手段と、前記決定されたテキスト情報を再生する視覚的再生装置とを有する当該装置を用いても達成される。
【０００９】
前記音声認識手段は、前記１つの入力信号の前記再生装置及び前記決定されたテキスト情報を再生する前記視覚的再生装置から離れていてもよく、又は前記装置の１つに組み込まれてもよい。本発明による前記装置の全ての構成要素が１つの機器、例えばテレビ受信器に組み込まれることも可能である。外部の又は組み込まれた音声認識手段は、少なくとも１つの第２入力信号のオーディオ信号の処理を可能にし、第１入力信号に加えて前記第２入力信号から決定されるテキスト情報を視覚的に再生することを可能にする。
【００１０】
前記テキスト情報は、有利には流れるテキスト（running text）として再生され、前記流れるテキストの速度は再生に対して自動的に適合される。前記テキスト情報をバッファし、遅延した様式で再生することも可能である。例えばラジオ放送は、音声認識手段を用いて所定の瞬間に処理されることができ、前記決定されたテキスト情報、例えば見出しはバッファされることができ、入力信号の再生中に所定の瞬間又は前記ユーザにより選択された瞬間に視覚的に再生されることができる。
【００１１】
前記１つの入力信号のビデオ情報及び前記少なくとも１つの他の入力信号のテキスト情報は、有利には共通モニタ（common monitor）上で再生される。再生される前記第１入力情報がビデオ信号ではない場合に、前記少なくとも１つの他の入力信号のテキスト情報は、この目的のために特別に設けられた又は既に存在する適切なディスプレイ上で再生されることができる。例えば前記第１入力信号は電話の音響信号であってもよく、第２の着信電話呼び出しが電話のディスプレイ上で視覚的に再生されることができる。
【００１２】
前記第２入力信号は、有利には前記ユーザにより選択されることができる。前記ユーザは、従って、何れのテキスト情報が入力信号の再生中に視覚的形式で追加として再生されるのかを決定することができる。
【００１３】
前記第２入力信号の選択は、この場合、記憶された情報に基づいて実行されることができる。この情報は、前記ユーザに選択された所定の基準を含むことができ、又は自動的に検出されたユーザの習慣に関することもできる。
【００１４】
前記音声認識手段のパラメータは、有利には前記第２入力信号のテキスト情報に基づいて修正される。結果として、例えば前記音声認識手段は、例えば前記第２入力信号に適合する適切なライブラリ又は言語が所定のテキストの認識により選択されることにより、前記第２入力信号に視覚的に適合されることができる。
【００１５】
前記決定されたテキスト情報が記憶されたテキストと比較され、所定の比較結果が得られるときに所定の処置が取られる場合にも有利である。例えば前記テキスト情報の視覚的再生は、記憶されたテキストとの対応に依存するようにされることができる。このフィーチャの結果として、所定の条件でのみ前記テキストを挿入することが可能である。これに対して、例えば所定のキーワードが基準として使用されることができる。
【００１６】
加えて、前記テキスト情報と所定の記憶されたテキストとの間に対応がある場合に、前記第２入力信号のオーディオ情報及び場合によってはビデオ情報が前記第１入力信号のオーディオ情報及び場合によってはビデオ情報の代わりに再生されるように構成されることができる。例えば、前記少なくとも１つの他の入力信号は、従って、監視されることができ、これによりこの入力信号に対する自動的な切り替えは、例えばニュース放送の始め又はスポーツ放送の始めに行われることができる。
【００１７】
再生されるべき前記入力信号は有利にはテレビ信号である。しかしながら、様々な他の入力信号、例えばラジオ信号又は電話信号等も適している。
【００１８】
前記入力信号を再生する前記再生装置及び前記決定されたテキスト情報を再生する前記視覚的再生装置は、有利には共通モニタにより形成される。
【００１９】
前記決定されたテキスト情報を記憶する記憶装置が設けられる場合に、少なくとも１つの他の入力信号のオーディオ情報に含まれるテキスト情報は、後の又は繰り返される再生のために記憶されることができる。
【００２０】
前記ユーザが、本発明の他のフィーチャに基づいて、複数の利用可能な入力信号の中から選択することを可能にするために、制御手段が設けられる。このような制御手段は、情報用のメモリに接続されることができ、これにより前記少なくとも１つの第２入力信号の選択は、前記メモリに記憶された情報に基づいて行われることができる。
【００２１】
前記音声認識手段のパラメータを切り替える切替装置が設けられる場合、前記音声認識手段の最適な適合は、前記第２入力信号のテキスト情報に基づいて達成されることができる。例えば、前記第２入力信号の言語の認識時に、前記音声認識手段はこの言語に適合されることができ、関連するライブラリが起動されることができる。
【００２２】
有利には前記テキスト情報を記憶されたテキストと比較する比較ユニットが設けられる。これは、一連の他のオプション、例えば前記テキスト情報のテキスト依存再生等を提供する。
【００２３】
前記第２入力信号のテキスト情報のテキスト特有の再生を可能にするために、前記比較ユニットは視覚的再生ユニットに接続されることができる。
【００２４】
更に、前記入力信号の再生を切り替える切替ユニットが設けられることができ、このような切替ユニットは前記比較ユニットに接続される。前記切替ユニットは、この場合、前記入力信号を選択する前記制御手段により形成されてもよい。
【００２５】
前記入力信号を再生する再生装置は、テレビ受信器により形成されてもよい。
【００２６】
本発明の実施例は、図面を参照して以下に詳細に説明されるが、しかしながら本発明は、決して前記実施例に制限されない。
【発明を実施するための最良の形態】
【００２７】
図１は、オーディオ情報Ａi及び場合によってはビデオ情報Ｖiをも含む少なくとも２つの入力信号Ｓiを処理する装置のブロック図を示す。示された前記装置は、２つの入力信号Ｓ1及びＳ2を処理するように機能するが、随意に任意の数の入力信号Ｓiに拡張されることができる。前記装置は、入力信号Ｓ1のオーディオ情報Ａ1及び場合によってはビデオ情報Ｖ1を処理及び再生する、入力信号Ｓ1を再生する再生装置１０、例えばテレビ受信器を含む。少なくとも１つの第２入力信号Ｓ2が音声認識手段１１に加えられ、ここで入力信号Ｓ2のオーディオ情報Ａ2に含まれるテキスト情報Ｔ2が決定される。このテキスト情報Ｔ2は視覚的再生装置１２を用いて再生される。従って、入力信号Ｓ1に加えて、同時に又は時間的にずれた（shifted in time）他の入力信号Ｓ2に含まれるテキスト情報Ｔ2をも再生することが可能である。時間のずれた再生を可能にするために、決定されたテキスト情報Ｔ2を記憶する記憶手段が設けられることができる。入力信号Ｓ1及びＳ2のタイプに依存して、入力信号Ｓ1を再生する再生装置１０と、決定されたテキスト情報Ｔ2を再生する視覚的再生装置１２とを共通モニタ１３等に組み込むことは有利である可能性がある。
【００２８】
図２は、第１入力信号Ｓ1、例えばテレビ放送を再生する再生装置１０と、決定されたテキスト情報Ｔ2に対する視覚的再生装置１２とを有するこのような共通モニタ１３の例を示す。テキスト情報Ｔ2は、このように入力信号Ｓ1のテレビピクチャ内にサブタイトルの形式で挿入される。
【００２９】
図３は、図１に示されたものと比較して拡張された複数の入力信号Ｓiを処理する装置のブロック図を示す。オーディオ信号Ａi及び場合によってはビデオ情報Ｖiを含む複数の入力信号Ｓiは、入力信号Ｓiの選択に対して機能する制御手段１５に印加される。第１入力信号Ｓ1は、この場合、再生装置１０上で適切に処理及び再生される。少なくとも１つの他の入力信号Ｓ2は、音声認識手段１１に印加され、入力信号Ｓ2のオーディオ情報Ａ2に含まれるテキスト情報Ｔ2は、ここから決定される。テキスト情報Ｔ2は、音声認識手段１１のパラメータＰiを切り替える切替装置１７に印加されることができ、従って処理されるテキスト情報Ｔ2に対する音声認識手段１１の最適な適合を可能にする。加えて、テキスト情報Ｔ2は、視覚的再生の前に比較ユニット１８に印加されることができ、テキスト情報Ｔ2は、この場合、前記比較ユニット内のメモリ１９に記憶されているテキストＴSと比較される。比較ユニット１８内のこの比較の結果として、例えば、テキスト情報Ｔ2のテキスト特有の再生は、視覚的再生装置１２上で行われることができる。更に、比較ユニット１８は、制御手段１５又は他の切替ユニット（図示されていない）に接続されることができ、これにより所定の記憶されたテキストＴSがテキスト情報Ｔ2で認識される場合に、異なる入力信号Ｓiへの切り替えが行われることができる。メモリ１６は、例えば所定のユーザ習慣に関してもよい情報Ｉiを記憶することができる。メモリ１６は、有利には制御手段１５に接続され、これにより入力信号Ｓiの選択は、メモリ１６に記憶された情報Ｉiに基づいて実行されることができる。入力信号Ｓ1を再生する再生装置１０及び決定されたテキスト情報Ｔ2を再生する視覚的再生装置１２は、共通モニタ１３に組み込まれることができる。更に、本発明による全ての前記装置は、１つの機器、例えばテレビ受信器に組み込まれることができる。
【００３０】
図４は、一例として８つの入力信号Ｓ1乃至Ｓ8のビデオ情報Ｖ1乃至Ｖ8及びオーディオ信号Ａ1乃至Ａ8を再生する複数のモニタ２１が設けられた主調整室に対する本発明の応用例を示す。その都度１つのオーディオ信号Ａiのみが受信されることができる。入力信号Ｓiの他のオーディオ信号Ａi又は他のソースからのオーディオ信号、例えばカメラマン若しくは関連する音声技術者からのオーディオ信号は、テキスト情報Ｔ1乃至Ｔ8の形式でモニタ２１に表示されることができ、従ってディレクタに放送されるべき信号Ｓiの選択に対する他の情報を提供する。
【００３１】
図５は、電話セット２２における本発明の他の応用を示し、ここで電話呼び出しの受信中に、他の電話呼び出しのテキスト情報Ｔ2は、電話セットに通例設けられているディスプレイの形式で視覚的表示装置１２に追加として表示されることができる。本発明は、従って、電話セット２２のユーザに、例えば留守番電話に回される他の電話呼び出しの同時受信を提供する。例えば前記ユーザは、この場合、第１の電話呼び出しを中断することに決め、第２の電話呼び出しに切り替えることができる。
【００３２】
本発明は、決して記載された例に制限されず、様々な他の入力信号に応用されることもできる。
【図面の簡単な説明】
【００３３】
【図１】オーディオ情報及び場合によってはビデオ情報をも含む少なくとも２つの入力信号を処理する装置の実施例のブロック図を示す。
【図２】入力信号及び決定されたテキスト情報に対する再生装置の例を示す。
【図３】本発明による装置の拡張されたブロック図を示す。
【図４】主調整室の形式での応用例を示す。
【図５】電話セットに関する他の応用例を示す。
【図１】
2005536104.tif 000003
【図２】
2005536104.tif 000004
【図３】
2005536104.tif 000005
【図４】
2005536104.tif 000006
【図５】
2005536104.tif 000007
【国際調査報告】
2005536104.tif 000008
2005536104.tif 000009