(57)【特許請求の範囲】
【請求項１】
複数のビデオ・ソースと、単独のオーディオ・ソースと、該オーディオ・ソース用に上記複数のビデオ・ソースの１つを選択するスイッチとを有するテレビジョン・システムにおいて、
上記スイッチに入力する前に上記ビデオ・ソースの各々からのビデオ信号に独自のソース識別子を埋め込む手段と、
出力用に上記スイッチが選択した上記ビデオ信号から上記独自のソース識別子を抽出する手段と、
上記抽出した独自のソース識別子に応じて、上記オーディオ・ソースからのオーディオ信号の遅延を調整して、上記オーディオ信号を上記選択されたビデオ信号に時間的に合うように時刻変更をする手段と
を具えた自動リップ・シンク・エラー補正器。
【請求項２】
複数のビデオ・ソースと、単独のオーディオ・ソースと、該オーディオ・ソース用に上記複数のビデオ・ソースの１つを選択するスイッチとを有するテレビジョン・システムにおいて、
上記ビデオ・ソースの各々に結合され、上記スイッチに入力する前に上記ビデオ・ソースからのビデオ信号に独自のソース識別子を埋め込むエンコーダと、
該スイッチに結合され、出力用に上記スイッチが選択した上記ビデオ信号から上記独自のソース識別子を抽出するデコーダと、
上記抽出した独自のソース識別子に応じて、上記オーディオ・ソースからのオーディオ信号を遅延して、上記オーディオ信号を上記選択されたビデオ信号に時間的に合うように時刻変更をする調整可能なオーディオ遅延装置と
を具えた自動リップ・シンク・エラー補正器。
【請求項３】
複数のビデオ・ソースと、単独のオーディオ・ソースと、該オーディオ・ソース用に上記複数のビデオ・ソースの１つを選択するスイッチとを有するテレビジョン・システムにおいて、
上記スイッチに入力する前に上記ビデオ・ソースのビデオ信号に独自のソース識別子を埋め込み、
出力用に上記スイッチが選択した上記ビデオ信号から上記独自のソース識別子を抽出し、
上記抽出した独自のソース識別子に応じて、上記オーディオ・ソースからのオーディオ信号を遅延して、上記オーディオ信号を上記選択されたビデオ信号に時間的に合うように時刻変更をする
ことを特徴とする自動リップ・シンク・エラーの補正方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、一般に、テレビジョン技術に関し、特に、ビデオ信号に埋め込まれたソース識別子を用いて、調整可能なオーディオ遅延を制御する自動リップ・シンク（Lip sync）エラーの補正器及び補正方法に関する。
【０００２】
【従来の技術】
オーディオとビデオとの（Ａ／Ｖ）同期は、新たな問題ではない。テレビジョン・ソース（ビデオ及びオーディオ）は、多くの場合、それらのビデオ及びオーディオが同期して開始するので、ビデオ信号に関連したオーディオ信号は、同じ時点に生成される。この例外の１つは、長い焦点距離のレンズを用いたスポーツ・イベントの場面であり、指向性マイクロフォンによりある程度の距離でオーディオを受ける。また、野外撮影を可能とするために、無線カメラが時々用いられている。この無線カメラは、有線カメラと選択的に切り替えられる。無線カメラは、圧縮用エンコーダ／デコーダを用いている。この圧縮用エンコーダ／デコーダは、オーディオ及び有線カメラにおいて、ビデオを遅延させる。無線カメラ・システムの一部ではない分離したマイクロフォンは、信号源に近いオーディオをしばしば収集するので、有線カメラから無線カメラに切り替えられたとき、Ａ／Ｖ遅延が追加される。さらに、ビデオは、しばしば複数のビデオ・フレームにわたってデジタル処理されるので、オーディオに対してビデオが遅れて到着する。別にオーディオを更に遅延しないと、その結果、リップ・シンク・エラー（ビデオとオーディオとの時間的なずれ）が生じて、テレビジョン信号を見聞きした際に不快感が生じる。上述の場合と同様、ビデオ、即ち、映像がオーディオよりも進んだときに、特に不快である。
【０００３】
【特許文献１】
特開平１０−３０４３２２号公報
【０００４】
【発明が解決しようとする課題】
そこで、複数のビデオ・ソース（ビデオの信号源）に対して、分離したマイクロフォンをオーディオ・ソース（オーディオの信号源）として用いている場合に、各ビデオ・ソースに異なるビデオ処理遅延を導入して、ビデオ信号及びオーディオ信号が時間的に合うように時刻変更をして所望関係とし、オーディオ対ビデオ（Ａ／Ｖ）のリップ・シンク・エラーを自動的に補正する方法が望まれている。
【０００５】
したがって、本発明は、単一のオーディオ・ソースに対して複数のビデオ・ソースを切り替える場合に、リップ・シンク・エラーを自動的に補正する補正器及び補正方法を提供するものである。
【０００６】
【課題を解決するための手段】
本発明は、複数のビデオ・ソース（１４、１６）と、単独のオーディオ・ソース（１２）と、このオーディオ・ソース用に複数のビデオ・ソースの１つを選択するスイッチ（２２）とを有するテレビジョン・システムにおいて；スイッチ（２２）に入力する前にビデオ・ソースの各々からのビデオ信号に独自のソース識別子を埋め込む手段（２４）と；出力用にスイッチが選択したビデオ信号から独自のソース識別子を抽出する手段（２８）と；抽出した独自のソース識別子に応じて、オーディオ・ソースからのオーディオ信号の遅延を調整して、オーディオ信号を選択されたビデオ信号に時間的に合うように時刻変更をする手段（３０）とを具えた自動リップ・シンク・エラー補正器である。
また、本発明は、複数のビデオ・ソース（１４、１６）と、単独のオーディオ・ソース（１２）と、オーディオ・ソース用に複数のビデオ・ソースの１つを選択するスイッチ（２２）とを有するテレビジョン・システムにおいて；ビデオ・ソースの各々に結合され、スイッチに入力する前にビデオ・ソースからのビデオ信号に独自のソース識別子を埋め込むエンコーダ（２４）と；スイッチに結合され、出力用にスイッチが選択したビデオ信号から独自のソース識別子を抽出するデコーダ（２８）と；抽出した独自のソース識別子に応じて、オーディオ・ソースからのオーディオ信号を遅延して、オーディオ信号を選択されたビデオ信号に時間的に合うように時刻変更をする調整可能なオーディオ遅延装置（３０）とを具えた自動リップ・シンク・エラー補正器である。
さらに、本発明は、複数のビデオ・ソース（１４、１６）と、単独のオーディオ・ソース（１２）と、オーディオ・ソース用に複数のビデオ・ソースの１つを選択するスイッチ（２２）とを有するテレビジョン・システムにおいて；スイッチに入力する前にビデオ・ソースのビデオ信号に独自のソース識別子を埋め込み；出力用にスイッチが選択したビデオ信号から独自のソース識別子を抽出し；抽出した独自のソース識別子に応じて、オーディオ・ソースからのオーディオ信号を遅延して、オーディオ信号を選択されたビデオ信号に時間的に合うように時刻変更をすることを特徴とする自動リップ・シンク・エラーの補正方法である。
【０００７】
上述のように、本発明は、埋め込まれたビデオ・ソース識別子（ＩＤ）を用いて、調整可能なオーディオ遅延を制御して、自動リップ・シンク・エラー補正を実現している。分離した指向性マイクロフォンは、オーディオ・ソースとして作用し、有線及び無線の複数のカメラは、ビデオ・ソースとして作用する。各ビデオ・ソースからのビデオ信号は、そこに埋め込まれたソースＩＤ（ビデオ・ソースを識別するためのデータ）を具えており、このソースＩＤの各々は、垂直帰線期間におけるコード・ユーザ・ビットの形式か、ビデオ信号のアクティブ・ビデオ部分のウォータマーク形式か、又はこれら両方の形式である。これらビデオ・ソースをカメラ・スイッチに供給する。このカメラ・スイッチは、複数のビデオ信号の特定の１つを選択する。ソースＩＤは、複数のビデオ信号の選択された１つから抽出され、このＩＤを用いてルックアップ・テーブルをアクセスする。このルックアップ・テーブルは、所定ビデオ・ソースの遅延に対して、時間を合わせるために必要なオーディオの時間遅延の情報を出力する。このオーディオ時間遅延の情報を調整可能オーディオ遅延装置に供給して、オーディオ・ソースからのオーディオ信号を遅延して、複数のビデオ信号から選択された１つに時間的に合うように時刻変更する。
【０００８】
本発明の目的、利点及び新規な特徴は、添付図を参照した以下の詳細説明から更に明らかになろう。
【０００９】
【発明の実施の形態】
図１は、本発明による自動リップ・シンク・エラー補正を行うテレビジョン・システムのブロック図である。テレビジョン放送するイベントは、図においてゴルフ競技である。このイベントでは、単一の指向性マイクロフォン１２をオーディオ・ソースとして用い、複数のカメラ１４、１６をビデオ・ソースとして用いている。カメラ１４、１６には、カメラ・スイッチ２２にケーブルで直接結合されたカメラ１４と、カメラ・スイッチ２２に無線で結合されたカメラ１６との両方がある。カメラ１４、１６の各々は、マイクロフォン１２からのオーディオ信号に対して、異なる量のビデオ処理遅延がビデオ信号に加わる。特に、無線カメラ１６は、対応する有線カメラ１４よりも長く遅延したビデオを生じる。無線カメラ１６は、一般的に、ビデオ信号を圧縮エンコード（圧縮した符号にする）する。このビデオ信号は、送信器からカメラ・アンテナ１７により、受信器アンテナ１８を介して受信器２０に無線に伝送される。ここで、ビデオ信号は、圧縮デコードされる（圧縮符号を元のビデオに戻す）。
【００１０】
カメラ１４、１６の各々からのブロードバンド・ビデオ信号は、カメラ・スイッチ２２に入力する前に、ソース識別子（ＩＤ）エンコーダ２４に入力する。ソースＩＤエンコーダ２４は、垂直帰線期間時間コード（vertical interval time code:VITC）用エンコーダ、又はウォータマーク・エンコーダ、又はこれら両方でもよい。ＶＩＴＣエンコーダは、従来技術で周知のように、ＶＩＴＣユーザ・ビットにより、カメラ１４、１６の各々の独自のソースＩＤをエンコードする、即ち、ソースＩＤをビデオ信号に埋め込む。ウォータマーク・エンコーダは、ビデオ信号のアクティブ・ビデオ部分のみが伝送される場合、即ち、デジタル・ビデオ信号フォーマットの場合に非常に有用である。このウォータマーク・エンコーダは、標準ウォータマーク技術を用いて、ビデオ信号のアクティブ・ビデオ部分に、ウォータマークを埋め込むことにより、カメラ１４、１６の各々の独自のソースＩＤをエンコードする、即ち、ソースＩＤをビデオ信号に埋め込む。なお、標準ウォータマーク技術は、例えば、２００１年４月３日に発行された米国特許第６２１１９１９号「Transparent Embedment of Data in a Video Signal」に記載されている。かかる米国特許に記載されたエンコーダ装置は、ビデオ信号内にデータを透過的にエンコードする装置であって、エンコードするデータと、上記ビデオ信号に関連したビデオ・タイミング信号とからランダム化した２進パターンを発生する手段と；このランダム化した２進パターンで搬送周波数信号を変調し、サブリミナル・データ信号を発生する手段と；このサブリミナル・データ信号をビデオ信号と結合して、ビデオ信号内に透過的にエンコードされたデータを有する出力ビデオ信号を発生する手段とを具えている。カメラ・スイッチ２２は、ソースＩＤデコーダ及びオーディオ遅延装置（以下、単にデコーダ／遅延装置という）２６に供給するために、ソース識別された、即ち、ソースＩＤが埋め込まれたビデオ信号の１つを選択する。このデコーダ／遅延装置２６には、共通のオーディオ信号も入力する。
【００１１】
デコーダ／遅延装置２６は、ソースＩＤデコーダ２８と、調整可能なオーディオ遅延装置３０とを具えている。ソースＩＤデコーダ２８には、ソース識別されたビデオ信号（以下、単にソース識別ビデオ信号という）の内、選択されたビデオ信号が入力し、オーディオ遅延装置３０には、オーディオ信号が入力する。ソースＩＤデコーダ２８は、選択されたソース識別ビデオ信号からソースＩＤを抽出する。このソースＩＤに基づいて、デコーダ２８は、ルックアップ・テーブル３０をアクセスして、所定の遅延値を選択する。なお、ルックアップ・テーブル３０には、ソースＩＤで識別するカメラと、そのカメラに対応してリップ・シンク・エラーを補正するのに必要なオーディオ信号の遅延値（遅延情報）との関係が予め蓄積されている。デコーダ２８は、対応する遅延情報を遅延装置３０に供給して、オーディオ信号に与える遅延量を選択する。遅延装置３０は、この遅延量だけオーディオ信号を遅延させる。デコーダ２８からのビデオ信号出力及び遅延装置３０からのオーディオ信号出力は、プログラム・アップリンク（番組伝送路）又はサテライト・テレビジョン・リンク（ＳＴＬ）３４に、互いに同期して供給される。すなわち、オーディオがビデオに時間的に合うように時刻変更される。複数のカメラの間での遅延差は、一般に固定しており、且つ、既知である。したがって、ソフトウェアで実現してもよいルックアップ・テーブル３２には、各カメラ用のソースＩＤ毎の既知の遅延量が記録（蓄積、記憶）されている。なお、実施例では、カメラ１に対してのオーディオ遅延量は、０フィールドであり、カメラ２に対してのオーディオ遅延量は、２フィールド分であり、カメラ３に対してのオーディオ遅延量は、６フィールド分であり、カメラ４に対してのオーディオ遅延量は、４フィールド分である。
【００１２】
【発明の効果】
よって、本発明は、多数のビデオ・ソースに対する分離したオーディオ・ソースを有するテレビジョン・システムにおいて、リップ・シンク・エラーを自動的に補正できる。本発明は、このために、ソースＩＤを各ビデオ信号に埋め込み、これら複数のビデオ・ソースの１つを選択し、この選択されたビデオ・ソースのビデオ信号からソースＩＤを抽出し、この抽出したソースＩＤに応じて、調整可能なオーディオ遅延装置の遅延を適切な値に選択している。したがって、本発明は、オーディオ・ソースからのオーディオ信号を、選択したビデオ信号に時間的に合うように時刻変更することができる、即ち、オーディオ信号をビデオ信号に時間合わせすることができ、リップ・シンク・エラーを自動的に補正できる。
【図面の簡単な説明】
【図１】異なるビデオ遅延の多数のカメラと、分離した共通マイクロフォンとを有し、本発明による自動リップ・シンク・エラー補正を行うテレビジョン・システムのブロック図である。
【符号の説明】
１２  マイクロフォン
１４、１６  カメラ
２０  受信器
２２  カメラ・スイッチ
２４  ソースＩＤエンコーダ
２６  ソースＩＤデコーダ及びオーディオ遅延装置
２８  ソースＩＤデコーダ
３０  調整可能なオーディオ遅延装置
３２  ルックアップ・テーブル
３４  プログラム・アップリンク又はＳＴＬ
【図１】
0003803713.tif 000002