(57)【要約】【課題】本発明は、リップシンク検査装置に関し、例えばリップシンクの調整、検査に適用して、従来に比して精度よく時間ずれを検出できるようにする。【解決手段】本発明は、時間経過により順次周波数が変化するスイープ信号によりリップシンク用音声信号ＳＡを生成し、リップシンク用映像信号ＳＶによる映像の切り換わりでリップシンク用音声信号ＳＡの周波数を検出して時間ずれを検出するようにして、リップシンク用映像信号ＳＶによる映像光をリップシンク用音声信号ＳＡで変調して受光する。【選択図】        図１
2007329603.tif 000002
【特許請求の範囲】
【請求項１】
時間経過により順次周波数が変化するスイープ信号によるリップシンク用音声信号と、前記リップシンク用音声信号に同期した所定のタイミングで映像が変化するリップシンク用映像信号とのモニタ装置からの出力から、リップシンクの時間ずれを検出するリップシンク検査装置であって、
前記リップシンク用音声信号の前記モニタ装置の出力で、前記モニタ装置から出力される前記リップシンク用映像信号の映像光を変調する光変調手段と、
前記光変調手段で変調された前記映像光を受光する受光手段と、
前記受光手段の出力信号から、前記リップシンク用映像信号の前記映像の切り換わりのタイミングを検出し、該タイミングにおける前記出力信号の前記リップシンク用音声信号成分の周波数を検出することで、前記時間ずれを検出する周波数検出手段とを備える
ことを特徴とするリップシンク検査装置。
【請求項２】
前記周波数検出手段が、
前記受光素子の出力信号を周波数解析する周波数解析手段である
ことを特徴とする請求項１に記載のリップシンク検査装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、リップシンク検査装置に関し、例えばリップシンクの調整、検査に適用することができる。本発明は、時間経過により順次周波数が変化するスイープ信号によりリップシンク用音声信号を生成し、リップシンク用映像信号による映像の切り換わりでリップシンク用音声信号の周波数を検出して時間ずれを検出するようにして、リップシンク用映像信号による映像光をリップシンク用音声信号で変調して受光することにより、従来に比して検出精度を向上できるようにする。
【背景技術】
【０００２】
従来、放送局等においては、映像信号及び音声信号が異なる伝送路により伝送される等により、映像と音声との間に時間のずれが発生する。このため放送局においては、テスト用の映像信号及び音声信号（以下、リップシンク映像信号及びリップシンク音声信号と呼ぶ）を送信側より受信側に伝送すると共に、これらの伝送されたリップシンク信号を受信側で解析することにより、時間のずれを測定、補正し、リップシンクを図るようになされている。
【０００３】
このようなリップシンクに関して、従来、専用装置を送受信側にそれぞれ配置して時間のずれを測定する方法と、モニタ装置を用いて視覚と聴覚とにより時間のずれを検出する方法があり、専用装置による場合には、数ミリ秒単位で時間のずれを検出することができる。
【０００４】
このような専用装置に関して、例えば特開平１０−２８５４８３号公報、特開２００１−３２６９５０号公報等に種々の工夫が提案されている。
【０００５】
ところで専用装置を用いてモニタ装置より得られる映像と音声との時間ずれを検出する場合、結局、スピーカ出力から音声信号を取得するマイク等による音声用のセンサと、表示画面における映像の変化を検出する受光素子等による映像用のセンサ等が必要になる。これによりこの場合、結局、２系統のセンサ出力を処理することが必要になり、これら２系統の処理系における遅延時間の差等により検出精度が劣化する問題があった。
【特許文献１】特開平１０−２８５４８３号公報
【特許文献２】特開２００１−３２６９５０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
本発明は以上の点を考慮してなされたもので、従来に比して検出精度を向上することができるリップシンク検査装置を提案しようとするものである。
【課題を解決するための手段】
【０００７】
かかる課題を解決するため請求項１の発明は、時間経過により順次周波数が変化するスイープ信号によるリップシンク用音声信号と、前記リップシンク用音声信号に同期した所定のタイミングで映像が変化するリップシンク用映像信号とのモニタ装置からの出力から、リップシンクの時間ずれを検出するリップシンク検査装置であって、前記リップシンク用音声信号の前記モニタ装置の出力で、前記モニタ装置から出力される前記リップシンク用映像信号の映像光を変調する光変調手段と、前記光変調手段で変調された前記映像光を受光する受光手段と、前記受光手段の出力信号から、前記リップシンク用映像信号の前記映像の切り換わりのタイミングを検出し、該タイミングにおける前記出力信号の前記リップシンク用音声信号成分の周波数を検出することで、前記時間ずれを検出する周波数検出手段とを備えるようにする。
【０００８】
また請求項２の構成は請求項１の構成において、前記周波数検出手段が、前記受光素子の出力信号を周波数解析する周波数解析手段であるようにする。
【０００９】
時間経過により順次周波数が変化するスイープ信号によるリップシンク用音声信号と、前記リップシンク用映像信号に同期した所定のタイミングで映像が変化するリップシンク用映像信号とによりリップシンクの時間ずれを検出する場合には、リップシンク用映像信号で映像が切り換わったタイミングにおけるリップシンク用音声信号の周波数を検出することにより、時間ずれを検出することができる。従って請求項１の構成により、前記リップシンク用音声信号の前記モニタ装置の出力で、前記モニタ装置から出力される前記リップシンク用映像信号の映像光を変調する光変調手段と、前記光変調手段で変調された前記映像光を受光する受光手段と、前記受光手段の出力信号から、前記リップシンク用映像信号の前記映像の切り換わりのタイミングを検出し、該タイミングにおける前記出力信号の前記リップシンク用音声信号成分の周波数を検出することで、前記時間ずれを検出する周波数検出手段とを備えるようにすれば、１系統のセンサ出力の処理により時間ずれを検出することができ、音声用と映像用との２系統のセンサ出力を処理する場合に比して、時間ずれの検出精度を向上することができる。
【００１０】
また請求項２の構成により、請求項１の構成において、前記周波数検出手段が、前記受光素子の出力信号を周波数解析する周波数解析手段であるようにすれば、フーリエ変換等の処理により時間ずれを検出することができる。
【発明の効果】
【００１１】
本発明によれば、従来に比してリップシンクの時間ずれ検出精度を向上することができる。
【発明を実施するための最良の形態】
【００１２】
以下、適宜図面を参照しながら本発明の実施例を詳述する。
【実施例１】
【００１３】
（１）実施例の構成
図１は、本発明の実施例１のリップシンク検査装置によるリップシンク検査システムを示すブロック図である。このリップシンク検査システム１は、リップシンク用信号発生装置２で生成したリップシンク用映像信号ＳＶ及びリップシンク用音声信号ＳＡを、直接に、又は伝送路、放送設備等を介して、モニタ装置３に入力する。またこのモニタ装置３のモニタ出力をリップシンク用検査装置４で処理して、リップシンクの時間ずれを検出する。
【００１４】
このためリップシンク用信号発生装置２は、リップシンク用映像信号ＳＶ及びリップシンク用音声信号ＳＡを生成する。すなわちリップシンク用信号発生装置２において、音声信号発生回路５は、図示しないトリガ信号発生回路から出力されるトリガ信号ＳＴを基準にして、時間経過により順次周波数が変化するスイープ信号によりリップシンク用音声信号ＳＡを繰り返し生成する。音声信号発生回路５では、このリップシンク用音声信号ＳＡにおける１回のスイープの期間が、リップシンク用映像信号ＳＶの複数フレームの期間に設定され、これにより複数フレーム周期で、リップシンク用音声信号ＳＡにおける周波数のスイープを繰り返す。
【００１５】
映像信号発生回路６は、トリガ信号ＳＴを基準にして、リップシンク用音声信号ＳＡに同期して映像が切り換わるように、リップシンク用映像信号ＳＶを生成する。より具体的に、この実施例では、リップシンク用音声信号ＳＡにおける１回のスイープのほぼ中間のフレームで、全面黒表示の映像から全面白表示の映像に切り換わった後、リップシンク用音声信号ＳＡで１回のスイープが終了すると、元の表示に切り換わるように、映像信号ＳＶを生成する。
【００１６】
これによりこのリップシンク検査システム１では、リップシンク用映像信号ＳＶによる映像が切り換わったタイミングで、リップシンク用音声信号ＳＡの周波数を検出して、何ら時間ずれが無い場合の周波数との差分を検出すれば、リップシンクにおける時間ずれを検出できるように構成されている。
【００１７】
リップシンク検査装置４は、このリップシンク用音声信号ＳＡのモニタ装置３の出力で、モニタ装置３から出力されるリップシンク用映像信号ＳＶの映像光を変調する光変調手段が設けられる。すなわちリップシンク検査装置４では、モニタ画面の正面にミラー１１が配置され、モニタ画面から出射される映像光がこのミラー１１で折り曲げられて、振動ミラー１２に導かれる。ここで振動ミラー１２は、モニタ装置３から出力されるリップシンク用音声信号ＳＡの出力により振動して、ミラー１１から到来する映像光の反射方向を可変するように構成され、リップシンク検査装置４では、この振動ミラー１２による映像光の出射方向に受光素子１３が配置される。なお振動ミラー１２は、単にスピーカの前に配置してスピーカからの音圧により振動するようにしてもよく、またボイスコイルモーター等の駆動手段を用いてリップシンク音声信号により振動させてもよい。
【００１８】
これによりリップシンク検査装置４では、この振動ミラー１２により受光素子１３に入射する映像光を、モニタ装置３の音声出力で変調する光変調手段が構成される。なおこの変調手段は、光通信等に使用される光変調手段等、種々の変調手段を広く適用することができる。
【００１９】
リップシンク検査装置４は、この受光素子１３の出力信号を図示しない増幅回路で増幅した後、ローパスフィルタ（ＬＰＦ）１４及びハイパスフィルタ（ＨＰＦ）１５により映像光成分及び音声成分に分離する。またタイミング生成手段１６において、ローパスフィルタ１４の出力信号を所定のしきい値で判定することにより、リップシンク用映像信号ＳＶの映像の切り換わりに対応するタイミングで信号レベルが立ち上がるタイミング信号を生成する。またカウンタ１７で、このタイミング信号の立ち上がりを条件に、ハイパスフィルタ１５の出力信号の１周期で所定の基準信号をカウントし、これによりリップシンク用映像信号ＳＶの映像が切り換わったタイミングにおけるリップシンク用音声信号ＳＡの周波数を検出する。
【００２０】
時間ずれ計算回路１８は、このカウンタ１７のカウント値を、事前に記録されている、何ら時間ずれが無い場合のこのカウンタ１７のカウント値から減算し、減算結果を時間に換算し、これによりリップシンクにおける時間ずれを検出する。このリップシンク検査装置４では、この時間ずれ計算回路１８の計算結果を図示しない表示手段で表示する。
【００２１】
（２）実施例の動作
以上の構成において、このリップシンク検査システム１では、時間経過により順次周波数が変化するスイープ信号によるリップシンク用音声信号ＳＡと、このリップシンク用音声信号に同期した所定のタイミングで映像が変化するリップシンク用映像信号ＳＶとがリップシンク信号発生装置２で生成され、このリップシンク用映像信号ＳＶ及びリップシンク用音声信号ＳＡが、直接に、又は伝送路、放送設備等を介して、モニタ装置３に入力される。
【００２２】
従ってこのモニタ装置３のモニタ出力では、何らリップシンク用音声信号ＳＡ及びリップシンク用映像信号ＳＶに時間ずれが発生していない場合には、リップシンク信号発生装置２から出力される位相関係のままで、リップシンク用音声信号ＳＡ及びリップシンク用映像信号ＳＶが出力され、これによりリップシンク用映像信号ＳＶによる映像が切り換わったタイミングで検出されるリップシンク用音声信号ＳＡの周波数を、リップシンク信号発生回路２からの出力時点と比較して時間ずれを検出することができる。
【００２３】
このリップシンク検査システム１では、この検出原理により、タイミング生成回路１６でリップシンク用映像信号ＳＶにおける映像の切り換わりが検出されてタイミング信号が生成され、このタイミング信号を基準にしてカウンタ１７でリップシンク用音声信号ＳＡの周波数が検出される。また何ら時間ずれが無い場合のカウント値との差分値が計算されて時間ずれが検出される。
【００２４】
しかしながらこのようなモニタ出力による映像及び音声をそれぞれ別のセンサで検出して処理していたのでは、これらのセンサの処理系における遅延時間差、センサ間の特性のばらつき等が時間ずれ検出結果に重畳されることになり、その分、検出精度が低下することになる。
【００２５】
このためこのリップシンク検査装置４では、ミラー１１で映像光の光路を折り曲げて振動ミラー１２に入射し、音声出力によるこの振動ミラー１２の振動により、映像光の光路を振動させ、映像光をリップシンク用音声信号出力により変調する。またこの変調結果を受光素子１３で受光して一連の処理を実行する。
【００２６】
従ってこの実施例では、映像及び音声のセンサ入力を１系統とすることができ、その分、複数系統による各種検出精度の劣化を防止することができる。またこの実施例では、受光素子１３の出力信号に時間ずれ情報が重畳されていることにより、この受光素子１３の出力信号を伝送して遠隔地で時間ずれを検出することもできる。またこれに代えて振動ミラー１２の出力光を光ファイバーで伝送して遠隔地で時間ずれを検出することもでき、その分、種々の施設におけるリップシンクの時間ずれを少ない設備で検査することができる。
【００２７】
（３）実施例の効果
以上の構成によれば、時間経過により順次周波数が変化するスイープ信号によりリップシンク用音声信号を生成し、リップシンク用映像信号による映像の切り換わりでリップシンク用音声信号の周波数を検出して時間ずれを検出するようにして、リップシンク用映像信号による映像光をリップシンク用音声信号で変調して受光することにより、従来に比して検出精度を向上できる。
【実施例２】
【００２８】
この実施例において、リップシンク検査装置は、受光素子１３の出力信号をアナログディジタル変換処理して高速フーリエ変換処理し、これにより受光素子１３の出力信号を周波数解析する。またこの周波数解析結果を映像の切り換わりでサンプリングし、これによりリップシンク用映像信号による映像の切り換わりでリップシンク用音声信号の周波数を検出する。この実施例では、この周波数の検出手法が異なる点を除いて、実施例１と同一に構成される。
【００２９】
この実施例によれば、周波数検出手段が、受光素子の出力信号を周波数解析する周波数解析手段である場合でも、実施例１と同様の効果を得ることができる。
【産業上の利用可能性】
【００３０】
本発明は、リップシンク検査装置に関し、例えばリップシンクの調整、検査に適用することができる。
【図面の簡単な説明】
【００３１】
【図１】本発明の実施例１に係るリップシンク検査装置によるリップシンク検査システムを示すブロック図である。
【符号の説明】
【００３２】
１……リップシンク検査システム、２……リップシンク信号発生装置、３……モニタ装置、４……リップシンク検査装置
【図１】
2007329603.tif 000003