(57)【要約】【課題】本発明は、リップシンク信号発生装置に関し、例えばリップシンクの調整、検査に適用して、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができるようにする。【解決手段】本発明は、等間隔により配置した固定マーカー６を一定速度による移動マーカー７が横切るようにして、移動マーカー７が固定マーカー６を横切るタイミングでリップシンク音声信号を立ち上げる。【選択図】        図１
2007043652.tif 000002
【特許請求の範囲】
【請求項１】
リップシンク用映像信号を生成する映像信号発生回路と、前記リップシンク用映像信号に対応するリップシンク用音声信号を生成する音声信号発生回路とを有するリップシンク信号発生装置において、
前記リップシンク用映像信号は、
複数の固定マーカーと移動マーカーとを表示する映像信号であり、
前記複数の固定マーカーは、
一定の間隔により一の方向に順次並べて配置され、
前記移動マーカーは、
前記一の方向に、一定の速度により、前記複数の固定マーカーを順次横切って移動し、  前記リップシンク用音声信号は、
前記移動マーカーが前記固定マーカーを横切るタイミングで信号レベルが立ち上がる音声信号である
ことを特徴とするリップシンク信号発生装置。
【請求項２】
前記固定マーカーが、
前記一の方向と直交する方向に細長く形成され、
前記移動マーカーが、
前記固定マーカーと同一の幅により、前記一の方向と直交する方向に、前記固定マーカーより長く延長するように形成された
ことを特徴とする請求項１に記載のリップシンク信号発生装置。
【請求項３】
前記リップシンク用映像信号は、
前記複数の固定マーカー及び移動マーカーに加えて、複数のサブ固定マーカーを表示する映像信号であり、
前記サブ固定マーカーは、
前記固定マーカー毎に、対応する前記固定マーカーから前記一の方向に所定の間隔だけ離間して配置され、
前記間隔が、
前記一の方向に順次段階的に広がるように、又は狭くなるように設定された
ことを特徴とする請求項１に記載のリップシンク信号発生装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、リップシンク信号発生装置に関し、例えばリップシンクの調整、検査に適用することができる。本発明は、等間隔により配置した固定マーカーを一定速度による移動マーカーが横切るようにして、移動マーカーが固定マーカーを横切るタイミングでリップシンク音声信号を立ち上げることにより、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができるようにする。
【背景技術】
【０００２】
従来、放送局等においては、映像信号及び音声信号が異なる伝送路により伝送される等により、映像と音声との間に時間のずれが発生する。このため放送局においては、テスト用の映像信号及び音声信号（以下、リップシンク映像信号及びリップシンク音声信号と呼ぶ）を送信側より受信側に伝送すると共に、これらの伝送されたリップシンク信号を受信側で解析することにより、時間のずれを測定、補正し、リップシンクを図るようになされている。
【０００３】
このようなリップシンクに関して、従来、専用装置を送受信側にそれぞれ配置して時間のずれを測定する方法と、モニタ装置を用いて視覚と聴覚とにより時間のずれを検出する方法があり、専用装置による場合には、数ミリ秒単位で時間のずれを検出することができる。
【０００４】
このような専用装置に関して、例えば特開平１０−２８５４８３号公報には、専用装置の構成を簡略化する方法が提案されている。
【０００５】
これに対してモニタ装置を用いて視覚と聴覚とにより時間のずれを検出する方法に関しては、特開２００３−４７０３０号公報等に種々の工夫が提案されている。
【０００６】
ここでこの特開２００３−４７０３０号公報に提案の方法は、静止物体に移動物体が徐々に接近する映像を表示するようにリップシンク映像信号を生成し、静止物体に移動物体が接触したタイミングでリップシンク音声信号を立ち上げ、これによりモニタ装置を用いて、視覚、聴覚により時間のずれを簡易に確認することができるようになされている。
【０００７】
ところでこのようにモニタ装置を用いて視覚、聴覚により時間のずれを確認する場合に、検出精度を向上することができれば、一段と使い勝手を向上することができ、便利であると考えられる。
【特許文献１】特開平１０−２８５４８３号公報
【特許文献２】特開２００３−４７０３０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
本発明は以上の点を考慮してなされたもので、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができるリップシンク信号発生装置を提案しようとするものである。
【課題を解決するための手段】
【０００９】
かかる課題を解決するため請求項１の発明は、リップシンク用映像信号を生成する映像信号発生回路と、前記リップシンク用映像信号に対応するリップシンク用音声信号を生成する音声信号発生回路とを有するリップシンク信号発生装置に適用して、前記リップシンク用映像信号は、複数の固定マーカーと移動マーカーとを表示する映像信号であり、前記複数の固定マーカーは、一定の間隔により一の方向に順次並べて配置され、前記移動マーカーは、前記一の方向に、一定の速度により、前記複数の固定マーカーを順次横切って移動し、前記リップシンク用音声信号は、前記移動マーカーが前記固定マーカーを横切るタイミングで信号レベルが立ち上がる音声信号であるようにする。
【００１０】
また請求項２の発明は、請求項１の構成において、前記固定マーカーが、前記一の方向と直交する方向に細長く形成され、前記移動マーカーが、前記固定マーカーと同一の幅により、前記一の方向と直交する方向に、前記固定マーカーより長く延長するように形成されてなるようにする。
【００１１】
また請求項３の発明は、請求項１の構成において、前記リップシンク用映像信号は、前記複数の固定マーカー及び移動マーカーに加えて、複数のサブ固定マーカーを表示する映像信号であり、前記サブ固定マーカーは、前記固定マーカー毎に、対応する前記固定マーカーから前記一の方向に所定の間隔だけ離間して配置され、前記間隔が、前記一の方向に順次段階的に広がるように、又は狭くなるように設定されてなるようにする。
【００１２】
請求項１の構成により、リップシンク用映像信号を生成する映像信号発生回路と、前記リップシンク用映像信号に対応するリップシンク用音声信号を生成する音声信号発生回路とを有するリップシンク信号発生装置に適用して、前記リップシンク用映像信号は、複数の固定マーカーと移動マーカーとを表示する映像信号であり、前記複数の固定マーカーは、一定の間隔により一の方向に順次並べて配置され、前記移動マーカーは、前記一の方向に、一定の速度により、前記複数の固定マーカーを順次横切って移動し、前記リップシンク用音声信号は、前記移動マーカーが前記固定マーカーを横切るタイミングで信号レベルが立ち上がる音声信号であるようにすれば、モニタ装置を用いて、リップシンク用映像信号とリップシンク用音声信号との時間のずれを視覚、聴覚により簡易に確認することができる。このような時間のずれを確認する場合、複数の固定マーカーと移動マーカーとの表示において一定の間隔により配置した固定マーカーを一定の速度による移動マーカーが横切るようにして、一定の時間間隔により時間のずれを繰り返し確認することになる。この場合、視覚と聴覚とが徐々に研ぎ澄まされ、これにより時間のずれの検出精度を向上することができる。これにより映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができる。
【００１３】
また請求項２の構成により、請求項１の構成において、前記固定マーカーが、前記一の方向と直交する方向に細長く形成され、前記移動マーカーが、前記固定マーカーと同一の幅により、前記一の方向と直交する方向に、前記固定マーカーより長く延長するように形成されてなるようにすれば、移動マーカーが固定マーカーを横切る瞬間を把握容易とすることができ、これによっても高い精度により時間のずれを検出することができる。
【００１４】
また請求項３の構成により、請求項１の構成において、前記リップシンク用映像信号は、前記複数の固定マーカー及び移動マーカーに加えて、複数のサブ固定マーカーを表示する映像信号であり、前記サブ固定マーカーは、前記固定マーカー毎に、対応する前記固定マーカーから前記一の方向に所定の間隔だけ離間して配置され、前記間隔が、前記一の方向に順次段階的に広がるように、又は狭くなるように設定されてなるようにすれば、映像信号と音声信号とのずれが大きい場合でも、サブの固定マーカーを利用してずれ量を精度良く検出することができる。
【発明の効果】
【００１５】
本発明によれば、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができる。
【発明を実施するための最良の形態】
【００１６】
以下、適宜図面を参照しながら本発明の実施例を詳述する。
【実施例１】
【００１７】
（１）実施例の構成
図２は、本発明の実施例に係るリップシンク信号発生装置を示すブロック図である。このリップシンク信号発生装置１は、モニタ装置２を用いて視覚と聴覚により映像と音声の時間ずれを検出する場合に適用される。これによりこのリップシンク信号発生装置１は、被測定対象３である伝送路、信号処理回路等を介してリップシンク信号ＳＬが伝送され、伝送端でリップシンク信号ＳＬがモニタ装置２によりモニタされる。なおここでこのモニタ装置２には、例えばハイビジョンテレビのテレビジョン受像機等が適用される。
【００１８】
ここでこのリップシンク信号発生装置１において、映像信号発生回路４は、図示しないトリガ信号発生回路から出力されるトリガ信号ＳＴを基準にして、リップシンク映像信号ＳＶを生成して出力する。
【００１９】
ここで図１は、リップシンク映像信号ＳＶをモニタ装置２で表示した状態により示す平面図であり、このリップシンク映像信号ＳＶは、図１（Ａ）及び（Ｂ）に示すように、複数の固定マーカー６と移動マーカー７との映像を表示する。
【００２０】
ここで映像信号ＳＶによる映像は、画面全体を画面の縦方向に３分割した中央部分に帯状の背景９が設けられる。固定マーカー６は、この帯状の背景９の延長する方向と直交する方向に細長く延長するように同一形状により形成され、この帯状の背景９の上に、一定の間隔Ａにより順次並べられて表示される。具体的に固定マーカー６は、長方形形状により形成されて４本設けられ、隣接する固定マーカー６間の間隔Ａが、画面（有効表示領域）の横方向の長さの１／６の長さに設定される。また最も左端の固定マーカー６と画面の左端との間隔Ｂ１、最も右端の固定マーカー６と画面の右端との間隔Ｂ２が、画面の横方向の長さの１／４の長さに設定される。なおこれらの間隔Ａ及びＢ１は、本発明の趣旨を逸脱しない範囲で、種々に設定することができる。
【００２１】
移動マーカー７は、この固定マーカー６を順次横切る方向である固定マーカー６の並び方向に一定の速度により移動するように表示される。移動マーカー７は、このように順次移動して、各固定マーカー６を横切る瞬間に、固定マーカー６を完全に覆い隠すように、固定マーカー６と同一の幅により形成される。また移動マーカー７は、現在位置を簡易かつ確実に把握できるように、固定マーカー６の長さより長く延長した形状により形成されて背景９より飛び出すように形成される。
【００２２】
このようにして固定マーカー６、移動マーカー７を表示して、これら固定マーカー６、移動マーカー７を容易に識別できるように、固定マーカー６及び移動マーカー７は、それぞれ白色、黒色により形成される。また移動マーカー７が固定マーカー６を覆い隠した瞬間を容易に把握可能に、帯状の背景９は、移動マーカー７と同一色により表示される。またこの背景９の上下の背景８は、灰色により表示される。
【００２３】
また移動マーカー７は、画面の左端から移動を開始して画面の右端まで移動し、この移動を繰り返す。この実施例では、この繰り返しによる１周期が６秒に設定され、これにより移動マーカー７は、１秒毎に固定マーカー６を横切り、右端の固定マーカー６を横切った後に、再び左端から移動を開始して左端の固定マーカー６を横切るまでに、３秒の期間を要するように設定される。
【００２４】
しかしてこのようにして固定マーカー６を順次横切るように移動マーカー７を移動させて、固定マーカー６を細長に形成した場合、移動マーカー７が固定マーカー６を覆い隠す期間は、人間が瞬きするよりも短い時間となる。これによりオペレータにあっては、移動マーカー７が固定マーカー６を横切る瞬間を確実に把握できない恐れもある。
【００２５】
このためこの実施例では、移動マーカー７が固定マーカー６を完全に覆い隠した後、移動マーカー７の移動により固定マーカー６が徐々に現れて完全に現れるまでの期間が、数十ミリ秒の期間となるように、固定マーカー６及び移動マーカー７の幅が設定され、これにより移動マーカー７が固定マーカー６を横切るタイミングを確実に把握できるようになされている。
【００２６】
音声信号発生回路５は、トリガ信号発生回路から出力されるトリガ信号ＳＴを基準にして、移動マーカー７が固定マーカー６を横切るタイミングで信号レベルが立ち上がるように、リップシンク音声信号ＳＡを生成して出力する。
【００２７】
（２）実施例の動作
このリップシンク信号発生装置１では（図１及び図２）、複数の固定マーカー６が一定の間隔により配置された状態で、この固定マーカー６を順次横切って移動マーカー７が移動するように映像信号ＳＶが生成される。またこの移動マーカー７が固定マーカー６を横切るタイミングで音声信号ＳＡの信号レベルが立ち上げられる。
【００２８】
これによりこのリップシンク信号発生装置１によるリップシンク映像信号ＳＶ及びリップシンク音声信号ＳＡを被測定対象３を介してモニタ装置２によりモニタするようにして、移動マーカー７が固定マーカー６を横切るタイミングを視覚により把握し、リップシンク音声信号ＳＡの信号レベルが立ち上がるタイミングを聴覚により把握し、これらのタイミングのずれを確認して、被測定対象３によるリップシンク映像信号ＳＶとリップシンク音声信号ＳＡとの時間のずれを確認することができる。
【００２９】
しかしてこの実施例では、この固定マーカー６が一定の間隔Ａにより配置されて、移動マーカー７が一定の速度により順次移動して固定マーカー６を横切ることにより、リップシンク映像信号ＳＶ及びリップシンク音声信号ＳＡの時間のずれをモニタ装置２により確認する場合、一定の時間間隔により、例えば始めの固定マーカー６を横切る際に、時間のずれを確認し損なった場合でも、続く固定マーカー６により時間のずれを確認することができ、これによりいわゆる取りこぼしを有効に回避して確実に時間のずれを確認することができる。
【００３０】
またこのようにして時間のずれを確認する場合、一定の時間間隔により時間のずれを繰り返し確認することになり、この場合、オペレータにおいては、視覚と聴覚とが徐々に研ぎ澄まされ、これにより時間のずれの検出精度を向上することができる。これによりこの実施例では、数十ミリ秒程度の精度により時間のずれを検出することができ、これにより映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができる。
【００３１】
またこのようにして固定マーカー６を順次横切るように移動マーカー７を移動させて、これらマーカー６、７を細長い形状により形成し、移動マーカー７が固定マーカー６を完全に覆い隠した後、移動マーカー７の移動により固定マーカー６が徐々に現れて完全に現れるまでの期間が数十ミリ秒の期間となるように、固定マーカー６及び移動マーカー７の幅を設定したことにより、固定マーカー６にあっては、移動マーカー７により覆い隠された後、あたかもフェードインするかのように徐々に現れることになる。これによりオペレータにあっては、固定マーカー６を移動マーカー７が横切る瞬間を容易に把握することができる。
【００３２】
またこのような固定マーカー６に比して移動マーカー７の長さを長く延長させたことによっても、固定マーカー６を移動マーカー７が横切る瞬間を把握容易とすることができ、これによっても高い精度により時間のずれを検出できるようになされている。
【００３３】
またこのような移動マーカー７が一方の側まで移動すると、始めの位置より移動を開始するようにして移動マーカー７の移動が繰り返され、画面の両端では固定マーカー６までの間隔Ｂ１、Ｂ２が広く設定されており、これにより固定マーカー６の数の分だけ一定の時間間隔でリップシンク音声信号ＳＡが立ち上がった後、一定のインターバルを間に挟んで、再びリップシンク音声信号ＳＡが立ち上がるようになる。
【００３４】
これによりオペレータにおいては、リップシンク音声信号ＳＡに対してリップシンク映像信号ＳＶが進み位相の場合に、固定マーカー６を間違えて、リップシンク映像信号ＳＶを進み位相とするような状態を有効に回避することができる。
【００３５】
（３）実施例の効果
以上の構成によれば、等間隔により配置した固定マーカーを一定速度による移動マーカーが横切るようにして、移動マーカーが固定マーカーを横切るタイミングでリップシンク音声信号を立ち上げることにより、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができる。
【００３６】
またこの固定マーカーを細長く形成し、移動マーカーを固定マーカーと同一の幅により、固定マーカーより長く延長するように形成することにより、移動マーカーが固定マーカーを横切る瞬間を把握容易とすることができ、これによっても高い精度により時間のずれを検出することができる。
【実施例２】
【００３７】
図３は、図１との対比により本発明の実施例２に係るリップシンク信号発生装置による映像信号の映像を示す平面図である。このリップシンク信号発生装置では、矩形形状によるウインドウにより固定マーカーが形成される。なおこの実施例では、この固定マーカーに係る構成が異なる点を除いて実施例１と同一に構成される。
【００３８】
ここでこの固定マーカー１６は、中央の帯状の背景９の上に横方向に並んで、２個配置される。またこの固定マーカー１６を移動マーカー７が横切っている期間の間、リップシンク音声信号の信号レベルが立ち上げられる。
【００３９】
この実施例のように四角形形状により固定マーカー１６を形成するようにしても、実施例１と同様の効果を得ることができる。
【実施例３】
【００４０】
ところで実施例１で上述したリップシンク信号発生装置を使用する場合に、リップシンク音声信号とリップシンク映像信号とのずれ量が小さい場合、リップシンク音声信号が立ち上がった時点における固定マーカーと移動マーカーとのずれ量により、リップシンク音声信号とリップシンク映像信号とのずれ量を概ね正確に把握することができる。従ってこの場合、迅速に音声信号と映像信号とのずれを補正することができる。
【００４１】
しかしながらリップシンク音声信号とリップシンク映像信号とのずれ量が大きい場合、リップシンク音声信号が立ち上がった時点における固定マーカーと移動マーカーとのずれ量も大きく、この場合、リップシンク音声信号とリップシンク映像信号とのずれ量を精度良く検出できなくなる。従って、この場合、迅速に音声信号と映像信号とのずれを補正することが困難になる。
【００４２】
このためこの実施例では、図４に示すように、各固定マーカー６に、それぞれサブ固定マーカー２６を設けるようにする。なおこの実施例では、このサブ固定マーカー２６に関する構成が異なる点を除いて実施例１と同一に構成される。従ってこの実施例において、実施例１と同一の構成は、対応する符号を付して示し、重複した説明は省略する。
【００４３】
ここでこの実施例においては、画面中央の帯状の背景２９が幅広く形成され、固定マーカー６の上下にそれぞれスペースが形成される。サブ固定マーカー２６は、対応する固定マーカー６に対する移動マーカー７のずれ量を検出するための目盛りとして機能し、このため固定マーカー２６と識別可能に、固定マーカー２６に比して長さの短い略矩形形状により形成される。
【００４４】
サブ固定マーカー２６は、背景２９に形成された各固定マーカー６の上下のスペースに配置される。またサブ固定マーカー２６は、固定マーカー６の並び方向に、対応する固定マーカー６から所定距離だけ離間して配置される。
【００４５】
サブ固定マーカー２６は、この並び方向の対応する固定マーカー６との間の間隔が、並び方向に順次段階的に増減するように設定される。具体的に、サブ固定マーカー２６は、固定マーカー６の上側では、移動マーカー７の移動方向に、対応する固定マーカー６との間の間隔が、順次段階的に小さくなるように配置され、移動終了端では、この間隔が０となるように設定される。またこれとは逆に、固定マーカー６の下側では、移動マーカー７の移動開始端で、この間隔が０となるように設定されて、対応する固定マーカー６との間の間隔が、移動マーカー７の移動方向に、順次段階的に大きくなるように配置される。
【００４６】
これによりこの実施例では、リップシンク音声信号とリップシンク映像信号とのずれ量が大きくなって、リップシンク音声信号が立ち上がった時点における固定マーカーと移動マーカーとのずれ量も大きい場合でも、何れかのサブ固定マーカーと移動マーカーとの間ではリップシンク音声信号が立ち上がった時点でのずれ量が小さくなるように設定され、このずれ量の小さなサブ固定マーカーを基準にして、リップシンク音声信号が立ち上がった時点における固定マーカーと移動マーカーとのずれ量を精度良く把握できるようになされている。
【００４７】
なおこのためこの実施例では、各サブ固定マーカーに、リップシンク映像信号に対するリップシンク音声信号のずれ量が併せて表示されるようになされている。すなわちこの図４の例では、リップシンク音声信号の信号レベルが立ち上がった時点で、最も左端のサブ固定マーカー２６を移動マーカー７が横切っている場合、リップシンク映像信号に対してリップシンク音声信号が−５００〔ｍｓｅｃ〕だけ遅延していることが表されていることになる。
【００４８】
この実施例によれば、対応する固定マーカーに対する移動マーカーのずれ量を検出するための目盛りとしてサブ固定マーカーを各固定マーカーに設けることにより、音声信号と映像信号とのずれ量が大きい場合でも、精度良くずれ量を検出することができる。
【実施例４】
【００４９】
なお上述の実施例においては、移動マーカーを一定幅による縦長形状により形成する場合について述べたが、本発明はこれに限らず、例えば図１との対比により図５に示すように、さらに矢印を加えて表示するようにしてもよい。
【００５０】
また上述の実施例においては、画面の横方向に固定マーカーを４個又は２個並べて配置し、画面の左端から画面の右端に移動マーカーを移動させる場合について述べたが、本発明はこれに限らず、固定マーカーの並ぶ方向、固定マーカーの個数、移動マーカーの移動方向等にあっては、種々に選定することができる。
【００５１】
また上述の実施例においては、単にリップシンク映像信号、リップシンク音声信号を生成する構成に本発明を適用する場合について述べたが、本発明はこれに限らず、このようにして生成したリップシンク映像信号、リップシンク音声信号により時間のずれを検出して自動補正する場合等にも広く適用することができる。
【産業上の利用可能性】
【００５２】
本発明は、リップシンク信号発生装置に関し、例えばリップシンクの調整、検査に適用することができる。
【図面の簡単な説明】
【００５３】
【図１】本発明の実施例１に係るリップシンク信号発生装置による映像信号の説明に供する平面図である。
【図２】本発明の実施例１に係るリップシンク信号発生装置を示すブロック図である。
【図３】本発明の実施例２に係るリップシンク信号発生装置による映像信号の説明に供する平面図である。
【図４】本発明の実施例３に係るリップシンク信号発生装置による映像信号の説明に供する平面図である。
【図５】他の実施例に係るリップシンク信号発生装置による映像信号の説明に供する平面図である。
【符号の説明】
【００５４】
１……リップシンク信号発生装置、３……被測定対象、４……映像信号発生回路、５……音声信号発生回路、６、１６……固定マーカー、７……移動マーカー、２６……サブ固定マーカー
【図１】
2007043652.tif 000003
【図２】
2007043652.tif 000004
【図３】
2007043652.tif 000005
【図４】
2007043652.tif 000006
【図５】
2007043652.tif 000007