(57)【要約】      （修正有）【課題】送出映像の確認が容易に、的確に得られるようにしたテロップ監視装置の提供。【解決手段】テロップなし素材１００に付加すべき複数のテロップ１〜ｎを表示し、表示された複数のテロップから実際に付加すべきテロップが選択できるようにしたテロップ表示選択器２と、選択されたテロップをテロップなし素材１００に付加するテロップ付加装置３とテロップなし素材１００から人物像の顔領域を検出して顔領域抽出データ１０１を出力する顔領域検出部４と、複数のテロップ１〜ｎの各々から文字領域を検出して文字領域抽出データ１０２を出力する文字領域検出部５と、テロップあり素材２００と顔領域抽出データ１０１、文字領域抽出データ１０２を入力するテロップ監視部６を設け、テロップ表示選択器２で選択されたテロップ同士に重なり合いが有るか否かを判断し、テロップの文字領域が人物像の顔部分に被っているか否かを判断し、結果をモニタに表示させる。【選択図】図１
2011009835.tif 000002
【特許請求の範囲】
【請求項１】
テロップなし素材に付加すべき複数のテロップを表示し、表示された複数のテロップから実際に付加すべきテロップが選択できるようにしたテロップ表示選択手段と、該テロップ表示選択手段により選択されたテロップを前記テロップなし素材に付加するテロップ付加手段を備えたテロップ付加システムにおいて、
前記テロップなし素材から人物像の顔領域を検出して顔領域抽出データを出力する顔領域検出手段と、前記複数のテロップの各々から文字領域を検出して文字領域抽出データを出力する文字領域検出手段と、前記テロップ付加手段から出力されるテロップあり素材と顔領域抽出データ及び前記文字領域抽出データを入力するテロップ監視手段を設け、
前記テロップ監視手段を、前記テロップ表示選択手段により選択された複数のテロップ同士に重なり合いが有るか否かを判断し、テロップの文字領域が人物像の顔部分に被っているか否かを判断して、判別結果をモニタに表示させるように構成したことを特徴とするテロップ監視装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、テレビ放送用の素材を自動的に送出する番組バンクシステムに係り、特に、放送素材となる映像にテロップを付加し映像を送出するシステムにおけるテロップ監視装置に関する。
【背景技術】
【０００２】
例えばテレビ放送局においては、通常、全体的なテレビ番組の送出に関して統括を行う主調整室(マスタ)と、テレビ番組を制作し送出する副調整室(サブ)とを備え、番組バンクシステムを用いて放送素材(テレビ放送用の画像素材と音声素材)を自動的に送出するようになっている(例えば特許文献１参照)。
【０００３】
このとき、放送素材には、図１０に示すように、一般に様々な効果が付加される。すなわち、図示のように、カメラなどで撮影された放送素材(テロップなし素材)には、映像効果としてテロップ(字幕スーパー)やワイプなどが付加され、音声効果としてナレーションや演出などで使われる効果音などが付加され、その上で実際に放送されるテロップあり素材となって送出されることになる。
【０００４】
ここで、図１１は、テロップ生成装置からの送出画像(テロップ)が、テロップなしの素材である元素材に合成され、テロップ付き素材(テロップあり素材)となる様子の一例を示したもので、背景が黒(又は白)のテロップ画像の黒い部分が反転され、元素材に合成されている様子が明瞭に表されている。
【０００５】
ところで、このテロップを映像に付与するためには、通常、テロップの生成と管理を行うキャラクタージェネレータ(いわゆるテロッパー)と、そのテロップを映像に合成(スーパーインポーズ)するスイッチャーなどからなるシステムを用い、テロップが付加された映像を送出するようになっている。
そして、近年、このようなテロップによる映像効果は、テレビに限らず、映画やＤＶＤなどの映像ソフトにおいても欠かせないものになっている。
【０００６】
しかも、この場合、そのテロップは、最近では、単に視聴者に対して、現在放送している項目の表示や、出演者の発した言葉を書き起こすような、番組内容の理解を補助するためのものではなく、番組の演出のために様々な効果が付与されたテロップを用いることが多く、更に、そのテロップも単色に限らず、しかもグラデーションをもったものや、シャドウやエッジといった効果が付加されているものがあり、その上、静止画ではなくアニメーション付きのものなどがあり、多種多様化している。
【０００７】
このような映像に付加される多種多様なテロップは、番組単位、或いは項目単位でテロップ送出装置(この場合、テロップ生成装置と兼ねていることが多い)により管理され、スイッチャーにより選択された上で放送素材に合成(スーパーインポーズ)されることになる。
このとき、スイッチャーのスイッチはテロップ送出装置と連動し、１回スイッチが押される度にテロップが自動的にテロップ送出装置から順番に送出されるが、このスイッチャーの操作は局員(放送局の操作担当者)により人為的に行なわれる。
【０００８】
ここで、図１２に示すシステムは、１号機からｎ号機までの複数のテロップ生成装置１-１、１-２、１-ｎにより複数のテロップ画像を生成し、局員は、テロップ表示選択器２のモニタを見ながらテロップ表示選択器２の入力操作部を操作し、表示されたテロップ１、２、ｎの画像から実際に付加するテロップを選択し、テロップ付加装置３により、テロップなし素材(元素材)１００に付加することにより、テロップあり素材２００がテロップ付加装置３から送出されるようになっている。
この場合、合成すべきテロップの選択は、例えばＶＴＲから再生される映像や中継先からの映像などリアルタイムに変化するテロップなし素材のタイミングにより、上記したように局員が行う。
【０００９】
上記した図１１と図１３は、テロップ付加装置３から送出されたテロップ付き素材２００を示したもので、このとき図１１は、付加されたテロップが１枚の場合であるが、テロップが複数の場合は図１３に示すようになり、いずれの場合も、背景が黒(又は白)のテロップ画像の黒い部分がテロップ付加装置３により透過され、元素材に合成されている様子が明瞭に示されている。
【先行技術文献】
【特許文献】
【００１０】
【特許文献１】特開２００３−２７３８２１号公報
【発明の概要】
【発明が解決しようとする課題】
【００１１】
ところで近年では、上記したテロップの多種多様化が著しく、同時に使用されるテロップの数が更に増加の傾向にある。
この結果、テロップの管理が難しくなり、合成に際して様々な問題が生じてしまうようになってきている。
【００１２】
例えば、図１４は、合成された複数のテロップの文字が重なってしまい、更に一方のテロップの文字部分が元素材の人の顔に重なり合ってしまった場合を示したもので、このような素材は視聴者にとって見苦しく、場合によっては不快感を与えてしまう虞があり、しかも素材に映っている人物には失礼にあたるものになってしまう。
【００１３】
すなわち、この場合、例えば、文字同士が重なり合った結果、テロップの文字が読めなくなってしまったり、文字などが人の顔に重なり、当該人物に対して失礼にあたってしまったり、その人の表情が見えなくなってしまうなどの問題が生じてしまうのである。
そして、このことは、特に、リアルタイムで多くのテロップを付加しなければならないニュースなどの生放送の番組の場合、極めて重大な問題であるといえる。
【００１４】
ここで、生放送におけるテレビ番組は、通常、副調整室から、テロップ、ワイプなどの映像効果、効果音、ナレーション音声効果が付けられ、完全パッケージ(いわゆる完パケ)として送出されるようになっている。
そして、このときのテロップの重なりについては、副調整室だけでなく主調整室から送出される時刻出しやニュース速報テロップ、各種お知らせテロップなどに対しても考慮の対象になるが、このときのテロップの重なりなどによる異常の確認は、テロップ合成用のスイッチャーを操作する局員の目視による判断により行われている。
【００１５】
そうすると、この場合、局員は膨大なテロップを管理する必要があり、しかも、通常、局員は、テロップ管理のための選任のスタッフではなく、映像のスイッチングなど他の仕事も兼任していることが多く、従って、最終的な送出映像の確認が難しい。
この結果、従来技術では、テロップが消えるまでに不必要な時間がかかってしまったり、或いはテロップが消えないまま次の映像が送出されてしまうなどの問題があった。
【００１６】
本発明は、目視による確認の手間やテロップが消えないまま送出されてしまうなどの従来技術の問題点に鑑みてなされたもので、その目的は、最終的な送出映像の確認が容易に、しかも的確に得られるようにしたテロップ監視装置を提供することにある。
【課題を解決するための手段】
【００１７】
上記目的は、テロップなし素材に付加すべき複数のテロップを表示し、表示された複数のテロップから実際に付加すべきテロップが選択できるようにしたテロップ表示選択手段と、該テロップ表示選択手段により選択されたテロップを前記テロップなし素材に付加するテロップ付加手段を備えたテロップ付加システムにおいて、前記テロップなし素材から人物像の顔領域を検出して顔領域抽出データを出力する顔領域検出手段と、前記複数のテロップの各々から文字領域を検出して文字領域抽出データを出力する文字領域検出手段と、前記テロップ付加手段から出力されるテロップあり素材と顔領域抽出データ及び前記文字領域抽出データを入力するテロップ監視手段を設け、前記テロップ監視手段は、前記テロップ表示選択手段により選択された複数のテロップ同士に重なり合いが有るか否かを判断し、テロップの文字領域が人物像の顔部分に被っているか否かを判断して、判別結果をモニタに表示させることを特徴とする。
【００１８】
上記手段によれば、放送に使用されるテロップ付の映像を自動的に監視し、異常(人の顔に重なる、テロップ同士の重なりなど)を検出した際に、警告音やモニタによる表示を行って操作者(局員)に知らせ、該当するテロップを移動させたり、そのテロップを削除したり、そのまま表示が重なったままでテロップあり素材とするなどの操作を操作者が任意に選択することができる。
【発明の効果】
【００１９】
本発明によれば、合成すべきテロップの選択の結果が異常になった場合、それが操作者に警報として報知されるので、的確な異常処理が容易になり、この結果、操作者の作業に要する負担が軽減され、監視に要する人員が削減できるなど、経費の削減にも大きく寄与することができる。
【図面の簡単な説明】
【００２０】
【図１】本発明に係るテロップ監視装置の実施形態を示すブロック図である。
【図２】本発明に係るテロップ監視装置の実施形態による動作を説明するためのフローチャートである。
【図３】項目テロップの移動パターンの説明図である。
【図４】一般的なテロップの移動パターンの説明図である。
【図５】本発明に係るテロップ監視装置の実施形態による正常時での動作を説明するための模式図である。
【図６】本発明に係るテロップ監視装置の実施形態による異常時での動作(その１)を説明するための模式図である。
【図７】本発明に係るテロップ監視装置の実施形態による異常時での動作(その２)を説明するための模式図である。
【図８】本発明に係るテロップ監視装置の実施形態による異常時での動作(その３)を説明するための模式図である。
【図９】本発明に係るテロップ監視装置の実施形態による異常時での動作(その４)を説明するための模式図である。
【図１０】放送素材に付加される効果を示す説明図である。
【図１１】テロップ合成の説明図である。
【図１２】従来技術によるテロップ付加システムの一例を示すブロック図である。
【図１３】テロップ合成の説明図である。
【図１４】テロップ重なり合いの説明図である。
【発明を実施するための形態】
【００２１】
以下、本発明に係るテロップ監視装置について、図示の実施の形態により詳細に説明する。
図１は、本発明の一実施の形態で、これは、既に図１２により説明した従来のシステムに顔領域検出部４と文字領域検出部５、テロップ監視部６、それにスピーカ７を付加したものに相当し、従って、その他の構成は、図１２のシステムと同じである。
【００２２】
図１において、まず、顔領域検出部４は、テロップなし素材１００を入力し、素材中に人物像が存在した場合、その人物の顔領域を検出し、抽出データ１０１として出力する働きをする。
このため、当該顔領域検出部４は、人物の顔領域の検出に必要な手順が記述されたプログラムからなるソフトウエアが搭載されているＣＰＵで構成されている。なお、この種のソフトウエアは、例えば形式名００００として△△社から市場に提供されている。
【００２３】
次に、文字領域検出部５は、テロップ生成装置１-１、１-２、１-ｎから出力されるテロップ１、２、ｎを入力し、各テロップの中に存在している文字の領域を検出し、抽出データ１０２としてとして出力する働きをする。
このため、当該文字領域検出部５は、文字領域の検出に必要な手順が記述されたプログラムからなるソフトウエアが搭載されているＣＰＵで構成されている。なお、この種のソフトウエアは、例えば形式名△△△△として００社から市場に提供されている。
【００２４】
一方、テロップ監視部６は、監視モニタ／コントローラを備え、これによりテロップ付加装置３から出力されるテロップあり素材２００(図１２)と顔領域検出部４から出力される抽出データ１０１及び文字領域検出部５から出力される抽出データ１０２を夫々入力し、テロップ選択表示器２によって選択された複数のテロップ同士に重なり合いが有るか否かを判断する働きと、テロップの文字領域が人物像の顔部分に被っているか否かを判断する働きと、判別結果を監視モニタの表示部に表示させる働きと、必要に応じて警報信号をスピーカ７に出力する働きをする。
【００２５】
また、この監視モニタ／コントローラには、キーボードやスイッチ(トグルスイッチ)などのマン−マシンインターフェース機器が備えられていて、局員の操作に応じて監視モニタ／コントローラ自体の動作を制御し、テロップ生成装置１-１、１-２、１-ｎによるテロップの生成動作を制御し、テロップ付加装置３から出力されるテロップあり素材２００をテロップあり素材(監視処理済)２０１として出力する際の条件を設定することができるように構成されている。
【００２６】
このとき監視モニタ／コントローラの表示部は、上記した判別結果と、上記したキーボードやスイッチにより設定された制御状態と、テロップあり素材２００とテロップあり素材(監視処理済)２０１の画像とを表示し、これにより上記した局員による操作が当該局員に望まれている通りに得られているか否かの確認ができるように構成されている。
なお、テロップ付加装置３からテロップあり素材２００が出力されるまでの構成は、図１２の従来技術の場合と同じであり、動作についても同じである。
【００２７】
次に、この実施形態に係るテロップ監視装置の動作について、図２のフローチャートにより説明する。
このフローチャートによる処理は、テロップ表示選択部２の入力操作部又はテロップ監視部６のマン−マシンインターフェース機器に対する操作者(局員)の操作により開始され、まず、テロップ生成装置１-１〜１-ｎによりテロップを生成させ(Ｓ１)、次いで顔領域検出部４と文字領域検出部５により顔領域と文字領域を抽出する(Ｓ２)。
【００２８】
ここで操作者がテロップ表示選択器２によりテロップを選択すると(Ｓ３)、テロップ付加装置３により、いま選択されたテロップがテロップなし素材１００に合成され(Ｓ４)、この結果、テロップ監視部６の監視モニタ／コントローラにより、テロップが重なっているか否か、すなわちテロップ選択表示器２によって選択された複数のテロップ同士に重なり合いが有るか否かとテロップの文字領域が人物像の顔部分に被っているか否かが判断される(Ｓ５)。
【００２９】
そして、まず、このステップＳ５での判断結果がＮＯ、つまり重なりが無かったと判断された場合は、ここで処理を終了する。
従って、この場合は、操作者により選択されたテロップがそのままテロップなし素材１００に付加されてテロップあり素材２００となり、これが、この後で操作者が［送出］ボタンを押したとき、そのままでテロップあり素材(監視処理済)２０１として送出されることになる。そこで、このときの処理を「正常時」と定義する。
【００３０】
一方、ステップＳ５での判断結果がＹＥＳ、つまり何らかの重なりが有ったと判断された場合は、ここで異常信号を発生させ、テロップ表示選択器２とスピーカ７に供給する。
この結果、スピーカ７から異常発生を表す警報音が発生され、監視モニタ／コントローラの表示部とテロップ表示選択器２のモニタには、同じく異常発生を表す警告画面が表示されることになり(Ｓ６)、ここで操作者に異常発生が報知される。
【００３１】
そこで、この場合、操作者は、まず、当該テロップ、つまり何らかの重なりを生じてしまったテロップを消すか否かを決める(Ｓ７)。
このときの操作者の判断は、テロップあり素材２００を監視モニタ／コントローラの表示部とテロップ表示選択器２のモニタに表示させ、この表示から、まず、テロップが重なっていても良い場合と、そうではなく、テロップの重なり修正を必要とする場合に分ける。
【００３２】
そして、まず、テロップが重なっていても良いと判断した場合は、処理(Ｓ７)ではＮＯを選択する。
そうすると、この場合は、ここで処理は終了し、従って、この後、テロップに何らかの重なりをもったテロップあり素材２００が、そのままテロップあり素材(監視処理済)２０１として送出されることになる。そこで、このときの処理を「強行送出」と定義する。
【００３３】
一方、テロップの重なり修正を必要とすると判断した場合は、処理(Ｓ７)ではＹＥＳを選択する。
そうすると、この場合、操作者は、まず、テロップ表示選択器２の入力操作部を操作し、当該テロップ、つまり何らかの重なりをもったテロップを手動消去し(Ｓ８)、続いてテロップの移動を実行するために必要な移動実行画面(詳細は後述)の表示を指示する(Ｓ９)。
【００３４】
そこで、操作者は、表示された移動実行画面でのテロップ同士の状態や人物像との重なり状態などを観察し、テロップを移動さるか否かを判断する(Ｓ１０)。
そして、まず、もうテロップを移動させても仕方がないと判断したときは、処理(Ｓ１０)ではＮＯを選択する。
そうすると、この場合は、ここで処理は終了される。従って、この後で操作者が［送出］ボタンを押したとすれば、「強行送出」となる。
【００３５】
一方、ここで、やはりテロップを移動させた方が良いと判断した場合は、処理(Ｓ１０)ではＹＥＳを選択する。
そうすると、ここで、今度はモニタにテロップの移動案(詳細は後述)が表示される(Ｓ１１)。
そこで、操作者は、表示された移動案を観察し、テロップを画面内の何れの位置に移動させれば良いのか考慮する(Ｓ１２)。ここでもＮＯが選択できるようにし、いつでも処理が放棄できるようにしている。
【００３６】
処理(Ｓ１２)でＹＥＳを選択したら、次に操作者は、監視モニタ／コントローラのマン−マシンインターフェース機器を操作し、テロップの移動先を決め(Ｓ１３)、次いで、いま決めた移動先を当該テロップの生成元であるテロップ生成装置に指示してテロップを生成させ(Ｓ１４)、ここで処理を終了するのである。
【００３７】
従って、この実施形態によれば、テロップ選択表示器２によって選択されたテロップ同士が重なり合っていないか、テロップが人の顔に被ってないかの判断が自動的に行われ、異常(重なり合っている)と判断された場合は、警報音を鳴らし、監視モニタに警告画面を表示し、テロップ表示選択器２を操作する操作者に異常発生が報知されるようになる。
【００３８】
この結果、操作者は、異常発生が報知されなければ正常であることが判るので、そのままテロップ付の素材２００を送出させることができ、他方、異常な場合は、必ず異常発生が報知されるので、操作者は、テロップ表示選択器２により重なっているテロップを直接消去することができ、しかも、このとき、異常かあってもそのまま残すこともできる。
【００３９】
また、この実施形態では、異常かあった場合、監視モニタにテロップ移動案が表示されるので、該当テロップの移動先も容易に選定するこができる。
このときの移動案に表示される移動対象テロップについては、詳しくは後述するが、予めテロップ生成装置１-１〜１-ｎに優先度をつけておき、テロップ監視部６が自動的に選出するようになっている。
【００４０】
従って、操作者がコントローラにより移動先を決定すれば、それによりテロップ生成装置１がテロップの再生成を行うようになる。
また、移動案で適当な移動先がない場合は、再度、テロップ表示選択器２により、手動で該当テロップを消去することもでき、また重なっているテロップをそのまま表示することも可能である。
【００４１】
次に、テロップについて説明する。
テロップには、ニュース番組などで現場の場所や犯人の名前、インタビューの書き起こし、また音楽番組における歌詞テロップなどに幅広く用いられている一般的なテロップと、現在放送中の内容を表示するときに用いられる項目テロップと呼称されるテロップがある。
そして、まず、図３は、項目テロップの移動パターンの一例で、これは、通常、画面のコーナー部に表示される場合が多く、このとき、特に右上のコーナー部が多い(a)。
【００４２】
しかし、そうでなくても左上(b)、左下(c)、右下(d)のコーナー部にある場合がほとんどであり、コーナー部以外の部分、例えば画面の中央部などにくることは、まずない。
従って、もしも一方のテロップの表示位置に他のテロップが重なったり、或いは人の顔にテロップが被さったりした場合、図２の処理(Ｓ１１)では、図３において、左上と左下、それに右下の各図に示されている３種の位置を移動案として表示してやれば、テロップの移動先の選択が容易になり、簡単に所望の位置に移動させることができる。
【００４３】
次に、図４は、一般的なテロップの移動パターンの一例であり、これは大抵の場合、画面の下に表示されるが(a)、上(b)、右(c)、左(d)に表示することもある。このとき上記した項目テロップとは異なり、特徴的なのは、左右に表示する場合は、文章が横書きから縦書きになるという点であり、従って、この一般的なテロップの場合、上下から左右の位置に移動する場合は横書きから縦書きに修正し、反対に左右から上下の位置に移動する場合には縦書きから横書きに修正しなければならない点で、上記した項目テロップとは異なる。
【００４４】
そこで、項目テロップの場合と同様、もしも一方のテロップの表示位置に他のテロップが重なったり、或いは人の顔にテロップが被さったりした場合、図２の処理(Ｓ１１)では、図３において、左上と左下、それに右下の各図に示されている３種の位置を移動案として表示してやれば、テロップの移動先の選択が容易になり、簡単に所望の位置に移動させることができる。
【００４５】
次に、図５と図６、図７、図８、それに図９は、文字領域および顔領域の抽出から、テロップ監視装置を介し、テロップ付きの素材が送出されるまでの様子を、それぞれの画面とともに表した模式図で、このとき図５が正常時の場合で、図６〜図９は異常時の場合である。そして、まず、図６はテロップを移動させた場合の処理、次に、図７は移動をキャンセルした場合の処理、また、図８は［強行送出］の場合の処理、そして、図９は後で任意のテロップを消した場合の処理である。
【００４６】
これらの場合で、テロップ監視モニタは、基本的に送出時の映像を表示するモニタ(ＯＡモニタ)と表示内容は変わらないが、更に異常時には警告画面の表示と重なり合うテロップの表示、それに、当該テロップの移動案を表示するのが特徴である。
異常時にはテロップ監視モニタに警告ウィンドウが半透明で表示され、スピーカ７からの警告音で異常を操作者に知らせる。
このとき、操作者は、図９に示すように、テロップ選択表示によりそのまま該当のテロップを消去することもできるが、警告ウィンドウに表示される[送出]ボタンを押下すれば、図８に示すように、そのまま［強行送出］が実行され、テロップが重なり合ったまま表示することもできる。
【００４７】
また、図７の処理において、テロップを消去した場合は、警告画面に「移動案を表示しますか」という旨のメッセージが表示される。なお、画面にはテロップが重なり合っているときの送出画面が静止画で表示されている。
ここで操作者が[はい]ボタンを押下すれば、移動対象となるテロップの移動案が図３と図４に示すようなパターンに基づいて表示される。なお、ここでの移動対象テロップはひとつのみで、これは優先度に基づき自動的に決定されるが、このとき、通常、項目テロップの方が優先度は低い。
一方、[いいえ]ボタンを押下した場合は、既に操作者が該当テロップを消去しているため何もしない。
【００４８】
移動案表示画面で、操作者がテロップを移動させたい位置をテロップ監視部６のコントローラにより決定すると、該当のテロップを生成したテロップ生成装置がテロップを再生成する。
そこで、操作者は、それをテロップ表示選択器２により再選択することで、移動後のテロップが表示されることになる。
ここで適当な移動位置が見付からなかった場合は、キャンセルすることもできる。この場合、該当のテロップは消去されたままとなる。
【符号の説明】
【００４９】
１-１〜１-ｎ  テロップ生成装置
２  テロップ表示選択器
３  テロップ付加装置
４  顔領域検出部
５  文字領域検出部
６  テロップ監視部
７  スピーカ
１００  テロップなし素材(元素材)
２００  テロップあり素材
２０１  テロップあり素材(監視処理済)
【図１】
2011009835.tif 000003
【図２】
2011009835.tif 000004
【図３】
2011009835.tif 000005
【図４】
2011009835.tif 000006
【図５】
2011009835.tif 000007
【図６】
2011009835.tif 000008
【図７】
2011009835.tif 000009
【図８】
2011009835.tif 000010
【図９】
2011009835.tif 000011
【図１０】
2011009835.tif 000012
【図１１】
2011009835.tif 000013
【図１２】
2011009835.tif 000014
【図１３】
2011009835.tif 000015
【図１４】
2011009835.tif 000016