(57)【要約】【課題】ディレクター、又はオペレータの合図を検出し、それに続く制御卓の操作を自動的に行うスタジオコントロールシステムを提供する。【解決手段】キュー処理部１のカメラ１１ａが撮影したオペレータのサインの映像から画像認識部１２がオペレータの手のシルエットパターンを抽出し、記憶部１５に予め基準画像情報として記憶しているシルエットパターンと比較照合して、調整作業開始を意味する合図のシルエットパターンであると判読した場合、その合図に対応するコマンドＳＱ７をＰＭＣ２のコントローラ２２に送信する。そしてコントローラ２２は、そのコマンドＳＱ７が指定するビデオサーバ４１からスタジオカメラ４０への切替とマイクボリュームの調整を行う一連のシーケンスプログラムを実行する。【選択図】図１
2009094899.tif 000002
【特許請求の範囲】
【請求項１】
放送局が送出する番組信号を、制御卓の調整入力手段を調整して送出するスタジオコントロールシステムにおいて、
オペレータ又はディレクターがスタジオの従事者へ番組の進行に係わる合図のサインを撮影するカメラと、前記カメラが撮影した映像情報を入力して抽出した画像情報により合図を判読する画像認識処理を行い、前記判読した合図に対応するコマンド信号を生成してコントローラへ出力する画像認識手段とを備えるキュー処理手段と、
前記出力されたコマンド信号を受信した場合、前記合図に対応してオペレータが前記制御卓の調整入力手段を調整する調整手順と同様な処理手順で前記調整入力手段を調整して前記番組信号を送出するシーケンスプログラムを実行するコントローラとを
具備することを特徴とするスタジオコントロールシステム。
【請求項２】
前記カメラは、前記オペレータの合図のサインを撮影する第１のカメラの他に、更に前記オペレータが前記サインを行った後の前記制御卓での動作を撮影する第２のカメラを備え、前記第２のカメラが撮影した第２の映像情報は、前記画像認識手段に入力され、
前記画像認識手段は、前記入力された第２の映像情報からオペレータの作業手順を判読する第２の画像認識を行い、前記判読された作業手順により前記前記番組信号を送出するシーケンスプログラムを変更修正する
事を特徴とする請求項１記載のスタジオコントロールシステム。
【請求項３】
キュー処理手段と、コントローラとを備え、放送局が送出する番組信号を、制御卓の調整入力手段を調整して送出するスタジオコントロールシステムの制御方法において、
前記キュー処理手段は、
オペレータ又はディレクターがスタジオの従事者へ番組の進行に係わる合図のサインをカメラが撮影し、前記カメラが撮影した映像情報を入力して合図を判読する画像認識処理を行い、
前記判読した合図に対応するコマンド信号を生成してコントローラへ出力し、
前記出力されたコマンド信号を受信した前記コントローラは、
前記合図に対応してオペレータが前記制御卓の調整入力手段を調整する調整手順と同様の処理手順で前記調整入力手段を調整して前記番組信号を送出するシーケンスプログラムを実行する
ことを特徴とするスタジオコントロールシステムの制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、放送局のスタジオコントロールシステムに関する。
【背景技術】
【０００２】
放送局での番組の放送切替タイミングは、番組時刻表に従って正確に行われるよう様々な工夫がなされている。実況中継や、ニュースにおいては、ディレクターが放送中に更にＶＴＲ映像等各種の放送素材を番組中に挿入又は、切り替える等の作業が発生する。この様な場合、ディレクター、又は、スタジオのオペレータがアナウンサ、カメラマン等のスタジオで作業する従事者と合図（キュー、サイン）を交わして切り替えることにより正確なタイミングでの切替を目指しているが、誤差時間が生じる。このため、局内時計等を参照しつつ、予め定められた番組進行表に従って、切替タイミングの合図を出したタイミングとの誤差をオペレータ等へ示し番組の時間配分を容易にする方法がある（例えば、特許文献１。）。
【０００３】
しかし、この方法でも、合図とそれに伴う、アナウンサの動作、およびオペレータの装置切替等のタイミングに遅れが生じる等の誤差を減らすものでは無く、特にニュースの様な生番組での画面フェードなどを行うものについては、制御卓等の装置の調整操作がオペレータに任せられており、合図後の操作時間の短長が生じるなどのタイミング調整に問題が有った。
【０００４】
また、小さい放送局等では、機器操作を行うオペレータがディレクターを兼ねて合図とスタジオの制御卓の操作を行う為、オペレータ操作に遅れが生じると共に作業負荷が大きくなる問題があった。
【特許文献１】特開平７−１４３０８５号公報  （第５８頁、第３５図）
【発明の開示】
【発明が解決しようとする課題】
【０００５】
従来のスタジオの制御卓の操作では、合図後の操作時間の短長が生じるなどのタイミング調整と、機器操作を行うオペレータがディレクターを兼ねて合図とスタジオの制御卓の操作を行う場合、オペレータに負荷が掛かる問題が有った。
【０００６】
本発明は、上記問題を解決するためになされたもので、ディレクター、又はオペレータの合図を検出し、それに続く制御卓の操作を自動的に行うスタジオコントロールシステムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するために、本発明のスタジオコントロールシステムは、放送局が送出する番組信号を、制御卓の調整入力手段を調整して送出するスタジオコントロールシステムにおいて、オペレータ又はディレクターがスタジオの従事者へ番組の進行に係わる合図のサインを撮影するカメラと、前記カメラが撮影した映像情報を入力して抽出した画像情報により合図を判読する画像認識処理を行い、前記判読した合図に対応するコマンド信号を生成してコントローラへ出力する画像認識手段とを備えるキュー処理手段と、前記出力されたコマンド信号を受信した場合、前記合図に対応してオペレータが前記制御卓の調整入力手段を調整する調整手順と同様な処理手順で前記調整入力手段を調整して前記番組信号を送出するシーケンスプログラムを実行するコントローラとを具備することを特徴とする。
【０００８】
また本発明のスタジオコントロールシステムの制御方法は、キュー処理手段と、コントローラとを備え、放送局が送出する番組信号を、制御卓の調整入力手段を調整して送出するスタジオコントロールシステムの制御方法において、前記キュー処理手段は、オペレータ又はディレクターがスタジオの従事者へ番組の進行に係わる合図のサインをカメラが撮影し、前記カメラが撮影した映像情報を入力して合図を判読する画像認識処理を行い、前記判読した合図に対応するコマンド信号を生成してコントローラへ出力し、前記出力されたコマンド信号を受信した前記コントローラは、前記合図に対応してオペレータが前記制御卓の調整入力手段を調整する調整手順と同様の処理手順で前記調整入力手段を調整して前記番組信号を送出するシーケンスプログラムを実行することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、ディレクター、又はオペレータの合図を検出し、それに続く制御卓の操作を自動的に行うスタジオコントロールシステムを提供することができる。
【発明を実施するための最良の形態】
【００１０】
以下、図面を参照して本発明の実施例を説明する。
【実施例】
【００１１】
図１は、本発明の実施例に係わるスタジオコントロールシステムの動作を説明する機能ブロック図である。  
図１において、スタジオコントロールシステムは、それぞれの間が制御データバスＢ等で接続されたキュー処理部１、プログラマブルコンソール２、スイッチャ３等を備え、スタジオカメラ４０やビデオサーバ４１を始めとする素材送出装置およびスタジオ機器の動作設定やスイッチャ３を介してのスタジオ内外の放送用装置、機器との接続設定などの制御入力とモニタを行う。
【００１２】
プログラマブルコンソール（以下、ＰＭＣと略す。）２は、従来ミキサーコンソールともよばれる機能を有する制御卓で、スイッチ類やスライドボリューム等のオペレータが操作する制御、調整入力部品２１が取り付けられている。そして、これらの調整入力部品２１の設定ポジション又は、設定値は、手動で設定できると共に内部に備えられたコントローラ２２によって、スイッチ、ボリューム等を機構的に駆動設定するか、又は電子的に設定することが可能である。
【００１３】
コントローラ２２は、内部接続される調整入力部品２１を制御するほか、制御データバスＢと通信ＩＦ２４を介して接続されると共に制御データバスＢを介して、又は直接、スイッチャ３およびスタジオカメラ４０、ビデオサーバ４１等の各放送用装置、機器との間で制御データを入出力する。
【００１４】
キュー処理部１は、テレビ映像を撮影するカメラ１１ａ、１１ｂ（以下、特に必要が無い場合、カメラ１１と称する。）とそれぞれの間が、内部バスＣＢで接続された画像認識部１２、通信ＩＦ１３、制御処理部１４と、記憶部１５とを備える。
【００１５】
カメラの内、例えば、カメラ１１ａは、オペレータのサインを示す動作を撮影する目的で、例えば、２台目のカメラ１１ｂは、コントローラ２２を調整するオペレータ動作を撮影する目的の為に使用される。勿論カメラ１台で両機能を実行するものでも良いが、ここでは後述の動作説明の利便上複数が設置されているものとする。
【００１６】
画像認識部１２は、オペレータを撮影するカメラ１１ａから受信する映像情報からオペレータの動作に係わる特徴的な画像情報を抽出した抽出画像情報を制御処理部１４へ出力する。抽出画像情報には、例えば、オペレータの手等の身体の一部のシルエットや、輪郭などを取り出した信号、またこれらの信号を統計的、もしくは、映像のフレーム間の時系列的な相関データなども含まれる。
【００１７】
制御処理部１４は、例えば、記憶部１５に予め蓄積保存された基準画像情報のパターンと画像認識部１２から入力される画像情報とを比較照合する等の画像認識処理によりオペレータの動作パターン（仕種）を分析して、所要のコマンドとなるキュー、サインに係わる合図の情報を生成する。
【００１８】
そして、その合図の情報を通信ＩＦ１３と制御データバスＢを介して、又は直接、ＰＭＣ２のコントローラ２２へ出力する。
【００１９】
この合図の情報は、キューによるタイミング表示となり、その合図に続いて行われるオペレータがＰＭＣ２の調整入力部品２１を調整する手順と同様のシーケンスを実行するプログラムがコントローラで起動される。
【００２０】
そして、コントローラ２２は、予めプログラムされたシーケンスとタイミングにより調整値を設定又は、スイッチの切替とを実行するのでオペレータは、スタジオでキューをアナウンサに示すだけで調整入力部品２１のスライドボリュームやスイッチ切替操作をしなくても良い。
【００２１】
このシーケンスとタイミングについては、合図に対応したオペレータの制御卓（コンソール）の調整作業をシミュレーションし、予めコントローラ２２内部のメモリに調整作業のシーケンスとタイミングのデフォルトデータが初期設定される。
【００２２】
また、その初期設定（デフォルト）データは、後述の様に設計値によるデフォルトデータを入力設定した上で、更にキュー処理部１の例えば、カメラ１１ｂが、マニュアルモードでオペレータの制御卓操作、即ち、ＰＭＣ２の調整入力部品２１の操作を撮影する映像から画像認識部１２によりオペレータの作業を分析し、画像認識による合図の判定、調整入力部品２１の調整のシーケンス、タイミング等を学習、補正することもできる。
【００２３】
図２は、本発明の実施例に係わるスタジオコントロールシステムが、オペレータの合図に従って動作する処理手順を示すフローチャートである。  
以下、図１、図２を参照してスタジオコントロールシステムの動作、処理手順を説明する。  
今、ある小さな放送局で、生放送のＤＪ番組中に夜のスポットニュースをニューススタジオから放送することになった場合を想定する。コントロールシステムは、オペレータが、送信所へ送信する放送番組の素材（番組信号）を制御するのに使用され、この２つのスタジオからの番組信号を最終的に選択し、音声、映像信号が調整される。
【００２４】
図２において、キュー処理部１の画像認識部１２と記憶部１５とに、合図、動作パターンの判定を行う画像処理のデータ（基準画像情報）と、判定した合図、動作パターンに対応する所定のコマンド、および、ＰＭＣ２のコントローラ２２に各キューコマンドに対応する、調整入力部品２１の調整シーケンスとタイミングのプログラムデータを初期設定する（図２のステップｓ１）。
【００２５】
夜の少人数で放送される時間になると、オペレータによってスタジオコントロールシステムは、ＰＭＣ２の調整入力部品２１のモード設定スイッチが「Ｓｏｌｏ」に設定され（ステップｓ２）、生番組での合図に続く調整入力部品２１の調整をコントローラ２２が自動的に行うモードに入り、スタンバイ状態になる。
【００２６】
即ち、「Ｓｏｌｏ」モードでは、オペレータがディレクターとして、スタジオのアナウンサ、及びＤＪ達に番組の進行を管理するサインで合図を送り、オペレータの動作を撮影するキュー処理部１のカメラ１１ａからサインの映像情報が画像認識部１２へ送信される（ステップｓ３）。
【００２７】
画像認識部１２が受信した映像情報から抽出したサインの画像情報を記憶部１５に記憶した基準画像情報を読み出して照合し（ステップｓ４）、基準画像情報と一致するサインのシルエットパターンから合図を判読（ステップｓ５）する。
【００２８】
図３は、画像認識と合図判定の手順の一例を示すフローチャートである。  
以下、図３によりステップ４の詳細（ステップｓ４−１〜ｓ４−３）画像認識の１例を説明する。例えば、画像認識部１２は、カメラ１１ａの映像信号の内、オペレータの手のサインの画像部分をシルエットとして抽出し（ステップｓ４−１）、抽出されたシルエットパターンを、サインの基準画像情報（合図として予め、記憶部１５で記憶しているシルエットパターンＱ１〜Ｑ７）と照合比較する（ステップｓ４−２）。
【００２９】
図４は、基準画像情報となるシルエットパターンを示す図である。  
図４において、図４（ａ）は、待機を示し、図４（ｂ）〜図４（ｇ）は、カウントダウンを示す、オペレータの手の抽出シルエットパターンである。
【００３０】
そして、抽出シルエットパターンが、アナウンサに「待機」を示すシルエットパターンＱ１から、「カウントダウン」を示すシルエットパターンＱ２〜Ｑ６を順に照合し抽出した結果（各パターンの識別番号）を、内部バスＣＢを介して制御部処理１４へ送信する。そしてシルエットパターンＱ６が、「切替・放送開始」を意味するシルエットパターンＱ７に変わったことを検出する（ステップｓ４−３）。
【００３１】
制御処理部１４は、このシルエットパターンＱ７の識別番号（例えば、「ＳＱ７」）を「切替・放送開始」の合図のコマンドとして、通信ＩＦ１３を介して制御データバスＢによりＰＭＣ２へ送信する（ステップｓ６）。ＰＭＣ２のコントローラ２２は、通信ＩＦ２３を介してこのコマンド「ＳＱ７」を受信する（ステップｓ７）と、コマンド「ＳＱ７」に対応したシーケンスプログラムの実行を開始する（ステップｓ８）。
【００３２】
図５は、調整入力部品の調整を行うシーケンスプログラムの一例を示すフローチャートである。  
図５において、ステップｓ８のシーケンスの一例は、以下の如くである。  
調整入力部品２１では、例えば、ビデオサーバ４１と、ニューススタジオのスタジオカメラ４０とのマイクボリュームが、切替時の雑音や不要音声の混入を防ぐ為に、直ちに（例えば、「ＳＱ７」受信後約０．１秒以内）一度「０」まで絞られる（ステップｓ８１）。続いて、スイッチャ３の接続先を素材出力装置であるビデオサーバ４１から、スタジオカメラ４０へ切替える（ステップｓ８２）。そして、絞っていたスタジオカメラ４０のマイクボリュームが、０．３秒で所定のレベル（例えば、メモリ５に相当）まで上げられる（ステップｓ８３）。
【００３３】
スイッチャ３から出力される放送信号は、マイクボリュームが上がるタイミング（０．３秒後）に同期してスイッチャ３が切り替わりビデオサーバ４１から出力されている音楽映像から、アナウンサの撮影画面に切り替わり、音楽に代わってアナウンサの原稿朗読音声が出力される（ステップｓ８４）。
【００３４】
従来は、オペレータがスイッチャ３の接続先の設定を行い、準備が済み次第アナウンサへカウントダウンサインを示し、切替サイン後、急いで、制御卓の２装置のボリュームを絞り、スイッチャ３の切替制御ボタンを押し、スタジオカメラ４０のマイクボリュームを「目盛り５」に調整しなければならなかった。
【００３５】
これに対し、実施例のスタジオコントロールシステムでは、オペレータは、スイッチャ３の接続先の準備後、アナウンサへの指示に専念でき、負担が軽く、又誤操作も防ぎ、放送事故を防ぐ効果がある。
【００３６】
上記シーケンスは、予めオペレータの作業手順を定め、その手順に併せて作成されたデフォルト設定されたデータにより実行されるが、前述のオペレータの手順をカメラ１１ｂが撮影して、シーケンスを記憶、学習することによりシーケンスのデータを生成するか、又は、動作時間のパラメータを変更する様にしても良い。
【００３７】
即ち、ＰＭＣ２の調整入力部品２１のモード設定スイッチが「Ｍａｎｕａｌ」に設定され、更に学習を指示する「Ｌｅａｒｎ」に設定されたとする。
【００３８】
この場合、コントローラ２２は、プログラム動作はせず、オペレータの調整入力部品２１の操作、設定に従って、スイッチャ３を始めとする各スタジオ内の装置や機器の動作制御を行う。一方、キュー処理部１の画像処理部１２は、カメラ１１ａとカメラ１１ｂからの映像信号を入力する。キューに対応するシルエットパターンＱ１〜Ｑｎは、予めデフォルトで入力されている。また、カメラ１１ｂで撮影されるオペレータの動作のシルエットと照合する調整入力部品２１に対するそれぞれの操作のシルエットパターンＲ１〜Ｒｎは、予め、記憶部１５によって記憶されている。
【００３９】
今、カメラ１１ａで撮影された映像で画像処理部１２から入力された映像からシルエットパターンＱ１〜Ｑ７が抽出された場合、制御処理部１４は、引き続き、カメラ１１ｂからの映像により、シルエットパターンＲ１〜Ｒｎとのパターン比較を行う。例えば、シルエットパターンＲ１〜Ｒ３が、上記ステップｓ７１〜ｓ７３に対応する場合、その、シルエットパターンがＲ１、Ｒ２、Ｒ３と並ぶ順序から、上記ステップｓ１、ｓ７２、ｓ７３のシーケンスを並べる。
【００４０】
また、制御処理部１４は、「Ｌｅａｒｎ」モードの場合、制御データバスＢを介して、コントローラ２２が処理しているモニタデータを受信する。
【００４１】
そして、上記操作ステップｓ１〜ｓ３と、それに対応する機器の動作のステップＳ４が得られる様にステップの順序を定める。
【００４２】
また、各ステップでの制御に掛かる時間やそのステップ毎の時間間隔を図示されない内部タイマと照合することによって計測し、シーケンスの順序とタイミングが設定されたプログラムデータを作成し、記憶部１５に一時保存される。そして、この作成されたプログラムデータは、オペレータが所定のコマンドにより、コントローラ２２へインプットする。
【００４３】
もし、上記順序や、タイミングが予めデフォルトで与えられていれば、上記の時間計測によるデータでタイミングを修正するようにしても良い。
【００４４】
また、この計測部１５に保存されるプログラムデータが、順次上書きされる等の方法により、修正変更され、更に自動的に制御処理部１４から、コントローラ２２のプログラムを上書きするようにしても良い。これらの制御処理部１４が行う修正変更は、ワードプロセッサ等でも行われている様な人工知能的な学習処理による。
【００４５】
以上説明した様に、本発明のスタジオコントロールシステムは、カメラでオペレータの動作を撮影し、その映像から合図、キューの情報を抽出して、自動的に調整入力部品（制御卓）を調整することが出来、オペレータがディレクターを兼務する場合でもその負荷を軽減することが出来る。
【図面の簡単な説明】
【００４６】
【図１】本発明の実施例に係わるスタジオコントロールシステムの動作を説明する機能ブロック図。
【図２】スタジオコントロールシステムが、オペレータの合図に従って動作する処理手順を示すフローチャート。
【図３】画像認識と合図判定の手順の一例を示すフローチャート。
【図４】基準画像情報となるシルエットパターン。
【図５】調整入力部品の調整を行うシーケンスプログラムの一例を示すフローチャート。
【符号の説明】
【００４７】
１  キュー処理部
１１ａ〜１１ｎ  カメラ
１２  画像認識部
１３  通信ＩＦ
１４  制御処理部
１５  記憶部
２  プログラマブルコンソール
２１  調整入力部品
２２  コントローラ
２４  通信ＩＦ
３  スイッチャ
Ｂ  制御データバス
ＣＢ  内部バス
【図１】
2009094899.tif 000003
【図２】
2009094899.tif 000004
【図３】
2009094899.tif 000005
【図４】
2009094899.tif 000006
【図５】
2009094899.tif 000007