(57)【要約】【課題】中継映像に対してＣＧ映像を合成した映像を生成する映像生成システムにおいて、中継現場側の構成を簡易なものにする。【解決手段】映像生成システムは、中継現場で利用される中継現場側装置と、放送局で利用される放送局側装置とを有する。中継現場側装置は、中継現場でカメラが撮影した映像に対応する映像信号と、カメラの位置情報及びレンズ情報を含むカメラデータとを、放送局側装置に送信する送信手段を備える。放送局側装置は、中継現場側装置の送信手段が送信した映像信号及びカメラデータを受信する受信手段と、カメラデータに基づいてＣＧ映像を生成するＣＧ生成手段と、映像信号に対応する映像とＣＧ映像とを合成するＣＧ合成手段と、を備える。【選択図】図２
2015023298.tif 000002
【特許請求の範囲】
【請求項１】
中継現場で利用される中継現場側装置と、放送局で利用される放送局側装置とを有する映像生成システムであって、
前記中継現場側装置は、
前記中継現場でカメラが撮影した映像に対応する映像信号と、前記カメラの位置情報及びレンズ情報を含むカメラデータとを、前記放送局側装置に送信する送信手段を備え、
前記放送局側装置は、
前記中継現場側装置の前記送信手段が送信した前記映像信号及び前記カメラデータを受信する受信手段と、
前記カメラデータに基づいてＣＧ映像を生成するＣＧ生成手段と、
前記映像信号に対応する映像と前記ＣＧ映像とを合成するＣＧ合成手段と、を備えることを特徴とする映像生成システム。
【請求項２】
前記中継現場側装置は、前記カメラデータを前記映像信号に重畳する重畳手段を更に備えており、
前記送信手段は、前記重畳手段が前記映像信号に対して前記カメラデータを重畳した重畳信号を送信することを特徴とする請求項１に記載の映像生成システム。
【請求項３】
前記放送局側装置は、前記中継現場側装置の前記送信手段から前記受信手段が受信した前記重畳信号を、映像信号とカメラデータとに分離する分離手段を更に備えており、
前記ＣＧ生成手段は、前記分離手段が分離した前記カメラデータに基づいて前記ＣＧ映像を生成し、
前記ＣＧ合成手段は、前記分離手段が分離した前記映像信号に対応する映像と前記ＣＧ映像とを合成することを特徴とする請求項２に記載の映像生成システム。
【請求項４】
前記重畳手段は、前記映像信号に対応する映像を撮影したカメラと同一のカメラについての前記カメラデータを、当該映像信号に重畳することを特徴とする請求項２に記載の映像生成システム。
【請求項５】
前記重畳手段は、前記映像信号に対応する映像を撮影したカメラと異なるカメラについての前記カメラデータを、当該映像信号に重畳することを特徴とする請求項２に記載の映像生成システム。
【請求項６】
前記中継現場側装置は、複数のカメラが撮影した映像の中から１つのカメラが撮影した映像を選択すると共に、いずれのカメラの映像を選択したかを示す選択信号を出力する映像選択手段を更に備えており、
前記重畳手段は、前記カメラデータに加えて前記選択信号も前記映像信号に重畳することを特徴とする請求項２に記載の映像生成システム。
【請求項７】
前記ＣＧ生成手段は、前記映像信号に重畳された前記選択信号に基づいて、前記ＣＧ映像を生成するか、それとも前記ＣＧ映像を生成しないかを切り替えることを特徴とする請求項６に記載の映像生成システム。
【請求項８】
前記重畳手段は、複数のカメラについての複数のカメラデータを前記映像信号に重畳することを特徴とする請求項２に記載の映像生成システム。
【請求項９】
前記カメラデータには、カメラを特定するカメラ特定情報が含まれており、
前記ＣＧ生成手段は、前記カメラデータに含まれる前記カメラ特定情報に基づいて、当該カメラ特定情報に対応するカメラに応じた前記ＣＧ映像を生成することを特徴とする請求項１に記載の映像生成システム。
【請求項１０】
中継現場で利用される中継現場側装置と、放送局で利用される放送局側装置とを有する映像生成システムによって実行される映像生成方法であって、
前記中継現場でカメラが撮影した映像に対応する映像信号と、前記カメラの位置情報及びレンズ情報を含むカメラデータとを、前記中継現場側装置から前記放送局側装置に送信する送信工程と、
前記送信工程で送信された前記映像信号及び前記カメラデータを受信する受信工程と、
前記カメラデータに基づいてＣＧ映像を生成するＣＧ生成工程と、
前記映像信号に対応する映像と前記ＣＧ映像とを合成するＣＧ合成工程と、を備えることを特徴とする映像生成方法。
【請求項１１】
中継現場で利用される映像信号送信装置であって、
前記中継現場でカメラが撮影した映像に対応する映像信号に対して、前記カメラの位置情報及びレンズ情報を含むカメラデータを重畳する重畳手段と、
前記重畳手段が前記映像信号に対して前記カメラデータを重畳した重畳信号を、放送局で利用される放送局側装置に送信する送信手段と、を備えることを特徴とする映像信号送信装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラの映像に対してＣＧ映像を合成する技術分野に関する。
【背景技術】
【０００２】
従来から、中継現場においてカメラで撮影された映像に対して、ＣＧ（Computer Graphics）映像を合成する技術が提案されている。なお、以下では、中継現場においてカメラで撮影された映像のことを、適宜「中継映像」と呼ぶ。「中継映像」は、カメラによって実際に撮影された実写映像に相当する。また、以下では、中継映像に対して合成するＣＧ映像のことを、「バーチャルＣＧ映像」と呼ぶことがある。
【０００３】
例えば、特許文献１には、テレビ中継、特にゴルフ中継におけるような起伏のある場所のテレビ中継時に、中継映像の起伏を視覚的に表示するためのアンジュレーション表現装置が記載されている。具体的には、この装置では、事前に記憶されたカメラのレンズ及び位置データや、カメラセンサによって検出されたカメラの方向及びズーム倍率などに基づいて、撮影している地形に応じた３次元ＣＧ映像を生成して、中継映像と３次元ＣＧ映像とを合成している。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−１２８２９８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、一般的に、カメラの位置情報やレンズ情報などを含むカメラデータをＣＧ送出機などに入力してＣＧ映像を得て、ＣＧ映像を中継映像に対して合成しているが、そのような一連の処理を中継現場で行っている。そのため、ＣＧ送出機やＣＧ合成器や映像遅延装置などの機材全てを中継現場へ持ち込むため、中継現場での機材が大掛かりなものとなる傾向にあった。また、実際の運用にあたっては、これらに対してバックアップ機材も準備することが求められるため、中継現場での機材規模が更に増大する傾向にあった。
【０００６】
更に、上記したような中継現場に持ち込まれる機材は、番組によっては設置・調整等の準備期間を含めて中継現場側で占有される場合があり、その場合には機材の運用効率が悪くなる傾向にあった。加えて、そのオペレーションについても中継現場側で行うこととなるため、中継現場へ派遣するオペレータ人員の数が増大する傾向にあった。
【０００７】
本発明が解決しようとする課題には上記のようなものが一例として挙げられる。本発明は、中継映像に対してＣＧ映像を合成した映像を生成する映像生成システムにおいて、中継現場側の構成を簡易なものにすることを課題とする。
【課題を解決するための手段】
【０００８】
本発明の１つの観点では、中継現場で利用される中継現場側装置と、放送局で利用される放送局側装置とを有する映像生成システムであって、前記中継現場側装置は、前記中継現場でカメラが撮影した映像に対応する映像信号と、前記カメラの位置情報及びレンズ情報を含むカメラデータとを、前記放送局側装置に送信する送信手段を備え、前記放送局側装置は、前記中継現場側装置の前記送信手段が送信した前記映像信号及び前記カメラデータを受信する受信手段と、前記カメラデータに基づいてＣＧ映像を生成するＣＧ生成手段と、前記映像信号に対応する映像と前記ＣＧ映像とを合成するＣＧ合成手段と、を備える。
【０００９】
上記の映像生成システムでは、中継現場で利用される中継現場側装置は、中継現場でカメラが撮影した映像（中継映像）に対応する映像信号と、カメラの位置情報及びレンズ情報を含むカメラデータとを、放送局側装置に送信する。そして、放送局で利用される放送局側装置は、受信したカメラデータに基づいてＣＧ映像を生成して、映像信号に対応する中継映像と当該ＣＧ映像とを合成する。これにより、中継現場側の構成を簡易なものにすることが可能となる。具体的には、上記の映像生成システムによれば、中継現場での機材量を大幅に削減しつつ、放送局側で中継映像とＣＧ映像とを適切に合成することができる。
【００１０】
上記の映像生成システムの一態様では、前記中継現場側装置は、前記カメラデータを前記映像信号に重畳する重畳手段を更に備えており、前記送信手段は、前記重畳手段が前記映像信号に対して前記カメラデータを重畳した重畳信号を送信する。
【００１１】
上記の態様によれば、カメラデータ専用の伝送経路を用いることなく、中継現場にて映像信号に対してカメラデータを重畳した重畳信号を伝送するため、伝送上の取り回しが簡便になる。また、映像信号とカメラデータとを同一の伝送経路上にて重畳して伝送できるため、途中経路で発生する遅延量は映像信号とカメラデータとで同一になり、また、映像信号とカメラデータとが同期したものとなる（つまりジッターは生じない）。そのため、ＣＧ合成時の映像遅延装置の設定を容易に行うことが可能となる。
【００１２】
上記の映像生成システムにおいて好適には、前記放送局側装置は、前記中継現場側装置の前記送信手段から前記受信手段が受信した前記重畳信号を、映像信号とカメラデータとに分離する分離手段を更に備えており、前記ＣＧ生成手段は、前記分離手段が分離した前記カメラデータに基づいて前記ＣＧ映像を生成し、前記ＣＧ合成手段は、前記分離手段が分離した前記映像信号に対応する映像と前記ＣＧ映像とを合成する。これにより、放送局において、重畳信号から、中継映像とＣＧ映像とを適切に合成することができる。
【００１３】
上記の映像生成システムの他の一態様では、前記重畳手段は、前記映像信号に対応する映像を撮影したカメラと同一のカメラについての前記カメラデータを、当該映像信号に重畳する。これにより、１本の伝送経路のみで、中継映像とＣＧ映像とを適切に合成することができる。
【００１４】
上記の映像生成システムの他の一態様では、前記重畳手段は、前記映像信号に対応する映像を撮影したカメラと異なるカメラについての前記カメラデータを、当該映像信号に重畳する。
【００１５】
上記の態様によれば、例えばＣＧ映像を付加するためのカメラとＣＧ映像を付加しないカメラとを用いた場合に、ＣＧ映像を付加しないカメラの映像を送信している間も、ＣＧ映像を付加するためのカメラのカメラデータを送信し続けることができる。よって、予め放送局側でＣＧ映像を付加するためのカメラ用のＣＧ映像をスタンバイしておくことが可能となる。
【００１６】
上記の映像生成システムの他の一態様では、前記中継現場側装置は、複数のカメラが撮影した映像の中から１つのカメラが撮影した映像を選択すると共に、いずれのカメラの映像を選択したかを示す選択信号を出力する映像選択手段を更に備えており、前記重畳手段は、前記カメラデータに加えて前記選択信号も前記映像信号に重畳する。
【００１７】
上記の態様によれば、いずれのカメラの映像が選択されているかを示す選択信号を伝送することで、中継現場において、ＣＧ映像を付加するためのカメラの中継映像を切り替えるタイミングに連動して、放送局において当該中継映像に対してＣＧ映像を適切に合成することができる。したがって、放送局において、ＣＧ映像を付加しないカメラの中継映像に対してＣＧ映像を合成してしまうことを適切に防止することができる。
【００１８】
上記の映像生成システムにおいて好適には、前記ＣＧ生成手段は、前記映像信号に重畳された前記選択信号に基づいて、前記ＣＧ映像を生成するか、それとも前記ＣＧ映像を生成しないかを切り替えると良い。
【００１９】
上記の映像生成システムの他の一態様では、前記重畳手段は、複数のカメラについての複数のカメラデータを前記映像信号に重畳する。これにより、複数のカメラデータを映像信号に重畳して送信するため、放送局において複数のカメラについてのＣＧ映像をスタンバイしておくことができる。
【００２０】
上記の映像生成システムの他の一態様では、前記カメラデータには、カメラを特定するカメラ特定情報が含まれており、前記ＣＧ生成手段は、前記カメラデータに含まれる前記カメラ特定情報に基づいて、当該カメラ特定情報に対応するカメラに応じた前記ＣＧ映像を生成する。これにより、放送局側では、受信したカメラデータがどのカメラのものであるかを容易に判別することができる。
【００２１】
本発明の他の観点では、中継現場で利用される中継現場側装置と、放送局で利用される放送局側装置とを有する映像生成システムによって実行される映像生成方法は、前記中継現場でカメラが撮影した映像に対応する映像信号と、前記カメラの位置情報及びレンズ情報を含むカメラデータとを、前記中継現場側装置から前記放送局側装置に送信する送信工程と、前記送信工程で送信された前記映像信号及び前記カメラデータを受信する受信工程と、前記カメラデータに基づいてＣＧ映像を生成するＣＧ生成工程と、前記映像信号に対応する映像と前記ＣＧ映像とを合成するＣＧ合成工程と、を備える。
【００２２】
本発明の更に他の観点では、中継現場で利用される映像信号送信装置は、前記中継現場でカメラが撮影した映像に対応する映像信号に対して、前記カメラの位置情報及びレンズ情報を含むカメラデータを重畳する重畳手段と、前記重畳手段が前記映像信号に対して前記カメラデータを重畳した重畳信号を、放送局で利用される放送局側装置に送信する送信手段と、を備える。
【図面の簡単な説明】
【００２３】
【図１】本実施形態に係る映像生成システムの概略構成図を示す。
【図２】第１実施形態に係る映像生成システムの概略構成を示すブロック図である。
【図３】ＨＤ−ＳＤＩ信号において関係する部分の概略構成を示す。
【図４】第２実施形態に係る映像生成システムの概略構成を示すブロック図である。
【図５】第３実施形態に係る映像生成システムの概略構成を示すブロック図である。
【図６】第４実施形態に係る映像生成システムの概略構成を示すブロック図である。
【図７】第５実施形態に係る映像生成システムの概略構成を示すブロック図である。
【図８】第６実施形態に係る映像生成システムの概略構成を示すブロック図である。
【発明を実施するための形態】
【００２４】
以下、図面を参照して本発明の好適な実施の形態について説明する。
【００２５】
［システム構成］
図１は、本実施形態に係る映像生成システムが適用されたシステムの概略構成図を示している。図１に示すように、本システムは、中継現場２０で利用されるカメラ１及び中継現場側装置２と、放送局３０で利用される放送局側装置３とを有する。中継現場側装置２は、カメラ１で撮影された映像（中継映像）に対応する映像信号などを、所定の伝送経路４０を介して放送局側装置３に伝送する。例えば、中継現場側装置２は、中継車などに設けられる。なお、中継現場側装置２及び放送局側装置３は、実際には複数の機器にて構成されており、そのような複数の機器のまとまりに相当するものである（言い換えるとシステムに相当する）。
【００２６】
以下では、中継現場側装置２及び放送局側装置３の構成に関する具体的な実施形態（第１乃至第６実施形態）について説明する。
【００２７】
［第１実施形態］
第１実施形態では、中継現場側装置２（以下では第１実施形態に係る中継現場側装置２を「中継現場側装置２ａ」と表記する。）は、中継映像に対応する映像信号に加えて、カメラ１の位置情報やレンズ情報などを含むカメラデータも送信する。そして、放送局側装置３（以下では第１実施形態に係る放送局側装置３を「放送局側装置３ａ」と表記する。）は、受信したカメラデータに基づいてＣＧ映像を生成し、映像信号に対応する中継映像に対してＣＧ映像を合成する。
【００２８】
ここで、上記した「カメラデータ」は、中継映像に対してＣＧ映像を位置合わせするために必要な、カメラ１の状態などを示すデータであり、カメラ１の位置情報やレンズ情報を含む。カメラ１の位置情報としては、カメラ１の２次元／３次元の位置（カメラのパンやチルトに対応する位置）や、カメラ１が基準位置から移動した量（例えばドリー撮影においてカメラ１が移動した量）などが挙げられる。また、カメラ１のレンズ情報としては、カメラ１のズームやフォーカスなどに対応する情報が挙げられる。
【００２９】
図２は、第１実施形態に係る映像生成システムの概略構成を示すブロック図である。図２に示すように、中継現場側装置２ａは、カメラコントロールユニット２ａ１と、伝送装置２ａ２と、ルーター２ａ３と、シェーパー２ａ４とを有しており、放送局側装置３ａは、伝送装置３ａ１と、シェーパー３ａ２と、ルーター３ａ３と、映像遅延装置３ａ４と、ＣＧ送出機３ａ５と、ＣＧ合成器３ａ６とを有する。
【００３０】
まず、中継現場側装置２ａでは、カメラ１で撮影された映像（中継映像）、及びカメラ１のセンサ（不図示）で検出されたデータ（例えばカメラデータの生成元となるデータ）の両方を含む信号ｓ１１が、カメラ１から光ケーブルなどを介してカメラコントロールユニット２ａ１に入力される。そして、カメラコントロールユニット２ａ１は、入力された信号ｓ１１に基づいて、中継映像に対応する映像信号ｓ１２を伝送装置２ａ２に出力すると共に、カメラデータに対応する信号ｓ１３をルーター２ａ３に出力する。この場合、カメラコントロールユニット２ａ１は、信号ｓ１１に含まれる、カメラ１のセンサで検出されたデータなどに基づいて、カメラデータを生成する。
【００３１】
この後、中継現場側装置２ａでは、伝送装置２ａ２が、伝送経路４０ａ１を介して、映像信号ｓ１２を放送局側装置３ａに送信する。例えば、伝送経路４０ａ１は、専用の映像回線である。他方で、ルーター２ａ３は、カメラデータに対応する信号ｓ１３を、シェーパー２ａ４を介して放送局側装置３ａに送信する。この場合、シェーパー２ａ４は、カメラデータに対応する信号ｓ１３に対してトラフィックシェーピング（パケットシェーピング）の処理を施す。そして、シェーパー２ａ４による処理後の信号ｓ１４は、伝送経路４０ａ２を介して、放送局側装置３ａに送信される。例えば、伝送経路４０ａ２は、ＩＰ（Internet Protocol）回線である。
【００３２】
次に、放送局側装置３ａでは、伝送装置３ａ１が、伝送経路４０ａ１を介して中継現場側装置２ａ内の伝送装置２ａ２から送信された、中継映像に対応する映像信号ｓ１２を受信し、当該映像信号ｓ１２を映像遅延装置３ａ４に出力する。他方で、ルーター３ａ３は、伝送経路４０ａ２を介して中継現場側装置２ａ内のルーター２ａ３から送信された、カメラデータに対応する信号ｓ１４を、シェーパー３ａ２を介して受信する。この場合、シェーパー３ａ２は、カメラデータに対応する信号ｓ１４に対してトラフィックシェーピング（パケットシェーピング）の処理を施す。そして、シェーパー３ａ２による処理後の信号ｓ１５は、ＣＧ送出機３ａ５に出力される。
【００３３】
この後、放送局側装置３ａでは、映像遅延装置３ａ４が、映像信号ｓ１２に対して所定の遅延を付与した映像信号ｓ１６をＣＧ合成器３ａ６に出力する。具体的には、映像遅延装置３ａ４は、ＣＧ送出機３ａ５でのＣＧ映像の作画時間に相当する時間と、映像信号を送る経路とカメラデータを送る経路との違いにより生じる差分時間と、後述するジッター吸収のためのシェーパー２ａ４、３ａ２でバッファリングされる時間とに応じた時間だけ、映像信号ｓ１２を遅延させる。他方で、ＣＧ送出機３ａ５は、カメラデータに対応する信号ｓ１５に基づいてＣＧ映像を作画し、当該ＣＧ映像に対応する信号ｓ１７をＣＧ合成器３ａ６に出力する。そして、ＣＧ合成器３ａ６は、映像遅延装置３ａ４から入力された映像信号ｓ１６と、ＣＧ送出機３ａ５から入力されたＣＧ映像に対応する信号ｓ１７とに基づいて、中継映像とＣＧ映像とを合成した映像（以下では適宜「バーチャル映像」と呼ぶ。）を生成し、バーチャル映像に対応する信号ｓ１８を出力する。
【００３４】
以上説明したように、第１実施形態では、中継現場２０から中継映像と共にカメラデータを放送局３０側に伝送し、放送局３０側でＣＧ映像を送出し合成する。これにより、高価なＣＧ送出装置などを放送局３０外に持ち出すことなく、放送局３０側で中継映像にＣＧ映像を適切に合成することができる。また、中継現場２０での機材量を大幅に削減することができる。
【００３５】
ここで、上記したようなシェーパー２ａ４、３ａ２を用いている理由について説明する。第１実施形態では、伝送経路４０ａ１を用いて中継現場側装置２ａから放送局側装置３ａに中継映像を伝送しており、伝送経路４０ａ２を用いて中継現場側装置２ａから放送局側装置３ａにカメラデータを伝送している。この場合、伝送経路４０ａ１と伝送経路４０ａ２との回線種別の違いや経路の違いなどにより、伝送遅延量が異なる可能性がある。そのため、最終的にＣＧ合成する直前に映像遅延装置３ａ４で同期合わせを行ったり、厳密に等間隔でカメラデータを受信したりする必要性があるが、回線種別によってはデータにジッター（ゆらぎ）が生じる可能性がある。したがって、第１実施形態では、そのようなジッターが生じた場合のデータの等時性を補償すべく、データのバッファ機能を有するシェーパー２ａ４、３ａ２を用いている。
【００３６】
なお、伝送装置２ａ２及びルーター２ａ３は、本発明における「送信手段」の一例に相当し、伝送装置３ａ１及びルーター２ａ３は、本発明における「受信手段」の一例に相当する。また、ＣＧ送出機３ａ５は、本発明における「ＣＧ生成手段」の一例に相当し、ＣＧ合成器３ａ６は、本発明における「ＣＧ合成手段」の一例に相当する。
【００３７】
［第２実施形態］
次に、第２実施形態について説明する。第１実施形態では、中継映像とは異なる伝送経路を用いてカメラデータを伝送していた、つまり２本の伝送経路４０ａ１、４０ａ２を用いて中継映像及びカメラデータのそれぞれを伝送していた（図２参照）。これに対して、第２実施形態では、中継映像と同一の伝送経路を用いてカメラデータを伝送する、つまり１本の伝送経路を用いて中継映像及びカメラデータの両方を伝送する。具体的には、第２実施形態では、中継現場側装置２（以下では第２実施形態に係る中継現場側装置２を「中継現場側装置２ｂ」と表記する。）は、カメラデータに対応する信号を映像信号に重畳し、そのように重畳した信号を１本の伝送経路を用いて伝送する。
【００３８】
より詳しくは、図３に示すように、中継現場側装置２ｂは、ＨＤ−ＳＤＩ（High Definition Serial Digital Interface）の規格において、映像信号のための有効映像領域１０１の隙間にあるアンシラリー領域１０２を利用し、このアンシラリー領域１０２にカメラデータに対応する信号を重畳する。この場合、中継現場側装置２ｂは、アンシラリーインサーター（言い換えるとアンシラリーエンコーダー）というＨＤ−ＳＤＩの映像信号とその映像補助信号とを重畳する装置を用いて、カメラデータに対応する信号を映像信号に重畳したＨＤ−ＳＤＩ信号に一本化して、当該ＨＤ−ＳＤＩ信号を通常の映像信号の伝送経路を介して送信する。そして、放送局側装置３（以下では第２実施形態に係る放送局側装置３を「放送局側装置３ｂ」と表記する。）では、こうして受信したＨＤ−ＳＤＩ信号を、アンシラリーデコーダーという装置を用いて映像信号とカメラデータに対応する信号とに分離する。
【００３９】
図４は、第２実施形態に係る映像生成システムの概略構成を示すブロック図である。図４に示すように、中継現場側装置２ｂは、カメラコントロールユニット２ｂ１と、アンシラリーインサーター２ｂ２と、伝送装置２ｂ３とを有しており、放送局側装置３ｂは、伝送装置３ｂ１と、アンシラリーデコーダー３ｂ２と、映像遅延装置３ｂ３と、ＣＧ送出機３ｂ４と、ＣＧ合成器３ｂ５とを有する。なお、以下では、第１実施形態と同様の構成（機能や処理などを含むものとする。以下同様とする。）については、その説明を適宜省略する。つまり、特に説明しない構成は、第１実施形態と同様であるものとする。
【００４０】
まず、中継現場側装置２ｂでは、カメラコントロールユニット２ｂ１が、入力された信号ｓ２１に基づいて、中継映像に対応する映像信号ｓ２２及びカメラデータに対応する信号ｓ２３の両方をアンシラリーインサーター２ｂ２に出力する。そして、アンシラリーインサーター２ｂ２は、映像信号ｓ２２とカメラデータに対応する信号ｓ２３とを重畳し、重畳した信号ｓ２４（ＨＤ−ＳＤＩ信号であり、本発明における「重畳信号」の一例に相当する。）を伝送装置２ｂ３に出力する。具体的には、アンシラリーインサーター２ｂ２は、カメラデータに対応する信号ｓ２３をアンシラリー領域１０２に重畳する。なお、アンシラリーインサーター２ｂ２は、本発明における「重畳手段」の一例に相当する。そして、伝送装置２ｂ３は、アンシラリーインサーター２ｂ２から入力された信号ｓ２４を、伝送経路４０ｂを介して放送局側装置３ｂに送信する。
【００４１】
ここで、ＨＤ−ＳＤＩ信号を伝送する際にはコーデックによる圧縮は不可欠だが、多くの場合、アンシラリー領域１０２内のデータも透過することができる。そのため、上記の伝送経路４０ｂとしては、コーデックでの疎通さえ確認できれば、光回線のような物理回線、又は、ＦＰＵ（Field Pickup Unit）やＳＮＧ（Satellite News Gathering）のような無線回線を適用することができる。
【００４２】
次に、放送局側装置３ｂでは、伝送装置３ｂ１が、伝送経路４０ｂを介して中継現場側装置２ｂ内の伝送装置２ｂ３から送信された信号ｓ２４を受信し、当該信号ｓ２４をアンシラリーデコーダー３ｂ２に出力する。そして、アンシラリーデコーダー３ｂ２は、当該信号ｓ２４を映像信号ｓ２５とカメラデータに対応する信号ｓ２６とに分離し、映像信号ｓ２５を映像遅延装置３ｂ３に出力し、カメラデータに対応する信号ｓ２６をＣＧ送出機３ｂ４に出力する。分離された映像信号ｓ２５は、アンシラリーインサーター２ｂ２に入力された映像信号ｓ２２に相当し、分離されたカメラデータに対応する信号ｓ２６は、アンシラリーインサーター２ｂ２に入力されたカメラデータに対応する信号ｓ２３に相当する。なお、アンシラリーデコーダー３ｂ２は、本発明における「分離手段」の一例に相当する。
【００４３】
この後、放送局側装置３ｂでは、映像遅延装置３ｂ３が、映像信号ｓ２５に対して所定の遅延を付与した映像信号ｓ２７をＣＧ合成器３ｂ５に出力する。また、ＣＧ送出機３ｂ４は、カメラデータに対応する信号ｓ２６に基づいてＣＧ映像を作画し、当該ＣＧ映像に対応する信号ｓ２８をＣＧ合成器３ｂ５に出力する。そして、ＣＧ合成器３ｂ５は、映像遅延装置３ｂ３から入力された映像信号ｓ２７と、ＣＧ送出機３ｂ４から入力されたＣＧ映像に対応する信号ｓ２８とに基づいて、中継映像とＣＧ映像とを合成したバーチャル映像を生成し、当該バーチャル映像に対応する信号ｓ２９を出力する。
【００４４】
以上説明したように、第２実施形態によれば、カメラデータ専用の回線を用いることなく、中継現場２０にて、有効映像領域１０１の隙間にあるアンシラリー領域１０２にカメラデータを重畳したＨＤ−ＳＤＩ信号を伝送するため、伝送上の取り回しが簡便になる。また、第２実施形態によれば、映像信号とカメラデータとを同一回線上に重畳して伝送するため、途中経路で発生する遅延量は映像信号とカメラデータとで同一になり、また、映像信号とカメラデータとが同期したものとなる（つまりジッターは生じない）。そのため、放送局３０において映像遅延装置３ｂ３にて映像信号ｓ２５を遅延させる量を、ＣＧ送出機３ｂ４でのＣＧ映像の作画時間のみに基づいて容易に設定することができる。即ち、ＣＧ合成時の映像遅延装置３ｂ３の設定を容易に行うことができる。
【００４５】
［第３実施形態］
次に、第３実施形態について説明する。第２実施形態では、アンシラリーインサーター２ｂ２で重畳する映像信号とカメラデータとは同一のカメラ１から取得されたものであった。これに対して、第３実施形態では、アンシラリーインサーターで重畳する映像信号とカメラデータとを別のカメラ１から取得する。具体的には、第３実施形態では、バーチャルＣＧ映像を付加するためのカメラ１（以下では「カメラ１ａ１」と表記する。）と、バーチャルＣＧ映像を付加しないカメラ１（以下では「カメラ１ｂ１」と表記する。）とを切り替えて用いる。そして、中継現場側装置２（以下では第３実施形態に係る中継現場側装置２を「中継現場側装置２ｃ」と表記する。また、第３実施形態に係る放送局側装置３を「放送局側装置３ｃ」と表記する。）は、カメラ１ｂ１の中継映像を送信している間にもカメラ１ａ１のカメラデータを送信し続ける、言い換えるとカメラ１ａ１のカメラデータを常時送信する。つまり、中継現場側装置２ｃは、カメラ１ａ１のカメラデータをアンシラリーインサーターに入力させ続けることとし、カメラ１ｂ１の中継映像を送信する場合にも、カメラ１ｂ１の映像信号に対してカメラ１ａ１のカメラデータを重畳する。なお、カメラ１ａ１の中継映像を送信する場合にも、当然、カメラ１ａ１の映像信号に対してカメラデータが重畳される。
【００４６】
図５は、第３実施形態に係る映像生成システムの概略構成を示すブロック図である。図５に示すように、中継現場側装置２ｃは、カメラコントロールユニット２ｃ１ａ、２ｃ１ｂと、映像スイッチャー２ｃ２と、アンシラリーインサーター２ｃ３と、伝送装置２ｃ４とを有しており、放送局側装置３ｃは、伝送装置３ｃ１と、アンシラリーデコーダー３ｃ２と、映像遅延装置３ｃ３と、ＣＧ送出機３ｃ４と、ＣＧ合成器３ｃ５とを有する。なお、以下では、第２実施形態と同様の構成については、その説明を適宜省略する。つまり、特に説明しない構成は、第２実施形態と同様であるものとする。
【００４７】
まず、バーチャルＣＧ映像を付加するためのカメラ１ａ１は、撮影した中継映像及びセンサで検出したデータ（例えばカメラデータの生成元となるデータ）の両方を含む信号ｓ３１ａを、中継現場側装置２ｃ内のカメラコントロールユニット２ｃ１ａに出力する。また、バーチャルＣＧ映像を付加しないカメラ１ｂ１は、撮影した中継映像に対応する信号ｓ３１ｂを、中継現場側装置２ｃ内のカメラコントロールユニット２ｃ１ｂに出力する。例えば、カメラ１ａ１では、ゴルフ中継などでホールを見渡すような俯瞰の中継映像を撮影し、当該中継映像は、ボールの飛距離等を指し示すバーチャルＣＧ映像を合成するために用いられる。これに対して、カメラ１ｂ１では、例えばゴルフ中継などでショットを打つ選手の映像を撮影する。
【００４８】
次に、中継現場側装置２ｃでは、カメラコントロールユニット２ｃ１ａが、カメラ１ａ１から入力された信号ｓ３１ａに基づいて、中継映像に対応する映像信号ｓ３２ａを映像スイッチャー２ｃ２に出力すると共に、カメラデータに対応する信号ｓ３３をアンシラリーインサーター２ｃ３に出力する。また、カメラコントロールユニット２ｃ１ｂは、カメラ１ｂ１から入力された信号ｓ３１ｂに基づいて、中継映像に対応する映像信号ｓ３２ｂを映像スイッチャー２ｃ２に出力する。
【００４９】
そして、映像スイッチャー２ｃ２は、カメラコントロールユニット２ｃ１ａから入力された映像信号ｓ３２ａ、及びカメラコントロールユニット２ｃ１ｂから入力された映像信号ｓ３２ｂのいずれか一方を、映像信号ｓ３４としてアンシラリーインサーター２ｃ３に出力する。具体的には、映像スイッチャー２ｃ２は、例えばオペレータなどの操作に応じて、カメラ１ａ１を選択する場合には映像信号ｓ３２ａを映像信号ｓ３４として出力し、カメラ１ｂ１を選択する場合には映像信号ｓ３２ｂを映像信号ｓ３４として出力する。
【００５０】
この後、中継現場側装置２ｃでは、アンシラリーインサーター２ｃ３が、映像スイッチャー２ｃ２から入力された映像信号ｓ３４と、カメラコントロールユニット２ｃ１ａから入力されたカメラデータに対応する信号ｓ３３とを重畳し、重畳した信号ｓ３５（ＨＤ−ＳＤＩ信号）を伝送装置２ｃ４に出力する。そして、伝送装置２ｃ４は、アンシラリーインサーター２ｃ３から入力された信号ｓ３５を、伝送経路４０ｃを介して放送局側装置３ｃに送信する。
【００５１】
次に、放送局側装置３ｃでは、伝送装置３ｃ１が、伝送経路４０ｃを介して中継現場側装置２ｃ内の伝送装置２ｃ４から送信された信号ｓ３５を受信し、当該信号ｓ３５をアンシラリーデコーダー３ｃ２に出力する。そして、アンシラリーデコーダー３ｃ２は、当該信号ｓ３５を映像信号ｓ３６とカメラデータに対応する信号ｓ３７とに分離し、映像信号ｓ３６を映像遅延装置３ｃ３に出力し、カメラデータに対応する信号ｓ３７をＣＧ送出機３ｃ４に出力する。
【００５２】
この後、放送局側装置３ｃでは、映像遅延装置３ｃ３が、映像信号ｓ３６に対して所定の遅延を付与した映像信号ｓ３８をＣＧ合成器３ｃ５に出力する。また、ＣＧ送出機３ｃ４は、カメラデータに対応する信号ｓ３７に基づいてＣＧ映像を作画し、当該ＣＧ映像に対応する信号ｓ３９をＣＧ合成器３ｃ５に出力する。
【００５３】
そして、ＣＧ合成器３ｃ５は、映像遅延装置３ｃ３から入力された映像信号ｓ３８と、ＣＧ送出機３ｃ４から入力されたＣＧ映像に対応する信号ｓ３９とに基づいて、映像を生成し、生成した映像に対応する信号ｓ３１０を出力する。この場合、ＣＧ合成器３ｃ５は、例えばオペレータなどによる映像スイッチャー２ｃ２への操作に基づいて、中継映像に対してＣＧ映像を合成するか、それとも中継映像に対してＣＧ映像を合成しないかを切り替える。具体的には、ＣＧ合成器３ｃ５は、映像スイッチャー２ｃ２がカメラ１ａ１からの映像信号ｓ３２ａを選択している場合には、中継映像に対してＣＧ映像を合成する、つまりバーチャル映像を生成して出力する。これに対して、ＣＧ合成器３ｃ５は、映像スイッチャー２ｃ２がカメラ１ｂ１からの映像信号ｓ３２ｂを選択している場合には、中継映像に対してＣＧ映像を合成しない、つまりバーチャル映像を生成せずに中継映像をそのまま出力する。
【００５４】
ここで、上記したように、中継現場２０から放送局３０にカメラ１ａ１のカメラデータを常時送信する理由、つまり中継現場２０から放送局３０にカメラ１ｂ１の中継映像を送信している間にもカメラ１ａ１のカメラデータを送信し続ける理由について説明する。仮に、中継現場２０からカメラ１ｂ１の中継映像を送信している際に、任意のタイミングで中継映像をカメラ１ｂ１からカメラ１ａ１に切り替えた瞬間に、カメラ１ａ１のカメラデータを適用するような切り替えを同時に行う場合を考える。その場合には、放送局３０側でカメラデータを受信するＣＧ送出機３ｃ４では、無信号状態からいきなりカメラデータが入力されることになる。このような状況下では、生成されるＣＧ映像が安定せず、また、カメラ１ｂ１の中継映像を送信している間はカメラ１ａ１に対するＣＧ映像の確認もできない。
【００５５】
したがって、第３実施形態では、中継現場２０から放送局３０にカメラ１ｂ１の中継映像を送信している間にもカメラ１ａ１のカメラデータを送信し続けることとした。こうすることで、放送局３０のＣＧ送出機３ｃ４では連続してＣＧ映像を出力するため、ＣＧ映像が安定する。また、中継映像がカメラ１ｂ１からカメラ１ａ１に切り替わる直前まで、どのようなＣＧ映像が出力されるかを監視することができる。つまり、予めＣＧ送出機３ｃ４側でカメラ１ａ１についての合成用ＣＧ映像をスタンバイしておくことが可能となる。
【００５６】
なお、上記した第３実施形態では、バーチャルＣＧ映像を付加しないカメラ１ｂ１を１台のみ用いていたが、バーチャルＣＧ映像を付加しないカメラ１ｂ１を２台以上用いても良い。その場合には、映像スイッチャー２ｃ２で、カメラ１ａ１の中継映像及び２台以上のカメラ１ｂ１の中継映像のうちのいずれか１つの中継映像に切り替えれば良い。
【００５７】
［第４実施形態］
次に、第４実施形態について説明する。第４実施形態では、第３実施形態と同様に、バーチャルＣＧ映像を付加するためのカメラ１ａ１と、バーチャルＣＧ映像を付加しないカメラ１ｂ１とを切り替えて用い、中継現場２０から放送局３０にカメラ１ｂ１の中継映像を送信している間にもカメラ１ａ１のカメラデータを送信し続ける。しかしながら、第４実施形態では、中継現場側装置２（以下では第４実施形態に係る中継現場側装置２を「中継現場側装置２ｄ」と表記する。）は、映像スイッチャーがカメラ１ａ１及びカメラ１ｂ１のいずれを選択しているかを示す信号（タリー信号）を放送局３０に送信する点で、第３実施形態と異なる。具体的には、第４実施形態では、中継現場側装置２ｄは、カメラデータに対応する信号に加えてタリー信号もアンシラリー領域１０２に重畳して、放送局３０に送信する。そして、放送局側装置３（以下では第４実施形態に係る放送局側装置３を「放送局側装置３ｄ」と表記する。）は、受信した信号においてアンシラリー領域１０２に重畳されたタリー信号に基づいて、カメラ１ａ１が選択されている場合にのみ、中継映像に対してＣＧ映像を合成する。なお、タリー信号は、通常、接点信号であるが、適切な信号形式（ここではシリアルデータ形式）に変換を行って入出力を行うものとする。
【００５８】
図６は、第４実施形態に係る映像生成システムの概略構成を示すブロック図である。図６に示すように、中継現場側装置２ｄは、カメラコントロールユニット２ｄ１ａ、２ｄ１ｂと、映像スイッチャー２ｄ２と、アンシラリーインサーター２ｄ３と、伝送装置２ｄ４とを有しており、放送局側装置３ｄは、伝送装置３ｄ１と、アンシラリーデコーダー３ｄ２と、映像遅延装置３ｄ３と、ＣＧ送出機３ｄ４と、ＣＧ合成器３ｄ５とを有する。なお、以下では、第３実施形態と同様の構成については、その説明を適宜省略する。つまり、特に説明しない構成は、第３実施形態と同様であるものとする。
【００５９】
まず、中継現場側装置２ｄでは、カメラコントロールユニット２ｄ１ａが、カメラ１ｄ１から入力された信号ｓ４１ａに基づいて、中継映像に対応する映像信号ｓ４２ａを映像スイッチャー２ｄ２に出力すると共に、カメラデータに対応する信号ｓ４３をアンシラリーインサーター２ｄ３に出力する。また、カメラコントロールユニット２ｄ１ｂは、カメラ１ｂ１から入力された信号ｓ４１ｂに基づいて、中継映像に対応する映像信号ｓ４２ｂを映像スイッチャー２ｄ２に出力する。
【００６０】
そして、映像スイッチャー２ｄ２は、カメラコントロールユニット２ｄ１ａから入力された映像信号ｓ４２ａ、及びカメラコントロールユニット２ｄ１ｂから入力された映像信号ｓ４２ｂのいずれか一方を、映像信号ｓ４４としてアンシラリーインサーター２ｄ３に出力する。具体的には、映像スイッチャー２ｄ２は、例えばオペレータなどの操作に応じて、カメラ１ａ１を選択する場合には映像信号ｓ４２ａを映像信号ｓ４４として出力し、カメラ１ｂ１を選択する場合には映像信号ｓ４２ｂを映像信号ｓ４４として出力する。更に、映像スイッチャー２ｄ２は、カメラ１ａ１が選択されているか否かを示すタリー信号ｓ４５（上記したようにシリアルデータ形式の信号である）も、アンシラリーインサーター２ｄ３に出力する。例えば、タリー信号ｓ４５は、カメラ１ａ１が選択されている場合には「１」となり、カメラ１ａ１が選択されていない場合（基本的にはカメラ１ｂ１が選択されている場合に相当する）には「０」となる。
【００６１】
なお、映像スイッチャー２ｄ２は、本発明における「映像選択手段」の一例に相当する。また、タリー信号ｓ４５は、本発明における「選択信号」の一例に相当する。
【００６２】
この後、中継現場側装置２ｄでは、アンシラリーインサーター２ｄ３が、映像スイッチャー２ｄ２から入力された映像信号ｓ４４に対して、カメラコントロールユニット２ｄ１ａから入力されたカメラデータに対応する信号ｓ４３と、映像スイッチャー２ｄ２から入力されたタリー信号ｓ４５とを重畳し、重畳した信号ｓ４６（ＨＤ−ＳＤＩ信号）を伝送装置２ｄ４に出力する。具体的には、アンシラリーインサーター２ｄ３は、アンシラリー領域１０２に、カメラデータに対応する信号ｓ４３とタリー信号ｓ４５とを重畳する。そして、伝送装置２ｄ４は、アンシラリーインサーター２ｄ３から入力された信号ｓ４６を、伝送経路４０ｄを介して放送局側装置３ｄに送信する。
【００６３】
次に、放送局側装置３ｄでは、伝送装置３ｄ１が、伝送経路４０ｄを介して中継現場側装置２ｄ内の伝送装置２ｄ４から送信された信号ｓ４６を受信し、当該信号ｓ４６をアンシラリーデコーダー３ｄ２に出力する。そして、アンシラリーデコーダー３ｄ２は、当該信号ｓ４６を、映像信号ｓ４７とカメラデータに対応する信号ｓ４８とタリー信号ｓ４９とに分離し、映像信号ｓ４７を映像遅延装置３ｄ３に出力し、カメラデータに対応する信号ｓ４８及びタリー信号ｓ４９をＣＧ送出機３ｄ４に出力する。
【００６４】
この後、放送局側装置３ｄでは、映像遅延装置３ｄ３が、映像信号ｓ４７に対して所定の遅延を付与した映像信号ｓ４１０をＣＧ合成器３ｄ５に出力する。また、ＣＧ送出機３ｄ４は、カメラデータに対応する信号ｓ４８及びタリー信号ｓ４９に基づいて、ＣＧ映像を作画し、当該ＣＧ映像に対応する信号ｓ４１１をＣＧ合成器３ｄ５に出力する。具体的には、ＣＧ送出機３ｄ４は、入力されたタリー信号ｓ４９が、カメラ１ａ１が選択されていることを示している場合にのみ、ＣＧ映像を作画して信号ｓ４１１を出力する。言い換えると、ＣＧ送出機３ｄ４は、入力されたタリー信号ｓ４９が、カメラ１ａ１が選択されていることを示していない場合には、ＣＧ映像を作画せず、信号ｓ４１１も出力しない。
【００６５】
そして、ＣＧ合成器３ｄ５は、映像遅延装置３ｄ３から入力された映像信号ｓ４１０と、ＣＧ送出機３ｄ４から入力されたＣＧ映像に対応する信号ｓ４１１とに基づいて、映像を生成し、生成した映像に対応する信号ｓ４１２を出力する。具体的には、ＣＧ合成器３ｄ５は、ＣＧ送出機３ｄ４からＣＧ映像に対応する信号ｓ４１１が入力された場合には、中継映像に対してＣＧ映像を合成する、つまりバーチャル映像を生成して出力する。これに対して、ＣＧ合成器３ｄ５は、ＣＧ送出機３ｄ４からＣＧ映像に対応する信号ｓ４１１が入力されなかった場合には、中継映像に対してＣＧ映像を合成しない、つまりバーチャル映像を生成せずに中継映像をそのまま出力する。
【００６６】
以上説明したように、第４実施形態によれば、カメラ１ａ１が選択されているか否かを示すタリー信号を伝送することで、中継現場２０においてカメラ１ａ１の中継映像に切り替えるタイミングに連動して、放送局３０において当該中継映像に対してＣＧ映像を適切に合成することができる。言い換えると、放送局３０において、カメラ１ｂ１の中継映像に対してＣＧ映像を合成してしまうことを適切に防止することができる。
【００６７】
なお、上記した第４実施形態では、バーチャルＣＧ映像を付加しないカメラ１ｂ１を１台のみ用いていたが、バーチャルＣＧ映像を付加しないカメラ１ｂ１を２台以上用いても良い。その場合には、映像スイッチャー２ｄ２で、カメラ１ａ１の中継映像及び２台以上のカメラ１ｂ１の中継映像のうちのいずれか１つの中継映像に切り替えれば良い。
【００６８】
また、上記した第４実施形態では、タリー信号ｓ４９をＣＧ送出機３ｄ４に入力することによって、ＣＧ映像の作画のオン／オフを切り替えていたが、この代わりに、タリー信号ｓ４９をＣＧ合成器３ｄ５に入力することによって、中継映像に対するＣＧ映像の合成のオン／オフを切り替えても良い。これによっても、上記した第４実施形態と同様の効果が得られる。
【００６９】
［第５実施形態］
次に、第５実施形態について説明する。第３及び第４実施形態では、バーチャルＣＧ映像を付加するためのカメラ１ａ１とバーチャルＣＧ映像を付加しないカメラ１ｂ１とを用いていたが、第５実施形態では、バーチャルＣＧ映像を付加するためのカメラを２台用いる（以下では、それぞれを「カメラ１ａ２」及び「カメラ１ｂ２」と表記する）。また、第５実施形態では、中継現場側装置２（以下では第５実施形態に係る中継現場側装置２を「中継現場側装置２ｅ」と表記する。また、第５実施形態に係る放送局側装置３を「放送局側装置３ｅ」と表記する。）は、カメラ１ａ２及びカメラ１ｂ２の両方のカメラデータを常時送信する。言い換えると、中継現場側装置２ｅは、カメラ１ｂ２の中継映像を送信している間にもカメラ１ａ２のカメラデータを送信し続けると共に、カメラ１ａ２の中継映像を送信している間にもカメラ１ｂ２のカメラデータを送信し続ける。具体的には、中継現場側装置２ｅは、アンシラリーインサーターに入力される映像信号に対して、カメラ１ａ２及びカメラ１ｂ２の両方のカメラデータを重畳して送信する。
【００７０】
図７は、第５実施形態に係る映像生成システムの概略構成を示すブロック図である。図７に示すように、中継現場側装置２ｅは、カメラコントロールユニット２ｅ１ａ、２ｅ１ｂと、映像スイッチャー２ｅ２と、アンシラリーインサーター２ｅ３と、伝送装置２ｅ４とを有しており、放送局側装置３ｅは、伝送装置３ｅ１と、アンシラリーデコーダー３ｅ２と、分配器３ｅ３と、映像遅延装置３ｅ４ａ、３ｅ４ｂと、ＣＧ送出機３ｅ５ａ、３ｅ５ｂと、ＣＧ合成器３ｅ６ａ、３ｅ６ｂとを有する。なお、以下では、第３及び第４実施形態と同様の構成については、その説明を適宜省略する。つまり、特に説明しない構成は、第３及び第４実施形態と同様であるものとする。
【００７１】
バーチャルＣＧ映像を付加するための一方のカメラ１ａ２は、撮影した中継映像及びセンサで検出したデータ（例えばカメラデータの生成元となるデータ）の両方を含む信号ｓ５１ａを、中継現場側装置２ｅ内のカメラコントロールユニット２ｅ１ａに出力する。また、バーチャルＣＧ映像を付加するための他方のカメラ１ｂ２は、撮影した中継映像及びセンサで検出したデータ（例えばカメラデータの生成元となるデータ）の両方を含む信号ｓ５１ｂを、中継現場側装置２ｅ内のカメラコントロールユニット２ｅ１ｂに出力する。
【００７２】
次に、中継現場側装置２ｅでは、カメラコントロールユニット２ｅ１ａが、カメラ１ａ２から入力された信号ｓ５１ａに基づいて、中継映像に対応する映像信号ｓ５２ａを映像スイッチャー２ｅ２に出力すると共に、カメラデータに対応する信号ｓ５３ａをアンシラリーインサーター２ｅ３に出力する。また、カメラコントロールユニット２ｅ１ｂは、カメラ１ｂ２から入力された信号ｓ５１ｂに基づいて、中継映像に対応する映像信号ｓ５２ｂを映像スイッチャー２ｅ２に出力すると共に、カメラデータに対応する信号ｓ５３ｂをアンシラリーインサーター２ｅ３に出力する。
【００７３】
この後、映像スイッチャー２ｅ２は、例えばオペレータなどの操作に応じて、カメラコントロールユニット２ｅ１ａから入力された映像信号ｓ５２ａ、及びカメラコントロールユニット２ｅ１ｂから入力された映像信号ｓ５２ｂのいずれか一方を、映像信号ｓ５４としてアンシラリーインサーター２ｅ３に出力する。そして、アンシラリーインサーター２ｅ３は、映像スイッチャー２ｅ２から入力された映像信号ｓ５４と、カメラコントロールユニット２ｅ１ａから入力されたカメラデータに対応する信号ｓ５３ａと、カメラコントロールユニット２ｅ１ｂから入力されたカメラデータに対応する信号ｓ５３ｂとを重畳し、重畳した信号ｓ５５（ＨＤ−ＳＤＩ信号）を伝送装置２ｅ４に出力する。この場合、アンシラリーインサーター２ｅ３は、カメラデータに対応する信号ｓ５３ａ、ｓ５３ｂの両方をアンシラリー領域１０２に重畳する。そして、伝送装置２ｅ４は、アンシラリーインサーター２ｅ３から入力された信号ｓ５５を、伝送経路４０ｅを介して放送局側装置３ｅに送信する。
【００７４】
次に、放送局側装置３ｅでは、伝送装置３ｅ１が、伝送経路４０ｅを介して中継現場側装置２ｅ内の伝送装置２ｅ４から送信された信号ｓ５５を受信し、当該信号ｓ５５をアンシラリーデコーダー３ｅ２に出力する。アンシラリーデコーダー３ｅ２は、当該信号ｓ５５を、映像信号ｓ５６と、カメラデータに対応する信号ｓ５７ａと、カメラデータに対応する信号ｓ５７ｂとに分離する。カメラデータに対応する信号ｓ５７ａは、カメラコントロールユニット２ｅ１ａが出力したカメラデータに対応する信号ｓ５３ａに相当し、カメラデータに対応する信号ｓ５７ｂは、カメラコントロールユニット２ｅ１ｂが出力したカメラデータに対応する信号ｓ５３ｂに相当する。そして、アンシラリーデコーダー３ｅ２は、映像信号ｓ５６を分配器３ｅ３に出力し、カメラデータに対応する信号ｓ５７ａをＣＧ送出機３ｅ５ａに出力し、カメラデータに対応する信号ｓ５７ｂをＣＧ送出機３ｅ５ｂに出力する。
【００７５】
この後、分配器３ｅ３は、入力された映像信号ｓ５６を映像遅延装置３ｅ４ａ、３ｅ４ｂに出力する。具体的には、分配器３ｅ３は、当該映像信号ｓ５６に対応する映像信号ｓ５８ａ、ｓ５８ｂ（映像信号ｓ５８ａ、ｓ５８ｂは同じ信号である）を、それぞれ映像遅延装置３ｅ４ａ、３ｅ４ｂに出力する。そして、映像遅延装置３ｅ４ａは、分配器３ｅ３から入力された映像信号ｓ５８ａに対して所定の遅延を付与した映像信号ｓ５９ａをＣＧ合成器３ｅ６ａに出力する。また、映像遅延装置３ｅ４ｂは、分配器３ｅ３から入力された映像信号ｓ５８ｂに対して所定の遅延を付与した映像信号ｓ５９ｂをＣＧ合成器３ｅ６ｂに出力する。他方で、ＣＧ送出機３ｅ５ａは、カメラデータに対応する信号ｓ５７ａに基づいてＣＧ映像を作画し、当該ＣＧ映像に対応する信号ｓ５１０ａをＣＧ合成器３ｅ６ａに出力する。また、ＣＧ送出機３ｅ５ｂは、カメラデータに対応する信号ｓ５７ｂに基づいてＣＧ映像を作画し、当該ＣＧ映像に対応する信号ｓ５１０ｂをＣＧ合成器３ｅ６ｂに出力する。
【００７６】
この後、ＣＧ合成器３ｅ６ａは、映像遅延装置３ｅ４ａから入力された映像信号ｓ５９ａと、ＣＧ送出機３ｅ５ａから入力されたＣＧ映像に対応する信号ｓ５１０ａとに基づいて、中継映像とＣＧ映像とを合成したバーチャル映像を生成し、当該バーチャル映像に対応する信号ｓ５１１ａを出力する。また、ＣＧ合成器３ｅ６ｂは、映像遅延装置３ｅ４ｂから入力された映像信号ｓ５９ｂと、ＣＧ送出機３ｅ５ｂから入力されたＣＧ映像に対応する信号ｓ５１０ｂとに基づいて、中継映像とＣＧ映像とを合成したバーチャル映像を生成し、当該バーチャル映像に対応する信号ｓ５１１ｂを出力する。
【００７７】
なお、放送局側装置３ｅからは２つのバーチャル映像に対応する信号ｓ５１１ａ、ｓ５１１ｂが出力されることとなるが、信号ｓ５１１ａ、ｓ５１１ｂのうちで映像スイッチャー２ｅ２が選択している映像に応じた信号を採用すれば良い。
【００７８】
以上説明したように、第５実施形態では、１本の伝送経路４０ｅのみを用いて、カメラ１ａ２及びカメラ１ｂ２の両方のカメラデータを送信し続ける。これにより、放送局３０側ではＣＧ送出機３ｅ５ａ、３ｅ５ｂが連続してカメラデータを取得し続けるため、中継映像がカメラ１ａ２とカメラ１ｂ２との間で切り替わっても安定したＣＧ映像を生成することができる。つまり、予め放送局３０側においてＣＧ送出機３ｅ５ａ、３ｅ５ｂで合成用のＣＧ映像をスタンバイしておくことができ、１本の伝送経路４０ｅのみで、２台のカメラ１ａ２、１ｂ２の一方の中継映像に対してバーチャルＣＧ映像を適切に合成することが可能となる。
【００７９】
なお、上記した第５実施形態では、バーチャルＣＧ映像を付加するためのカメラ１ａ２、１ｂ２を２台用いていたが、バーチャルＣＧ映像を付加するためのカメラ１を３台以上用いても良い。その場合、３台以上のカメラ１のそれぞれのカメラデータを、放送局３０側に送信し続ければ良い。具体的には、３台以上のカメラ１のそれぞれのカメラデータを映像信号に重畳して送信すれば良い。また、バーチャルＣＧ映像を付加するためのカメラ１ａ２、１ｂ２だけでなく、バーチャルＣＧ映像を付加しないカメラ１も１台以上用いても良い。
【００８０】
また、上記した第５実施形態では、ＣＧ送出機３ｅ５ａ、３ｅ５ｂごとに映像遅延装置３ｅ４ａ、３ｅ４ｂを用いて、ＣＧ送出機３ｅ５ａ、３ｅ５ｂのそれぞれの遅延時間の調整を行っていたが、ＣＧ送出機３ｅ５ａ、３ｅ５ｂの作画遅延量が等しければ、１台の映像遅延装置のみを用いることとしても良い。その場合、分配器３ｅ３の前段に１台の映像遅延装置を配置すれば良い。
【００８１】
更に、第５実施形態と第４実施形態とを組み合わせて実施しても良い。具体的には、第５実施形態でも、中継現場２０から放送局３０にタリー信号を送信しても良い。その場合、カメラ１ａ２が選択されているか否かを示すタリー信号と、カメラ１ｂ２が選択されているか否かを示すタリー信号とを用いて、これら２つのタリー信号をアンシラリー領域１０２に重畳して送信すれば良い。なお、バーチャルＣＧ映像を付加するためのカメラ１を３台以上用いる場合には、カメラ１が選択されているか否かを示すタリー信号をカメラ１の台数分だけ用いれば良い。
【００８２】
［第６実施形態］
次に、第６実施形態について説明する。第６実施形態では、第５実施形態と同様に、バーチャルＣＧ映像を付加するための２台のカメラ１ａ２、１ｂ２を切り替えて用いる。しかしながら、第６実施形態では、中継現場側装置２（以下では第６実施形態に係る中継現場側装置２を「中継現場側装置２ｆ」と表記する。）は、カメラ１ａ２、１ｂ２を特定するカメラＩＤが付されたカメラデータを送信する。そして、放送局側装置３（以下では第６実施形態に係る放送局側装置３を「放送局側装置３ｆ」と表記する。）は、受信したカメラデータに付されたカメラＩＤを確認して、当該カメラＩＤに対応するカメラ１の中継映像に応じたＣＧ映像を生成する。なお、カメラＩＤは、本発明における「カメラ特定情報」の一例に相当する。
【００８３】
図８は、第６実施形態に係る映像生成システムの概略構成を示すブロック図である。図８に示すように、中継現場側装置２ｆは、カメラコントロールユニット２ｆ１ａ、２ｆ１ｂと、アンシラリーインサーター２ｆ２ａ、２ｆ２ｂと、伝送装置２ｆ３ａ、２ｆ３ｂとを有しており、放送局側装置３ｆは、伝送装置３ｆ１ａ、３ｆ１ｂと、アンシラリーデコーダー３ｆ２ａ、３ｆ２ｂと、映像遅延装置３ｆ３ａ、３ｆ３ｂと、ＣＧ送出機３ｆ４ａ、３ｆ４ｂと、ＣＧ合成器３ｆ５ａ、３ｆ５ｂとを有する。なお、以下では、上記した実施形態と同様の構成については、その説明を適宜省略する。つまり、特に説明しない構成は、上記した実施形態と同様であるものとする。
【００８４】
まず、中継現場側装置２ｆでは、カメラコントロールユニット２ｆ１ａが、カメラ１ａ２から入力された信号ｓ６１ａに基づいて、中継映像に対応する映像信号ｓ６２ａ及びカメラデータに対応する信号ｓ６３ａをアンシラリーインサーター２ｆ２ａに出力する。この場合、カメラコントロールユニット２ｆ１ａは、カメラ１ａ２に対応するカメラＩＤが付されたカメラデータを生成する。また、カメラコントロールユニット２ｆ１ｂは、カメラ１ｂ２から入力された信号ｓ６１ｂに基づいて、中継映像に対応する映像信号ｓ６２ｂ及びカメラデータに対応する信号ｓ６３ｂをアンシラリーインサーター２ｆ２ｂに出力する。この場合、カメラコントロールユニット２ｆ１ｂは、カメラ１ｂ２に対応するカメラＩＤが付されたカメラデータを生成する。
【００８５】
この後、アンシラリーインサーター２ｆ２ａは、映像信号ｓ６２ａとカメラデータに対応する信号ｓ６３ａとを重畳し、重畳した信号ｓ６４ａ（ＨＤ−ＳＤＩ信号）を伝送装置２ｆ３ａに出力する。そして、伝送装置２ｆ３ａは、アンシラリーインサーター２ｆ２ａから入力された信号ｓ６４ａを、伝送経路４０ｆ１を介して放送局側装置３ｆに送信する。他方で、アンシラリーインサーター２ｆ２ｂは、映像信号ｓ６２ｂとカメラデータに対応する信号ｓ６３ｂとを重畳し、重畳した信号ｓ６４ｂ（ＨＤ−ＳＤＩ信号）を伝送装置２ｆ３ｂに出力する。そして、伝送装置２ｆ３ｂは、アンシラリーインサーター２ｆ２ｂから入力された信号ｓ６４ｂを、伝送経路４０ｆ２を介して放送局側装置３ｆに送信する。
【００８６】
次に、放送局側装置３ｆでは、伝送装置３ｆ１ａが、伝送経路４０ｆ１を介して中継現場側装置２ｆ内の伝送装置２ｆ３ａから送信された信号ｓ６４ａを受信し、当該信号ｓ６４ａをアンシラリーデコーダー３ｆ２ａに出力する。そして、アンシラリーデコーダー３ｆ２ａは、当該信号ｓ６４ａを映像信号ｓ６５ａとカメラデータに対応する信号ｓ６６ａとに分離し、映像信号ｓ６５ａを映像遅延装置３ｆ３ａに出力し、カメラデータに対応する信号ｓ６６ａをＣＧ送出機３ｆ４ａに出力する。他方で、伝送装置３ｆ１ｂは、伝送経路４０ｆ２を介して中継現場側装置２ｆ内の伝送装置２ｆ３ｂから送信された信号ｓ６４ｂを受信し、当該信号ｓ６４ｂをアンシラリーデコーダー３ｆ２ｂに出力する。そして、アンシラリーデコーダー３ｆ２ｂは、当該信号ｓ６４ｂを映像信号ｓ６５ｂとカメラデータに対応する信号ｓ６６ｂとに分離し、映像信号ｓ６５ｂを映像遅延装置３ｆ３ｂに出力し、カメラデータに対応する信号ｓ６６ｂをＣＧ送出機３ｆ４ｂに出力する。
【００８７】
この後、映像遅延装置３ｆ３ａは、映像信号ｓ６５ａに対して所定の遅延を付与した映像信号ｓ６７ａをＣＧ合成器３ｆ５ａに出力する。また、ＣＧ送出機３ｆ４ａは、カメラデータに対応する信号ｓ６６ａに基づいてＣＧ映像を作画し、当該ＣＧ映像に対応する信号ｓ６８ａをＣＧ合成器３ｆ５ａに出力する。この場合、ＣＧ送出機３ｆ４ａは、カメラデータに付されたカメラＩＤ（カメラ１ａ２を特定するＩＤ）を確認して、所望の位置情報（例えば、カメラ１ａ２についてのＣＧ映像の原点位置などの事前キャリブレーションデータ）やレンズ情報を選択することで、カメラ１ａ２の中継映像に応じたＣＧ映像を作画する。他方で、映像遅延装置３ｆ３ｂは、映像信号ｓ６５ｂに対して所定の遅延を付与した映像信号ｓ６７ｂをＣＧ合成器３ｆ５ｂに出力する。また、ＣＧ送出機３ｆ４ｂは、カメラデータに対応する信号ｓ６６ｂに基づいてＣＧ映像を作画し、当該ＣＧ映像に対応する信号ｓ６８ｂをＣＧ合成器３ｆ５ｂに出力する。この場合、ＣＧ送出機３ｆ４ｂは、カメラデータに付されたカメラＩＤ（カメラ１ｂ２を特定するＩＤ）を確認して、所望の位置情報（例えば、カメラ１ｂ２についてのＣＧ映像の原点位置などの事前キャリブレーションデータ）やレンズ情報を選択することで、カメラ１ｂ２の中継映像に応じたＣＧ映像を作画する。
【００８８】
そして、ＣＧ合成器３ｆ５ａは、映像遅延装置３ｆ３ａから入力された映像信号ｓ６７ａと、ＣＧ送出機３ｆ４ａから入力されたＣＧ映像に対応する信号ｓ６８ａとに基づいて、中継映像とＣＧ映像とを合成したバーチャル映像を生成し、当該バーチャル映像に対応する信号ｓ６９ａを出力する。他方で、ＣＧ合成器３ｆ５ｂは、映像遅延装置３ｆ３ｂから入力された映像信号ｓ６７ｂと、ＣＧ送出機３ｆ４ｂから入力されたＣＧ映像に対応する信号ｓ６８ｂとに基づいて、中継映像とＣＧ映像とを合成したバーチャル映像を生成し、当該バーチャル映像に対応する信号ｓ６９ｂを出力する。
【００８９】
ここで、第６実施形態では、バーチャルＣＧ映像を付加するための２台のカメラ１ａ２、１ｂ２を用いているが、カメラ１ａ２、１ｂ２が同一のレンズを搭載しているとは限らない。加えて、例えばゴルフ等で異なるホールでカメラ１ａ２、１ｂ２を使用している場合、カメラ１ａ２、１ｂ２の中継映像に適用するＣＧ映像も全く異なり、ＣＧ映像の原点位置などの事前キャリブレーションデータも全く異なることがある。更に、上記のように２本の伝送経路４０ｆ１、４０ｆ２を用いた場合、ＣＧ送出機３ｆ４ａ、３ｆ４ｂが、カメラ１ａ２、１ｂ２のいずれのカメラデータを受けているかを認識できるようにすることが望ましい。
【００９０】
したがって、第６実施形態では、カメラ１ａ２、１ｂ２を特定するカメラＩＤが付されたカメラデータを送信することとした。これにより、放送局３０では、受信したカメラデータがカメラ１ａ２、１ｂ２のいずれのものかを容易に判別することができる。そして、放送局３０では、ＣＧ送出機３ｆ４ａ、３ｆ４ｂでカメラデータに付されたカメラＩＤを確認することで、所望の位置情報（事前キャリブレーションデータなど）やレンズ情報を適切に選択することができる。よって、カメラ１ａ２、１ｂ２の中継映像に応じたＣＧ映像を適切に生成することが可能となる。
【００９１】
なお、上記した第６実施形態では、第３乃至第５実施形態で示したような映像スイッチャーを用いていないが、映像スイッチャーを用いて、カメラ１ａ２、１ｂ２の映像信号を切り替えても良い。その場合には、２本の伝送経路４０ｆ１、４０ｆ２を用いずに、１本の伝送経路を用いれば良い。
【００９２】
また、第６実施形態と第４実施形態とを組み合わせて実施しても良い。具体的には、第６実施形態でも、中継現場２０から放送局３０にタリー信号を送信しても良い。その場合、カメラ１ａ２が選択されているか否かを示すタリー信号と、カメラ１ｂ２が選択されているか否かを示すタリー信号とを用いれば良い。
【００９３】
また、上記した第６実施形態では、バーチャルＣＧ映像を付加するためのカメラ１ａ２、１ｂ２を２台用いていたが、バーチャルＣＧ映像を付加するためのカメラ１を３台以上用いても良い。その場合、３台以上のカメラ１のそれぞれを特定するカメラＩＤが付されたカメラデータを用いれば良い。また、バーチャルＣＧ映像を付加するためのカメラ１ａ２、１ｂ２だけでなく、バーチャルＣＧ映像を付加しないカメラ１も１台以上用いても良い。
【００９４】
［変形例］
上記した実施形態では、カメラデータをアンシラリー領域１０２に重畳していたが、これに限定はされない。映像信号のための有効映像領域の隙間にあるような領域であれば、アンシラリー領域１０２以外にも、種々の領域にカメラデータを重畳することができる。具体的には、ＨＤ−ＳＤＩの規格以外の規格を用いた場合には、その規格において用いられる、アンシラリー領域１０２に相当する領域に、カメラデータを重畳すれば良い。
【符号の説明】
【００９５】
１  カメラ
２  中継現場側装置
２ａ１  カメラコントロールユニット
２ｂ２  アンシラリーインサーター
３  放送局側装置
３ａ４  映像遅延装置
３ａ５  ＣＧ送出機
３ａ６  ＣＧ合成器
２０  中継現場
３０  放送局
１０２  アンシラリー領域
【図１】
2015023298.tif 000003
【図２】
2015023298.tif 000004
【図３】
2015023298.tif 000005
【図４】
2015023298.tif 000006
【図５】
2015023298.tif 000007
【図６】
2015023298.tif 000008
【図７】
2015023298.tif 000009
【図８】
2015023298.tif 000010