(57)【要約】【課題】  同時に撮影される複数の映像が解像度の高い大容量データであっても、撮影場所と離れた場所において該映像の遠隔処理を容易に行い、臨場感・迫力のある映像を放送することを可能とした遠隔映像処理システムを提供する。【解決手段】  撮影システムと映像操作システムとからなる遠隔映像処理システムであって、撮影システムは、映像撮影装置と、ＴＣインサータと、映像バッファ手段と、エンコード手段と、圧縮映像送信手段と、からなるとともに、映像操作システムは、圧縮映像受信手段と、デコード手段と、映像切換加工手段と、制御信号生成手段と、制御タイムコード抽出手段と、制御情報送信手段と、からなり、撮影システムは、更にスイッチャーを装備しており、制御信号および制御タイムコードをスイッチャーが受信するとともに、制御信号に基づいて、映像バッファ手段に記憶された映像データに切換乃至加工処理を施し、出力する構成である。【選択図】  図１
2018092173.tif 000002
【特許請求の範囲】
【請求項１】
撮影現場に設置する撮影システム(100)と、撮影システムが撮影した映像を遠隔処理する映像操作システム(200)と、からなる遠隔映像処理システム(1)において、
前記撮影システム(100)は、映像を撮影するための映像撮影装置(110)と、前記映像撮影装置(110)から送信される映像データ(10a)にタイムコード(12)を付加するＴＣインサータ(120)と、前記タイムコード(12)が付加された映像データ(10b)を一時的に記憶するための映像バッファ手段(130)と、前記タイムコード(12)が付加された映像データ(10b)の圧縮処理を行うエンコード手段(140)と、前記エンコード手段(140)によってエンコードされた映像データ(10c)を送信する圧縮映像送信手段(150)と、からなるとともに、
前記映像操作システム(200)は、前記圧縮映像送信手段(150)より送信された映像データ(10c)を受信する圧縮映像受信手段(210)と、前記エンコードされた映像データのデコード処理を行うデコード手段(220)と、前記映像データを所望する映像データ(10d)に切換乃至加工する処理を行うための映像切換加工手段(230)と、前記映像切換加工手段(230)による切換乃至加工処理を制御信号(14)に変換する制御信号生成手段(240)と、前記映像切換加工手段(230)による映像の切換乃至加工処理時のタイムコードを制御タイムコード(16)として該映像データ(10d)から抽出する制御タイムコード抽出手段(250)と、前記制御信号(14)と前記制御タイムコード(16)を送信する制御情報送信手段(260)と、からなり、
前記撮影システム(100)は、更に、前記映像バッファ手段(130)に記憶された映像データ(10b)に切換乃至加工処理を施して出力するスイッチャー(160)を装備しており、前記制御信号(14)および前記制御タイムコード(16)を前記スイッチャー(160)が受信するとともに、前記スイッチャー(160)は、前記制御信号(14)に基づいて、映像バッファ手段(130)に記憶された映像データ(10b)に切換乃至加工処理を施し、切換乃至加工処理後の映像データ(10e)を出力することを特徴とする遠隔映像処理システム。
【請求項２】
前記スイッチャー(160)は、前記制御信号(14)に含まれる制御タイムコード(16)と、前記映像バッファ手段(130)に記憶された映像データ(10b)中のタイムコード(12)を比較して、同一のタイムコードを有する映像データ(10b)のフレームを抽出するとともに、該フレーム位置から、前記制御信号(14)に基づいて、映像バッファ手段(130)に記憶された映像データ(10b)に切換乃至加工処理を施すことを特徴とする請求項１記載の遠隔映像処理システム。
【請求項３】
前記映像撮影装置(110)と、前記エンコード手段(140)と、前記デコード手段(220)は一または複数設置（装備）されるとともに、一または複数からなる前記映像撮影装置(110)によって撮影された一または複数からなる映像データ(10a)は、それぞれＴＣインサータ(120)によって同一のタイムコード(12)が付加され、前記映像バッファ手段(130)に記憶されるとともに一または複数からなる前記エンコード手段(140)によって各々エンコード処理され、
エンコード処理された各映像データ(10c)は、対応する前記デコード手段(220)によって各々デコード処理されることを特徴とする請求項１記載の遠隔映像処理システム。
【請求項４】
前記撮影システム(100)は、ＴＣインサータ(120)が各映像データ(10a)に付加するタイムコード(12)を生成するＴＣ生成手段(122)を装備することを特徴とする請求項１記載の遠隔映像処理システム。
【請求項５】
前記制御信号(14)は、映像切換加工手段(230)による映像の加工処理と同様の加工処理を前記映像バッファ手段(130)に記憶された映像データ(10b)に施すための映像データの操作コマンドからなり、該操作コマンドからなる制御信号(14)を前記スイッチャー(160)が受信して前記映像バッファ手段(130)に記憶された一または複数からなる映像データ(10b)に切換乃至加工処理を施すことを特徴とする請求項１記載の遠隔映像処理システム。
【請求項６】
前記映像データは、ＳＤ映像、ＨＤ映像、４Ｋ映像および８Ｋ映像から選択される一の映像形式からなり、該映像形式からなる前記映像データのフレーム毎にタイムコード(12)が付加されることを特徴とする請求項１記載の遠隔映像処理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、テレビ放送用の映像データを配信するための遠隔映像処理システムに関し、特に、撮影される映像に対して、撮影場所から離れた場所において映像の切換乃至加工等の遠隔処理を行うことを可能とした遠隔映像処理システムに関する。
【背景技術】
【０００２】
従来より、テレビジョン放送等に用いられる映像を配信するための各種の技術が開発されており、映像の高品質性、映像配信の効率性や信頼性を考慮した映像配信に関するシステムが開発され、使用されている。近年では、４Ｋ解像度の映像配信など、大容量・高品質の映像データの配信・伝送が頻繁に行われており、映像伝送には、高い信頼性および高速性が要求されることから、高品質、高信頼性、高速伝送を確保する映像データの伝送システムの開発が進められている。【０００３】
テレビでスポーツやコンサート等の映像を生配信する場合、一点のみのカメラで撮影した単一の映像が配信されることは殆どなく、会場等に設置された複数のカメラ、または、複数のカメラマンが担ぐカメラが撮影した多数の映像を適宜に切り換えたり、加工したりしながら注目される映像を選んで配信することが通常行われている。【０００４】
この場合、映像が高解像度であると映像データが大容量となることから、会場で撮影された複数の映像データを、会場から離れた放送局等で編集しながら生放送を行う場合、撮影した各映像データすべてを通常の放送局等の編集地に送信することが必要となるため、ネットワークの負荷が高くなり、対応する設備の増設を要したり、安定した映像データの送信が出来なくなるという問題点があった。従って、現状では、会場またはその近くに中継車などの放送用の機材を設置し、オペレータが、その場で映像を切換乃至加工処理を行っている。これにより、場合によっては、能力のあるオペレータ人員が不足するという深刻な問題が生じていた。【０００５】
例えば、遠隔地における映像データを編集可能な映像の伝送システムに関する技術として、特開２０００−２４４８９３号が存在する。ここでは、遠隔地に設置された複数のビデオカメラと、その映像をネットワークを介して受信し、表示するモニタを有する映像配信システムに関する技術であって、カメラに対する切換指示を遠隔地の映像送信装置に送出するとともに、その切換指示に従ったカメラからの映像情報を修飾する文字情報を併せて送出し、モニタに映像情報と文字情報を表示させる映像情報修飾手段を装備した映像配信システムに関する技術が開示されている。【０００６】
この技術によれば、映像情報に地名等の文字情報を容易に表示、変更することが可能となり、映像の遠隔操作が可能となると考えられるが、複数ある映像を切り換える処理を容易に行えるとは言えなかった。すなわち、映像の切換にはオペレータが複数の映像を視聴しながら、放送する映像を選択するが、上記技術では、既に放送中の映像に加工を施すのみであり、映像を同時に視聴しながら映像を切換乃至加工することは、ネットワークトラフィックの重量化・増大化を招くため、必ずしも最適なシステムとは言えなかった。【０００７】
また、特開２００１−６９４９２号では、複数の映像入出力の組み合わせを切換えるために、画像入力部が、複数の撮像部からの画像を映像切換装置経由で受けとり、画像符号化部が入力した画像を符号化し、符号化画像保存部が符号化された画像を蓄積して自由時間軸で再生制御をするとともに、映像切換の制御および複数の撮像部の映像出力をネットワークを介し通信するように構成し、複数の映像の入出力制御を行う映像出力制御装置に関する技術が開示されている。【０００８】
この技術によれば、画像や映像をネットワークを介して送受信可能となるとともに、画像および映像の切換をネットワークを介して遠隔で操作可能となると考えられるが、映像の大容量化に対応した技術ということは出来ず、高品質の大容量データの送信およびこのような映像の遠隔切換や加工処理には向かないという大きな問題点があった。【０００９】
そこで、映像の生配信などを行う際に、優秀な少数のオペレータが遠隔操作により、複数のカメラで撮影された映像を切り換え、更に加工処理を施したうえで、ネットワークに加工処理済みの映像データを流すことで放送するための遠隔映像処理に関するシステムの開発が望まれていた。
【特許文献１】特開２０００−２４４８９３号公報
【特許文献２】特開２００１−６９４９２号公報
【発明の開示】
【発明が解決しようとする課題】
【００１０】
本発明は、放送用の映像データを配信するための遠隔映像処理システムであって、特に、同時に撮影される複数の映像が解像度の高い大容量データである場合であっても、撮影場所と離れた場所において該映像の切換乃至加工等の遠隔処理を容易に行い、臨場感・迫力のある映像を放送することを可能とした遠隔映像処理システムを提供することを目的とする。
【課題を解決するための手段】
【００１１】
上記の目的を達成するために本発明に係る遠隔映像処理システムは、撮影現場に設置する撮影システムと、撮影システムが撮影した映像を遠隔処理する映像操作システムと、からなる遠隔映像処理システムであって、前記撮影システムは、映像を撮影するための映像撮影装置と、前記映像撮影装置から送信される映像データにタイムコードを付加するＴＣインサータと、前記タイムコードが付加された映像データを一時的に記憶するための映像バッファ手段と、前記タイムコードが付加された映像データの圧縮処理を行うエンコード手段と、前記エンコード手段によってエンコードされた映像データを送信する圧縮映像送信手段と、からなるとともに、前記映像操作システムは、前記圧縮映像送信手段より送信された映像データを受信する圧縮映像受信手段と、前記エンコードされた映像データのデコード処理を行うデコード手段と、前記映像データを所望する映像データに切換乃至加工する処理を行うための映像切換加工手段と、前記映像切換加工手段による切換乃至加工処理を制御信号に変換する制御信号生成手段と、前記映像切換加工手段による映像の切換乃至加工処理時のタイムコードを制御タイムコードとして該映像データから抽出する制御タイムコード抽出手段と、前記制御信号と前記制御タイムコードを送信する制御情報送信手段と、からなり、前記撮影システムは、更に、前記映像バッファ手段に記憶された映像データに切換乃至加工処理を施して出力するスイッチャーを装備しており、前記制御信号および前記制御タイムコードを前記スイッチャーが受信するとともに、前記スイッチャーは、前記制御信号に基づいて、映像バッファ手段に記憶された映像データに切換乃至加工処理を施し、切換乃至加工処理後の映像データを出力する構成である。【００１２】
また、前記スイッチャーは、前記制御信号に含まれる制御タイムコードと、前記映像バッファ手段に記憶された映像データ中のタイムコードを比較して、同一のタイムコードを有する映像データのフレームを抽出するとともに、該フレーム位置から、前記制御信号に基づいて、映像バッファ手段に記憶された映像データに切換乃至加工処理を施す構成である。【００１３】
また、前記映像撮影装置と、前記エンコード手段と、前記デコード手段は一または複数設置（装備）されるとともに、一または複数からなる前記映像撮影装置によって撮影された一または複数からなる映像データは、それぞれＴＣインサータによって同一のタイムコードが付加され、映像バッファ手段に記憶されるとともに一または複数からなるエンコード手段によって各々エンコード処理され、
エンコード処理された各映像データは、対応するデコード手段によって各々デコード処理される構成でもある。【００１４】
また、撮影システムは、ＴＣインサータが各映像データに付加するタイムコードを生成するＴＣ生成手段を装備する構成である。
また、前記制御信号は、映像切換加工手段による映像の加工処理と同様の加工処理を映像バッファ手段に記憶された画像に施すための映像データの操作コマンドからなり、該操作コマンドからなる制御信号を前記スイッチャーが受信して前記映像バッファ手段に記憶された一または複数からなる映像データに切換乃至加工処理を施す構成である。【００１５】
更に、前記映像データは、ＳＤ映像、ＨＤ映像、４Ｋ映像および８Ｋ映像から選択される一の映像形式からなり、該映像形式からなる前記映像データのフレーム毎にタイムコードが付加される構成である。
【発明の効果】
【００１６】
本発明は、上記詳述した通りの構成であるので、以下のような効果がある。
１．映像データにタイムコードを付与する構成としたため、同期処理が容易となり、処理する映像の再生開始位置を精確に指定することが可能となる。また、エンコードされて送信された加工処理用の映像データをもとに映像の切換乃至加工処理を行う構成としたため、遠隔地（センター）で少数の事情通のオペレータが視聴することが可能となり、切換乃至加工の作業を遠隔で行うことが可能となる。また、遠隔地における映像切換加工手段による上記作業内容を制御信号に変換する制御信号生成手段を設けたため、制御信号を現場にあるスイッチャーに送って遠隔操作することにより、現場のバッファに蓄積された放送用の大容量映像データを遠隔で切換乃至加工処理を自動的に行うことが可能となり、現場にオペレータがいなくても、映像の切換乃至加工処理を行う事が可能となる。【００１７】
２．スイッチャーが、制御信号に基づいて、映像データのタイムコードをもとに映像バッファ手段に記憶された映像データを切換乃至加工処理するため、オペレータが遠隔地（センター）で行った切換乃至加工処理と同じ処理を、映像バッファ手段に記憶された映像データに対して正確に施すことが可能となる。
３．映像撮影装置と、エンコード手段と、デコード手段を一または複数設置（装備）する構成としたため、各映像装置で撮影された映像データを、個別のエンコード手段でエンコードするとともに、対応するデコード手段でデコード可能となり、処理用の映像データの伝送の遅延を防止するとともに、エンコード手段とデコード手段の故障時であっても、映像の切換乃至加工処理を継続することが可能となる。【００１８】
４．タイムコードを生成するためのＴＣ生成手段を設けたため、映像の同期処理を正確に行う事が可能となる。
５．制御信号を操作コマンドとしたため、スイッチャーによる映像データへの切換乃至加工処理を簡易なものとすることが可能となる。
６．映像データを、ＳＤ映像、ＨＤ映像、４Ｋ映像および８Ｋ映像等としたため、映像データのフレーム毎にタイムコードを付加することが可能となるとともに、鮮明な映像を放送することが可能となる。
【発明を実施するための最良の形態】
【００１９】
以下、本発明に係る遠隔映像処理システムを、図面に示す実施例に基づいて詳細に説明する。図１は、本発明に係る遠隔映像処理システムの概略図であり、図２は、スイッチャーによる切換乃至加工処理の概念図である。【００２０】
本発明に係る遠隔映像処理システム１は、図１に示すように、撮影現場に設置される撮影システム１００と、撮影システム１００が撮影した映像を遠隔処理するための映像操作システム２００と、からなり、撮影システムから離れた場所において映像の切換乃至加工処理を行い放送するための映像データを作成することに用いられる。【００２１】
撮影システム１００は、サッカーや野球などのスポーツの試合やコンサート等が行われている現場に設置する撮影用の複数の各種機材を含むシステムである。撮影システム１００は、本実施例では、撮影用カメラや撮影した映像を配信する装置等の各種放送用の機材を組み合わせてシステム化した装置からなり、これら各種機材を移動可能な中継車に搭載した構成となっている。これにより、中継車が上記各種現場へ移動し、現場におけるシステムの設置・設定作業を要せずに、直ちに撮影作業に入ることが可能となっている。【００２２】
撮影システム１００は、図１に示すように、映像撮影装置１１０と、ＴＣインサータ１２０と、映像バッファ手段１３０と、エンコード手段１４０と、圧縮映像送信手段１５０と、からなる。映像撮影装置１１０は、映像を撮影するための装置であり、本実施例では、現場に固定設置するカメラおよび／またはカメラマンが担いで移動しながら撮影するための複数のカメラからなる構成である。【００２３】
映像撮影装置１１０によって撮影された映像データ１０ａは、図１に示すように、ＴＣインサータ１２０に伝送される。ＴＣインサータ１２０は、映像を撮影した映像撮影装置１１０から送信されてくるデータ化された映像データ１０ａに対して、フレーム毎にタイムコード１２を付加するための装置である。タームコード１２は、映像データ１０ａに付加される時間（時：分：秒）およびフレーム数情報からなり、本実施例では、ＳＭＰＴＥ規格のタイムコードがフレーム毎に付加されることとなっているが、これに限定されることはなく、任意の規格に基づくタイムコードを付加して使用することが可能である。【００２４】
タイムコード１２を付加された映像データ１０ｂは、次に、映像バッファ手段１３０およびエンコード手段１４０に分岐して伝送される。映像バッファ手段１３０は、タイムコード１２が付加された映像データ１０ｂを一時的に記憶するための手段である。本実施例では、映像データ１０ｂの容量が大きいことから、そのような大容量データを記憶可能なハードディスク等の記憶媒体からなる。また、本実施例では、映像バッファ手段１３０への映像データ１０ｂの読み書きは高速で頻繁かつ継続的に行われるため、記憶媒体の高速性や信頼性が要求される。映像データ１０ｂの書込みおよび読み出し時の機械的遅延や物理的破損、その他のエラーを避ける為、高速読み書きが可能なフラッシュメモリを用いる事も可能であるが、これらに限定されることはなく、任意の記憶媒体を使用することが可能である。【００２５】
エンコード手段１４０は、ＴＣインサータ１２０によってタイムコード１２が付加された映像データ１０ｂの圧縮処理を行うエンコーダである。映像データ１０ｂは、エンコード手段１４０によって、圧縮されネットワーク上で送信可能な形に変換される。これにより、大容量の映像データであっても、ネットワークトラフィックの重量化や増大化を回避し、ネットワークへの負荷を抑制して、低遅延伝送を実現し安定したデータ伝送を行うことが可能となる。なお、エンコード手段１４０によってエンコードされる映像データ１０ｂは、実際の放送用に用いる映像データではないため、映像の内容を確認し切換乃至加工処理できる程度の解像度でも支障を来さない事から、映像の解像度を下げてデータを軽くした状態でエンコードする構成とする事が可能となる。【００２６】
圧縮映像送信手段１５０は、エンコード手段１４０によってエンコードされた映像データ１０ｃをネットワーク上へと送信するための手段である。映像データ１０ｃは、圧縮等されたデータであるため、圧縮映像送信手段１５０は大きな負荷が掛かることなく、ネットワーク上で映像データ１０ｃを送信することが可能となっている。本実施例では、圧縮映像送信手段１５０は映像データ１０ｃをパケット分割した上で、パケットごとにネットワーク上に送出する構成である。【００２７】
次に、映像操作システム２００は、撮影システム１００が撮影したスポーツ等の各種の映像を遠隔で切換乃至加工の処理するためのシステムであり、圧縮映像受信手段２１０と、デコード手段２２０と、映像切換加工手段２３０と、制御信号生成手段２４０と、制御タイムコード抽出手段２５０と、制御情報送信手段２６０と、からなる構成である。【００２８】
圧縮映像受信手段２１０は、圧縮映像送信手段１５０よりネットワークへ送信された映像データ１０ｃを受信するための手段である。映像データ１０ｃは、圧縮映像送信手段１５０によって映像操作システム２００に向けてネットワーク上に送出されたあと、圧縮映像受信手段２１０によって受信される構成である。圧縮映像受信手段２１０は、映像データ１０ｃにパケットの欠損がないかを検証したうえで、パケットロスが発生した場合に再送要求を行う構成とすることが可能である。【００２９】
なお、前述の通り、映像操作システム２００で扱う映像データ自体は、直接放送に用いられるものではないため、解像度の低いものであっても大きな問題は発生しない。このため、パケットロスにより映像が一部欠損している場合であっても、ごく短時間であれば、再送要求せずそのまま続きの映像を受信し続ける構成とする事も出来るが、却ってその方がコスト的には望ましいと考えられる場合もある。【００３０】
デコード手段２２０は、エンコード手段１４０によってエンコードされた映像データ１０ｃのデコード処理を行うための手段であり、これにより映像操作システム２００内においても、受信した映像データ１０ｃを視聴しながら、映像に対して切換乃至加工の処理を行うことが可能となる。【００３１】
映像切換加工手段２３０は、映像データ１０ｃを所望する映像データ１０ｄとするため、オペレータが映像に対して切換乃至加工の処理を行うための手段である。映像切換加工手段２３０は、本実施例では、デコードされた映像データ１０ｃをオペレータが画面を見ながら、コンピュータを用いて、他の映像に切り換えたり、画像中に文字情報等を挿入したりする処理を行うことが可能となる。これにより、映像データ１０ｃに対して仮の映像の切換乃至加工処理を行い、映像データ１０ｄとする事ができる。【００３２】
制御信号生成手段２４０は、映像切換加工手段２３０による映像データ１０ｃの切換乃至加工処理を制御信号１４に変換して取得する手段である。映像切換加工手段２３０では、前述の通り、映像データ１０ｃに対して他の映像へ切り換え処理したり、画像中に文字情報等を挿入する処理、その他、画像データを複数選択して同時に表示する処理などが行われる。制御信号生成手段２４０は、この各処理を再現可能となるように、処理内容をコード化された制御信号１４に変換して生成する。これにより、制御信号１４を介して、放送用の映像データに対して、映像の切換乃至加工処理を施すことが可能となる。【００３３】
制御タイムコード抽出手段２５０は、上述の映像切換加工手段２３０による映像の切換乃至加工処理の時、すなわち制御信号生成手段２４０による制御信号１４生成時に、各処理を行うタイミングで映像データ１０ｄに記録されているタイムコード１２を参照して制御タイムコード１６として抽出するための手段である。これにより、映像の切換乃至加工処理を行った映像データ１０ｄのフレームを特定することが可能となる。【００３４】
制御情報送信手段２６０は、生成した制御信号１４と、抽出した制御タイムコード１６を、撮影システム１００に向けてネットワーク上に顕出（出力）し送信するための手段である。この構成とすることにより、ネットワーク上を伝送させるデータは、制御信号１４と制御タイムコード１６のみであるため、トラフィックの増加によるデータ伝送の遅延リスクは解消される。【００３５】
次に、制御信号１４と制御タイムコード１６が送信された撮影システム１００の動作について説明する。撮影システム１００は、更に、スイッチャー１６０を装備した構成となっている。スイッチャー１６０は、映像バッファ手段１３０に予め記憶された映像データ１０ｂに対して、自動的に切換乃至加工処理を行って出力するための装置である。【００３６】
スイッチャー１６０は、制御情報送信手段２６０によって送信された制御信号１４と制御タイムコード１６を受信するとともに、処理内容がコード化された制御信号１４によって指定された映像の切換および文字情報の付加などの処理を、映像バッファ手段１３０に予め記憶された映像データ１０ｂに対して行う。この際、制御タイムコード１６を読み取って、映像データ１０ｂ中のタイムコード１２と対比した上で、映像データ１０ｂ中の制御タイムコード１６で指定されたフレームに対して、制御信号１４で指定された切換乃至加工処理を施す（図２参照）。その後、切換乃至加工処理が行われた放送用の映像データ１０ｅを出力する。出力された映像データ１０ｅは放送用の鮮明な大容量の映像データであり、各受像機に送信され放送される。【００３７】
この構成とすることにより、撮影システム１００の映像バッファ手段１３０に格納された映像データ１０ｂへの切換乃至加工処理と、映像操作システム２００の映像切換加工手段２３０で行われる切換乃至加工処理とを同期することが可能となる。また、例えば、遠方で行われるスポーツイベントの映像を、センターで切換乃至加工処理するようなことが可能となり、現場には熟練したオペレータがいなくても、センターで待機している専門のオペレータによって適宜に映像の切換乃至加工処理を行う事が可能となる。特に、センターに送信する映像データはエンコードされているため、ネットワーク負荷を最大限に軽減した状態で、大容量映像データの加工処理を遠方において操作処理することが可能となる。【００３８】
従来は、このような撮影現場と遠く離れた場所に位置するセンターにおいて映像の切換乃至加工処理を行う場合、現場で撮影されたすべての映像データをセンター等に送り、センターにおいて直接映像データに切換乃至加工処理を施すこととなるため、ネットワーク負荷が大きくなり、生放送を行う場合には、安定した放送を行う事が困難になるという問題点があった。そのために現実的には、中継車等に担当のオペレータが搭乗し、各撮影現場で映像の切換乃至加工処理を行っているが、この処理は技術や経験が必要なため、熟練したオペレータが各撮影現場に帯同すると、オペレータの能力に差があるため熟練したオペレータの人員不足が発生するという深刻な問題が生じていた。【００３９】
本発明に係る構造を採用することにより、集中的にセンターに配属された熟練オペレータによる処理で上記問題点が解消され、遠隔地における各撮影現場から送られて来るエンコードされた映像データを切換乃至加工処理することで、現場にバッファされている放送用の映像データの切換乃至加工処理を遠隔操作できるため、生放送用の鮮明な映像データの切換乃至加工処理を遠隔地であるセンターにおいて集中的に行うことが可能となった。【００４０】
スイッチャー１６０による切換乃至加工処理を詳述する。スイッチャー１６０は、映像操作システム２００からの制御信号１４と同時に送信される（または含まれる）制御タイムコード１６と、映像バッファ手段１３０に記憶された映像データ１０ｂ中のタイムコード１２を比較する。そして、同一のタイムコードの映像データ１０ｂのフレームを対比抽出する。その後、抽出したフレーム位置から、制御信号１４に基づいて、映像切換加工手段２３０で行った切換乃至加工処理と同様の処理を施す。この処理を繰り返すことにより、映像バッファ手段１３０に記憶された映像データ１０ｂに対して、切換乃至加工処理を施す。これにより、オペレータが遠隔地で行った切換乃至加工処理と同じ処理を、映像バッファ手段１３０に記憶された映像データ１０ｂに対して正確に施すことが可能となる。【００４１】
本発明に係る遠隔映像処理システム１の実施例として、映像撮影装置１１０と、エンコード手段１４０と、デコード手段２２０は、一または複数個が別々に設置（装備）される構成である。一のみ設置される場合は、映像データ１０ｂへの文字情報等の加工処理がメインとなり、複数個設置される場合には、例えば、野球やサッカー中継、コンサートの中継のように、映像データの切換処理が多く行われることになる。【００４２】
本実施例では、映像撮影装置１１０を複数設置する構成とした場合、エンコード手段１４０と、デコード手段２２０も同数設け、それぞれが１対１に対応する構成としている。すなわち、複数からなる映像撮影装置１１０によって撮影された複数からなる映像データ１０ａは、それぞれＴＣインサータ１２０によって同一のタイムコード１２が付加される。これにより、タイムコード１２に付された複数の映像データ１０ｂ間における同期を取ることが可能となる。その後、各映像データ１０ｂは、映像バッファ手段１３０に記憶され、一方、複数からなるエンコード手段１４０によって各々エンコード処理が行われる。【００４３】
更に、エンコード処理された各映像データ１０ｃは、対応するデコード手段２２０によって、各々デコード処理される。これにより、映像切換加工手段２３０で行われる切換乃至加工処理用の映像データの伝送処理に掛かる時間を削減することが可能となり、生放送における映像の遅延を最小限に抑えることが可能となった。また、何れかのエンコード手段１４０やデコード手段２２０が故障した場合であっても、他のエンコード手段１４０とデコード手段２２０を予備機として利用することが可能となり、映像の切換乃至加工処理を途切れることなく継続することが可能となった。なお、一のみの映像撮影装置１１０とする場合には、映像同士の同期を取る必要はないため、エンコード手段１４０とデコード手段２２０も一のみ使用する構成とすることで問題はない事となる。【００４４】
撮影システム１００は、図１に示すように、ＴＣインサータ１２０が各映像データ１０ａに付加するタイムコード１２を生成するためのＴＣ生成手段１２２を装備する構成である。この構成とすることにより、映像の同期処理を正確に行う事が可能となった。【００４５】
制御信号１４は、本実施例では、映像データ１０ｂに対する操作コマンドからなる構成となっている。この操作コマンドは、映像切換加工手段２３０によって映像データ１０ｃに施される切換乃至加工処理と同様の処理を映像バッファ手段１３０に記憶された映像データ１０ｂに施すためのものであり、例えば、映像データを他の映像データであって同じタイムコード１２部分からの映像に切り換えるコマンドや、映像データ１０ｂ中の特定のタイムコード１２部分に文字情報を挿入するコマンドなどからなるものである。その他、一定の時間経過後に繰り返し情報を表示したり、一定間隔で映像を自動的に切り換えるコマンドを用いる事も可能である。【００４６】
これにより、映像操作システム２００から送信された操作コマンドからなる制御信号１４をスイッチャー１６０が受信し、映像バッファ手段１３０に記憶された一または複数からなる映像データ１０ｂに切換乃至加工処理を施すことが可能となり、スイッチャー１６０による映像データ１０ｂへの切換乃至加工処理を簡易なものとすることが可能となった。なお、本実施例では、映像データのバッファから放送用映像データの配信までのタイムラグは、２００〜３００ｍｓｅｃに抑えることが可能となっている。【００４７】
本発明で切換乃至加工処理を施す放送用の映像データは、ＳＤ映像、ＨＤ映像、４Ｋ映像および８Ｋ映像から選択される一の映像形式からなる構成である。これらの各種の映像形式からなる映像データのフレーム毎にタイムコード１２が付加される構成となっている。この構成とすることにより、鮮明な映像を放送することが可能となった。
【図面の簡単な説明】
【００４８】
【図１】本発明に係る遠隔映像処理システムの概略図
【図２】スイッチャーによる切換乃至加工処理の概念図
【符号の説明】
【００４９】
１    遠隔映像処理システム
１０ａ    映像データ
１０ｂ    映像データ
１０ｃ    映像データ
１０ｄ    映像データ
１０ｅ    映像データ
１２    タイムコード
１４    制御信号
１６    制御タイムコード
１００    撮影システム
１１０    映像撮影装置
１２０    ＴＣインサータ
１２２    ＴＣ生成手段
１３０    映像バッファ手段
１４０    エンコード手段
１５０    圧縮映像送信手段
１６０    スイッチャー
２００    映像操作システム
２１０    圧縮映像受信手段
２２０    デコード手段
２３０    映像切換加工手段
２４０    制御信号生成手段
２５０    制御タイムコード抽出手段
２６０    制御情報送信手段
【図１】
2018092173.tif 000003
【図２】
2018092173.tif 000004
【手続補正書】
【提出日】平成29年4月19日(2017.4.19)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮影現場に設置する撮影システム(100)と、撮影システムが撮影した映像を遠隔処理する映像操作システム(200)と、からなる遠隔映像処理システム(1)において、
前記遠隔映像処理システム(1)は、撮影システム(100)から離れた場所において撮影システム(100)内の映像の切換乃至加工処理を行うことにより放送用の映像データを作成するため、
前記撮影システム(100)は、映像を撮影するための映像撮影装置(110)と、前記映像撮影装置(110)から送信される映像データ(10a)にタイムコード(12)を付加するＴＣインサータ(120)と、前記タイムコード(12)が付加された映像データ(10b)を一時的に記憶するための映像バッファ手段(130)と、前記タイムコード(12)が付加された映像データ(10b)の圧縮処理を行うエンコード手段(140)と、前記エンコード手段(140)によってエンコードされた映像データ(10c)を送信する圧縮映像送信手段(150)と、からなるとともに、
前記映像操作システム(200)は、前記圧縮映像送信手段(150)より送信された映像データ(10c)を受信する圧縮映像受信手段(210)と、前記エンコードされた映像データのデコード処理を行うデコード手段(220)と、前記映像データを所望する映像データ(10d)に切換乃至加工する処理を行うための映像切換加工手段(230)と、前記映像切換加工手段(230)による切換乃至加工処理を制御信号(14)に変換する制御信号生成手段(240)と、前記映像切換加工手段(230)による映像の切換乃至加工処理時のタイムコードを制御タイムコード(16)として該映像データ(10d)から抽出する制御タイムコード抽出手段(250)と、前記制御信号(14)と前記制御タイムコード(16)を送信する制御情報送信手段(260)と、からなり、
前記撮影システム(100)は、更に、前記映像バッファ手段(130)に記憶された映像データ(10b)に切換乃至加工処理を施して出力するスイッチャー(160)を装備しており、前記制御信号(14)および前記制御タイムコード(16)を前記スイッチャー(160)が受信するとともに、前記スイッチャー(160)は、前記制御信号(14)に含まれる制御タイムコード(16)と、前記映像バッファ手段(130)に記憶された映像データ(10b)中のタイムコード(12)を比較して、同一のタイムコードを有する映像データ(10b)のフレームを抽出するとともに、該フレーム位置から、前記制御信号(14)に基づいて、映像バッファ手段(130)に記憶された映像データ(10b)に切換乃至加工処理を施し、切換乃至加工処理後の映像データ(10e)を出力することを特徴とする遠隔映像処理システム。
【請求項２】
前記映像撮影装置(110)と、前記エンコード手段(140)と、前記デコード手段(220)は一または複数設置（装備）されるとともに、一または複数からなる前記映像撮影装置(110)によって撮影された一または複数からなる映像データ(10a)は、それぞれＴＣインサータ(120)によって同一のタイムコード(12)が付加され、前記映像バッファ手段(130)に記憶されるとともに一または複数からなる前記エンコード手段(140)によって各々エンコード処理され、
エンコード処理された各映像データ(10c)は、対応する前記デコード手段(220)によって各々デコード処理されることを特徴とする請求項１記載の遠隔映像処理システム。
【請求項３】
前記撮影システム(100)は、ＴＣインサータ(120)が各映像データ(10a)に付加するタイムコード(12)を生成するＴＣ生成手段(122)を装備することを特徴とする請求項１記載の遠隔映像処理システム。
【請求項４】
前記制御信号(14)は、映像切換加工手段(230)による映像の加工処理と同様の加工処理を前記映像バッファ手段(130)に記憶された映像データ(10b)に施すための映像データの操作コマンドからなり、該操作コマンドからなる制御信号(14)を前記スイッチャー(160)が受信して前記映像バッファ手段(130)に記憶された一または複数からなる映像データ(10b)に切換乃至加工処理を施すことを特徴とする請求項１記載の遠隔映像処理システム。
【請求項５】
前記映像データは、ＳＤ映像、ＨＤ映像、４Ｋ映像および８Ｋ映像から選択される一の映像形式からなり、該映像形式からなる前記映像データのフレーム毎にタイムコード(12)が付加されることを特徴とする請求項１記載の遠隔映像処理システム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
上記の目的を達成するために本発明に係る遠隔映像処理システムは、撮影現場に設置する撮影システムと、撮影システムが撮影した映像を遠隔処理する映像操作システムと、からなる遠隔映像処理システムであって、前記遠隔映像処理システムは、撮影システムから離れた場所において撮影システム内の映像の切換乃至加工処理を行うことにより放送用の映像データを作成するため、前記撮影システムは、映像を撮影するための映像撮影装置と、前記映像撮影装置から送信される映像データにタイムコードを付加するＴＣインサータと、前記タイムコードが付加された映像データを一時的に記憶するための映像バッファ手段と、前記タイムコードが付加された映像データの圧縮処理を行うエンコード手段と、前記エンコード手段によってエンコードされた映像データを送信する圧縮映像送信手段と、からなるとともに、前記映像操作システムは、前記圧縮映像送信手段より送信された映像データを受信する圧縮映像受信手段と、前記エンコードされた映像データのデコード処理を行うデコード手段と、前記映像データを所望する映像データに切換乃至加工する処理を行うための映像切換加工手段と、前記映像切換加工手段による切換乃至加工処理を制御信号に変換する制御信号生成手段と、前記映像切換加工手段による映像の切換乃至加工処理時のタイムコードを制御タイムコードとして該映像データから抽出する制御タイムコード抽出手段と、前記制御信号と前記制御タイムコードを送信する制御情報送信手段と、からなり、前記撮影システムは、更に、前記映像バッファ手段に記憶された映像データに切換乃至加工処理を施して出力するスイッチャーを装備しており、前記制御信号および前記制御タイムコードを前記スイッチャーが受信するとともに、前記スイッチャーは、前記制御信号に含まれる制御タイムコードと、前記映像バッファ手段に記憶された映像データ中のタイムコードを比較して、同一のタイムコードを有する映像データのフレームを抽出するとともに、該フレーム位置から、前記制御信号に基づいて、映像バッファ手段に記憶された映像データに切換乃至加工処理を施し、切換乃至加工処理後の映像データを出力する構成である。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】削除
【補正の内容】
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】変更
【補正の内容】
【００１６】
本発明は、上記詳述した通りの構成であるので、以下のような効果がある。
１．映像データにタイムコードを付与する構成としたため、同期処理が容易となり、処理する映像の再生開始位置を精確に指定することが可能となる。また、エンコードされて送信された加工処理用の映像データをもとに映像の切換乃至加工処理を行う構成としたため、遠隔地（センター）で少数の事情通のオペレータが視聴することが可能となり、切換乃至加工の作業を遠隔で行うことが可能となる。また、遠隔地における映像切換加工手段による上記作業内容を制御信号に変換する制御信号生成手段を設けたため、制御信号を現場にあるスイッチャーに送って遠隔操作することにより、現場のバッファに蓄積された放送用の大容量映像データを遠隔で切換乃至加工処理を自動的に行うことが可能となり、現場にオペレータがいなくても、映像の切換乃至加工処理を行う事が可能となる。
また、スイッチャーが、制御信号に基づいて、映像データのタイムコードをもとに映像バッファ手段に記憶された映像データを切換乃至加工処理するため、オペレータが遠隔地（センター）で行った切換乃至加工処理と同じ処理を、映像バッファ手段に記憶された映像データに対して正確に施すことが可能となる。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】変更
【補正の内容】
【００１７】
２．映像撮影装置と、エンコード手段と、デコード手段を一または複数設置（装備）する構成としたため、各映像装置で撮影された映像データを、個別のエンコード手段でエンコードするとともに、対応するデコード手段でデコード可能となり、処理用の映像データの伝送の遅延を防止するとともに、エンコード手段とデコード手段の故障時であっても、映像の切換乃至加工処理を継続することが可能となる。
３．タイムコードを生成するためのＴＣ生成手段を設けたため、映像の同期処理を正確に行う事が可能となる。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
４．制御信号を操作コマンドとしたため、スイッチャーによる映像データへの切換乃至加工処理を簡易なものとすることが可能となる。
５．映像データを、ＳＤ映像、ＨＤ映像、４Ｋ映像および８Ｋ映像等としたため、映像データのフレーム毎にタイムコードを付加することが可能となるとともに、鮮明な映像を放送することが可能となる。
【国際調査報告】
2018092173.tif 000005
2018092173.tif 000006