(57)【要約】【課題】映像表示システムにおいて映像の表示に遅延が生じるのを抑制する。【解決手段】映像表示システム１００は、元映像から複数の映像を切り出し、切り出した映像ごとに映像信号をＩＰパケット化してＩＰパケットを生成するＩＰパケット化部２０２を有する撮像装置１０１と、撮像装置１０１から出力されたＩＰパケットを受信し、受信したＩＰパケットを再構成するＩＰパケット再構成部４０６を有する編集装置１０２と、編集装置１０２から出力されるＩＰパケットに基づいて映像を表示する表示装置１０３〜１０７とを備える。ＩＰパケット化部２０２は、生成するＩＰパケットに、ＩＰパケット再構成部４０６によるＩＰパケットの再構成に必要な接続情報を付与する。【選択図】図１
2019050441.tif 000002
【特許請求の範囲】
【請求項１】
元映像から複数の映像を切り出し、切り出された映像ごとに映像信号をＩＰパケット化してＩＰパケットを生成する生成手段と、
前記生成手段で生成されたＩＰパケットを出力する出力手段と、
前記出力手段から出力されたＩＰパケットを受信し、受信したＩＰパケットを再構成する編集手段と、
前記編集手段から出力されるＩＰパケットに基づいて映像を表示する表示装置と、
前記編集手段においてＩＰパケットを再構成する方法を前記生成手段に通知する通知手段と、を備え、
前記生成手段は、生成するＩＰパケットに、前記編集手段におけるＩＰパケットの再構成に必要な情報を付与することを特徴とする映像表示システム。
【請求項２】
前記編集手段は、前記表示装置の表示装置情報を取得し、取得した前記表示装置情報に基づいて、前記表示装置に表示する映像信号のＩＰパケットに前記出力手段から受信したＩＰパケットを再構成することを特徴とする請求項１に記載の映像表示システム。
【請求項３】
前記生成手段は、前記編集手段が前記切り出された複数の映像を接続して前記元映像を生成することができるようにするための接続情報を前記ＩＰパケットに付与することを特徴とする請求項１又は２に記載の映像表示システム。
【請求項４】
複数の前記表示装置を備え、
前記生成手段は、前記複数の表示装置のそれぞれに表示される映像ごとに前記元映像から複数の映像を切り出すことを特徴とする請求項２に記載の映像表示システム。
【請求項５】
前記生成手段は、前記複数の表示装置のうち第１の表示装置と第２の表示装置のそれぞれに表示する映像が異なり、且つ、前記第１の表示装置に表示する映像と前記第２の表示装置に表示する映像とが一部の領域で重複するように前記元映像からの映像の切り出しが行われていた場合に、前記第１の表示装置に表示する映像の映像信号をＩＰパケット化すると共に、前記第２の表示装置に表示する映像から前記重複している領域の映像信号を除いた領域の映像信号をＩＰパケット化し、生成したＩＰパケットに前記編集手段が前記第２の表示装置に表示する映像のＩＰパケットを再構成するための情報を付与し、
前記編集手段は、受信したＩＰパケットに基づき、前記第２の表示装置に表示する映像信号のＩＰパケットを再構成することを特徴とする請求項４に記載の映像表示システム。
【請求項６】
前記出力手段と前記編集手段との間に配置される分配器と、
前記分配器に接続された別の表示装置と、を備え、
前記生成手段は、前記別の表示装置に表示する映像と前記表示装置に表示する映像とに重複領域がある場合に、前記別の表示装置に表示する映像の映像信号をＩＰパケット化すると共に、前記表示装置に表示する映像から前記重複領域の映像信号を除いた領域の映像信号をＩＰパケット化し、生成したＩＰパケットに前記編集手段が前記表示装置に表示する映像のＩＰパケットを再構成するための情報を付与し、
前記出力手段は、前記別の表示装置へは前記別の表示装置に表示する映像のＩＰパケットのみを出力し、前記編集手段へは前記別の表示装置に表示する映像のＩＰパケットと前記表示装置に表示する映像から前記重複領域の映像信号を除いた領域の映像信号および前記情報を含むＩＰパケットを出力し、
前記編集手段は、受信したＩＰパケットから前記別の表示装置に表示する映像信号のＩＰパケットを再構成することを特徴とする請求項１に記載の映像表示システム。
【請求項７】
映像表示システムの制御方法であって、
元映像から複数の映像を切り出し、切り出された映像ごとに映像信号をＩＰパケット化すると共に所定の情報を付与したＩＰパケットを生成する生成ステップと、
前記生成ステップで生成されたＩＰパケットを編集手段へ出力する出力ステップと、
前記編集手段から出力されるＩＰパケットに基づいて表示手段に映像を表示する表示ステップと、を有し、
前記所定の情報は、前記出力ステップで前記編集手段へ出力されたＩＰパケットを前記編集手段で再構成することができるようするための情報であることを特徴とする映像表示システムの制御方法。
【請求項８】
請求項７に記載された映像表示システムの制御方法の各ステップをコンピュータに実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像表示システム及びその制御方法とプログラムに関する。
【背景技術】
【０００２】
近年、４Ｋ解像度の映像コンテンツの制作需要が増大しており、これに伴って大容量の映像データを遅滞なく伝送するための技術が求められている。ここで、放送機器の映像伝送には、シリアル・デジタル・インタフェース（ＳＤＩ）が用いられており、１本の同軸ケーブルで約３Ｇｂｐｓまで伝送可能な３Ｇ−ＳＤＩが実用化されて広く普及している。しかし、４Ｋ／６０Ｐで撮影された大容量の映像データを１本の同軸ケーブルで伝送しようとすると、３Ｇ−ＳＤＩの伝送レートでは不十分となってしまう。そこで、複数の同軸ケーブルを用いて伝送する方法が提案されている。例えば、４本の同軸ケーブルを用いることにより、４Ｋ／６０Ｐで撮影された映像を伝送することが可能になる。しかし、この手法では、機材間の接続に従来の４倍の数のケーブルを使用するため、ケーブル等の重量が増加してしまうという問題や、より広い敷設スペースが必要になる等の問題が生じる。
【０００３】
そこで、映像信号をインターネットプロトコル（ＩＰ；Internet Protocol）に変換し、ＬＡＮ等のネットワークを使ってリアルタイムに伝送する映像伝送システムが開発されている。映像信号をＩＰ化する技術として、非特許文献１には、映像信号からＩＰパケットのペイロードデータを作成する方法が記載されている。具体的には、非特許文献１では、映像信号をライン単位で分割してＩＰパケットのペイロードデータとしている。
【０００４】
このようにＩＰ化された映像伝送システムでは、ＳＤＩを用いた伝送システムよりも高速な伝送が可能であり、また、映像を分配する機器に汎用設備を利用することができるため、安価にシステムを構築することができる等のメリットがある。よって、映像伝送システムのＩＰ化は、今後、急速に進行すると考えられる。そして、ＩＰ化させた映像伝送システムが普及した環境では、例えば、撮影中の映像信号にリアルタイムで切り出し等を施して表示装置へ送信する編集装置も、ＩＰ化された映像信号を送受信することが想定される。例えば、特許文献１には、ディスプレイサーバと複数のディスプレイユニットからなる表示システムで、ディスプレイサーバが画像を矩形タイル状に分割し、各ディスプレイユニットに送信する技術が記載されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００８−９６７４６号公報
【非特許文献】
【０００６】
【非特許文献１】C.Perkins 他，「RFC4175 RTP Payload Format for Uncompressed Video」，IETF，2005年9月
【発明の概要】
【発明が解決しようとする課題】
【０００７】
上記従来技術では、ＩＰパケットをデコードし、画像分割し、再びＩＰパケット化して各ディスプレイに出力することが可能である。しかし、デコード処理や画像分割等の編集を行った映像信号を編集装置に接続された各表示装置に送信する際に、映像信号のパケット化によって映像の表示に遅延が発生してしまうという問題がある。
【０００８】
本発明は、映像の表示に遅延が生じるのを抑制することが可能な映像表示システムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明に係る映像表示システムは、元映像から複数の映像を切り出し、切り出された映像ごとに映像信号をＩＰパケット化してＩＰパケットを生成する生成手段と、前記生成手段で生成されたＩＰパケットを出力する出力手段と、前記出力手段から出力されたＩＰパケットを受信し、受信したＩＰパケットを再構成する編集手段と、前記編集手段から出力されるＩＰパケットに基づいて映像を表示する表示装置と、前記編集手段においてＩＰパケットを再構成する方法を前記生成手段に通知する通知手段と、を備え、前記生成手段は、生成するＩＰパケットに、前記編集手段におけるＩＰパケットの再構成に必要な情報を付与することを特徴とする。
【発明の効果】
【００１０】
本発明によれば、映像の表示に遅延が生じるのを抑制することができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の第１実施形態に係る映像表示システムのシステム構成図である。
【図２】撮像装置の構成を示すブロック図である。
【図３】撮像装置のＩＰパケット化部でＩＰパケット化された映像信号のデータパケットの構成を説明する図である。
【図４】編集装置の構成を示すブロック図である。
【図５】表示装置の構成を説明するブロック図である。
【図６】４Ｋ映像と、４Ｋ映像を分割した２Ｋ映像の例を示す模式図である。
【図７】２Ｋ映像の映像信号データに番号を振った例を示す図である。
【図８】映像信号データ群をＩＰパケット化した接続情報の例を示す図である。
【図９】４Ｋ映像を分割した２Ｋ映像の別の例を示す模式図である。
【図１０】２Ｋ映像の映像信号データに番号を振った別の例を示す図である。
【図１１】映像信号データ群をＩＰパケット化した接続情報の別の例を示す図である。
【図１２】本発明の第３実施形態に係る映像表示システムのシステム構成図である。
【図１３】４Ｋ映像から２Ｋ映像を切り出した例を示す模式図である。
【発明を実施するための形態】
【００１２】
以下、本発明の実施形態について、添付図面を参照して詳細に説明する。
【００１３】
＜第１実施形態＞
図１は、本発明の第１実施形態に係る映像表示システム１００のシステム構成図である。映像表示システム１００は、撮像装置１０１、編集装置１０２、表示装置１０３，１０４，１０５，１０６，１０７を有する。撮像装置１０１と編集装置１０２とはＬＡＮケーブル１０８により通信可能に接続されている。編集装置１０２と表示装置１０３〜１０７とは、ＬＡＮケーブル１１０、ＩＰネットワーク１０９及びＬＡＮケーブル１１１，１１２，１１３，１１４，１１５を介して通信可能に接続されている。
【００１４】
撮像装置１０１は、所定の被写体を撮影して生成した映像信号をＩＰ化し、ＬＡＮケーブル１０８を経由して、ＩＰ化した映像信号を編集装置１０２へ送信する。なお、撮像装置１０１のより詳細な構成については、図２を参照して後述する。編集装置１０２は、ＬＡＮケーブル１０８を介して撮像装置１０１から受信した映像信号を、編集装置１０２の操作者により指定された条件等の所定の条件に従って分割する。編集装置１０２は、分割した映像信号をＬＡＮケーブル１１０、ＩＰネットワーク１０９及びＬＡＮケーブル１１１〜１１５を介して、表示装置１０３〜１０７へ送信する。なお、編集装置１０２のより詳細な構成については、図４を参照して後述する。
【００１５】
図２は、撮像装置１０１の構成を示すブロック図である。撮像装置１０１は、撮像部２０１、映像信号ＩＰパケット化部２０２、通信制御部２０３、分割情報取得部２０４、ペイロードデータ分割方法決定部２０５、パケット接続情報生成部２０６及びパケットヘッダ生成部２０７を有する。撮像装置１０１において、各種のデータを処理する処理部は、専用プロセッサであってもよいし、共通のＣＰＵがＲＯＭ等に記憶されている所定のプログラムを実行することにより所定の機能が実現されるものであってもよい。なお、以下の説明では、映像信号ＩＰパケット化部２０２を「ＩＰパケット化部２０２」と記し、ペイロードデータ分割方法決定部２０５を「分割方法決定部２０５」と記し、パケット接続情報生成部２０６を「接続情報生成部２０６」と記すこととする。
【００１６】
撮像部２０１は、撮影レンズを通過した被写体の光学像を撮像素子によって映像信号に変換した後、Ａ／Ｄ変換や画像調整処理等を行って映像信号を生成し、生成した映像信号をＩＰパケット化部２０２へ出力する。ＩＰパケット化部２０２は、撮像部２０１から取得した映像信号をＩＰパケット化する。具体的には、ＩＰパケット化部２０２は、映像信号をReal-time Transport Protocol（以下「ＲＴＰ」という）で伝送するために、映像信号をデータパケットに変換する。
【００１７】
図３は、ＩＰパケット化部２０２でＩＰパケット化された映像信号のデータパケットの構成を説明する図である。データパケットは、ＩＰヘッダ３０１、ＵＤＰ（User Datagram Protocol）ヘッダ３０２、ＲＴＰヘッダ３０３、ＲＴＰペイロード３０４で構成される。ＩＰパケット化部２０２は、分割方法決定部２０５で決定された分割方法に従って映像信号をＩＰパケット化し、ＲＴＰペイロード３０４に格納する。
【００１８】
通信制御部２０３は、ＩＰパケット化部２０２でＩＰパケット化された映像信号を取得し、編集装置１０２へ伝送する。その際、映像信号はＲＴＰで伝送され、伝送制御はRTP Control Protocolで行われる。また、通信制御部２０３は、分割情報取得部２０４の要求に応じて、表示装置１０３〜１０７で映像を表示する際の分割情報（詳細は後述する）を取得するための通信を行う。分割情報取得部２０４は、通信制御部２０３を介して取得した分割情報を分割方法決定部２０５へ出力する。分割方法決定部２０５は、分割情報取得部２０４から取得した分割情報に基づいて、撮像部２０１で生成された画像データの分割方法を決定する。接続情報生成部２０６は、分割方法決定部２０５で決定された分割方法に従ってパケット接続情報（詳細は後述する）を生成し、生成したパケット接続情報をパケットヘッダ生成部２０７へ出力する。
【００１９】
パケットヘッダ生成部２０７は、分割方法決定部２０５で決定された分割方法に従ってＩＰヘッダ３０１、ＵＤＰヘッダ３０２及びＲＴＰヘッダ３０３を生成する。また、パケットヘッダ生成部２０７は、接続情報生成部２０６で生成されたパケット接続情報をＲＴＰヘッダ３０３の拡張ヘッダに組み込む。ＩＰパケット化部２０２は、パケットヘッダ生成部２０７で生成されたヘッダと撮像部２０１が出力する映像信号を合わせてＩＰパケット化する。
【００２０】
図４は、編集装置１０２の構成を示すブロック図である。編集装置１０２は、第１通信制御部４０１、分割情報送信部４０２、映像分割情報生成部４０３、ＩＰヘッダ解析部４０４、ＩＰヘッダ生成部４０５及び映像信号ＩＰパケット再構成部４０６を備える。また、編集装置１０２は、第２通信制御部４０７、表示装置情報取得部４０８、表示部４０９及び入力部４１０を備える。編集装置１０２において、映像データ等の各種データを処理する各部は、専用プロセッサであってもよいし、共通のＣＰＵがＲＯＭ等に記憶されている所定のプログラムを実行することにより所定の機能が実現されるものであってもよい。なお、以下では、映像分割情報生成部４０３を「分割情報生成部４０３」と記し、映像信号ＩＰパケット再構成部４０６を「ＩＰパケット再構成部４０６」と記すこととする。
【００２１】
第１通信制御部４０１は、撮像装置１０１から出力されたＩＰパケットを受信する。また、第１通信制御部４０１は、分割情報送信部４０２の要求に応じて、表示装置１０３〜１０７のそれぞれで映像を表示する際の分割情報を撮像装置１０１へ出力するための通信を行う。分割情報送信部４０２は、分割情報生成部４０３から取得した映像分割情報を、第１通信制御部４０１を介して撮像装置１０１へ出力する。ＩＰヘッダ解析部４０４は、第１通信制御部４０１が受信したＩＰパケットのヘッダを解析して、ＩＰヘッダ生成部４０５へ出力する。ＩＰヘッダ生成部４０５は、ＩＰヘッダ解析部４０４から取得したヘッダ情報、表示装置情報取得部４０８から取得したＩＰアドレス等の情報及び分割情報生成部４０３から得た分割情報に基づいてＩＰヘッダを生成し、ＩＰパケット再構成部４０６へ出力する。なお、ＩＰヘッダ生成部４０５でのＩＰヘッダの生成方法については後述する。
【００２２】
ＩＰパケット再構成部４０６は、第１通信制御部４０１を介して、撮像装置１０１から出力された映像信号のＩＰパケットを取得する。そして、ＩＰパケット再構成部４０６は、ＩＰヘッダ生成部４０５で生成されたＩＰヘッダを用いて、撮像装置１０１から取得した映像信号のＩＰパケットを再構成し、第２通信制御部４０７へ出力する。なお、ＩＰパケット再構成部４０６でのＩＰパケットの再構成については後述する。
【００２３】
第２通信制御部４０７は、ＩＰパケット再構成部４０６で再構成されたＩＰパケットを表示装置１０３〜１０７へ出力する。また、第２通信制御部４０７は、表示装置情報取得部４０８の要求に応じて、表示装置１０３〜１０７の情報を取得するための通信を行う。表示装置情報取得部４０８は、第２通信制御部４０７を介して、編集装置１０２に接続されている表示装置の数や解像度等の情報等（表示装置情報）を受け取り、表示部４０９と分割情報生成部４０３へ出力する。表示部４０９は、表示装置情報取得部４０８から取得した表示装置情報を表示して、編集装置１０２の操作者に提示する。
【００２４】
編集装置１０２の操作者は、表示部４０９に表示された表示装置情報に基づき、どの表示装置にどの分割映像を出力するか、どの表示装置に元映像（未分割映像）を出力するか等を決定することができる。編集装置１０２の操作者は、入力部４１０を操作して決定内容を入力することができる。入力部４１０は、例えば、マウスやキーボード、タッチパネル等であるが、これらに限定されるものではない。分割情報生成部４０３は、入力部４１０からの入力情報と表示装置情報取得部４０８から取得した表示装置情報に基づいて映像分割情報を生成し、生成した映像分割情報を分割情報送信部４０２とＩＰヘッダ生成部４０５へ出力する。なお、映像分割の詳細については後述する。
【００２５】
図５は、表示装置１０３の構成を説明するブロック図である。なお、表示装置１０４〜１０７の構成は、表示装置１０３の構成に準ずる。表示装置１０３〜１０７は、通信制御部５０１、表示装置情報送信部５０２、映像信号ＩＰパケット解除部５０３及び表示部５０４を有する。以下の説明では、映像信号ＩＰパケット解除部５０３を「ＩＰパケット解除部５０３」と記すこととする。
【００２６】
通信制御部５０１は、編集装置１０２から出力されたＩＰパケットを受信する。また、通信制御部５０１は、表示装置情報送信部５０２の要求に応じて表示装置１０３〜１０７の解像度やＩＰアドレス等の情報（表示装置情報）を編集装置１０２へ出力する。ＩＰパケット解除部５０３は、通信制御部５０１を介して編集装置１０２から取得したＩＰパケットから映像信号データを取り出し、表示部５０４へ出力して表示させる。表示部５０４は、例えば、液晶パネル等であるが、その面積や解像度は表示装置１０３〜１０７のそれぞれで異なっていてもよい。
【００２７】
次に、撮像装置１０１で４Ｋ映像を撮影し、撮影した４Ｋ映像（元映像）と、４Ｋ映像を複数の２Ｋ映像に分割した映像とを表示装置１０３〜１０７に表示する処理について説明する。まず、映像表示システム１００でのＩＰパケットの生成と再構成、パケット接続情報の第１の例について説明する。図６（ａ）は、撮像装置１０１によって撮影された４Ｋ映像６０１の模式図である。図６（ｂ）は、４Ｋ映像６０１を４つの２Ｋ映像６１１，６１２，６１３，６１４に分割した状態を示す模式図である。換言すれば、４Ｋ映像６０１は元映像であり、４つの２Ｋ映像６１１〜６１４は元映像から重複しないように複数の映像を切り出した例である。
【００２８】
表示装置１０３〜１０７のそれぞれの表示装置情報送信部５０２は、表示装置１０３〜１０６が２Ｋ映像を、表示装置１０７が４Ｋ映像を、それぞれ受信可能且つ表示可能であることを表示装置情報として通信制御部５０１を介して編集装置１０２へ送信する。編集装置１０２の表示装置情報取得部４０８は、第２通信制御部４０７を介して、表示装置１０３〜１０７の表示装置情報を受け取り、表示部４０９に表示する。一方、第１通信制御部４０１は、撮像装置１０１で撮影された映像の解像度等の情報を撮像装置１０１から受信して表示部４０９に表示する。これにより編集装置１０２の操作者は、表示部４０９に表示された表示装置情報と撮影映像の解像度情報に基づいて表示装置１０３〜１０７のそれぞれへの撮影映像への分割映像又は未分割映像の出力方法を決めて、入力部４１０から入力することが可能になる。
【００２９】
本実施形態では、編集装置１０２の操作者は、表示装置１０３，１０４，１０５，１０６のそれぞれに２Ｋ映像６１１，６１２，６１３，６１４を出力して表示し、表示装置１０７に未分割の４Ｋ映像６０１を出力して表示することを決定したものとする。この場合、編集装置１０２の操作者は、図６（ｂ）に示した映像分割方法が入力部４１０を介して分割情報生成部４０３に入力する。
【００３０】
分割情報生成部４０３で生成された分割情報は、分割情報送信部４０２と第１通信制御部４０１を介して撮像装置１０１へ送信され、撮像装置１０１の通信制御部２０３と分割情報取得部２０４を介して分割方法決定部２０５に入力される。分割方法決定部２０５は、入力された分割情報に基づき、４Ｋ映像６０１を２Ｋ映像６１１〜６１４に分割してＩＰパケット化することを決定し、接続情報生成部２０６、パケットヘッダ生成部２０７及びＩＰパケット化部２０２へ通知する。ＩＰパケット化部２０２は、２Ｋ映像６１１〜６１４のそれぞれの領域の映像信号データごとにＮラインずつ、ＲＴＰペイロード３０４（図３参照）に格納し、パケット化する。すなわち、ＲＴＰペイロード３０４は、１つのデータパケットごとに２０４８ピクセル×Ｎライン分の映像信号データを格納する。なお、Ｎは１以上の整数である。ここで、映像信号データについて、Ｎ＝２の場合を取り上げて、具体的に説明する。
【００３１】
図７（ａ）は、図６（ｂ）の２Ｋ映像６１１の映像信号データに対して１ピクセルごとに番号を振った例を示す図である。同様に、図７（ｂ）は、図６（ｂ）の２Ｋ映像６１２における映像信号データに対して１ピクセルごとに番号を振った例を示す図である。映像信号データ群７０１，７１１はそれぞれ、１つのデータパケットに格納する映像信号データのまとまりを示す。
【００３２】
図８（ａ）は、映像信号データ群７０１をＩＰパケット化する際に、そのＩＰパケットのＲＴＰヘッダ３０３の拡張ヘッダに組み込むパケット接続情報８０１の例を示す図である。同様に、図８（ｂ）は、映像信号データ群７１１をＩＰパケット化する際に、そのＩＰパケットのＲＴＰヘッダ３０３の拡張ヘッダに組み込むパケット接続情報８１１の例である。パケット接続情報にある「シーケンス番号」は、ＲＴＰヘッダ３０３に含まれ、ＩＰパケットを送信する度にインクリメントされる番号である。「領域情報」は、そのパケット接続情報が２Ｋ映像６１１〜６１４のどの領域の映像信号に関連する情報であるかを示す。「接続情報」の「接続データ番号」は、そのパケットのペイロードデータ内の何ピクセル目のデータであるかを明らかにする情報である。「接続前データ」は、分割前の４Ｋ映像６０１において「接続データ番号」の直前に配置されているデータを明らかにする情報である。「接続前データ」は、そのデータをパケット化した後の「シーケンス番号」と、「シーケンス番号」が付けられたパケットにおける接続データ番号を含む。「接続後データ」は、分割前の４Ｋ映像６０１において「接続データ番号」に続けて配置されているデータを明らかにする情報である。「接続後データ」は、そのデータをパケット化した後の「シーケンス番号」と、「シーケンス番号」が付けられたパケットにおける接続データ番号を含む。
【００３３】
なお、「接続前データ：なし」は、分割前の４Ｋ映像６０１において「接続データ番号」の直前に配置されるデータが、同じペイロードデータ内の「接続データ番号」の直前のデータであることを示す。また、「接続後データ：なし」は、分割前の４Ｋ映像６０１において「接続データ番号」に続けて配置するデータが、同じペイロードデータ内の「接続データ番号」の直後のデータであることを示す。
【００３４】
ＩＰパケット化部２０２は、先ず、通信制御部２０３を介して映像信号データ群７０１とパケット接続情報８０１を含むＩＰパケットを編集装置１０２へ送信する。続いて、ＩＰパケット化部２０２は、通信制御部２０３を介して映像信号データ群７１１とパケット接続情報８１１を含むＩＰパケットを編集装置１０２へ送信する。撮像装置１０１は、２Ｋ映像６１１，６１２の映像信号データを２ラインずつ交互に送信した後、同様にして、２Ｋ映像６１３，６１４の映像信号データを編集装置１０２に送信する。
【００３５】
編集装置１０２の第１通信制御部４０１は、撮像装置１０１から出力されたＩＰパケットを受信する。ＩＰヘッダ解析部４０４は、第１通信制御部４０１が受信したＩＰパケットのヘッダに含まれるパケット接続情報を解析する。ＩＰヘッダ生成部４０５は、ＩＰヘッダ解析部４０４により解析された情報と表示装置情報取得部４０８から取得した表示装置情報に基づいてＩＰヘッダを生成する。ＩＰパケット再構成部４０６は、第１通信制御部４０１から取得したＩＰパケットのヘッダを、ＩＰヘッダ生成部４０５により生成されたＩＰヘッダに差し替えて、第２通信制御部４０７を介して表示装置１０３〜１０７へ送信する。
【００３６】
具体的には、パケット接続情報８０１の領域情報を解析すると、２Ｋ映像６１１の映像信号データを含むＩＰパケットであることが分かる。２Ｋ映像６１１の映像信号データは表示装置１０３に表示される映像のデータである。そのため、編集装置１０２は、表示装置情報取得部４０８から得た情報に基づき、映像信号データ群７０１を含むＩＰパケットのヘッダ情報を表示装置１０３に送信するための情報に差し替えて、表示装置１０３へ送信する。つまり、編集装置１０２は、映像振動データを分割、再構成することなく、ＩＰパケットのヘッダ情報を表示装置１０３に送信するための情報に差し替えるだけで、表示装置１０３に必要なＩＰパケットを送信することができる。
【００３７】
また、パケット接続情報８１１の領域情報を解析すると、２Ｋ映像６１２の映像信号データを含むＩＰパケットであることが分かる。表示装置情報取得部４０８から得た表示装置情報により、表示装置１０４には２Ｋ映像６１２を表示することが分かっている。よって、映像信号データ群７１１を含むＩＰパケットのヘッダ情報を表示装置１０４へ送信するための情報に差し替えるだけで、表示装置１０４に必要なＩＰパケットを表示装置１０４へ送信することができる。同様にして、編集装置１０２は、ＲＴＰペイロード３０４を変更することなくヘッダ情報を変更するだけで、２Ｋ映像６１１〜６１４のそれぞれの映像信号データをそれぞれ表示装置１０３〜１０６へ送信することができる。
【００３８】
一方、表示装置１０７へは４Ｋ映像６０１の映像信号データの送信が要求されている。したがって、編集装置１０２は、パケット接続情報に基づき、ＩＰヘッダの再生成と映像信号データの組み換えを行う。具体的には、編集装置１０２は、先ず、パケット接続情報８０１の接続情報１を解析する。これにより、分割前の４Ｋ映像６０１では、シーケンス番号１のＩＰパケットの２０４８番目のデータ７０２の後に続く映像信号データが、シーケンス番号２のＩＰパケットの１番目のデータ７１２であることが分かる。また、パケット接続情報８１１の接続情報１を解析すると、分割前の４Ｋ映像６０１では、シーケンス番号２のＩＰパケットの１番目のデータ７１２の前にある映像信号データが、シーケンス番号１のＩＰパケットの２０４８番目のデータ７０２であることが分かる。
【００３９】
このようにしてパケット接続情報に含まれる各接続情報を解析することにより、２Ｋ映像に分割されて撮像装置１０１から編集装置１０２へ送信されてきた映像信号データが、分割前の４Ｋ映像においてどのように並んでいたかを知ることができる。そこで、ＩＰパケット再構成部４０６は、接続情報に基づいて映像信号データを並び替え、新たなＩＰヘッダを付加し、第２通信制御部４０７を介して表示装置１０７に送信する。
【００４０】
例えば、シーケンス番号１の１番目のデータ７０３から２０４８番目のデータ７０２までのデータ群の次に、シーケンス番号２の１番目のデータ７１２から２０４８番目のデータ７１３までのデータ群が接続される。続いて、シーケンス番号１の２０４９番目のデータ７０４から４０９６番目のデータ７０５までのデータ群が接続される。次いで、シーケンス番号２の２０４９番目のデータ７１４から４０９６番目のデータ７１５までのデータ群が接続される。このようにして、水平方向に４０９６ピクセル、垂直方向に２ライン分のデータが１つのＲＴＰペイロード３０４に格納され、ＩＰヘッダが付加されて表示装置１０７へ送信される。
【００４１】
表示装置１０３〜１０７は、それぞれの通信制御部５０１を介して、編集装置１０２から送信されてきたＩＰパケットを受信する。そして、表示装置１０３〜１０７のそれぞれのＩＰパケット解除部５０３は、それぞれの通信制御部５０１を介して編集装置１０２から取得したＩＰパケットから映像信号データを取り出して表示部５０４へ出力することで、映像を表示部５０４に表示させる。
【００４２】
以上の説明の通りに、本実施形態では、接続情報を付与して映像信号データを送信する。これにより、編集した異なる映像を複数の表示装置に別々に表示する場合に、映像編集時のデコード処理と再エンコード処理を行う必要がなく、よって、映像の表示に遅延が生じるのを抑制することができる。
【００４３】
＜第２実施形態＞
第２実施形態では、第１実施形態で説明した映像表示システム１００での、ＩＰパケットの生成と再構成、パケット接続情報の第２の例について説明する。なお、映像表示システム１００の構成については、図１乃至図５を参照した説明に準ずるため、ここでの説明を省略する。
【００４４】
図９は、撮像装置１０１で撮影した４Ｋ映像（図６の４Ｋ映像６０１と同じ４０９６ピクセル×２１６０ライン）を４つの２Ｋ映像９０１，９０２，９０３，９０４に分割した様子を示す図である。２Ｋ映像９０１，９０２には重複領域９０５が設けられており、２Ｋ映像９０１の領域から重複領域９０５を除いた領域を領域９０６としている。また、４Ｋ映像には、表示装置１０３〜１０７のどれにも表示しない領域９０７が設定されているものとする。
【００４５】
先ず、表示装置１０３〜１０６のそれぞれの表示装置情報送信部５０２がそれぞれの通信制御部５０１を介して、表示装置１０３〜１０６のそれぞれが２Ｋ映像を受信し表示することが可能なことを表示装置情報として編集装置１０２に送信する。編集装置１０２の表示装置情報取得部４０８は、編集装置１０２に接続されている表示装置１０３〜１０６のそれぞれの表示装置情報を第２通信制御部４０７を介して受け取り、表示部４０９に表示する。また、編集装置１０２の第１通信制御部４０１は、撮像装置１０１からの撮影映像の解像度情報を表示部４０９に表示する。これにより、編集装置１０２の操作者は、表示部４０９に表示された表示装置情報と撮影映像の解像度情報に基づき、表示装置１０３〜１０６のそれぞれへの撮影映像への分割映像の出力方法を決定することができる。
ここでは、編集装置１０２の操作者は、表示装置１０３〜１０６のそれぞれに２Ｋ映像９０１〜９０４を出力することを決定し、入力部４１０を介して、図９に示した４Ｋ映像の分割方法を分割情報生成部４０３に入力したものとする。
【００４６】
分割情報生成部４０３で生成された分割情報は、分割情報送信部４０２と第１通信制御部４０１を介して撮像装置１０１に送信され、撮像装置１０１の通信制御部２０３と分割情報取得部２０４を介して分割方法決定部２０５に入力される。分割方法決定部２０５は、入力された分割情報に基づいて４Ｋ映像を２Ｋ映像９０１〜９０４の各領域の通りに分割してＩＰパケット化することを決定し、接続情報生成部２０６、パケットヘッダ生成部２０７及びＩＰパケット化部２０２に通知する。ＩＰパケット化部２０２は、２Ｋ映像９０１〜９０４のそれぞれの映像信号データごとにＮラインずつ、図３を参照して説明したＲＴＰペイロード３０４に格納し、パケット化する。つまり、１つのデータパケットごとに、ＲＴＰペイロード３０４はＮライン分の映像信号データを格納する。
【００４７】
Ｎは１以上の整数であり、ここで、Ｎ＝２の場合について図１０及び図１１を参照して説明する。図１０（ａ）は、２Ｋ映像９０１において２Ｋ映像９０２と重複していない領域９０６の映像信号データに対して１ピクセルごとに番号を振った例を示す図である。図１０（ｂ）は、２Ｋ映像９０２における映像信号データに対して１ピクセルごとに番号を振った例を示す図である。映像信号データ群１００１，１０１１はそれぞれ、１つのデータパケットに格納される映像信号データのまとまりを示している。重複映像信号データ群１００２は、２Ｋ映像９０１と２Ｋ映像９０２の重複領域９０５での映像信号データのまとまりを示している。
【００４８】
図１１（ａ）は、映像信号データ群１００１をＩＰパケット化する際に、そのＩＰパケットのＲＴＰヘッダ３０３の拡張ヘッダに組み込むパケット接続情報１１０１の例を示す図である。同様に、図１１（ｂ）は、映像信号データ群１０１１をＩＰパケット化する際に、そのＩＰパケットのＲＴＰヘッダ３０３の拡張ヘッダに組み込むパケット接続情報１１１１の例である。「シーケンス番号」は、ＲＴＰヘッダ３０３に含まれ、ＩＰパケットを送信する度にインクリメントされる番号である。「領域情報」は、そのパケット接続情報が２Ｋ映像９０１〜９０４のどれに関連する情報であるかを表している。
【００４９】
パケット接続情報１１０１の「２Ｋ映像９０１の接続情報」は、その接続情報が、２Ｋ映像９０１を表示するための接続情報であることを示している。「２Ｋ映像９０１の接続情報」の「接続データ番号」は、その接続情報が、そのパケットのペイロードデータ内で何番目のデータであるかを明らかにする情報である。「接続前データ」は、分割前の４Ｋ映像において「接続データ番号」の前に配置されているデータを明らかにする情報であり、そのデータをパケット化した後の「シーケンス番号」と、その「シーケンス番号」が付されたパケット内での「接続データ番号」からなる。「接続後データ」は、分割前の４Ｋ映像において「接続データ番号」の次に配置されるデータを明らかにする情報であり、そのデータをパケット化した後の「シーケンス番号」と、その「シーケンス番号」が付されたパケット内での「接続データ番号」からなる。
【００５０】
ＩＰパケット化部２０２は、先ず、映像信号データ群１００１とパケット接続情報１１０１を含むＩＰパケットを、通信制御部２０３を介して編集装置１０２に送信する。続いてＩＰパケット化部２０２は、映像信号データ群１０１１を含むＩＰパケットを、編集装置１０２に送信する。こうして、編集装置１０２へは、２Ｋ映像９０１内の領域９０６と２Ｋ映像９０２のそれぞれの映像信号データが２ラインずつ交互に送信された後、２Ｋ映像９０３，９０４の映像信号データが送信される。
【００５１】
編集装置１０２の第１通信制御部４０１は、撮像装置１０１から出力されたＩＰパケットを受信する。ＩＰヘッダ解析部４０４は、第１通信制御部４０１が受信したＩＰパケットのヘッダに含まれるパケット接続情報を解析する。そして、ＩＰヘッダ生成部４０５は、ＩＰヘッダ解析部４０４により解析された情報と表示装置情報取得部４０８から取得した表示装置情報に基づいてＩＰヘッダを生成する。ＩＰパケット再構成部４０６は、第１通信制御部４０１から取得したＩＰパケットのヘッダを、ＩＰヘッダ生成部４０５により生成されたＩＰヘッダに付け替え、第２通信制御部４０７を介して表示装置１０３〜１０６へ送信する。
【００５２】
具体的には、パケット接続情報１１１１の領域情報を解析すると、２Ｋ映像９０２の映像信号データを含むＩＰパケットであることが分かる。２Ｋ映像９０２の映像信号データは、表示装置１０４で表示する映像のデータである。そのため、編集装置１０２は、表示装置情報取得部４０８から取得した情報に基づき、映像信号データ群１０１１を含むＩＰパケットのヘッダ情報を表示装置１０４に送信するための情報に差し替えて、表示装置１０４に送信する。つまり、編集装置１０２は、映像信号データを分割して再構成することなく、ＩＰパケットのヘッダ情報を表示装置１０４に送信するための情報に差し替えるだけで、表示装置１０４に必要なＩＰパケットを送信することができる。同様にして、編集装置１０２は、ＲＴＰペイロードを変更せずにヘッダ情報を変更するだけで、２Ｋ映像９０２，９０３，９０４の映像信号データをそれぞれ表示装置１０４，１０５，１０６へ送信することができる。
【００５３】
一方、表示装置１０３へは、２Ｋ映像９０１の映像信号データの送信が求められている。この場合、編集装置１０２は、パケット接続情報１１０１に基づいて、ＩＰヘッダの再生成を行うと共に映像信号データの組み換えを行う。具体的には、編集装置１０２は、先ず、パケット接続情報１１０１における２Ｋ映像９０１の接続情報１を解析する。これにより、分割前の４Ｋ映像では、シーケンス番号１のＩＰパケットの２０４４番目のデータ１００３（図１０（ａ））の後に続く映像信号データが、シーケンス番号２のＩＰパケットの１番目のデータ１０１２（図１０（ｂ））であることが分かる。また、編集装置１０２は、パケット接続情報１１０１の２Ｋ映像９０１の接続情報２を解析する。これにより、分割前の４Ｋ映像では、シーケンス番号１のＩＰパケットの２０４５番目のデータ１００４の前にある映像信号データが、シーケンス番号２のＩＰパケットの４番目のデータ１０１３であることが分かる。
【００５４】
同様に、編集装置１０２は、パケット接続情報１１０１の２Ｋ映像９０１の接続情報３を解析する。これにより、分割前の４Ｋ映像では、シーケンス番号１のＩＰパケットの４０８８番目のデータ１００５の後に続く映像信号データが、シーケンス番号２のＩＰパケットの２０４９番目のデータ１０１４であることが分かる。最後に、編集装置１０２は、パケット接続情報１１０１の２Ｋ映像９０１の接続情報４を解析する。その結果、２Ｋ映像９０１を構成するために必要なシーケンス番号１に接続する最後の映像信号データが、シーケンス番号２のＩＰパケットの２０５２番目のデータ１０１５であることが分かる。
【００５５】
このようにしてパケット接続情報を解析することにより、複数の領域に分割されて送信されてきた映像信号データが分割前の映像においてどのように並んでいたかがわかる。そこで、ＩＰパケット再構成部４０６は、パケット接続情報に基づいて映像信号データを並び替え、新たなＩＰヘッダを付加して、第２通信制御部４０７を介して表示装置１０７へ送信する。
【００５６】
具体的には、シーケンス番号１の１番目のデータ１００６から２０４４番目のデータ１００３までのデータ群の後に、シーケンス番号２の１番目のデータ１０１２から４番目のデータ１０１３までのデータ群が接続される。続いて、シーケンス番号１の２０４５番目のデータ１００４から４０８８番目のデータ１００５までのデータ群が接続される。次いで、シーケンス番号２の２０４９番目のデータ１０１４から２０５２番目のデータ１０１５までのデータ群が接続される。そのようにして、水平２０４８ピクセル、垂直２ライン分の映像信号データが１つのＲＴＰペイロードに格納され、ＩＰヘッダが付加されて表示装置１０３へ送信される。
【００５７】
表示装置１０３〜１０６は、それぞれの通信制御部５０１を介して、編集装置１０２から送信されてきたＩＰパケットを受信する。そして、表示装置１０３〜１０６のそれぞれのＩＰパケット解除部５０３は、それぞれの通信制御部５０１を介して編集装置１０２から取得したＩＰパケットから映像信号データを取り出して表示部５０４へ出力することで、映像が表示部５０４に表示される。
【００５８】
以上の説明の通り、本実施形態でも、接続情報を付与して映像信号データを送信する。これにより、複数の表示装置に分割した映像を表示する際に分割領域が重複している場合であっても、ＬＡＮケーブル１０８の通信データ量を増やすことなく、映像の表示に遅延が生じるのを抑制することができる。
【００５９】
＜第３実施形態＞
図１２は、本発明の第３実施形態に係る映像表示システム１２００のシステム構成図である。映像表示システム１２００の構成要素のうち、第１実施形態で説明した映像表示システム１００の構成要素と同じ構成要素については、同じ符号を付して、重複する説明を省略する。映像表示システム１２００は、映像表示システム１００の構成要素に、表示装置１２０１、ハブ１２０２（分配器）及びＬＡＮケーブル１２０３，１２０４を追加した構成となっている。撮像装置１０１は、ＬＡＮケーブル１２０３を介してハブ１２０２と接続され、ハブ１２０２と表示装置１２０１とはＬＡＮケーブル１２０４で接続され、編集装置１０２はＬＡＮケーブル１０８を介してハブ１２０２と接続されている。なお、撮像装置１０１は、編集装置１０２と表示装置１２０１との接続情報を取得する不図示の取得手段を備える。また、撮像装置１０１は、取得手段が取得した接続情報を編集装置１０２が利用可能か否か、また、表示装置１２０１が接続情報を利用可能か否か、を判断する不図示の判断手段を備える。
【００６０】
図１３は、４Ｋ映像から２Ｋ映像１３０１，１３０２を切り出した例を示す模式図である。２Ｋ映像１３０１，１３０２は、４Ｋ映像から切り出す一部の映像の例である。２Ｋ映像１３０１，１３０２には重複領域１３０３が設けられており、２Ｋ映像１３０２の領域のうち重複領域１３０３を除いた領域が領域１３０４となっている。ここでは、表示装置１２０１に２Ｋ映像１３０１を表示すると共に、表示装置１０３に２Ｋ映像１３０２を表示する処理について説明する。
【００６１】
撮像装置１０１は、先ず、編集装置１０２と表示装置１２０１とが接続されている状態にあることを示す接続情報を取得する。そして、撮像装置１０１は、取得した接続情報を、編集装置１０２は利用可能であるが表示装置１２０１は利用不可能であると判断する。続いて、撮像装置１０１は、ハブ１２０２にＩＰパケットを送信する。ハブ１２０２は、表示装置１２０１と編集装置１０２に同じＲＴＰペイロードのＩＰパケットを送信する。このとき、撮像装置１０１は、２Ｋ映像１３０１の映像信号データをＲＴＰペイロードデータに格納し、表示装置１２０１と編集装置１０２のＩＰアドレスをＩＰヘッダ３０１に付加して、ハブ１２０２を介して表示装置１２０１と編集装置１０２へ送信する。そして撮像装置１０１は、領域１３０４の映像データをＲＴＰペイロードデータに格納し、編集装置１０２のＩＰアドレスをＩＰヘッダ３０１に付加して、パケット接続情報と共にハブ１２０２を介して表示装置１２０１と編集装置１０２へ送信する。
【００６２】
表示装置１２０１は、ハブ１２０２を介して受信したＩＰパケットのＩＰヘッダ情報を解析し、２Ｋ映像１３０１を表示する。一方、編集装置１０２は、受信した２Ｋ映像１３０１の映像信号データ、領域１３０４の映像信号データ及びパケット接続情報に基づき、表示装置１０３で表示する２Ｋ映像１３０２の映像信号データのＩＰパケットを再構成する。そして、編集装置１０２は、再構成したＩＰパケットを表示装置１０３へ送信し、これにより表示装置１０３に２Ｋ映像１３０２が表示される。
【００６３】
以上の説明の通り、映像表示システム１２００では、編集装置１０２を通じて映像を表示するようには接続されていない表示装置１２０１がある場合に、表示装置１２０１に表示する映像に応じた接続情報を付与して編集装置１０２へ映像信号データを送信する。これにより、映像編集時のデコード処理を行う必要がないため、映像の表示に遅延が生じるのを抑制することができる。
【００６４】
以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。例えば、第１実施形態及び第２実施形態では、編集装置１０２に１台の撮像装置１０１が接続され、５台の表示装置１０３〜１０７が接続された構成について説明したが、編集装置１０２に接続可能な撮像装置及び表示装置の台数はこれに限られるものではない。そして、編集装置１０２に接続可能な撮像装置及び表示装置の台数に応じて、各表示装置での表示に遅延が生じないように、編集装置１０２においてＩＰパケットを再構成するシステム構成を変更することができる。また、第１実施形態及び第２実施形態では、撮像装置１０１及び編集装置１０２を、撮像装置１０１と編集装置１０２の両方の機能を有する１台の装置に置換した構成としてもよい。
【００６５】
本発明は、上述した実施形態の１以上の機能を実現するプログラムをネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読み出して実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【符号の説明】
【００６６】
１００    映像表示システム
１０１    撮像装置
１０２    編集装置
１０３〜１０７，１２０１    表示装置
２０２    ＩＰパケット化部
２０３    通信制御部
２０６    接続情報生成部
４０６    ＩＰパケット再構成部
【図１】
2019050441.tif 000003
【図２】
2019050441.tif 000004
【図３】
2019050441.tif 000005
【図４】
2019050441.tif 000006
【図５】
2019050441.tif 000007
【図６】
2019050441.tif 000008
【図７】
2019050441.tif 000009
【図８】
2019050441.tif 000010
【図９】
2019050441.tif 000011
【図１０】
2019050441.tif 000012
【図１１】
2019050441.tif 000013
【図１２】
2019050441.tif 000014
【図１３】
2019050441.tif 000015