(57)【要約】【課題】従来、映像補助データを多重する場合、映像ストリームの伝送順序に補助データを多重する。しかし、単位時間あたりＮ個の基本ストリームから構成される映像データストリームにおいて、映像データはＮ個の基本ストリームを並列に処理され、補助データはＮ個の基本ストリームを直列に多重されるので、処理の遅延が発生する。【解決手段】単位時間あたりＮ個の基本ストリームから構成される映像データストリームに補助データを多重する処理において、Ｎ個の基本ストリームを直列に処理する順序と、Ｎ個の基本ストリームを並列に処理する順序との何れかの順序に補助データを多重する手段と、順序識別情報または種類識別情報を多重する手段とを備える。【選択図】　図１
2004096613.tif 000002
【特許請求の範囲】
【請求項１】
映像データと補助データを含むデータストリームは、単位時間あたりＮ個（Ｎは２以上の整数）の基本ストリームから構成され、各基本ストリームはそれぞれＭ個（Ｍは２以上の整数）の補助データブロックで構成され、単位時間あたり合計Ｍ×Ｎ個の補助データブロックに、補助データを多重する映像補助データ処理装置であって、
データストリームの伝送順序である第１の補助データブロック順序と、Ｎ個の基本ストリームを並列処理する順序である第２の補助データブロック順序との何れかの順序で補助データを多重する補助データ多重手段を備えることを特徴とする映像補助データ処理装置。
【請求項２】
前記補助データブロックはＢｉ，ｊ（ｉは０〜Ｍ−１の整数であり、ｊは０〜Ｎ−１の整数であり、Ｂｉ，ｊは番号ｊの基本ストリームにおける番号ｉの補助データブロックを示す）で表され、
第１の補助データブロック順序は、Ｂ０，０、Ｂ１，０、Ｂ２，０、・・・ＢＭ−１，０、Ｂ０，１、Ｂ１，１、Ｂ２，１、・・・ＢＭ−１，１、Ｂ０，２、Ｂ１，２、Ｂ２，２、・・・ＢＭ−１，２、・・・、Ｂ０，Ｎ−１、Ｂ１，Ｎ−１、Ｂ２，Ｎ−１、・・・ＢＭ−１，Ｎ−１であり、
第２の補助データブロック順序はＢ０，０、Ｂ０，１、Ｂ０，２、・・・Ｂ０，Ｎ−１、Ｂ１，０、Ｂ１，１、Ｂ１，２、・・・Ｂ１，Ｎ−１、Ｂ２，０、Ｂ２，１、Ｂ２，２、・・・Ｂ２，Ｎ−１、・・・、ＢＭ−１，０、ＢＭ−１，１、ＢＭ−１，２、・・・ＢＭ−１，Ｎ−１であること特徴とする請求項１記載の映像補助データ処理装置。
【請求項３】
前記第１の補助データブロック順序と前記第２の補助データブロック順序との何れかの順序を識別する順序識別情報を前記データストリームに多重する順序識別情報多重手段を備えることを特徴とする請求項１記載の映像補助データ処理装置。
【請求項４】
補助データの種類を識別する種類識別情報を前記補助データブロックに多重する種類識別情報多重手段を備え、前記補助データ多重手段はＰ個（Ｐは、１≦Ｐ≦（Ｍ×Ｎ）の整数）の補助データブロックに、前記第１の補助データブロック順序または前記第２の補助データブロック順序の何れかで、特定の種類の補助データを多重することを特徴とする請求項１記載の映像補助データ処理装置。
【請求項５】
補助データの種類を識別する種類識別情報と特定の種類の補助データが多重される補助データブロックの順序を示すブロック番号を前記補助データブロックに多重する種類識別情報多重手段を備え、前記補助データ多重手段はＰ個（Ｐは、１≦Ｐ≦（Ｍ×Ｎ）の整数）の補助データブロックに、前記第１の補助データブロック順序または前記第２の補助データブロック順序の何れかで、特定の種類の補助データを多重することを特徴とする請求項１記載の映像補助データ処理装置。
【請求項６】
第１の補助データブロック順序と前記第２の補助データブロック順序との何れかの順序を識別する順序識別情報を検出する順序識別情報検出手段と、検出された順序と同じ順序で追加の補助データを多重する補助データ多重手段を備えることを特徴とする請求項１に記載の映像補助データ処理装置。
【請求項７】
補助データの種類を識別する種類識別情報を検出する種類識別情報検出手段と、特定の種類の補助データが多重されている補助データブロックを前記第１の補助データブロック順序または前記第２の補助データブロック順序の何れかで特定の種類の補助データを抽出する補助データ抽出手段を備えることを特徴とする請求項１に記載の映像補助データ処理装置。
【請求項８】
補助データの種類を識別する種類識別情報と前記ブロック番号を検出する種類識別情報検出手段と、特定の種類の補助データが多重されている補助データブロックをブロック番号の順番に特定の種類の補助データを抽出する補助データ抽出手段を備えることを特徴とする請求項１に記載の映像補助データ処理装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、映像信号の伝送あるいは記録において、映像補助データを処理する信号処理装置に関する。
【０００２】
【従来の技術】
従来、映像信号は圧縮符号化され、各種の映像伝送フォーマットで伝送され、記録される。ディジタルＶＴＲ用の映像伝送フォーマットとしてはＳＭＰＴＥ（Ｓｏｃｉｅｔｙ　ｏｆ　Ｍｏｔｉｏｎ　Ｐｉｃｔｕｒｅ　ａｎｄ　Ｔｅｌｅｖｉｓｉｏｎ　Ｅｎｇｉｎｅｅｒｓ）３１４Ｍフォーマットがある。図６はＳＭＰＴＥ　３１４Ｍに示されている従来のデータストリームの構造を示す図である。データストリーム２０１は図示の順番に伝送される。１フレームのデータストリームは２個の基本ストリーム２０２に分割されている。１個の基本ストリームは１０個のデータシーケンス２０３に分割されている。各データシーケンスはヘッダ部、サブコード部、補助データ部、映像・音声データ部の各部２０４に分割されている。補助データ部は３個の補助データブロック２０５から構成され、１個の補助データブロックはＩＤ２０６とデータ領域２０７から構成されている。１個の基本ストリームに３０個の補助データブロックがあり、補助データブロックに補助データを多重することが可能になっている。
【０００３】
【発明が解決しようとする課題】
しかしながら、補助データを複数の補助データブロックに挿入する場合、挿入処理時間が問題となる。
【０００４】
補助データの一例はＳＭＰＴＥ２９１Ｍフォーマットに示されているアンシラリデータパケットの構造をしている。補助データのデータ量が１個の補助データブロックの容量より大きい場合、複数の補助データブロックに多重されることになる。その祭、多重される順番はデータストリーム２０１の伝送順番が考えられる。
【０００５】
補助データブロック２０５をＢｉ，ｊで表す。ｉは０〜２９の整数であり、ｊは０〜１の整数であり、Ｂｉ，ｊは番号ｊの基本ストリームにおける番号ｉの補助データブロックを示す。データストリーム２０１の伝送順番は、基本ストリーム１の次に基本ストリーム２に多重する順番で、Ｂ０，０、Ｂ１，０、Ｂ２，０、・・・Ｂ２９，０、Ｂ０，１、Ｂ１，１、Ｂ２，１、・・・Ｂ２９，１で表される。
【０００６】
しかし映像データは基本ストリーム１と基本ストリーム２を並列に圧縮処理される場合が多い。映像と補助データを同時にデータストリームに多重する場合、１フレーム単位で並列処理と直列処理を同時に行う。この場合、信号処理の時間は１フレームの遅延が発生する。本発明は、信号処理の遅延時間を除去することを目的とする。
【０００７】
【課題を解決するための手段】
この課題を解決するために、本発明は、
第１の発明において、映像データと補助データを含むデータストリームは、単位時間あたりＮ個（Ｎは２以上の整数）の基本ストリームから構成され、各基本ストリームはそれぞれＭ個（Ｍは２以上の整数）の補助データブロックで構成され、単位時間あたり合計Ｍ×Ｎ個の補助データブロックに、データストリームの伝送順序である第１の補助データブロック順序と、Ｎ個の基本ストリームを並列処理する順序である第２の補助データブロック順序との何れかの順序で補助データを多重する補助データ多重手段を備えたものであり、
第２の発明において、前記第１の補助データブロック順序と前記第２の補助データブロック順序との何れかの順序を識別する順序識別情報を前記データストリームに多重する順序識別情報多重手段を備えたものであり、
第３の発明において、補助データの種類を識別する種類識別情報を前記補助データブロックに多重する種類識別情報多重手段を備え、前記補助データ多重手段はＰ個（Ｐは、１≦Ｐ≦（Ｍ×Ｎ）の整数）の補助データブロックに、前記第１の補助データブロック順序または前記第２の補助データブロック順序の何れかで、特定の種類の補助データを多重する手段を備えたものであり、
第４の発明において、補助データの種類を識別する種類識別情報と特定の種類の補助データが多重される補助データブロックの順序を示すブロック番号を前記補助データブロックに多重する種類識別情報多重手段を備え、前記補助データ多重手段はＰ個（Ｐは、１≦Ｐ≦（Ｍ×Ｎ）の整数）の補助データブロックに、前記第１の補助データブロック順序または前記第２の補助データブロック順序の何れかで、特定の種類の補助データを多重する手段を備えたものである。
【０００８】
【発明の実施の形態】
以下、本発明の実施の形態について、図１から図５を用いて説明する。
（実施の形態１）
図１は本発明の実施の形態１における映像補助データ処理装置の補助データ多重順番を示す説明図である。補助データブロック１０２の順番はデータストリームの伝送順番１０１と２個の基本ストリームを並列に処理する順番１０３が示されている。前者の補助データブロック順序は、Ｂ０，０、Ｂ１，０、Ｂ２，０、・・・Ｂ２９，０、Ｂ０，１、Ｂ１，１、Ｂ２，１、・・・Ｂ２９，１であり、後者の補助データブロック順序はＢ０，０、Ｂ０，１、Ｂ１，０、Ｂ１，１、・・・Ｂ２９，０、Ｂ２９，１である。
【０００９】
図５は本発明の映像補助データ処理装置を示す図である。入力端子１２０に補助データブロックが前者の順番、あるいは後者の順番の何れかの順番で多重回路１２１に入力される。入力端子１２２には補助データが順番に入力されて多重されたデータストリーム１２３が出力される。補助データはデータストリームが処理される順番と同じ順番に合わせて多重するので、処理遅延は発生しない。
（実施の形態２）
図２は本発明の実施の形態２における映像補助データ処理装置の補助データブロックのデータを示す図である。補助データブロックのデータは、データストリームの伝送順番１０１に並ぶ補助データブロック順序と２個の基本ストリームを並列に処理する順番１０３に並ぶ補助データブロック順序との何れかの順序を示す識別情報１０５と補助データ１０６とから構成される。
【００１０】
図５の映像補助データ処理装置において、補助データは補助データブロックＢ０，０から多重される。このとき、補助データブロックＢ０，０には多重順序を示す識別情報が挿入される。
【００１１】
入力端子１２２に補助データが既に多重されているデータストリームが入力され、このデータストリームに入力端子１２０から入力される新たな補助データを追加して多重する場合がある。多重回路１２１において、順序を示す識別情報を検出し、検出された順序と同じ順序で追加の補助データを多重する。
【００１２】
本実施の形態により、補助データの多重順番が同一のストリーム上で混在しないようにすることができ、かつ最も処理遅延のないように前もって多重する順番を選択しておくことが可能になる。
（実施の形態３）
図３は本発明の実施の形態３における映像補助データ処理装置の補助データブロックのデータと補助データ多重処理を示す説明図である。
【００１３】
補助データブロック１０７は補助データが第１の補助データであることを示す識別情報１０８と第１の補助データから構成され、補助データブロック１０９は補助データが第２の補助データであることを示す識別情報１１０と第２の補助データから構成される。
【００１４】
本実施の形態において、補助データブロック順序は２個の基本ストリームを並列に処理する順番１０３とする。図３の５つの補助データブロックは図の上からＢ０，０、Ｂ０，１、Ｂ１，０、Ｂ１，１、Ｂ２，０に対応する。第１の補助データは基本ストリーム１に、また第２の補助データは基本ストリーム２に多重される場合、第１の補助データは多重順番１１１のように並ぶ。図５の映像補助データ処理装置において、補助データの種類を示す識別情報と補助データが多重される。
【００１５】
図３のように多重されたデータストリームから補助データを取り出す処理を行う時は、データストリームの補助データブロック順序の順番に種類を示す識別情報を検出していき、種類毎に補助データを抽出する。これによりデータストリームに混ざっている種類の異なる補助データを分離抽出することができる。
【００１６】
尚、本実施例では１個の基本ストリームに１種類の補助データを多重する場合を示したが、１個の基本ストリームに複数種類の補助データを多重するようにしてもよい。また１種類の補助データが２個の基本ストリームに多重されてもよい。
【００１７】
本実施の形態により、データストリームの補助データブロック順序は前もって設定されているので、信号処理順番は固定でありながら、複数の種類の補助データをそれぞれ独立の順番で多重できる。特に、補助データの種類に応じて、データストリームの伝送順番と基本ストリームを並列に処理する順番の何れでも選択して多重することができる。従って、信号処理遅延が最短になるように補助データを多重することが可能である。
（実施の形態４）
図４は本発明の実施の形態４における映像補助データ処理装置の補助データブロックのデータを示す図である。補助データブロックのデータは、補助データの種類を示す識別情報１１２と、特定の種類の補助データが多重される補助データブロックの順序を示すブロック番号１１３と、補助データから構成される。
【００１８】
図５の映像補助データ処理装置において、補助データブロック順序は前もって設定されており、特定種類の補助データが多重される補助データブロックに多重する。多重される補助データブロックには種類を示す識別情報と特定種類の補助データが多重される順番を示すブロック番号を挿入する。
【００１９】
このように多重されたデータストリームから補助データを取り出す処理を行う時は、データストリームの補助データブロック順序の順番に種類を示す識別情報を検出していき、さらに種類毎にブロック番号の順番に補助データを抽出する。これによりデータストリームに混ざっている種類の異なる補助データの分離抽出が補助データブロック毎の検出のみで行うことができるので、データストリームにおける補助データブロックの欠落が発生してもそれを検出することができ、補助データの抽出を確実に行える。
【００２０】
【発明の効果】
以上のように本発明によれば、順序、種類、またはブロック番号を示す識別情報を挿入することにより、データストリームの映像データの処理順番とは独立して補助データの処理順番を設定することができるので、データストリームに補助データを多重することによる信号処理遅延を最小限に押さえることが可能になる。
【図面の簡単な説明】
【図１】本発明の実施の形態１における映像補助データ処理装置の補助データ多重順番を示す説明図
【図２】本発明の実施の形態２における映像補助データ処理装置の補助データブロックのデータを示す図
【図３】本発明の実施の形態３における映像補助データ処理装置の補助データブロックのデータと補助データ多重処理を示す説明図
【図４】本発明の実施の形態４における映像補助データ処理装置の補助データブロックのデータを示す図
【図５】本発明の映像補助データ処理装置を示す図
【図６】従来のデータストリームの構造を示す図
【符号の説明】
１０１、１０３、１１１　補助データ多重順番
１０２　補助データブロック
１０５、１０８、１１０、１１２、１１３　識別情報
１０６、１０７、１０９、１１４　補助データ
１２１　データストリーム入力
１２２　補助データ入力
１２３　多重回路
１２４　データストリーム出力
２０１　データストリーム
２０２　基本ストリーム
２０５　補助データブロック
【図１】
2004096613.tif 000003
【図２】
2004096613.tif 000004
【図３】
2004096613.tif 000005
【図４】
2004096613.tif 000006
【図５】
2004096613.tif 000007
【図６】
2004096613.tif 000008