(57)【要約】【課題】  映像／音声を伝送する従来の伝送システムにおいて、符号化部分では入力した映像／音声データを所定のフォーマットに従って符号化するため、例えば「紅葉」のような赤みを通常より多く排出すべき符号化映像を通常の符号化処理では生成しにくかった。【解決手段】  映像素材情報が入った符号化用補助データ１０１ａを生成し、符号化部が映像データを符号化する場合に使用する。例えば映像素材情報のタイトルに「紅葉」というテキストを入力しておけば、符号化処理に赤色信号の情報割当を１０％増やす旨の映像補助信号を映像符号化部に出力する。これにより、符号化処理部では通常より１０％多い赤色信号を出力するような符号化処理が行われ、より適切な符号化映像を出力できる。【選択図】        図４
2006246313.tif 000002
【特許請求の範囲】
【請求項１】
入力する映像及び／又は音声データの特徴をもとに符号化のための補助データを生成する補助データ生成部と、
上記映像及び／又は音声データと補助データとを送信する送信部と、
上記送信部から映像及び／又は音声データと補助データとを受信する受信部と、
上記受信部からの補助データをもとに符号化を補助する符号化補助データを出力する情報検出部と、
上記符号化補助データをもとに受信部からの映像及び／又は音声データを符号化する符号化部とを備えた伝送システム。
【請求項２】
補助データ生成部は補助データをテキスト形式で生成し、情報検出部はテキスト形式の補助データを解析して符号化補助データを生成することを特徴とする請求項第１項に記載の伝送システム。
【請求項３】
入力する映像及び／又は音声データの特徴をもとに復号化のための制御コマンド形式の補助データを生成する補助データ生成部と、
上記映像及び／又は音声データを符号化した符号化映像及び／又は音声データと補助データとを送信する送信部と、
上記送信部からの符号化映像及び／又は音声データと補助データとを受信する受信部と、
上記受信部からの補助データから制御コマンドを抽出して復号化を補助する復号化補助コマンドを出力するコマンド検出部と、
上記復号化補助コマンドをもとに受信部からの符号化映像及び／又は音声データを復号する復号部とを備えた伝送システム。
【請求項４】
補助データ生成部で補助データを生成する場合は、該補助データに所定のコマンド検出部を指定する識別子を付加し、コマンド検出部は上記識別子により補助データを選択して制御コマンドを抽出することを特徴とする請求項第３項に記載の伝送システム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、映像信号、音声信号、補助データなどをシリアルデジタル信号として入出力を行い、符号化、復号を行なう伝送システムに係り、より詳細には、効率的な伝送が可能で、かつ装置制御を簡略化し制御時間を短くすることが可能な補助データによる制御を行う伝送システムに関するものである。
【背景技術】
【０００２】
制御信号をシリアルデジタル信号（以下、ＳＤＩと略す）の補助データパケットを用いて伝送する伝送システムは、非特許文献１に開示されている。また機器ＩＤ、監視情報及び汎用情報などの補助データをＳＤＩ上の補助データパケットで伝送する伝送システムも非特許文献２に開示されている。
【非特許文献１】電波産業界  標準規格「補助データパケット形式で伝送される放送局間制御信号の構造」ＡＲＩＢ  ＳＴＤ−Ｂ３９
【非特許文献２】電波産業界  技術資料「デジタルハイビジョン素材伝送補助データ運用規定」ＡＲＩＢ  ＴＲ−Ｂ２２
【発明の開示】
【発明が解決しようとする課題】
【０００３】
これらの制御信号を補助データパケットで伝送する伝送システムは、放送局で使用される発局コード、映像モード、音声モード、トリガ信号などの伝送に使用されており、上記以外の情報（例えば、コマーシャル確認番号、管理番号等）伝送のためにプライベート領域を確保されているが、映像信号や音声信号の内容を示す信号までは伝送していなかった。
【０００４】
また、補助データパケットにより復号装置の制御を行う場合は、補助データで伝送された映像モードや音声モードを解析し、装置内で使用する制御コマンドに変換する必要があり、処理が複雑になるために制御に時間がかかるなどの問題があった。
【０００５】
この発明は、上記のような問題点を解消するためになされたもので、新たな補助データパケットを使用したり、前記プライベート領域を使用するなどして、映像信号や音声信号などの内容を示す素材情報を補助データで伝送する伝送システムにおいて、符号化制御に使用可能な素材情報を検出し映像信号または音声信号などの符号化制御に使用することにより、より効率的な符号化処理を行える伝送システムを提供するものである。
【０００６】
また補助データパケットで伝送される情報により受信側の復号装置制御を行う伝送システムにおいては、受信処理を減らして装置制御を簡略化し処理時間を短縮して制御時間を短くすることのできる補助データ制御による伝送システムを提供するものである。
【課題を解決するための手段】
【０００７】
この発明に係る伝送システムは、入力する映像及び／又は音声データの特徴をもとに符号化のための補助データを生成する補助データ生成部と、上記映像及び／又は音声データと補助データとを送信する送信部と、上記送信部から映像及び／又は音声データと補助データとを受信する受信部と、上記受信部からの補助データをもとに符号化を補助する符号化補助データを出力する情報検出部と、上記符号化補助データをもとに受信部からの映像及び／又は音声データを符号化する符号化部とを備えたものである。
【発明の効果】
【０００８】
この発明によれば、伝送システムは、補助データ生成部が入力する映像及び／又は音声データの特徴をもとに符号化のための補助データを生成し、送信部が上記映像及び／又は音声データと補助データとを送信し、受信部が上記送信部から映像及び／又は音声データと補助データとを受信し、情報検出部が上記受信部からの補助データをもとに符号化を補助する符号化補助データを出力し、符号化部が上記符号化補助データをもとに受信部からの映像及び／又は音声データを符号化するので、符号化補助データに基づいてより最適な符号化制御を行える効果がある。
【発明を実施するための最良の形態】
【０００９】
実施の形態１．
最初に、この発明の全体構成を説明する。図１はこの発明が使用される伝送システムの全体構成図であり、非特許文献２の図５−８に示される構成を概略化したものである。図において、１０００は映像音声データに係る補助データのついたシリアルデジタル信号１００を出力するシリアルデジタルデータ生成部、２０００はシリアルデジタル信号１００を入力して符号化し伝送データ１０３を出力する符号化装置、３０００は伝送データ１０３を送信する送信部、４０００は伝送データ１０３を受信する受信部である。
【００１０】
また、５００１、５００２は伝送データ１０３を復号してシリアルデジタル信号１００を出力する復号装置であり、復号装置５００１と復号装置５００２とは後述する受信識別コードが異なるのみでその他の構成は同一とする。つまり、この伝送システムでは、例えば符号化装置２０００と復号装置５００１との組み合わせで後段へのデータ伝送を実施する。また、図２は、非特許文献１の図３に示される伝送システム間制御データの構成図であり、図１の伝送データ１０３に含まれる。
【００１１】
次に、図１における本発明内容を順次説明していく。図３は図１に示すシリアルデジタルデータ生成部１０００の構成図であり、図において、５は補助データ多重化部、４０は素材コマンド情報入力部、４１は補助データ変換部、４２は映像音声入力部である。また、１０１は補助データ、４０１は素材データ、４０２はコマンドデータ、４０３は映像音声データである。
【００１２】
また、図４は図３に示す補助データ変換部４１が出力する符号化装置用の補助データ構成図であり、１０１ａが符号化用補助データである。また、図５は図３に示す補助データ変換部４１が出力する復号装置用の補助データ構成図であり、１０１ｂが復号用補助データ、１０１ｃが受信識別１用コマンド、１０１ｄが受信識別２用コマンドである。つまり、補助データ１０１には符号化用補助データ１０１ａ及び復号用補助データ１０１ｂが含まれる。
【００１３】
次に、シリアルデジタルデータ生成部１０００の符号化用補助データ１０１ａの生成法を説明する。例えば、編集者（図示せず）は後段の符号化装置２０００のため、映像音声入力部４２からの映像音声データ４０３の特性に合わせた素材データ４０１を素材コマンド情報入力部４０から補助データ変換部４１へ出力する。具体的には、映像音声データ４０３の映像がサッカーに係るものであれば「サッカー」との素材データ４０１を出力し、映像音声データ４０２の映像が紅葉に係るものであれば「紅葉」との素材データ４０１を補助データ変換部４１に出力する。補助データ変換部４１では、素材データ４０１の場合に、符号化用補助データ１０１ａの形態に変換した補助データ１０１を補助データ多重化部５に出力する。
【００１４】
これにより、図４に示す符号化用補助データ１０１ａ構造では、送信装置（例えば、図１のデジタルシリアルデータ生成部１０００が相当）の識別を示す送信識別コードと映像素材情報を示す映像情報コードの後に映像素材情報がテキスト形式で記載される。この映像素材情報には、例えばタイトル、スポーツやニュース等の番組識別、カットを示すシーン識別とその変化量、画面全体の動き量、有効画像領域などが記載される。
【００１５】
また、符号化用補助データ１０１ａでは映像素材情報に続き、音声素材情報を示す音声情報コードと音声素材情報がテキスト形式で記載される。この音声素材情報には、例えばタイトル、コンサートやニュース等の番組種別、モノラルやステレオ等の音声タイプ、チャンネル割当て情報、圧縮処理の有無、母国語などが記載される。
【００１６】
次に、シリアルデジタルデータ生成部１０００での復号用補助データ１０１ｂの生成法を説明する。例えば、編集者は後段の復号装置５００１、５００２等のため、映像音声入力部４２からの映像音声データ４０３の特性に合わせた映像制御コマンド（例えば、ビットレート、映像フォーマット、クロマフォーマット、アスペクト比等）及び／又は音声制御コマンド（例えば、音声ビットレート、音声モード、チャンネル割当等）を素材コマンド情報入力部４０からコマンドデータ４０２として補助データ変換部４１へ出力する。
【００１７】
具体的には、映像音声データ４０３の映像がサッカーに係るものであれば、ビットレートコマンドにてビットレート増加を設定する。また、映像音声データ４０３の映像が「紅葉」のような赤色の情報が多いものであればビットレートコマンドにて色信号のビットレート増加を設定する。音声制御コマンドも映像制御コマンドと同様に設定する。
【００１８】
また、編集者は出力するコマンドデータ４０２の内容を後段の何れの復号装置に適用させるかの指示も行う。例えば、出力するコマンドデータ４０２を復号装置５００１に適用させたい場合は、受信識別コード１が「５００１」となるようにコマンドデータ４０２を設定して補助データ変換部４１に出力する。また、出力するコマンドデータ４０２を復号装置５００２に適用させたい場合は、受信識別コード２が「５００２」となるようにコマンドデータ４０２を設定して補助データ変換部４１に出力する。
【００１９】
補助データ変換部４１では、入力したコマンドデータ４０２を復号用補助データ１０１ｂの形態に変換して補助データ多重化部５に出力する。この復号用補助データ１０１ｂの構造では、送信識別コードは送信装置（例えば、図１のデジタルシリアルデータ生成部１０００が相当）の識別コードであり、受信識別コード１および受信識別コード２は特定の復号装置を識別するためのコードであり、１：Ｎで配信する場合に特定の復号装置の制御に使用したり、受信と送信が繰り返えすタンデム接続の場合に後段の復号装置の識別に使用される。
【００２０】
次に、符号化装置の構成を説明する。図６は図１に示す符号化装置２０００の構成図であり、符号化装置２０００では、シリアルデジタル信号１００から補助データ１０１、映像信号２０１、音声信号３０１を分離するデータ分離部１と、補助データ１０１のパケット化を行うパケット変換部１０と、補助データ１０１から符号化補助データ１０１ａを抽出して必要なテキスト情報を検出する情報検出部１１と、情報検出部１１からの指示に応じた制御を行う映像符号化部２０と、情報検出部１１からの指示に応じた制御を行う音声符号化部３０と、多重して伝送データ１０３を出力するメディア多重化部２を備える。
【００２１】
次に、符号化装置２０００の動作を説明する。シリアルデジタル信号１００は、データ分離部１で、補助データ１０１と映像信号２０１と音声信号３０１に分離される。パケット変換部１０はメディア多重部２での多重のため補助データ１０１をパケット化しパケット補助データ１０２を出力する。また、情報検出部１１は補助データ１０１から符号化用補助データ１０１ａを抽出して、符号化用補助データ１０１ａ内にある映像素材情報から映像符号化制御に使用されるテキスト情報を検出し、符号化の補助となる情報を映像補助信号１１０として映像符号化部２０に出力する。映像符号化部２０では、入力した映像補助信号１１０をもとに映像フレーム毎の符号化レート割当てなどを実施して効率的な符号化を行い、映像符号化データ２０２を出力する。
【００２２】
また、情報検出部１１は符号化用補助データ１０１ａにある音声素材情報から音声符号化制御に使用されるテキスト情報を検出し、符号化の補助となる情報を音声補助信号１１１として音声符号化部３０に出力する。音声符号化部３０では、入力した音声補助信号１１１をもとに音声フレーム毎の符号化レート割当てなどを実施して効率的な符号化を行い、音声符号化データ３０２を出力する。
【００２３】
具体的には、情報検出部１１は映像素材情報から例えば映像信号２０１が「紅葉」であることを検出すると赤色信号への情報割当を１０％増やす旨の映像補助信号１１０を映像符号化部２０に出力する。この様な制御を映像符号化部２０が入力した映像信号２０１そのものから判断し設定することは、映像符号化部２０そのものが映像信号２０１の内容を正確に検出できないため、最適化を図ることが困難であった。ついては、本動作により「赤外映像」や「差分信号」など通常の映像信号２０１と異なる特殊な映像信号２０１に対してもより最適な符号化を行なうことが可能となる。このような動作は、情報検出部１１内でテキストの文言に対応する制御命令をデータベース化しておくことにより十分に実施可能な動作である。
【００２４】
また、情報検出部１１は音声素材情報から例えば音声信号３０１が「楽器」の音であることを検出するとその倍音を重視する旨の音声補助信号１１１を音声符号化部３０に出力する。この様な符号化制御を音声符号化部３０が入力した音声信号３０１から抽出し設定することは、音声符号化部３０そのものが音声信号３０１の内容を正確に検出できないため、最適化を図ることは困難であった。ついては、本動作により「エコー」や「ハウリング」など通常の音声信号３０１と異なる特殊な音声信号３０１に対しても最適な符号化を行なうことが可能となる。
【００２５】
また、メディア多重化部２は、パケット補助データ１０２と映像符号化データ２０２と音声符号化データ３０２とを多重化した伝送データ１０３を出力する。
【００２６】
これにより、情報検出部１１は符号化補助データ１０１ａに含まれる映像素材情報の中から映像符号化部２０で使用可能なテキストを検出し、テキストから読み込んだ番組種別等により符号化レート割当てを増やしたり、有効画像領域により映像フレーム内のビット配分を変える旨を映像補助信号１１０により映像符号化部２０へ指示するため、最適な符号化処理を行うことが可能となる。例えば、映像素材情報の中に「サッカー」との記載があった場合、サッカーの映像を滑らかに出力するため符号化レート割当てを増やす等の指示が行えるようになる。
【００２７】
また、情報検出部１１は、符号化補助データ１０１ａに含まれる音声素材情報の中から音声符号化部３０で使用可能なテキストを検出し、テキストから読み込んだ番組種別等により符号化レート割当てを増やしたり、チャンネル割当てや圧縮有無に合わせて符号化方式を変更する旨を音声補助信号１１１により音声符号化部３０へ指示することで、最適な符号化ができ、効率の良い伝送を行うことが可能となる。
【００２８】
次に、復号装置の構成を説明する。図７は図１に示す復号装置５００１の構成図であり、復号装置５００１では、伝送データ１０３からパケット補助データ１０２、映像符号化データ２０２及び音声符号化データ３０２を分離するメディア分離部３と、パケット補助データ１０２を非パケット化して補助データ１０１を出力する非パケット変換部１２と、補助データ１０１から復号補助データ１０１ｂを抽出して、復号補助データ１０１ｂ内にある映像制御コマンド及び／又は音声制御コマンドを検出して映像コマンド情報１１２及び／又は音声コマンド情報１１３を出力するコマンド検出部１３と、映像コマンド情報１１２に応じた復号制御を行う映像復号部２１と、音声コマンド情報１１３に応じた復号制御を行う音声復号部３１と、映像信号２０１、音声信号３０１、補助データ１０５を多重化するデータ多重化部４を備える。
【００２９】
次に、復号装置５００１の動作を説明する。メディア分離部３は入力した伝送データ１０３をパケット補助データ１０２、映像符号化データ２０２、音声符号化データ３０２に分離して出力する。非パケット変換部１２では、入力したパケット補助データ１０２を非パケット化して補助データ１０１を出力する。また、コマンド検出部１３は補助データ１０１から復号補助データ１０１ｂを抽出して、例えば受信識別１用コマンド１０１ｃ内の受信識別コード１が復号装置５００１の識別コードと一致する場合は、付随する映像制御コマンドを映像コマンド情報１１２として映像復号部２１に出力する。同様に付随する音声制御コマンドを音声コマンド情報１１３として音声復号部３１に出力する。
【００３０】
映像復号部２１では、入力した映像コマンド情報１１２に基づいて映像符号化データ２０２を復号して映像信号２０１を出力する。また、音声復号部３１では、入力した音声コマンド情報１１３に基づいて音声符号化データ３０２を復号して音声信号３０１を出力する。また、データ多重化部４では入力した補助データ１０１、映像データ２０１及び音声データ３０１を多重化してシリアルデジタル信号１００を出力する。
【００３１】
つまり、コマンド検出部１３は、非パケット変換部１２から出力された復号補助データ１０１ｂ内の、例えば受信識別用コマンド１０１ｃの受信識別コード１が当該復号装置の識別コードと一致する場合、受信識別用コマンド１０１ｃ内の映像制御コマンドをそのまま映像コマンド情報１１２として映像復号部２１に出力する。同様に、音声制御コマンドはそのまま音声コマンド情報１１３として音声復号部３１に出力する。これにより、例えば復号装置にて例えば図２に含まれる映像モードを解析して映像コマンドを生成する必要がなくなり、復号装置での処理を簡単にできる。
【００３２】
尚、図５では、例えば受信識別１用コマンド１０１の受信識別コード１の後に映像制御コマンドと音声制御コマンドの２つを組合わせたが、受信識別１用コマンド内を複数の映像制御コマンドで連結して映像制御コマンド量を増やしても良く、こうすれば１つの受信識別１用コマンドでより多くの映像制御コマンドを伝送することができる。
【００３３】
また、本実施の形態では、復号補助データ１０１ｂを復号装置の制御に使用したが、復号補助データ１０１ｂは復号装置から出力するシリアルデジタル信号１００として次段の符号化装置に伝送することができるため、符号化装置２０００側でもコマンド検出部１３を設けて制御コマンド読み取りを可能にすれば、２段目以降の符号化装置や復号装置を問わずに装置識別としても使用することができ、符号化装置に対しても同等の効果が得られる。
【産業上の利用可能性】
【００３４】
この発明の活用例として、放送局間にまたがる映像・音声伝送システムに利用できる。
【図面の簡単な説明】
【００３５】
【図１】この発明が使用される伝送システムの全体構成図である。
【図２】非特許文献１の図３に示される伝送システム間制御データの構成図である。
【図３】図１に示すシリアルデジタルデータ生成部の構成図である。
【図４】図３に示す補助データ変換部が出力する符号化装置用の補助データ構成図である。
【図５】図３に示す補助データ変換部が出力する復号装置用の補助データ構成図である。
【図６】図１に示す符号化装置の構成図である。
【図７】図１に示す復号装置の構成図である。
【符号の説明】
【００３６】
１    データ分離部
２    メディア多重化部
３    メディア分離部
４    データ多重化部
５    補助データ多重化部
１０  パケット変換部
１１  情報検出部
１２  非パケット変換部
１３  コマンド検出部
２０  映像符号化部
２１  映像復号部
３０  音声符号化部
３１  音声復号部
４０  素材コマンド情報入力部
４１  補助データ変換部
１００  シリアルデジタル信号
１０１  補助データ
１０１ａ  符号化用補助データ
１０１ｂ  復号用補助データ
１０１ｃ  受信識別１用コマンド
１０１ｄ  受信識別２用コマンド
４０１    素材データ
４０２    コマンドデータ
【図１】
2006246313.tif 000003
【図２】
2006246313.tif 000004
【図３】
2006246313.tif 000005
【図４】
2006246313.tif 000006
【図５】
2006246313.tif 000007
【図６】
2006246313.tif 000008
【図７】
2006246313.tif 000009