(57)【要約】【課題】異常解析時間の短縮化を図ることができる映像送信装置及び映像受信装置を得ることを目的とする。【解決手段】映像状態監視部３から出力された映像監視情報を映像信号に多重化して、その映像信号を符号化する映像符号化部５と、音声状態監視部４から出力された音声監視情報を音声信号に多重化して、その音声信号を符号化する音声符号化部７とを設け、メディア多重化部８が映像符号化部５により符号化された映像信号と音声符号化部７により符号化された音声信号を多重化して符号化ストリームを生成し、その符号化ストリームを送信する。【選択図】図１
2010136003.tif 000002
【特許請求の範囲】
【請求項１】
映像信号を監視して、その監視の結果を示す映像監視情報を出力する映像監視手段と、上記映像監視手段から出力された映像監視情報を上記映像信号に多重化して、上記映像信号を符号化する映像符号化手段と、音声信号を監視して、その監視の結果を示す音声監視情報を出力する音声監視手段と、上記音声監視手段から出力された音声監視情報を上記音声信号に多重化して、上記音声信号を符号化する音声符号化手段と、上記映像符号化手段により符号化された映像信号と上記音声符号化手段により符号化された音声信号を多重化して符号化ストリームを生成し、上記符号化ストリームを送信するストリーム送信手段とを備えた映像送信装置。
【請求項２】
映像監視手段から出力された映像監視情報を補助データに多重化して、上記補助データを符号化する補助データ符号化手段を設け、ストリーム送信手段が映像符号化手段により符号化された映像信号、音声符号化手段により符号化された音声信号及び上記補助データ符号化手段により符号化された補助データを多重化して符号化ストリームを生成し、上記符号化ストリームを送信することを特徴とする請求項１記載の映像送信装置。
【請求項３】
映像信号の監視結果を示す映像監視情報が多重化されて符号化されている映像信号と音声信号の監視結果を示す音声監視情報が多重化されて符号化されている音声信号を含む符号化ストリームを受信して、上記符号化ストリームを映像信号と音声信号に分離する信号分離手段と、上記信号分離手段により分離された映像信号を復号する映像復号手段と、上記信号分離手段により分離された音声信号を復号する音声復号手段と、上記映像復号手段により復号された映像監視情報が多重化されている映像信号と上記音声復号手段により復号された音声監視情報が多重化されている音声信号を出力する信号出力手段とを備えた映像受信装置。
【請求項４】
映像監視情報が多重化されて符号化されている補助データを含む符号化ストリームが信号分離手段により受信されて、上記符号化ストリームから補助データが分離された場合、上記補助データを復号する補助データ復号手段を設け、信号出力手段が映像復号手段により復号された映像監視情報が多重化されている映像信号、音声復号手段により復号された音声監視情報が多重化されている音声信号及び上記補助データ復号手段により復号された映像監視情報が多重化されている補助データを出力することを特徴とする請求項３記載の映像受信装置。
【請求項５】
信号分離手段により分離された映像信号を監視して、その監視の結果を示す映像監視情報を出力する映像監視手段と、上記信号分離手段により分離された音声信号を監視して、その監視の結果を示す音声監視情報を出力する音声監視手段とを設け、映像復号手段が上記映像監視手段から出力された映像監視情報を上記信号分離手段により分離された映像信号の復号結果に多重化して信号出力手段に出力し、音声復号手段が上記音声監視手段から出力された音声監視情報を上記信号分離手段により分離された音声信号の復号結果に多重化して上記信号出力手段に出力することを特徴とする請求項４記載の映像受信装置。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、ディジタル化された映像信号を符号化して送信する映像送信装置と、映像送信装置から送信された映像信号を受信して復号する映像受信装置とに関するものである。
【背景技術】
【０００２】
例えば、以下の特許文献１に開示されている映像送信装置では、装置の監視情報（例えば、エラー情報）をビデオ信号と別に出力するようにしている。
したがって、映像送信装置の動作に異常が認められた場合には、ビデオ信号と監視情報を採取し、２種の信号を見比べながら解析する必要がある。
【０００３】
【特許文献１】特開平５−１３７１６３号公報（第３頁から第４頁、図１）
【発明の開示】
【発明が解決しようとする課題】
【０００４】
従来の映像送信装置は以上のように構成されているので、ビデオ信号と監視情報を見比べながら解析すれば、異常の発生原因を発見することができることもあるが、ビデオ信号と監視情報間の時間関係が分かり難く、異常の発生原因を容易に発見することができないなどの課題があった。
【０００５】
この発明は上記のような課題を解決するためになされたもので、異常解析時間の短縮化を図ることができる映像送信装置及び映像受信装置を得ることを目的とする。
【課題を解決するための手段】
【０００６】
この発明に係る映像送信装置は、映像信号の監視結果を示す映像監視情報を出力する映像監視手段と、映像監視手段から出力された映像監視情報を映像信号に多重化して、その映像信号を符号化する映像符号化手段と、音声信号の監視結果を示す音声監視情報を出力する音声監視手段と、音声監視手段から出力された音声監視情報を音声信号に多重化して、その音声信号を符号化する音声符号化手段とを設け、ストリーム送信手段が映像符号化手段により符号化された映像信号と音声符号化手段により符号化された音声信号を多重化して符号化ストリームを生成し、その符号化ストリームを送信するようにしたものである。
【発明の効果】
【０００７】
この発明によれば、映像信号の監視結果を示す映像監視情報を出力する映像監視手段と、映像監視手段から出力された映像監視情報を映像信号に多重化して、その映像信号を符号化する映像符号化手段と、音声信号の監視結果を示す音声監視情報を出力する音声監視手段と、音声監視手段から出力された音声監視情報を音声信号に多重化して、その音声信号を符号化する音声符号化手段とを設け、ストリーム送信手段が映像符号化手段により符号化された映像信号と音声符号化手段により符号化された音声信号を多重化して符号化ストリームを生成し、その符号化ストリームを送信するように構成したので、異常解析時間の短縮化を図ることができる効果がある。
【発明を実施するための最良の形態】
【０００８】
実施の形態１．
図１はこの発明の実施の形態１による映像送信装置及び映像受信装置を示す構成図である。
図１において、映像送信装置の信号分離部２は入力端子１から入力信号を受けると、その入力信号を映像信号と音声信号と補助データ（例えば、映像信号を構成している各フレームを再生する時刻の情報など）に分離する処理を実施する。
【０００９】
映像状態監視部３は信号分離部２により分離された映像信号を監視して、その監視の結果を示す映像監視情報を出力する処理を実施する。なお、映像状態監視部３は映像監視手段を構成している。
音声状態監視部４は信号分離部２により分離された音声信号を監視して、その監視の結果を示す音声監視情報を出力する処理を実施する。なお、音声状態監視部４は音声監視手段を構成している。
【００１０】
映像符号化部５は映像状態監視部３から出力された映像監視情報を信号分離部２により分離された映像信号に多重化して、その映像信号を符号化する処理を実施する。なお、映像符号化部５は映像符号化手段を構成している。
補助データ符号化部６は映像状態監視部３から出力された映像監視情報を信号分離部２により分離された補助データに多重化して、その補助データを符号化する処理を実施する。なお、補助データ符号化部６は補助データ符号化手段を構成している。
【００１１】
音声符号化部７は音声状態監視部４から出力された音声監視情報を信号分離部２により分離された音声信号に多重化して、その音声信号を符号化する処理を実施する。なお、音声符号化部７は音声符号化手段を構成している。
メディア多重化部８は映像符号化部５により符号化された映像信号と、補助データ符号化部６により符号化された補助データと、音声符号化部７により符号化された音声信号とを多重化して符号化ストリームを生成し、その符号化ストリームを送信する処理を実施する。なお、メディア多重化部８はストリーム送信手段を構成している。
【００１２】
伝送装置１１は映像送信装置のメディア多重化部８より送信された符号化ストリームを伝送路１２を通じて伝送する。
受信装置１３は伝送装置１１により伝送された符号化ストリームを受信して、その符号化ストリームを映像受信装置の信号分離部２１に出力する。
【００１３】
映像受信装置の信号分離部２１は受信装置１３から出力された符号化ストリームを受信して、その符号化ストリームを映像信号と補助データと音声信号に分離する処理を実施する。なお、信号分離部２１は信号分離手段を構成している。
映像復号部２２は信号分離部２１により分離された映像信号を復号する処理を実施する。なお、映像復号部２２は映像復号手段を構成している。
補助データ復号部２３は信号分離部２１により分離された補助データを復号する処理を実施する。なお、補助データ復号部２３は補助データ復号手段を構成している。
【００１４】
音声復号部２４は信号分離部２１により分離された音声信号を復号する処理を実施する。なお、音声復号部２４は音声復号手段を構成している。
メディア多重化部２５は映像復号部２２により復号された映像監視情報が多重化されている映像信号と、補助データ復号部２３により復号された映像監視情報が多重化されている補助データと、音声復号部２４により復号された音声監視情報が多重化されている音声信号とを多重化し、その多重化信号を出力する処理を実施する。なお、メディア多重化部２５は信号出力手段を構成している。
【００１５】
次に動作について説明する。
映像送信装置の信号分離部２は、入力端子１から入力信号を受けると、その入力信号を映像信号と音声信号と補助データに分離して、その映像信号を映像状態監視部３及び映像符号化部５に出力し、その音声信号を音声状態監視部４及び音声符号化部７に出力し、その補助データを補助データ符号化部６に出力する。
【００１６】
映像状態監視部３は、信号分離部２から映像信号を受けると、その映像信号を監視して、その監視の結果を示す映像監視情報を映像符号化部５及び補助データ符号化部６に出力する。
例えば、映像信号を構成しているフレームのヘッダが欠落しているなど、その映像信号の不具合を検出し、その検出結果を示す映像監視情報を映像符号化部５及び補助データ符号化部６に出力する。
音声状態監視部４は、信号分離部２から音声信号を受けると、その音声信号を監視して、その監視の結果を示す音声監視情報を音声符号化部７に出力する。
例えば、音声信号を構成しているフレームのヘッダが欠落しているなど、その音声信号の不具合を検出し、その検出結果を示す音声監視情報を音声符号化部７に出力する。
【００１７】
映像符号化部５は、映像状態監視部３から映像監視情報を受けると、その映像監視情報を信号分離部２により分離された映像信号に多重化して、その映像信号を符号化する。ここでの符号化は、映像信号の圧縮やパケット化を示すものである。
映像信号に対する映像監視情報の多重化の方法としては、例えば、スーパーインポーズとして映像監視情報を映像信号に多重化する方法などが考えられる。
ただし、映像監視情報を映像信号に重畳することができれば、スーパーインポーズ以外の形式で多重化してもよい。
【００１８】
補助データ符号化部６は、映像状態監視部３から映像監視情報を受けると、その映像監視情報を信号分離部２により分離された補助データに多重化して、その補助データを符号化する。
音声符号化部７は、音声状態監視部４から音声監視情報を受けると、その音声監視情報を信号分離部２により分離された音声信号に多重化して、その音声信号を符号化する。
音声信号に対する音声監視情報の多重化の方法としては、例えば、音声信号を構成しているフレームのユーザデータ領域に音声監視情報を多重化する方法などが考えられる。
【００１９】
メディア多重化部８は、映像符号化部５により符号化された映像信号と、補助データ符号化部６により符号化された補助データと、音声符号化部７により符号化された音声信号とを多重化して符号化ストリームを生成し、その符号化ストリームを送信する。
伝送装置１１は、映像送信装置のメディア多重化部８から符号化ストリームを受けると、伝送路１２を介して、その符号化ストリームを受信装置１３に送信する。
受信装置１３は、伝送装置１１により伝送された符号化ストリームを受信して、その符号化ストリームを映像受信装置の信号分離部２１に出力する。
【００２０】
映像受信装置の信号分離部２１は、受信装置１３から符号化ストリームを受けると、その符号化ストリームを映像信号と補助データと音声信号に分離して、その映像信号を映像復号部２２に出力し、その補助データを補助データ復号部２３に出力し、その音声信号を音声復号部２４に出力する。
映像復号部２２は、信号分離部２１から映像信号を受けると、映像監視情報が多重化されている映像信号を復号して、その映像信号をメディア多重化部２５に出力する。
【００２１】
補助データ復号部２３は、信号分離部２１から補助データを受けると、映像監視情報が多重化されている補助データを復号して、その補助データをメディア多重化部２５に出力する。
音声復号部２４は、信号分離部２１から音声信号を受けると、音声監視情報が多重化されている音声信号を復号して、その音声信号をメディア多重化部２５に出力する。
【００２２】
メディア多重化部２５は、映像復号部２２により復号された映像監視情報が多重化されている映像信号と、補助データ復号部２３により復号された映像監視情報が多重化されている補助データと、音声復号部２４により復号された音声監視情報が多重化されている音声信号とを多重化して、その多重化信号を出力する。
【００２３】
これにより、多重化信号が図示せぬ映像表示装置に出力されれば、映像信号の状態に異常が認められる場合、例えば、映像監視情報がスーパーインポーズとして、映像の画面上段等に表示される。
また、映像信号の状態に異常が認められる場合、例えば、映像の有効ライン外に、補助データが映像監視情報として表示される。
また、音声の状態に異常が認められる場合、例えば、音声監視情報がユーザデータとして音声出力される。
【００２４】
以上で明らかなように、この実施の形態１によれば、映像信号の監視結果を示す映像監視情報を出力する映像状態監視部３と、映像状態監視部３から出力された映像監視情報を映像信号に多重化して、その映像信号を符号化する映像符号化部５と、音声信号の監視結果を示す音声監視情報を出力する音声状態監視部４と、音声状態監視部４から出力された音声監視情報を音声信号に多重化して、その音声信号を符号化する音声符号化部７とを設け、メディア多重化部８が映像符号化部５により符号化された映像信号と音声符号化部７により符号化された音声信号を多重化して符号化ストリームを生成し、その符号化ストリームを送信するように構成したので、異常解析時間の短縮化を図ることができる効果を奏する。
即ち、映像監視情報と映像信号が多重化されているので、映像監視情報と映像信号間の時間関係が明確になり、また、音声監視情報と音声信号が多重化されているので、音声監視情報と音声信号間の時間関係が明確になり、異常の発生原因を容易に発見することができる。
【００２５】
なお、この実施の形態１では、映像監視情報を映像信号に多重化し、音声監視情報を音声信号に多重化しているものを示したが、映像監視情報を音声信号に多重化し、音声監視情報を映像信号に多重化するようにしてもよい。
また、映像や音声以外の情報、例えば、装置の内部温度などの情報を多重化するようにしてもよい。
【００２６】
実施の形態２．
図２はこの発明の実施の形態２による映像送信装置及び映像受信装置を示す構成図であり、図において、図１と同一符号は同一又は相当部分を示すので説明を省略する。
映像受信装置の映像状態監視部３１は信号分離部２１により分離された映像信号を監視して、その監視の結果を示す映像監視情報を出力する処理を実施する。なお、映像状態監視部３１は映像監視手段を構成している。
音声状態監視部３２は信号分離部２１により分離された音声信号を監視して、その監視の結果を示す音声監視情報を出力する処理を実施する。なお、音声状態監視部３２は音声監視手段を構成している。
【００２７】
映像復号部３３は図１の映像復号部２２と同様に、信号分離部２１により分離された映像信号を復号するとともに、映像状態監視部３１から出力された映像監視情報を復号後の映像信号に多重化してメディア多重化部２５に出力する処理を実施する。なお、映像復号部３３は映像復号手段を構成している。
補助データ復号部３４は図１の補助データ復号部２３と同様に、信号分離部２１により分離された補助データを復号するとともに、映像状態監視部３１から出力された映像監視情報を復号後の補助データに多重化してメディア多重化部２５に出力する処理を実施する。なお、補助データ復号部３４は補助データ復号手段を構成している。
音声復号部３５は図１の音声復号部２４と同様に、信号分離部２１により分離された音声信号を復号するとともに、音声状態監視部３２から出力された音声監視情報を復号後の音声信号に多重化してメディア多重化部２５に出力する処理を実施する。なお、音声復号部３５は音声復号手段を構成している。
【００２８】
次に動作について説明する。
映像送信装置の動作は、図１の映像送信装置と同様であるため説明を省略する。
映像受信装置の信号分離部２１は、受信装置１３から符号化ストリームを受けると、上記実施の形態１と同様に、その符号化ストリームを映像信号と補助データと音声信号に分離して、その映像信号を映像復号部３３及び映像状態監視部３１に出力し、その補助データを補助データ復号部３４に出力し、その音声信号を音声復号部３５及び音声状態監視部３２に出力する。
【００２９】
映像状態監視部３１は、信号分離部２１から符号化されている映像信号を受けると、その映像信号を監視して、その監視の結果を示す映像監視情報を映像復号部３３及び補助データ復号部３４に出力する。
例えば、符号化されている映像信号の不具合を検出し、その検出結果を示す映像監視情報を映像復号部３３及び補助データ復号部３４に出力する。
【００３０】
音声状態監視部３２は、信号分離部２１から符号化されている音声信号を受けると、その音声信号を監視して、その監視の結果を示す音声監視情報を音声復号部３５に出力する。
例えば、符号化されている音声信号の不具合を検出し、その検出結果を示す音声監視情報を音声復号部３５に出力する。
【００３１】
映像復号部３３は、信号分離部２１から符号化されている映像信号を受けると、図１の映像復号部２２と同様にして、その映像信号を復号する。
また、映像復号部３３は、映像状態監視部３１から出力された映像監視情報を復号後の映像信号に多重化してメディア多重化部２５に出力する。
映像信号に対する映像監視情報の多重化の方法としては、例えば、スーパーインポーズとして映像監視情報を映像信号に多重化する方法などが考えられる。
【００３２】
ただし、復号後の映像信号には、映像送信装置の映像符号化部５において、映像監視情報が多重化されているので、その映像監視情報と映像状態監視部３１から出力された映像監視情報を区別できるように多重化する。
例えば、映像送信装置の映像符号化部５において、映像監視情報がスーパーインポーズとして、映像の画面上段に重畳されている場合には、映像状態監視部３１から出力された映像監視情報をスーパーインポーズとして、映像の画面下段に重畳するようにする。
【００３３】
補助データ復号部３４は、信号分離部２１から符号化されている補助データを受けると、図１の補助データ復号部２３と同様にして、その補助データを復号する。
また、補助データ復号部３４は、映像状態監視部３１から出力された映像監視情報を復号後の補助データに多重化してメディア多重化部２５に出力する。
ただし、復号後の補助データには、映像送信装置の補助データ符号化部６において、映像監視情報が多重化されているので、その映像監視情報と映像状態監視部３１から出力された映像監視情報を区別できるように多重化する。
例えば、映像送信装置の補助データ符号化部６において、映像監視情報が多重化されているラインと異なるラインに、映像状態監視部３１から出力された映像監視情報を多重化するようにする。
【００３４】
音声復号部３５は、信号分離部２１から符号化されている音声信号を受けると、図１の音声復号部２４と同様にして、その音声信号を復号する。
また、音声復号部３５は、音声状態監視部３２から出力された音声監視情報を復号後の音声信号に多重化してメディア多重化部２５に出力する。
ただし、復号後の音声信号には、映像送信装置の音声符号化部７において、音声監視情報が多重化されているので、その音声監視情報と音声状態監視部３２から出力された音声監視情報を区別できるように多重化する。
例えば、映像送信装置の音声符号化部７において、音声監視情報が多重化されているユーザデータ領域と異なるユーザデータ領域に、音声状態監視部３２から出力された音声監視情報を多重化するようにする。
【００３５】
メディア多重化部２５は、映像復号部３３により復号された映像監視情報が多重化されている映像信号と、補助データ復号部３４により復号された映像監視情報が多重化されている補助データと、音声復号部３５により復号された音声監視情報が多重化されている音声信号とを多重化して、その多重化信号を出力する。
【００３６】
これにより、多重化信号が図示せぬ映像表示装置に出力されれば、映像信号の状態に異常が認められる場合、例えば、映像監視情報がスーパーインポーズとして、映像の画面上段と画面下段に表示される。
また、映像信号の状態に異常が認められる場合、例えば、映像の有効ライン外に、補助データが映像監視情報として表示される。
また、音声の状態に異常が認められる場合、例えば、音声監視情報がユーザデータとして音声出力される。
【００３７】
以上で明らかなように、この実施の形態２によれば、映像復号部３３が映像状態監視部３１から出力された映像監視情報を信号分離部２１により分離された映像信号の復号結果に多重化してメディア多重化部２５に出力し、音声復号部３５が音声状態監視部３２から出力された音声監視情報を信号分離部２１により分離された音声信号の復号結果に多重化してメディア多重化部２５に出力するように構成したので、符号化ストリームの伝送時や受信時に発生している映像信号及び音声信号の不具合についても検出することができる効果を奏する。
【００３８】
なお、この実施の形態２では、映像監視情報を映像信号に多重化し、音声監視情報を音声信号に多重化しているものを示したが、映像監視情報を音声信号に多重化し、音声監視情報を映像信号に多重化するようにしてもよい。
また、映像や音声以外の情報、例えば、装置の内部温度などの情報を多重化するようにしてもよい。
【図面の簡単な説明】
【００３９】
【図１】この発明の実施の形態１による映像送信装置及び映像受信装置を示す構成図である。
【図２】この発明の実施の形態２による映像送信装置及び映像受信装置を示す構成図である。
【符号の説明】
【００４０】
１  入力端子、２  信号分離部、３  映像状態監視部（映像監視手段）、４  音声状態監視部（音声監視手段）、５  映像符号化部（映像符号化手段）、６  補助データ符号化部（補助データ符号化手段）、７  音声符号化部（音声符号化手段）、８  メディア多重化部（ストリーム送信手段）、１１  伝送装置、１２  伝送路、１３  受信装置、２１  信号分離部（信号分離手段）、２２  映像復号部（映像復号手段）、２３  補助データ復号部（補助データ復号手段）、２４  音声復号部（音声復号手段）、２５  メディア多重化部（信号出力手段）、３１  映像状態監視部（映像監視手段）、３２  音声状態監視部（音声監視手段）、３３  映像復号部（映像復号手段）、３４  補助データ復号部（補助データ復号手段）、３５  音声復号部（音声復号手段）。
【図１】
2010136003.tif 000003
【図２】
2010136003.tif 000004