(57)【要約】【課題】遅延回路を実装することなく、復号時間の時間ズレがないビデオ信号を出力することができる映像受信装置を得ることを目的とする。【解決手段】ビデオデコーダ１２の分離部３１により分離されたビデオＤＴＳが示す復号開始時刻がビデオＤＴＳｒが示す復号開始時刻と一致するように、ビデオＤＴＳが示す復号開始時刻を補正するビデオＤＴＳ補正部３５を設け、ビデオ復号部３６がＳＴＣ再生部３３により再生された時刻基準ＳＴＣがビデオＤＴＳ補正部３５により補正されたビデオＤＴＳが示す復号開始時刻と一致するタイミングで、ビデオバッファ３２に格納されている符号化データＣＤＡＴＡの復号を開始する。【選択図】図１
2010141498.tif 000002
【特許請求の範囲】
【請求項１】
符号化ストリームから符号化されている復号対象のビデオ信号、上記ビデオ信号の復号開始時刻を示す第１の復号タイムスタンプ、上記ビデオ信号を符号化している符号化器における時刻基準の再生に用いる時刻管理情報及び上記ビデオ信号の復号開始の基準となるビデオ信号の復号開始時刻を示す第２の復号タイムスタンプを分離する分離手段と、上記分離手段により分離された第１の復号タイムスタンプが示す復号開始時刻が第２の復号タイムスタンプが示す復号開始時刻と一致するように、上記第１の復号タイムスタンプが示す復号開始時刻を補正する補正手段と、上記分離手段により分離された時刻管理情報にしたがって時刻基準を再生する再生手段と、上記再生手段により再生された時刻基準が上記補正手段により補正された第１の復号タイムスタンプが示す復号開始時刻と一致するタイミングで、上記分離手段により分離されたビデオ信号の復号を開始する復号手段とを備えた映像受信装置。
【請求項２】
分離手段がビデオ信号を符号化している符号化器における時刻基準の再生に用いる時刻管理情報の他に、符号化ストリームから復号開始の基準となるビデオ信号を符号化している符号化器における時刻基準の再生に用いる時刻管理情報を分離し、再生手段が双方の時刻管理情報にしたがって時刻基準をそれぞれ再生し、補正手段が第１の復号タイムスタンプが示す復号開始時刻と第２の復号タイムスタンプが示す復号開始時刻の時刻差と、双方の時刻基準の時刻差とから補正値を算出して、上記補正値を上記第１の復号タイムスタンプが示す復号開始時刻に加算することを特徴とする請求項１記載の映像受信装置。
【請求項３】
ビデオ信号が表す画面を分割して、分割後の画面を表す複数のビデオ信号を出力する画面分割手段と、上記画面分割手段から出力されたビデオ信号を符号化する複数の符号化器と、上記複数の符号化器により符号化されたビデオ信号を含む符号化ストリームを生成し、上記符号化ストリームを送信する送信手段とを備えた映像送信装置において、上記複数の符号化器は、上記画面分割手段から出力されたビデオ信号を符号化する符号化手段と、時刻基準を生成するとともに、上記時刻基準の再生に用いる時刻管理情報を生成する時刻基準生成手段と、上記時刻基準生成手段により生成された時刻基準を参照して、上記符号化手段により符号化されるビデオ信号の復号開始時刻を示す復号タイムスタンプを生成するタイムスタンプ生成手段と、上記タイムスタンプ生成手段により生成された復号タイムスタンプが示す復号開始時刻に所定の復号基準補正値を加算する補正値加算手段と、上記符号化手段により符号化されたビデオ信号、上記補正値加算手段から出力された復号タイムスタンプ及び上記時刻基準生成手段により生成された時刻管理情報を多重化する多重化手段とを備えていることを特徴とする映像送信装置。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、例えば、大画面を分割して、分割画面のビデオ信号を符号化して送信する映像送信装置と、映像送信装置から送信された分割画面のビデオ信号を復号する映像受信装置とに関するものである。
【背景技術】
【０００２】
図５は特許文献１に開示されている映像送信装置を示す構成図である。
映像送信装置の画面分割回路１０２は、入力端子１０１から画像信号を入力すると、図中、点線で示しているフィールド前半の部分画像Ｐと、フィールド後半の部分画像Ｑとに分割することで、部分画像Ｐの画像データを符号化回路１０３に出力し、部分画像Ｑの画像データを符号化回路１０４に出力する。
【０００３】
符号化回路１０３は、画面分割回路１０２から部分画像Ｐの画像データを受けると、例えば、ＭＰＥＧ規格に則して、その画像データを符号化する。
符号化回路１０４は、画面分割回路１０２から部分画像Ｑの画像データを受けると、例えば、ＭＰＥＧ規格に則して、その画像データを符号化する。
一般に、ＭＰＥＧ規格による符号化では、復号タイミングを同期させる時間情報としてタイムスタンプを符号化ストリームに挿入するのが普通である。
この映像送信装置においても、２つの符号化回路１０３，１０４の同期を取るために、時計回路１０５が上記タイムスタンプの基準となる時刻データを発生し、その時刻データを符号化回路１０３，１０４に供給するようにしている。
【０００４】
そこで、符号化回路１０３，１０４は、部分画像Ｐ，Ｑの画像データを符号化する際、時計回路１０５より供給された時刻データからタイムスタンプを生成し、そのタイムスタンプを画像データの符号化データに挿入して、符号化ストリームを生成するようにしている。
符号化回路１０３，１０４は、符号化ストリームを生成すると、その符号化ストリームを記録装置１０６，１０７に記録するとともに、その符号化ストリームを再編成回路１０８に出力する。
【０００５】
再編成回路１０８は、符号化回路１０３，１０４から符号化ストリームをそれぞれ受けると、２つの符号化ストリームを１つに再編成して、１つの符号化ストリームを伝送装置１０９に出力する。
伝送装置１０９は、再編成回路１０８から符号化ストリームを受けると、その符号化ストリームを図６の映像受信装置に送信する。
【０００６】
図６は特許文献１に開示されている映像受信装置を示す構成図である。
映像受信装置の再生装置１１１は、図５の映像送信装置の記録装置１０６によって記録された符号化ストリームを再生する。
再生装置１１２は、図５の映像送信装置の記録装置１０７によって記録された符号化ストリームを再生する。
デコーダ１１３には、再生装置１１１によって再生された符号化ストリームが供給される。あるいは、伝送装置１０９により伝送された符号化ストリームから符号化回路１０３により生成された符号化ストリームが分離されて、その符号化ストリームが供給される。
デコーダ１１４には、再生装置１１２によって再生された符号化ストリームが供給される。あるいは、伝送装置１０９により伝送された符号化ストリームから符号化回路１０４により生成された符号化ストリームが分離されて、その符号化ストリームが供給される。
【０００７】
デコーダ１１３は、符号化ストリームの供給を受けると、同期回路１１５から出力される同期データに同期して、その符号化ストリームの復号処理を実施し、復号後の画像データ（部分画像Ｐの画像データ）を画面合成回路１１７に出力する。
デコーダ１１４は、符号化ストリームの供給を受けると、同期回路１１５から出力される同期データに同期して、その符号化ストリームの復号処理を実施し、遅延回路１１６を介して、復号後の画像データ（部分画像Ｑの画像データ）を画面合成回路１１７に出力する。
部分画像Ｑの画像データが遅延回路１１６を介して画面合成回路１１７に出力されることで、デコーダ１１３とデコーダ１１４間の復号時間の時間ズレを吸収している。
【０００８】
画面合成回路１１７は、部分画像Ｐの画像データと部分画像Ｑの画像データを受けると、２つの画像データから１つの画像データを合成し、その画像データを出力端子１１８に出力する。
【０００９】
【特許文献１】特開２００２−１２５２０３号公報（段落番号［０００２］から［０００５］、図１０及び図１１）
【発明の開示】
【発明が解決しようとする課題】
【００１０】
従来の映像送信装置は以上のように構成されているので、時計回路１０５を実装して、復号タイミングを同期させるための時刻データを符号化回路１０３，１０４に供給する必要がある。
また、映像受信装置では、デコーダ１１３とデコーダ１１４間の復号時間の時間ズレを吸収するために、遅延回路１１６を実装する必要がある。
分割数が多くなる程、映像送信装置では、時計回路１０５が時刻データを供給する対象の符号化回路が増加し、映像受信装置では、多くの遅延回路１１６を実装する必要が生じる。そのため、システム構成が複雑化して、コストアップの要因になるなどの課題があった。
【００１１】
この発明は上記のような課題を解決するためになされたもので、遅延回路を実装することなく、復号時間の時間ズレがないビデオ信号を出力することができる映像受信装置を得ることを目的とする。
また、この発明は、上記の映像受信装置に適用することができる映像送信装置を得ることを目的とする。
【課題を解決するための手段】
【００１２】
この発明に係る映像受信装置は、分離手段により分離された第１の復号タイムスタンプが示す復号開始時刻が第２の復号タイムスタンプが示す復号開始時刻と一致するように、第１の復号タイムスタンプが示す復号開始時刻を補正する補正手段と、分離手段により分離された時刻管理情報にしたがって時刻基準を再生する再生手段とを設け、復号手段が再生手段により再生された時刻基準が補正手段により補正された第１の復号タイムスタンプが示す復号開始時刻と一致するタイミングで、分離手段により分離されたビデオ信号の復号を開始するようにしたものである。
【発明の効果】
【００１３】
この発明によれば、分離手段により分離された第１の復号タイムスタンプが示す復号開始時刻が第２の復号タイムスタンプが示す復号開始時刻と一致するように、第１の復号タイムスタンプが示す復号開始時刻を補正する補正手段と、分離手段により分離された時刻管理情報にしたがって時刻基準を再生する再生手段とを設け、復号手段が再生手段により再生された時刻基準が補正手段により補正された第１の復号タイムスタンプが示す復号開始時刻と一致するタイミングで、分離手段により分離されたビデオ信号の復号を開始するように構成したので、遅延回路を実装することなく、復号時間の時間ズレがないビデオ信号を出力することができる効果がある。
【発明を実施するための最良の形態】
【００１４】
実施の形態１．
図１はこの発明の実施の形態１による映像受信装置を示す構成図である。
図１において、映像送信装置１はビデオ信号が表す大画面を分割し、各分割画面のビデオ信号を符号化して符号化ストリームを生成し、その符号化ストリームを送信する装置である。
この実施の形態１では、説明の簡単化のため、大画面を２つの画面（例えば、上半分の画面と、下半分の画面）に分割する例を説明する。
この場合、映像送信装置１から送信される符号化ストリームには、以下のデータ等が含まれている。ただし、以下のデータ等は、２つの画面に分割する場合の一例であり、３つ以上の画面に分割する場合には、分割画面数分の符号化データ等が含まれる。
【００１５】
なお、この実施の形態１では、下半分の画面のビデオ信号の復号を、上半分の画面のビデオ信号を基準にして、復号を同一時刻に行うので、上半分の画面のビデオ信号を必要に応じて「復号基準のビデオ信号」と称し、上半分の画面のビデオ信号の符号化データＣＤＡＴＡｒを「復号基準の符号化データ」と称する。
一方、下半分の画面のビデオ信号を必要に応じて「復号対象のビデオ信号」と称し、下半分の画面のビデオ信号の符号化データＣＤＡＴＡを「復号対象の符号化データ」と称する。
【００１６】
（１−１）上半分の画面のビデオ信号の符号化データＣＤＡＴＡｒ
（１−２）下半分の画面のビデオ信号の符号化データＣＤＡＴＡ
（２−１）符号化データＣＤＡＴＡｒの復号開始時刻を示すデコーディングタイムスタンプ（第２の復号タイムスタンプ：以下、「ビデオＤＴＳｒ」と称する）
（２−２）符号化データＣＤＡＴＡの復号開始時刻を示すデコーディングタイムスタンプ（第１の復号タイムスタンプ：以下、「ビデオＤＴＳ」と称する）
（３−１）上半分の画面のビデオ信号を符号化している符号化器（映像送信装置１内の符号化器）における時刻基準ＳＴＣｒ（Ｓｙｓｔｅｍ  Ｔｉｍｅ  Ｃｌｏｃｋ）の再生に用いる時刻管理情報ＰＣＲｒ（Ｐｒｏｇｒａｍ  Ｃｌｏｃｋ  Ｒｅｆｅｒｅｎｃｅ）
（３−２）下半分の画面のビデオ信号を符号化している符号化器（映像送信装置１内の符号化器）における時刻基準ＳＴＣの再生に用いる時刻管理情報ＰＣＲ
【００１７】
伝送装置２は映像送信装置１から送信された符号化ストリームを映像受信装置３に伝送する装置である。
映像受信装置３は伝送装置２により伝送された分割画面のビデオ信号を復号する装置である。
【００１８】
映像受信装置３のビデオデコーダ１１は符号化ストリームから符号化データＣＤＡＴＡｒを分離し、その符号化データＣＤＡＴＡｒから上半分の画面のビデオ信号（復号基準のビデオ信号）を復号する処理を実施する。
ビデオデコーダ１２は符号化ストリームから符号化データＣＤＡＴＡを分離し、その符号化データＣＤＡＴＡから下半分の画面のビデオ信号を復号する処理を実施する。
画面合成回路１３はビデオデコーダ１１，１２によって同一時刻に復号された上半分の画面のビデオ信号と下半分の画面のビデオ信号を合成し、合成画面のビデオ信号を出力端子１４に出力する処理を実施する。
【００１９】
ビデオデコーダ１１の分離部２１は符号化ストリームから復号基準の符号化データＣＤＡＴＡｒ、ビデオＤＴＳｒ及び時刻管理情報ＰＣＲｒを分離する処理を実施する。
ビデオバッファ２２は分離部２１により分離された復号基準の符号化データＣＤＡＴＡｒを一時的に格納するメモリである。
ＳＴＣ再生部２３は分離部２１により分離された時刻管理情報ＰＣＲｒにしたがって時刻基準ＳＴＣｒを再生する処理を実施する。
ビデオ復号部２４はＳＴＣ再生部２３により再生された時刻基準ＳＴＣｒが分離部２１により分離されたビデオＤＴＳｒが示す復号開始時刻と一致するタイミングで、ビデオバッファ２２に格納されている符号化データＣＤＡＴＡｒに対する復号処理を開始して、復号結果である上半分の画面のビデオ信号を画面合成回路１３に出力する。
【００２０】
ビデオデコーダ１２の分離部３１は符号化ストリームから復号対象の符号化データＣＤＡＴＡ、ビデオＤＴＳ、ビデオＤＴＳｒ、時刻管理情報ＰＣＲ、時刻管理情報ＰＣＲｒを分離する処理を実施する。
なお、分離部３１は分離手段を構成している。
ビデオバッファ３２は分離部３１により分離された復号対象の符号化データＣＤＡＴＡを一時的に格納するメモリである。
【００２１】
ＳＴＣ再生部３３は分離部３１により分離された時刻管理情報ＰＣＲにしたがって時刻基準ＳＴＣを再生する処理を実施する。
ＳＴＣ再生部３４は分離部３１により分離された時刻管理情報ＰＣＲｒにしたがって時刻基準ＳＴＣｒを再生する処理を実施する。
なお、ＳＴＣ再生部３３，３４は再生手段を構成している。
【００２２】
ビデオＤＴＳ補正部３５は分離部３１により分離されたビデオＤＴＳが示す復号開始時刻が、ビデオＤＴＳｒが示す復号開始時刻と一致するように、そのビデオＤＴＳが示す復号開始時刻を補正する処理を実施する。
即ち、ビデオＤＴＳ補正部３５は分離部３１により分離されたビデオＤＴＳが示す復号開始時刻とビデオＤＴＳｒが示す復号開始時刻の時刻差となる補正値（＝ＤＴＳｒ−ＤＴＳ）を算出して、その補正値をビデオＤＴＳが示す復号開始時刻に加算する処理を実施する。
なお、ビデオＤＴＳ補正部３５は補正手段を構成している。
【００２３】
ビデオ復号部３６はＳＴＣ再生部３３により再生された時刻基準ＳＴＣがビデオＤＴＳ補正部３５により補正されたビデオＤＴＳが示す復号開始時刻と一致するタイミングで、ビデオバッファ３２に格納されている符号化データＣＤＡＴＡに対する復号処理を開始して、復号結果である下半分の画面のビデオ信号を画面合成回路１３に出力する。
なお、ビデオ復号部３６は復号手段を構成している。
図２はこの発明の実施の形態１による映像受信装置のビデオデコーダ１１，１２における復号タイミングを示す説明図である。
【００２４】
次に動作について説明する。
映像送信装置１は、大画面を表すビデオ信号を入力すると、例えば、大画面を上半分と下半分に分割して、上半分の画面のビデオ信号を符号化し、下半分の画面のビデオ信号を符号化する。
このとき、ビデオ信号の符号化方式として、例えば、動画像圧縮の国際基準であるＭＰＥＧ（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）−２規格が用いられる場合、ビデオ信号の復号・再生の単位毎（例えば、１フレーム毎）に復号タイムスタンプが付加され、この復号タイムスタンプの時刻基準として、システムタイムクロックが定義される。
【００２５】
したがって、映像送信装置１において、上半分の画面のビデオ信号（復号基準のビデオ信号）を符号化する符号化器は、ＭＰＥＧ−２規格を用いる場合、上半分の画面のビデオ信号を符号化して符号化データＣＤＡＴＡｒを生成する際、その符号化データＣＤＡＴＡｒの復号開始時刻を示すビデオＤＴＳｒを生成する。
また、この符号化器は、そのビデオＤＴＳｒの時刻基準ＳＴＣｒを映像受信装置３で再生できるようにするために、その時刻基準ＳＴＣｒの再生に用いる時刻管理情報ＰＣＲｒを生成し、その符号化データＣＤＡＴＡｒ、ビデオＤＴＳｒ及び時刻管理情報ＰＣＲｒからなる符号化ストリームを生成する。
【００２６】
映像送信装置１において、下半分の画面のビデオ信号を符号化する符号化器は、ＭＰＥＧ−２規格を用いる場合、下半分の画面のビデオ信号を符号化して符号化データＣＤＡＴＡを生成する際、その符号化データＣＤＡＴＡの復号開始時刻を示すビデオＤＴＳを生成する。
また、この符号化器は、そのビデオＤＴＳの時刻基準ＳＴＣを映像受信装置３で再生できるようにするために、その時刻基準ＳＴＣの再生に用いる時刻管理情報ＰＣＲを生成し、その符号化データＣＤＡＴＡ、ビデオＤＴＳ及び時刻管理情報ＰＣＲからなる符号化ストリームを生成する。
【００２７】
映像送信装置１は、各符号化器が符号化ストリームを生成すると、２つの符号化ストリームを再編成して、１つの符号化ストリームを生成する。
伝送装置２は、映像送信装置１が１つの符号化ストリームを生成すると、その符号化ストリームを映像受信装置３に伝送する。
【００２８】
映像受信装置３のビデオデコーダ１１は、伝送装置２から符号化ストリームを受信すると、その符号化ストリームから符号化データＣＤＡＴＡｒを分離し、その符号化データＣＤＡＴＡｒに対する復号処理を実施して、上半分の画面のビデオ信号（復号基準のビデオ信号）を出力する。
以下、ビデオデコーダ１１の処理内容を具体的に説明する。
【００２９】
ビデオデコーダ１１の分離部２１は、符号化ストリームから復号基準の符号化データＣＤＡＴＡｒ、ビデオＤＴＳｒ及び時刻管理情報ＰＣＲｒを分離して、その符号化データＣＤＡＴＡｒをビデオバッファ２２に格納する。
また、分離部２１は、ビデオＤＴＳｒをビデオ復号部２４に出力し、その時刻管理情報ＰＣＲｒをＳＴＣ再生部２３に出力する。
【００３０】
ビデオデコーダ１１のＳＴＣ再生部２３は、分離部２１から時刻管理情報ＰＣＲｒを受けると、その時刻管理情報ＰＣＲｒにしたがって時刻基準ＳＴＣｒを再生し、その時刻基準ＳＴＣｒをビデオ復号部２４に出力する。
ビデオデコーダ１１のビデオ復号部２４は、図２に示すように、ＳＴＣ再生部２３により再生された時刻基準ＳＴＣｒが分離部２１から出力されたビデオＤＴＳｒが示す復号開始時刻と一致するタイミングで、ビデオバッファ２２に格納されている符号化データＣＤＡＴＡｒに対する復号処理を開始して、復号結果である上半分の画面のビデオ信号を画面合成回路１３に出力する。
図２の例では、時刻基準ＳＴＣｒが時刻００：０５になるタイミングで、符号化データＣＤＡＴＡｒに対する復号処理を開始している。
【００３１】
映像受信装置３のビデオデコーダ１２は、伝送装置２から符号化ストリームを受信すると、その符号化ストリームから符号化データＣＤＡＴＡを分離し、その符号化データＣＤＡＴＡに対する復号処理を実施して、下半分の画面のビデオ信号を出力する。
以下、ビデオデコーダ１２の処理内容を具体的に説明する。
【００３２】
ビデオデコーダ１２の分離部３１は、符号化ストリームから復号対象の符号化データＣＤＡＴＡ、ビデオＤＴＳ、ビデオＤＴＳｒ、時刻管理情報ＰＣＲ、時刻管理情報ＰＣＲｒを分離して、その符号化データＣＤＡＴＡをビデオバッファ３２に格納する。
また、分離部３１は、そのビデオＤＴＳ及びビデオＤＴＳｒをビデオＤＴＳ補正部３５に出力し、その時刻管理情報ＰＣＲをＳＴＣ再生部３３に出力し、その時刻管理情報ＰＣＲｒをＳＴＣ再生部３４に出力する。
【００３３】
図２の例では、映像送信装置１における２つの符号化器の時刻基準ＳＴＣ、ＳＴＣｒにズレがあるために、ビデオＤＴＳが示す復号開始時刻とビデオＤＴＳｒが示す復号開始時刻の間にズレが生じている。
このため、ビデオＤＴＳが示す復号開始時刻を補正しなければ、上半分の画面のビデオ信号（復号基準のビデオ信号）より、下半分の画面のビデオ信号が早く復号されて出力されるタイミングずれが発生する。
【００３４】
ビデオデコーダ１２のＳＴＣ再生部３３は、分離部３１から時刻管理情報ＰＣＲを受けると、その時刻管理情報ＰＣＲにしたがって時刻基準ＳＴＣを再生し、その時刻基準ＳＴＣをビデオ復号部３６及びビデオＤＴＳ補正部３５に出力する。
ビデオデコーダ１２のＳＴＣ再生部３４は、分離部３１から時刻管理情報ＰＣＲｒを受けると、その時刻管理情報ＰＣＲｒにしたがって時刻基準ＳＴＣｒを再生し、その時刻基準ＳＴＣｒをビデオＤＴＳ補正部３５に出力する。
【００３５】
ビデオＤＴＳ補正部３５は、分離部３１からビデオＤＴＳとビデオＤＴＳｒを受けると、そのビデオＤＴＳが示す復号開始時刻が、そのビデオＤＴＳｒが示す復号開始時刻と一致するように、そのビデオＤＴＳが示す復号開始時刻を補正する。
即ち、ビデオＤＴＳ補正部３５は、ビデオＤＴＳが示す復号開始時刻とその到着時間ＡＴＳから遅延量を算出するとともに、ビデオＤＴＳｒが示す復号開始時刻とその到着時間ＡＴＳｒから遅延量を算出し、その２つの遅延量と到着時間差（ＡＴＳｒ−ＡＴＳ）から補正値（＝ＤＴＳｒ−ＤＴＳ）を算出して、その補正値をビデオＤＴＳが示す復号開始時刻に加算する。
補正値＝ＤＴＳｒ−ＤＴＳ
＝（（ＡＴＳｒ−ＡＴＳ）＋（ＤＴＳｒ−ＤＴＳ））−（ＤＴＳ−ＡＴＳ）
【００３６】
ビデオ復号部３６は、ビデオＤＴＳ補正部３５から補正後のビデオＤＴＳを受けると、ＳＴＣ再生部３３により再生された時刻基準ＳＴＣが、補正後のビデオＤＴＳが示す復号開始時刻と一致するタイミングで、ビデオバッファ３２に格納されている符号化データＣＤＡＴＡに対する復号処理を開始して、復号結果である下半分の画面のビデオ信号を画面合成回路１３に出力する。
図２の例では、時刻基準ＳＴＣが時刻０１：０４になるタイミングで、ビデオ復号部３６が符号化データＣＤＡＴＡに対する復号処理を開始しており、ビデオ復号部２４の復号タイミングと一致している。
【００３７】
画面合成回路１３は、ビデオデコーダ１１，１２によって同一時刻に復号された上半分の画面のビデオ信号と下半分の画面のビデオ信号を合成し、合成画面のビデオ信号を出力端子１４に出力する。
【００３８】
以上で明らかなように、この実施の形態１によれば、ビデオデコーダ１２の分離部３１により分離されたビデオＤＴＳが示す復号開始時刻がビデオＤＴＳｒが示す復号開始時刻と一致するように、ビデオＤＴＳが示す復号開始時刻を補正するビデオＤＴＳ補正部３５と、分離部３１により分離された時刻管理情報ＰＣＲにしたがって時刻基準ＳＴＣを再生するＳＴＣ再生部３３とを設け、ビデオ復号部３６がＳＴＣ再生部３３により再生された時刻基準ＳＴＣがビデオＤＴＳ補正部３５により補正されたビデオＤＴＳが示す復号開始時刻と一致するタイミングで、ビデオバッファ３２に格納されている符号化データＣＤＡＴＡの復号を開始するように構成したので、従来例のように、遅延回路を実装することなく、上半分の画面のビデオ信号と下半分の画面のビデオ信号との間で、復号時間がズレていない合成画面のビデオ信号を出力することができる効果を奏する。
【００３９】
また、この実施の形態１によれば、ビデオＤＴＳ補正部３５が、ビデオＤＴＳが示す復号開始時刻とその到着時間ＡＴＳから遅延量を算出するとともに、ビデオＤＴＳｒが示す復号開始時刻とその到着時間ＡＴＳｒから遅延量を算出し、その２つの遅延量と到着時間差（ＡＴＳｒ−ＡＴＳ）から補正値（＝ＤＴＳｒ−ＤＴＳ）を算出して、その補正値をビデオＤＴＳが示す復号開始時刻に加算するように構成したので、上半分の画面のビデオ信号を符号化している符号化器（映像送信装置１内の符号化器）における時刻基準ＳＴＣｒと、下半分の画面のビデオ信号を符号化している符号化器（映像送信装置１内の符号化器）における時刻基準ＳＴＣとの間にズレが生じている場合でも、ビデオＤＴＳが示す復号開始時刻を正確にビデオＤＴＳｒが示す復号開始時刻に一致させることができる効果を奏する。
【００４０】
なお、この実施の形態１では、ビデオＤＴＳ補正部３５が、ビデオＤＴＳが示す復号開始時刻を補正するものについて示したが、ＭＰＥＧ−２規格では、映像送信装置からビデオＤＴＳのほかに、画面を表示する時刻を示すプレゼンテーションタイムスタンプ（以下、「ＰＴＳ」と称する）が付加されるので、ビデオＤＴＳが示す復号開始時刻の代わりに、ＰＴＳ（＝ビデオＤＴＳ＋固定の復号遅延）が示す表示時刻を補正するようにしてもよい。
【００４１】
また、この実施の形態１では、ビデオデコーダ１１のビデオ復号部２４が復号する符号化データＣＤＡＴＡｒを復号開始の基準として、ビデオデコーダ１２のビデオ復号部３６における符号化データＣＤＡＴＡの復号タイミングを補正しているが、ＭＰＥＧ−２ビデオの符号化時において、例えば、１５フレーム毎に挿入されるイントラピクチャを復号開始の基準としてもよく、より大きな時間的なズレに対応することができる。
【００４２】
また、この実施の形態１では、伝送装置２が、ビデオデコーダ１１が復号する符号化データＣＤＡＴＡｒと、ビデオデコーダ１２が復号する符号化データＣＤＡＴＡとを多重している符号化ストリームを映像受信装置３に送信するものについて示したが、ビデオデコーダ１１が復号する符号化データＣＤＡＴＡｒと、ビデオデコーダ１２が復号する符号化データＣＤＡＴＡとを別個に伝送して、ビデオデコーダ１１，１２の分離部２１，３１に与えるようにしてもよい。
また、この実施の形態１では、分割画面を符号化する複数の符号化器を１つの映像送信装置１として示したが、複数の送信装置から出力した符号化データを再編成回路で１つのストリームにしても良い。
また、この実施の形態１では、ビデオデコーダ１１とビデオデコーダ１２を１つの映像受信装置３として示したが、別個のビデオデコーダを持つ映像受信装置として外部で画面合成を行っても良い。
【００４３】
実施の形態２．
図３はこの発明の実施の形態２による映像送信装置を示す構成図であり、図において、図１と同一符号は同一又は相当部分を示すので説明を省略する。
画面分割回路５２は入力端子５１から大画面を表すビデオ信号を入力すると、その大画面を分割して、分割後の画面を表す複数のビデオ信号を出力する処理を実施する。図３では、２つの画面に分割する例を示している。
なお、画面分割回路５２は画面分割手段を構成している。
【００４４】
時計回路５３はタイムスタンプの基準となる時刻データを符号化回路５４，５５に供給するクロックである。
符号化回路５４はＭＰＥＧ−２規格に則して、例えば、画面分割回路５２から出力された上半分の画面のビデオ信号を符号化し、その符号化データＣＤＡＴＡｒを含む符号化ストリームを出力する処理を実施する。
符号化回路５５はＭＰＥＧ−２規格に則して、例えば、画面分割回路５２から出力された下半分の画面のビデオ信号を符号化し、その符号化データＣＤＡＴＡを含む符号化ストリームを出力する処理を実施する。
なお、符号化回路５４，５５は符号化器を構成している。
【００４５】
再編成回路５６は符号化回路５４，５５から出力された２つの符号化ストリームを１つに再編成して、１つの符号化ストリームを伝送装置２に出力する処理を実施する。
なお、再編成回路５６及び伝送装置２から送信手段が構成されている。
【００４６】
符号化回路５４のビデオ符号化部６１は画面分割回路５２から出力された上半分の画面のビデオ信号を符号化して、その符号化データＣＤＡＴＡｒを生成する処理を実施する。
なお、ビデオ符号化部６１は符号化手段を構成している。
ＳＴＣ生成部６２は時計回路５３から供給される時刻データにしたがって時刻基準ＳＴＣｒを生成するとともに、その時刻基準ＳＴＣｒの再生に用いる時刻管理情報ＰＣＲｒを生成する処理を実施する。
なお、ＳＴＣ生成部６２は時刻基準生成手段を構成している。
【００４７】
タイムスタンプ生成部６３はＳＴＣ生成部６２により生成された時刻基準ＳＴＣｒを参照して、ビデオ符号化部６１により符号化されるビデオ信号の復号開始時刻を示すビデオＤＴＳｒ（あるいは、ビデオ信号の表示時刻を示すＰＴＳｒ）を生成する処理を実施する。ここでは、ビデオＤＴＳｒ又はＰＴＳｒを生成するものについて示しているが、ビデオＤＴＳｒとＰＴＳｒの双方を生成するようにしてもよい。
なお、タイムスタンプ生成部６３はタイムスタンプ生成手段を構成している。
【００４８】
オフセット設定部６４は例えばキーボードやスイッチなどのマンマシンインタフェースなどから構成されており、所定のオフセットの設定を受け付ける処理を実施する。
ここでは、オフセット設定部６４がユーザにより設定されたオフセットを加算部６５に出力する構成を示しているが、予め内部のメモリ内に格納しているオフセットを加算部６５に出力するようにしてもよい。
加算部６５はタイムスタンプ生成部６３により生成されたビデオＤＴＳｒが示す復号開始時刻（あるいは、ＰＴＳｒが示すビデオ信号の表示時刻）に対して、オフセット設定部６４から出力されたオフセットを加算する処理を実施する。
なお、オフセット設定部６４及び加算部６５から補正値加算手段が構成されている。
【００４９】
多重化部６６はビデオ符号化部６１により生成された符号化データＣＤＡＴＡｒ、加算部６５から出力されたオフセット付のビデオＤＴＳｒ及びＳＴＣ生成部６２により生成された時刻管理情報ＰＣＲｒを多重化して符号化ストリームを生成し、その符号化ストリームを再編成回路５６に出力する処理を実施する。
なお、多重化部６６は多重化手段を構成している。
【００５０】
符号化回路５５のビデオ符号化部７１は画面分割回路５２から出力された下半分の画面のビデオ信号を符号化して、その符号化データＣＤＡＴＡを生成する処理を実施する。
なお、ビデオ符号化部７１は符号化手段を構成している。
ＳＴＣ生成部７２は時計回路５３から供給される時刻データにしたがって時刻基準ＳＴＣを生成するとともに、その時刻基準ＳＴＣの再生に用いる時刻管理情報ＰＣＲを生成する処理を実施する。
なお、ＳＴＣ生成部７２は時刻基準生成手段を構成している。
【００５１】
タイムスタンプ生成部７３はＳＴＣ生成部７２により生成された時刻基準ＳＴＣを参照して、ビデオ符号化部７１により符号化されるビデオ信号の復号開始時刻を示すビデオＤＴＳ（あるいは、ビデオ信号の表示時刻を示すＰＴＳ）を生成する処理を実施する。ここでは、ビデオＤＴＳ又はＰＴＳを生成するものについて示しているが、ビデオＤＴＳとＰＴＳの双方を生成するようにしてもよい。
なお、タイムスタンプ生成部７３はタイムスタンプ生成手段を構成している。
【００５２】
オフセット設定部７４は例えばキーボードやスイッチなどのマンマシンインタフェースなどから構成されており、所定のオフセットの設定を受け付ける処理を実施する。
ここでは、オフセット設定部７４がユーザにより設定されたオフセットを加算部７５に出力する構成を示しているが、予め内部のメモリ内に格納しているオフセットを加算部７５に出力するようにしてもよい。
加算部７５はタイムスタンプ生成部７３により生成されたビデオＤＴＳが示す復号開始時刻（あるいは、ＰＴＳが示すビデオ信号の表示時刻）に対して、オフセット設定部７４から出力されたオフセットを加算する処理を実施する。
なお、オフセット設定部７４及び加算部７５から補正値加算手段が構成されている。
【００５３】
多重化部７６はビデオ符号化部７１により生成された符号化データＣＤＡＴＡ、加算部７５から出力されたオフセット付のビデオＤＴＳ及びＳＴＣ生成部７２により生成された時刻管理情報ＰＣＲを多重化して符号化ストリームを生成し、その符号化ストリームを再編成回路５６に出力する処理を実施する。
なお、多重化部７６は多重化手段を構成している。
図４はこの発明の実施の形態２による映像受信装置のビデオデコーダ１１，１２における復号タイミングを示す説明図である。
【００５４】
次に動作について説明する。
映像受信装置３では、ビデオデコーダ１１のビデオ復号部２４が復号する符号化データＣＤＡＴＡｒを復号開始の基準として、ビデオデコーダ１２のビデオ復号部３６における符号化データＣＤＡＴＡの復号タイミングを補正するようにしている。
したがって、ビデオデコーダ１２のビデオ復号部３６が復号する符号化データＣＤＡＴＡが伝送遅延等の影響で、ビデオデコーダ１１のビデオ復号部２４が復号する符号化データＣＤＡＴＡより遅くに到着すると、ビデオＤＴＳ補正部３５による補正処理が不可能になり、復号タイミングの一致を図ることができなくなる。
【００５５】
図４の例では、映像送信装置が後述する復号基準補正値の加算処理を実施しなければ、ビデオＤＴＳ補正部３５により補正されたビデオＤＴＳに基づく表示時間、即ち、そのビデオＤＴＳに固定の復号遅延が付加された時間（あるいは、ビデオＤＴＳ補正部３５により補正されたＰＴＳ）が、分離部２１からビデオ復号部２４に出力されるビデオＤＴＳｒに基づく表示時間、即ち、そのビデオＤＴＳｒに固定の復号遅延が付加された時間（あるいは、分離部２１からビデオ復号部２４に出力されるＰＴＳ）より遅くなり、表示時刻が逆転して正確に表示することができなくなっている。
【００５６】
そこで、この実施の形態２では、ビデオデコーダ１２のビデオ復号部３６が復号する符号化データＣＤＡＴＡが、伝送遅延等の影響で、ビデオデコーダ１１のビデオ復号部２４が復号する符号化データＣＤＡＴＡｒより遅くに到着しても、適切に表示することができるように、映像送信装置の構成を工夫している。
以下、映像送信装置の処理内容を具体的に説明する。
【００５７】
例えば、符号化回路５４のオフセット設定部６４が出力するオフセットの値と、符号化回路５５のオフセット設定部７４が出力するオフセットの値が同一値である場合、伝送遅延等の影響がなければ、ビデオデコーダ１１のビデオ復号部２４が復号する符号化データＣＤＡＴＡｒと、ビデオデコーダ１２のビデオ復号部３６が復号する符号化データＣＤＡＴＡとは、同一時刻に到着する。
しかし、ビデオデコーダ１２のビデオ復号部３６が復号する符号化データＣＤＡＴＡが、遅延等の影響によって、ビデオデコーダ１１のビデオ復号部２４が復号する符号化データＣＤＡＴＡｒよりも、例えば、１フレームの伝送に相当する時間だけ到着が遅れる場合には、符号化回路５４のオフセット設定部６４が出力するオフセットの値を、符号化回路５５のオフセット設定部７４が出力するオフセットの値より、１フレームの伝送に相当する時間より大きな値にする。
例えば、符号化回路５４のオフセット設定部６４が出力するオフセットの値を２フレームの伝送に相当する時間に設定し、符号化回路５５のオフセット設定部７４が出力するオフセットの値を“０”に設定する。
【００５８】
このように、オフセット設定部６４，７４のオフセットを設定した場合、加算部６５，７５がオフセット設定部６４，７４により設定されたオフセットをタイムスタンプ生成部６３，７３により生成されたビデオＤＴＳｒ，ＤＴＳが示す復号開始時刻に加算することで、双方のオフセットの差分（復号基準補正値）だけ、ビデオＤＴＳｒが示す復号開始時刻が、ビデオＤＴＳが示す復号開始時刻より遅くなる。
図４の例では、双方のオフセットの差分（復号基準補正値）だけ、ビデオＤＴＳｒが示す復号開始時刻が遅くなっている。
その結果、先に、ビデオデコーダ１１のビデオ復号部２４が復号する符号化データＣＤＡＴＡｒが到着していても、その符号化データＣＤＡＴＡｒの復号タイミングと、その符号化データＣＤＡＴＡの復号タイミングの適正化を図ることが可能になっている。
即ち、ビデオＤＴＳ補正部３５による補正処理が可能なり、最終的に復号タイミングを一致させることができるようになる。
【００５９】
以上で明らかなように、この実施の形態２によれば、符号化回路５４，５５が、タイムスタンプ生成部６３，７３により生成されたビデオＤＴＳｒ，ＤＴＳが示す復号開始時刻に対して、オフセット設定部６４，７４から出力されたオフセットを加算する加算部６５，７５を搭載するように構成したので、ビデオデコーダ１２のビデオ復号部３６が復号する符号化データＣＤＡＴＡが、伝送遅延等の影響で、ビデオデコーダ１１のビデオ復号部２４が復号する符号化データＣＤＡＴＡｒより遅くに到着しても、適切に表示することができる効果を奏する。
【図面の簡単な説明】
【００６０】
【図１】この発明の実施の形態１による映像受信装置を示す構成図である。
【図２】この発明の実施の形態１による映像受信装置のビデオデコーダ１１，１２における復号タイミングを示す説明図である。
【図３】この発明の実施の形態２による映像送信装置を示す構成図である。
【図４】この発明の実施の形態２による映像受信装置のビデオデコーダ１１，１２における復号タイミングを示す説明図である。
【図５】特許文献１に開示されている映像送信装置を示す構成図である。
【図６】特許文献１に開示されている映像受信装置を示す構成図である。
【符号の説明】
【００６１】
１  映像送信装置、２  伝送装置（送信手段）、３  映像受信装置、１１  ビデオデコーダ、１２  ビデオデコーダ、１３  画面合成回路、１４  出力端子、２１  分離部、２２  ビデオバッファ、２３  ＳＴＣ再生部、２４  ビデオ復号部、３１  分離部（分離手段）、３２  ビデオバッファ、３３，３４  ＳＴＣ再生部（再生手段）、３５  ビデオＤＴＳ補正部（補正手段）、３６  ビデオ復号部（復号手段）、５１  入力端子、５２  画面分割回路（画面分割手段）、５３  時計回路、５４，５５  符号化回路（符号化器）、５６  再編成回路（送信手段）、６１，７１  ビデオ符号化部（符号化手段）、６２，７２  ＳＴＣ生成部（時刻基準生成手段）、６３，７３  タイムスタンプ生成部（タイムスタンプ生成手段）、６４，７４  オフセット設定部（補正値加算手段）、６５，７５  加算部（補正値加算手段）、６６，７６  多重化部（多重化手段）、１０１  入力端子、１０２  画面分割回路、１０３，１０４  符号化回路、１０５  時計回路、１０６，１０７  記録装置、１０８  再編成回路、１０９  伝送装置、１１１，１１２  再生装置、１１３，１１４  デコーダ、１１５  同期回路、１１６  遅延回路、１１７  画面合成回路、１１８  出力端子。
【図１】
2010141498.tif 000003
【図２】
2010141498.tif 000004
【図３】
2010141498.tif 000005
【図４】
2010141498.tif 000006
【図５】
2010141498.tif 000007
【図６】
2010141498.tif 000008