(57)【要約】  【課題】  ネットワーク上のトラフィックを悪化させず、通信コストを抑えて、高品質な映像を得ることができる符号化信号蓄積配信システムを提供する。  【解決手段】  サーバ蓄積器１０４０を有するサーバ１０００と、ルータ蓄積器２０４０を有するルータ２００００と、レシーバ蓄積器３０４０ｎを有するレシーバ３０００ｎと、を備え、レシーバ３０００ｎが特定の伝送符号化信号Ｓｔ（ｌ）の再配信要求をルータ２０００に送信し、ルータ２０００が前記伝送符号化信号Ｓｔ（ｌ）の再配信要求にしたがってルータ蓄積器２０４０に蓄積された伝送符号化信号Ｓｔ（ｌ）をレシーバ３０００ｎに送信することにより、再配信要求時に、伝送符号化信号Ｓｔ（ｌ）をサーバ１０００まで取りに行かずに、伝送符号化信号Ｓｔ（ｌ）を取得することができ、ネットワーク上のトラフィックを悪化させず、通信コストを抑えることができる。【選択図】  図１
2005295106.tif 000002
【特許請求の範囲】
【請求項１】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器と、
前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器と、
前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記３次動画像を復元させる３次符号化信号を合成する受信合成器と、
を備え、
前記分離送信器が、
前記１次符号化信号を入力する分離器入力手段と、
前記分離器入力手段で入力した１次符号化信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離手段と、
前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、
前記分離器多重化手段で多重化した伝送符号化信号を蓄積する分離器蓄積手段と、
前記伝送符号化信号を前記選択転送器に送信する分離器送信手段と、
を備え、
前記選択転送器が、
前記伝送符号化信号を前記分離送信器から受信する転送器受信手段と、
前記転送器受信手段で受信した伝送符号化信号を蓄積する転送器蓄積手段と、
前記伝送符号化信号を前記受信合成器に送信する転送器送信手段と、
を備え、
前記受信合成器が、
前記伝送符号化信号を前記選択転送器から受信する合成器受信手段と、
前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、
前記合成器分離手段で分離した基本符号化信号と拡張符号化信号と、を前記受信合成器に蓄積する合成器蓄積手段と、
前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成手段と、
前記合成器合成手段で合成した３次符号化信号を出力する合成器出力手段と、
前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信手段と、
を備え、
さらに、前記選択転送器が、
前記受信合成器から送信された伝送符号化信号の再配信要求を受信する転送器再配信要求受信手段と、を備え、
前記転送器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記受信合成器に送信し、
前記受信合成器の合成器受信手段が、前記再配信要求にしたがって前記選択転送器から送信された伝送符号化信号を受信することを特徴とする符号化信号蓄積配信システム。
【請求項２】
請求項１に記載の符号化信号蓄積配信システムにおいて、
前記選択転送器が、
前記転送器受信手段で受信した伝送符号化信号の中から前記選択転送器に蓄積する伝送符号化信号を選択する転送器蓄積信号選択手段を備え、
前記転送器蓄積手段が、前記選択した伝送符号化信号を蓄積することを特徴とする符号化信号蓄積配信システム。
【請求項３】
請求項１または請求項２に記載の符号化信号蓄積配信システムにおいて、
前記選択転送器が、
前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択手段を備え、
前記転送器送信手段が、前記転送器送信信号選択手段で選択した伝送符号化信号を送信することを特徴とする符号化信号蓄積配信システム。
【請求項４】
請求項３に記載の符号化信号蓄積配信システムにおいて、
前記選択転送器が、
前記転送器送信手段が送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶手段を備え、
前記転送器送信信号選択手段が、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とする符号化信号蓄積配信システム。
【請求項５】
請求項３または請求項４に記載の符号化信号蓄積配信システムにおいて、
前記受信合成器が、
前記合成器受信手段で受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶手段と、
前記合成器受信情報記憶手段で記憶した識別情報をもとに未受信の伝送符号化信号を検索する合成器未受信信号検索手段と、
を備え、
前記合成器再配信要求送信手段が、前記未受信の伝送符号化信号の再配信要求を前記選択転送器に送信し、
前記選択転送器の転送器再配信要求受信手段が、再送する前記伝送符号化信号が指定された再配信要求を前記受信合成器から受信し、
前記転送器送信信号選択手段が、前記再配信要求にしたがって再送する伝送符号化信号を選択し、
前記転送器送信手段が、前記転送器送信信号選択手段で選択した伝送符号化信号を送信することを特徴とする符号化信号蓄積配信システム。
【請求項６】
請求項５に記載の符号化信号蓄積配信システムにおいて、
前記選択転送器が、
前記再配信要求の中に前記選択転送器に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれている場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信手段を備え、
前記分離送信器が、
前記伝送符号化信号の再配信要求を前記選択転送器から受信する分離器再配信要求受信手段を備え、
前記分離器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記選択転送器に送信し、
前記選択転送器の転送器受信手段が、前記再配信要求にしたがって前記分離送信器から送信された伝送符号化信号を受信することを特徴とする符号化信号蓄積配信システム。
【請求項７】
請求項６に記載の符号化信号蓄積配信システムにおいて、
前記選択転送器の転送器受信手段が、前記分離送信器または他の選択転送器から、前記伝送符号化信号を受信し、
前記転送器送信手段が、前記伝送符号化信号を、前記受信合成器または他の選択転送器に、送信し、
前記転送器再配信要求受信手段が、前記受信合成器または他の選択転送器から、前記再配信要求を受信し、
前記転送器再配信要求送信手段が、前記蓄積外の伝送符号化信号の再配信要求を、他の選択転送器または前記分離送信器に、送信することを特徴とする符号化信号蓄積配信システム。
【請求項８】
請求項３から請求項７のいずれか１項に記載の符号化信号蓄積配信システムにおいて、
前記選択転送器の転送器送信信号選択手段が、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とする符号化信号蓄積配信システム。
【請求項９】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器と、
前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器と、
前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記３次動画像を復元させる３次符号化信号を合成する受信合成器と、
を備え、
前記分離送信器が、
前記１次符号化信号を入力する分離器入力手段と、
前記分離器入力手段で入力した１次符号化信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離手段と、
前記分離器分離手段で分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積手段と、
前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、
前記伝送符号化信号を前記選択転送器に送信する分離器送信手段と、
を備え、
前記選択転送器が、
前記伝送符号化信号を前記分離送信器から受信する転送器受信手段と、
前記転送器受信手段で受信した伝送符号化信号を蓄積する転送器蓄積手段と、
前記伝送符号化信号を前記受信合成器に送信する転送器送信手段と、
を備え、
前記受信合成器が、
前記伝送符号化信号を前記選択転送器から受信する合成器受信手段と、
前記合成器受信手段で受信した伝送符号化信号を前記受信合成器に蓄積する合成器蓄積手段と、
前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、
前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成手段と、
前記合成器合成手段で合成した３次符号化信号を出力する合成器出力手段と、
前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信手段と、
を備え、
さらに、前記選択転送器が、
前記受信合成器から送信された再配信要求を受信する転送器再配信要求受信手段と、を備え、
前記転送器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信し、
前記受信合成器の合成器受信手段が、前記再配信要求にしたがって前記選択転送器から送信された伝送符号化信号を受信することを特徴とする符号化信号蓄積配信システム。
【請求項１０】
請求項９に記載の符号化信号蓄積配信システムにおいて、
前記選択転送器が、
前記再配信要求の中に前記選択転送器に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれている場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信手段を備え、
前記分離送信器が、
前記伝送符号化信号の再配信要求を前記選択転送器から受信する分離器再配信要求受信手段を備え、
前記分離器多重化手段が、前記蓄積された基本符号化信号および拡張符号化信号から、前記再配信要求にしたがった前記伝送符号化信号を生成し、
前記分離器送信手段が、前記生成した伝送符号化信号を前記選択転送器に送信し、
前記選択転送器の転送器受信手段が、前記再配信要求にしたがって前記分離送信器から送信された伝送符号化信号を受信することを特徴とする符号化信号蓄積配信システム。
【請求項１１】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、前記複数の拡張符号化信号と、を任意に組み合わせて生成された伝送符号化信号を受信する転送器受信手段と、
前記転送器受信手段で受信した伝送符号化信号を蓄積する転送器蓄積手段と、
前記伝送符号化信号を送信する転送器送信手段と、
前記伝送符号化信号の再配信要求を受信する転送器再配信要求受信手段と、
を備え、
前記転送器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とする符号化信号選択転送装置。
【請求項１２】
請求項１１に記載の符号化信号選択転送装置において、
前記転送器受信手段で受信した伝送符号化信号の中から蓄積する伝送符号化信号を選択する転送器蓄積信号選択手段を備え、
前記転送器蓄積手段が、前記選択した伝送符号化信号を蓄積することを特徴とする符号化信号選択転送装置。
【請求項１３】
請求項１１または請求項１２に記載の符号化信号選択転送装置において、
前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択手段を備え、
前記転送器送信手段が、前記転送器送信信号選択手段で選択した伝送符号化信号を送信することを特徴とする符号化信号選択転送装置。
【請求項１４】
請求項１３に記載の符号化信号選択転送装置において、
前記転送器送信手段が送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶手段を備え、
前記転送器送信信号選択手段が、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とする符号化信号選択転送装置。
【請求項１５】
請求項１３または請求項１４に記載の符号化信号選択転送装置において、
前記転送器再配信要求受信手段が、再送する前記伝送符号化信号が指定された再配信要求を受信し、
前記転送器送信信号選択手段が、前記再配信要求にしたがって再送する伝送符号化信号を選択し、
前記転送器送信手段が、前記転送器送信信号選択手段で選択した伝送符号化信号を送信することを特徴とする符号化信号選択転送装置。
【請求項１６】
請求項１５に記載の符号化信号選択転送装置において、
前記再配信要求の中に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれている場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信手段を備え、
前記転送器受信手段が、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とする符号化信号選択転送装置。
【請求項１７】
請求項１６に記載の符号化信号選択転送装置において、
前記転送器受信手段が、前記伝送符号化信号を生成し送信する分離送信器または他の選択転送器から、前記伝送符号化信号を受信し、
前記転送器送信手段が、前記伝送符号化信号を、前記伝送符号化信号を受信し３次動画像を復元させる３次符号化信号を合成する受信合成器または他の選択転送器に、送信し、
前記転送器再配信要求受信手段が、前記受信合成器または他の選択転送器から、前記再配信要求を受信し、
前記転送器再配信要求送信手段が、前記蓄積外の伝送符号化信号の再配信要求を、他の選択転送器または前記分離送信器に、送信することを特徴とする符号化信号選択転送装置。
【請求項１８】
請求項１３から請求項１７のいずれか１項に記載の符号化信号選択転送装置において、
前記転送器送信信号選択手段が、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とする符号化信号選択転送装置。
【請求項１９】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信手段と、
前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、
前記合成器分離手段で分離した基本符号化信号と拡張符号化信号と、を蓄積する合成器蓄積手段と、
前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成手段と、
前記合成器合成手段で合成した３次符号化信号を出力する合成器出力手段と、
前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信手段と、
を備え、
前記合成器受信手段が、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とする符号化信号受信合成装置。
【請求項２０】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信手段と、
前記合成器受信手段で受信した伝送符号化信号を蓄積する合成器蓄積手段と、
前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、
前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成手段と、
前記合成器合成手段で合成した３次符号化信号を出力する合成器出力手段と、
前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信手段と、
を備え、
前記合成器受信手段が、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とする符号化信号受信合成装置。
【請求項２１】
請求項１９または請求項２０に記載の符号化信号受信合成装置において、
前記合成器受信手段で受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶手段と、
前記合成器受信情報記憶手段で記憶した識別情報をもとに未受信の伝送符号化信号を検索する合成器未受信信号検索手段と、
を備え、
前記合成器再配信要求送信手段が、前記未受信の伝送符号化信号の再配信要求を送信することを特徴とする符号化信号受信合成装置。
【請求項２２】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を入力する分離器入力手段と、
前記分離器入力手段で入力した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離手段と、
前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、
前記分離器多重化手段で多重化した伝送符号化信号を蓄積する分離器蓄積手段と、
前記伝送符号化信号を送信する分離器送信手段と、
を備えたことを特徴とする符号化信号分離送信装置。
【請求項２３】
請求項２２に記載の符号化信号分離送信装置において、
前記伝送符号化信号の再配信要求を受信する分離器再配信要求受信手段を備え、
前記分離器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とする符号化信号分離送信装置。
【請求項２４】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を入力する分離器入力手段と、
前記分離器入力手段で入力した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離手段と、
前記分離器分離手段で分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積手段と、
前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、
前記伝送符号化信号を送信する分離器送信手段と、
を備えたことを特徴とする符号化信号分離送信装置。
【請求項２５】
請求項２４に記載の符号化信号分離送信装置において、
前記伝送符号化信号の再配信要求を受信する分離器再配信要求受信手段を備え、
前記分離器多重化手段が、前記蓄積された基本符号化信号および拡張符号化信号から、前記再配信要求にしたがった前記伝送符号化信号を生成し、
前記分離器送信手段が、前記生成した伝送符号化信号を送信することを特徴とする符号化信号分離送信装置。
【請求項２６】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器を制御する分離送信器制御ステップと、
前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器を制御する選択転送器制御ステップと、
前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記３次動画像を復元させる３次符号化信号を合成する受信合成器を制御する受信合成器制御ステップと、
を備え、
前記分離送信器制御ステップが、
前記１次符号化信号を入力する分離器入力ステップと、
前記分離器入力ステップで入力した１次符号化信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離ステップと、
前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、
前記分離器多重化ステップで多重化した伝送符号化信号を蓄積する分離器蓄積ステップと、
前記伝送符号化信号を前記選択転送器に送信する分離器送信ステップと、
を備え、
前記選択転送器制御ステップが、
前記伝送符号化信号を前記分離送信器から受信する転送器受信ステップと、
前記転送器受信ステップで受信した伝送符号化信号を蓄積する転送器蓄積ステップと、
前記伝送符号化信号を前記受信合成器に送信する転送器送信ステップと、
を備え、
前記受信合成器制御ステップが、
前記伝送符号化信号を前記選択転送器から受信する合成器受信ステップと、
前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、
前記合成器分離ステップで分離した基本符号化信号と拡張符号化信号と、を前記受信合成器に蓄積する合成器蓄積ステップと、
前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成ステップと、
前記合成器合成ステップで合成した３次符号化信号を出力する合成器出力ステップと、
前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信ステップと、
を備え、
さらに、前記選択転送器制御ステップが、
前記受信合成器から送信された伝送符号化信号の再配信要求を受信する転送器再配信要求受信ステップと、を備え、
前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記受信合成器に送信し、
前記受信合成器制御ステップの合成器受信ステップが、前記再配信要求にしたがって前記選択転送器から送信された伝送符号化信号を受信することを特徴とする符号化信号蓄積配信方法。
【請求項２７】
請求項２６に記載の符号化信号蓄積配信方法において、
前記選択転送器制御ステップが、
前記転送器受信ステップで受信した伝送符号化信号の中から前記選択転送器に蓄積する伝送符号化信号を選択する転送器蓄積信号選択ステップを備え、
前記転送器蓄積ステップが、前記選択した伝送符号化信号を蓄積することを特徴とする符号化信号蓄積配信方法。
【請求項２８】
請求項２６または請求項２７に記載の符号化信号蓄積配信方法において、
前記選択転送器制御ステップが、
前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択ステップを備え、
前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とする符号化信号蓄積配信方法。
【請求項２９】
請求項２８に記載の符号化信号蓄積配信方法において、
前記選択転送器制御ステップが、
前記転送器送信ステップが送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶ステップを備え、
前記転送器送信信号選択ステップが、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とする符号化信号蓄積配信方法。
【請求項３０】
請求項２８または請求項２９に記載の符号化信号蓄積配信方法において、
前記受信合成器制御ステップが、
前記合成器受信ステップで受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶ステップと、
前記合成器受信情報記憶ステップで記憶した識別情報をもとに未受信の伝送符号化信号を検索する合成器未受信信号検索ステップと、
を備え、
前記合成器再配信要求送信ステップが、前記未受信の伝送符号化信号の再配信要求を前記選択転送器に送信し、
前記選択転送器制御ステップの転送器再配信要求受信ステップが、再送する前記伝送符号化信号が指定された再配信要求を前記受信合成器から受信し、
前記転送器送信信号選択ステップが、前記再配信要求にしたがって再送する伝送符号化信号を選択し、
前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とする符号化信号蓄積配信方法。
【請求項３１】
請求項３０に記載の符号化信号蓄積配信方法において、
前記選択転送器制御ステップが、
前記再配信要求の中に前記選択転送器に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれている場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信ステップを備え、
前記分離送信器制御ステップが、
前記伝送符号化信号の再配信要求を前記選択転送器から受信する分離器再配信要求受信ステップを備え、
前記分離器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記選択転送器に送信し、
前記選択転送器制御ステップの転送器受信ステップが、前記再配信要求にしたがって前記分離送信器から送信された伝送符号化信号を受信することを特徴とする符号化信号蓄積配信方法。
【請求項３２】
請求項３１に記載の符号化信号蓄積配信方法において、
前記選択転送器制御ステップの転送器受信ステップが、前記分離送信器または他の選択転送器から、前記伝送符号化信号を受信し、
前記転送器送信ステップが、前記伝送符号化信号を、前記受信合成器または他の選択転送器に、送信し、
前記転送器再配信要求受信ステップが、前記受信合成器または他の選択転送器から、前記再配信要求を受信し、
前記転送器再配信要求送信ステップが、前記蓄積外の伝送符号化信号の再配信要求を、他の選択転送器または前記分離送信器に、送信することを特徴とする符号化信号蓄積配信方法。
【請求項３３】
請求項２８から請求項３２のいずれか１項に記載の符号化信号蓄積配信方法において、
前記選択転送器制御ステップの転送器送信信号選択ステップが、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とする符号化信号蓄積配信方法。
【請求項３４】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器を制御する分離送信器制御ステップと、
前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器を制御する選択転送器制御ステップと、
前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記３次動画像を復元させる３次符号化信号を合成する受信合成器を制御する受信合成器制御ステップと、
を備え、
前記分離送信器制御ステップが、
前記１次符号化信号を入力する分離器入力ステップと、
前記分離器入力ステップで入力した１次符号化信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離ステップと、
前記分離器分離ステップで分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積ステップと、
前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、
前記伝送符号化信号を前記選択転送器に送信する分離器送信ステップと、
を備え、
前記選択転送器制御ステップが、
前記伝送符号化信号を前記分離送信器から受信する転送器受信ステップと、
前記転送器受信ステップで受信した伝送符号化信号を蓄積する転送器蓄積ステップと、
前記伝送符号化信号を前記受信合成器に送信する転送器送信ステップと、
を備え、
前記受信合成器制御ステップが、
前記伝送符号化信号を前記選択転送器から受信する合成器受信ステップと、
前記合成器受信ステップで受信した伝送符号化信号を前記受信合成器に蓄積する合成器蓄積ステップと、
前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、
前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成ステップと、
前記合成器合成ステップで合成した３次符号化信号を出力する合成器出力ステップと、
前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信ステップと、
を備え、
さらに、前記選択転送器制御ステップが、
前記受信合成器から送信された再配信要求を受信する転送器再配信要求受信ステップと、を備え、
前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信し、
前記受信合成器制御ステップの合成器受信ステップが、前記再配信要求にしたがって前記選択転送器から送信された伝送符号化信号を受信することを特徴とする符号化信号蓄積配信方法。
【請求項３５】
請求項３４に記載の符号化信号蓄積配信方法において、
前記選択転送器制御ステップが、
前記再配信要求の中に前記選択転送器に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれている場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信ステップを備え、
前記分離送信器制御ステップが、
前記伝送符号化信号の再配信要求を前記選択転送器から受信する分離器再配信要求受信ステップを備え、
前記分離器多重化ステップが、前記蓄積された基本符号化信号および拡張符号化信号から、前記再配信要求にしたがった前記伝送符号化信号を生成し、
前記分離器送信ステップが、前記生成した伝送符号化信号を前記選択転送器に送信し、
前記選択転送器制御ステップの転送器受信ステップが、前記再配信要求にしたがって前記分離送信器から送信された伝送符号化信号を受信することを特徴とする符号化信号蓄積配信方法。
【請求項３６】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、前記複数の拡張符号化信号と、を任意に組み合わせて生成された伝送符号化信号を受信する転送器受信ステップと、
前記転送器受信ステップで受信した伝送符号化信号を蓄積する転送器蓄積ステップと、
前記伝送符号化信号を送信する転送器送信ステップと、
前記伝送符号化信号の再配信要求を受信する転送器再配信要求受信ステップと、
を備え、
前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とする符号化信号選択転送方法。
【請求項３７】
請求項３６に記載の符号化信号選択転送方法において、
前記転送器受信ステップで受信した伝送符号化信号の中から蓄積する伝送符号化信号を選択する転送器蓄積信号選択ステップを備え、
前記転送器蓄積ステップが、前記選択した伝送符号化信号を蓄積することを特徴とする符号化信号選択転送方法。
【請求項３８】
請求項３６または請求項３７に記載の符号化信号選択転送方法において、
前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択ステップを備え、
前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とする符号化信号選択転送方法。
【請求項３９】
請求項３８に記載の符号化信号選択転送方法において、
前記転送器送信ステップが送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶ステップを備え、
前記転送器送信信号選択ステップが、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とする符号化信号選択転送方法。
【請求項４０】
請求項３８または請求項３９に記載の符号化信号選択転送方法において、
前記転送器再配信要求受信ステップが、再送する前記伝送符号化信号が指定された再配信要求を受信し、
前記転送器送信信号選択ステップが、前記再配信要求にしたがって再送する伝送符号化信号を選択し、
前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とする符号化信号選択転送方法。
【請求項４１】
請求項４０に記載の符号化信号選択転送方法において、
前記再配信要求の中に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれている場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信ステップを備え、
前記転送器受信ステップが、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とする符号化信号選択転送方法。
【請求項４２】
請求項３８から請求項４１のいずれか１項に記載の符号化信号選択転送方法において、
前記転送器送信信号選択ステップが、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とする符号化信号選択転送方法。
【請求項４３】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信ステップと、
前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、
前記合成器分離ステップで分離した基本符号化信号と拡張符号化信号と、を蓄積する合成器蓄積ステップと、
前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成ステップと、
前記合成器合成ステップで合成した３次符号化信号を出力する合成器出力ステップと、
前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信ステップと、
を備え、
前記合成器受信ステップが、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とする符号化信号受信合成方法。
【請求項４４】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信ステップと、
前記合成器受信ステップで受信した伝送符号化信号を蓄積する合成器蓄積ステップと、
前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、
前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成ステップと、
前記合成器合成ステップで合成した３次符号化信号を出力する合成器出力ステップと、
前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信ステップと、
を備え、
前記合成器受信ステップが、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とする符号化信号受信合成方法。
【請求項４５】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を入力する分離器入力ステップと、
前記分離器入力ステップで入力した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離ステップと、
前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、
前記分離器多重化ステップで多重化した伝送符号化信号を蓄積する分離器蓄積ステップと、
前記伝送符号化信号を送信する分離器送信ステップと、
を備えたことを特徴とする符号化信号分離送信方法。
【請求項４６】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を入力する分離器入力ステップと、
前記分離器入力ステップで入力した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離ステップと、
前記分離器分離ステップで分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積ステップと、
前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、
前記伝送符号化信号を送信する分離器送信ステップと、
を備えたことを特徴とする符号化信号分離送信方法。
【請求項４７】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器を制御する分離送信器制御ステップと、
前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器を制御する選択転送器制御ステップと、
前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記３次動画像を復元させる３次符号化信号を合成する受信合成器を制御する受信合成器制御ステップと、
を備え、
前記分離送信器制御ステップが、
前記１次符号化信号を入力する分離器入力ステップと、
前記分離器入力ステップで入力した１次符号化信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離ステップと、
前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、
前記分離器多重化ステップで多重化した伝送符号化信号を蓄積する分離器蓄積ステップと、
前記伝送符号化信号を前記選択転送器に送信する分離器送信ステップと、
を備え、
前記選択転送器制御ステップが、
前記伝送符号化信号を前記分離送信器から受信する転送器受信ステップと、
前記転送器受信ステップで受信した伝送符号化信号を蓄積する転送器蓄積ステップと、
前記伝送符号化信号を前記受信合成器に送信する転送器送信ステップと、
を備え、
前記受信合成器制御ステップが、
前記伝送符号化信号を前記選択転送器から受信する合成器受信ステップと、
前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、
前記合成器分離ステップで分離した基本符号化信号と拡張符号化信号と、を前記受信合成器に蓄積する合成器蓄積ステップと、
前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成ステップと、
前記合成器合成ステップで合成した３次符号化信号を出力する合成器出力ステップと、
前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信ステップと、
を備え、
さらに、前記選択転送器制御ステップが、
前記受信合成器から送信された伝送符号化信号の再配信要求を受信する転送器再配信要求受信ステップと、を備え、
前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記受信合成器に送信し、
前記受信合成器制御ステップの合成器受信ステップが、前記再配信要求にしたがって前記選択転送器から送信された伝送符号化信号を受信することを特徴とする符号化信号蓄積配信プログラム。
【請求項４８】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器を制御する分離送信器制御ステップと、
前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器を制御する選択転送器制御ステップと、
前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記３次動画像を復元させる３次符号化信号を合成する受信合成器を制御する受信合成器制御ステップと、
を備え、
前記分離送信器制御ステップが、
前記１次符号化信号を入力する分離器入力ステップと、
前記分離器入力ステップで入力した１次符号化信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離ステップと、
前記分離器分離ステップで分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積ステップと、
前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、
前記伝送符号化信号を前記選択転送器に送信する分離器送信ステップと、
を備え、
前記選択転送器制御ステップが、
前記伝送符号化信号を前記分離送信器から受信する転送器受信ステップと、
前記転送器受信ステップで受信した伝送符号化信号を蓄積する転送器蓄積ステップと、
前記伝送符号化信号を前記受信合成器に送信する転送器送信ステップと、
を備え、
前記受信合成器制御ステップが、
前記伝送符号化信号を前記選択転送器から受信する合成器受信ステップと、
前記合成器受信ステップで受信した伝送符号化信号を前記受信合成器に蓄積する合成器蓄積ステップと、
前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、
前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成ステップと、
前記合成器合成ステップで合成した３次符号化信号を出力する合成器出力ステップと、
前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信ステップと、
を備え、
さらに、前記選択転送器制御ステップが、
前記受信合成器から送信された再配信要求を受信する転送器再配信要求受信ステップと、を備え、
前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信し、
前記受信合成器制御ステップの合成器受信ステップが、前記再配信要求にしたがって前記選択転送器から送信された伝送符号化信号を受信することを特徴とする符号化信号蓄積配信プログラム。
【請求項４９】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、前記複数の拡張符号化信号と、を任意に組み合わせて生成された伝送符号化信号を受信する転送器受信ステップと、
前記転送器受信ステップで受信した伝送符号化信号を蓄積する転送器蓄積ステップと、
前記伝送符号化信号を送信する転送器送信ステップと、
前記伝送符号化信号の再配信要求を受信する転送器再配信要求受信ステップと、
を備え、
前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とする符号化信号選択転送プログラム。
【請求項５０】
請求項４９に記載の符号化信号選択転送プログラムにおいて、
前記転送器受信ステップで受信した伝送符号化信号の中から蓄積する伝送符号化信号を選択する転送器蓄積信号選択ステップを備え、
前記転送器蓄積ステップが、前記選択した伝送符号化信号を蓄積することを特徴とする符号化信号選択転送プログラム。
【請求項５１】
請求項４９または請求項５０に記載の符号化信号選択転送プログラムにおいて、
前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択ステップを備え、
前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とする符号化信号選択転送プログラム。
【請求項５２】
請求項５１に記載の符号化信号選択転送プログラムにおいて、
前記転送器送信ステップが送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶ステップを備え、
前記転送器送信信号選択ステップが、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とする符号化信号選択転送プログラム。
【請求項５３】
請求項５１または請求項５２に記載の符号化信号選択転送プログラムにおいて、
前記転送器再配信要求受信ステップが、再送する前記伝送符号化信号が指定された再配信要求を受信し、
前記転送器送信信号選択ステップが、前記再配信要求にしたがって再送する伝送符号化信号を選択し、
前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とする符号化信号選択転送プログラム。
【請求項５４】
請求項５３に記載の符号化信号選択転送プログラムにおいて、
前記再配信要求の中に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれている場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信ステップを備え、
前記転送器受信ステップが、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とする符号化信号選択転送プログラム。
【請求項５５】
請求項５１から請求項５４のいずれか１項に記載の符号化信号選択転送プログラムにおいて、
前記転送器送信信号選択ステップが、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とする符号化信号選択転送プログラム。
【請求項５６】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信ステップと、
前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、
前記合成器分離ステップで分離した基本符号化信号と拡張符号化信号と、を蓄積する合成器蓄積ステップと、
前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成ステップと、
前記合成器合成ステップで合成した３次符号化信号を出力する合成器出力ステップと、
前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信ステップと、
を備え、
前記合成器受信ステップが、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とする符号化信号受信合成プログラム。
【請求項５７】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信ステップと、
前記合成器受信ステップで受信した伝送符号化信号を蓄積する合成器蓄積ステップと、
前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、
前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成ステップと、
前記合成器合成ステップで合成した３次符号化信号を出力する合成器出力ステップと、
前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信ステップと、
を備え、
前記合成器受信ステップが、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とする符号化信号受信合成プログラム。
【請求項５８】
請求項５６または請求項５７に記載の符号化信号受信合成プログラムにおいて、
前記合成器受信ステップで受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶ステップと、
前記合成器受信情報記憶ステップで記憶した識別情報をもとに未受信の伝送符号化信号を検索する合成器未受信信号検索ステップと、
を備え、
前記合成器再配信要求送信ステップが、前記未受信の伝送符号化信号の再配信要求を送信することを特徴とする符号化信号受信合成プログラム。
【請求項５９】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を入力する分離器入力ステップと、
前記分離器入力ステップで入力した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離ステップと、
前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、
前記分離器多重化ステップで多重化した伝送符号化信号を蓄積する分離器蓄積ステップと、
前記伝送符号化信号を送信する分離器送信ステップと、
を備えたことを特徴とする符号化信号分離送信プログラム。
【請求項６０】
請求項５９に記載の符号化信号分離送信プログラムにおいて、
前記伝送符号化信号の再配信要求を受信する分離器再配信要求受信ステップを備え、
前記分離器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とする符号化信号分離送信プログラム。
【請求項６１】
複数の画像情報から構成される１次動画像を符号化した１次符号化信号を入力する分離器入力ステップと、
前記分離器入力ステップで入力した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離ステップと、
前記分離器分離ステップで分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積ステップと、
前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、
前記伝送符号化信号を送信する分離器送信ステップと、
を備えたことを特徴とする符号化信号分離送信プログラム。
【請求項６２】
請求項６１に記載の符号化信号分離送信プログラムにおいて、
前記伝送符号化信号の再配信要求を受信する分離器再配信要求受信ステップを備え、
前記分離器多重化ステップが、前記蓄積された基本符号化信号および拡張符号化信号から、前記再配信要求にしたがった前記伝送符号化信号を生成し、
前記分離器送信ステップが、前記生成した伝送符号化信号を送信することを特徴とする符号化信号分離送信プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像のスケーラブル伝送を行うとともに、蓄積することができる符号化信号蓄積配信システム、符号化信号選択転送装置、符号化信号分離送信装置および符号化信号受信合成装置に関するものである。
【背景技術】
【０００２】
動画像をディジタル化する技術において、発生する膨大な情報量を圧縮して符号化するための方式として、ディジタルビデオおよび付随するオーディオに対する符号化方式の標準規格ＩＳＯ／ＩＥＣ  １３８１８（通称、「ＭＰＥＧ−２」(Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔ  Ｇｒｏｕｐ  Ｐｈａｓｅ  ２)）がある。このようにして生成されたＭＰＥＧ−２の規格に準拠したビットストリーム（以後、「ＭＰＥＧ−２ビットストリーム」と呼ぶ）は、通信やテレビジョン放送など幅広い分野で使用されている。
【０００３】
ＭＰＥＧ−２ビットストリームは階層構造を有し、最上位のシーケンスレイヤからＧＯＰ（Ｇｒｏｕｐ  ｏｆ  Ｐｉｃｔｕｒｅｓ）レイヤ、ピクチャレイヤ、スライスレイヤ、マクロブロックレイヤおよびブロックレイヤの順の各レイヤからなる。
【０００４】
ＭＰＥＧ−２においては、一連の複数の画面から構成される動画像において、各画面を一旦フレームメモリに保存し、フレーム間の差分を取ることによって時間軸方向の冗長度を削減し、さらに、各フレームを構成する複数の画素を離散コサイン変換（以後、「ＤＣＴ」と略す）等の直交変換処理を行うことにより空間軸方向の冗長度を削減することにより、効率良い動画像圧縮符号化を実現している。
【０００５】
符号化された信号は、復号器に送られて復号され再生される。復号器では、画面を再生し第１のフレームメモリに保存し、差分情報に基づいて次に続くべき画面を予測し第２のフレームメモリに保存し、２つのフレームからその間に挿入される画面をさらに予測して、一連の画面を構成し動画像を再生する。このような手法は双方向予測と呼ばれる。
【０００６】
ＭＰＥＧ−２では、この双方向予測を実現するために、Ｉピクチャ、ＰピクチャおよびＢピクチャという３つのタイプを規定している。Ｉピクチャは、イントラ符号化ピクチャの略であり、他のピクチャとは独立して静止画として符号化される画面のことである。Ｐピクチャは、順方向予測符号化ピクチャの略であり、時間的に過去に位置するＩまたはＰピクチャに基づいて予測符号化される画面のことである。Ｂピクチャは、双方向予測符号化ピクチャの略であり、時間的に前後に位置するＩまたはＰピクチャを用いて順方向、逆方向または双方向のピクチャに基づいて予測符号化される画面のことである。すなわち、ＩピクチャおよびＰピクチャを先に符号化処理した後、その間に挿入されるＢピクチャが符号化される。
【０００７】
符号化器で符号化されたＭＰＥＧ−２ビットストリームは、所定の転送速度で伝送路に送出され、該伝送路上の復号器に入力されて復号され再生される。しかしながら、動画像を符号化して発生する情報量は一定ではない。特にシーンチェンジ時には、情報量は一気に増大する。このように一定しない符号化信号を固定レートの伝送路に送出するために、予め送信用バッファのレベル以上の情報量が発生しないように符号化データのレート制御を行う必要がある。
【０００８】
ＭＰＥＧ−２では、ＩＳＯ／ＩＥＣ  ＪＴＣ１／ＳＣ２９／ＷＧ１１／Ｎ０４００  Ｔｅｓｔ  Ｍｏｄｅｌ  ５  （Ａｐｒｉｌ，  １９９３）（以後、「ＴＭ５」と略す）にレート制御方式が記載されている。
【０００９】
ＭＰＥＧ−２のＴＭ５のレート制御では、ステップ１で、まずピクチャタイプ毎にＧＯＰ内の未符号化ピクチャに対する割り当て符号量Ｒに基づいてビット配分する。ステップ２で、マクロブロック単位に符号化処理を行う際に使用する量子化スケールを、ビット配分に基づいて算出した仮想バッファ占有量から算出する。
【００１０】
また、ＭＰＥＧ−２以外の圧縮フォーマットを有する復号器や、異なる転送速度の伝送路に接続された復号器も多数存在するため、異なる圧縮フォーマットや異なる転送速度にＭＰＥＧ−２ビットストリームを変換する動画圧縮符号化信号変換装置が必要となる。これを実現するための装置が所謂トランスコーダである。符号化器から伝送された画像圧縮符号化信号は、トランスコーダで適切な信号に変換され、各復号器に信号が供給される。
【００１１】
図２９に一般的な従来のトランスコーダ５０の第１例を示す。従来のトランスコーダ５０は、第１ビットレートを有する第１伝送路（図示なし）に接続され、第１ＭＰＥＧ−２ビットストリームｂ１を入力する可変長復号部（ＶＬＤ）５１と、逆量子化器５３と、量子化器５５と、第２ビットレートを有する第２伝送路（図示なし）に接続され、第２ＭＰＥＧ−２ビットストリームｂ２を出力するＶＬＣ５７と、量子化器５５で発生する符号量を制御するレート制御部５９と、を備えている。第２ビットレートは第１ビットレートより低い転送速度である。
【００１２】
ＶＬＤ５１および逆量子化器５３によって、第１ＭＰＥＧ−２ビットストリームｂ１をマクロブロック単位にＤＣＴ係数領域まで復号し、量子化器５５およびＶＬＣ５７によって、得られたＤＣＴ係数信号を符号化して、第１ＭＰＥＧ−２ビットストリームより少ない符号量を有する第２ＭＰＥＧ−２ビットストリームｂ２を生成するものである。
【００１３】
量子化器５５における量子化処理では、ＤＣＴ変換で得られた係数を所定の量子化ステップで除算する。これにより画像信号は圧縮される。この量子化ステップは、所定の量子化テーブルに含まれる複数の量子化マトリクス値に量子化スケールを乗算して求められる。
【００１４】
トランスコーダ５０では、第１ＭＰＥＧ−２ビットストリームｂ１内のシーケンスレイヤ、ＧＯＰレイヤ、ピクチャレイヤ、スライスレイヤおよびマクロブロックレイヤの符号化情報を殆ど再利用する。基本的にブロックレイヤのＤＣＴ係数の変換およびブロックレイヤの変換に伴い修正が必要なマクロブロックレイヤの符号の変換の処理のみが行われる。
【００１５】
このように構成されたトランスコーダ５０において、レート制御部５９はＭＰＥＧ−２のＴＭ５に記載されているレート制御を行う。
【００１６】
図３０に従来のトランスコーダ５０のレート制御処理のフローチャートを示す。同図に示されるように、従来のレート制御処理はステップＡ１〜Ａ１４からなる。
【００１７】
ステップＡ１で、変数ｎを１に設定する。ここで、変数ｎは、入力画像信号に含まれる複数のピクチャに付けられた番号を示し、以後、ｎ番目のピクチャをpic(n)と示す。
【００１８】
続くステップＡ２で、Ｉ、ＰおよびＢピクチャの複雑さを示す指標Ｘi、ＸpおよびＸbを下記の式（ａ１）、式（ａ２）および式（ａ３）により算出する。
【００１９】
Ｘi＝Ｓi×Ｑi                                          …式（ａ１）
Ｘp＝Ｓp×Ｑp                                          …式（ａ２）
Ｘb＝Ｓb×Ｑb                                          …式（ａ３）
ここで、Ｓi、ＳpおよびＳbはそれぞれＩ、ＰおよびＢピクチャの発生符号量であり、Ｑi、ＱpおよびＱbは、それぞれＩ、ＰおよびＢピクチャ内の全マクロブロックの量子化スケールコードの平均値である平均量子化パラメータである。ただし、平均量子化パラメータは１〜３１の範囲に正規化されている。
【００２０】
この画面の複雑さ指標Ｘi、ＸpおよびＸbは、符号化情報量が多く発生するような画像、すなわち低い圧縮率の画像に対して大きくなり、逆に高い圧縮率の画像に対しては小さくなる。
【００２１】
また、Ｉ、ＰおよびＢピクチャの画面の複雑さを示すパラメータＸi、ＸpおよびＸbの初期値は、次式（ａ４）、式（ａ５）および式（ａ６）でそれぞれ与えられる。
【００２２】
Ｘi＝１６０×target_Bitrate／１１５                    …式（ａ４）
Ｘp＝６０×target_Bitrate／１１５                      …式（ａ５）
Ｘb＝４２×target_Bitrate／１１５                      …式（ａ６）
ここで、target_Bitrateは、トランスコーダ５０の目標ビットレートである。
【００２３】
続くステップＡ３で、ＧＯＰ内のＩ、ＰおよびＢピクチャに対する割り当て符号量Ｔi、ＴpおよびＴbを、次式（ａ７）、式（ａ８）および式（ａ９）によりそれぞれ算出する。ただし、ＮｐおよびＮｂは、それぞれＧＯＰ内の未符号化のＰおよびＢピクチャの数を示す。
【００２４】
【数１】
2005295106.tif 000003
【００２５】
ここで、ＫｐおよびＫｂは、Ｉピクチャの量子化スケールコードを基準としたＰおよびＢピクチャの量子化スケールコードの比率を示し、Ｋp＝１．０およびＫb＝１．４になる場合に、常に全体の画質が最適化されると仮定する。
【００２６】
続くステップＡ４で、変数ｎが１か否かの判定がなされる。すなわち、符号化対象のピクチャが１番目のピクチャpic(1)か否かの判定がなされる。１番目のピクチャの場合、ステップＡ５へ進み、１番目のピクチャでない場合はステップＡ６へ進む。ステップＡ５では、次式（ａ１０）によりＧＯＰ内の一番初めのピクチャpic(1)を符号化する時のＧＯＰ内の未符号化ピクチャに対する割り当て符号量Ｒを求める。
【００２７】
Ｒ＝target_Bitrate×Ｎ／picture_rate＋Ｒ              …式（ａ１０）
ここで、ＮはＧＯＰ内のピクチャの総数、picture_rateは、入力画像の時間解像度を示す値であり、１秒間に復号され表示される画面の枚数を示す。
【００２８】
ステップＡ６では、ＧＯＰ内の未符号化ピクチャに対する割り当て符号量Ｒを（ｎ−１）番目のピクチャpic(n-1)が符号化された時のＩ、ＰおよびＢピクチャの発生符号量Ｓi、ＳpまたはＳbに基づいて、次式（ａ１１）、式（ａ１２）および式（ａ１３）の何れかにより更新する。
【００２９】
Ｒ＝Ｒ−Ｓi                                            …式（ａ１１）
Ｒ＝Ｒ−Ｓp                                            …式（ａ１２）
Ｒ＝Ｒ−Ｓb                                            …式（ａ１３）
ステップＡ５およびＡ６はともにステップＡ７へ進み、変数ｊに１を設定する。ここで、変数ｊは、１ピクチャ内の複数のマクロブロックに付けられた番号を示し、以後、ｊ番目のマクロブロックをMB(j)と示す。
【００３０】
続くステップＡ８で、Ｉ、ＰおよびＢピクチャ内のｊ番目のマクロブロックMB(j)を符号化する時の仮想バッファの占有量ｄi(j)、ｄp(j)およびｄb(j)が次式（ａ１４）、式（ａ１５）および式（ａ１６）によりそれぞれ算出される。
【００３１】
【数２】
2005295106.tif 000004
【００３２】
ここで、Ｂ(j-1)は、（ｊ−１）番目のマクロブロックMB(j-1)までの全マクロブロックの発生符号量である。
【００３３】
また、ｄi(0)、ｄp(0)およびｄb(0)は、それぞれＩ、ＰおよびＢピクチャの仮想バッファ占有量の初期値であり、次式（ａ１７）、式（ａ１８）および式（ａ１９）でそれぞれ与えられる。
【００３４】
ｄi(0)＝１０×ｒ／３１                                …式（ａ１７）
ｄp(0)＝Ｋp×ｄi(0)                                   …式（ａ１８）
ｄb(0)＝Ｋb×ｄi(0)                                   …式（ａ１９）
ここで、ｒはリアクションパラメータと呼ばれ、下記の式（ａ２０）で示され、フィードバックループの応答速度を制御する。
【００３５】
ｒ＝２×target_Bitrate／picture_rate                  …式（ａ２０）
また、Ｉ、ＰおよびＢピクチャ符号化終了時の仮想バッファ占有量、すなわちＮＭＢ番目のマクロブロックMB(NMB)を符号化したときの仮想バッファ占有量ｄi(NMB)、ｄp(NMB)およびｄb(NMB)は、ピクチャタイプ毎に、次回符号化する時の仮想バッファ占有量の初期値ｄi(0)、ｄp(0)およびｄb(0)として用いられる。
【００３６】
続くステップＡ９で、上記の仮想バッファの占有量ｄ(j)に基づいて、各ピクチャ毎にｊ番目のマクロブロックMB(j)に対する量子化スケールコードＱ(j)を次式（ａ２１）により求める。
【００３７】
Ｑ(j)＝ｄ(j)×３１／ｒ                                …式（ａ２１）
続くステップＡ１０で、ステップＡ９で算出された量子化スケールコードＱ(j)を使用してｊ番目のマクロブロックMB(j)を量子化する。続くステップＡ１１で、変数ｊをインクリメントして、ステップＡ１２へ進み、変数ｊがマクロブロック総数ＮＭＢを超えているか否かの判定をする。ここで、ＮＭＢはｎ番目のピクチャpic(n)内に含まれるマクロブロックの総数である。変数ｊがマクロブロック総数ＮＭＢを超えていない場合は、ステップＡ８へ戻り、変数ｊがマクロブロック総数ＮＭＢを超えている場合は、ステップＡ１３へ進む。
【００３８】
このようにして、変数ｊは、ステップＡ８〜Ａ１１の符号化処理を繰り返すためのループカウンタとしても使用される。これにより、ｎ番目のピクチャpic(n)内の１番目のマクロブロックMB(1)からＮＭＢ番目のマクロブロックMB(NMB)まで全てのマクロブロックに対して順次符号化処理を行うことができる。
【００３９】
ステップＡ１３で、変数ｎをインクリメントして、ステップＡ１４へ進み、変数ｎが符号化対象のピクチャ総数ＮＰＩＣを超えているか否かの判定をする。ここで、変数ｎがピクチャ総数ＮＰＩＣを超えていない場合は、ステップＡ２へ戻り、変数ｎがピクチャ総数ＮＰＩＣを超えている場合は、本処理を終了する。
【００４０】
このように第１のトランスコーダ５０では、ＩおよびＰピクチャ周期などのような画像構造に関する情報を持ち得ないために、図３０に示されたＴＭ５のレート制御のような、画像ＧＯＰ構造などの情報に基づいてビット配分を行う方法は、入力画像構造を仮定しなければ行うことができない。
【００４１】
そこで、ＧＯＰ構造を仮定せずにレート制御を行う方法を採用した例として、図３１に示される第２の従来のトランスコーダ６０がある。同図に示されるように、第２の従来のトランスコーダ６０は、上記第１の従来のトランスコーダ５０の構成に加えて、遅延回路６１と、ビットレート比率計算部６３と、入力符号量積算部６５と、差分符号量計算部６７と、目標出力符号量更新部６９と、量子化スケールコード算出部７１と、を備えている。
【００４２】
このように構成されたトランスコーダ６０の処理の流れを図３２に示す。同図に示されるように、トランスコーダ６０の処理は、ステップＢ１〜Ｂ１３からなる。ステップＢ６〜Ｂ１３は、上記第１従来例に示されたレート処理のステップＡ７〜Ａ１４と同じである。但し、ステップＢ７では、目標出力符号量更新部６９で算出された目標出力符号量Ｔoutに基づいて、仮想バッファ占有量の算出がなされる。
【００４３】
また、同様にＧＯＰ構造を仮定せずにレート制御を行う方法を採用した別の例として、図３３および図３４に従来のトランスコーダの第３例を示す。図３３に示されるように、第３の従来のトランスコーダ８０は、第１ビットレートを有する第１伝送路に接続され、入力ビットストリームｂ３を入力するＶＬＤ８１と、第１の従来のトランスコーダ５０と同じ、逆量子化器５３と、量子化器５５と、ＶＬＣ５７と、を含み、図３１のトランスコーダ６０と同じビットレート比率計算部６３と、差分符号量計算部６７と、を含み、さらに、目標出力符号量更新部８３と、量子化スケールコード算出部８５と、を備えている。
【００４４】
第３の従来のトランスコーダ８０では、ビットストリームｂ３に予め符号量を情報として記述しておき、その情報に基づいてレート制御を行うものである。
【００４５】
しかしながら、トランスコーダは符号化処理後の信号を対象としているために、符号化前の元の信号は知ることはできない。したがって、符号量制御においては、トランスコード処理後の画像自身の歪みではなく、再量子化処理によって新たに発生する歪みに着目して、この歪みを抑制することにより、画質の低下を抑制しながら符号量の削減を実現しなければならない。
【００４６】
そこで、本願出願人は、先に復号量子化パラメータおよび再量子化パラメータに依存した再量子化レート歪み関数を考慮することにより、復号量子化パラメータ、および前段で算出された量子化パラメータに基づいて最適な量子化パラメータの算出を実現する動画像圧縮符号化信号変換方法、装置および変換プログラムを記録した媒体を提案した（例えば、特許文献１参照）。
【００４７】
このものは、逆量子化を行う逆量子化器と、再量子化を行う量子化器と、を備えたトランスコーダにおいて、入力量子化パラメータに基づくレート歪み関数を考慮し、量子化パラメータを切り換える量子化パラメータ切り換え部を設けることにより、量子化係数領域データから再量子化係数領域データへの変換時における誤差を極力抑えることができる。
【００４８】
このように、トランスコーダは様々な利用環境に適した形へのビットストリーム変換を実現する処理器である。
【００４９】
さらに、さまざまな帯域の混在するネットワークにおいて、利用環境に適した映像ストリームを生成し提供するスケーラビリティを実現する技術として、ビットレートスケーリング方式、階層符号化方式が存在する。
【００５０】
例えば、ネットワーク上の各ルータに設置されたビットレートスケーリングトランスコーダにおいて、要求されるビットレートに応じ、ビットレート削減によるストリーム変換を実現する。これにより、ネットワークの変動に対応した映像のスケーラビリティを実現している。
【特許文献１】特開２００１−１６９２８３号公報
【発明の開示】
【発明が解決しようとする課題】
【００５１】
しかしながら、ビットレートスケーリングトランスコーダ自らがレート制御とストリーム変換を行うため、ルータに高度な処理が要求されるため多くの負荷がかかる。
【００５２】
また、サーバにおいてあらかじめ入力されたストリームを、階層構造をもつストリームに変換し、ルータにおける階層選択によりスケーラビリティを実現する。これにより、トランスコーダによるレート制御の必要はなくなり、ネットワーク上の各ルータにおける信号処理等の負荷もなくなる。しかしながら、階層構造に変換されたストリーム間に依存関係があるため、各階層に優先順位がつけられており、階層選択時に優先順位を考慮した制御を行う必要があるという問題がある。
【００５３】
さらに、レシーバ側で映像の品質を向上させようとした場合、毎回サーバまでストリームを取りに行かなければならず、ネットワーク上のトラフィックの悪化や通信コストがかかってしまうという問題点があった。
【００５４】
本発明は、このような従来の問題を解決するためになされたもので、サーバにおける分離器において、独立した分離ストリームを生成し、帯域選択機能を有するルータにおいて、ネットワーク状態に応じた伝送路選択を行うとともに、ルータ等でストリームを蓄積して、再配信の際にはストリームを蓄積しているルータから配信を行うことにより、映像のスケーラブル伝送を行うとともに、通信コストの削減を行うことができる符号化信号蓄積配信システム、符号化信号選択転送装置、符号化信号分離送信装置、符号化信号受信合成装置を提供するものである。
【課題を解決するための手段】
【００５５】
本発明の符号化信号蓄積配信システムは、複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器と、前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器と、前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記３次動画像を復元させる３次符号化信号を合成する受信合成器と、を備え、
前記分離送信器が、前記１次符号化信号を入力する分離器入力手段と、前記分離器入力手段で入力した１次符号化信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離手段と、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、前記分離器多重化手段で多重化した伝送符号化信号を蓄積する分離器蓄積手段と、前記伝送符号化信号を前記選択転送器に送信する分離器送信手段と、を備え、
前記選択転送器が、前記伝送符号化信号を前記分離送信器から受信する転送器受信手段と、前記転送器受信手段で受信した伝送符号化信号を蓄積する転送器蓄積手段と、前記伝送符号化信号を前記受信合成器に送信する転送器送信手段と、を備え、
前記受信合成器が、前記伝送符号化信号を前記選択転送器から受信する合成器受信手段と、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、前記合成器分離手段で分離した基本符号化信号と拡張符号化信号と、を前記受信合成器に蓄積する合成器蓄積手段と、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成手段と、前記合成器合成手段で合成した３次符号化信号を出力する合成器出力手段と、前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信手段と、を備え、
さらに、前記選択転送器が、前記受信合成器から送信された伝送符号化信号の再配信要求を受信する転送器再配信要求受信手段と、を備え、前記転送器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記受信合成器に送信し、前記受信合成器の合成器受信手段が、前記再配信要求にしたがって前記選択転送器から送信された伝送符号化信号を受信することを特徴とした構成を有している。
【００５６】
また、本発明の符号化信号蓄積配信システムは、請求項１に記載の符号化信号蓄積配信システムにおいて、前記選択転送器が、前記転送器受信手段で受信した伝送符号化信号の中から前記選択転送器に蓄積する伝送符号化信号を選択する転送器蓄積信号選択手段を備え、前記転送器蓄積手段が、前記選択した伝送符号化信号を蓄積することを特徴とした構成を有している。
【００５７】
さらに、本発明の符号化信号蓄積配信システムは、請求項１または請求項２に記載の符号化信号蓄積配信システムにおいて、前記選択転送器が、前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択手段を備え、前記転送器送信手段が、前記転送器送信信号選択手段で選択した伝送符号化信号を送信することを特徴とした構成を有している。
【００５８】
さらに、本発明の符号化信号蓄積配信システムは、請求項３に記載の符号化信号蓄積配信システムにおいて、前記選択転送器が、前記転送器送信手段が送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶手段を備え、前記転送器送信信号選択手段が、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とした構成を有している。
【００５９】
さらに、本発明の符号化信号蓄積配信システムは、請求項３または請求項４に記載の符号化信号蓄積配信システムにおいて、前記受信合成器が、前記合成器受信手段で受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶手段と、前記合成器受信情報記憶手段で記憶した識別情報をもとに未受信の伝送符号化信号を検索する合成器未受信信号検索手段と、を備え、前記合成器再配信要求送信手段が、前記未受信の伝送符号化信号の再配信要求を前記選択転送器に送信し、前記選択転送器の転送器再配信要求受信手段が、再送する前記伝送符号化信号が指定された再配信要求を前記受信合成器から受信し、前記転送器送信信号選択手段が、前記再配信要求にしたがって再送する伝送符号化信号を選択し、前記転送器送信手段が、前記転送器送信信号選択手段で選択した伝送符号化信号を送信することを特徴とした構成を有している。
【００６０】
さらに、本発明の符号化信号蓄積配信システムは、請求項５に記載の符号化信号蓄積配信システムにおいて、前記選択転送器が、前記再配信要求の中に前記選択転送器に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれている場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信手段を備え、前記分離送信器が、前記伝送符号化信号の再配信要求を前記選択転送器から受信する分離器再配信要求受信手段を備え、前記分離器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記選択転送器に送信し、前記選択転送器の転送器受信手段が、前記再配信要求にしたがって前記分離送信器から送信された伝送符号化信号を受信することを特徴とした構成を有している。
【００６１】
さらに、本発明の符号化信号蓄積配信システムは、請求項６に記載の符号化信号蓄積配信システムにおいて、前記選択転送器の転送器受信手段が、前記分離送信器または他の選択転送器から、前記伝送符号化信号を受信し、前記転送器送信手段が、前記伝送符号化信号を、前記受信合成器または他の選択転送器に、送信し、前記転送器再配信要求受信手段が、前記受信合成器または他の選択転送器から、前記再配信要求を受信し、前記転送器再配信要求送信手段が、前記蓄積外の伝送符号化信号の再配信要求を、他の選択転送器または前記分離送信器に、送信することを特徴とした構成を有している。
【００６２】
さらに、本発明の符号化信号蓄積配信システムは、請求項３から請求項７のいずれか１項に記載の符号化信号蓄積配信システムにおいて、前記選択転送器の転送器送信信号選択手段が、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とした構成を有している。
【００６３】
さらに、本発明の符号化信号蓄積配信システムは、複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器と、前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器と、前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記３次動画像を復元させる３次符号化信号を合成する受信合成器と、を備え、
前記分離送信器が、前記１次符号化信号を入力する分離器入力手段と、前記分離器入力手段で入力した１次符号化信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離手段と、前記分離器分離手段で分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積手段と、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、前記伝送符号化信号を前記選択転送器に送信する分離器送信手段と、を備え、
前記選択転送器が、前記伝送符号化信号を前記分離送信器から受信する転送器受信手段と、前記転送器受信手段で受信した伝送符号化信号を蓄積する転送器蓄積手段と、前記伝送符号化信号を前記受信合成器に送信する転送器送信手段と、を備え、
前記受信合成器が、前記伝送符号化信号を前記選択転送器から受信する合成器受信手段と、前記合成器受信手段で受信した伝送符号化信号を前記受信合成器に蓄積する合成器蓄積手段と、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成手段と、前記合成器合成手段で合成した３次符号化信号を出力する合成器出力手段と、前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信手段と、を備え、
さらに、前記選択転送器が、前記受信合成器から送信された再配信要求を受信する転送器再配信要求受信手段と、を備え、前記転送器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信し、前記受信合成器の合成器受信手段が、前記再配信要求にしたがって前記選択転送器から送信された伝送符号化信号を受信することを特徴とした構成を有している。
【００６４】
さらに、本発明の符号化信号蓄積配信システムは、請求項９に記載の符号化信号蓄積配信システムにおいて、前記選択転送器が、前記再配信要求の中に前記選択転送器に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれている場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信手段を備え、前記分離送信器が、前記伝送符号化信号の再配信要求を前記選択転送器から受信する分離器再配信要求受信手段を備え、前記分離器多重化手段が、前記蓄積された基本符号化信号および拡張符号化信号から、前記再配信要求にしたがった前記伝送符号化信号を生成し、前記分離器送信手段が、前記生成した伝送符号化信号を前記選択転送器に送信し、前記選択転送器の転送器受信手段が、前記再配信要求にしたがって前記分離送信器から送信された伝送符号化信号を受信することを特徴とした構成を有している。
【００６５】
また、本発明の符号化信号選択転送装置は、複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、前記複数の拡張符号化信号と、を任意に組み合わせて生成された伝送符号化信号を受信する転送器受信手段と、前記転送器受信手段で受信した伝送符号化信号を蓄積する転送器蓄積手段と、前記伝送符号化信号を送信する転送器送信手段と、前記伝送符号化信号の再配信要求を受信する転送器再配信要求受信手段と、を備え、前記転送器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とした構成を有している。
【００６６】
さらに、本発明の符号化信号選択転送装置は、請求項１１に記載の符号化信号選択転送装置において、前記転送器受信手段で受信した伝送符号化信号の中から蓄積する伝送符号化信号を選択する転送器蓄積信号選択手段を備え、前記転送器蓄積手段が、前記選択した伝送符号化信号を蓄積することを特徴とした構成を有している。
【００６７】
さらに、本発明の符号化信号選択転送装置は、請求項１１または請求項１２に記載の符号化信号選択転送装置において、前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択手段を備え、前記転送器送信手段が、前記転送器送信信号選択手段で選択した伝送符号化信号を送信することを特徴とした構成を有している。
【００６８】
さらに、本発明の符号化信号選択転送装置は、請求項１３に記載の符号化信号選択転送装置において、前記転送器送信手段が送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶手段を備え、前記転送器送信信号選択手段が、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とした構成を有している。
【００６９】
さらに、本発明の符号化信号選択転送装置は、請求項１３または請求項１４に記載の符号化信号選択転送装置において、前記転送器再配信要求受信手段が、再送する前記伝送符号化信号が指定された再配信要求を受信し、前記転送器送信信号選択手段が、前記再配信要求にしたがって再送する伝送符号化信号を選択し、前記転送器送信手段が、前記転送器送信信号選択手段で選択した伝送符号化信号を送信することを特徴とした構成を有している。
【００７０】
さらに、本発明の符号化信号選択転送装置は、請求項１５に記載の符号化信号選択転送装置において、前記再配信要求の中に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれている場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信手段を備え、前記転送器受信手段が、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とした構成を有している。
【００７１】
さらに、本発明の符号化信号選択転送装置は、請求項１６に記載の符号化信号選択転送装置において、前記転送器受信手段が、前記伝送符号化信号を生成し送信する分離送信器または他の選択転送器から、前記伝送符号化信号を受信し、前記転送器送信手段が、前記伝送符号化信号を、前記伝送符号化信号を受信し３次動画像を復元させる３次符号化信号を合成する受信合成器または他の選択転送器に、送信し、前記転送器再配信要求受信手段が、前記受信合成器または他の選択転送器から、前記再配信要求を受信し、前記転送器再配信要求送信手段が、前記蓄積外の伝送符号化信号の再配信要求を、他の選択転送器または前記分離送信器に、送信することを特徴とした構成を有している。
【００７２】
さらに、本発明の符号化信号選択転送装置は、請求項１３から請求項１７のいずれか１項に記載の符号化信号選択転送装置において、前記転送器送信信号選択手段が、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とした構成を有している。
【００７３】
また、本発明の符号化信号受信合成装置は、複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信手段と、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、前記合成器分離手段で分離した基本符号化信号と拡張符号化信号と、を蓄積する合成器蓄積手段と、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成手段と、前記合成器合成手段で合成した３次符号化信号を出力する合成器出力手段と、前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信手段と、を備え、前記合成器受信手段が、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とした構成を有している。
【００７４】
さらに、本発明の符号化信号受信合成装置は、複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信手段と、前記合成器受信手段で受信した伝送符号化信号を蓄積する合成器蓄積手段と、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成手段と、前記合成器合成手段で合成した３次符号化信号を出力する合成器出力手段と、前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信手段と、を備え、前記合成器受信手段が、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とした構成を有している。
【００７５】
さらに、本発明の符号化信号受信合成装置は、請求項１９または請求項２０に記載の符号化信号受信合成装置において、前記合成器受信手段で受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶手段と、前記合成器受信情報記憶手段で記憶した識別情報をもとに未受信の伝送符号化信号を検索する合成器未受信信号検索手段と、を備え、前記合成器再配信要求送信手段が、前記未受信の伝送符号化信号の再配信要求を送信することを特徴とした構成を有している。
【００７６】
また、本発明の符号化信号分離送信装置は、複数の画像情報から構成される１次動画像を符号化した１次符号化信号を入力する分離器入力手段と、前記分離器入力手段で入力した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離手段と、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、前記分離器多重化手段で多重化した伝送符号化信号を蓄積する分離器蓄積手段と、前記伝送符号化信号を送信する分離器送信手段と、を備えたことを特徴とした構成を有している。
【００７７】
さらに、本発明の符号化信号分離送信装置は、請求項２２に記載の符号化信号分離送信装置において、前記伝送符号化信号の再配信要求を受信する分離器再配信要求受信手段を備え、前記分離器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とした構成を有している。
【００７８】
さらに、本発明の符号化信号分離送信装置は、複数の画像情報から構成される１次動画像を符号化した１次符号化信号を入力する分離器入力手段と、前記分離器入力手段で入力した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離手段と、前記分離器分離手段で分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積手段と、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、前記伝送符号化信号を送信する分離器送信手段と、を備えたことを特徴とした構成を有している。
【００７９】
さらに、本発明の符号化信号分離送信装置は、請求項２４に記載の符号化信号分離送信装置において、前記伝送符号化信号の再配信要求を受信する分離器再配信要求受信手段を備え、前記分離器多重化手段が、前記蓄積された基本符号化信号および拡張符号化信号から、前記再配信要求にしたがった前記伝送符号化信号を生成し、前記分離器送信手段が、前記生成した伝送符号化信号を送信することを特徴とした構成を有している。
【００８０】
また、本発明の符号化信号蓄積配信方法および符号化信号蓄積配信プログラムは、複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器を制御する分離送信器制御ステップと、前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器を制御する選択転送器制御ステップと、前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記３次動画像を復元させる３次符号化信号を合成する受信合成器を制御する受信合成器制御ステップと、を備え、
前記分離送信器制御ステップが、前記１次符号化信号を入力する分離器入力ステップと、前記分離器入力ステップで入力した１次符号化信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離ステップと、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、前記分離器多重化ステップで多重化した伝送符号化信号を蓄積する分離器蓄積ステップと、前記伝送符号化信号を前記選択転送器に送信する分離器送信ステップと、を備え、
前記選択転送器制御ステップが、前記伝送符号化信号を前記分離送信器から受信する転送器受信ステップと、前記転送器受信ステップで受信した伝送符号化信号を蓄積する転送器蓄積ステップと、前記伝送符号化信号を前記受信合成器に送信する転送器送信ステップと、を備え、
前記受信合成器制御ステップが、前記伝送符号化信号を前記選択転送器から受信する合成器受信ステップと、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、前記合成器分離ステップで分離した基本符号化信号と拡張符号化信号と、を前記受信合成器に蓄積する合成器蓄積ステップと、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成ステップと、前記合成器合成ステップで合成した３次符号化信号を出力する合成器出力ステップと、前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信ステップと、を備え、
さらに、前記選択転送器制御ステップが、前記受信合成器から送信された伝送符号化信号の再配信要求を受信する転送器再配信要求受信ステップと、を備え、前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記受信合成器に送信し、前記受信合成器制御ステップの合成器受信ステップが、前記再配信要求にしたがって前記選択転送器から送信された伝送符号化信号を受信することを特徴とした構成を有している。
【００８１】
さらに、本発明の符号化信号蓄積配信方法は、請求項２６に記載の符号化信号蓄積配信方法において、前記選択転送器制御ステップが、前記転送器受信ステップで受信した伝送符号化信号の中から前記選択転送器に蓄積する伝送符号化信号を選択する転送器蓄積信号選択ステップを備え、前記転送器蓄積ステップが、前記選択した伝送符号化信号を蓄積することを特徴とした構成を有している。
【００８２】
さらに、本発明の符号化信号蓄積配信方法は、請求項２６または請求項２７に記載の符号化信号蓄積配信方法において、前記選択転送器制御ステップが、前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択ステップを備え、前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とした構成を有している。
【００８３】
さらに、本発明の符号化信号蓄積配信方法は、請求項２８に記載の符号化信号蓄積配信方法において、前記選択転送器制御ステップが、前記転送器送信ステップが送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶ステップを備え、前記転送器送信信号選択ステップが、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とした構成を有している。
【００８４】
さらに、本発明の符号化信号蓄積配信方法は、請求項２８または請求項２９に記載の符号化信号蓄積配信方法において、前記受信合成器制御ステップが、前記合成器受信ステップで受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶ステップと、前記合成器受信情報記憶ステップで記憶した識別情報をもとに未受信の伝送符号化信号を検索する合成器未受信信号検索ステップと、を備え、前記合成器再配信要求送信ステップが、前記未受信の伝送符号化信号の再配信要求を前記選択転送器に送信し、前記選択転送器制御ステップの転送器再配信要求受信ステップが、再送する前記伝送符号化信号が指定された再配信要求を前記受信合成器から受信し、前記転送器送信信号選択ステップが、前記再配信要求にしたがって再送する伝送符号化信号を選択し、前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とした構成を有している。
【００８５】
さらに、本発明の符号化信号蓄積配信方法は、請求項３０に記載の符号化信号蓄積配信方法において、前記選択転送器制御ステップが、前記再配信要求の中に前記選択転送器に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれている場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信ステップを備え、前記分離送信器制御ステップが、前記伝送符号化信号の再配信要求を前記選択転送器から受信する分離器再配信要求受信ステップを備え、前記分離器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記選択転送器に送信し、前記選択転送器制御ステップの転送器受信ステップが、前記再配信要求にしたがって前記分離送信器から送信された伝送符号化信号を受信することを特徴とした構成を有している。
【００８６】
さらに、本発明の符号化信号蓄積配信方法は、請求項３１に記載の符号化信号蓄積配信方法において、前記選択転送器制御ステップの転送器受信ステップが、前記分離送信器または他の選択転送器から、前記伝送符号化信号を受信し、前記転送器送信ステップが、前記伝送符号化信号を、前記受信合成器または他の選択転送器に、送信し、前記転送器再配信要求受信ステップが、前記受信合成器または他の選択転送器から、前記再配信要求を受信し、前記転送器再配信要求送信ステップが、前記蓄積外の伝送符号化信号の再配信要求を、他の選択転送器または前記分離送信器に、送信することを特徴とした構成を有している。
【００８７】
さらに、本発明の符号化信号蓄積配信方法は、請求項２８から請求項３２のいずれか１項に記載の符号化信号蓄積配信方法において、前記選択転送器制御ステップの転送器送信信号選択ステップが、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とした構成を有している。
【００８８】
さらに、本発明の符号化信号蓄積配信方法および符号化信号蓄積配信プログラムは、複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離するとともに、再構築して、ネットワーク上に伝送する複数の伝送符号化信号に変換する分離送信器を制御する分離送信器制御ステップと、前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送器を制御する選択転送器制御ステップと、前記伝送路選択器に伝送された複数の伝送符号化信号を入力し、前記３次動画像を復元させる３次符号化信号を合成する受信合成器を制御する受信合成器制御ステップと、を備え、
前記分離送信器制御ステップが、前記１次符号化信号を入力する分離器入力ステップと、前記分離器入力ステップで入力した１次符号化信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離ステップと、前記分離器分離ステップで分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積ステップと、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、前記伝送符号化信号を前記選択転送器に送信する分離器送信ステップと、を備え、
前記選択転送器制御ステップが、前記伝送符号化信号を前記分離送信器から受信する転送器受信ステップと、前記転送器受信ステップで受信した伝送符号化信号を蓄積する転送器蓄積ステップと、前記伝送符号化信号を前記受信合成器に送信する転送器送信ステップと、を備え、
前記受信合成器制御ステップが、前記伝送符号化信号を前記選択転送器から受信する合成器受信ステップと、前記合成器受信ステップで受信した伝送符号化信号を前記受信合成器に蓄積する合成器蓄積ステップと、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成ステップと、前記合成器合成ステップで合成した３次符号化信号を出力する合成器出力ステップと、前記伝送符号化信号の再配信要求を前記選択転送器に送信する合成器再配信要求送信ステップと、を備え、
さらに、前記選択転送器制御ステップが、前記受信合成器から送信された再配信要求を受信する転送器再配信要求受信ステップと、を備え、前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信し、前記受信合成器制御ステップの合成器受信ステップが、前記再配信要求にしたがって前記選択転送器から送信された伝送符号化信号を受信することを特徴とした構成を有している。
【００８９】
さらに、本発明の符号化信号蓄積配信方法は、請求項３４に記載の符号化信号蓄積配信方法において、前記選択転送器制御ステップが、前記再配信要求の中に前記選択転送器に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれている場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信ステップを備え、前記分離送信器制御ステップが、前記伝送符号化信号の再配信要求を前記選択転送器から受信する分離器再配信要求受信ステップを備え、前記分離器多重化ステップが、前記蓄積された基本符号化信号および拡張符号化信号から、前記再配信要求にしたがった前記伝送符号化信号を生成し、前記分離器送信ステップが、前記生成した伝送符号化信号を前記選択転送器に送信し、前記選択転送器制御ステップの転送器受信ステップが、前記再配信要求にしたがって前記分離送信器から送信された伝送符号化信号を受信することを特徴とした構成を有している。
【００９０】
また、本発明の符号化信号選択転送方法および符号化信号選択転送プログラムは、複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、前記複数の拡張符号化信号と、を任意に組み合わせて生成された伝送符号化信号を受信する転送器受信ステップと、前記転送器受信ステップで受信した伝送符号化信号を蓄積する転送器蓄積ステップと、前記伝送符号化信号を送信する転送器送信ステップと、前記伝送符号化信号の再配信要求を受信する転送器再配信要求受信ステップと、を備え、前記転送器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とした構成を有している。
【００９１】
さらに、本発明の符号化信号選択転送方法および符号化信号選択転送プログラムは、請求項３６に記載の符号化信号選択転送方法、または、請求項４９に記載の符号化信号選択転送プログラムにおいて、前記転送器受信ステップで受信した伝送符号化信号の中から蓄積する伝送符号化信号を選択する転送器蓄積信号選択ステップを備え、前記転送器蓄積ステップが、前記選択した伝送符号化信号を蓄積することを特徴とした構成を有している。
【００９２】
さらに、本発明の符号化信号選択転送方法および符号化信号選択転送プログラムは、請求項３６または請求項３７に記載の符号化信号選択転送方法、または、請求項４９または請求項５０に記載の符号化信号選択転送プログラムにおいて、前記伝送符号化信号の中から送信する伝送符号化信号を選択する転送器送信信号選択ステップを備え、前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とした構成を有している。
【００９３】
さらに、本発明の符号化信号選択転送方法および符号化信号選択転送プログラムは、請求項３８に記載の符号化信号選択転送方法、または、請求項５１に記載の符号化信号選択転送プログラムにおいて、前記転送器送信ステップが送信した伝送符号化信号の送信情報を記憶する転送器送信情報記憶ステップを備え、前記転送器送信信号選択ステップが、前記再配信要求を受信したとき、前記記憶した送信情報に基づいて未送信の前記伝送符号化信号を選択することを特徴とした構成を有している。
【００９４】
さらに、本発明の符号化信号選択転送方法および符号化信号選択転送プログラムは、請求項３８または請求項３９に記載の符号化信号選択転送方法、または、請求項５１または請求項５２に記載の符号化信号選択転送プログラムにおいて、前記転送器再配信要求受信ステップが、再送する前記伝送符号化信号が指定された再配信要求を受信し、前記転送器送信信号選択ステップが、前記再配信要求にしたがって再送する伝送符号化信号を選択し、前記転送器送信ステップが、前記転送器送信信号選択ステップで選択した伝送符号化信号を送信することを特徴とした構成を有している。
【００９５】
さらに、本発明の符号化信号選択転送方法および符号化信号選択転送プログラムは、請求項４０に記載の符号化信号選択転送方法、または、請求項５３に記載の符号化信号選択転送プログラムにおいて、前記再配信要求の中に蓄積された伝送符号化信号以外の伝送符号化信号の再配信要求が含まれている場合、前記再配信要求を前記蓄積外の伝送符号化信号の再配信要求に換えて送信する転送器再配信要求送信ステップを備え、前記転送器受信ステップが、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とした構成を有している。
【００９６】
さらに、本発明の符号化信号選択転送方法および符号化信号選択転送プログラムは、請求項３８から請求項４１のいずれか１項に記載の符号化信号選択転送方法、または、請求項５１から請求項５４のいずれか１項に記載の符号化信号選択転送プログラムにおいて、前記転送器送信信号選択ステップが、前記選択転送器の配信帯域にしたがって配信する前記伝送符号化信号を選択することを特徴とした構成を有している。
【００９７】
また、本発明の符号化信号受信合成方法および符号化信号受信合成プログラムは、複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信ステップと、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、前記合成器分離ステップで分離した基本符号化信号と拡張符号化信号と、を蓄積する合成器蓄積ステップと、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成ステップと、前記合成器合成ステップで合成した３次符号化信号を出力する合成器出力ステップと、前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信ステップと、を備え、前記合成器受信ステップが、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とした構成を有している。
【００９８】
さらに、本発明の符号化信号受信合成方法および符号化信号受信合成プログラムは、複数の画像情報から構成される１次動画像を符号化した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離し、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化した伝送符号化信号を受信する合成器受信ステップと、前記合成器受信ステップで受信した伝送符号化信号を蓄積する合成器蓄積ステップと、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離ステップと、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次動画像を復元させる３次符号化信号を生成する合成器合成ステップと、前記合成器合成ステップで合成した３次符号化信号を出力する合成器出力ステップと、前記伝送符号化信号の再配信要求を送信する合成器再配信要求送信ステップと、を備え、前記合成器受信ステップが、前記再配信要求にしたがった伝送符号化信号を受信することを特徴とした構成を有している。
【００９９】
また、本発明の符号化信号分離送信方法および符号化信号分離送信プログラムは、複数の画像情報から構成される１次動画像を符号化した１次符号化信号を入力する分離器入力ステップと、前記分離器入力ステップで入力した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離ステップと、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、前記分離器多重化ステップで多重化した伝送符号化信号を蓄積する分離器蓄積ステップと、前記伝送符号化信号を送信する分離器送信ステップと、を備えたことを特徴とした構成を有している。
【０１００】
さらに、本発明の符号化信号分離送信方法および符号化信号分離送信プログラムは、複数の画像情報から構成される１次動画像を符号化した１次符号化信号を入力する分離器入力ステップと、前記分離器入力ステップで入力した１次符号化信号を、前記１次動画像の疑似動画像である２次動画像を復元させる前記１次符号化信号より符号量が少ない基本符号化信号と、前記基本符号化信号により復元される前記２次動画像より前記１次動画像に近い３次動画像を前記基本符号化信号とともに使用して復元させる複数の拡張符号化信号と、に分離する分離器分離ステップと、前記分離器分離ステップで分離した基本符号化信号と拡張符号化信号と、を蓄積する分離器蓄積ステップと、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化ステップと、前記伝送符号化信号を送信する分離器送信ステップと、を備えたことを特徴とした構成を有している。
【０１０１】
さらに、本発明の符号化信号受信合成プログラムは、請求項５６または請求項５７に記載の符号化信号受信合成プログラムにおいて、前記合成器受信ステップで受信した伝送符号化信号の他の伝送符号化信号と識別する識別情報を記憶する合成器受信情報記憶ステップと、前記合成器受信情報記憶ステップで記憶した識別情報をもとに未受信の伝送符号化信号を検索する合成器未受信信号検索ステップと、を備え、前記合成器再配信要求送信ステップが、前記未受信の伝送符号化信号の再配信要求を送信することを特徴とした構成を有している。
【０１０２】
さらに、本発明の符号化信号分離送信プログラムは、請求項５９に記載の符号化信号分離送信プログラムにおいて、前記伝送符号化信号の再配信要求を受信する分離器再配信要求受信ステップを備え、前記分離器送信ステップが、前記再配信要求にしたがって前記蓄積された伝送符号化信号を送信することを特徴とした構成を有している。
【０１０３】
さらに、本発明の符号化信号分離送信プログラムは、請求項６１に記載の符号化信号分離送信プログラムにおいて、前記伝送符号化信号の再配信要求を受信する分離器再配信要求受信ステップを備え、前記分離器多重化ステップが、前記蓄積された基本符号化信号および拡張符号化信号から、前記再配信要求にしたがった前記伝送符号化信号を生成し、前記分離器送信ステップが、前記生成した伝送符号化信号を送信することを特徴とした構成を有している。
【発明の効果】
【０１０４】
本発明は、１次符号化信号を、基本符号化信号と、複数の拡張符号化信号と、に分離するとともに、再構築して、複数の伝送符号化信号に変換する分離送信装置と、前記複数の伝送符号化信号を入力し、転送先を選択して、前記伝送符号化信号を伝送する選択転送装置と、前記複数の伝送符号化信号を入力し、３次符号化信号を合成する受信合成装置と、を備え、前記分離送信装置が、前記１次符号化信号を、前記基本符号化信号と、前記複数の拡張符号化信号と、に分離する分離器分離手段と、前記基本符号化信号と、複数の前記拡張符号化信号と、を任意に組み合わせて多重化し、複数の伝送符号化信号を生成する分離器多重化手段と、前記伝送符号化信号を前記分離送信装置に蓄積する分離器蓄積手段と、前記伝送符号化信号を前記選択転送装置に送信する分離器送信手段と、を備え、前記選択転送装置が、前記伝送符号化信号を前記分離送信装置から受信する転送器受信手段と、前記伝送符号化信号を前記選択転送装置に蓄積する転送器蓄積手段と、前記伝送符号化信号を前記受信合成装置に送信する転送器送信手段と、を備え、前記受信合成装置が、前記伝送符号化信号を前記選択転送装置から受信する合成器受信手段と、前記伝送符号化信号を前記受信合成装置に蓄積する合成器蓄積手段と、前記伝送符号化信号から、前記基本符号化信号と、前記拡張符号化信号と、を分離する合成器分離手段と、前記基本符号化信号と、いくつかの前記拡張符号化信号と、を合成し、３次符号化信号を生成する合成器合成手段と、前記伝送符号化信号の再配信要求を前記選択転送装置に送信する合成器再配信要求送信手段と、を備え、さらに、前記選択転送装置が、前記受信合成器から送信された伝送符号化信号の再配信要求を受信する転送器再配信要求受信手段と、を備え、前記転送器送信手段が、前記再配信要求にしたがって前記蓄積された伝送符号化信号を前記受信合成装置に送信し、前記受信合成装置の合成器受信手段が、前記再配信要求にしたがって前記選択転送装置から送信された伝送符号化信号を受信することにより、再配信要求時に、伝送符号化信号を分離送信装置まで取りに行かずに、選択転送装置に蓄積された伝送符号化信号を取得することができ、ネットワーク上のトラフィックを悪化させず、通信コストを抑えて、必要に応じて高品質の映像を得ることができる合成ストリームの生成を行うことができるという効果を有する符号化信号蓄積配信システムを提供することができるものである。
【発明を実施するための最良の形態】
【０１０５】
以下、本発明の実施の形態の符号化信号蓄積配信システムについて、図面を用いて説明する。
【０１０６】
本発明の符号化信号蓄積配信システムは、サーバにおけるストリーム分離機能を有するトランスコーダにおいて、独立した分離ストリームを生成し、帯域選択機能を有するルータにおいて、ネットワーク状態に応じた伝送路選択機能を行うことにより映像のスケーラブル伝送を実現する。分離された各ストリームのプライオリティはほぼ等しく、ルータにおける任意の伝送路の選択によりスケーラビリティの実現ができる。
【０１０７】
また、本実施の形態の符号化信号蓄積配信システム、特に、サーバにおける分離処理、多重化処理およびレシーバにおける多重化処理等は、本願出願人が先に出願した特願２００３−３８１８５９の符号化信号分離合成システムの処理を用いて行うものである。
【０１０８】
（第１の実施の形態）
本発明の第１の実施の形態における符号化信号蓄積配信システムを、図１に示し説明する。
【０１０９】
図１に示すように、符号化信号蓄積配信システムは、映像再生のための符号化ストリーム（伝送符号化信号）を送出するサーバ１０００と、ネットワーク上で伝送路選択を行うルータ２０００と、複数の符号化ストリーム（伝送符号化信号）を受信し合成を行うレシーバ３０００ａ、３０００ｂ・・・、３０００ｎと、を備えている。レシーバ３０００ａ、３０００ｂ・・・、３０００ｎは、いくつであっても良い。また、ルータ２０００も、複数備えていても構わない。ルータ２０００を複数備えた場合の例は、他の実施の形態で説明する。
【０１１０】
また、レシーバ３０００ａ、３０００ｂ・・・、３０００ｎによって合成および復号された符号化ストリームは、それぞれディスプレイ４０００ａ、４０００ｂ・・・、４０００ｎにより映像として再生される。
【０１１１】
ここで、サーバ１０００に入力される符号化ストリームは、標準の符号化器で生成された符号化ストリームであり、例えば、カメラ６００がとらえた映像を、符号化器７００で符号化したものであったり、コンテンツ蓄積器８００に記憶されたコンテンツの符号化ストリームである。また、サーバ１０００は、分離器１０１０およびサーバ蓄積器１０４０を備え、ルータ２０００は、伝送路選択器２０１０およびルータ蓄積器２０４０を備えている。
【０１１２】
また、レシーバ３０００ａ、３０００ｂ・・・、３０００ｎは、それぞれ合成器３０１０ａ、３０１０ｂ・・・、３０１０ｎ、復号器３０３０ａ、３０３０ｂ・・・、３０３０ｎおよびレシーバ蓄積器３０４０ａ、３０４０ｂ・・・、３０４０ｎを備え、レシーバ３０００ａ、３０００ｂ・・・、３０００ｎにおいて復号を行う復号器３０３０ａ、３０３０ｂ・・・、３０３０ｎは、標準のものに準拠する。
【０１１３】
ここで、レシーバ３０００ａ、３０００ｂ・・・、３０００ｎ、合成器３０１０ａ、３０１０ｂ・・・、３０１０ｎ、復号器３０３０ａ、３０３０ｂ・・・、３０３０ｎおよびレシーバ蓄積器３０４０ａ、３０４０ｂ・・・、３０４０ｎは、それぞれ同様のものであるので、以下では、その１つをレシーバ３０００、合成器３０１０、復号器３０３０およびレシーバ蓄積器３０４０として説明する。また、ディスプレイ４０００ａ、４０００ｂ・・・、４０００ｎも、それぞれ同様のものであるので、その１つをディスプレイ４０００とする。
【０１１４】
次に、本符号化信号蓄積配信システムの概要について、図２から図４を参照して、説明する。
【０１１５】
まず、図２に示すように、サーバ１０００において、符号化器７００等から符号化ストリームを入力する。サーバ１０００では、符号化ストリームを入力すると、分離器１０１０により、複数の分離ストリーム（伝送符号化信号；Ｓｔ１〜Ｓｔ６）に分離する。そして、分離した複数の分離ストリーム（Ｓｔ１〜Ｓｔ６）を、サーバ蓄積器１０４０に蓄積する。
【０１１６】
次に、図３に示すように、サーバ１０００が、サーバ蓄積器１０４０に蓄積した分離ストリーム（Ｓｔ１〜Ｓｔ６）を、ルータ２０００に送信する。ルータ２０００では、サーバ１０００から送信された分離ストリーム（Ｓｔ１〜Ｓｔ６）を受信する。そして、ルータ２０００は、受信した分離ストリーム（Ｓｔ１〜Ｓｔ６）から、ルータ２０００で蓄積する分離ストリーム（Ｓｔ１、Ｓｔ３、Ｓｔ５、Ｓｔ６）を選択し、ルータ蓄積器２０４０に蓄積する。続いて、ルータ２０００では、受信した分離ストリーム（Ｓｔ１〜Ｓｔ６）から、ルータ２０００から送信する分離ストリーム（Ｓｔ２、Ｓｔ４）を選択し、レシーバ３０００に送信する。ここで、ルータ２０００とレシーバ３０００との間の帯域は、狭帯域であるとする。すなわち、サーバ１０００とルータ２０００との間の帯域は、太く、ルータ２０００とレシーバ３０００との間の帯域は、細くなっている。
【０１１７】
レシーバ３０００では、ルータ２０００から送信された分離ストリーム（Ｓｔ２、Ｓｔ４）を受信する。そして、レシーバ３０００は、受信した分離ストリーム（Ｓｔ２、Ｓｔ４）を、レシーバ蓄積器３０４０に蓄積する。また、レシーバ３０００では、受信した分離ストリーム（Ｓｔ２、Ｓｔ４）を、合成器３０１０で合成し、合成ストリームを生成して、生成した合成ストリームを復号器３０３０で復号することにより、ディスプレイ４０００で映像を再生することができる。
【０１１８】
さらに、図４に示すように、レシーバ３０００からルータ２０００に対して、分離ストリーム（Ｓｔ１〜Ｓｔ６）のリクエスト（再配信要求）を送る。ルータ２０００では、レシーバ４０００から送信されたリクエストと配信帯域にしたがって、ルータ蓄積器２０４０から再配信する分離ストリーム（Ｓｔ１、Ｓｔ３）を選択し取得する。そして、ルータ２０００は、取得した分離ストリーム（Ｓｔ１、Ｓｔ３）を、レシーバ３０００に送信する。
【０１１９】
レシーバ３０００では、ルータ２０００から今回送信された分離ストリーム（Ｓｔ１、Ｓｔ３）を受信する。そして、レシーバ３０００は、受信した分離ストリーム（Ｓｔ１、Ｓｔ３）と、レシーバ蓄積器３０４０にすでに蓄積していた分離ストリーム（Ｓｔ２、Ｓｔ４）とを、合成器３０１０で合成し、合成ストリームを生成する。生成した合成ストリームは、復号器３０３０で復号することにより、前回よりも高品質な映像をディスプレイ４０００で再生することができる。
【０１２０】
以上のように、本符号化信号蓄積配信システムでは、サーバ１０００、ルータ２００００、レシーバ３０００のそれぞれが蓄積機能を有することにより、再配信要求に対して足りない符号化ストリームのみを送信して、レシーバ３０００で受信済みの符号化ストリームと合成して復号することができるので、小さな容量の符号化ストリームの送受信を行うだけで、高品質の映像を復元して、再生することができる。
【０１２１】
以下、各装置の詳細説明を行う。
【０１２２】
まず、サーバ１０００の分離器１０１０およびサーバ蓄積器１０４０との関係について、図５、図６にブロック図を示し、説明する。
【０１２３】
図５、図６に示すように、分離器１０１０は、すでに符号化されアーカイブ等に蓄積されている符号化ストリームやカメラで撮影され符号化された符号化ストリームを入力とし、独立した符号化ストリームに分離し出力する。また、分離器１０１０は、分離部(separate)１１００と、多重化部(MUX)１６００と、を備えている。
【０１２４】
サーバ蓄積器１０４０に蓄積される符号化ストリームは、多重化部１６００から出力され、サーバ１０００から直接出力される伝送符号化信号（図５の場合）、あるいは、分離部１１００で分離され、多重化部１６００で多重化される前の基本ストリームＢ、拡張ストリームＥ（ｍ）（図６の場合）である。
【０１２５】
分離器１０１０による分離ストリーム生成の方法は、多重化部１６００における処理により、以下に示す２つの方式があり、各方式の処理図を図７、図８にそれぞれ示す。
【０１２６】
方式（１）  ロバストネス伝送路のあるネットワークで映像の送出を行う。
【０１２７】
方式（２）  ロバストネス伝送路のないネットワークで映像の送出を行う。
【０１２８】
分離部(separate)１１００は、入力された符号化ストリームを、１本の基本ストリームＢと、Ｍ本の拡張ストリームＥ(ｍ)（０≦ｍ≦Ｍ−１）に分離する。
【０１２９】
多重化部(MUX)１６００は、分離部１１００から出力される基本ストリームＢと拡張ストリームＥ(ｍ)（０≦ｍ≦Ｍ−１）の多重化を、伝送路の特性に応じて行う。その方法は、以下に示す方式（１）と方式（２）とがある。
【０１３０】
方式（１）
方式（１）では、分離ストリームとしてＳｔ(０)と、Ｌ本のストリームＳｔ(ｌ)（１≦ｌ≦Ｌ−１）を出力する。基本ストリームＢは、分離ストリームＳｔ(０)として伝送エラーの発生しないロバストネス伝送路に送出され、拡張ストリームＥ(ｍ)（０≦ｍ≦Ｍ−１）は、各々分離ストリームＳｔ(ｌ)（１≦ｌ≦Ｌ−１）として伝送される。Ｓｔ(ｌ)を下記式（１）に示す。
【０１３１】
【数３】
2005295106.tif 000005
【０１３２】
ｌ番目の分離ストリームＳｔ(ｌ)のビットレートRate[Ｓｔ(ｌ)]は、下記式（２）のように表現できる。
【０１３３】
【数４】
2005295106.tif 000006
【０１３４】
方式（２）
方式（２）では、Ｌ本のストリームＳｔ(ｌ)（０≦ｌ≦Ｌ−１）が出力される。基本ストリームＢは、コピーされすべての拡張ストリームＥ(ｍ)に多重化される。このように、基本ストリームＢを複数の伝送路を用いて伝送することによりネットワーク状態に依存しない再生を保証する。この場合、分離ストリームＳｔ(ｌ)は、下記式（３）のようにあらわすことができる。ここで、Multiplex[・]は多重化を意味する。
【０１３５】
Ｓｔ(ｌ)＝Multiplex[Ｂ,Ｅ(ｌ)]    （Ｌ＝Ｍ、０≦ｌ≦Ｍ−１）        式（３）
分離ストリームＳｔ(ｌ)のビットレートRate[Ｓｔ(ｌ)]は、下記式（４）となる。
【０１３６】
Rate[Ｓｔ(ｌ)] ＝ Rate[Ｂ＋Ｅ(ｌ)]    （Ｌ＝Ｍ、０≦ｌ≦Ｍ−１）    式（４）
次に、ルータ２０００について、図９に示し説明する。
【０１３７】
同図に示すように、ルータ２０００は、伝送路選択器２０１０、スイッチ制御器２０２０およびルータ蓄積器２０４０を備え、サーバ１０００より出力されたＬ本の分離ストリームＳｔ(ｌ)を入力とし、ネットワーク状況に応じ伝送路選択（伝送路のオン・オフ）により伝送するストリームのレートを制御し、映像のスケーラビリティを実現するとともに、蓄積する分離ストリームＳｔ(ｌ)を選択し、ルータ蓄積器２０４０に蓄積するものである。
【０１３８】
また、伝送路選択器１０１０は、映像蓄積機能を有するにあたり、ストリームごとに蓄積および伝送の有無をそれぞれスイッチで制御するため、蓄積制御スイッチボックス２３００および帯域選択制御スイッチボックス２４００を備えている。蓄積制御スイッチボックス２３００は、スイッチ制御器２０２０により制御され、ルータ蓄積器２０４０に出力する分離ストリームＳｔ(ｌ)を選択し、帯域選択制御スイッチボックス２４００は、スイッチ制御器２０２０により制御され、レシーバ３０００に送信する分離ストリームＳｔ(ｌ)を選択するものである。ここで、ルータ２０００より出力されるストリームの総レートRate[Ｓｔ out]を、Rate[Ｓｔ out]＝Σl Rate[Ｓｔ(ｌ)]とする。ルータ２０００の出力ストリームの目標総レートを、Ｒtargetとすると、Rate[Ｓｔ out] ≦ ＲtargetとなるＳｔ(ｌ)の伝送路スイッチをオンにする。
【０１３９】
スイッチ制御器２０２０は、２つのレジスタを持ち、それぞれのレジスタの値により蓄積制御スイッチボックス２３００、帯域選択制御スイッチボックス２４００を制御する。蓄積制御スイッチボックス２３００の構成およびスイッチ制御器２０２０による制御を、図１０に、帯域選択制御スイッチボックス２４００の構成およびスイッチ制御器２０２０による制御を、図１１に示す。
【０１４０】
スイッチ制御機能におけるレジスタの持つ値を、Ｒという２進数の数値で表す。Ｒは、Ｌ桁からなり、各ビットがＭＳＢ（最上位ビット）側から順にＳｗ（０）、Ｓｗ（１）・・・、Ｓｗ（Ｌ−１）の各状態に対応する。蓄積制御スイッチのレジスタの値をＲｓとし、帯域選択制御スイッチのレジスタの値をＲｄとする。
【０１４１】
したがって、図１０、図１１に示すように、スイッチ制御器２０２０は、レジスタＲｓとレジスタＲｄとを有し、レジスタ内の値により、蓄積制御スイッチボックス２３００および帯域選択制御スイッチボックス２４００を制御して、それぞれ蓄積する分離ストリームＳｔ(ｌ)、送信する分離ストリームＳｔ(ｌ)を選択するものである。
【０１４２】
図１０に示すように、蓄積制御スイッチボックス２３００の制御では、スイッチ制御器２０２０のレジスタＲｓの値が“０”のときには、蓄積制御スイッチボックス２３００の該当のスイッチを“０”側、すなわちアースして分離ストリームＳｔ(ｌ)を蓄積せず、スイッチ制御器２０２０のレジスタＲｓの値が“１”のときには、蓄積制御スイッチボックス２３００の該当のスイッチを“１”側、すなわちルータ蓄積器２０４０に分離ストリームＳｔ(ｌ)を出力する。
【０１４３】
また、ルータ蓄積器２０４０は、蓄積制御スイッチボックス２３００から出力された分離ストリームＳｔ(ｌ)を蓄積するものである。
【０１４４】
図１１に示すように、帯域選択制御スイッチボックス２４００の制御では、スイッチ制御器２０２０のレジスタＲｄの値が“０”のときには、帯域選択制御スイッチボックス２４００の該当のスイッチを“０”側、すなわちアースして分離ストリームＳｔ(ｌ)を出力せず、スイッチ制御器２０２０のレジスタＲｓの値が“１”のときには、帯域選択制御スイッチボックス２４００の該当のスイッチを“１”側、すなわちレシーバ３０００に分離ストリームＳｔ(ｌ)を送信する。
【０１４５】
ここで、Ｒｄが下記式（５）のように与えられたときに、３つの制御ポリシー（全ストリームを蓄積、全ストリームを破棄、伝送しないストリームを蓄積）それぞれにおけるＲｓの設定値を、図１２に示す。
【０１４６】
Ｒｄ＝１０１１００                                                  式（５）
このうち、伝送しないストリームのみを蓄積する場合は、
【０１４７】
【数５】
2005295106.tif 000007
【０１４８】
と表される。
【０１４９】
図１３に、スイッチ制御器２０２０の制御による伝送路選択器２０１０における伝送路選択の具体例を示す。また、図１４に、図１３におけるスイッチの値と蓄積、伝送状態の関係を示す。
【０１５０】
この場合、分離ストリーム数を決定するパラメータＬは、Ｌ＝６である。蓄積に関しては、Ｓｗs（０）、Ｓｗs（３）、Ｓｗs（４）をオンにすることにより、蓄積制御スイッチボックス２３００で分離ストリームＳｔ（０）、Ｓｔ（３）、Ｓｔ（４）が選択され、ルータ蓄積部２０４０に蓄積される。また、伝送に関しては、目標レートＲtargetが与えられた際に、Rate[Ｓｔ out] ≦ Ｒtargetを実現するため、Ｓｗd（０）、Ｓｗd（２）、Ｓｗd（３）、Ｓｗd（５）をオンにすることにより、帯域選択制御スイッチボックス２４００で分離ストリームＳｔ(０)、Ｓｔ(２)、Ｓｔ(３)、Ｓｔ(５)が選択され、Rate[Ｓｔ(０)＋Ｓｔ(２)＋Ｓｔ(３)＋Ｓｔ(５)] ≦ Ｒtargetを実現している。
【０１５１】
図１５から図１７に、ルータ２０００においてスイッチ制御器２０２０におけるレジスタＲｓ、Ｒｄを利用した分離ストリームＳｔ（ｌ）の再配信処理例を示す。また、図１８に、ルータ２０００とレシーバ３０００との間の配信動作とレジスタ値Ｒｄの関係を示す。ここでは、ルータ２０００とレシーバ３０００との間の回線は、使用可能な帯域がストリーム２本相当に制限されているものとする。
【０１５２】
図１５に示すように、この伝送路を使用したストリームを配信するとき、全ての分離ストリームＳｔ（ｌ）が、ルータ２０００に蓄積されているとする。すなわち、
Ｒｓ＝１１１１１１                                                  式（７）
である。
【０１５３】
ルータ２０００では、サーバ１０００から配信された分離ストリームＳｔ（０）〜Ｓｔ（５）から、レシーバ３０００に配信する帯域にしたがって送信する分離ストリームＳｔ（ｌ）を選択するＲｄの値を求める。ここでは、全ての分離ストリームＳｔ（ｌ）が同等の符号量で、ストリーム２本相当の帯域なので、レジスタＲｄの中の２つのビット、Ｓｗd（０）と、Ｓｗd（３）を選択する。これにより、
Ｒｄ＝１００１００                                                  式（８）
となる。次に、このＲｄ［１００１００］にしたがって、スイッチ制御器２０２０が、伝送路選択器２０１０の帯域選択制御スイッチボックス２４００を制御し、分離ストリームＳｔ（０）とＳｔ（３）を選択する。そして、ルータ２０００からこの選択した分離ストリームＳｔ（０）とＳｔ（３）をレシーバ３０００に第１伝送として送信する。レシーバ３０００では、受信した分離ストリームＳｔ（０）とＳｔ（３）をレシーバ蓄積器３０４０に蓄積する。
【０１５４】
次に、図１６に示すように、レシーバ３０００からさらに分離ストリームＳｔ（ｌ）を配信してもらうように、第１リクエストを送信する。ルータ２０００では、レシーバ３０００からの第１リクエストを受信すると、Ｒｄを検索し、Ｒｄのビットが０に対応するストリームをルータ蓄積器２０４０から探し出す（Ｓｔ（１）、Ｓｔ（２）、Ｓｔ（４）、Ｓｔ（５））。
【０１５５】
次に、図１７に示すように、探索した分離ストリームＳｔ（１）、Ｓｔ（２）、Ｓｔ（４）、Ｓｔ（５）から配信する帯域にしたがって送信する分離ストリームＳｔ（ｌ）を選択する。ここでは、分離ストリームＳｔ（１）、Ｓｔ（５）を選択し、ルータ蓄積器２０４０から読み込み、レシーバ３０００に第２伝送として送信する。スイッチ制御器２０４０では、分離ストリームＳｔ（１）、Ｓｔ（５）を送信したら、ＲｄのＳｗd（１）、Ｓｗd（５）に１をセットする。レシーバ３０００では、ルータ２０００から配信された分離ストリームＳｔ（１）、Ｓｔ（５）を受信し、合成器３０１０において、受信した分離ストリームＳｔ（１）、Ｓｔ（５）と、レシーバ蓄積器３０４０に蓄積されている分離ストリームＳｔ（０）、Ｓｔ（３）と、を合成する。
【０１５６】
さらに、分離ストリームＳｔ（ｌ）が必要であれば、レシーバ３０００から第２リクエストを送信する。このように、リクエストを繰り返すことにより、全ての分離ストリームＳｔ（ｌ）をレシーバ３０００で受信することもできる。
【０１５７】
次に、レシーバ３０００の合成器３０１０について、説明する。合成器３０１０は、入力されるＬ’本のストリームＳｔ(ｌ)を合成し、合成ストリームの出力を行う。合成ストリームの映像品質は、受信するストリームの総レートのみに依存し、受信ストリームの種類に依存しない。受信するストリームの総レートは、ルータ２０００における伝送路選択により決定される。
【０１５８】
レシーバ３０００の合成器３０１０およびレシーバ蓄積器３０４０との関係について、タイプ１を図１９、タイプ２を図２０に示し、説明する。
【０１５９】
図１９、図２０に示すように、合成器３０１０は、多重分離部（DEMUX）と、基本ストリーム選択器（B-Selector）と、合成部（merge）３３００と、を備え、さらに、レシーバ３０００は、合成制御器（merge controller）３０２０およびレシーバ蓄積器３０４０を備えている。図示上は、多重分離部と基本ストリーム選択器とを合わせて多重基本選択器３０９０としている。また、合成制御器３０２０およびレシーバ蓄積器３０４０については、合成器３０１０に含まれる構成であっても構わない。
【０１６０】
また、図１９に示すタイプ１においては、蓄積するストリームは多重分離する前のものであり、図２０に示すタイプ２においては、多重分離後のものである。合成制御器３０２０は、Ｌ桁からなるレジスタＲｍを持ち、それぞれＭＳＢ（最上位ビット）側からＳｔ（０）、Ｓｔ（１）・・・、Ｓｔ（Ｌ−１）の受信状態を表す。受信したストリームに対応するビットが１となる。、
また、タイプ１およびタイプ２の合成器３０１０における多重分離方式は、それぞれ２つ取り、上記方式（１）に対応する多重分離部および基本ストリーム選択器のブロック図を、図２１に、上記方式（２）に対応する多重分離部および基本ストリーム選択器のブロック図を、図２２にそれぞれ示す。
【０１６１】
方式（１）においては、通常の多重分離方式を取り、方式（２）においては、ＢストリームをそれぞれＥストリームより多重分離し、最適なＢストリームを選択してから合成するため、実際に合成に使用されなかったＢストリームは破棄される。
【０１６２】
多重分離部（DEMUX）３１００は、入力されるＬ’本のストリームＳｔ(ｌ)を、α本の基本ストリームＢと、Ｍ’本の拡張ストリームＥ(ｍ)に分割する。ここで、αは、多重分離部３１００に入力されるすべての分離ストリームＳｔ(ｌ)内に多重化されている基本ストリームＢの総数を示し、上記方式（１）、方式（２）に応じてその数は異なり、下記式（９）に示すようになる。
【０１６３】
【数６】
2005295106.tif 000008
【０１６４】
また、ストリーム分割時に検出されるストリームに発生した誤り等の情報は、合成制御器３０２０に渡す。
【０１６５】
基本ストリーム選択器（B-Selector）３２００は、合成制御器３０２０からの制御を受け、入力されるα本のＢストリームからビット誤りの少ない１本のストリームを選択し出力する。この際、（α−１）本の基本ストリームＢは破棄される。
【０１６６】
合成部（merge）３３００は、合成制御器３０２０からの制御を受け、入力される基本ストリームＢと拡張ストリームＥ(ｍ) （０ ≦  ｍ  ≦ Ｍ’−１）を合成し、合成ストリームを出力する。したがって、合成部３３００に入力された拡張ストリームＥ(ｍ)のすべてが合成されるというわけではない。
【０１６７】
合成制御器（merge controller）３０２０は、ネットワーク上の誤り検出器から誤り訂正情報、また、多重分離部３１００、合成部３３００における処理において検出される誤り情報を受け取り、基本ストリームＢについての情報は基本ストリーム選択器３２００に対して、拡張ストリームＥ(ｍ)についての情報は合成部３３００に対して、制御をかけ、誤り訂正が不可能とされたストリームを合成制御器３０２０において切り捨てる処理を行う。
【０１６８】
上記合成制御器３０２０のレジスタＲｍを利用することで、ルータ２０００で説明したものと同様に、ストリームの再配信処理を行うことができる。上記ルータ２０００のスイッチ制御器２０２０のレジスタＲｄが、配信状態を記憶する値であるのに対し、レシーバ３０００の合成制御器３０２０のレジスタＲｍは、受信状態を記憶する値であるので、伝送路上で失われたストリームに対する保障がある。
【０１６９】
図２３に、ルータ２０００とレシーバ３０００との間の配信動作とレジスタ値Ｒｍの関係を示す。ここでも、レジスタＲｄを使用した再配信処理のときと同様に、ルータ２０００には全てのストリームが蓄積しているものとし、ルータ２０００とレシーバ３０００との間の回線は、使用可能な帯域がストリーム２本相当に制限されているものとする。
【０１７０】
まず、初回配信で分離ストリームＳｔ（０）、Ｓｔ（３）を受信すると、受信した分離ストリームＳｔ（０）、Ｓｔ（３）に対応するレジスタＲｍのビットに１をセットする。次に、レシーバ３０００では、レジスタＲｍの値を参照し、受信していないストリームを検索する。伝送路の帯域を考慮してストリームを任意に選択し、ルータ２０００に再配信リクエストを送る。本例の第１リクエストでは、受信していないストリームがＲｍの各ビットよりＳｔ（１）、Ｓｔ（２）、Ｓｔ（４）、Ｓｔ（５）と検出され、任意のストリームとして分離ストリームＳｔ（１）、Ｓｔ（５）を選択し、ルータ２０００へリクエストを送信している。ルータ２０００では、リクエストされたストリームをルータ蓄積器２０４０から検索して、レシーバ３０００へ再配信する。レシーバ３０００では、受信に成功すれば、Ｒｍの対応するビットに１をセットしてＲｍを更新する。
【０１７１】
以上を繰り返して全ての分離ストリームＳｔ（ｌ）をレシーバ３０００に配信することができる。
【０１７２】
ここで、サーバ１０００の分離器１０１０の分離部(separate)１１００およびレシーバ３０００の合成器３０１０の合成部(merge)３３００について、簡単に説明しておく。
【０１７３】
分離部(separate)１１００の一実施形態である分離部(separate)１１００ａのブロック図を、図２４に示す。
【０１７４】
分離部１１００ａは、係数情報分離部１２６０、可変長復号器（ＶＬＤ）１１１０、ランレベル係数変換器１１２０、基本拡張階層分離器１１３０、基本量子化係数変換器１１４０、拡張量子化係数分離器１１５０、基本再スキャン器１１６０、予測誤差再スキャン器１１７０、拡張再スキャン器１１８１、１１８２、１１８３、基本可変長符号化器（ＶＬＣ基本）１２１０、予測誤差可変長符号化器（ＶＬＣ予測誤差）１２２０、拡張可変長符号化器（ＶＬＣ・Ｆ0）１２３１、（ＶＬＣ・Ｆ1）１２３２、（ＶＬＣ・ＦN-1）１２３３および係数情報多重化部１２７０ａを備え、符号化ストリーム（１次符号化信号）を入力し、基本符号化信号Ｂ、拡張符号化信号Ｅ（０）、Ｅ（１）、Ｅ（２）・・・、Ｅ（Ｍ−１）を出力するものである。
【０１７５】
分離部１１００ａの係数情報分離部１２６０は、入力された符号化ストリーム（１次符号化信号）を、係数情報と係数情報以外に分離し、出力するものである。この場合、係数情報は、２次元ランレングスによりハフマン符号化された量子化係数符号であり、係数情報以外とはＭＢ層のデータとイントラＭＢのＤＣ係数符号である。
【０１７６】
可変長復号器（ＶＬＤ）１１１０は、係数情報分離部１２６０に分離された係数情報を、可変長復号し、ランレベル情報に変換するものである。
【０１７７】
ランレベル係数変換器１１２０は、ＶＬＤ１１１０に復号されたランレベル情報を、係数変換し、１次元の量子化係数列Ｘに変換するものである。
【０１７８】
基本拡張階層分離器１１３０は、ランレベル係数変換器１１２０に変換された量子化係数列Ｘを、基本階層の係数列Ｂと、拡張階層の係数列Ｅと、に分離するものである。
【０１７９】
基本量子化係数変換器１１４０は、基本拡張階層分離器１１３０によって分離された基本階層係数列Ｂを入力し、符号量削減のための変換、一般的には量子化を行い、基本量子化係数列Ｃと、前記基本階層係数列Ｂと前記基本量子化係数列Ｃとの差分情報である余り係数列（予測誤差係数列）Ｄと、に変換するものである。
【０１８０】
ここで、基本量子化係数列Ｃとは、基本階層係数列Ｂの各係数値に対して符号量削減のための変換を行った基本量子化係数の列である。また、余り係数列Ｄとは、前記基本階層係数列Ｂの各係数値と、前記基本量子化係数列Ｃの基本量子化係数から復元される各係数値との差である余り係数値（予測誤差係数値）の列である。
【０１８１】
拡張量子化係数分離器１１５０は、基本拡張階層分離器１１３０によって分離された拡張階層係数列Ｅを入力するとともに、外部から拡張階層分離パターン情報を入力し、前記拡張階層分離パターン情報にしたがって前記拡張階層係数列Ｅを複数の拡張量子化係数列Ｆ0、Ｆ1・・・、ＦN-1に分離するものである。
【０１８２】
基本再スキャン器１１６０および基本可変長符号化器（ＶＬＣ基本）１２１０は、基本量子化係数変換器１１４０に生成された基本量子化係数列Ｃを、再スキャンし、可変長符号化し、基本量子化係数符号化信号を生成するものである。
【０１８３】
予測誤差再スキャン器１１７０および予測誤差可変長符号化器（ＶＬＣ予測誤差）１２２０は、基本量子化係数変換器１１４０に生成された余り係数列Ｄを、再スキャンし、余り係数のランレベル係数値を生成し、この余り係数のランレベル係数値を、可変長符号化し、余り係数符号化信号を生成し、拡張符号化信号Ｅ（０）として出力するものである。
【０１８４】
拡張再スキャン器１１８１、１１８２、１１８３は、拡張量子化係数変換器１１５０に生成されたそれぞれの拡張量子化係数列Ｆ0、Ｆ1、ＦN-1を、再スキャンし、拡張量子化係数のランレベル係数値を生成するものである。
【０１８５】
拡張可変長符号化器（ＶＬＣ・Ｆ0）１２３１、（ＶＬＣ・Ｆ1）１２３２、（ＶＬＣ・ＦN-1）１２３３は、それぞれ拡張再スキャン器１１８１、１１８２、１１８３に生成された拡張量子化係数のランレベル係数値を、可変長符号化し、拡張符号化信号Ｅ（１）、Ｅ（２）、Ｅ（Ｍ−１）を生成するものである。
【０１８６】
係数情報多重化部１２７０ａは、ＶＬＣ基本１２１０に生成された基本量子化係数符号化信号と、係数情報分離部１２６０に分離された係数情報以外のデータと、を入力し、多重化して、基本符号化信号Ｂを生成するものである。
【０１８７】
以上説明したように、分離部１１００ａにおいて、符号化ストリーム（１次符号化信号）を入力して、基本符号化信号Ｂ、拡張符号化信号Ｅ（０）、Ｅ（１）、Ｅ（２）・・・、Ｅ（Ｍ−１）を生成することができる。
【０１８８】
次に、合成部(merge)３３００の一実施形態である合成部(merge)３３００ａのブロック図を、図２５に示す。
【０１８９】
合成部３３００ａは、係数情報分離部３４５０ａ、基本可変長復号器（ＶＬＤ基本）３３１０、予測誤差可変長復号器（ＶＬＤ予測誤差）３３２０、拡張可変長復号器（ＶＬＤ・Ｅ（０））３３３１、（ＶＬＤ・Ｅ（１））３３３２、（ＶＬＤ・Ｅ（Ｎ’−１））３３３３、基本係数変換器３３４０、予測誤差係数変換器３３５０、拡張係数変換器３３６１、３３６２、３３６３、基本量子化係数合成器３３７０、拡張量子化係数合成器３３８０、基本拡張階層合成器３３９０、ランレベル係数変換器３４１０、可変長符号化器（ＶＬＣ）３４２０および係数情報多重化部３４６０を備え、基本符号化信号Ｂ*、拡張符号化信号Ｅ*（０）、Ｅ*（１）、Ｅ*（２）・・・、Ｅ*（Ｍ’−１）を入力し、合成ストリーム（３次符号化信号）を出力するものである。
【０１９０】
合成部３３００ａの係数情報分離部３４５０ａは、入力された基本符号化信号Ｂ*を、係数情報と係数情報以外に分離し、出力するものである。この場合、係数情報は、２次元ランレングスによりハフマン符号化された量子化係数符号であり、係数情報以外とはＭＢ層のデータとイントラＭＢのＤＣ係数符号である。
【０１９１】
基本可変長復号器（ＶＬＤ基本）３３１０および基本係数変換器３３４０は、係数情報分離部３４５０ａに分離された係数情報を、可変長復号し、基本量子化係数列Ｃ*に変換するものである。
【０１９２】
予測誤差可変長復号器（ＶＬＤ予測誤差）３３２０および予測誤差係数変換器３３５０は、入力された拡張符号化信号Ｅ*（０）を、可変長復号し、余り係数（予測誤差係数）のランレベル情報に変換し、さらに、余り係数列（予測誤差係数列）Ｄ*に変換するものである。
【０１９３】
拡張可変長復号器（ＶＬＤ・Ｅ（０））３３３１、（ＶＬＤ・Ｅ（１））３３３２、（ＶＬＤ・Ｅ（Ｎ’−１））３３３３は、それぞれ入力された拡張符号化信号Ｅ*（０）、Ｅ*（１）、Ｅ*（Ｍ’−１）を、可変長復号し、拡張量子化係数のランレベル情報に変換するものである。
【０１９４】
拡張係数変換器３３６１、３３６２、３３６３は、それぞれＶＬＤ・Ｅ（０）３３３１、ＶＬＤ・Ｅ（１）３３３２、ＶＬＤ・Ｅ（Ｎ’−１）３３３３に変換された拡張量子化係数のランレベル情報を、拡張量子化係数列Ｆ*0、Ｆ*1、Ｆ*N'-1に変換するものである。
【０１９５】
基本量子化係数合成器３３７０は、基本係数変換器３３４０に変換された基本量子化係数列Ｃ*と、予測誤差係数変換器３３５０に変換された余り係数列（予測誤差係数列）Ｄ*と、を合成し、基本階層係数列Ｂ*を生成するものである。
【０１９６】
拡張量子化係数合成器３３８０は、ＶＬＤ・Ｅ（０）３３３１、ＶＬＤ・Ｅ（１）３３３２・・・、ＶＬＤ・Ｅ（Ｎ’−１）３３３３に変換された拡張量子化係数列Ｆ*0、Ｆ*1・・・、Ｆ*N'-1を入力するとともに、外部から拡張階層分離パターン情報を入力し、前記拡張階層分離パターン情報にしたがって前記拡張量子化係数列Ｆ*0、Ｆ*1・・・、Ｆ*N'-1を拡張階層係数列Ｅ*に合成するものである。
【０１９７】
基本拡張階層合成器３３９０は、基本量子化係数合成器３３７０に生成された基本階層係数列Ｂ*と、拡張量子化係数合成器３３８０に生成された拡張階層係数列Ｅ*と、を合成して、合成量子化係数列（３次量子化係数列）Ｘ*を生成するものである。
【０１９８】
ランレベル係数変換器３４１０は、基本拡張階層合成器３３９０に生成された合成量子化係数列（３次量子化係数列）Ｘ*を係数変換し、ランレベル情報に変換するものである。
【０１９９】
可変長符号化器（ＶＬＣ）３４２０は、ランレベル係数変換器３４１０に変換されたランレベル情報を可変長符号化し、係数情報の符号化信号を生成するものである。
【０２００】
係数情報多重化部３４６０は、ＶＬＣ３４２０に生成された係数情報の符号化信号と、係数情報分離部３４５０ａに分離された係数情報以外のデータと、を入力し、多重化して、合成ストリーム（３次符号化信号）を生成するものである。
【０２０１】
以上説明したように、合成部３３００ａにおいて、基本符号化信号Ｂ*、拡張符号化信号Ｅ*（０）、Ｅ*（１）、Ｅ*（２）・・・、Ｅ*（Ｍ’−１）を入力して、合成ストリーム（３次符号化信号）を生成することができる。
【０２０２】
この合成ストリーム（３次符号化信号）は、通常のＭＰＥＧ−２ストリームであるので、例えば一般的な復号器である復号器３０３０において復号して、再生することができる。
【０２０３】
（第２の実施の形態）
次に、分離器１０１０の多重化部１６００で、拡張ストリームＥ(ｍ)を多重化することで、レートの異なる分離ストリームＳｔ(ｌ)（０≦ｌ≦Ｌ−１）を生成する場合について、説明する。
【０２０４】
多重化部１６００で拡張ストリームＥ(ｍ)を多重化することにより、分離部１１００より出力される拡張ストリーム数Ｍを変更することなく、伝送路の数に応じたＬ本の分離ストリームが生成可能となり、分離ストリームＳｔ(ｌ)のレートの違いを利用して、選択可能なレートの種類がストリームの数よりも多くなる。
【０２０５】
この場合、分離器１０１０の多重化器１６００内で、拡張ストリームＥ（ｍ）を多重化することで、分離ストリームＳｔ(ｌ)をすべて異なるレートにすることができる。このとき、拡張ストリームＥ（ｍ）をＧl 本多重化し、分離ストリームＳｔ(ｌ)のレートは、多重化された拡張ストリームの合計レートにほぼ等しくなり、多重化パラメータＧl によって決まる。
【０２０６】
拡張ストリームＥ（ｍ）の多重化の方法としては、ストリームを１本分ずつ増やしていく方法、ストリームを２のべき乗倍にしていく方法等がある。上記の２つの方法は、Ｇl ＝ｌ＋１およびＧl ＝２l となる合成であり、拡張ストリームＥ（ｍ）の多重化の方法が、数列ｘnに従うものとすると、それぞれ下記式（１０）、下記式（１１）となる。
【０２０７】
ｘn＝｛１，２，３・・・，ｎ｝                                    式（１０）
ｘn＝｛１，２，４・・・，２n-1｝                                  式（１１）
上記のようにレートの異なる分離ストリームＳｔ(ｌ)が生成された場合について、伝送路選択器の伝送路選択の具体例を、図２６に示し説明する。
【０２０８】
また、本実施の形態は、上記特許、特願２００３−３８１８５９における第５の実施の形態に、映像蓄積機能を付加したものである。
【０２０９】
図２６に示すように、分離器１０１０内の多重化部１６００において、Ｇl ＝２l となる拡張ストリームの多重化が行われ、基本ストリームの多重化が方式（１）、方式（２）のいずれかの方式を用いて行われ、分離ストリームＳｔ(０)、Ｓｔ(１)、Ｓｔ(２)が生成された。このとき、Ｌ＝３であり、分離ストリームＳｔ（ｌ）のレートが、それぞれRate［Ｓｔ(０)］≒ｑ、Rate［Ｓｔ(１)］≒２ｑ、Rate［Ｓｔ(２)］≒４ｑとなるように生成されたとする。
【０２１０】
帯域制御スイッチボックス２３００では、上記実施の形態と同様に、スイッチ制御部２０２０のレジスタＲｓの値［１１０］にしたがって制御され、分離ストリームＳｔ（０）、Ｓｔ（１）をルータ蓄積器２０４０に蓄積する。
【０２１１】
帯域選択制御スイッチボックス２４００では、目標レートがＲtarget＝４ｑのとき、分離ストリームＳｔ(２)の伝送路スイッチをオン、Ｓｔ（０）、Ｓｔ（１）の伝送路スイッチをオフにするように、スイッチ制御部２０２０のレジスタＲｄの値が［００１］となり、Rate［Ｓｔ(ｏｕｔ)］≦４ｑを実現している。
【０２１２】
ここで、Ｒｄに関して、レジスタの各ビットがＬＳＢ（最下位ビット）側からＳｗd（０）、Ｓｗd（１）・・・と対応するように構成すると、使用帯域を２進数で表した値をレジスタ値として与えることで帯域制御することもできる。
【０２１３】
また、映像蓄積機能を有しているため、上記実施の形態と同様に、レジスタ値の参照による再配信が可能である。
【０２１４】
合成器３０１０の多重分離部３１００は、上記特許、特願２００３−３８１８５９における第５の実施の形態に、映像蓄積機能を付加したものである。
【０２１５】
（第３の実施の形態）
次に、多段伝送を行う符号化信号蓄積配信システムを、図２７、図２８に示し、説明する。
【０２１６】
図２７、図２８に示すように、本実施の形態の符号化信号蓄積配信システムでは、サーバ１０００とレシーバ３０００との間に、ルータ２０００ａとルータ２０００ｂとが介在するものとする。また、ルータが３つ以上の場合であっても、本実施の形態と同様の処理を行うことができる。
【０２１７】
まず、図２７に示すように、ストリームの初回配信では、サーバ１０００がオリジナルの符号化ストリームを入力し、複数の分離ストリームＳｔ（ｌ）に分離して、全ての分離ストリームＳｔ（ｌ）をサーバ蓄積器１０４０に蓄積する。
【０２１８】
次に、サーバ１０００からルータ２０００ａに、全ての分離ストリームＳｔ（ｌ）を配信する。ここでは、サーバ１０００からルータ２０００ａの伝送路においては、十分な帯域が確保されているものとし、全ての分離ストリームＳｔ（ｌ）が配信されて、ルータ２０００ａでは、分離ストリームＳｔ（ｌ）の蓄積は行わない。
【０２１９】
続いて、ルータ２０００ａからルータ２０００ｂへの伝送において、分離ストリームＳｔ（１）、Ｓｔ（５）が失われたとする。次に、ルータ２０００ｂからレシーバ３０００の伝送路においては、帯域制限されており、ルータ２０００ｂの選択により、分離ストリームＳｔ（２）、Ｓｔ（３）のみが配信される。また、ルータ２０００ｂでは、分離ストリームＳｔ（０）、Ｓｔ（４）を、ルータ蓄積器２０４０ｂに蓄積する。さらに、レシーバ３０００では、受け取った分離ストリームＳｔ（２）、Ｓｔ（３）を、レシーバ蓄積器３０４０に蓄積する。
【０２２０】
次に、図２８に示すように、レシーバ３０００は、取得できなかった分離ストリームＳｔ（０）、Ｓｔ（１）、Ｓｔ（４）、Ｓｔ（５）の再配信リクエストをルータ２０００ｂに送る。
【０２２１】
ルータ２０００ｂでは、ルータ蓄積器２０４０ｂに蓄積されている分離ストリームＳｔ（ｌ）を検索し、リクエストされたストリームの一部Ｓｔ（０）、Ｓｔ（４）をレシーバ３０００に配信する。また、ルータ２０００ｂは、見つからなかった分離ストリームＳｔ（１）、Ｓｔ（５）の再配信リクエストをルータ２０００ａに送る。
【０２２２】
ルータ２０００ａでは、ルータ蓄積器２０４０ａに蓄積されている分離ストリームＳｔ（ｌ）を検索するが、蓄積されている分離ストリームＳｔ（ｌ）が無いため、配信は行わない。さらに、ルータ２０００ａは、見つからなかった分離ストリームＳｔ（１）、Ｓｔ（５）の再配信リクエストをサーバ１０００に送る。
【０２２３】
サーバ１０００では、蓄積されている分離ストリームＳｔ（ｌ）を検索し、リクエストされた分離ストリームＳｔ（１）、Ｓｔ（５）を、ルータ２０００ａ、ルータ２０００ｂを経由して、レシーバ３０００に配信する。また、このとき、レシーバ３０００への配信は、ルータ２０００ａ、ルータ２０００ｂを経由しなくても構わない。
【０２２４】
レシーバ３０００では、レシーバ蓄積器１０４０に蓄積されている分離ストリームＳｔ（２）、Ｓｔ（３）と、ルータ２０００ｂから配信された分離ストリームＳｔ（０）、Ｓｔ（４）と、サーバ１０００から配信された分離ストリームＳｔ（１）、Ｓｔ（５）と、を合成器３０１０で合成して、サーバ１０００に入力されたオリジナルの符号化ストリームと同等の合成ストリームを得ることができる。
【０２２５】
以上の処理により、レシーバ３０００は、ネットワーク上の最も近いルータ２０００やサーバ１０００から必要な分離ストリームＳｔ（ｌ）を取得することができ、通信コストの削減ができるとともに、ネットワーク上のトラフィックを抑えて、合成ストリームを生成することができる。ここで、ネットワーク上で最も近いとは、物理的な距離が近いことを意味するものではなく、回線経路が近いことをあらわす。
【０２２６】
また、この合成ストリームは、復号器３０２０に出力され、復号されて、ディスプレイ４０００で再生することができる。したがって、ネットワーク上で最も近い装置（ルータまたはサーバ）から、ストリームを受信して、オリジナルと同一の映像再生を行うことができる。
【産業上の利用可能性】
【０２２７】
以上のように、本発明にかかる符号化信号蓄積配信システム、符号化信号選択転送装置、符号化信号分離送信装置および符号化信号受信合成装置は、再配信要求時に、伝送符号化信号を符号化信号分離送信装置まで取りに行かずに、符号化信号選択転送装置に蓄積された伝送符号化信号を取得することができ、ネットワーク上のトラフィックを悪化させず、通信コストを抑えて、必要に応じて高品質の映像を得ることができる合成ストリームの生成を行うことができるという効果を有し、映像のスケーラブル伝送を行う符号化信号蓄積配信システム、符号化信号選択転送装置、符号化信号分離送信装置および符号化信号受信合成装置等として有用である。
【図面の簡単な説明】
【０２２８】
【図１】本発明の第１の実施の形態における符号化信号蓄積配信システムのブロック図である。
【図２】符号化信号蓄積配信システムの処理概要（サーバでの処理）を示すブロック図である。
【図３】符号化信号蓄積配信システムの処理概要（サーバからレシーバへの配信処理）を示すブロック図である。
【図４】符号化信号蓄積配信システムの処理概要（ルータとレシーバ間の再配信処理）を示すブロック図である。
【図５】サーバの分離器とサーバ蓄積器との関係を示すブロック図である。
【図６】サーバの分離器とサーバ蓄積器との関係を示すブロック図である。
【図７】方式１（ロバストネス伝送路あり）における分離器の多重化部の多重化方式を示すブロック図である。
【図８】方式２（ロバストネス伝送路なし）における分離器の多重化部の多重化方式を示すブロック図である。
【図９】本発明のルータを示すブロック図である。
【図１０】伝送路選択器の蓄積制御スイッチボックスおよびスイッチ制御器による制御を示すブロック図である。
【図１１】伝送路選択器の帯域選択制御スイッチボックスおよびスイッチ制御器による制御を示すブロック図である。
【図１２】伝送路選択器のスイッチ制御器におけるＲｓのとる値の一例を示す図である。
【図１３】スイッチ制御器の制御による伝送路選択器における伝送路選択例を示す図である。
【図１４】図１３の例におけるスイッチの値と蓄積、伝送状態の関係を示す図である。
【図１５】ルータのスイッチ制御器のレジスタを利用した再配信処理（ルータからレシーバに第１伝送）例を示すブロック図である。
【図１６】ルータのスイッチ制御器のレジスタを利用した再配信処理（レシーバからルータへリクエスト）例を示すブロック図である。
【図１７】ルータのスイッチ制御器のレジスタを利用した再配信処理（ルータからレシーバに第２伝送）例を示すブロック図である。
【図１８】ルータ、レシーバ間の配信動作とレジスタ値との関係を示す図である。
【図１９】レシーバの合成器とレシーバ蓄積器との関係を示すブロック図である。
【図２０】レシーバの合成器とレシーバ蓄積器との関係を示すブロック図である。
【図２１】方式１における多重分離部および基本ストリーム選択器を示すブロック図である。
【図２２】方式２における多重分離部および基本ストリーム選択器を示すブロック図である。
【図２３】ルータ、レシーバ間の配信動作とレジスタ値との関係を示す図である。
【図２４】分離器の分離部を示すブロック図である。
【図２５】合成器の合成部を示すブロック図である。
【図２６】レートの異なる分離ストリームを入力する伝送路選択器による伝送路選択例を示すブロック図である。
【図２７】多段伝送を行う符号化信号蓄積配信システム（ストリームの初回配信）を示すブロック図である。
【図２８】多段伝送を行う符号化信号蓄積配信システム（伝送路上のストリーム検索）を示すブロック図である。
【図２９】従来のトランスコーダの概略ブロック図である。
【図３０】従来のトランスコーダにおける、ＭＰＥＧ−２のＴＭ５のレート制御処理を示すフローチャートである。
【図３１】従来のトランスコーダの概略ブロック図である。
【図３２】従来のトランスコーダの処理を示すフローチャートである。
【図３３】従来のトランスコーダの概略ブロック図である。
【図３４】従来のトランスコーダの処理を示すフローチャートである。
【符号の説明】
【０２２９】
５０  トランスコーダ
５１  ＶＬＤ（可変長復号手段）
５３  逆量子化器（逆量子化手段）
５５  量子化器（量子化手段）
５７  ＶＬＣ（可変長符号化手段）
５９  レート制御部
６０  トランスコーダ
６１  遅延回路
６３  ビットレート比率計算部
６５  入力符号量積算部
６７  差分符号量計算部
６９  目標出力符号量更新部
７１  量子化スケールコード算出部
８０  トランスコーダ
８１  ＶＬＤ
８３  目標出力符号量更新部
８５  量子化スケールコード算出部
６００  カメラ
７００  符号化器
８００  コンテンツ蓄積器
１０００  サーバ（分離送信装置）
１０１０  分離器
１０４０  サーバ蓄積器
１１００、１１００ａ  分離部(separate)
１１１０  可変長復号器（ＶＬＤ）
１１２０  ランレベル係数変換器
１１３０  基本、拡張階層分離器
１１４０  基本量子化係数変換器
１１５０  拡張量子化係数分離器
１１６０  基本再スキャン器
１１７０  予測誤差再スキャン器
１１８１、１１８２、１１８３  拡張再スキャン器
１２１０  基本可変長符号化器（ＶＬＣ基本）
１２２０  予測誤差可変長符号化器（ＶＬＣ予測誤差）
１２３１  拡張可変長符号化器（ＶＬＣ・Ｆ0）
１２３２  拡張可変長符号化器（ＶＬＣ・Ｆ1）
１２３３  拡張可変長符号化器（ＶＬＣ・ＦN-1）
１２６０  係数情報分離部
１２７０ａ  係数情報多重化部
１６００、１６００ａ、１６００ｂ  多重化部(MUX)
２０００  ルータ（選択転送装置）
２０１０  伝送路選択器
２０２０  スイッチ制御器
２０４０  ルータ蓄積器
２３００  蓄積制御スイッチボックス
２４００  帯域選択制御スイッチボックス
３０００、３０００ａ、３０００ｂ、３０００ｎ  レシーバ（受信合成装置）
３０１０、３０１０ａ、３０１０ｂ、３０１０ｎ  合成器
３０２０  合成制御器(merge controller)
３０３０、３０３０ａ、３０３０ｂ、３０３０ｎ  復号器
３０４０、３０４０ａ、３０４０ｂ、３０４０ｎ  レシーバ蓄積器
３０９０  多重基本選択器
３１００ａ、３１００ｂ  多重分離部(DEMUX)
３２００ａ、３２００ｂ  基本ストリーム選択器(B-Selector)
３３００  合成部(merge)
３３１０  基本可変長復号器（ＶＬＤ基本）
３３２０  予測誤差可変長復号器（ＶＬＤ予測誤差）
３３３１  拡張可変長復号器（ＶＬＤ・Ｅ(０)）
３３３２  拡張可変長復号器（ＶＬＤ・Ｅ(１)）
３３３３  拡張可変長復号器（ＶＬＤ・Ｅ(Ｎ’−１)）
３３４０  基本係数変換器
３３５０  予測誤差係数変換器
３３６１、３３６２、３３６３  拡張係数変換器
３３７０  基本量子化係数合成器
３３８０  拡張量子化係数合成器
３３９０  基本、拡張階層合成器
３４１０  ランレベル係数変換器
３４２０  可変長符号化器（ＶＬＣ）
３４５０ａ  係数情報分離部
３４６０  係数情報多重化部
４０００  ４０００ａ、４０００ｂ、４０００ｎ  ディスプレイ（表示装置）
【図１】
2005295106.tif 000009
【図２】
2005295106.tif 000010
【図３】
2005295106.tif 000011
【図４】
2005295106.tif 000012
【図５】
2005295106.tif 000013
【図６】
2005295106.tif 000014
【図７】
2005295106.tif 000015
【図８】
2005295106.tif 000016
【図９】
2005295106.tif 000017
【図１０】
2005295106.tif 000018
【図１１】
2005295106.tif 000019
【図１２】
2005295106.tif 000020
【図１３】
2005295106.tif 000021
【図１４】
2005295106.tif 000022
【図１５】
2005295106.tif 000023
【図１６】
2005295106.tif 000024
【図１７】
2005295106.tif 000025
【図１８】
2005295106.tif 000026
【図１９】
2005295106.tif 000027
【図２０】
2005295106.tif 000028
【図２１】
2005295106.tif 000029
【図２２】
2005295106.tif 000030
【図２３】
2005295106.tif 000031
【図２４】
2005295106.tif 000032
【図２５】
2005295106.tif 000033
【図２６】
2005295106.tif 000034
【図２７】
2005295106.tif 000035
【図２８】
2005295106.tif 000036
【図２９】
2005295106.tif 000037
【図３０】
2005295106.tif 000038
【図３１】
2005295106.tif 000039
【図３２】
2005295106.tif 000040
【図３３】
2005295106.tif 000041
【図３４】
2005295106.tif 000042