(57)【要約】  MPEG-2 AAC、MPEG-Surroundまたは(AAC+SBR)では、受信したビットストリームの中身を最後まで解析しないとAACかMPSかの判別ができないため、音声信号の出力遅延が大きくなると、映像信号の出力を遅らせる制御が間に合わず、AV同期がとれないという課題がある。  送信装置は、音声ストリームパケットのヘッダ情報には含まれない情報で、音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が含まれるか否かを示す符号化情報を含み、受信装置により音声ストリームパケットの復号開始前に解析されるデータパケットを生成するデータパケット生成手段と、音声ストリームパケット、データパケットおよび映像ストリームパケットを多重化放送により送信する送信手段とを備える。受信装置では、符号化信号の中身を最後まで解析せずに、符号化方式特有の情報を知ることができる。
2008117524.tif 000002
【特許請求の範囲】
【請求項１】
同期をとりながら再生される音声信号と映像信号とを符号化およびパケット化して多重化放送するデジタル放送送信装置であって、
音声信号を符号化して音声符号化信号へ変換し、変換後の前記音声符号化信号を含む音声ストリームパケットを生成する音声ストリームパケット生成手段と、
前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を含み、デジタル放送受信装置により前記音声ストリームパケットの復号開始前に解析されるデータパケットを生成するデータパケット生成手段と、
映像信号を符号化して映像符号化信号へ変換し、変換後の前記映像符号化信号を含む映像ストリームパケットを生成する映像ストリームパケット生成手段と、
前記音声ストリームパケット、前記データパケットおよび前記映像ストリームパケットを多重化することにより多重化データを生成し、生成した前記多重化データを放送波により送信する送信手段と
を備えることを特徴とするデジタル放送送信装置。
【請求項２】
前記音声ストリームパケット生成手段は、音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化する第１の符号化モードと、前記音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化するとともに、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するための補助情報を含めて符号化する第２の符号化モードとのいずれかの符号化モードで前記音声信号を音声符号化信号へ変換する音声符号化部を備え、
前記データパケット生成手段は、前記音声符号化部が、前記第１の符号化モード及び前記第２の符号化モードのいずれで前記音声符号化信号へ変換したかを示す前記符号化情報を生成する符号化情報生成部を備える
ことを特徴とする請求項１記載のデジタル放送送信装置。
【請求項３】
前記データパケット生成手段は、前記符号化情報のみをデータとして含む独立したデータパケットを生成する
ことを特徴とする請求項２記載のデジタル放送送信装置。
【請求項４】
前記データパケット生成手段は、前記音声ストリームパケット生成手段によって生成される音声ストリームパケット毎に前記データパケットを生成し、
前記送信手段は、前記データパケットが直前のデータパケットと同じ内容であるとき、生成された前記データパケットを多重化しないで送信する
ことを特徴とする請求項３記載のデジタル放送送信装置。
【請求項５】
前記データパケット生成手段は、前記データパケットをセクション形式で規定されたフォーマットで生成する
ことを特徴とする請求項２記載のデジタル放送送信装置。
【請求項６】
前記データパケット生成手段は、前記音声符号化部が、前記第１の符号化モード及び前記第２の符号化モードのいずれで前記音声符号化信号へ変換したかを示す符号化情報を記述子で表し、前記記述子を、ＰＭＴ(Program Map Table)内でエレメンタリーストリームごとに繰り返される記述子領域に埋め込んだパケットを生成する
ことを特徴とする請求項２記載のデジタル放送送信装置。
【請求項７】
前記データパケット生成手段は、さらに、前記基本信号が前記補助情報を用いて出力チャンネル数を拡大される場合の拡大後のチャンネル数を示す符号化情報を含むデータパケットを生成する
ことを特徴とする請求項２記載のデジタル放送送信装置。
【請求項８】
前記データパケット生成手段は、さらに、前記基本信号のデータ長を示す符号化情報を含むデータパケットを生成する
ことを特徴とする請求項２記載のデジタル放送送信装置。
【請求項９】
同期をとりながら再生される音声信号と映像信号とが符号化およびパケット化されて送信された多重化放送を受信するデジタル放送受信装置であって、
前記多重化放送を受信する受信手段と、
前記受信手段が前記多重化放送により受信した多重化データから、符号化された音声信号である音声符号化信号を含む音声ストリームパケットと、符号化された映像信号である映像符号化信号を含む映像ストリームパケットと、前記音声ストリームパケット及び前記映像ストリームパケット以外のデータパケットとを分離する分離手段と、
分離された前記データパケットから、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を、前記音声ストリームパケットの復号開始前に解析する解析手段と、
前記符号化情報が、前記音声符号化信号の復号が予め定められた復号時間を超える要因となる処理が含まれることを示している場合、前記音声信号の復号時間が予め定められた復号時間を超える分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングを調整する復号手段と
を備えることを特徴とするデジタル放送受信装置。
【請求項１０】
前記分離手段は、受信した前記多重化データから、前記音声ストリームパケットとして、音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化する第１の符号化モードと、前記音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化するとともに、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するための補助情報を含めて符号化する第２の符号化モードとのいずれかの符号化モードで符号化された前記音声符号化信号を含む音声ストリームパケットを分離し、
前記解析手段は、前記符号化情報から、分離された前記音声ストリームパケットに含まれる前記音声符号化信号が、前記第１の符号化モード及び前記第２の符号化モードのいずれで変換されたかを解析し、
前記復号手段は、前記解析結果に基づき、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するために要する時間分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとを調整する
ことを特徴とする請求項９記載のデジタル放送受信装置。
【請求項１１】
前記復号手段は、前記解析手段による解析の結果、分離された前記音声ストリームパケットに含まれる音声符号化信号が、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで変換されている場合よりも予め定められた一定時間だけ遅く前記映像信号を出力する
ことを特徴とする請求項１０記載のデジタル放送受信装置。
【請求項１２】
前記復号手段は、前記解析手段による解析の結果、分離された前記音声ストリームパケットに含まれる音声符号化信号が、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで変換されている場合よりも予め定められた一定時間だけ早く、前記音声符号化信号の復号開始を早める
ことを特徴とする請求項１０記載のデジタル放送受信装置。
【請求項１３】
前記予め定めた時間は、前記符号化された音声信号の第１のモードに対する第２のモードの復号処理の遅延時間である
ことを特徴とする請求項１０に記載のデジタル放送受信装置。
【請求項１４】
前記解析手段は、前記符号化情報から、さらに、前記基本信号が前記補助情報を用いて出力チャンネル数を拡大される場合の拡大後のチャンネル数を解析し、
前記復号手段は、当該デジタル放送受信装置の出力チャンネル数が前記符号化情報に示されるチャンネル数とは異なる場合、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大し、前記基本信号の出力チャンネル数を拡大するために要する時間分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとを調整する
ことを特徴とする請求項１０に記載のデジタル放送受信装置。
【請求項１５】
前記復号手段は、前記基本信号に含まれているチャンネル拡張に関する情報を用いるか、又は、２チャンネルの前記基本信号から５．１チャンネルのマルチチャンネル信号にチャンネル数の拡大を行う際の初期値又は推奨値を用いて、前記基本信号のチャンネル数を当該デジタル放送受信装置の出力チャンネル数に拡大するためのチャンネル拡張情報を推定するマルチチャンネル推定部を備え、
前記復号手段は、前記マルチチャンネル推定部によって推定された前記チャンネル拡張情報を用いて、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大する
ことを特徴とする請求項１４記載のデジタル放送受信装置。
【請求項１６】
前記解析手段は、前記符号化情報から、さらに、前記音声符号化信号の前記基本信号のデータ長を解析し、
前記復号手段は、前記解析手段により得られた前記基本信号の前記データ長と、前記音声符号化信号を復号して得られた前記基本信号のデータ長とを比較して、前記基本信号の復号が正しく行われたか否かを判定し、正しく行われたと判定した場合、前記マルチチャンネル推定部によって推定された前記チャンネル拡張情報を用いて、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大する
ことを特徴とする請求項１５記載のデジタル放送受信装置。
【請求項１７】
前記復号手段は、前記基本信号の復号が正しく行われたと判定した場合、さらに、前記補助情報を用いた前記チャンネル拡大処理が正しく行われたか否かを判定し、前記補助情報を用いた前記チャンネル拡大処理にエラーがあったと判定した場合、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとの調整を行わず、前記基本信号のみを出力する
ことを特徴とする請求項１６記載のデジタル放送受信装置。
【請求項１８】
同期をとりながら再生される音声信号と映像信号とを符号化およびパケット化して多重化放送するデジタル放送送信装置と、前記多重化放送を受信するデジタル放送受信装置とを含むデジタル放送送受信システムであって、
デジタル放送送信装置は、
音声信号を符号化して音声符号化信号へ変換し、変換後の前記音声符号化信号を含む音声ストリームパケットを生成する音声ストリームパケット生成手段と、
前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を含み、デジタル放送受信装置により前記音声ストリームパケットの復号開始前に解析されるデータパケットを生成するデータパケット生成手段と、
映像信号を符号化して映像符号化信号へ変換し、変換後の前記映像符号化信号を含む映像ストリームパケットを生成する映像ストリームパケット生成手段と、
前記音声ストリームパケット、前記データパケットおよび前記映像ストリームパケットを多重化することにより多重化データを生成し、生成した前記多重化データを放送波により送信する送信手段とを備え、
前記デジタル放送受信装置は、
前記多重化放送を受信する受信手段と、
前記受信手段が前記多重化放送により受信した前記多重化データから、符号化された音声信号である音声符号化信号を含む前記音声ストリームパケットと、符号化された映像信号である映像符号化信号を含む前記映像ストリームパケットと、前記音声ストリームパケット及び前記映像ストリームパケット以外の前記データパケットとを分離する分離手段と、
分離された前記データパケットから、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を、前記音声ストリームパケットの復号開始前に解析する解析手段と、
前記符号化情報が、前記音声符号化信号の復号が予め定められた復号時間を超える要因となる処理が含まれることを示している場合、前記音声信号の復号時間が予め定められた復号時間を超える分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングを調整する復号手段とを備える
ことを特徴とするデジタル放送送受信システム。
【請求項１９】
同期をとりながら再生される音声信号と映像信号とを符号化およびパケット化して多重化放送するデジタル放送送信方法であって、
音声ストリームパケット生成手段が、音声信号を符号化して音声符号化信号へ変換し、変換後の前記音声符号化信号を含む音声ストリームパケットを生成する音声ストリームパケット生成ステップと、
データパケット生成手段が、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を含み、デジタル放送受信装置により前記音声ストリームパケットの復号開始前に解析されるデータパケットを生成するデータパケット生成ステップと、
映像ストリームパケット生成手段が、映像信号を符号化して映像符号化信号へ変換し、変換後の前記映像符号化信号を含む映像ストリームパケットを生成する映像ストリームパケット生成ステップと、
送信手段が、前記音声ストリームパケット、前記データパケットおよび前記映像ストリームパケットを多重化することにより多重化データを生成し、生成した前記多重化データを放送波により送信する送信ステップと
を含むことを特徴とするデジタル放送送信方法。
【請求項２０】
同期をとりながら再生される音声信号と映像信号とが符号化およびパケット化されて送信された多重化放送を受信するデジタル放送受信方法であって、
受信手段が、前記多重化放送を受信する受信ステップと、
分離手段が、前記受信手段が前記多重化放送により受信した多重化データから、符号化された音声信号である音声符号化信号を含む音声ストリームパケットと、符号化された映像信号である映像符号化信号を含む映像ストリームパケットと、前記音声ストリームパケット及び前記映像ストリームパケット以外のデータパケットとを分離する分離ステップと、
解析手段が、分離された前記データパケットから、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を、前記音声ストリームパケットの復号開始前に解析する解析ステップと、
復号手段が、前記符号化情報が、前記音声符号化信号の復号が予め定められた復号時間を超える要因となる処理が含まれることを示している場合、前記音声信号の復号時間が予め定められた復号時間を超える分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングを調整する復号ステップと
を備えることを特徴とするデジタル放送受信方法。
【請求項２１】
同期をとりながら再生される音声信号と映像信号とを符号化およびパケット化して多重化放送するデジタル放送送信装置ためのプログラムであって、コンピュータを
音声信号を符号化して音声符号化信号へ変換し、変換後の前記音声符号化信号を含む音声ストリームパケットを生成する音声ストリームパケット生成手段と、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を含み、デジタル放送受信装置により前記音声ストリームパケットの復号開始前に解析されるデータパケットを生成するデータパケット生成手段と、映像信号を符号化して映像符号化信号へ変換し、変換後の前記映像符号化信号を含む映像ストリームパケットを生成する映像ストリームパケット生成手段と、前記音声ストリームパケット、前記データパケットおよび前記映像ストリームパケットを多重化することにより多重化データを生成し、生成した前記多重化データを放送波により送信する送信手段として機能させるためのプログラム。
【請求項２２】
同期をとりながら再生される音声信号と映像信号とが符号化およびパケット化されて送信された多重化放送を受信するデジタル放送受信装置のためのプログラムであって、コンピュータを
前記多重化放送を受信する受信手段と、前記受信手段が前記多重化放送により受信した多重化データから、符号化された音声信号である音声符号化信号を含む音声ストリームパケットと、符号化された映像信号である映像符号化信号を含む映像ストリームパケットと、前記音声ストリームパケット及び前記映像ストリームパケット以外のデータパケットとを分離する分離手段と、分離された前記データパケットから、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を、前記音声ストリームパケットの復号開始前に解析する解析手段と、前記符号化情報が、前記音声符号化信号の復号が予め定められた復号時間を超える要因となる処理が含まれることを示している場合、前記音声信号の復号時間が予め定められた復号時間を超える分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングを調整する復号手段として機能させるためのプログラム。
【請求項２３】
同期をとりながら再生される音声信号と映像信号とが符号化およびパケット化されて送信された多重化放送を受信する集積回路であって、
前記多重化放送を受信する受信手段と、
前記受信手段が前記多重化放送により受信した多重化データから、符号化された音声信号である音声符号化信号を含む音声ストリームパケットと、符号化された映像信号である映像符号化信号を含む映像ストリームパケットと、前記音声ストリームパケット及び前記映像ストリームパケット以外のデータパケットとを分離する分離手段と、
分離された前記データパケットから、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を、前記音声ストリームパケットの復号開始前に解析する解析手段と、
前記符号化情報が、前記音声符号化信号の復号が予め定められた復号時間を超える要因となる処理が含まれることを示している場合、前記音声信号の復号時間が予め定められた復号時間を超える分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングを調整する復号手段と
を備えることを特徴とする集積回路。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、地上波や衛星波を含む伝送路を介して、音声、映像および文字等の情報をデジタル方式で伝送するデジタル放送伝送システム、伝送に使用するデジタル放送送信装置、及び、デジタル放送受信装置に関するものである。
【背景技術】
【０００２】
近年、地上波や衛星波を含む伝送路を介して、音声、映像および文字等の情報をデジタル信号として伝送するデジタル放送が普及しつつある。【０００３】
デジタル信号を伝送する方式として、ＩＳＯ／ＩＥＣ１３８１８−１で提案されている方式がよく知られている。ＩＳＯ／ＩＥＣ１３８１８−１では、送信機側で、各番組の音声、映像およびデータ毎に符号化されたデジタル信号を多重化して伝送し、受信機側で、指定の番組を受信し再生するための制御部分についての方式が固められている。【０００４】
音声信号の符号化方式としては、ＩＳＯ／ＩＥＣ１３８１８−７（ＭＰＥＧ−２  Ａｕｄｉｏ  ＡＡＣ）や、その派生方式であるＡＡＣ＋ＳＢＲなどがよく知られ、映像信号の符号化方式としては、ＩＳＯ／ＩＥＣ１３８１８−２（ＭＰＥＧ−２  Ｖｉｄｅｏ）や、ＩＳＯ／ＩＥＣ１４４９６−１０（ＭＰＥＧ−４  ＡＶＣ／Ｈ．２６４）などが知られている。【０００５】
符号化された音声信号および映像信号は、任意の場所で区切られ、再生時間情報を含むヘッダ情報を付加され、ＰＥＳ(Packetized Elementary Stream)と呼ばれるパケットを構成する。さらにＰＥＳは、基本的に１８４バイト毎に区切られ、パケット識別子とよばれる識別のためのＩＤ（ＰＩＤ）を含むヘッダ情報を付加され、ＴＳＰ (トランスポートパケット Transport Packet) と呼ばれるパケットに再構成される。その後、文字等のデータパケットと一緒に多重化される。この時、ＰＳＩ(Program Specific Information)と呼ばれる、番組と番組を構成するパケットとの関係を表すテーブル情報も一緒に多重化される。【０００６】
ＰＳＩには、ＰＡＴ(Program Association Table)やＰＭＴ(Program Map Table)など４種類のテーブルが規定され、ＰＡＴには各番組に対応したＰＭＴのＰＩＤが記述され、ＰＭＴには対応する番組を構成する音声や映像信号などが格納されたパケットのＰＩＤが記述されている。受信機は、ＰＡＴとＰＭＴを参照することで、複数の番組が多重化されたＴＳＰの中から、目的の番組を構成するパケットだけを取出すことが可能となる。なお、データパケットやＰＳＩは、ＰＥＳではなく、セクションと呼ばれる形式でＴＳＰ内に格納される。【０００７】
図１は、ＰＥＳパケット及びセクション形式のフォーマット構成を示した図である。図１（ａ）は、ＰＥＳパケットのフォーマット構成を示す図である。ＰＥＳパケットは、ヘッダとヘッダ拡張情報とデータとからなる。ヘッダは再生時刻の情報を含むことができ、これを用いて映像と音声を同期して再生することができる。データは映像データおよび音声データなどの実体データを含んでいる。図１（ｂ）は、ＰＥＳパケットのセクション通常形式のフォーマット構成を示した図である。セクション通常形式では、ＰＥＳパケットは、２４ビットのヘッダと、データとからなる。さらに、図１（ｃ）は、ＰＥＳパケットのセクション拡張形式のフォーマット構成を示した図である。セクション拡張形式では、ＰＥＳパケットは、６４ビットのヘッダと、データと、ＣＲＣ（Cyclic Redundancy Checksum）からなり、伝送エラーなどの影響を受け難い構成となっている。ＰＡＴやＰＭＴなどは、図１（ｃ）に示される、セクション拡張形式でパケット化される。一方、ＡＲＩＢ  ＳＴＤ−Ｂ１０「デジタル放送に使用する番組配列情報」標準規格（非特許文献１）では、前記ＰＳＩの４種類のテーブル情報に加え、ユーザがサービスやイベントを識別するためのテーブル情報がさらに別途規定され、ＳＩ (Service Information)として区別される。さらに、ＰＳＩおよびＳＩの中に、様々な記述子を埋め込むことで、より柔軟なテーブル構成をとることが可能となっている。図２に、ＰＡＴとＰＭＴの詳細なフォーマット構成図を示す。図２（ａ）は、ＰＡＴのフォーマット構成を示す図である。図２（ａ）に示すように、ＰＡＴは、ヘッダと、繰り返し部と、ＣＲＣとからなる。繰り返し部には、１６ビットの放送番組番号識別部と３ビットの“１１１”と１３ビットのネットワークＰＩＤ、または、１６ビットの放送番組番号識別部と３ビットの“１１１”と１３ビットのＰＭＴＰＩＤが記述される。デジタル放送では、ＰＡＴにより、放送番組番号識別部とＰＭＴのＰＩＤとが対応付けられている。図２（ｂ）は、ＰＭＴのフォーマット構成を示す図である。ＰＭＴは、ヘッダに続いて、３ビットの“１１１”、１３ビットのＰＣＲＰＩＤ、４ビットの“１１１１”、１２ビットの番組情報長および記述子領域１が記述され、続いて繰り返し部がエレメンタリーストリームの数だけ繰り返され、末尾にＣＲＣが記述される。繰り返し部には、８ビットのストリーム形式識別部、３ビットの“１１１”、１３ビットの信号ＰＩＤ、４ビットの“１１１１”、１２ビットのＥＳ情報長および記述子領域２が記述される。さらに、ＰＭＴの末尾にはＣＲＣが記述される。これにより、１つの放送番組が選択された場合、ＰＡＴのＰＭＴＰＩＤから、選択された放送番組に対応するＰＭＴが特定され、ＰＭＴの中に記述されている信号ＰＩＤから当該放送番組を構成する映像および音声などの実データの符号化信号が記述されたパケットを特定することができる。【０００８】
図３は、従来のデジタル放送送信装置の構成を示した図である。従来のデジタル放送送信装置１０は、音声信号符号化部１１、映像信号符号化部１２、パケット化部１３ａ、１３ｂ、１３ｃ、多重化部１４、伝送路符号化／変調部１５、アンテナ１６を備える。番組を構成する音声および映像の各信号は、各々、音声信号符号化部１１および映像信号符号化部１２に入力され、符号化により、デジタル信号に変換される。変換された各デジタル信号は、パケット化部１３ａおよびパケット化部１３ｂにてヘッダ情報を付加され、ＰＥＳ化される。同時に、データ信号やＰＡＴおよびＰＭＴも、同じくパケット化部１３ｃに入力され、セクション形式でパケット化される。その後、多重化部１４にて全てのＰＥＳおよびセクションパケットが時間多重され、伝送路符号化／変調部１５にて送信処理された後、アンテナ１６より送出される。なお、ここでの送信処理とは、ブロック訂正符号化や畳み込み符号化、インタリーブなどの伝送路符号化処理と、ＯＦＤＭなどのデジタル変調処理を指しているが、その詳細についての説明は省略する。ＩＳＤＢ−Ｔ方式における前記送信処理の詳細は、ＡＲＩＢ  ＳＴＤ−Ｂ２４「デジタル放送におけるデータ放送符号化方式と伝送方式」標準規格（非特許文献２）などに記載されている。【０００９】
図４は、従来のデジタル放送受信装置の構成を示した図である。図５は、従来のデジタル放送受信装置における、受信処理の処理手順を示したフローチャートである。従来のデジタル放送受信装置２０は、アンテナ２１、復調／伝送路復号部２２、逆多重化部２３、パケット解析部２４ａ、２４ｂ、２４ｃ、音声信号復号部２５、映像信号復号部２６および番組情報解析部２７を備える。デジタル放送受信装置２０がアンテナ２１を介して受信したデジタル放送波は、復調／伝送路復号部２２にて受信処理され、多重化されたＴＳＰ列を出力する。なお、ここでの受信処理とは、ＯＦＤＭ(直交周波数分割多重：Orthogonal Frequency Division Multiplexing)などデジタル変調信号の復調処理と、誤り訂正復号やデインタリーブなどの伝送路復号処理を指し、前記伝送路符号化／変調部１５での送信処理と対となる処理のことを指す。【００１０】
逆多重化部２３では、まず、受信したＴＳＰ列からＰＡＴパケットを選択し（図５のＳ１１、Ｓ１２）、パケット解析部２４ｃにてＰＡＴの解析を行う（Ｓ１３）。番組情報解析部２７では、ＰＡＴから、サービス中の各番組に対応するＰＭＴパケットのＰＩＤを抽出し、逆多重化部２３に通知する。続いて、番組情報解析部２７は、抽出されたＰＩＤのＰＭＴパケットを選択（Ｓ１４、Ｓ１５）および解析し（Ｓ１６）、サービス中の各番組の詳細情報をユーザに提示して、ユーザの番組選択を受け付ける（Ｓ１８、Ｓ１７）。番組情報解析部２７は、ユーザの番組選択に従い、所望の番組を構成する音声や映像信号などが格納されたパケットのＰＩＤを逆多重化部２３に通知する（Ｓ２）。これにより、所望の番組を構成するＰＥＳの音声パケットおよび映像パケットが選択される（Ｓ３）。【００１１】
音声および映像の各パケットは、パケット解析部２４ａ、２４ｂにてヘッダ情報部とペイロード部（ここでは符号化信号)に分離、抽出され（Ｓ４）、音声および映像の各符号化信号は、各々、音声信号復号部２５および映像信号復号部２６にて復号される（Ｓ５）。復号によって得られた音声信号および映像信号は、パケット解析部２４ａ、２４ｂで抽出したヘッダ情報に含まれていたＰＴＳ（Presentation Time Stamp）に従って出力される（Ｓ６）。【００１２】
図６は、従来のデジタル放送受信装置において、多重化されたＴＳＰ列から、１系統のＡＡＣビットストリームを形成するモデルを示した図である。同図に示すように、ＰＩＤ：“０ｘ０”で示されるＰＡＴには、番組Ａと番組ＢとのＰＭＴのＰＩＤが記述されている。例えば、番組ＡのＰＭＴのＰＩＤは“０ｘ１１”であり、番組ＢのＰＭＴのＰＩＤは“０ｘ１２”であることが記述されている。各ＰＭＴには、ＰＡＴの中で対応付けられている番組を構成する音声および映像の符号化データが記述された信号パケットのＰＩＤが記述される。例えば、番組ＡのＰＭＴ（ＰＩＤ：“０ｘ１１”）には、音声の信号パケットのＰＩＤが“０ｘ２１”で、映像の信号パケットのＰＩＤが“０ｘ２２”であることが記述されている。また、番組ＢのＰＭＴ（ＰＩＤ：“０ｘ１２”）には、音声の信号パケットのＰＩＤが“０ｘ２３”で、映像の信号パケットのＰＩＤが“０ｘ２４”であることが記述されている。【００１３】
ここで、ユーザによって例えば、番組Ａが選択された場合、ＴＳＰの中からＰＩＤが“０ｘ２１”のパケットだけを抽出していくと、番組Ａを構成する音声の符号化データからなるＰＥＳを得ることができる。また、さらに、ＴＳＰの中からＰＩＤが“０ｘ２２”のパケットだけを抽出すると、番組Ａを構成する映像の符号化データからなるＰＥＳを得ることができる。【００１４】
このようにして得られたＰＥＳパケットから、ヘッダなどを取り除いてデータだけを抽出すると、例えば、ＭＰＥＧ−２  ＡＡＣのストリームを得ることができる（特許文献１参照）。【００１５】
ところで、近年、音声信号のさらなる圧縮効率向上のため、従来のＡＡＣを拡張し、狭帯域化やダウンミックスによるモノラル化またはステレオ化によって低レート化したビットストリームを基本信号としつつ、わずかな付加情報を加えることによって、高域成分の復元や、マルチチャンネル再生を可能とする方式が提案されている。例えば、基本信号としては１０ｋＨｚ程度に狭帯域化された信号であっても、高域周波数情報を付加することで、４８ｋｂｐｓ程度でもＣＤ相当の音質で再生可能にするＡＡＣ＋ＳＢＲや、２チャンネルのダウンミックス信号に、チャンネル間のレベル差や位相差情報を付加することで、９６ｋｂｐｓ程度でも５．１チャンネルサラウンド再生を可能にするＭＰＥＧ−Ｓｕｒｒｏｕｎｄなどが提案されている。【００１６】
図７は、ＡＡＣ、ＡＡＣ＋ＳＢＲおよびＭＰＥＧ−Ｓｕｒｒｏｕｎｄの各フォーマット構成を示した図である。図７（ａ）は、通常のＭＰＥＧ−２  ＡＡＣのフレーム構造を示す図である。図７（ｂ）は、ＭＰＥＧ−２  ＡＡＣで表される基本信号にＳＢＲ方式で表される高域周波数情報を付加したフレーム構造を示す図である。図７（ｃ）は、ＭＰＥＧ−２  ＡＡＣで表される基本信号にＳＢＲ方式で表される高域周波数情報とチャンネル拡張情報を付加したＭＰＥＧ−Ｓｕｒｒｏｕｎｄのフレーム構造を示す図である。図７（ｄ）は、ＭＰＥＧ−２  ＡＡＣで表される基本信号にチャンネル拡張情報を付加したＭＰＥＧ−Ｓｕｒｒｏｕｎｄのフレーム構造を示す図である。図７（ａ）〜（ｄ）に示すように、いずれの方式でも、ヘッダと、基本信号部とのフォーマット構成は共通である。従来のＭＰＥＧ−２  ＡＡＣのフレーム構造では、図７（ａ）のように、基本信号の後は“０”などで埋められるパディング領域であるので、ＭＰＥＧ−２  ＡＡＣに対応した従来のプレイヤであれば、図７（ａ）〜（ｄ）のいずれのデータが入力された場合でも、基本信号部を再生することができる。【００１７】
図８は、ＭＰＥＧ−Ｓｕｒｒｏｕｎｄを復号可能な、音声信号復号部の構成を示した図である。音声信号復号部２５は、パケット解析部２４ａの後段に接続され、ヘッダ情報解析部２５１、基本信号解析部２５２、高域情報解析部２５３、マルチチャンネル情報解析部２５４、帯域拡張部２５５、チャンネル拡張部２５６および出力バッファ２５７を備える。パケット解析部２４ａにて抽出された符号化音声信号（図７（ｃ）のＭＰＥＧ−Ｓｕｒｒｏｕｎｄビットストリーム）は、ヘッダ情報解析部２５１にてストリーム構造が解析され、フレームの先頭から順に、基本信号、高域成分復元情報およびチャンネル拡張情報が抽出される。ヘッダ情報解析部２５１で抽出された基本信号は基本信号解析部２５２に、高域成分復元情報は高域情報解析部２５３に、チャンネル拡張情報はチャンネル拡張部２５６に、それぞれ入力される。基本信号解析部２５２は、ヘッダ情報解析部２５１で抽出された基本信号を復号化して狭帯域信号を出力する。帯域拡張部２５５は、基本信号解析部２５２が出力する狭帯域信号と、高域情報解析部２５３が出力する高域成分復元情報を用いて、広帯域のダウンミックス信号を復元する。チャンネル拡張部２５６は、前記ダウンミックス信号と、マルチチャンネル情報解析部２５４が出力するチャンネル拡張情報とを用いて、マルチチャンネル音声信号を復元する。前記音声信号は、出力バッファ２５７に蓄積され、ＰＴＳに従って出力される。【００１８】
ここで、従来のＡＡＣにのみ対応する音声信号復号部に、図７（ｃ）に示したＭＰＥＧ−Ｓｕｒｒｏｕｎｄビットストリームが入力された場合の動作を補足する。この場合、ＡＡＣ版音声信号復号部は、高域情報解析部２５３、マルチチャンネル情報解析部２５４、帯域拡張部２５５およびチャンネル拡張部２５６のいずれも備えておらず、ビットストリーム中の高域成分復元情報部、及びチャンネル拡張情報部は、パディング領域として読み飛ばされ、図８中（ａ）の狭帯域信号が出力となる。同様に、音声信号復号部がＡＡＣおよびＡＡＣ＋ＳＢＲにのみ対応している場合は、図８中（ｂ）のダウンミックス信号が出力となる。これは、すでに説明したように、ＡＡＣ＋ＳＢＲやＭＰＥＧ−Ｓｕｒｒｏｕｎｄのヘッダ、及び基本信号部は、ＡＡＣと全く同じフォーマット構成であり、高域成分復元情報やチャンネル拡張情報は、ＡＡＣのフォーマット構成ではパディング領域であった領域に格納されるため、ＭＰＥＧ−Ｓｕｒｒｏｕｎｄに対応していない音声信号復号部においても、復号エラーとならず、互換性のある部分のみを復号し、出力できるようになっているためである。このフォーマット構成によって、将来的にストリームフォーマットが変わった場合でも、従来装置での最低限の再生を保証する互換フォーマットを実現している。【００１９】
図９は、ＡＶ同期の実現モデルを示した図である。同図の上段には音声信号の各フレームを示し、下段には映像信号の各フレームを示している。本来、音声および映像信号それぞれの出力は、音声のＰＥＳおよび映像のＰＥＳにそれぞれ付加されていたＰＴＳを参照しながら、音声信号および映像信号が独立して再生装置のタイマと再生時間を合わせることで、ＡＶ同期を実現している（実線の矢印と、（ａ）の円で囲んだ再生時刻）。【００２０】
しかしながら、ＭＰＥＧ−２  ＡＡＣとＭＰＥＧ−Ｓｕｒｒｏｕｎｄでは、フォーマットの互換性はありつつも、復号の処理内容が異なるために、処理に要する時間、すなわち、処理遅延量が異なる。具体的には、ＡＡＣの復号では必要のなかったチャンネル拡張処理に、フレーム単位のフィルタ処理が含まれているために、より大きな遅延（例えば、図９（ｂ）の遅延）が生じる。このため、ＭＰＥＧ−２  ＡＡＣでは実線の矢印のタイミングで各フレームの再生を開始できていたものが、ＭＰＥＧ−Ｓｕｒｒｏｕｎｄでは一点鎖線の矢印で示すタイミングでしか再生を開始できない。一方で、ＰＴＳ自体は、従来機、つまりＭＰＥＧ−Ｓｕｒｒｏｕｎｄに対応していない受信機との互換性を保つため、ＡＡＣのみの遅延量が考慮されて、付加されている。そもそも、デジタル放送送信装置１０（図３）において、音声信号符号化部１１から出力される符号化音声信号は、フォーマット構成上では、ＡＡＣとＭＰＥＧ−Ｓｕｒｒｏｕｎｄとの判別ができないため、パケット化部１３ａでは、入力がＡＡＣとしてでしかＰＴＳを付加することができない。【００２１】
このため、ＭＰＥＧ−Ｓｕｒｒｏｕｎｄを再生できるデジタル放送受信装置では、各フレームの再生に、予測できない余分な遅延が発生するので、映像信号の再生時刻との間に図９（ｂ）で示される時間のずれを生じてしまう。その結果、映像信号と音声信号との同期がとれなくなるという問題がある。【００２２】
上記問題点に対し、デジタル放送送信装置からの情報に基づいて、デジタル放送受信装置での映像信号の再生開始を図９（ｃ）の時間だけ遅延させることによって、音声信号と映像信号との同期をとる方法が考えられる。【００２３】
図１０は、ＭＰＥＧ−Ｓｕｒｒｏｕｎｄを復号可能な同期調整機能を有する音声信号復号部を備えたデジタル放送受信装置の構成を示す図である。なお、音声信号復号部２５以外の機能構成は、図４と同等である。音声信号復号部２５は、図８の音声信号復号部２５と同じ機能を有するが、簡単にするためＡＡＣ＋ＳＢＲに関するブロック（すなわち、高域情報解析部および帯域拡張部）は省略している。図１０に示すデジタル放送送信装置では、マルチチャンネル情報解析部２５４にて、チャンネル拡張情報の存在を検出することで、音声信号の符号化方式がＡＡＣであるかＭＰＥＧ−Ｓｕｒｒｏｕｎｄであるかを判別し、判別結果を映像信号復号部２６へ通知することで、映像信号の出力タイミングを制御して、ＡＶ同期を実現する。
【特許文献１】特許第３４６６８６１号公報
【発明の開示】
【発明が解決しようとする課題】
【００２４】
しかしながら、マルチチャンネル情報解析部２５４で解析するチャンネル拡張情報は、図７（ｃ）に示すように、ビットストリーム中の最後に記述されているため、音声信号の符号化方式が従来のＡＡＣであるかＭＰＥＧ−Ｓｕｒｒｏｕｎｄであるかの判別は、ビットストリームを最後まで解析しないと判別することができない。従って、映像信号を出力するためのタイミング補正も、音声信号復号部２５の処理を待つ必要があり、補正を行うまでに時間がかかりすぎるという課題がある。【００２５】
図１１は、ＭＰＥＧ−Ｓｕｒｒｏｕｎｄを復号可能な音声信号復号部を備えたデジタル放送受信装置における、受信処理の処理手順を示したフローチャートである。同図においてステップＳ１からステップＳ３までの処理は図５と同じである。ただし、ステップＳ３で音声および映像パケットを受信した後、さらに、受信したパケットが映像信号のパケットか、音声信号のパケットかを判断し、図５のパケット情報解析Ｓ４、復号Ｓ５、出力Ｓ６の各処理を、音声信号および映像信号のそれぞれに分割させたため、ステップ番号を音声信号についてはＳ４ａ、映像信号についてはＳ４ｖなどの記述としている。逆多重化部２３は、ステップＳ２で設定された信号ＰＩＤのパケットを受信した後、受信したパケットが音声パケットか映像パケットかを判断する。受信したパケットが音声パケットである場合、パケット解析部２４ａは受信したパケットを解析して当該パケットに含まれる符号化音声信号を音声信号復号部２５に、当該符号化音声信号のＰＴＳを出力バッファ２５７に出力する（Ｓ４ａ）。音声信号復号部２５は、パケット解析部２４ａから入力された符号化音声信号を復号する（Ｓ５ａ）。音声信号復号部２５内のマルチチャンネル情報解析部２５４は、復号された音声ストリームのチャンネル拡張情報部を解析して、音声符号化信号がＭＰＥＧ−２  ＡＡＣで符号化されているか、ＭＰＥＧ−Ｓｕｒｒｏｕｎｄで符号化されているかを示す信号を映像信号復号部２６に出力する（ａ）。チャンネル拡張部２５６でチャンネル拡張され、出力バッファ２５７に格納された音声信号は、順次、先入れ後出しで出力される（Ｓ６ａ）。【００２６】
ステップＳ３で受信したパケットが映像パケットである場合、パケット解析部２４ｂは受信したパケットを解析して当該パケットに含まれる符号化映像信号と当該符号化映像信号のＰＴＳとを映像信号復号部２６に出力する（Ｓ４ｖ）。映像信号復号部２６は、パケット解析部２４ｂから入力された符号化映像信号を復号する（Ｓ５ａ）。符号化映像信号の復号後、映像信号復号部２６は、マルチチャンネル情報解析部２５４から入力された信号がＭＰＥＧ−Ｓｕｒｒｏｕｎｄを示しているか否かを判別する（Ｓ７）。判別の結果、音声信号がＭＰＥＧ−Ｓｕｒｒｏｕｎｄであれば、映像信号復号部２６は、それに対応する時間だけ映像出力のタイミングを補正する（Ｓ８）。ステップＳ７で判別の結果、音声信号がＭＰＥＧ−Ｓｕｒｒｏｕｎｄでなければ、映像信号復号部２６は、ＰＴＳで示されるタイミングで映像信号を出力する（Ｓ６ｖ）。【００２７】
なお、映像信号におけるＭＰＥＧ−Ｓｕｒｒｏｕｎｄの判別（Ｓ７）は、映像パケット情報の解析（Ｓ４ｖ）や映像信号の復号（Ｓ５ｖ）と前後する構成もあるが、少なくとも、音声信号復号（Ｓ５ａ）での復号を待つ必要がある（ａ）。さらに、音声信号復号（Ｓ５ａ）での処理が、映像パケットに付加されたＰＴＳの指定時間に間に合わない場合、先に映像信号の出力（Ｓ６ｖ）が開始され、ＡＶ同期がとれなかったり、番組の途中で補正が行われ、出力される映像信号が途切れたりするという課題がある。【００２８】
本発明は、前記従来の課題を解決するもので、デジタル放送受信機において、伝送される音声信号の符号化方式に応じた処理判断を即座に行うことを可能とした、デジタル放送送信装置、デジタル放送受信装置、およびデジタル放送送受信システムを提供することを目的とする。
【課題を解決するための手段】
【００２９】
前記課題を解決するために、本発明のデジタル放送送信装置は、同期をとりながら再生される音声信号と映像信号とを符号化およびパケット化して多重化放送するデジタル放送送信装置であって、音声信号を符号化して音声符号化信号へ変換し、変換後の前記音声符号化信号を含む音声ストリームパケットを生成する音声ストリームパケット生成手段と、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を含み、デジタル放送受信装置により前記音声ストリームパケットの復号開始前に解析されるデータパケットを生成するデータパケット生成手段と、映像信号を符号化して映像符号化信号へ変換し、変換後の前記映像符号化信号を含む映像ストリームパケットを生成する映像ストリームパケット生成手段と、前記音声ストリームパケット、前記データパケットおよび前記映像ストリームパケットを多重化することにより多重化データを生成し、生成した前記多重化データを放送波により送信する送信手段とを備える。【００３０】
以上のように、本発明のデジタル放送送信装置によれば、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報がデータパケットに含まれており、このデータパケットが、デジタル放送受信装置により前記音声ストリームパケットの復号開始前に解析される。従って、デジタル放送受信装置では音声符号化信号の復号に予め定められた復号時間を超える処理が含まれるか否かを音声ストリームパケットの復号開始前に知ることができるので、余裕を持って、映像信号との同期を調整するための処理を行うことができるという効果がある。【００３１】
なお、前記音声ストリームパケット生成手段は、音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化する第１の符号化モードと、前記音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化するとともに、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するための補助情報を含めて符号化する第２の符号化モードとのいずれかの符号化モードで前記音声信号を音声符号化信号へ変換する音声符号化部を備え、前記データパケット生成手段は、前記音声符号化部が、前記第１の符号化モード及び前記第２の符号化モードのいずれで前記音声符号化信号へ変換したかを示す前記符号化情報を生成する符号化情報生成部を備えるとしてもよい。上記本発明によれば、音声信号がＭＰＥＧ−２  ＡＡＣで符号化されているだけであるのか、ＭＰＥＧ−２  ＡＡＣで符号化された上に、さらに基本信号の高域成分または出力チャンネル数を拡大する処理が施されているのかが符号化情報に記述されているので、デジタル放送受信装置では、音声ストリームパケットの復号開始前に、映像信号との同期を調整するための処理を行うことができるという効果がある。【００３２】
また、前記データパケット生成手段は、前記符号化情報のみをデータとして含む独立したデータパケットを生成するとしてもよい。これにより、デジタル放送受信装置では、音声及び映像ストリームパケットと並行して符号化情報のデータパケットを解析することができるという効果がある。【００３３】
さらに、前記データパケット生成手段は、前記音声ストリームパケット生成手段によって生成される音声ストリームパケット毎に前記データパケットを生成し、前記送信手段は、前記データパケットが直前のデータパケットと同じ内容であるとき、生成された前記データパケットを多重化しないで送信するとしてもよい。符号化情報は、１つの番組中であれば連続して変化する状況は想定しがたいため、１つの音声パケットに対し、１つの符号化情報パケットの割合で多重化させる必要はない。従って、これにより、多重化データの伝送効率を向上させることができるという効果がある。【００３４】
また、前記データパケット生成手段は、前記データパケットをセクション形式で規定されたフォーマットで生成するとしてもよい。【００３５】
さらに、前記データパケット生成手段は、前記音声符号化部が、前記第１の符号化モード及び前記第２の符号化モードのいずれで前記音声符号化信号へ変換したかを示す符号化情報を記述子で表し、前記記述子を、ＰＭＴ(Program Map Table)内でエレメンタリーストリームごとに繰り返される記述子領域に埋め込んだパケットを生成するとしてもよい。ＰＭＴパケットには、番組を構成する音声信号が格納されたエレメンタリーストリームパケットを示すＰＩＤが記述されるため、各ＰＩＤに関連付けられた記述子領域に符号化情報を表す記述子を埋め込むことで、効率良く符号化情報を伝送することが可能となるという効果がある。【００３６】
また、前記データパケット生成手段は、さらに、前記基本信号が前記補助情報を用いて出力チャンネル数を拡大される場合の拡大後のチャンネル数を示す符号化情報を含むデータパケットを生成するとしてもよい。このように、補助情報を用いて出力チャンネル数を拡大される場合のチャンネル数を符号化情報を含むデータパケットで伝送することにより、再生環境に最適なチャンネル拡張処理を、十分に早く選択することが可能となるという効果がある。【００３７】
前記データパケット生成手段は、さらに、前記基本信号のデータ長を示す符号化情報を含むデータパケットを生成するとしてもよい。これにより、基本信号にエラーがあるか否かを判定することができるので、基本信号にエラーがなければ基本信号だけを再生することもでき、また、基本信号から直接、チャンネル数を拡大してマルチチャンネル信号を再生することもできるという効果がある。【００３８】
また、本発明のデジタル放送受信装置は、同期をとりながら再生される音声信号と映像信号とが符号化およびパケット化されて送信された多重化放送を受信するデジタル放送受信装置であって、前記多重化放送を受信する受信手段と、前記受信手段が前記多重化放送により受信した多重化データから、符号化された音声信号である音声符号化信号を含む音声ストリームパケットと、符号化された映像信号である映像符号化信号を含む映像ストリームパケットと、前記音声ストリームパケット及び前記映像ストリームパケット以外のデータパケットとを分離する分離手段と、分離された前記データパケットから、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を、前記音声ストリームパケットの復号開始前に解析する解析手段と、前記符号化情報が、前記音声符号化信号の復号が予め定められた復号時間を超える要因となる処理が含まれることを示している場合、前記音声信号の復号時間が予め定められた復号時間を超える分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングを調整する復号手段とを備える。【００３９】
以上のように、本発明のデジタル放送受信装置によれば、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報が含まれているデータパケットを前記音声ストリームパケットの復号開始前に解析することができる。これにより、デジタル放送受信装置では音声符号化信号の復号に予め定められた復号時間を超える処理が含まれるか否かを音声ストリームパケットの復号開始前に知ることができるので、余裕を持って、映像信号との同期を調整するための処理を行うことができるという効果がある。【００４０】
なお、前記分離手段は、受信した前記多重化データから、前記音声ストリームパケットとして、音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化する第１の符号化モードと、前記音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化するとともに、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するための補助情報を含めて符号化する第２の符号化モードとのいずれかの符号化モードで符号化された前記音声符号化信号を含む音声ストリームパケットを分離し、前記解析手段は、前記符号化情報から、分離された前記音声ストリームパケットに含まれる前記音声符号化信号が、前記第１の符号化モード及び前記第２の符号化モードのいずれで変換されたかを解析し、前記復号手段は、前記解析結果に基づき、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するために要する時間分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとを調整するとしてもよい。これにより、音声信号が第１の符号化モードで音声符号化信号に変換されたのか第２の符号化モードで音声符号化信号に変換されたのかが符号化情報に記述されているので、デジタル放送受信装置では、音声ストリームパケットの復号開始前に、映像信号との同期を調整するための処理を行うことができるという効果がある。【００４１】
また、前記復号手段は、前記解析手段による解析の結果、分離された前記音声ストリームパケットに含まれる音声符号化信号が、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで変換されている場合よりも予め定められた一定時間だけ遅く前記映像信号を出力するとしてもよい。これにより、復号手段では映像信号を通常通りに復号し、復号により得られた映像信号を一定時間だけ遅く出力することにより映像信号と音声信号との同期を調整することができるので、低い処理負荷で容易に同期を調整することができるという効果がある。【００４２】
さらに、前記復号手段は、前記解析手段による解析の結果、分離された前記音声ストリームパケットに含まれる音声符号化信号が、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで変換されている場合よりも予め定められた一定時間だけ早く、前記音声符号化信号の復号開始を早めるとしてもよい。音声信号が第１の符号化モードで変換されているか又は第２の符号化モードで変換されているかが、復号手段の復号開始前に分かるので、音声符号化信号の復号を一定時間だけ早めることによって容易に映像信号と音声信号との同期を調整することができるという効果がある。【００４３】
また、前記予め定めた時間は、前記符号化された音声信号の第１のモードに対する第２のモードの復号処理の遅延時間であるとしてもよい。【００４４】
さらに、前記解析手段は、前記符号化情報から、さらに、前記基本信号が前記補助情報を用いて出力チャンネル数を拡大される場合の拡大後のチャンネル数を解析し、前記復号手段は、当該デジタル放送受信装置の出力チャンネル数が前記符号化情報に示されるチャンネル数とは異なる場合、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大し、前記基本信号の出力チャンネル数を拡大するために要する時間分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとを調整するとしてもよい。これにより、復号手段では補助情報を用いて原音と同じチャンネル数に拡大してから当該デジタル放送受信装置の出力チャンネル数に変換するという二度手間を省いて、直接、基本信号から当該デジタル放送受信装置の出力チャンネル数に拡大することができる。従って、映像信号と音声信号との同期を調整しながら、効率よくデジタル放送受信装置の装備に適合した音声信号の復号を行うことができるという効果がある。【００４５】
また、前記復号手段は、前記基本信号に含まれているチャンネル拡張に関する情報を用いるか、又は、２チャンネルの前記基本信号から５．１チャンネルのマルチチャンネル信号にチャンネル数の拡大を行う際の初期値又は推奨値を用いて、前記基本信号のチャンネル数を当該デジタル放送受信装置の出力チャンネル数に拡大するためのチャンネル拡張情報を推定するマルチチャンネル推定部を備え、前記復号手段は、前記マルチチャンネル推定部によって推定された前記チャンネル拡張情報を用いて、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大するとしてもよい。これにより、復号手段では、補助情報を用いて基本信号を原音と同じチャンネル数に拡大するという手間を省き、基本信号から直接、当該デジタル放送受信装置の出力チャンネル数に拡大することができるという効果がある。【００４６】
さらに、前記解析手段は、前記符号化情報から、さらに、前記音声符号化信号の前記基本信号のデータ長を解析し、前記復号手段は、前記解析手段により得られた前記基本信号の前記データ長と、前記音声符号化信号を復号して得られた前記基本信号のデータ長とを比較して、前記基本信号の復号が正しく行われたか否かを判定し、正しく行われたと判定した場合、前記マルチチャンネル推定部によって推定された前記チャンネル拡張情報を用いて、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大するとしてもよい。これにより、基本信号の復号が正しく行われた場合には、補助情報を用いないで基本信号から直接、当該デジタル放送受信装置の出力チャンネル数に拡大することができるという効果がある。【００４７】
また、前記復号手段は、前記基本信号の復号が正しく行われたと判定した場合、さらに、前記補助情報を用いた前記チャンネル拡大処理が正しく行われたか否かを判定し、前記補助情報を用いた前記チャンネル拡大処理にエラーがあったと判定した場合、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとの調整を行わず、前記基本信号のみを出力するとしてもよい。これにより、基本信号の復号が正しく行われた場合には基本信号のみを出力することができるという効果がある。
【発明の効果】
【００４８】
本発明によれば、デジタル放送受信装置において、音声符号化信号の中身を最後まで解析しないでも、すなわち、音声符号化信号の復号化開始前に符号化方式特有の情報を知ることができるので、音声信号の符号化方式に応じた最適な同期制御を容易に行うことが可能である。
【図面の簡単な説明】
【００４９】
【図１】図１（ａ）（ｂ）（ｃ）はＰＥＳパケット、及びセクション形式のフォーマット構成図である。
【図２】図２（ａ）（ｂ）はＰＡＴとＰＭＴの詳細なフォーマット構成図である。
【図３】図３は従来のデジタル放送送信装置の構成図である。
【図４】図４は従来のデジタル放送受信装置の構成図である。
【図５】図５は従来のデジタル放送受信装置における受信処理のフローチャートである。
【図６】図６は従来のデジタル放送受信装置において、多重化されたＴＳＰ列から、１系統のＡＡＣビットストリームを形成するモデル図である。
【図７】図７（ａ）（ｂ）（ｃ）（ｄ）はＡＡＣ、ＡＡＣ＋ＳＢＲおよびＭＰＥＧ−Ｓｕｒｒｏｕｎｄの各フォーマット構成図である。
【図８】図８はＭＰＥＧ−Ｓｕｒｒｏｕｎｄを復号可能な、音声信号復号部の構成図である。
【図９】図９はＡＶ同期の実現モデル図である。
【図１０】図１０はＭＰＥＧ−Ｓｕｒｒｏｕｎｄを復号可能な同期調整機能を有する音声信号復号部を備えたデジタル放送受信装置の構成の一例を示すブロック図である。
【図１１】図１１はＭＰＥＧ−Ｓｕｒｒｏｕｎｄを復号可能な音声信号復号部を備えたデジタル放送受信装置における受信処理のフローチャートである。
【図１２】図１２は実施の形態１におけるデジタル放送送信装置の構成図である。
【図１３】図１３は実施の形態１におけるデジタル放送受信装置の構成図である。
【図１４】図１４は実施の形態１のデジタル放送受信装置における受信処理のフローチャートである。
【図１５】図１５は実施の形態２におけるデジタル放送送信装置の構成図である。
【図１６】図１６は、図１５に示した記述更新部が符号化情報の内容を示す記述子を格納する領域の一例を示す図である。
【図１７】図１７は実施の形態３のデジタル放送受信装置におけるチャンネル数の一例を示す図である。
【図１８】図１８は実施の形態３のデジタル放送受信装置における音声信号復号部の構成を示す図ブロックである。
【図１９】図１９は実施の形態４のデジタル放送受信装置における音声信号復号部の構成を示すブロック図である。
【図２０】図２０は実施の形態４のデジタル放送受信装置における受信処理のフローチャートである。
【符号の説明】
【００５０】
１、１０、１５１    デジタル放送送信装置
２、２０、１７２    デジタル放送受信装置
１１    音声信号符号化部
１２    映像信号符号化部
１３ａ，１３ｂ，１３ｃ，１３ｄ    パケット化部
１４    多重化部
１５    伝送路符号化／変調部
１６、２１    アンテナ
１７    記述子更新部
２２    復調／伝送路復号部
２３    逆多重化部
２４ａ、２４ｂ、２４ｃ、２４ｄ    パケット解析部
２５、１８５、１９５    音声信号復号部
２６    映像信号復号部
２７    番組情報解析部
２８    符号化情報解析部
【発明を実施するための最良の形態】
【００５１】
以下、本発明の実施の形態について、図面を参照しながら説明する。なお、本実施の形態では、音声符号化方式にＭＰＥＧ−Ｓｕｒｒｏｕｎｄ（以下、「ＭＰＳ」と記す。）を用いたデジタル放送伝送システムを例にとり説明することとする。【００５２】
（実施の形態１）
本実施の形態では、新たなＰＩＤを持った符号化情報パケットを生成し、生成した符号化情報パケットにＭＰＳの使用有無を示す情報を記述して伝送する。【００５３】
図１２は、本発明の実施の形態１におけるデジタル放送送信装置の構成を示すブロック図である。デジタル放送送信装置１は、音声信号に関して符号化情報パケットを生成し、生成した符号化情報パケットにＭＰＳの使用有無を示す情報を記述して伝送するデジタル放送送信装置であって、音声信号符号化部１１、映像信号符号化部１２、パケット化部１３ａ〜１３ｄ、多重化部１４、伝送路符号化／変調部１５およびアンテナ１６を備える。【００５４】
番組を構成する音声および映像の各信号は、各々、音声信号符号化部１１および映像信号符号化部１２に入力され、デジタル信号に変換される。変換された各デジタル信号は、パケット化部１３ａおよびパケット化部１３ｂにてヘッダ情報を付加され、ＰＥＳ化される。ここで、音声信号符号化部１１とパケット化部１３ａとは、「音声信号を符号化して音声符号化信号へ変換し、変換後の前記音声符号化信号を含む音声ストリームパケットを生成する音声ストリームパケット生成手段」の一例であり、映像信号符号化部１２とパケット化部１３ｂとは「映像信号を符号化して映像符号化信号へ変換し、変換後の前記映像符号化信号を含む映像ストリームパケットを生成する映像ストリームパケット生成手段」の一例である。また、音声信号符号化部１１は、「音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化する第１の符号化モードと、前記音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化するとともに、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するための補助情報を含めて符号化する第２の符号化モードとのいずれかの符号化モードで前記音声信号を音声符号化信号へ変換する音声符号化部」および「前記音声符号化部が、前記第１の符号化モード及び前記第２の符号化モードのいずれで前記音声符号化信号へ変換したかを示す前記符号化情報を生成する符号化情報生成部」の一例である。同時に、データ信号、ＰＡＴおよびＰＭＴも、同じくパケット化部１３ｃに入力され、セクション形式でパケット化される。さらに、音声信号符号化部１１における処理情報を符号化情報として、同様にパケット化部１３ｄにてセクション形式でパケット化する。この、パケット化部１３ｃとパケット化部１３ｄとは、「前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を含み、デジタル放送受信装置により前記音声ストリームパケットの復号開始前に解析されるデータパケットを生成するデータパケット生成手段」の一例である。また、パケット化部１３ｄは、「前記符号化情報のみをデータとして含む独立したデータパケットを生成する前記データパケット生成手段」および「前記データパケットをセクション形式で規定されたフォーマットで生成する前記データパケット生成手段」の一例である。その後、多重化部１４にて全てのＰＥＳおよびセクションパケットが時間多重され、伝送路符号化／変調部１５にて送信処理された後、アンテナ１６より送出される。多重化部１４、伝送路符号化／変調部１５及びアンテナ１６は、「前記音声ストリームパケット、前記データパケットおよび前記映像ストリームパケットを多重化することにより多重化データを生成し、生成した前記多重化データを放送波により送信する送信手段」の一例である。【００５５】
ここで、符号化情報として、音声信号符号化部１１から出力される音声符号化信号のフォーマット構成だけではわからない情報や、符号化信号のヘッダ情報部に記述されないような情報を選択し、受信機に伝送することで、受信機の最適動作に大きな効果がある。例えば、符号化情報として、音声信号符号化部１１での符号化方式がＡＡＣであるかＭＰＳであるかを示すフラグをセクション形式で別途にパケット化するとした場合、受信機側では、音声信号の符号化方式がＡＡＣであるかＭＰＳであるかを基本信号の復号化開始よりも早く知ることができる。従来であれば、音声信号の各フレームには図７（ｃ）または（ｄ）に示したように、チャンネル拡張情報部が基本信号部の後の位置に記述されているので、１フレーム分の基本信号を複数のパケットからすべて抽出し、復号した後にはじめて、音声信号がＡＡＣで符号化されているかＭＰＳで符号化されているかを知ることができた。これに対し、本実施の形態のデジタル放送送信装置１によれば、音声信号がＡＡＣで符号化されているかＭＰＳで符号化されているかを示すフラグが、音声信号のＰＥＳパケットとは別に、符号化情報としてセクション形式でパケット化されていることにより、音声信号の復号を開始する前に符号化情報を知ることができるので、受信機において、確実に音声信号および映像信号の同期出力タイミングを調整することができるという大きな効果を得ることができる。【００５６】
なお、上記符号化情報を加味した出力タイミングをＰＥＳパケットのＰＴＳに反映することでも同期タイミングの調整は行えるが、従来のＭＰＥＧ−２  ＡＡＣにのみ対応した機種との互換性の点で問題がある。【００５７】
図１３は、本発明の実施の形態１におけるデジタル放送受信装置の構成を示すブロック図である。デジタル放送受信装置２は、デジタル放送送信装置１において符号化された音声信号の符号化情報が記述されたセクションパケットを解析することにより、音声信号を符号化時の符号化方式に従って復号するとともに、復号された映像信号と音声信号とをより正確に同期再生するデジタル放送受信装置であって、アンテナ２１、復調／伝送路復号部２２、逆多重化部２３、パケット解析部２４ａ、２４ｂ、２４ｃ、２４ｄ、音声信号復号部２５、映像信号復号部２６、番組情報解析部２７及び符号化情報解析部２８を備える。【００５８】
アンテナ２１を介して受信したデジタル放送波は、復調／伝送路復号部２２にて受信処理され、多重化されたＴＳＰ列を出力する。逆多重化部２３では、受信したＴＳＰ列からＰＡＴパケットおよびＰＭＴパケットを選択し、パケット解析部２４ｃに出力する。パケット解析部２４ｃは、逆多重化部２３から入力されたＰＡＴパケットおよびＰＭＴパケットから、ＰＡＴ及びＰＭＴを抽出し番組情報解析部２７に出力する。番組情報解析部２７はパケット解析部２４ｃから入力されたＰＡＴ及びＰＭＴから番組情報を抽出して、サービス中の各番組の詳細情報をユーザに提示する。番組情報解析部２７は、提示した番組の詳細情報の中からユーザの番組選択に従い、所望の番組を構成する音声信号及び映像信号などが格納されたＰＥＳパケットのＰＩＤを逆多重化部２３に通知する。これにより、ユーザが選択した番組を構成する音声パケット、映像パケットおよびデータパケットが選択される。アンテナ２１及び復調／伝送路復号部２２は、「多重化放送を受信する受信手段」の一例であり、逆多重化部２３は、「前記受信手段が前記多重化放送により受信した多重化データから、符号化された音声信号である音声符号化信号を含む音声ストリームパケットと、符号化された映像信号である映像符号化信号を含む映像ストリームパケットと、前記音声ストリームパケット及び前記映像ストリームパケット以外のデータパケットとを分離する分離手段」及び「受信した前記多重化データから、前記音声ストリームパケットとして、音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化する第１の符号化モードと、前記音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化するとともに、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するための補助情報を含めて符号化する第２の符号化モードとのいずれかの符号化モードで符号化された前記音声符号化信号を含む音声ストリームパケットを分離する前記分離手段」の一例である。パケット解析部２４ｄは、「分離された前記データパケットから、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を、前記音声ストリームパケットの復号開始前に解析する解析手段」および「前記符号化情報から、分離された前記音声ストリームパケットに含まれる前記音声符号化信号が、前記第１の符号化モード及び前記第２の符号化モードのいずれで変換されたかを解析する前記解析手段」の一例である。音声信号復号部２５及び映像信号復号部２６は、「前記符号化情報が、前記音声符号化信号の復号が予め定められた復号時間を超える要因となる処理が含まれることを示している場合、前記音声信号の復号時間が予め定められた復号時間を超える分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングを調整する復号手段」及び「前記解析結果に基づき、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するために要する時間分だけ、前記音声信号の出��のタイミングと前記映像信号の出力のタイミングとを調整する前記復号手段」の一例である。また、映像信号復号部２６は、「前記解析手段による解析の結果、分離された前記音声ストリームパケットに含まれる音声符号化信号が、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで変換されている場合よりも予め定められた一定時間だけ遅く前記映像信号を出力する前記復号手段」の一例である。また、音声信号復号部２５は、「前記解析手段による解析の結果、分離された前記音声ストリームパケットに含まれる音声符号化信号が、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで変換されている場合よりも予め定められた一定時間だけ早く、前記音声符号化信号の復号開始を早める前記復号手段」の一例である。【００５９】
データパケットのうち、特に、音声信号の符号化情報に関するパケットは、パケット解析部２４ｄにて符号化情報を抽出された後、符号化情報解析部２８に入力される。符号化情報解析部２８ではパケット解析部２４ｄから入力された符号化情報から、音声信号の符号化がＭＰＥＧ−２  ＡＡＣで行われたのか、ＭＰＳで行われたのか、などを解析し、解析結果を音声信号復号部２５及び映像信号復号部２６に出力する。この符号化情報の解析は、例えば、パケット解析部２４ａ及びパケット解析部２４ｂが、ユーザが選択した番組を構成する音声パケット及び映像パケットから実体データである音声の符号化信号及び映像の符号化信号を抽出している間に行われる。音声信号復号部２５は、パケット解析部２４ａから入力された音声の符号化信号を、符号化情報解析部２８から入力された符号化方式に従って復号する。映像信号復号部２６は、パケット解析部２４ｂから入力された映像の符号化信号を復号し、指定されたＰＴＳに対して、符号化情報解析部２８から入力された音声信号の符号化情報に応じて、復号した映像信号の出力タイミングを調整する。これにより、映像信号復号部２６は、音声信号と映像信号との最適な同期再生を行う。【００６０】
なお、ここでは、映像信号復号部２６が映像信号の出力タイミングを調整することによって、音声信号と映像信号との同期を調整する方法について説明したが、本発明はこの例に限らず、符号化情報で、音声信号がＭＰＳにより符号化されていることが示されている場合には、音声信号復号部２５が音声信号の復号をＭＰＥＧ−２  ＡＡＣの場合よりも所定時間だけ早く開始し、映像信号復号部２６は通常通り映像信号を復号して出力するとしてもよい。【００６１】
より具体的には、音声および映像の各パケットは、パケット解析部２４ａおよびパケット解析部２４ｂにてヘッダ情報と符号化信号とに分離、抽出され、各符号化信号は、各々、音声信号復号部２５および映像信号復号部２６にて復号される。【００６２】
以下、前記符号化情報が、音声信号の符号化方式がＡＡＣであるかＭＰＳであるかのフラグであった場合を例に、デジタル放送受信装置２の動作について説明する。【００６３】
図１４は、本実施の形態のデジタル放送受信装置における、受信処理のフローチャートを示した図である。図１３に示した番組情報解析部２７は、ユーザが視聴したい番組を選局後（Ｓ１）、選曲された番組を構成するパケットの信号ＰＩＤを、ＰＡＴ及びＰＭＴを参照して受信設定する（Ｓ２）。その後、デジタル放送受信装置２は当該パケットの受信を開始する（Ｓ９およびＳ３）。受信したパケットが符号化情報であった場合（Ｓ９のＹｅｓ）、パケット解析部２４ｄが符号化情報パケットを解析し（Ｓ１０）、音声信号の符号化方式がＡＡＣであるかＭＰＳであるかの判別を行う。受信したパケットが符号化情報パケットでない場合（Ｓ９のＮｏ）、逆多重化部２３は受信したパケットが、音声パケット又は映像パケットであるかを判断する（Ｓ３）。受信したパケットが音声パケットでも映像パケットでもない場合（Ｓ３のＮｏ）、ステップＳ９に戻って、新たなパケットを受信するまで待機する。【００６４】
受信したパケットが音声パケットである場合（Ｓ３のＹｅｓ）、パケット解析部２４ａは受信した音声パケットの情報を解析して、音声の符号化信号を抽出する（Ｓ４ａ）。次いで、音声信号復号部２５は、抽出された音声の符号化信号を復号する（Ｓ５ａ）。なお、このときまでに、ステップＳ１０で、音声信号の符号化方式がＭＰＥＧ−２  ＡＡＣであるかＭＰＳであるかが解析されていれば、音声信号復号部２５は符号化情報で示される復号方式で音声の符号化信号を復号する。音声信号復号部２５は、復号により得られた音声信号をＰＴＳに従って出力する（Ｓ６ａ）。【００６５】
ステップＳ３で、受信したパケットが映像パケットである場合（Ｓ３のＹｅｓ）、パケット解析部２４ｂは受信した映像パケットの情報を解析して、映像の符号化信号を抽出する（Ｓ４ｖ）。次いで、映像信号復号部２６は、抽出された映像の符号化信号を復号する（Ｓ５ｖ）。なお、このときまでに、ステップＳ１０で、音声信号の符号化方式がＭＰＥＧ−２  ＡＡＣであるかＭＰＳであるかが解析されていて、映像信号復号部２６は、入力された符号化方式がＭＰＥＧ−２  ＡＡＣであるか、ＭＰＳであるか、または（ＡＡＣ＋ＳＢＲ）であるかに応じて、復号した映像信号を出力するためのＰＴＳによるタイミングからの遅延時間を判断する。符号化方式がＭＰＥＧ−２  ＡＡＣの場合、映像信号復号部２６は、復号により得られた映像信号をＰＴＳに従ってそのまま出力する。また、符号化方式がＭＰＳの場合、出力遅延時間大で出力する。さらに、符号化方式が（ＡＡＣ＋ＳＢＲ）のとき、出力遅延時間小で出力する（Ｓ６ｖ）。具体的には、符号化方式がＭＰＳの場合、映像信号復号部２６は、復号により得られた映像信号をＰＴＳで定められたタイミングに対して、あらかじめ定めたＭＰＳの処理時間に相当する時間だけ遅延させ、映像信号を出力する（Ｓ６ｖ）。（ＡＡＣ＋ＳＢＲ）の場合も同様である。【００６６】
以上のように、音声信号の符号化方式を示す符号化情報を、セクション形式でパケット化してＴＳＰ列に多重化しておくことにより、音声の符号化信号の符号化方式が即座に判別できるため、符号化情報が記述されたパケットを解析するパケット解析部２４ｄは、音声信号復号部２５及び映像信号復号部２６が音声及び映像の符号化信号の復号を開始する前に、すなわち、音声信号復号処理Ｓ５ａや映像信号復号処理Ｓ５ｂを開始前に、映像信号の出力タイミングの補正を行う必要があるか否かの決定が行える。この結果、映像信号復号部２６は、音声符号化信号の復号における遅延量に応じて映像符号化信号の復号処理の開始を遅らせたり、復号済みの映像信号の出力を遅らせるためにバッファ量の調整を行ったりするなどの最適化処理を、従来では音声信号の基本信号を復号した後でなければできなかったのに対し、音声信号の復号処理Ｓ５ａの進行とは関係なく行うことが可能となる。【００６７】
なお、上記の遅延時間は、ＳＢＲであれば何秒、ＭＰＳであれば何秒というように、予め符号化方式に対応させて遅延時間を示す数値を、音声信号復号部２５、映像信号復号部２６又は図示しないメモリなどが記憶しておくことによって調整する。音声信号復号部２５又は映像信号復号部２６のいずれが遅延時間を記憶しておくかは、いずれの処理部が同期を調整するかによって決めればよい。例えば、音声信号復号部２５が早めに復号を開始することによって同期を調整する場合には音声信号復号部２５が記憶し、映像信号復号部２６が復号化した映像信号の出力タイミングを遅延させることによって同期を調整する場合には映像信号復号部２６が記憶すればよい。また、この遅延時間は、音声信号復号部の処理能力、例えば、ＣＰＵの動作速度などによっても変わってくるので、デジタル放送受信装置の機種ごとに映像信号出力の遅延時間を定めておくものとする。この遅延時間は、「前記符号化された音声信号の第１のモードに対する第２のモードの復号処理の遅延時間である前記予め定めた時間」の一例である。【００６８】
なお、ここで、パケット化部１３ｄは、「前記音声ストリームパケット生成手段によって生成される音声ストリームパケット毎に前記データパケットを生成する前記データパケット生成手段」の一例であり、多重化部１４及び伝送路符号化／変調部１５は「前記データパケットが直前のデータパケットと同じ内容であるとき、生成された前記データパケットを多重化しないで送信する前記送信手段」の一例である。符号化情報は、１つの番組中であれば連続して変化する状況は想定しがたいため、１つの音声パケットに対し、１つの符号化情報パケットの割合で多重化させる必要はない。音声パケットに含まれる符号化信号の符号化方式が、直前の音声パケットに含まれる符号化情報と同じ内容（符号化方式）である場合は、符号化情報パケットの多重化を省略することが可能である。例えば、同じ番組を構成する音声信号であれば、その番組について１つの符号化情報パケットを多重化しておくだけでもよい。これにより伝送効率を向上させることができる。【００６９】
一方で、受信機の起動時や、視聴番組を切替えた際に、音声信号復号Ｓ５ａや映像信号復号Ｓ５ｖを開始するより十分早く符号化情報パケット解析Ｓ１０を終わらせることが望ましいため、直前の符号化情報パケットの送出から一定時間間隔を超える場合は、多重化を省略せずに同内容の符号化情報パケットを再度送出する構成としてもよい。【００７０】
（実施の形態２）
実施の形態１では、新たなＰＩＤを持つ個別のセクション形式のパケットに符号化情報を記述し、そのパケットをＴＳＰに多重化してデジタル放送受信装置に送信するとしたが、本実施の形態２では、新たなパケットは生成せずに、符号化情報を記述子としてＰＭＴに埋め込んで伝送するものである。【００７１】
図１５は、本発明の実施の形態２における、デジタル放送送信装置１５１の構成を示すブロック図である。デジタル放送送信装置１５１は、音声信号符号化部１１、映像信号符号化部１２、パケット化部１３ａ、１３ｂ、１３ｃ、多重化部１４、伝送路符号化／変調部１５及びアンテナ１６を備える。【００７２】
実施の形態２のデジタル放送送信装置１５１の特徴は、音声信号の符号化情報をパケット化するパケット化部１３ｄの代わりに記述子更新部１７を新たに備える点である。【００７３】
図１６は、図１５に示した記述更新部が符号化情報の内容を示す記述子を格納する領域の一例を示す図である。記述子更新部１７は、「前記音声符号化部が、前記第１の符号化モード及び前記第２の符号化モードのいずれで前記音声符号化信号へ変換したかを示す符号化情報を記述子で表し、前記記述子を、ＰＭＴ(Program Map Table)内でエレメンタリーストリームごとに繰り返される記述子領域に埋め込んだパケットを生成する前記データパケット生成手段」の一例であり、音声信号符号化部１１、パケット化部１３ｄ及び記述子更新部１７は、「前記基本信号が前記補助情報を用いて出力チャンネル数を拡大される場合の拡大後のチャンネル数を示す符号化情報を含むデータパケットを生成する前記データパケット生成手段」及び「さらに、前記基本信号のデータ長を示す符号化情報を含むデータパケットを生成する前記データパケット生成手段」の一例である。記述子更新部１７は、音声信号符号化部１１における処理情報、例えば、ＭＰＳの有無、出力チャンネル数及び符号化された基本信号のビット数などを符号化情報として、ＰＭＴやその他のＳＩテーブルの記述子として埋め込む。記述子更新部１７がＰＭＴに符号化情報の記述子を挿入する場合には、例えば、図１６でエレメンタリーストリームごとに記述される記述子領域２に挿入するのが好ましい。【００７４】
次いで、パケット化部１３ｃは、ＰＡＴ及び符号化情報を示す記述子が挿入されたＰＭＴをパケット化する。多重化部１４は、符号化された音声信号のＰＥＳパケット、符号化された映像信号のＰＥＳパケット及び前述のＰＡＴ及びＰＭＴのパケットを多重化する。多重化されたＴＳＰは、伝送路符号化／変調部１５及びアンテナ１６を介して放送波により伝送される。【００７５】
以上のように、本実施の形態２のデジタル放送送信装置１５１によれば、図６に示したように、ＰＭＴパケットには、番組を構成する音声信号が格納されたエレメンタリーストリームパケットを示すＰＩＤが記述されるため、各ＰＩＤに関連付けられた記述子領域に符号化情報を表す記述子を埋め込むことで、効率良く符号化情報を伝送することが可能となる。【００７６】
（実施の形態３）
本実施の形態は、符号化情報が、拡張後(原音)のチャンネル数である場合について説明する。【００７７】
図１７は、実施の形態３のデジタル放送受信装置を搭載する車両の一例を示す図である。同図に示すように、車両では、４スピーカによるオーディオのマルチチャンネル再生が一般的である。これに対し、ＭＰＳでは、例えば、原音が５．１チャンネルの音声信号を２チャンネルにダウンミックスして符号化し、その符号化信号にチャンネル拡張情報を多重化して送信する。チャンネル拡張情報は、２チャンネルのダウンミックス信号を５．１チャンネルに復元するための情報である。このような場合、車載のデジタル放送受信装置１７２では、多重化されているチャンネル拡張情報に従って、２チャンネルのダウンミックス信号から、５．１チャンネルの原音を復元した後、さらに４チャンネルの音声信号にダウンミックスしているのが現状である。【００７８】
図１８は、本発明の実施の形態３のデジタル放送受信装置における、音声信号復号部の構成を示すブロック図である。図１８は、図１３のデジタル放送受信装置２の一部を示しているが、音声信号復号部１８５の構成が図１３の音声信号復号部２５の構成と異なる。本実施の形態３の音声信号復号部１８５は、ヘッダ情報解析部２５１、基本信号解析部２５２、マルチチャンネル情報解析部２５４、チャンネル拡張部２５６、出力バッファ２５７、マルチチャンネル情報推定部２５８およびチャンネル拡張情報選択部２５９を備える。ここで、符号化情報解析部２８は、「前記符号化情報から、さらに、前記基本信号が前記補助情報を用いて出力チャンネル数を拡大される場合の拡大後のチャンネル数を解析する前記解析手段」の一例である。【００７９】
パケット解析部２４ａにて抽出された符号化音声信号は、図７（ｄ）に示したように、ヘッダ、基本信号、チャンネル拡張情報およびパディング領域の順にデータが記述されるフレーム構造となっている。このような符号化音声信号は、ヘッダ情報解析部２５１にてヘッダからストリーム構造が解析され、フレームの先頭から順に、基本信号およびチャンネル拡張情報が抽出される。チャンネル拡張部２５６は、「当該デジタル放送受信装置の出力チャンネル数が前記符号化情報に示されるチャンネル数とは異なる場合、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大し、前記基本信号の出力チャンネル数を拡大するために要する時間分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとを調整する前記復号手段」および「前記マルチチャンネル推定部によって推定された前記チャンネル拡張情報を用いて、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大する前記復号手段」の一例であり、基本信号解析部２５２が出力するダウンミックス信号と、マルチチャンネル情報解析部２５４が出力するチャンネル拡張情報を用いて、５．１チャンネルのマルチチャンネル音声信号を復元する。または、チャンネル拡張情報選択部２５９を介して、マルチチャンネル情報推定部２５８から得られるチャンネル拡張情報を用いて、例えば、４チャンネルのマルチチャンネル音声信号を復元する。また、マルチチャンネル情報推定部２５８は、「前記基本信号に含まれているチャンネル拡張に関する情報を用いるか、又は、２チャンネルの前記基本信号から５．１チャンネルのマルチチャンネル信号にチャンネル数の拡大を行う際の初期値又は推奨値を用いて、前記基本信号のチャンネル数を当該デジタル放送受信装置の出力チャンネル数に拡大するためのチャンネル拡張情報を推定するマルチチャンネル推定部」の一例である。【００８０】
ここで、符号化音声信号がＡＡＣビットストリームであった場合、基本信号解析部２５２の出力は、通常のステレオ信号であり、マルチチャンネル情報解析部２５４で解析すべきチャンネル拡張情報は、ビットストリーム中に存在しない。この時、基本信号解析部２５２の出力するステレオ信号を用いて、マルチチャンネル情報推定部２５８にてチャンネル拡張情報を推定する。あるいは、マルチチャンネル情報推定部２５８の出力するチャンネル拡張情報は、チャンネル拡張部２５６の初期値や推奨値に関連する情報で、前記ステレオ信号と非相関な推定を行っても良い。チャンネル拡張部２５６は、符号化情報解析部２８の出力に従って、使用するチャンネル拡張情報を選択することで、受信した符号化音声信号が従来ＡＡＣのステレオ信号の場合であっても、ＭＰＳの場合と同様の遅延・出力制御で、マルチチャンネル音声信号の出力を行うことができる。ここで、ＡＡＣフォーマットの特性上、基本信号解析部２５２の出力はステレオ信号に限定されず、モノラル信号や３チャンネル以上のマルチチャンネル信号である場合もあり、本発明の効果は、ステレオＡＡＣに限定するものではない。【００８１】
また、チャンネル拡張情報の推定は、符号化音声信号がＡＡＣの場合に限定されず、もちろんＭＰＳの場合でも同様の効果が期待できる。例えば、ビットストリーム中で指定されたチャンネル数とは異なるチャンネル数に拡張したい場合、ビットストリーム中のチャンネル拡張情報を使用せず、推定したチャンネル拡張情報を使用することができる。この時、ビットストリーム中のチャンネル拡張情報を活用して推定を行うことで、より高精度な推定を行うことが可能となる。チャンネル間のレベル差などは、拡張後のチャンネル数によらず有用な情報となり得るからである。【００８２】
また、符号化情報として、拡張後のチャンネル数を伝送することで、ビットストリーム中のチャンネル拡張情報と、推定チャンネル情報を、より意欲的に選択することが可能となる。ＡＡＣとＭＰＳの互換フォーマットの構成上、ＭＰＳが使用されているか否かが、ビットストリームの最後まで解析しないと判別できないのと同様、拡張後のチャンネル数も、マルチチャンネル情報解析部２５４以前では知り得ない情報である。しかしながら、例えば一般的な車載スピーカシステムは、スピーカの数が４つであるのに対し、拡張後のマルチチャンネル音声信号は５．１チャンネルであるなど、拡張後のチャンネル数と、再生環境が合致しないケースが多くある。すなわち、図１７で説明したように、原音が５．１チャンネルであっても、車載のデジタル放送受信装置１７２のように４チャンネルで再生したい場合である。反面、拡張後のチャンネル数が、ビットストリームの最後まで解析しないと判別できないのでは、復号処理の設定遅れや、無駄な処理の発生につながってしまう。そこで、符号化情報により、拡張後のチャンネル数を事前に音声信号復号部２５に通知することで、再生環境に最適なチャンネル拡張処理を、十分に早く選択することが可能となる。なお、この場合、例えば、ＭＰＳを使用する又は使用しないことを示すフラグを用いて、原音のチャンネル数を記述してもよい。例えば、符号化情報として“ＭＰＳを使用する”意味のフラグが記述されている場合には、原音のチャンネル数が５．１チャンネルであるものとし、“ＭＰＳを使用しない”意味のフラグが記述されている場合には、原音のチャンネル数が２チャンネルであるものと定めるとしてもよい。【００８３】
なお、具体的に、上記マルチチャンネル情報推定部２５８を利用してチャンネル数を拡張する方法としては、以下の（１）、（２）および（３）などの方法がある。すなわち、【００８４】
（１）マルチチャンネル情報解析部２５４からのチャンネル拡張情報を用いずに、基本信号解析部２５２から出力されるダウンミックス信号、例えば、２チャンネルから直接、目標とするチャンネル数、例えば、４チャンネルに拡張する。【００８５】
（２）マルチチャンネル情報解析部２５４からのチャンネル拡張情報を活用して、例えば、２チャンネルのダウンミックス信号を、目標とするチャンネル数、例えば、４チャンネルに拡張する。【００８６】
（３）ＭＰＳで規格化されているEnhanced Matrix Modeにて、２チャンネルから４チャンネルに拡張する。ここで、Enhanced Matrix Modeとは、ＭＰＳで規格化されているチャンネル拡張手段で、ＭＰＳの伝送パラメータを用いず、所定の固定パラメータにて、ダウンミックス信号をマルチチャンネル信号に復元する手法である。【００８７】
（実施の形態４）
本実施の形態は、符号化情報として、ＡＡＣおよびＭＰＳの基本信号のビット長を基本信号とは別個に送信する場合について説明する。【００８８】
図１９は、本発明の実施の形態４のデジタル放送受信装置における音声信号復号部の構成を示すブロック図である。本実施の形態４の音声信号復号部１９５は、ヘッダ情報解析部２５１、基本信号解析部２５２、マルチチャンネル情報解析部２５４、チャンネル拡張部２５６、出力バッファ２５７、マルチチャンネル情報推定部２５８及びエラー検出部２６０を備える。ここで、符号化情報解析部２８は、「前記符号化情報から、さらに、前記音声符号化信号の前記基本信号のデータ長を解析する前記解析手段」の一例である。【００８９】
ヘッダ情報解析部２５１は、符号化音声信号のヘッダ情報を解析して符号化音声信号の基本信号を基本信号解析部２５２に出力し、符号化音声信号のマルチチャンネル拡張情報をマルチチャンネル情報解析部２５４に出力する。基本信号解析部２５２は、基本信号であるダウンミックス信号をエラー検出部２６０に出力する。マルチチャンネル情報解析部２５４は、マルチチャネル拡張情報をエラー検出部２６０に出力する。【００９０】
エラー検出部２６０は、基本信号解析部２５２から入力された基本信号のビット長を解析し、符号化情報解析部２８から入力された基本信号のビット長と一致するか否かを判定する。一致しなければ、基本信号にエラーが発生したことがわかる。また、チャンネル拡張時にエラーを検出した場合、基本信号にエラーがないことが分かっていれば、チャンネル拡張情報にエラーがあることが分かる。このように、チャンネル拡張情報にエラーがある場合には、チャンネル拡張せずに２チャンネルで出力したり、マルチチャンネル情報推定部２５８により推定したチャンネル拡張情報を用いてチャンネル拡張して出力したりすることができる。チャンネル拡張部２５６、出力バッファ２５７、マルチチャンネル情報推定部２５８及びエラー検出部２６０は、「前記解析手段により得られた前記基本信号の前記データ長と、前記音声符号化信号を復号して得られた前記基本信号のデータ長とを比較して、前記基本信号の復号が正しく行われたか否かを判定し、正しく行われたと判定した場合、前記マルチチャンネル推定部によって推定された前記チャンネル拡張情報を用いて、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大する前記復号手段」の一例である。【００９１】
前述したように、ＡＡＣビットストリームとＭＰＳビットストリームは、互換性を保つため、基本信号の構成は全く同じになっている。言い換えると、ＭＰＳビットストリームは、チャンネル拡張処理をしない基本信号だけでも再生することができる。この場合、エラー検出部２６０および出力バッファ２５７は、「前記基本信号の復号が正しく行われたと判定した場合、さらに、前記補助情報を用いた前記チャンネル拡大処理が正しく行われたか否かを判定し、前記補助情報を用いた前記チャンネル拡大処理にエラーがあったと判定した場合、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとの調整を行わず、前記基本信号のみを出力する前記復号手段」の一例である。従って、受信状態が悪化した場合であっても、基本信号さえエラーなく復号できれば、番組の再生を継続することができる。しかしながら、ＡＡＣの圧縮方式の都合上、ビットストリーム上のエラーは、エラー発生個所で即検出されることが稀である。ＡＡＣのヘッダ情報には、当該フレームのフレーム長が記述され、ＡＡＣのエラー検出は、フレーム毎に長さ比較を行い、ヘッダ記載のフレーム長と相違ないかで判別する。ＡＡＣでは、基本信号部の後ろは意味のないパディング領域であるため、基本信号の直後でエラー検出するのも、フレームの最後でエラー検出するのも、エラー耐性に大きな差異はなかった。【００９２】
これと比べて、ＭＰＳの場合、基本信号に含まれるエラーであっても、基本信号ではなく、チャンネル拡張情報や、フレームの最後で初めて検出される場合が多くある。従って、チャンネル拡張時にエラーを検出したとしても、基本信号にエラーがなかったかを特定する手段がなかった。チャンネル拡張情報のみのビット長も、チャンネル拡張情報内に記述されているが、チャンネル拡張情報の先頭位置が明確化されていないため、エラーのない状態で正しく復号できたことの確認には使用できるが、エラーを検出することには使用できなかった。そこで、従来受信機では、基本信号にエラーがあろうとなかろうと、フレーム内でエラーが検出された場合は、ミュートさせる構成をとらざるを得なかった。【００９３】
本発明では、符号化情報として、基本信号のみのビット長を明確化できる情報を伝送することで、本実施の形態４の構成をとるデジタル放送受信装置では、エラー発生時に、基本信号のみの復号が正しくできたか否かの判別を容易に行うことができる。これにより、エラー状態によって最適なエラー補正をかけることが可能となり、ミュートによって再生を中断することなく、番組再生を継続することが可能となる。【００９４】
ここで、基本信号のみのビット長を明確化できる情報とは、基本信号のビット長そのものであるのはもちろん、（ヘッダ＋基本信号）のビット長といった、ＡＡＣと互換性のある部分のビット長であってもよく、また、チャンネル拡張情報以降のビット長を記述することでも、ヘッダ中のフレーム長との減算を行うことにより、基本信号のビット長を算出することができる。【００９５】
図２０は、本実施の形態のデジタル放送受信装置における、受信処理のフローチャートを示した図である。音声信号復号ステップＳ５ａにおいて、基本信号の復号が正しく行えたかの判別（Ｓ５３）は、符号化情報パケット解析（Ｓ１０）で得られる、基本信号のビット長を用いて行うことができる。ここで、基本信号にエラーがあると判定された場合、エラー対策ステップＳ５７において、音声信号をミュート処理し（Ｓ５７１）、音声出力タイミングの補正を行なわずに（Ｓ５７２）、音声出力する。ステップＳ５３で基本信号にエラーがないと判定された場合、エラー検出部２６０はマルチチャンネル情報を解析し（Ｓ５４）、チャンネル拡張情報にエラーがないか判定する（Ｓ５５）。チャンネル拡張情報にエラーがあると判定された場合、エラー対策ステップＳ５７において、ユーザの入力などに応じて、マルチチャンネル出力するか否かを判断し（Ｓ５７３）、マルチチャンネル出力しないと判断した場合には、音声出力タイミングの補正を行なわないで（Ｓ５７２）、ＭＰＥＧ−２  ＡＡＣの２チャンネルの音声出力を行う（Ｓ６ａ）。ステップＳ５７３で、マルチチャンネル出力すると判断した場合には、マルチチャンネル情報推定部２５８によりチャンネル拡張情報を推定し（Ｓ５７４）、推定したチャンネル拡張情報を用いてチャンネル拡張処理を行った後（Ｓ５６）、マルチチャンネル音声信号を出力する（Ｓ６ａ）。なお、ビットストリームの最後で行うエラー判別Ｓ５５は、従来のフレーム長を用いたエラー判別などで実施できる。Ｓ５３でエラーが検出されなかった場合は、チャンネル拡張情報部のエラーであるとして、基本信号のみによる音声出力が可能であると判断できる。この時、基本信号のみをそのまま出力するのではなく、チャンネル拡張情報をデジタル放送受信装置側で推定して、エラー時でもマルチチャンネル再生を行う構成としても良い。チャンネル拡張情報の推定については、実施の形態３で説明したため、本実施の形態においては説明を省略する。【００９６】
以上のように、本発明のデジタル放送送信装置によれば、ＭＰＳの有無、出力チャンネル数及び基本信号のビット数などのヘッダ情報に記述されない音声信号の符号化方式を、実体データの符号化ストリームとは別個に送信するので、デジタル放送受信装置では、音声符号化信号の復号を開始する前に、ＭＰＥＧ−２  ＡＡＣの場合と比較して、音声信号の復号に要する遅延時間を知ることができ、より精度よく映像信号との同期をとることができるという効果がある。【００９７】
（その他変形例）
なお、本発明を上記実施の形態に基づいて説明してきたが、本発明は、上記の実施の形態に限定されないのはもちろんである。以下のような場合も本発明に含まれる。【００９８】
（１）上記の各装置は、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭ、ハードディスクユニット、ディスプレイユニット、キーボード、マウスなどから構成されるコンピュータシステムである。前記ＲＡＭまたはハードディスクユニットには、コンピュータプログラムが記憶されている。前記マイクロプロセッサが、前記コンピュータプログラムにしたがって動作することにより、各装置は、その機能を達成する。ここでコンピュータプログラムは、所定の機能を達成するために、コンピュータに対する指令を示す命令コードが複数個組み合わされて構成されたものである。【００９９】
（２）上記の各装置を構成する構成要素の一部または全部は、１個のシステムＬＳＩ（Ｌａｒｇｅ  Ｓｃａｌｅ  Ｉｎｔｅｇｒａｔｉｏｎ：大規模集積回路）から構成されているとしてもよい。システムＬＳＩは、複数の構成部を１個のチップ上に集積して製造された超多機能ＬＳＩであり、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどを含んで構成されるコンピュータシステムである。前記ＲＡＭには、コンピュータプログラムが記憶されている。前記マイクロプロセッサが、前記コンピュータプログラムにしたがって動作することにより、システムＬＳＩは、その機能を達成する。【０１００】
（３）上記の各装置を構成する構成要素の一部または全部は、各装置に脱着可能なＩＣカードまたは単体のモジュールから構成されているとしてもよい。前記ＩＣカードまたは前記モジュールは、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどから構成されるコンピュータシステムである。前記ＩＣカードまたは前記モジュールは、上記の超多機能ＬＳＩを含むとしてもよい。マイクロプロセッサが、コンピュータプログラムにしたがって動作することにより、前記ＩＣカードまたは前記モジュールは、その機能を達成する。このＩＣカードまたはこのモジュールは、耐タンパ性を有するとしてもよい。【０１０１】
（４）本発明は、上記に示す方法であるとしてもよい。また、これらの方法をコンピュータにより実現するコンピュータプログラムであるとしてもよいし、前記コンピュータプログラムからなるデジタル信号であるとしてもよい。【０１０２】
また、本発明は、前記コンピュータプログラムまたは前記デジタル信号をコンピュータ読み取り可能な記録媒体、例えば、フレキシブルディスク、ハードディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＢＤ（Ｂｌｕ−ｒａｙ  Ｄｉｓｃ）、半導体メモリなどに記録したものとしてもよい。また、これらの記録媒体に記録されている前記デジタル信号であるとしてもよい。【０１０３】
また、本発明は、前記コンピュータプログラムまたは前記デジタル信号を、電気通信回線、無線または有線通信回線、インターネットを代表とするネットワーク、データ放送等を経由して伝送するものとしてもよい。【０１０４】
また、本発明は、マイクロプロセッサとメモリを備えたコンピュータシステムであって、前記メモリは、上記コンピュータプログラムを記憶しており、前記マイクロプロセッサは、前記コンピュータプログラムにしたがって動作するとしてもよい。【０１０５】
また、前記プログラムまたは前記デジタル信号を前記記録媒体に記録して移送することにより、または前記プログラムまたは前記デジタル信号を前記ネットワーク等を経由して移送することにより、独立した他のコンピュータシステムにより実施するとしてもよい。【０１０６】
（５）上記実施の形態及び上記変形例をそれぞれ組み合わせるとしてもよい。
【産業上の利用可能性】
【０１０７】
本発明は、音声、映像および文字等の情報をデジタル方式で伝送するデジタル放送伝送システムに適し、特に、デジタルテレビ、セットトップボックス、カーナビゲーションシステム、携帯型ワンセグビューワなどの、デジタル放送受信装置に適している。
【図１】
2008117524.tif 000003
【図２】
2008117524.tif 000004
【図３】
2008117524.tif 000005
【図４】
2008117524.tif 000006
【図５】
2008117524.tif 000007
【図６】
2008117524.tif 000008
【図７】
2008117524.tif 000009
【図８】
2008117524.tif 000010
【図９】
2008117524.tif 000011
【図１０】
2008117524.tif 000012
【図１１】
2008117524.tif 000013
【図１２】
2008117524.tif 000014
【図１３】
2008117524.tif 000015
【図１４】
2008117524.tif 000016
【図１５】
2008117524.tif 000017
【図１６】
2008117524.tif 000018
【図１７】
2008117524.tif 000019
【図１８】
2008117524.tif 000020
【図１９】
2008117524.tif 000021
【図２０】
2008117524.tif 000022
【手続補正書】
【提出日】平成21年9月15日(2009.9.15)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、地上波や衛星波を含む伝送路を介して、音声、映像および文字等の情報をデジタル方式で伝送するデジタル放送伝送システム、伝送に使用するデジタル放送送信装置、及び、デジタル放送受信装置に関するものである。
【背景技術】
【０００２】
近年、地上波や衛星波を含む伝送路を介して、音声、映像および文字等の情報をデジタル信号として伝送するデジタル放送が普及しつつある。
【０００３】
デジタル信号を伝送する方式として、ＩＳＯ／ＩＥＣ１３８１８−１で提案されている方式がよく知られている。ＩＳＯ／ＩＥＣ１３８１８−１では、送信機側で、各番組の音声、映像およびデータ毎に符号化されたデジタル信号を多重化して伝送し、受信機側で、指定の番組を受信し再生するための制御部分についての方式が固められている。
【０００４】
音声信号の符号化方式としては、ＩＳＯ／ＩＥＣ１３８１８−７（ＭＰＥＧ−２  Ａｕｄｉｏ  ＡＡＣ）や、その派生方式であるＡＡＣ＋ＳＢＲなどがよく知られ、映像信号の符号化方式としては、ＩＳＯ／ＩＥＣ１３８１８−２（ＭＰＥＧ−２  Ｖｉｄｅｏ）や、ＩＳＯ／ＩＥＣ１４４９６−１０（ＭＰＥＧ−４  ＡＶＣ／Ｈ．２６４）などが知られている。
【０００５】
符号化された音声信号および映像信号は、任意の場所で区切られ、再生時間情報を含むヘッダ情報を付加され、ＰＥＳ(Packetized Elementary Stream)と呼ばれるパケットを構成する。さらにＰＥＳは、基本的に１８４バイト毎に区切られ、パケット識別子とよばれる識別のためのＩＤ（ＰＩＤ）を含むヘッダ情報を付加され、ＴＳＰ (トランスポートパケット Transport Packet) と呼ばれるパケットに再構成される。その後、文字等のデータパケットと一緒に多重化される。この時、ＰＳＩ(Program Specific Information)と呼ばれる、番組と番組を構成するパケットとの関係を表すテーブル情報も一緒に多重化される。
【０００６】
ＰＳＩには、ＰＡＴ(Program Association Table)やＰＭＴ(Program Map Table)など４種類のテーブルが規定され、ＰＡＴには各番組に対応したＰＭＴのＰＩＤが記述され、ＰＭＴには対応する番組を構成する音声や映像信号などが格納されたパケットのＰＩＤが記述されている。受信機は、ＰＡＴとＰＭＴを参照することで、複数の番組が多重化されたＴＳＰの中から、目的の番組を構成するパケットだけを取出すことが可能となる。なお、データパケットやＰＳＩは、ＰＥＳではなく、セクションと呼ばれる形式でＴＳＰ内に格納される。
【０００７】
図１は、ＰＥＳパケット及びセクション形式のフォーマット構成を示した図である。図１（ａ）は、ＰＥＳパケットのフォーマット構成を示す図である。ＰＥＳパケットは、ヘッダとヘッダ拡張情報とデータとからなる。ヘッダは再生時刻の情報を含むことができ、これを用いて映像と音声を同期して再生することができる。データは映像データおよび音声データなどの実体データを含んでいる。図１（ｂ）は、ＰＥＳパケットのセクション通常形式のフォーマット構成を示した図である。セクション通常形式では、ＰＥＳパケットは、２４ビットのヘッダと、データとからなる。さらに、図１（ｃ）は、ＰＥＳパケットのセクション拡張形式のフォーマット構成を示した図である。セクション拡張形式では、ＰＥＳパケットは、６４ビットのヘッダと、データと、ＣＲＣ（Cyclic Redundancy Checksum）からなり、伝送エラーなどの影響を受け難い構成となっている。ＰＡＴやＰＭＴなどは、図１（ｃ）に示される、セクション拡張形式でパケット化される。一方、ＡＲＩＢ  ＳＴＤ−Ｂ１０「デジタル放送に使用する番組配列情報」標準規格（非特許文献１）では、前記ＰＳＩの４種類のテーブル情報に加え、ユーザがサービスやイベントを識別するためのテーブル情報がさらに別途規定され、ＳＩ (Service Information)として区別される。さらに、ＰＳＩおよびＳＩの中に、様々な記述子を埋め込むことで、より柔軟なテーブル構成をとることが可能となっている。図２に、ＰＡＴとＰＭＴの詳細なフォーマット構成図を示す。図２（ａ）は、ＰＡＴのフォーマット構成を示す図である。図２（ａ）に示すように、ＰＡＴは、ヘッダと、繰り返し部と、ＣＲＣとからなる。繰り返し部には、１６ビットの放送番組番号識別部と３ビットの“１１１”と１３ビットのネットワークＰＩＤ、または、１６ビットの放送番組番号識別部と３ビットの“１１１”と１３ビットのＰＭＴＰＩＤが記述される。デジタル放送では、ＰＡＴにより、放送番組番号識別部とＰＭＴのＰＩＤとが対応付けられている。図２（ｂ）は、ＰＭＴのフォーマット構成を示す図である。ＰＭＴは、ヘッダに続いて、３ビットの“１１１”、１３ビットのＰＣＲＰＩＤ、４ビットの“１１１１”、１２ビットの番組情報長および記述子領域１が記述され、続いて繰り返し部がエレメンタリーストリームの数だけ繰り返され、末尾にＣＲＣが記述される。繰り返し部には、８ビットのストリーム形式識別部、３ビットの“１１１”、１３ビットの信号ＰＩＤ、４ビットの“１１１１”、１２ビットのＥＳ情報長および記述子領域２が記述される。さらに、ＰＭＴの末尾にはＣＲＣが記述される。これにより、１つの放送番組が選択された場合、ＰＡＴのＰＭＴＰＩＤから、選択された放送番組に対応するＰＭＴが特定され、ＰＭＴの中に記述されている信号ＰＩＤから当該放送番組を構成する映像および音声などの実データの符号化信号が記述されたパケットを特定することができる。
【０００８】
図３は、従来のデジタル放送送信装置の構成を示した図である。従来のデジタル放送送信装置１０は、音声信号符号化部１１、映像信号符号化部１２、パケット化部１３ａ、１３ｂ、１３ｃ、多重化部１４、伝送路符号化／変調部１５、アンテナ１６を備える。番組を構成する音声および映像の各信号は、各々、音声信号符号化部１１および映像信号符号化部１２に入力され、符号化により、デジタル信号に変換される。変換された各デジタル信号は、パケット化部１３ａおよびパケット化部１３ｂにてヘッダ情報を付加され、ＰＥＳ化される。同時に、データ信号やＰＡＴおよびＰＭＴも、同じくパケット化部１３ｃに入力され、セクション形式でパケット化される。その後、多重化部１４にて全てのＰＥＳおよびセクションパケットが時間多重され、伝送路符号化／変調部１５にて送信処理された後、アンテナ１６より送出される。なお、ここでの送信処理とは、ブロック訂正符号化や畳み込み符号化、インタリーブなどの伝送路符号化処理と、ＯＦＤＭなどのデジタル変調処理を指しているが、その詳細についての説明は省略する。ＩＳＤＢ−Ｔ方式における前記送信処理の詳細は、ＡＲＩＢ  ＳＴＤ−Ｂ２４「デジタル放送におけるデータ放送符号化方式と伝送方式」標準規格（非特許文献２）などに記載されている。
【０００９】
図４は、従来のデジタル放送受信装置の構成を示した図である。図５は、従来のデジタル放送受信装置における、受信処理の処理手順を示したフローチャートである。従来のデジタル放送受信装置２０は、アンテナ２１、復調／伝送路復号部２２、逆多重化部２３、パケット解析部２４ａ、２４ｂ、２４ｃ、音声信号復号部２５、映像信号復号部２６および番組情報解析部２７を備える。デジタル放送受信装置２０がアンテナ２１を介して受信したデジタル放送波は、復調／伝送路復号部２２にて受信処理され、多重化されたＴＳＰ列を出力する。なお、ここでの受信処理とは、ＯＦＤＭ(直交周波数分割多重：Orthogonal Frequency Division Multiplexing)などデジタル変調信号の復調処理と、誤り訂正復号やデインタリーブなどの伝送路復号処理を指し、前記伝送路符号化／変調部１５での送信処理と対となる処理のことを指す。
【００１０】
逆多重化部２３では、まず、受信したＴＳＰ列からＰＡＴパケットを選択し（図５のＳ１１、Ｓ１２）、パケット解析部２４ｃにてＰＡＴの解析を行う（Ｓ１３）。番組情報解析部２７では、ＰＡＴから、サービス中の各番組に対応するＰＭＴパケットのＰＩＤを抽出し、逆多重化部２３に通知する。続いて、番組情報解析部２７は、抽出されたＰＩＤのＰＭＴパケットを選択（Ｓ１４、Ｓ１５）および解析し（Ｓ１６）、サービス中の各番組の詳細情報をユーザに提示して、ユーザの番組選択を受け付ける（Ｓ１８、Ｓ１７）。番組情報解析部２７は、ユーザの番組選択に従い、所望の番組を構成する音声や映像信号などが格納されたパケットのＰＩＤを逆多重化部２３に通知する（Ｓ２）。これにより、所望の番組を構成するＰＥＳの音声パケットおよび映像パケットが選択される（Ｓ３）。
【００１１】
音声および映像の各パケットは、パケット解析部２４ａ、２４ｂにてヘッダ情報部とペイロード部（ここでは符号化信号)に分離、抽出され（Ｓ４）、音声および映像の各符号化信号は、各々、音声信号復号部２５および映像信号復号部２６にて復号される（Ｓ５）。復号によって得られた音声信号および映像信号は、パケット解析部２４ａ、２４ｂで抽出したヘッダ情報に含まれていたＰＴＳ（Presentation Time Stamp）に従って出力される（Ｓ６）。
【００１２】
図６は、従来のデジタル放送受信装置において、多重化されたＴＳＰ列から、１系統のＡＡＣビットストリームを形成するモデルを示した図である。同図に示すように、ＰＩＤ：“０ｘ０”で示されるＰＡＴには、番組Ａと番組ＢとのＰＭＴのＰＩＤが記述されている。例えば、番組ＡのＰＭＴのＰＩＤは“０ｘ１１”であり、番組ＢのＰＭＴのＰＩＤは“０ｘ１２”であることが記述されている。各ＰＭＴには、ＰＡＴの中で対応付けられている番組を構成する音声および映像の符号化データが記述された信号パケットのＰＩＤが記述される。例えば、番組ＡのＰＭＴ（ＰＩＤ：“０ｘ１１”）には、音声の信号パケットのＰＩＤが“０ｘ２１”で、映像の信号パケットのＰＩＤが“０ｘ２２”であることが記述されている。また、番組ＢのＰＭＴ（ＰＩＤ：“０ｘ１２”）には、音声の信号パケットのＰＩＤが“０ｘ２３”で、映像の信号パケットのＰＩＤが“０ｘ２４”であることが記述されている。
【００１３】
ここで、ユーザによって例えば、番組Ａが選択された場合、ＴＳＰの中からＰＩＤが“０ｘ２１”のパケットだけを抽出していくと、番組Ａを構成する音声の符号化データからなるＰＥＳを得ることができる。また、さらに、ＴＳＰの中からＰＩＤが“０ｘ２２”のパケットだけを抽出すると、番組Ａを構成する映像の符号化データからなるＰＥＳを得ることができる。
【００１４】
このようにして得られたＰＥＳパケットから、ヘッダなどを取り除いてデータだけを抽出すると、例えば、ＭＰＥＧ−２  ＡＡＣのストリームを得ることができる（特許文献１参照）。
【００１５】
ところで、近年、音声信号のさらなる圧縮効率向上のため、従来のＡＡＣを拡張し、狭帯域化やダウンミックスによるモノラル化またはステレオ化によって低レート化したビットストリームを基本信号としつつ、わずかな付加情報を加えることによって、高域成分の復元や、マルチチャンネル再生を可能とする方式が提案されている。例えば、基本信号としては１０ｋＨｚ程度に狭帯域化された信号であっても、高域周波数情報を付加することで、４８ｋｂｐｓ程度でもＣＤ相当の音質で再生可能にするＡＡＣ＋ＳＢＲや、２チャンネルのダウンミックス信号に、チャンネル間のレベル差や位相差情報を付加することで、９６ｋｂｐｓ程度でも５．１チャンネルサラウンド再生を可能にするＭＰＥＧ−Ｓｕｒｒｏｕｎｄなどが提案されている。
【００１６】
図７は、ＡＡＣ、ＡＡＣ＋ＳＢＲおよびＭＰＥＧ−Ｓｕｒｒｏｕｎｄの各フォーマット構成を示した図である。図７（ａ）は、通常のＭＰＥＧ−２  ＡＡＣのフレーム構造を示す図である。図７（ｂ）は、ＭＰＥＧ−２  ＡＡＣで表される基本信号にＳＢＲ方式で表される高域周波数情報を付加したフレーム構造を示す図である。図７（ｃ）は、ＭＰＥＧ−２  ＡＡＣで表される基本信号にＳＢＲ方式で表される高域周波数情報とチャンネル拡張情報を付加したＭＰＥＧ−Ｓｕｒｒｏｕｎｄのフレーム構造を示す図である。図７（ｄ）は、ＭＰＥＧ−２  ＡＡＣで表される基本信号にチャンネル拡張情報を付加したＭＰＥＧ−Ｓｕｒｒｏｕｎｄのフレーム構造を示す図である。図７（ａ）〜図７（ｄ）に示すように、いずれの方式でも、ヘッダと、基本信号部とのフォーマット構成は共通である。従来のＭＰＥＧ−２  ＡＡＣのフレーム構造では、図７（ａ）のように、基本信号の後は“０”などで埋められるパディング領域であるので、ＭＰＥＧ−２  ＡＡＣに対応した従来のプレイヤであれば、図７（ａ）〜図７（ｄ）のいずれのデータが入力された場合でも、基本信号部を再生することができる。
【００１７】
図８は、ＭＰＥＧ−Ｓｕｒｒｏｕｎｄを復号可能な、音声信号復号部の構成を示した図である。音声信号復号部２５は、パケット解析部２４ａの後段に接続され、ヘッダ情報解析部２５１、基本信号解析部２５２、高域情報解析部２５３、マルチチャンネル情報解析部２５４、帯域拡張部２５５、チャンネル拡張部２５６および出力バッファ２５７を備える。パケット解析部２４ａにて抽出された符号化音声信号（図７（ｃ）のＭＰＥＧ−Ｓｕｒｒｏｕｎｄビットストリーム）は、ヘッダ情報解析部２５１にてストリーム構造が解析され、フレームの先頭から順に、基本信号、高域成分復元情報およびチャンネル拡張情報が抽出される。ヘッダ情報解析部２５１で抽出された基本信号は基本信号解析部２５２に、高域成分復元情報は高域情報解析部２５３に、チャンネル拡張情報はチャンネル拡張部２５６に、それぞれ入力される。基本信号解析部２５２は、ヘッダ情報解析部２５１で抽出された基本信号を復号化して狭帯域信号を出力する。帯域拡張部２５５は、基本信号解析部２５２が出力する狭帯域信号と、高域情報解析部２５３が出力する高域成分復元情報を用いて、広帯域のダウンミックス信号を復元する。チャンネル拡張部２５６は、前記ダウンミックス信号と、マルチチャンネル情報解析部２５４が出力するチャンネル拡張情報とを用いて、マルチチャンネル音声信号を復元する。前記音声信号は、出力バッファ２５７に蓄積され、ＰＴＳに従って出力される。
【００１８】
ここで、従来のＡＡＣにのみ対応する音声信号復号部に、図７（ｃ）に示したＭＰＥＧ−Ｓｕｒｒｏｕｎｄビットストリームが入力された場合の動作を補足する。この場合、ＡＡＣ版音声信号復号部は、高域情報解析部２５３、マルチチャンネル情報解析部２５４、帯域拡張部２５５およびチャンネル拡張部２５６のいずれも備えておらず、ビットストリーム中の高域成分復元情報部、及びチャンネル拡張情報部は、パディング領域として読み飛ばされ、図８中（ａ）の狭帯域信号が出力となる。同様に、音声信号復号部がＡＡＣおよびＡＡＣ＋ＳＢＲにのみ対応している場合は、図８中（ｂ）のダウンミックス信号が出力となる。これは、すでに説明したように、ＡＡＣ＋ＳＢＲやＭＰＥＧ−Ｓｕｒｒｏｕｎｄのヘッダ、及び基本信号部は、ＡＡＣと全く同じフォーマット構成であり、高域成分復元情報やチャンネル拡張情報は、ＡＡＣのフォーマット構成ではパディング領域であった領域に格納されるため、ＭＰＥＧ−Ｓｕｒｒｏｕｎｄに対応していない音声信号復号部においても、復号エラーとならず、互換性のある部分のみを復号し、出力できるようになっているためである。このフォーマット構成によって、将来的にストリームフォーマットが変わった場合でも、従来装置での最低限の再生を保証する互換フォーマットを実現している。
【００１９】
図９は、ＡＶ同期の実現モデルを示した図である。同図の上段には音声信号の各フレームを示し、下段には映像信号の各フレームを示している。本来、音声および映像信号それぞれの出力は、音声のＰＥＳおよび映像のＰＥＳにそれぞれ付加されていたＰＴＳを参照しながら、音声信号および映像信号が独立して再生装置のタイマと再生時間を合わせることで、ＡＶ同期を実現している（実線の矢印と、図９中（ａ）の円で囲んだ再生時刻）。
【００２０】
しかしながら、ＭＰＥＧ−２  ＡＡＣとＭＰＥＧ−Ｓｕｒｒｏｕｎｄでは、フォーマットの互換性はありつつも、復号の処理内容が異なるために、処理に要する時間、すなわち、処理遅延量が異なる。具体的には、ＡＡＣの復号では必要のなかったチャンネル拡張処理に、フレーム単位のフィルタ処理が含まれているために、より大きな遅延（例えば、図９中（ｂ）の遅延）が生じる。このため、ＭＰＥＧ−２  ＡＡＣでは実線の矢印のタイミングで各フレームの再生を開始できていたものが、ＭＰＥＧ−Ｓｕｒｒｏｕｎｄでは一点鎖線の矢印で示すタイミングでしか再生を開始できない。一方で、ＰＴＳ自体は、従来機、つまりＭＰＥＧ−Ｓｕｒｒｏｕｎｄに対応していない受信機との互換性を保つため、ＡＡＣのみの遅延量が考慮されて、付加されている。そもそも、デジタル放送送信装置１０（図３）において、音声信号符号化部１１から出力される符号化音声信号は、フォーマット構成上では、ＡＡＣとＭＰＥＧ−Ｓｕｒｒｏｕｎｄとの判別ができないため、パケット化部１３ａでは、入力がＡＡＣとしてでしかＰＴＳを付加することができない。
【００２１】
このため、ＭＰＥＧ−Ｓｕｒｒｏｕｎｄを再生できるデジタル放送受信装置では、各フレームの再生に、予測できない余分な遅延が発生するので、映像信号の再生時刻との間に図９（ｂ）で示される時間のずれを生じてしまう。その結果、映像信号と音声信号との同期がとれなくなるという問題がある。
【００２２】
上記問題点に対し、デジタル放送送信装置からの情報に基づいて、デジタル放送受信装置での映像信号の再生開始を図９中（ｃ）の時間だけ遅延させることによって、音声信号と映像信号との同期をとる方法が考えられる。
【００２３】
図１０は、ＭＰＥＧ−Ｓｕｒｒｏｕｎｄを復号可能な同期調整機能を有する音声信号復号部を備えたデジタル放送受信装置の構成を示す図である。なお、音声信号復号部２５以外の機能構成は、図４と同等である。音声信号復号部２５は、図８の音声信号復号部２５と同じ機能を有するが、簡単にするためＡＡＣ＋ＳＢＲに関するブロック（すなわち、高域情報解析部および帯域拡張部）は省略している。図１０に示すデジタル放送送信装置では、マルチチャンネル情報解析部２５４にて、チャンネル拡張情報の存在を検出することで、音声信号の符号化方式がＡＡＣであるかＭＰＥＧ−Ｓｕｒｒｏｕｎｄであるかを判別し、判別結果を映像信号復号部２６へ通知することで、映像信号の出力タイミングを制御して、ＡＶ同期を実現する。
【先行技術文献】
【特許文献】
【００２４】
【特許文献１】特許第３４６６８６１号公報
【発明の概要】
【発明が解決しようとする課題】
【００２５】
しかしながら、マルチチャンネル情報解析部２５４で解析するチャンネル拡張情報は、図７（ｃ）に示すように、ビットストリーム中の最後に記述されているため、音声信号の符号化方式が従来のＡＡＣであるかＭＰＥＧ−Ｓｕｒｒｏｕｎｄであるかの判別は、ビットストリームを最後まで解析しないと判別することができない。従って、映像信号を出力するためのタイミング補正も、音声信号復号部２５の処理を待つ必要があり、補正を行うまでに時間がかかりすぎるという課題がある。
【００２６】
図１１は、ＭＰＥＧ−Ｓｕｒｒｏｕｎｄを復号可能な音声信号復号部を備えたデジタル放送受信装置における、受信処理の処理手順を示したフローチャートである。同図においてステップＳ１からステップＳ３までの処理は図５と同じである。ただし、ステップＳ３で音声および映像パケットを受信した後、さらに、受信したパケットが映像信号のパケットか、音声信号のパケットかを判断し、図５のパケット情報解析Ｓ４、復号Ｓ５、出力Ｓ６の各処理を、音声信号および映像信号のそれぞれに分割させたため、ステップ番号を音声信号についてはＳ４ａ、映像信号についてはＳ４ｖなどの記述としている。逆多重化部２３は、ステップＳ２で設定された信号ＰＩＤのパケットを受信した後、受信したパケットが音声パケットか映像パケットかを判断する。受信したパケットが音声パケットである場合、パケット解析部２４ａは受信したパケットを解析して当該パケットに含まれる符号化音声信号を音声信号復号部２５に、当該符号化音声信号のＰＴＳを出力バッファ２５７に出力する（Ｓ４ａ）。音声信号復号部２５は、パケット解析部２４ａから入力された符号化音声信号を復号する（Ｓ５ａ）。音声信号復号部２５内のマルチチャンネル情報解析部２５４は、復号された音声ストリームのチャンネル拡張情報部を解析して、音声符号化信号がＭＰＥＧ−２  ＡＡＣで符号化されているか、ＭＰＥＧ−Ｓｕｒｒｏｕｎｄで符号化されているかを示す信号を映像信号復号部２６に出力する（ａ）。チャンネル拡張部２５６でチャンネル拡張され、出力バッファ２５７に格納された音声信号は、順次、先入れ後出しで出力される（Ｓ６ａ）。
【００２７】
ステップＳ３で受信したパケットが映像パケットである場合、パケット解析部２４ｂは受信したパケットを解析して当該パケットに含まれる符号化映像信号と当該符号化映像信号のＰＴＳとを映像信号復号部２６に出力する（Ｓ４ｖ）。映像信号復号部２６は、パケット解析部２４ｂから入力された符号化映像信号を復号する（Ｓ５ｖ）。符号化映像信号の復号後、映像信号復号部２６は、マルチチャンネル情報解析部２５４から入力された信号がＭＰＥＧ−Ｓｕｒｒｏｕｎｄを示しているか否かを判別する（Ｓ７）。判別の結果、音声信号がＭＰＥＧ−Ｓｕｒｒｏｕｎｄであれば、映像信号復号部２６は、それに対応する時間だけ映像出力のタイミングを補正する（Ｓ８）。ステップＳ７で判別の結果、音声信号がＭＰＥＧ−Ｓｕｒｒｏｕｎｄでなければ、映像信号復号部２６は、ＰＴＳで示されるタイミングで映像信号を出力する（Ｓ６ｖ）。
【００２８】
なお、映像信号におけるＭＰＥＧ−Ｓｕｒｒｏｕｎｄの判別（Ｓ７）は、映像パケット情報の解析（Ｓ４ｖ）や映像信号の復号（Ｓ５ｖ）と前後する構成もあるが、少なくとも、音声信号復号（Ｓ５ａ）での復号を待つ必要がある（ａ）。さらに、音声信号復号（Ｓ５ａ）での処理が、映像パケットに付加されたＰＴＳの指定時間に間に合わない場合、先に映像信号の出力（Ｓ６ｖ）が開始され、ＡＶ同期がとれなかったり、番組の途中で補正が行われ、出力される映像信号が途切れたりするという課題がある。
【００２９】
本発明は、前記従来の課題を解決するもので、デジタル放送受信機において、伝送される音声信号の符号化方式に応じた処理判断を即座に行うことを可能とした、デジタル放送送信装置、デジタル放送受信装置、およびデジタル放送送受信システムを提供することを目的とする。
【課題を解決するための手段】
【００３０】
前記課題を解決するために、本発明のデジタル放送送信装置は、同期をとりながら再生される音声信号と映像信号とを符号化およびパケット化して多重化放送するデジタル放送送信装置であって、音声信号を符号化して音声符号化信号へ変換し、変換後の前記音声符号化信号を含む音声ストリームパケットを生成する音声ストリームパケット生成手段と、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を含み、デジタル放送受信装置により前記音声ストリームパケットの復号開始前に解析されるデータパケットを生成するデータパケット生成手段と、映像信号を符号化して映像符号化信号へ変換し、変換後の前記映像符号化信号を含む映像ストリームパケットを生成する映像ストリームパケット生成手段と、前記音声ストリームパケット、前記データパケットおよび前記映像ストリームパケットを多重化することにより多重化データを生成し、生成した前記多重化データを放送波により送信する送信手段とを備える。
【００３１】
以上のように、本発明のデジタル放送送信装置によれば、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報がデータパケットに含まれており、このデータパケットが、デジタル放送受信装置により前記音声ストリームパケットの復号開始前に解析される。従って、デジタル放送受信装置では音声符号化信号の復号に予め定められた復号時間を超える処理が含まれるか否かを音声ストリームパケットの復号開始前に知ることができるので、余裕を持って、映像信号との同期を調整するための処理を行うことができるという効果がある。
【００３２】
なお、前記音声ストリームパケット生成手段は、音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化する第１の符号化モードと、前記音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化するとともに、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するための補助情報を含めて符号化する第２の符号化モードとのいずれかの符号化モードで前記音声信号を音声符号化信号へ変換する音声符号化部を備え、前記データパケット生成手段は、前記音声符号化部が、前記第１の符号化モード及び前記第２の符号化モードのいずれで前記音声符号化信号へ変換したかを示す前記符号化情報を生成する符号化情報生成部を備えるとしてもよい。上記本発明によれば、音声信号がＭＰＥＧ−２  ＡＡＣで符号化されているだけであるのか、ＭＰＥＧ−２  ＡＡＣで符号化された上に、さらに基本信号の高域成分または出力チャンネル数を拡大する処理が施されているのかが符号化情報に記述されているので、デジタル放送受信装置では、音声ストリームパケットの復号開始前に、映像信号との同期を調整するための処理を行うことができるという効果がある。
【００３３】
また、前記データパケット生成手段は、前記符号化情報のみをデータとして含む独立したデータパケットを生成するとしてもよい。これにより、デジタル放送受信装置では、音声及び映像ストリームパケットと並行して符号化情報のデータパケットを解析することができるという効果がある。
【００３４】
さらに、前記データパケット生成手段は、前記音声ストリームパケット生成手段によって生成される音声ストリームパケット毎に前記データパケットを生成し、前記送信手段は、前記データパケットが直前のデータパケットと同じ内容であるとき、生成された前記データパケットを多重化しないで送信するとしてもよい。符号化情報は、１つの番組中であれば連続して変化する状況は想定しがたいため、１つの音声パケットに対し、１つの符号化情報パケットの割合で多重化させる必要はない。従って、これにより、多重化データの伝送効率を向上させることができるという効果がある。
【００３５】
また、前記データパケット生成手段は、前記データパケットをセクション形式で規定されたフォーマットで生成するとしてもよい。
【００３６】
さらに、前記データパケット生成手段は、前記音声符号化部が、前記第１の符号化モード及び前記第２の符号化モードのいずれで前記音声符号化信号へ変換したかを示す符号化情報を記述子で表し、前記記述子を、ＰＭＴ(Program Map Table)内でエレメンタリーストリームごとに繰り返される記述子領域に埋め込んだパケットを生成するとしてもよい。ＰＭＴパケットには、番組を構成する音声信号が格納されたエレメンタリーストリームパケットを示すＰＩＤが記述されるため、各ＰＩＤに関連付けられた記述子領域に符号化情報を表す記述子を埋め込むことで、効率良く符号化情報を伝送することが可能となるという効果がある。
【００３７】
また、前記データパケット生成手段は、さらに、前記基本信号が前記補助情報を用いて出力チャンネル数を拡大される場合の拡大後のチャンネル数を示す符号化情報を含むデータパケットを生成するとしてもよい。このように、補助情報を用いて出力チャンネル数を拡大される場合のチャンネル数を符号化情報を含むデータパケットで伝送することにより、再生環境に最適なチャンネル拡張処理を、十分に早く選択することが可能となるという効果がある。
【００３８】
前記データパケット生成手段は、さらに、前記基本信号のデータ長を示す符号化情報を含むデータパケットを生成するとしてもよい。これにより、基本信号にエラーがあるか否かを判定することができるので、基本信号にエラーがなければ基本信号だけを再生することもでき、また、基本信号から直接、チャンネル数を拡大してマルチチャンネル信号を再生することもできるという効果がある。
【００３９】
また、本発明のデジタル放送受信装置は、同期をとりながら再生される音声信号と映像信号とが符号化およびパケット化されて送信された多重化放送を受信するデジタル放送受信装置であって、前記多重化放送を受信する受信手段と、前記受信手段が前記多重化放送により受信した多重化データから、符号化された音声信号である音声符号化信号を含む音声ストリームパケットと、符号化された映像信号である映像符号化信号を含む映像ストリームパケットと、前記音声ストリームパケット及び前記映像ストリームパケット以外のデータパケットとを分離する分離手段と、分離された前記データパケットから、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を、前記音声ストリームパケットの復号開始前に解析する解析手段と、前記符号化情報が、前記音声符号化信号の復号が予め定められた復号時間を超える要因となる処理が含まれることを示している場合、前記音声信号の復号時間が予め定められた復号時間を超える分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングを調整する復号手段とを備える。
【００４０】
以上のように、本発明のデジタル放送受信装置によれば、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報が含まれているデータパケットを前記音声ストリームパケットの復号開始前に解析することができる。これにより、デジタル放送受信装置では音声符号化信号の復号に予め定められた復号時間を超える処理が含まれるか否かを音声ストリームパケットの復号開始前に知ることができるので、余裕を持って、映像信号との同期を調整するための処理を行うことができるという効果がある。
【００４１】
なお、前記分離手段は、受信した前記多重化データから、前記音声ストリームパケットとして、音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化する第１の符号化モードと、前記音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化するとともに、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するための補助情報を含めて符号化する第２の符号化モードとのいずれかの符号化モードで符号化された前記音声符号化信号を含む音声ストリームパケットを分離し、前記解析手段は、前記符号化情報から、分離された前記音声ストリームパケットに含まれる前記音声符号化信号が、前記第１の符号化モード及び前記第２の符号化モードのいずれで変換されたかを解析し、前記復号手段は、前記解析結果に基づき、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するために要する時間分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとを調整するとしてもよい。これにより、音声信号が第１の符号化モードで音声符号化信号に変換されたのか第２の符号化モードで音声符号化信号に変換されたのかが符号化情報に記述されているので、デジタル放送受信装置では、音声ストリームパケットの復号開始前に、映像信号との同期を調整するための処理を行うことができるという効果がある。
【００４２】
また、前記復号手段は、前記解析手段による解析の結果、分離された前記音声ストリームパケットに含まれる音声符号化信号が、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで変換されている場合よりも予め定められた一定時間だけ遅く前記映像信号を出力するとしてもよい。これにより、復号手段では映像信号を通常通りに復号し、復号により得られた映像信号を一定時間だけ遅く出力することにより映像信号と音声信号との同期を調整することができるので、低い処理負荷で容易に同期を調整することができるという効果がある。
【００４３】
さらに、前記復号手段は、前記解析手段による解析の結果、分離された前記音声ストリームパケットに含まれる音声符号化信号が、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで変換されている場合よりも予め定められた一定時間だけ早く、前記音声符号化信号の復号開始を早めるとしてもよい。音声信号が第１の符号化モードで変換されているか又は第２の符号化モードで変換されているかが、復号手段の復号開始前に分かるので、音声符号化信号の復号を一定時間だけ早めることによって容易に映像信号と音声信号との同期を調整することができるという効果がある。
【００４４】
また、前記予め定めた時間は、前記符号化された音声信号の第１のモードに対する第２のモードの復号処理の遅延時間であるとしてもよい。
【００４５】
前記解析手段は、前記符号化情報から、さらに、前記基本信号が前記補助情報を用いて出力チャンネル数を拡大される場合の拡大後のチャンネル数を解析し、前記復号手段は、当該デジタル放送受信装置の出力チャンネル数が前記符号化情報に示されるチャンネル数とは異なる場合、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大し、前記基本信号の出力チャンネル数を拡大するために要する時間分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとを調整するとしてもよい。これにより、復号手段では補助情報を用いて原音と同じチャンネル数に拡大してから当該デジタル放送受信装置の出力チャンネル数に変換するという二度手間を省いて、直接、基本信号から当該デジタル放送受信装置の出力チャンネル数に拡大することができる。従って、映像信号と音声信号との同期を調整しながら、効率よくデジタル放送受信装置の装備に適合した音声信号の復号を行うことができるという効果がある。
【００４６】
また、前記復号手段は、前記基本信号に含まれているチャンネル拡張に関する情報を用いるか、又は、２チャンネルの前記基本信号から５．１チャンネルのマルチチャンネル信号にチャンネル数の拡大を行う際の初期値又は推奨値を用いて、前記基本信号のチャンネル数を当該デジタル放送受信装置の出力チャンネル数に拡大するためのチャンネル拡張情報を推定するマルチチャンネル推定部を備え、前記復号手段は、前記マルチチャンネル推定部によって推定された前記チャンネル拡張情報を用いて、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大するとしてもよい。これにより、復号手段では、補助情報を用いて基本信号を原音と同じチャンネル数に拡大するという手間を省き、基本信号から直接、当該デジタル放送受信装置の出力チャンネル数に拡大することができるという効果がある。
【００４７】
さらに、前記解析手段は、前記符号化情報から、さらに、前記音声符号化信号の前記基本信号のデータ長を解析し、前記復号手段は、前記解析手段により得られた前記基本信号の前記データ長と、前記音声符号化信号を復号して得られた前記基本信号のデータ長とを比較して、前記基本信号の復号が正しく行われたか否かを判定し、正しく行われたと判定した場合、前記マルチチャンネル推定部によって推定された前記チャンネル拡張情報を用いて、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大するとしてもよい。これにより、基本信号の復号が正しく行われた場合には、補助情報を用いないで基本信号から直接、当該デジタル放送受信装置の出力チャンネル数に拡大することができるという効果がある。
【００４８】
また、前記復号手段は、前記基本信号の復号が正しく行われたと判定した場合、さらに、前記補助情報を用いた前記チャンネル数拡大処理が正しく行われたか否かを判定し、前記補助情報を用いた前記チャンネル数拡大処理にエラーがあったと判定した場合、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとの調整を行わず、前記基本信号のみを出力するとしてもよい。これにより、基本信号の復号が正しく行われた場合には基本信号のみを出力することができるという効果がある。
【発明の効果】
【００４９】
本発明によれば、デジタル放送受信装置において、音声符号化信号の中身を最後まで解析しないでも、すなわち、音声符号化信号の復号化開始前に符号化方式特有の情報を知ることができるので、音声信号の符号化方式に応じた最適な同期制御を容易に行うことが可能である。
【図面の簡単な説明】
【００５０】
【図１】図１（ａ）、（ｂ）、（ｃ）はＰＥＳパケット、及びセクション形式のフォーマット構成図である。
【図２】図２（ａ）、（ｂ）はＰＡＴとＰＭＴの詳細なフォーマット構成図である。
【図３】図３は従来のデジタル放送送信装置の構成図である。
【図４】図４は従来のデジタル放送受信装置の構成図である。
【図５】図５は従来のデジタル放送受信装置における受信処理のフローチャートである。
【図６】図６は従来のデジタル放送受信装置において、多重化されたＴＳＰ列から、１系統のＡＡＣビットストリームを形成するモデル図である。
【図７】図７（ａ）、（ｂ）、（ｃ）、（ｄ）はＡＡＣ、ＡＡＣ＋ＳＢＲおよびＭＰＥＧ−Ｓｕｒｒｏｕｎｄの各フォーマット構成図である。
【図８】図８はＭＰＥＧ−Ｓｕｒｒｏｕｎｄを復号可能な、音声信号復号部の構成図である。
【図９】図９はＡＶ同期の実現モデル図である。
【図１０】図１０はＭＰＥＧ−Ｓｕｒｒｏｕｎｄを復号可能な同期調整機能を有する音声信号復号部を備えたデジタル放送受信装置の構成の一例を示すブロック図である。
【図１１】図１１はＭＰＥＧ−Ｓｕｒｒｏｕｎｄを復号可能な音声信号復号部を備えたデジタル放送受信装置における受信処理のフローチャートである。
【図１２】図１２は実施の形態１におけるデジタル放送送信装置の構成図である。
【図１３】図１３は実施の形態１におけるデジタル放送受信装置の構成図である。
【図１４】図１４は実施の形態１のデジタル放送受信装置における受信処理のフローチャートである。
【図１５】図１５は実施の形態２におけるデジタル放送送信装置の構成図である。
【図１６】図１６は、図１５に示した記述子更新部が符号化情報の内容を示す記述子を格納する領域の一例を示す図である。
【図１７】図１７は実施の形態３のデジタル放送受信装置におけるチャンネル数の一例を示す図である。
【図１８】図１８は実施の形態３のデジタル放送受信装置における音声信号復号部の構成を示すブロック図である。
【図１９】図１９は実施の形態４のデジタル放送受信装置における音声信号復号部の構成を示すブロック図である。
【図２０】図２０は実施の形態４のデジタル放送受信装置における受信処理のフローチャートである。
【発明を実施するための形態】
【００５１】
以下、本発明の実施の形態について、図面を参照しながら説明する。なお、本実施の形態では、音声符号化方式にＭＰＥＧ−Ｓｕｒｒｏｕｎｄ（以下、「ＭＰＳ」と記す。）を用いたデジタル放送伝送システムを例にとり説明することとする。
【００５２】
（実施の形態１）
本実施の形態では、新たなＰＩＤを持った符号化情報パケットを生成し、生成した符号化情報パケットにＭＰＳの使用有無を示す情報を記述して伝送する。
【００５３】
図１２は、本発明の実施の形態１におけるデジタル放送送信装置の構成を示すブロック図である。デジタル放送送信装置１は、音声信号に関して符号化情報パケットを生成し、生成した符号化情報パケットにＭＰＳの使用有無を示す情報を記述して伝送するデジタル放送送信装置であって、音声信号符号化部１１、映像信号符号化部１２、パケット化部１３ａ〜１３ｄ、多重化部１４、伝送路符号化／変調部１５およびアンテナ１６を備える。
【００５４】
番組を構成する音声および映像の各信号は、各々、音声信号符号化部１１および映像信号符号化部１２に入力され、デジタル信号に変換される。変換された各デジタル信号は、パケット化部１３ａおよびパケット化部１３ｂにてヘッダ情報を付加され、ＰＥＳ化される。ここで、音声信号符号化部１１とパケット化部１３ａとは、「音声信号を符号化して音声符号化信号へ変換し、変換後の前記音声符号化信号を含む音声ストリームパケットを生成する音声ストリームパケット生成手段」の一例であり、映像信号符号化部１２とパケット化部１３ｂとは「映像信号を符号化して映像符号化信号へ変換し、変換後の前記映像符号化信号を含む映像ストリームパケットを生成する映像ストリームパケット生成手段」の一例である。また、音声信号符号化部１１は、「音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化する第１の符号化モードと、前記音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化するとともに、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するための補助情報を含めて符号化する第２の符号化モードとのいずれかの符号化モードで前記音声信号を音声符号化信号へ変換する音声符号化部」および「前記音声符号化部が、前記第１の符号化モード及び前記第２の符号化モードのいずれで前記音声符号化信号へ変換したかを示す前記符号化情報を生成する符号化情報生成部」の一例である。同時に、データ信号、ＰＡＴおよびＰＭＴも、同じくパケット化部１３ｃに入力され、セクション形式でパケット化される。さらに、音声信号符号化部１１における処理情報を符号化情報として、同様にパケット化部１３ｄにてセクション形式でパケット化する。この、パケット化部１３ｃとパケット化部１３ｄとは、「前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を含み、デジタル放送受信装置により前記音声ストリームパケットの復号開始前に解析されるデータパケットを生成するデータパケット生成手段」の一例である。また、パケット化部１３ｄは、「前記符号化情報のみをデータとして含む独立したデータパケットを生成する前記データパケット生成手段」および「前記データパケットをセクション形式で規定されたフォーマットで生成する前記データパケット生成手段」の一例である。その後、多重化部１４にて全てのＰＥＳおよびセクションパケットが時間多重され、伝送路符号化／変調部１５にて送信処理された後、アンテナ１６より送出される。多重化部１４、伝送路符号化／変調部１５及びアンテナ１６は、「前記音声ストリームパケット、前記データパケットおよび前記映像ストリームパケットを多重化することにより多重化データを生成し、生成した前記多重化データを放送波により送信する送信手段」の一例である。
【００５５】
ここで、符号化情報として、音声信号符号化部１１から出力される音声符号化信号のフォーマット構成だけではわからない情報や、符号化信号のヘッダ情報部に記述されないような情報を選択し、受信機に伝送することで、受信機の最適動作に大きな効果がある。例えば、符号化情報として、音声信号符号化部１１での符号化方式がＡＡＣであるかＭＰＳであるかを示すフラグをセクション形式で別途にパケット化するとした場合、受信機側では、音声信号の符号化方式がＡＡＣであるかＭＰＳであるかを基本信号の復号化開始よりも早く知ることができる。従来であれば、音声信号の各フレームには図７（ｃ）または（ｄ）に示したように、チャンネル拡張情報部が基本信号部の後の位置に記述されているので、１フレーム分の基本信号を複数のパケットからすべて抽出し、復号した後にはじめて、音声信号がＡＡＣで符号化されているかＭＰＳで符号化されているかを知ることができた。これに対し、本実施の形態のデジタル放送送信装置１によれば、音声信号がＡＡＣで符号化されているかＭＰＳで符号化されているかを示すフラグが、音声信号のＰＥＳパケットとは別に、符号化情報としてセクション形式でパケット化されていることにより、音声信号の復号を開始する前に符号化情報を知ることができるので、受信機において、確実に音声信号および映像信号の同期出力タイミングを調整することができるという大きな効果を得ることができる。
【００５６】
なお、上記符号化情報を加味した出力タイミングをＰＥＳパケットのＰＴＳに反映することでも同期タイミングの調整は行えるが、従来のＭＰＥＧ−２  ＡＡＣにのみ対応した機種との互換性の点で問題がある。
【００５７】
図１３は、本発明の実施の形態１におけるデジタル放送受信装置の構成を示すブロック図である。デジタル放送受信装置２は、デジタル放送送信装置１において符号化された音声信号の符号化情報が記述されたセクションパケットを解析することにより、音声信号を符号化時の符号化方式に従って復号するとともに、復号された映像信号と音声信号とをより正確に同期再生するデジタル放送受信装置であって、アンテナ２１、復調／伝送路復号部２２、逆多重化部２３、パケット解析部２４ａ、２４ｂ、２４ｃ、２４ｄ、音声信号復号部２５、映像信号復号部２６、番組情報解析部２７及び符号化情報解析部２８を備える。
【００５８】
アンテナ２１を介して受信したデジタル放送波は、復調／伝送路復号部２２にて受信処理され、多重化されたＴＳＰ列を出力する。逆多重化部２３では、受信したＴＳＰ列からＰＡＴパケットおよびＰＭＴパケットを選択し、パケット解析部２４ｃに出力する。パケット解析部２４ｃは、逆多重化部２３から入力されたＰＡＴパケットおよびＰＭＴパケットから、ＰＡＴ及びＰＭＴを抽出し番組情報解析部２７に出力する。番組情報解析部２７はパケット解析部２４ｃから入力されたＰＡＴ及びＰＭＴから番組情報を抽出して、サービス中の各番組の詳細情報をユーザに提示する。番組情報解析部２７は、提示した番組の詳細情報の中からユーザの番組選択に従い、所望の番組を構成する音声信号及び映像信号などが格納されたＰＥＳパケットのＰＩＤを逆多重化部２３に通知する。これにより、ユーザが選択した番組を構成する音声パケット、映像パケットおよびデータパケットが選択される。アンテナ２１及び復調／伝送路復号部２２は、「多重化放送を受信する受信手段」の一例であり、逆多重化部２３は、「前記受信手段が前記多重化放送により受信した多重化データから、符号化された音声信号である音声符号化信号を含む音声ストリームパケットと、符号化された映像信号である映像符号化信号を含む映像ストリームパケットと、前記音声ストリームパケット及び前記映像ストリームパケット以外のデータパケットとを分離する分離手段」及び「受信した前記多重化データから、前記音声ストリームパケットとして、音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化する第１の符号化モードと、前記音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化するとともに、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するための補助情報を含めて符号化する第２の符号化モードとのいずれかの符号化モードで符号化された前記音声符号化信号を含む音声ストリームパケットを分離する前記分離手段」の一例である。パケット解析部２４ｄは、「分離された前記データパケットから、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を、前記音声ストリームパケットの復号開始前に解析する解析手段」および「前記符号化情報から、分離された前記音声ストリームパケットに含まれる前記音声符号化信号が、前記第１の符号化モード及び前記第２の符号化モードのいずれで変換されたかを解析する前記解析手段」の一例である。音声信号復号部２５及び映像信号復号部２６は、「前記符号化情報が、前記音声符号化信号の復号が予め定められた復号時間を超える要因となる処理が含まれることを示している場合、前記音声信号の復号時間が予め定められた復号時間を超える分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングを調整する復号手段」及び「前記解析結果に基づき、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するために要する時間分だけ、前記音声信号の出��のタイミングと前記映像信号の出力のタイミングとを調整する前記復号手段」の一例である。また、映像信号復号部２６は、「前記解析手段による解析の結果、分離された前記音声ストリームパケットに含まれる音声符号化信号が、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで変換されている場合よりも予め定められた一定時間だけ遅く前記映像信号を出力する前記復号手段」の一例である。また、音声信号復号部２５は、「前記解析手段による解析の結果、分離された前記音声ストリームパケットに含まれる音声符号化信号が、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで変換されている場合よりも予め定められた一定時間だけ早く、前記音声符号化信号の復号開始を早める前記復号手段」の一例である。
【００５９】
データパケットのうち、特に、音声信号の符号化情報に関するパケットは、パケット解析部２４ｄにて符号化情報を抽出された後、符号化情報解析部２８に入力される。符号化情報解析部２８ではパケット解析部２４ｄから入力された符号化情報から、音声信号の符号化がＭＰＥＧ−２  ＡＡＣで行われたのか、ＭＰＳで行われたのか、などを解析し、解析結果を音声信号復号部２５及び映像信号復号部２６に出力する。この符号化情報の解析は、例えば、パケット解析部２４ａ及びパケット解析部２４ｂが、ユーザが選択した番組を構成する音声パケット及び映像パケットから実体データである音声の符号化信号及び映像の符号化信号を抽出している間に行われる。音声信号復号部２５は、パケット解析部２４ａから入力された音声の符号化信号を、符号化情報解析部２８から入力された符号化方式に従って復号する。映像信号復号部２６は、パケット解析部２４ｂから入力された映像の符号化信号を復号し、指定されたＰＴＳに対して、符号化情報解析部２８から入力された音声信号の符号化情報に応じて、復号した映像信号の出力タイミングを調整する。これにより、映像信号復号部２６は、音声信号と映像信号との最適な同期再生を行う。
【００６０】
なお、ここでは、映像信号復号部２６が映像信号の出力タイミングを調整することによって、音声信号と映像信号との同期を調整する方法について説明したが、本発明はこの例に限らず、符号化情報で、音声信号がＭＰＳにより符号化されていることが示されている場合には、音声信号復号部２５が音声信号の復号をＭＰＥＧ−２  ＡＡＣの場合よりも所定時間だけ早く開始し、映像信号復号部２６は通常通り映像信号を復号して出力するとしてもよい。
【００６１】
より具体的には、音声および映像の各パケットは、パケット解析部２４ａおよびパケット解析部２４ｂにてヘッダ情報と符号化信号とに分離、抽出され、各符号化信号は、各々、音声信号復号部２５および映像信号復号部２６にて復号される。
【００６２】
以下、前記符号化情報が、音声信号の符号化方式がＡＡＣであるかＭＰＳであるかのフラグであった場合を例に、デジタル放送受信装置２の動作について説明する。
【００６３】
図１４は、本実施の形態のデジタル放送受信装置における、受信処理のフローチャートを示した図である。図１３に示した番組情報解析部２７は、ユーザが視聴したい番組を選局後（Ｓ１）、選曲された番組を構成するパケットの信号ＰＩＤを、ＰＡＴ及びＰＭＴを参照して受信設定する（Ｓ２）。その後、デジタル放送受信装置２は当該パケットの受信を開始する（Ｓ９およびＳ３）。受信したパケットが符号化情報であった場合（Ｓ９のＹｅｓ）、パケット解析部２４ｄが符号化情報パケットを解析し（Ｓ１０）、音声信号の符号化方式がＡＡＣであるかＭＰＳであるかの判別を行う。受信したパケットが符号化情報パケットでない場合（Ｓ９のＮｏ）、逆多重化部２３は受信したパケットが、音声パケット又は映像パケットであるかを判断する（Ｓ３）。受信したパケットが音声パケットでも映像パケットでもない場合（Ｓ３のＮｏ）、ステップＳ９に戻って、新たなパケットを受信するまで待機する。
【００６４】
受信したパケットが音声パケットである場合（Ｓ３のＹｅｓ）、パケット解析部２４ａは受信した音声パケットの情報を解析して、音声の符号化信号を抽出する（Ｓ４ａ）。次いで、音声信号復号部２５は、抽出された音声の符号化信号を復号する（Ｓ５ａ）。なお、このときまでに、ステップＳ１０で、音声信号の符号化方式がＭＰＥＧ−２  ＡＡＣであるかＭＰＳであるかが解析されていれば、音声信号復号部２５は符号化情報で示される復号方式で音声の符号化信号を復号する。音声信号復号部２５は、復号により得られた音声信号をＰＴＳに従って出力する（Ｓ６ａ）。
【００６５】
ステップＳ３で、受信したパケットが映像パケットである場合（Ｓ３のＹｅｓ）、パケット解析部２４ｂは受信した映像パケットの情報を解析して、映像の符号化信号を抽出する（Ｓ４ｖ）。次いで、映像信号復号部２６は、抽出された映像の符号化信号を復号する（Ｓ５ｖ）。なお、このときまでに、ステップＳ１０で、音声信号の符号化方式がＭＰＥＧ−２  ＡＡＣであるかＭＰＳであるかが解析されていて、映像信号復号部２６は、入力された符号化方式がＭＰＥＧ−２  ＡＡＣであるか、ＭＰＳであるか、またはＡＡＣ＋ＳＢＲであるかに応じて、復号した映像信号を出力するためのＰＴＳによるタイミングからの遅延時間を判断する。符号化方式がＭＰＥＧ−２  ＡＡＣの場合、映像信号復号部２６は、復号により得られた映像信号をＰＴＳに従ってそのまま出力する。また、符号化方式がＭＰＳの場合、出力遅延時間大で出力する。さらに、符号化方式がＡＡＣ＋ＳＢＲのとき、出力遅延時間小で出力する（Ｓ６ｖ）。具体的には、符号化方式がＭＰＳの場合、映像信号復号部２６は、復号により得られた映像信号をＰＴＳで定められたタイミングに対して、あらかじめ定めたＭＰＳの処理時間に相当する時間だけ遅延させ、映像信号を出力する（Ｓ６ｖ）。ＡＡＣ＋ＳＢＲの場合も同様である。
【００６６】
以上のように、音声信号の符号化方式を示す符号化情報を、セクション形式でパケット化してＴＳＰ列に多重化しておくことにより、音声の符号化信号の符号化方式が即座に判別できるため、符号化情報が記述されたパケットを解析するパケット解析部２４ｄは、音声信号復号部２５及び映像信号復号部２６が音声及び映像の符号化信号の復号を開始する前に、すなわち、音声信号復号処理Ｓ５ａや映像信号復号処理Ｓ５ｖを開始前に、映像信号の出力タイミングの補正を行う必要があるか否かの決定が行える。この結果、映像信号復号部２６は、音声符号化信号の復号における遅延量に応じて映像符号化信号の復号処理の開始を遅らせたり、復号済みの映像信号の出力を遅らせるためにバッファ量の調整を行ったりするなどの最適化処理を、従来では音声信号の基本信号を復号した後でなければできなかったのに対し、音声信号の復号処理Ｓ５ａの進行とは関係なく行うことが可能となる。
【００６７】
なお、上記の遅延時間は、ＳＢＲであれば何秒、ＭＰＳであれば何秒というように、予め符号化方式に対応させて遅延時間を示す数値を、音声信号復号部２５、映像信号復号部２６又は図示しないメモリなどが記憶しておくことによって調整する。音声信号復号部２５又は映像信号復号部２６のいずれが遅延時間を記憶しておくかは、いずれの処理部が同期を調整するかによって決めればよい。例えば、音声信号復号部２５が早めに復号を開始することによって同期を調整する場合には音声信号復号部２５が記憶し、映像信号復号部２６が復号化した映像信号の出力タイミングを遅延させることによって同期を調整する場合には映像信号復号部２６が記憶すればよい。また、この遅延時間は、音声信号復号部の処理能力、例えば、ＣＰＵの動作速度などによっても変わってくるので、デジタル放送受信装置の機種ごとに映像信号出力の遅延時間を定めておくものとする。この遅延時間は、「前記符号化された音声信号の第１のモードに対する第２のモードの復号処理の遅延時間である前記予め定めた時間」の一例である。
【００６８】
なお、ここで、パケット化部１３ｄは、「前記音声ストリームパケット生成手段によって生成される音声ストリームパケット毎に前記データパケットを生成する前記データパケット生成手段」の一例であり、多重化部１４及び伝送路符号化／変調部１５は「前記データパケットが直前のデータパケットと同じ内容であるとき、生成された前記データパケットを多重化しないで送信する前記送信手段」の一例である。符号化情報は、１つの番組中であれば連続して変化する状況は想定しがたいため、１つの音声パケットに対し、１つの符号化情報パケットの割合で多重化させる必要はない。音声パケットに含まれる符号化信号の符号化方式が、直前の音声パケットに含まれる符号化情報と同じ内容（符号化方式）である場合は、符号化情報パケットの多重化を省略することが可能である。例えば、同じ番組を構成する音声信号であれば、その番組について１つの符号化情報パケットを多重化しておくだけでもよい。これにより伝送効率を向上させることができる。
【００６９】
一方で、受信機の起動時や、視聴番組を切替えた際に、音声信号復号Ｓ５ａや映像信号復号Ｓ５ｖを開始するより十分早く符号化情報パケット解析Ｓ１０を終わらせることが望ましいため、直前の符号化情報パケットの送出から一定時間間隔を超える場合は、多重化を省略せずに同内容の符号化情報パケットを再度送出する構成としてもよい。
【００７０】
（実施の形態２）
実施の形態１では、新たなＰＩＤを持つ個別のセクション形式のパケットに符号化情報を記述し、そのパケットをＴＳＰに多重化してデジタル放送受信装置に送信するとしたが、本実施の形態２では、新たなパケットは生成せずに、符号化情報を記述子としてＰＭＴに埋め込んで伝送するものである。
【００７１】
図１５は、本発明の実施の形態２における、デジタル放送送信装置１５１の構成を示すブロック図である。デジタル放送送信装置１５１は、音声信号符号化部１１、映像信号符号化部１２、パケット化部１３ａ、１３ｂ、１３ｃ、多重化部１４、伝送路符号化／変調部１５及びアンテナ１６を備える。
【００７２】
実施の形態２のデジタル放送送信装置１５１の特徴は、音声信号の符号化情報をパケット化するパケット化部１３ｄの代わりに記述子更新部１７を新たに備える点である。
【００７３】
図１６は、図１５に示した記述更新部が符号化情報の内容を示す記述子を格納する領域の一例を示す図である。記述子更新部１７は、「前記音声符号化部が、前記第１の符号化モード及び前記第２の符号化モードのいずれで前記音声符号化信号へ変換したかを示す符号化情報を記述子で表し、前記記述子を、ＰＭＴ(Program Map Table)内でエレメンタリーストリームごとに繰り返される記述子領域に埋め込んだパケットを生成する前記データパケット生成手段」の一例であり、音声信号符号化部１１、パケット化部１３ｄ及び記述子更新部１７は、「前記基本信号が前記補助情報を用いて出力チャンネル数を拡大される場合の拡大後のチャンネル数を示す符号化情報を含むデータパケットを生成する前記データパケット生成手段」及び「さらに、前記基本信号のデータ長を示す符号化情報を含むデータパケットを生成する前記データパケット生成手段」の一例である。記述子更新部１７は、音声信号符号化部１１における処理情報、例えば、ＭＰＳの有無、出力チャンネル数及び符号化された基本信号のビット数などを符号化情報として、ＰＭＴやその他のＳＩテーブルの記述子として埋め込む。記述子更新部１７がＰＭＴに符号化情報の記述子を挿入する場合には、例えば、図１６でエレメンタリーストリームごとに記述される記述子領域２に挿入するのが好ましい。
【００７４】
次いで、パケット化部１３ｃは、ＰＡＴ及び符号化情報を示す記述子が挿入されたＰＭＴをパケット化する。多重化部１４は、符号化された音声信号のＰＥＳパケット、符号化された映像信号のＰＥＳパケット及び前述のＰＡＴ及びＰＭＴのパケットを多重化する。多重化されたＴＳＰは、伝送路符号化／変調部１５及びアンテナ１６を介して放送波により伝送される。
【００７５】
以上のように、本実施の形態２のデジタル放送送信装置１５１によれば、図６に示したように、ＰＭＴパケットには、番組を構成する音声信号が格納されたエレメンタリーストリームパケットを示すＰＩＤが記述されるため、各ＰＩＤに関連付けられた記述子領域に符号化情報を表す記述子を埋め込むことで、効率良く符号化情報を伝送することが可能となる。
【００７６】
（実施の形態３）
本実施の形態は、符号化情報が、拡張後(原音)のチャンネル数である場合について説明する。
【００７７】
図１７は、実施の形態３のデジタル放送受信装置を搭載する車両の一例を示す図である。同図に示すように、車両では、４スピーカによるオーディオのマルチチャンネル再生が一般的である。これに対し、ＭＰＳでは、例えば、原音が５．１チャンネルの音声信号を２チャンネルにダウンミックスして符号化し、その符号化信号にチャンネル拡張情報を多重化して送信する。チャンネル拡張情報は、２チャンネルのダウンミックス信号を５．１チャンネルに復元するための情報である。このような場合、車載のデジタル放送受信装置１７２では、多重化されているチャンネル拡張情報に従って、２チャンネルのダウンミックス信号から、５．１チャンネルの原音を復元した後、さらに４チャンネルの音声信号にダウンミックスしているのが現状である。
【００７８】
図１８は、本発明の実施の形態３のデジタル放送受信装置における、音声信号復号部の構成を示すブロック図である。図１８は、図１３のデジタル放送受信装置２の一部を示しているが、音声信号復号部１８５の構成が図１３の音声信号復号部２５の構成と異なる。本実施の形態３の音声信号復号部１８５は、ヘッダ情報解析部２５１、基本信号解析部２５２、マルチチャンネル情報解析部２５４、チャンネル拡張部２５６、出力バッファ２５７、マルチチャンネル情報推定部２５８およびチャンネル拡張情報選択部２５９を備える。ここで、符号化情報解析部２８は、「前記符号化情報から、さらに、前記基本信号が前記補助情報を用いて出力チャンネル数を拡大される場合の拡大後のチャンネル数を解析する前記解析手段」の一例である。
【００７９】
パケット解析部２４ａにて抽出された符号化音声信号は、図７（ｄ）に示したように、ヘッダ、基本信号、チャンネル拡張情報およびパディング領域の順にデータが記述されるフレーム構造となっている。このような符号化音声信号は、ヘッダ情報解析部２５１にてヘッダからストリーム構造が解析され、フレームの先頭から順に、基本信号およびチャンネル拡張情報が抽出される。チャンネル拡張部２５６は、「当該デジタル放送受信装置の出力チャンネル数が前記符号化情報に示されるチャンネル数とは異なる場合、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大し、前記基本信号の出力チャンネル数を拡大するために要する時間分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとを調整する前記復号手段」および「前記マルチチャンネル推定部によって推定された前記チャンネル拡張情報を用いて、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大する前記復号手段」の一例であり、基本信号解析部２５２が出力するダウンミックス信号と、マルチチャンネル情報解析部２５４が出力するチャンネル拡張情報を用いて、５．１チャンネルのマルチチャンネル音声信号を復元する。または、チャンネル拡張情報選択部２５９を介して、マルチチャンネル情報推定部２５８から得られるチャンネル拡張情報を用いて、例えば、４チャンネルのマルチチャンネル音声信号を復元する。また、マルチチャンネル情報推定部２５８は、「前記基本信号に含まれているチャンネル拡張に関する情報を用いるか、又は、２チャンネルの前記基本信号から５．１チャンネルのマルチチャンネル信号にチャンネル数の拡大を行う際の初期値又は推奨値を用いて、前記基本信号のチャンネル数を当該デジタル放送受信装置の出力チャンネル数に拡大するためのチャンネル拡張情報を推定するマルチチャンネル推定部」の一例である。
【００８０】
ここで、符号化音声信号がＡＡＣビットストリームであった場合、基本信号解析部２５２の出力は、通常のステレオ信号であり、マルチチャンネル情報解析部２５４で解析すべきチャンネル拡張情報は、ビットストリーム中に存在しない。この時、基本信号解析部２５２の出力するステレオ信号を用いて、マルチチャンネル情報推定部２５８にてチャンネル拡張情報を推定する。あるいは、マルチチャンネル情報推定部２５８の出力するチャンネル拡張情報は、チャンネル拡張部２５６の初期値や推奨値に関連する情報で、前記ステレオ信号と非相関な推定を行っても良い。チャンネル拡張部２５６は、符号化情報解析部２８の出力に従って、使用するチャンネル拡張情報を選択することで、受信した符号化音声信号が従来ＡＡＣのステレオ信号の場合であっても、ＭＰＳの場合と同様の遅延・出力制御で、マルチチャンネル音声信号の出力を行うことができる。ここで、ＡＡＣフォーマットの特性上、基本信号解析部２５２の出力はステレオ信号に限定されず、モノラル信号や３チャンネル以上のマルチチャンネル信号である場合もあり、本発明の効果は、ステレオＡＡＣに限定するものではない。
【００８１】
また、チャンネル拡張情報の推定は、符号化音声信号がＡＡＣの場合に限定されず、もちろんＭＰＳの場合でも同様の効果が期待できる。例えば、ビットストリーム中で指定されたチャンネル数とは異なるチャンネル数に拡張したい場合、ビットストリーム中のチャンネル拡張情報を使用せず、推定したチャンネル拡張情報を使用することができる。この時、ビットストリーム中のチャンネル拡張情報を活用して推定を行うことで、より高精度な推定を行うことが可能となる。チャンネル間のレベル差などは、拡張後のチャンネル数によらず有用な情報となり得るからである。
【００８２】
また、符号化情報として、拡張後のチャンネル数を伝送することで、ビットストリーム中のチャンネル拡張情報と、推定チャンネル情報を、より意欲的に選択することが可能となる。ＡＡＣとＭＰＳの互換フォーマットの構成上、ＭＰＳが使用されているか否かが、ビットストリームの最後まで解析しないと判別できないのと同様、拡張後のチャンネル数も、マルチチャンネル情報解析部２５４以前では知り得ない情報である。しかしながら、例えば一般的な車載スピーカシステムは、スピーカの数が４つであるのに対し、拡張後のマルチチャンネル音声信号は５．１チャンネルであるなど、拡張後のチャンネル数と、再生環境が合致しないケースが多くある。すなわち、図１７で説明したように、原音が５．１チャンネルであっても、車載のデジタル放送受信装置１７２のように４チャンネルで再生したい場合である。反面、拡張後のチャンネル数が、ビットストリームの最後まで解析しないと判別できないのでは、復号処理の設定遅れや、無駄な処理の発生につながってしまう。そこで、符号化情報により、拡張後のチャンネル数を事前に音声信号復号部２５に通知することで、再生環境に最適なチャンネル拡張処理を、十分に早く選択することが可能となる。なお、この場合、例えば、ＭＰＳを使用する又は使用しないことを示すフラグを用いて、原音のチャンネル数を記述してもよい。例えば、符号化情報として“ＭＰＳを使用する”意味のフラグが記述されている場合には、原音のチャンネル数が５．１チャンネルであるものとし、“ＭＰＳを使用しない”意味のフラグが記述されている場合には、原音のチャンネル数が２チャンネルであるものと定めるとしてもよい。
【００８３】
なお、具体的に、上記マルチチャンネル情報推定部２５８を利用してチャンネル数を拡張する方法としては、以下の（１）、（２）および（３）などの方法がある。すなわち、
【００８４】
（１）マルチチャンネル情報解析部２５４からのチャンネル拡張情報を用いずに、基本信号解析部２５２から出力されるダウンミックス信号、例えば、２チャンネルから直接、目標とするチャンネル数、例えば、４チャンネルに拡張する。
【００８５】
（２）マルチチャンネル情報解析部２５４からのチャンネル拡張情報を活用して、例えば、２チャンネルのダウンミックス信号を、目標とするチャンネル数、例えば、４チャンネルに拡張する。
【００８６】
（３）ＭＰＳで規格化されているEnhanced Matrix Modeにて、２チャンネルから４チャンネルに拡張する。ここで、Enhanced Matrix Modeとは、ＭＰＳで規格化されているチャンネル拡張手段で、ＭＰＳの伝送パラメータを用いず、所定の固定パラメータにて、ダウンミックス信号をマルチチャンネル信号に復元する手法である。
【００８７】
（実施の形態４）
本実施の形態は、符号化情報として、ＡＡＣおよびＭＰＳの基本信号のビット長を基本信号とは別個に送信する場合について説明する。
【００８８】
図１９は、本発明の実施の形態４のデジタル放送受信装置における音声信号復号部の構成を示すブロック図である。本実施の形態４の音声信号復号部１９５は、ヘッダ情報解析部２５１、基本信号解析部２５２、マルチチャンネル情報解析部２５４、チャンネル拡張部２５６、出力バッファ２５７、マルチチャンネル情報推定部２５８及びエラー検出部２６０を備える。ここで、符号化情報解析部２８は、「前記符号化情報から、さらに、前記音声符号化信号の前記基本信号のデータ長を解析する前記解析手段」の一例である。
【００８９】
ヘッダ情報解析部２５１は、符号化音声信号のヘッダ情報を解析して符号化音声信号の基本信号を基本信号解析部２５２に出力し、符号化音声信号のマルチチャンネル拡張情報をマルチチャンネル情報解析部２５４に出力する。基本信号解析部２５２は、基本信号であるダウンミックス信号をエラー検出部２６０に出力する。マルチチャンネル情報解析部２５４は、マルチチャンネル拡張情報をエラー検出部２６０に出力する。
【００９０】
エラー検出部２６０は、基本信号解析部２５２から入力された基本信号のビット長を解析し、符号化情報解析部２８から入力された基本信号のビット長と一致するか否かを判定する。一致しなければ、基本信号にエラーが発生したことがわかる。また、チャンネル拡張時にエラーを検出した場合、基本信号にエラーがないことが分かっていれば、チャンネル拡張情報にエラーがあることが分かる。このように、チャンネル拡張情報にエラーがある場合には、チャンネル拡張せずに２チャンネルで出力したり、マルチチャンネル情報推定部２５８により推定したチャンネル拡張情報を用いてチャンネル拡張して出力したりすることができる。チャンネル拡張部２５６、出力バッファ２５７、マルチチャンネル情報推定部２５８及びエラー検出部２６０は、「前記解析手段により得られた前記基本信号の前記データ長と、前記音声符号化信号を復号して得られた前記基本信号のデータ長とを比較して、前記基本信号の復号が正しく行われたか否かを判定し、正しく行われたと判定した場合、前記マルチチャンネル推定部によって推定された前記チャンネル拡張情報を用いて、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大する前記復号手段」の一例である。
【００９１】
前述したように、ＡＡＣビットストリームとＭＰＳビットストリームは、互換性を保つため、基本信号の構成は全く同じになっている。言い換えると、ＭＰＳビットストリームは、チャンネル拡張処理をしない基本信号だけでも再生することができる。この場合、エラー検出部２６０および出力バッファ２５７は、「前記基本信号の復号が正しく行われたと判定した場合、さらに、前記補助情報を用いた前記チャンネル数拡大処理が正しく行われたか否かを判定し、前記補助情報を用いた前記チャンネル数拡大処理にエラーがあったと判定した場合、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとの調整を行わず、前記基本信号のみを出力する前記復号手段」の一例である。従って、受信状態が悪化した場合であっても、基本信号さえエラーなく復号できれば、番組の再生を継続することができる。しかしながら、ＡＡＣの圧縮方式の都合上、ビットストリーム上のエラーは、エラー発生個所で即検出されることが稀である。ＡＡＣのヘッダ情報には、当該フレームのフレーム長が記述され、ＡＡＣのエラー検出は、フレーム毎に長さ比較を行い、ヘッダ記載のフレーム長と相違ないかで判別する。ＡＡＣでは、基本信号部の後ろは意味のないパディング領域であるため、基本信号の直後でエラー検出するのも、フレームの最後でエラー検出するのも、エラー耐性に大きな差異はなかった。
【００９２】
これと比べて、ＭＰＳの場合、基本信号に含まれるエラーであっても、基本信号ではなく、チャンネル拡張情報や、フレームの最後で初めて検出される場合が多くある。従って、チャンネル拡張時にエラーを検出したとしても、基本信号にエラーがなかったかを特定する手段がなかった。チャンネル拡張情報のみのビット長も、チャンネル拡張情報内に記述されているが、チャンネル拡張情報の先頭位置が明確化されていないため、エラーのない状態で正しく復号できたことの確認には使用できるが、エラーを検出することには使用できなかった。そこで、従来受信機では、基本信号にエラーがあろうとなかろうと、フレーム内でエラーが検出された場合は、ミュートさせる構成をとらざるを得なかった。
【００９３】
本発明では、符号化情報として、基本信号のみのビット長を明確化できる情報を伝送することで、本実施の形態４の構成をとるデジタル放送受信装置では、エラー発生時に、基本信号のみの復号が正しくできたか否かの判別を容易に行うことができる。これにより、エラー状態によって最適なエラー補正をかけることが可能となり、ミュートによって再生を中断することなく、番組再生を継続することが可能となる。
【００９４】
ここで、基本信号のみのビット長を明確化できる情報とは、基本信号のビット長そのものであるのはもちろん、（ヘッダ＋基本信号）のビット長といった、ＡＡＣと互換性のある部分のビット長であってもよく、また、チャンネル拡張情報以降のビット長を記述することでも、ヘッダ中のフレーム長との減算を行うことにより、基本信号のビット長を算出することができる。
【００９５】
図２０は、本実施の形態のデジタル放送受信装置における、受信処理のフローチャートを示した図である。音声信号復号ステップＳ５ａにおいて、基本信号の復号が正しく行えたかの判別（Ｓ５３）は、符号化情報パケット解析（Ｓ１０）で得られる、基本信号のビット長を用いて行うことができる。ここで、基本信号にエラーがあると判定された場合、エラー対策ステップＳ５７において、音声信号をミュート処理し（Ｓ５７１）、音声出力タイミングの補正を行なわずに（Ｓ５７２）、音声出力する。ステップＳ５３で基本信号にエラーがないと判定された場合、エラー検出部２６０はマルチチャンネル情報を解析し（Ｓ５４）、チャンネル拡張情報にエラーがないか判定する（Ｓ５５）。チャンネル拡張情報にエラーがあると判定された場合、エラー対策ステップＳ５７において、ユーザの入力などに応じて、マルチチャンネル出力するか否かを判断し（Ｓ５７３）、マルチチャンネル出力しないと判断した場合には、音声出力タイミングの補正を行なわないで（Ｓ５７２）、ＭＰＥＧ−２  ＡＡＣの２チャンネルの音声出力を行う（Ｓ６ａ）。ステップＳ５７３で、マルチチャンネル出力すると判断した場合には、マルチチャンネル情報推定部２５８によりチャンネル拡張情報を推定し（Ｓ５７４）、推定したチャンネル拡張情報を用いてチャンネル拡張処理を行った後（Ｓ５６）、マルチチャンネル音声信号を出力する（Ｓ６ａ）。なお、ビットストリームの最後で行うエラー判別ステップＳ５５は、従来のフレーム長を用いたエラー判別などで実施できる。ステップＳ５３でエラーが検出されなかった場合は、チャンネル拡張情報部のエラーであるとして、基本信号のみによる音声出力が可能であると判断できる。この時、基本信号のみをそのまま出力するのではなく、チャンネル拡張情報をデジタル放送受信装置側で推定して、エラー時でもマルチチャンネル再生を行う構成としても良い。チャンネル拡張情報の推定については、実施の形態３で説明したため、本実施の形態においては説明を省略する。
【００９６】
以上のように、本発明のデジタル放送送信装置によれば、ＭＰＳの有無、出力チャンネル数及び基本信号のビット数などのヘッダ情報に記述されない音声信号の符号化方式を、実体データの符号化ストリームとは別個に送信するので、デジタル放送受信装置では、音声符号化信号の復号を開始する前に、ＭＰＥＧ−２  ＡＡＣの場合と比較して、音声信号の復号に要する遅延時間を知ることができ、より精度よく映像信号との同期をとることができるという効果がある。
【００９７】
（その他変形例）
なお、本発明を上記実施の形態に基づいて説明してきたが、本発明は、上記の実施の形態に限定されないのはもちろんである。以下のような場合も本発明に含まれる。
【００９８】
（１）上記の各装置は、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭ、ハードディスクユニット、ディスプレイユニット、キーボード、マウスなどから構成されるコンピュータシステムである。前記ＲＡＭまたはハードディスクユニットには、コンピュータプログラムが記憶されている。前記マイクロプロセッサが、前記コンピュータプログラムにしたがって動作することにより、各装置は、その機能を達成する。ここでコンピュータプログラムは、所定の機能を達成するために、コンピュータに対する指令を示す命令コードが複数個組み合わされて構成されたものである。
【００９９】
（２）上記の各装置を構成する構成要素の一部または全部は、１個のシステムＬＳＩ（Ｌａｒｇｅ  Ｓｃａｌｅ  Ｉｎｔｅｇｒａｔｉｏｎ：大規模集積回路）から構成されているとしてもよい。システムＬＳＩは、複数の構成部を１個のチップ上に集積して製造された超多機能ＬＳＩであり、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどを含んで構成されるコンピュータシステムである。前記ＲＡＭには、コンピュータプログラムが記憶されている。前記マイクロプロセッサが、前記コンピュータプログラムにしたがって動作することにより、システムＬＳＩは、その機能を達成する。
【０１００】
（３）上記の各装置を構成する構成要素の一部または全部は、各装置に脱着可能なＩＣカードまたは単体のモジュールから構成されているとしてもよい。前記ＩＣカードまたは前記モジュールは、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどから構成されるコンピュータシステムである。前記ＩＣカードまたは前記モジュールは、上記の超多機能ＬＳＩを含むとしてもよい。マイクロプロセッサが、コンピュータプログラムにしたがって動作することにより、前記ＩＣカードまたは前記モジュールは、その機能を達成する。このＩＣカードまたはこのモジュールは、耐タンパ性を有するとしてもよい。
【０１０１】
（４）本発明は、上記に示す方法であるとしてもよい。また、これらの方法をコンピュータにより実現するコンピュータプログラムであるとしてもよいし、前記コンピュータプログラムからなるデジタル信号であるとしてもよい。
【０１０２】
また、本発明は、前記コンピュータプログラムまたは前記デジタル信号をコンピュータ読み取り可能な記録媒体、例えば、フレキシブルディスク、ハードディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＢＤ（Ｂｌｕ−ｒａｙ  Ｄｉｓｃ）、半導体メモリなどに記録したものとしてもよい。また、これらの記録媒体に記録されている前記デジタル信号であるとしてもよい。
【０１０３】
また、本発明は、前記コンピュータプログラムまたは前記デジタル信号を、電気通信回線、無線または有線通信回線、インターネットを代表とするネットワーク、データ放送等を経由して伝送するものとしてもよい。
【０１０４】
また、本発明は、マイクロプロセッサとメモリを備えたコンピュータシステムであって、前記メモリは、上記コンピュータプログラムを記憶しており、前記マイクロプロセッサは、前記コンピュータプログラムにしたがって動作するとしてもよい。
【０１０５】
また、前記プログラムまたは前記デジタル信号を前記記録媒体に記録して移送することにより、または前記プログラムまたは前記デジタル信号を前記ネットワーク等を経由して移送することにより、独立した他のコンピュータシステムにより実施するとしてもよい。
【０１０６】
（５）上記実施の形態及び上記変形例をそれぞれ組み合わせるとしてもよい。
【産業上の利用可能性】
【０１０７】
本発明は、音声、映像および文字等の情報をデジタル方式で伝送するデジタル放送伝送システムに適し、特に、デジタルテレビ、セットトップボックス、カーナビゲーションシステム、携帯型ワンセグビューワなどの、デジタル放送受信装置に適している。
【符号の説明】
【０１０８】
１、１０、１５１    デジタル放送送信装置
２、２０、１７２    デジタル放送受信装置
１１    音声信号符号化部
１２    映像信号符号化部
１３ａ、１３ｂ、１３ｃ、１３ｄ    パケット化部
１４    多重化部
１５    伝送路符号化／変調部
１６、２１    アンテナ
１７    記述子更新部
２２    復調／伝送路復号部
２３    逆多重化部
２４ａ、２４ｂ、２４ｃ、２４ｄ    パケット解析部
２５、１８５、１９５    音声信号復号部
２６    映像信号復号部
２７    番組情報解析部
２８    符号化情報解析部
【手続補正２】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
同期をとりながら再生される音声信号と映像信号とを符号化およびパケット化して多重化放送するデジタル放送送信装置であって、
音声信号を符号化して音声符号化信号へ変換し、変換後の前記音声符号化信号を含む音声ストリームパケットを生成する音声ストリームパケット生成手段と、
前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を含み、デジタル放送受信装置により前記音声ストリームパケットの復号開始前に解析されるデータパケットを生成するデータパケット生成手段と、
映像信号を符号化して映像符号化信号へ変換し、変換後の前記映像符号化信号を含む映像ストリームパケットを生成する映像ストリームパケット生成手段と、
前記音声ストリームパケット、前記データパケットおよび前記映像ストリームパケットを多重化することにより多重化データを生成し、生成した前記多重化データを放送波により送信する送信手段と
を備えることを特徴とするデジタル放送送信装置。
【請求項２】
前記音声ストリームパケット生成手段は、音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化する第１の符号化モードと、前記音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化するとともに、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するための補助情報を含めて符号化する第２の符号化モードとのいずれかの符号化モードで前記音声信号を音声符号化信号へ変換する音声符号化部を備え、
前記データパケット生成手段は、前記音声符号化部が、前記第１の符号化モード及び前記第２の符号化モードのいずれで前記音声符号化信号へ変換したかを示す前記符号化情報を生成する符号化情報生成部を備える
ことを特徴とする請求項１記載のデジタル放送送信装置。
【請求項３】
前記データパケット生成手段は、前記符号化情報のみをデータとして含む独立したデータパケットを生成する
ことを特徴とする請求項２記載のデジタル放送送信装置。
【請求項４】
前記データパケット生成手段は、前記音声ストリームパケット生成手段によって生成される音声ストリームパケット毎に前記データパケットを生成し、
前記送信手段は、前記データパケットが直前のデータパケットと同じ内容であるとき、生成された前記データパケットを多重化しないで送信する
ことを特徴とする請求項３記載のデジタル放送送信装置。
【請求項５】
前記データパケット生成手段は、前記データパケットをセクション形式で規定されたフォーマットで生成する
ことを特徴とする請求項２記載のデジタル放送送信装置。
【請求項６】
前記データパケット生成手段は、前記音声符号化部が、前記第１の符号化モード及び前記第２の符号化モードのいずれで前記音声符号化信号へ変換したかを示す符号化情報を記述子で表し、前記記述子を、ＰＭＴ(Program Map Table)内でエレメンタリーストリームごとに繰り返される記述子領域に埋め込んだパケットを生成する
ことを特徴とする請求項２記載のデジタル放送送信装置。
【請求項７】
前記データパケット生成手段は、さらに、前記基本信号が前記補助情報を用いて出力チャンネル数を拡大される場合の拡大後のチャンネル数を示す符号化情報を含むデータパケットを生成する
ことを特徴とする請求項２記載のデジタル放送送信装置。
【請求項８】
前記データパケット生成手段は、さらに、前記基本信号のデータ長を示す符号化情報を含むデータパケットを生成する
ことを特徴とする請求項２記載のデジタル放送送信装置。
【請求項９】
同期をとりながら再生される音声信号と映像信号とが符号化およびパケット化されて送信された多重化放送を受信するデジタル放送受信装置であって、
前記多重化放送を受信する受信手段と、
前記受信手段が前記多重化放送により受信した多重化データから、符号化された音声信号である音声符号化信号を含む音声ストリームパケットと、符号化された映像信号である映像符号化信号を含む映像ストリームパケットと、前記音声ストリームパケット及び前記映像ストリームパケット以外のデータパケットとを分離する分離手段と、
分離された前記データパケットから、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を、前記音声ストリームパケットの復号開始前に解析する解析手段と、
前記符号化情報が、前記音声符号化信号の復号が予め定められた復号時間を超える要因となる処理が含まれることを示している場合、前記音声信号の復号時間が予め定められた復号時間を超える分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングを調整する復号手段と
を備えることを特徴とするデジタル放送受信装置。
【請求項１０】
前記分離手段は、受信した前記多重化データから、前記音声ストリームパケットとして、音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化する第１の符号化モードと、前記音声信号をＭＰＥＧ−２  ＡＡＣ方式で符号化するとともに、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するための補助情報を含めて符号化する第２の符号化モードとのいずれかの符号化モードで符号化された前記音声符号化信号を含む音声ストリームパケットを分離し、
前記解析手段は、前記符号化情報から、分離された前記音声ストリームパケットに含まれる前記音声符号化信号が、前記第１の符号化モード及び前記第２の符号化モードのいずれで変換されたかを解析し、
前記復号手段は、前記解析手段による解析結果に基づき、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで得られた基本信号の高域成分または前記基本信号の出力チャンネル数を拡大するために要する時間分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとを調整する
ことを特徴とする請求項９記載のデジタル放送受信装置。
【請求項１１】
前記復号手段は、前記解析手段による解析の結果、分離された前記音声ストリームパケットに含まれる音声符号化信号が、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで変換されている場合よりも予め定められた一定時間だけ遅く前記映像信号を出力する
ことを特徴とする請求項１０記載のデジタル放送受信装置。
【請求項１２】
前記復号手段は、前記解析手段による解析の結果、分離された前記音声ストリームパケットに含まれる音声符号化信号が、前記第２の符号化モードで変換されている場合、前記第１の符号化モードで変換されている場合よりも予め定められた一定時間だけ早く、前記音声符号化信号の復号開始を早める
ことを特徴とする請求項１０記載のデジタル放送受信装置。
【請求項１３】
前記予め定めた時間は、前記符号化された音声信号の第１のモードに対する第２のモードの復号処理の遅延時間である
ことを特徴とする請求項１０記載のデジタル放送受信装置。
【請求項１４】
前記解析手段は、前記符号化情報から、さらに、前記基本信号が前記補助情報を用いて出力チャンネル数を拡大される場合の拡大後のチャンネル数を解析し、
前記復号手段は、当該デジタル放送受信装置の出力チャンネル数が前記符号化情報に示されるチャンネル数とは異なる場合、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大し、前記基本信号の出力チャンネル数を拡大するために要する時間分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとを調整する
ことを特徴とする請求項１０記載のデジタル放送受信装置。
【請求項１５】
前記復号手段は、前記基本信号に含まれているチャンネル拡張に関する情報を用いるか、又は、２チャンネルの前記基本信号から５．１チャンネルのマルチチャンネル信号にチャンネル数の拡大を行う際の初期値又は推奨値を用いて、前記基本信号のチャンネル数を当該デジタル放送受信装置の出力チャンネル数に拡大するためのチャンネル拡張情報を推定するマルチチャンネル推定部を備え、
前記復号手段は、前記マルチチャンネル推定部によって推定された前記チャンネル拡張情報を用いて、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大する
ことを特徴とする請求項１４記載のデジタル放送受信装置。
【請求項１６】
前記解析手段は、前記符号化情報から、さらに、前記音声符号化信号の前記基本信号のデータ長を解析し、
前記復号手段は、前記解析手段により得られた前記基本信号の前記データ長と、前記音声符号化信号を復号して得られた前記基本信号のデータ長とを比較して、前記基本信号の復号が正しく行われたか否かを判定し、正しく行われたと判定した場合、前記マルチチャンネル推定部によって推定された前記チャンネル拡張情報を用いて、前記基本信号を、直接、当該デジタル放送受信装置の出力チャンネル数に拡大する
ことを特徴とする請求項１５記載のデジタル放送受信装置。
【請求項１７】
前記復号手段は、前記基本信号の復号が正しく行われたと判定した場合、さらに、前記補助情報を用いた前記チャンネル数拡大処理が正しく行われたか否かを判定し、前記補助情報を用いた前記チャンネル数拡大処理にエラーがあったと判定した場合、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングとの調整を行わず、前記基本信号のみを出力する
ことを特徴とする請求項１６記載のデジタル放送受信装置。
【請求項１８】
同期をとりながら再生される音声信号と映像信号とを符号化およびパケット化して多重化放送するデジタル放送送信装置と、前記多重化放送を受信するデジタル放送受信装置とを含むデジタル放送送受信システムであって、
デジタル放送送信装置は、
音声信号を符号化して音声符号化信号へ変換し、変換後の前記音声符号化信号を含む音声ストリームパケットを生成する音声ストリームパケット生成手段と、
前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を含み、デジタル放送受信装置により前記音声ストリームパケットの復号開始前に解析されるデータパケットを生成するデータパケット生成手段と、
映像信号を符号化して映像符号化信号へ変換し、変換後の前記映像符号化信号を含む映像ストリームパケットを生成する映像ストリームパケット生成手段と、
前記音声ストリームパケット、前記データパケットおよび前記映像ストリームパケットを多重化することにより多重化データを生成し、生成した前記多重化データを放送波により送信する送信手段とを備え、
前記デジタル放送受信装置は、
前記多重化放送を受信する受信手段と、
前記受信手段が前記多重化放送により受信した前記多重化データから、符号化された音声信号である音声符号化信号を含む前記音声ストリームパケットと、符号化された映像信号である映像符号化信号を含む前記映像ストリームパケットと、前記音声ストリームパケット及び前記映像ストリームパケット以外の前記データパケットとを分離する分離手段と、
分離された前記データパケットから、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を、前記音声ストリームパケットの復号開始前に解析する解析手段と、
前記符号化情報が、前記音声符号化信号の復号が予め定められた復号時間を超える要因となる処理が含まれることを示している場合、前記音声信号の復号時間が予め定められた復号時間を超える分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングを調整する復号手段とを備える
ことを特徴とするデジタル放送送受信システム。
【請求項１９】
同期をとりながら再生される音声信号と映像信号とを符号化およびパケット化して多重化放送するデジタル放送送信方法であって、
音声ストリームパケット生成手段が、音声信号を符号化して音声符号化信号へ変換し、変換後の前記音声符号化信号を含む音声ストリームパケットを生成する音声ストリームパケット生成ステップと、
データパケット生成手段が、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を含み、デジタル放送受信装置により前記音声ストリームパケットの復号開始前に解析されるデータパケットを生成するデータパケット生成ステップと、
映像ストリームパケット生成手段が、映像信号を符号化して映像符号化信号へ変換し、変換後の前記映像符号化信号を含む映像ストリームパケットを生成する映像ストリームパケット生成ステップと、
送信手段が、前記音声ストリームパケット、前記データパケットおよび前記映像ストリームパケットを多重化することにより多重化データを生成し、生成した前記多重化データを放送波により送信する送信ステップと
を含むことを特徴とするデジタル放送送信方法。
【請求項２０】
同期をとりながら再生される音声信号と映像信号とが符号化およびパケット化されて送信された多重化放送を受信するデジタル放送受信方法であって、
受信手段が、前記多重化放送を受信する受信ステップと、
分離手段が、前記受信手段が前記多重化放送により受信した多重化データから、符号化された音声信号である音声符号化信号を含む音声ストリームパケットと、符号化された映像信号である映像符号化信号を含む映像ストリームパケットと、前記音声ストリームパケット及び前記映像ストリームパケット以外のデータパケットとを分離する分離ステップと、
解析手段が、分離された前記データパケットから、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を、前記音声ストリームパケットの復号開始前に解析する解析ステップと、
復号手段が、前記符号化情報が、前記音声符号化信号の復号が予め定められた復号時間を超える要因となる処理が含まれることを示している場合、前記音声信号の復号時間が予め定められた復号時間を超える分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングを調整する復号ステップと
を備えることを特徴とするデジタル放送受信方法。
【請求項２１】
同期をとりながら再生される音声信号と映像信号とを符号化およびパケット化して多重化放送するデジタル放送送信装置ためのプログラムであって、コンピュータを、
音声信号を符号化して音声符号化信号へ変換し、変換後の前記音声符号化信号を含む音声ストリームパケットを生成する音声ストリームパケット生成手段と、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を含み、デジタル放送受信装置により前記音声ストリームパケットの復号開始前に解析されるデータパケットを生成するデータパケット生成手段と、映像信号を符号化して映像符号化信号へ変換し、変換後の前記映像符号化信号を含む映像ストリームパケットを生成する映像ストリームパケット生成手段と、前記音声ストリームパケット、前記データパケットおよび前記映像ストリームパケットを多重化することにより多重化データを生成し、生成した前記多重化データを放送波により送信する送信手段として機能させるためのプログラム。
【請求項２２】
同期をとりながら再生される音声信号と映像信号とが符号化およびパケット化されて送信された多重化放送を受信するデジタル放送受信装置のためのプログラムであって、コンピュータを、
前記多重化放送を受信する受信手段と、前記受信手段が前記多重化放送により受信した多重化データから、符号化された音声信号である音声符号化信号を含む音声ストリームパケットと、符号化された映像信号である映像符号化信号を含む映像ストリームパケットと、前記音声ストリームパケット及び前記映像ストリームパケット以外のデータパケットとを分離する分離手段と、分離された前記データパケットから、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を、前記音声ストリームパケットの復号開始前に解析する解析手段と、前記符号化情報が、前記音声符号化信号の復号が予め定められた復号時間を超える要因となる処理が含まれることを示している場合、前記音声信号の復号時間が予め定められた復号時間を超える分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングを調整する復号手段として機能させるためのプログラム。
【請求項２３】
同期をとりながら再生される音声信号と映像信号とが符号化およびパケット化されて送信された多重化放送を受信する集積回路であって、
前記多重化放送を受信する受信手段と、
前記受信手段が前記多重化放送により受信した多重化データから、符号化された音声信号である音声符号化信号を含む音声ストリームパケットと、符号化された映像信号である映像符号化信号を含む映像ストリームパケットと、前記音声ストリームパケット及び前記映像ストリームパケット以外のデータパケットとを分離する分離手段と、
分離された前記データパケットから、前記音声ストリームパケットのヘッダ情報には含まれない情報であって、前記音声符号化信号の復号時間が予め定められた復号時間を超える要因となる処理が前記音声符号化信号の復号処理に含まれるか否かを示す符号化情報を、前記音声ストリームパケットの復号開始前に解析する解析手段と、
前記符号化情報が、前記音声符号化信号の復号が予め定められた復号時間を超える要因となる処理が含まれることを示している場合、前記音声信号の復号時間が予め定められた復号時間を超える分だけ、前記音声信号の出力のタイミングと前記映像信号の出力のタイミングを調整する復号手段と
を備えることを特徴とする集積回路。
【手続補正３】
【補正対象書類名】図面
【補正対象項目名】全図
【補正方法】変更
【補正の内容】
【図１】
2008117524.tif 000023
【図２】
2008117524.tif 000024
【図３】
2008117524.tif 000025
【図４】
2008117524.tif 000026
【図５】
2008117524.tif 000027
【図６】
2008117524.tif 000028
【図７】
2008117524.tif 000029
【図８】
2008117524.tif 000030
【図９】
2008117524.tif 000031
【図１０】
2008117524.tif 000032
【図１１】
2008117524.tif 000033
【図１２】
2008117524.tif 000034
【図１３】
2008117524.tif 000035
【図１４】
2008117524.tif 000036
【図１５】
2008117524.tif 000037
【図１６】
2008117524.tif 000038
【図１７】
2008117524.tif 000039
【図１８】
2008117524.tif 000040
【図１９】
2008117524.tif 000041
【図２０】
2008117524.tif 000042
【国際調査報告】
2008117524.tif 000043
2008117524.tif 000044
2008117524.tif 000045
2008117524.tif 000046