(57)【要約】  受信側において良好なコンテンツ再生を可能とする。  優先度情報を持つ複数の符号化データを含む符号化ストリームを取得する。複数の符号化データのうち所定の優先度までの符号化データに復号化処理を施して復号化済データを含む復号化済ストリームを生成する。また、複数の符号化データのうち所定の優先度を越える符号化データを含む符号化ストリームを生成する。受信側に、デジタルインタフェースを介して、復号化済ストリームおよび符号化ストリームを分割復号化ストリームとして同時に送信する。
2016163329.tif 000002
【特許請求の範囲】
【請求項１】
優先度情報を持つ複数の符号化データを含む符号化ストリームを取得するストリーム取得部と、
上記複数の符号化データのうち所定の優先度までの符号化データに復号化処理を施して復号化済データを含む復号化済ストリームを生成すると共に、上記複数の符号化データのうち上記所定の優先度を越える符号化データを含む符号化ストリームを生成するデコード部と、
受信側に、デジタルインタフェースを介して、上記デコード部で生成された復号化済ストリームおよび符号化ストリームを分割復号化ストリームとして同時に送信するストリーム送信部を備える
送信装置。
【請求項２】
上記受信側が上記分割復号化ストリームに対応しているか判断する判断部をさらに備え、
上記送信部は、上記判断部で対応していると判断されるとき、上記受信側に上記分割復号化ストリームを送信する
請求項１に記載の送信装置。
【請求項３】
上記判断部は、上記受信側から取得された上記分割復号化ストリームに対応していることを示す情報により、上記受信側が上記分割復号化ストリームに対応していると判断する
請求項２に記載の送信装置。
【請求項４】
上記受信側に、上記デジタルインタフェースを介して、上記分割復号化ストリームの送信であることを示す情報を送信する情報送信部をさらに備える
請求項１に記載の送信装置。
【請求項５】
上記符号化ストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームであり、
上記デコード部は、上記複数のオブジェクト音源の符号化データのうち所定の優先度までのオブジェクト音源の符号化データに復号化処理を施して所定チャネル数の音声データを含む復号化済オーディオストリームを生成すると共に、上記複数のオブジェクト音源の符号化データのうち上記所定の優先度を越えるオブジェクト音源の符号化データを含む符号化オーディオストリームを生成する
請求項１に記載の送信装置。
【請求項６】
上記受信側から、上記デジタルインタフェースを介して、スピーカ構成情報を取得する情報取得部をさらに備え、
上記デコード部は、スピーカ構成情報で示されるチャネル数の音声データを含む復号化済オーディオストリームを生成する
請求項５に記載の送信装置。
【請求項７】
上記デジタルインタフェースはＨＤＭＩである
請求項１に記載の送信装置。
【請求項８】
優先度情報を持つ複数の符号化データを含む符号化ストリームを取得するストリーム取得ステップと、
上記複数の符号化データのうち所定の優先度までの符号化データに復号化処理を施して復号化済データを含む復号化済ストリームを生成すると共に、上記複数の符号化データのうち上記所定の優先度を越える符号化データを含む符号化ストリームを生成するデコードステップと、
ストリーム送信部により、デジタルインタフェースを介して、上記デコード部で生成された復号化済ストリームおよび符号化ストリームを分割復号化ストリームとして同時に送信するストリーム送信ステップを有する
送信方法。
【請求項９】
送信側から、デジタルインタフェースを介して、復号化済データを含む復号化済ストリームと優先度情報を持つ所定数の符号化データを含む符号化ストリームからなる分割復号化ストリームを受信するストリーム受信部と、
上記符号化ストリームに復号化処理を施して復号化済データを得るデコード部と、
上記デコード部で得られた復号化済データと上記復号化済ストリームに含まれている復号化済データとを合成して出力データを得る合成部を備える
受信装置。
【請求項１０】
上記送信側に、上記デジタルインタフェースを介して、上記分割復号化ストリームに対応していることを示す情報を送信する情報送信部をさらに備える
請求項９に記載の受信装置。
【請求項１１】
上記送信側から、上記デジタルインタフェースを介して、上記分割復号化ストリームの送信であることを示す情報を受信する情報受信部をさらに備える
請求項９に記載の受信装置。
【請求項１２】
上記符号化ストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームである
請求項９に記載の受信装置。
【請求項１３】
上記デジタルインタフェースはＨＤＭＩである
請求項９に記載の受信装置。
【請求項１４】
受信部により、送信側から、デジタルインタフェースを介して、復号化済データを含む復号化済ストリームと優先度情報を持つ所定数の符号化データを含む符号化ストリームからなる分割復号化ストリームを受信するストリーム受信ステップと、
上記符号化ストリームに復号化処理を施して復号化済データを得るデコードステップと、
上記デコードステップで得られた復号化済データと上記復号化済ストリームに含まれている復号化済データとを合成して出力データを得る合成ステップを有する
受信方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、送信装置、送信方法、受信装置および受信方法に関し、詳しくは、優先度情報を持つ複数の符号化データを取り扱う送信装置等に関する。
【背景技術】
【０００２】
従来、オーディオ/ビジュアルコンテンツのストリームを、デジタルインタフェースを介して送信側から受信側に送信する際には、受信側が復号化能力を持つ場合は符号化ストリームを、受信側が復号化能力を持たない場合は送信側で復号化して得られた復号化済ストリームを送信していた。【０００３】
また、送信側と受信側の両方が復号化能力を持つ場合は、送信側がどちらで復号化を行うかを判断する、あるいは視聴者が自身の操作で復号化を行う側を指定するという形で行われている。送信側は受信側の復号化能力の品質を知るすべがなく、また視聴者も両機器のうちどちらの復号化能力が優れているかを判断することは非常に困難であった。【０００４】
例えば、特許文献１には、オブジェクトベースオーディオのミキシング技術が記載されている。オブジェクトベースオーディオは、個々のオブジェクト音源をミキシングせずに供給し、再生機器側でレンダリングすることで立体音響を実現するものである。【０００５】
オブジェクトベースオーディオの符号化ストリームには、複数のオブジェクト音源の符号化データが含まれる。各オブジェクト音源の符号化データは、音データの他に、座標軸上の位置情報などのメタデータから構成されている。各オブジェクト音源の符号化データに、復号化の際の優先度を示す優先度情報を持たせることも考えられている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特表２０１４−５２３１９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
本技術は、受信側において良好なコンテンツ再生を可能とすることにある。
【課題を解決するための手段】
【０００８】
本技術の概念は、
優先度情報を持つ複数の符号化データを含む符号化ストリームを取得するストリーム取得部と、
上記複数の符号化データのうち所定の優先度までの符号化データに復号化処理を施して復号化済データを含む復号化済ストリームを生成すると共に、上記複数の符号化データのうち上記所定の優先度を越える符号化データを含む符号化ストリームを生成するデコード部と、
受信側に、デジタルインタフェースを介して、上記デコード部で生成された復号化済ストリームおよび符号化ストリームを分割復号化ストリームとして同時に送信するストリーム送信部を備える
送信装置にある。【０００９】
本技術において、ストリーム取得部により、優先度情報を持つ複数の符号化データを含む符号化ストリームが取得される。デコード部により、複数の符号化データのうち所定の優先度までの符号化データに復号化処理を施して復号化済データを含む復号化済ストリームが生成されると共に、この複数の符号化データのうち所定の優先度を越える符号化データを含む符号化ストリームが生成される。【００１０】
ストリーム送信部により、受信側に、デジタルインタフェースを介して、デコード部で生成された復号化済ストリームおよび符号化ストリームが分割復号化ストリームとして同時に送信される。例えば、デジタルインタフェースはＨＤＭＩである、ようにされてもよい。【００１１】
例えば、受信側が分割復号化ストリームに対応しているか判断する判断部をさらに備え、送信部は、判断部で対応していると判断されるとき、受信側に分割復号化ストリームを送信する、ようにされてもよい。この場合、受信側が分割復号化ストリームに対応している場合のみ当該分割復号化ストリームの送信が行われることが保証される。この場合、例えば、判断部は、受信側から取得された分割復号化ストリームに対応していることを示す情報により受信側が分割復号化ストリームに対応していると判断する、ようにされてもよい。【００１２】
例えば、受信側に、デジタルインタフェースを介して、分割復号化ストリームの送信であることを示す情報を送信する情報送信部をさらに備える、ようにされてもよい。この場合、受信側では、この情報に基づいて、分割復号化ストリームの送信であることを容易に認識でき、適切な処理を行うことが可能となる。【００１３】
例えば、符号化ストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームであり、デコード部は、複数のオブジェクト音源の符号化データのうち所定の優先度までのオブジェクト音源の符号化データに復号化処理を施して所定チャネル数の音声データを含む復号化済オーディオストリームを生成すると共に、複数のオブジェクト音源の符号化データのうち所定の優先度を越えるオブジェクト音源の符号化データを含む符号化オーディオストリームを生成する、ようにされてもよい。【００１４】
この場合、例えば、受信側から、デジタルインタフェースを介して、スピーカ構成情報を取得する情報取得部をさらに備え、デコード部は、スピーカ構成情報で示されるチャネル数の音声データを含む復号化済オーディオストリームを生成する、ようにされてもよい。この場合、受信側においてスピーカ構成に合わせたチャネル数の音声データを得るためのアップ/ダウンミックスの処理が不要となり、受信側の処理負荷を軽減し得る。【００１５】
このように本技術においては、受信側に復号化済ストリームおよび符号化ストリームを分割復号化ストリームとして同時に送信するものである。そのため、受信側において良好なコンテンツ再生が可能となる。すなわち、復号化回路を持たない受信側では復号化済ストリームを用いて簡易再生が可能となり、一方、高品質な復号化回路を持つ受信側では符号化ストリームをさらに復号化することで高品質再生が可能となる。【００１６】
また、本技術の他の概念は、
送信側から、デジタルインタフェースを介して、復号化済データを含む復号化済ストリームと優先度情報を持つ所定数の符号化データを含む符号化ストリームからなる分割復号化ストリームを受信するストリーム受信部と、
上記符号化ストリームに復号化処理を施して復号化済データを得るデコード部と、
上記デコード部で得られた復号化済データと上記復号化済ストリームに含まれている復号化済データとを合成して出力データを得る合成部を備える
受信装置にある。【００１７】
本技術において、ストリーム受信部により、送信側から、デジタルインタフェースを介して、復号化済データを含む復号化済ストリームと優先度情報を持つ所定数の符号化データを含む符号化ストリームからなる分割復号化ストリームが受信される。例えば、符号化ストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームである、ようにされてもよい。また、例えば、デジタルインタフェースはＨＤＭＩである、ようにされてもよい。【００１８】
デコード部により、符号化ストリームに復号化処理を施して復号化済データが得られる。そして、合成部により、デコード部で得られた復号化済データと受信された復号化済ストリームに含まれている復号化済データとが合成されて出力データが得られる。【００１９】
このように本技術においては、受信された復号化済ストリームに含まれている復号化済データに、受信した符号化ストリームに復号化処理を施して得られた復号化済データを合成して出力データを得るものであるため、高品質再生が可能となる。【００２０】
なお、本技術において、例えば、送信側に、デジタルインタフェースを介して、分割復号化ストリームに対応していることを示す情報を送信する情報送信部をさらに備える、ようにされてもよい。この場合、送信側に分割復号化ストリームに対応していることを通知でき、送信側から分割復号化ストリームを積極的に受信することが可能となる。【００２１】
また、本技術において、例えば、送信側から、デジタルインタフェースを介して、分割復号化ストリームの送信であることを示す情報を受信する情報受信部をさらに備える、ようにされてもよい。この場合、分割復号化ストリームの送信であることを容易に認識でき、適切な処理を行うことが可能となる。
【発明の効果】
【００２２】
本技術によれば、受信側において良好なコンテンツ再生が可能となる。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
【図面の簡単な説明】
【００２３】
【図１】実施の形態としてのＡＶシステムの構成例を示すブロック図である。
【図２】ＡＶシステムを構成するＢＤプレーヤの構成例を示すブロック図である。
【図３】受信側の復号化能力情報の一例の構造を示す図である。
【図４】ＢＤプレーヤ内のオーディオデコーダの構成例を示すブロック図である。
【図５】ＢＤプレーヤにおけるオーディオストリームの送信に係る処理手順の一例を示すフローチャートである。
【図６】ＡＶシステムを構成するオーディオアンプの構成例を示すブロック図である。
【図７】オーディオアンプ内のオーディオデコーダの構成例を示すブロック図である。
【図８】オーディオアンプにおける音声出力に係る処理手順の一例を示すフローチャートである。
【図９】ＡＶシステムを構成するテレビ受信機の構成例を示すブロック図である。
【図１０】ＢＤプレーヤのＨＤＭＩ送信部とオーディオアンプのＨＤＭＩ受信部の構成例を示すブロック図である。
【図１１】ＴＭＤＳチャネルにおいて横×縦が１９２０ピクセル×１０８０ラインの画像データが伝送される場合の各種の伝送データの区間を示す図である。
【発明を実施するための形態】
【００２４】
以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明を以下の順序で行う。
１．実施の形態
２．変形例
【００２５】
＜１．実施の形態＞
［ＡＶシステムの構成例］
図１は、実施の形態としてのＡＶ（Audio Visual）システム１０の構成例を示している。このＡＶシステム１０は、ソース機器としてのＢＤ(Blu-Ray Disc)プレーヤ１００と、リピータ機器としてのオーディオアンプ２００と、シンク機器としてのテレビ受信機３００を有している。オーディオアンプ２００には、マルチチャネル用のスピーカシステム４００が接続されている。
【００２６】
また、ＢＤプレーヤ１００およびオーディオアンプ２００はＨＤＭＩケーブル５１０を介して接続されている。ＢＤプレーヤ１００には、ＨＤＭＩ送信部（HDNI TX）１０２が接続されたＨＤＭＩ端子１０１が設けられている。オーディオアンプ２００には、ＨＤＭＩ受信部（HDMI RX）２０２ａが接続されたＨＤＭＩ端子２０１ａが設けられている。ＨＤＭＩケーブル５１０の一端はＢＤプレーヤ１００のＨＤＭＩ端子１０１に接続され、その他端はオーディオアンプ２００のＨＤＭＩ端子２０１ａに接続されている。
【００２７】
オーディオアンプ２００およびテレビ受信機３００はＨＤＭＩケーブル５２０を介して接続されている。オーディオアンプ２００には、ＨＤＭＩ送信部（HDMI TX）２０２ｂが接続されたＨＤＭＩ端子２０１ｂが設けられている。テレビ受信機１００には、ＨＤＭＩ受信部（HDMI RX）３０２が接続されたＨＤＭＩ端子３０１が設けられている。ＨＤＭＩケーブル５２０の一端はオーディオアンプ２００のＨＤＭＩ端子２０１ｂに接続され、その他端はテレビ受信機３００のＨＤＭＩ端子３０１に接続されている。なお、「ＨＤＭＩ」は登録商標である。
【００２８】
［ＢＤプレーヤの構成例］
図２は、ＢＤプレーヤ１００の構成例を示している。このＢＤプレーヤ１００は、ＨＤＭＩ端子１０１と、ＨＤＭＩ送信部１０２を有している。また、このＢＤプレーヤ１００は、内部バス１０３と、ＣＰＵ（Central Processing Unit）１０４と、フラッシュＲＯＭ（Read Only Memory）１０５と、ＳＤＲＡＭ（Synchronous Random Access Memory）１０６と、表示制御部１０７と、リモコン受信部１０８と、リモコン送信機１０９を有している。
【００２９】
また、ＢＤプレーヤ１００は、記憶（記録）媒体制御インタフェース１１１と、ＢＤ(Blu-Ray Disc)ドライブ１１２と、ＨＤＤ（Hard disk drive）１１３と、ＳＳＤ（Solid State Drive）１１４と、イーサネットインタフェース（Ethernet I/F）１１５と、ネットワーク端子１１６を有している。なお、「イーサネット」および「Ｅｔｈｅｒｎｅｔ」は登録商標である。
【００３０】
また、ＢＤプレーヤ１００は、デマルチプレクサ１２１と、ビデオデコーダ１２２と、グラフィック生成回路１２３と、映像出力端子１２４と、パネル駆動回路１２５と、表示パネル１２６と、オーディオデコーダ１２７と、音声出力端子１２９を有している。また、ＢＤプレーヤ１００は、電源部１３１を有している。電源部１３１は、ＢＤプレーヤ１００の各部に電源を供給する。なお、電源部１３１は、ＡＣ電源であっても、電池（蓄電池、乾電池）であってもよい。
【００３１】
ＣＰＵ１０４、フラッシュＲＯＭ１０５、ＳＤＲＡＭ１０６、表示制御部１０７、記憶媒体制御インタフェース１１１、イーサネットインタフェース１１５およびデマルチプレクサ１２１は、内部バス１０３に接続されている。ＣＰＵ１０４は、ＢＤプレーヤ１００の各部の動作を制御する。
【００３２】
フラッシュＲＯＭ１０５は、制御ソフトウェアの格納およびデータの保管を行う。ＳＤＲＡＭ１０６は、ＣＰＵ１０４のワークエリアを構成する。ＣＰＵ１０４は、フラッシュＲＯＭ１０５から読み出したソフトウェアやデータをＳＤＲＡＭ１０６上に展開してソフトウェアを起動させ、ＢＤプレーヤ１００の各部を制御する。
【００３３】
リモコン受信部１０８は、リモコン送信機１０９から送信されたリモーコントロール信号（リモコンコード）を受信し、ＣＰＵ１０４に供給する。ＣＰＵ１０４は、リモコンコードに従ってＢＤプレーヤ１００の各部を制御する。なお、この実施の形態では、ユーザ指示入力部としてリモートコントロール部を示しているが、ユーザ指示入力部は、その他の構成、例えば、スイッチ、ホイール、近接/タッチにより指示入力を行うタッチパネル部、マウス、キーボード、カメラで指示入力を検出するジェスチャ入力部、音声により指示入力を行う音声入力部などであってもよい。
【００３４】
ＢＤドライブ１１２は、ディスク状記録メディアとしてのＢＤディスクに対して、コンテンツデータを記録し、あるいは、このＢＤディスクからコンテンツデータを再生する。ＨＤＤ１１３は、コンテンツデータを記録し、あるいは、そのコンテンツデータを再生する。ＳＳＤ１１４は、メモリカード等の半導体メモリに対して、コンテンツデータを記録し、あるいは、この半導体メモリからコンテンツデータを再生する。
【００３５】
ＢＤドライブ１１２、ＨＤＤ１１３、ＳＳＤ１１４は、記憶媒体制御インタフェース１１１を介して内部バス１０３に接続されている。例えば、ＢＤドライブ１１２やＨＤＤ１１３のためのインタフェースとしてはＳＡＴＡインタフェースが使用される。また、例えば、ＳＳＤ１１４のためのインタフェースとしてＳＡＴＡインタフェースあるいはＰＣＩｅインタフェースが使用される。
【００３６】
ネットワーク端子１１６は、ネットワークに接続する端子であり、イーサネットインタフェース１１５に接続される。イーサネットインタフェース１１５は、ネットワーク端子１１６を介して、ネットワーク接続をする。
【００３７】
デマルチプレクサ１２１は、ＢＤドライブ１１２、ＨＤＤ１１３あるいはＳＳＤ１１４で再生されたコンテンツデータである多重化ストリームから符号化ビデオストリームおよび符号化オーディオストリームを抽出する。ビデオデコーダ１２２は、符号化ビデオストリームに対して復号化処理を行って、非圧縮の画像データを得る。
【００３８】
グラフィック生成回路１２３は、ビデオデコーダ１２２で得られた画像データに対して、必要に応じてグラフィックスデータの重畳処理等を行う。映像出力端子１２４は、グラフィック生成回路１２３から出力される画像データを出力する。
【００３９】
パネル駆動回路１２５は、グラフィック生成回路１２３から出力される画像データに基づいて、表示パネル１２６を駆動する。表示制御部１０７は、グラフィクス生成回路１２３やパネル駆動回路１２５を制御して、表示パネル１２６における表示を制御する。表示パネル１２６は、例えば、ＬＣＤ(Liquid Crystal Display)、ＰＤＰ(Plasma Display Panel)、有機ＥＬパネル（Organic Electro-Luminescence Panel）等で構成されている。
【００４０】
なお、この実施の形態では、ＣＰＵ１０４の他に、表示制御部１０７を有する例を示しているが、表示パネル１２６における表示をＣＰＵ１０４が直接制御するようにしてもよい。また、ＣＰＵ１０４と表示制御部１０７は、１つのチップになっていても、複数コアであってもよい。
【００４１】
オーディオデコーダ１２７は、デマルチプレクサ１２１で抽出された符号化オーディオストリームに対して復号化処理を行って、非圧縮の音声データを得る。この実施の形態において、符号化オーディオストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームである。各オブジェクト音源の符号化データは、音データの他に、座標軸上の位置情報などのメタデータから構成されている。
【００４２】
オーディオデコーダ１２７は、符号化オーディオストリームに対して復号化処理を施し、所定チャネル数の非圧縮の音声データを得ると共に、この所定チャネル数の非圧縮の音声データを含む復号化済オーディオストリームを生成して出力する。この場合、オーディオデコーダ１２７は、自身が復号化可能な所定の優先度までのオブジェクト音源の符号化データに復号化処理を施し、所定の優先度を越えるオブジェクト音源の符号化データに関しては、その符号化データを含む符号化オーディオストリームを生成して出力する。
【００４３】
オーディオデコーダ１２７は、復号化済オーディオストリームおよび符号化オーディオストリームを分割復号化オーディオストリームとして出力する。なお、所定の優先度を越えるオブジェクト音源の符号化データが存在しない場合、オーディオデコーダ１２７からの符号化オーディオストリームの出力はない。
【００４４】
この実施の形態において、オーディオデコーダ１２７は、ＣＰＵ１０４の制御のもと、復号化処理を行うとき、受信側のスピーカ構成情報で示されるチャネル数の非圧縮の音声データを得る。ＣＰＵ１０４は、スピーカ構成情報を、ＨＤＭＩのデジタルインタフェースで受信側から受信する。例えば、受信側においてスピーカ構成情報はＥＤＩＤ（Extended Display Identification Data）の一つとして記録されている。ＣＰＵ１０４は、ＤＤＣ(Display Data Channel)チャネルでＥＤＩＤを読み出すことで、受信側のスピーカ構成情報報を取得する。また、例えば、ＣＰＵ１０４は、受信側とＣＥＣラインを通じて通信を行って、受信側のスピーカ構成情報を取得する。
【００４５】
また、この実施の形態において、ＣＰＵ１０４は、ＨＤＭＩのデジタルインタフェースで受信側から、受信側の復号化能力情報、すなわち、受信側、この実施の形態ではオーディオアンプ２００が何番目の優先度まで復号化可能かを示す情報を取得する。オーディオデコーダ１２７は、ＣＰＵ１０４の制御のもと、受信側の復号化能力が自身の復号化能力を超えていない場合、自身が復号化可能な所定の優先度を越えるオブジェクト音源の符号化データを含む符号化オーディオストリームの出力を行わないようにしてもよい。
【００４６】
図３は、受信側の復号化能力情報の一例の構造を示している。この復号化能力情報は、図３（ａ）に示すように、全体として８ビット情報であるが、図３（ｂ）に示すように、第３ビットから第０ビットまでの下位４ビットが実質的な情報を構成している。例えば、“００００”は、オブジェクトベースオーディオの符号化オーディオストリームに対する復号化に非対応であることを示す。
【００４７】
また、例えば、“０００１”は、優先度１のみ復号化可能であること、つまり優先度１を持つオブジェクト音源の符号化データの復号化のみが可能であることを示す。また、例えば、“００１０”は、優先度２まで復号化可能であること、つまり優先度１，２を持つオブジェクト音源の符号化データの復号化が可能であることを示す。以下、同様である。
【００４８】
例えば、受信側において復号化能力情報はＥＤＩＤの一つとして記録されている。ＣＰＵ１０４は、ＤＤＣチャネルでＥＤＩＤを読み出すことで、受信側の復号化能力情報報を取得する。また、例えば、ＣＰＵ１０４は、受信側とＣＥＣラインを通じて通信を行って、受信側の復号化能力情報報を取得する。
【００４９】
また、この実施の形態において、ＣＰＵ１０４は、ＨＤＭＩのデジタルインタフェースで受信側から、受信側が分割復号化オーディオストリームに対応しているか否かを示す情報（分割復号化ストリーム対応情報）を取得する。オーディオデコーダ１２７は、ＣＰＵ１０４の制御のもと、受信側が分割復号化オーディオストリームに対応していない場合、自身が復号化可能な所定の優先度を越えるオブジェクト音源の符号化データを含む符号化オーディオストリームの出力を行わないようにしてもよい。
【００５０】
例えば、受信側において分割復号化ストリーム対応情報はＥＤＩＤの一つとして記録されている。ＣＰＵ１０４は、ＤＤＣチャネルでＥＤＩＤを読み出すことで、受信側の分割復号化ストリーム対応情報を取得する。また、例えば、ＣＰＵ１０４は、受信側とＣＥＣラインを通じて通信を行って、受信側の分割復号化ストリーム対応情報を取得する。
【００５１】
図４は、オーディオデコーダ１２７の構成例を示している。オーディオデコーダ１２７は、優先度分析部１２７ａおよび復号化部１２７ｂを有している。優先度分析部１２７ａは、入力される符号化オーディオストリームに含まれる複数のオブジェクト音源の符号化データの優先度を解析する。
【００５２】
そして、優先度分析部１２７ａは、復号化可能な所定の優先度までのオブジェクト音源の符号化データを復号化部１２７ｂに供給する。復号化部１２７ｂは、この所定の優先度までのオブジェクト音源の符号化データに復号化処理を施し、所定チャネル数の非圧縮の音声データを得ると共に、この所定チャネル数の非圧縮の音声データを含む復号化済オーディオストリームを生成して出力する。また、優先度分析部１２７ａは、所定の優先度を越えるオブジェクト音源の符号化データに関しては、その符号化データを含む符号化オーディオストリームを生成して出力する。
【００５３】
図２に戻って、音声出力端子１２９は、オーディオデコーダ１２７で得られた所定チャネル数の非圧縮の音声データを出力する。なお、音声出力端子１２９に出力する非圧縮の音声データのチャネル数は、復号化済オーディオストリームに含める非圧縮の音声データのチャネル数と異なっていてもよい。例えば、復号化済オーディオストリームに含める非圧縮の音声データのチャネル数が５．１チャネル用の「６」であるのに対して、音声出力端子１２９に出力する非圧縮の音声データのチャネル数がステレオ用の「２」などである。
【００５４】
ＨＤＭＩ送信部１０２は、ＨＤＭＩに準拠した通信により、ビデオデコーダ１２２で得られた非圧縮の画像データと、オーディオデコーダ１２７から出力された分割復号化オーディオストリーム（復号化済オーディオストリームと符号化オーディオストリーム）または復号化済オーディオストリームを、ＨＤＭＩ端子１０１から送出する。ＨＤＭＩ送信部１０２は、ＨＤＭＩのＴＭＤＳチャネルで送信するため、画像データおよびオーディオストリームをパッキングして、ＨＤＭＩ端子１０１に出力する。このＨＤＭＩ送信部１０２の詳細は後述する。
【００５５】
ＨＤＭＩ送信部１０２は、送信するオーディオストリームの種類を示す情報を、ＴＭＤＳ伝送データ（後述する図１１参照）のブランキング期間に挿入されるインフォフレームパケット、例えばオーディオインフォフレームパケットに含める。この情報により、受信側では、受信したオーディオストリームの種類、つまり分割復号化オーディオストリームであるか復号化済オーディオストリームであるかを容易に把握でき、適切な処理を行うことが可能となる。
【００５６】
図５のフローチャートは、ＢＤプレーヤ１００におけるオーディオストリームの送信に係る処理手順の一例を示している。ＢＤプレーヤ１００は、ステップＳＴ１において、処理を開始する。そして、ＢＤプレーヤ１００は、ステップＳＴ２において、受信側の分割復号化ストリーム対応情報、復号化能力情報、スピーカ構成情報を取得する。
【００５７】
次に、ＢＤプレーヤ１００は、ステップＳＴ３において、デマルチプレクサ１２１で抽出された符号化オーディオストリームに含まれる複数のオブジェクト音源の符号化データのうち、自身が復号化可能な所定の優先度までのオブジェクト音源の符号化データに復号化処理を施し、受信側のスピーカ構成情報で示されるチャネル数の非圧縮の音声データを得る。
【００５８】
次に、ＢＤプレーヤ１００は、ステップＳＴ４において、送信オーディオストリームを生成する。すなわち、復号化されて得られた所定チャネル数の非圧縮の音声データを含む復号化済オーディオストリームを生成する。また、所定の優先度を越えるオブジェクト音源の符号化データが存在し、かつ受信側が分割復号化オーディオストリームに対応し、かつ受信側がこの所定の優先度を越えるオブジェクト音源の符号化データの復号化能力があるとき、この所定の優先度を越えるオブジェクト音源の符号化データを含む符号化オーディオストリームをさらに生成する。
【００５９】
次に、ＢＤプレーヤ１００は、ステップＳＴ５において、送信オーディオストリームをＨＤＭＩのデジタルインタフェースで、受信側に送信する。この場合、送信オーディオストリームは、分割復号化オーディオストリーム（復号化済オーディオストリームと符号化オーディオストリーム）または復号化済オーディオストリームである。そして、ＢＤプレーヤ１００は、このステップＳＴ５の処理の後、ステップＳＴ６において、処理を終了する。
【００６０】
図２に示すＢＤプレーヤ１００の動作を簡単に説明する。記録時には、図示されていないデジタルチューナを介して、あるいはネットワーク端子１１６からイーサネットインタフェース１１５を介して、記録すべきコンテンツデータが取得される。このコンテンツデータは、記憶媒体制御インタフェース１１１に入力され、ＢＤドライブ１１２によりＢＤディスクに、ＨＤＤ１１３に、あるいはＳＳＤ１１４により半導体メモリに、記録される。
【００６１】
再生時には、ＢＤドライブ１１２、ＨＤＤ１１３、あるいはＳＳＤ１１４で再生されたコンテンツデータである多重化ストリームは、記憶媒体制御インタフェース１１１を介してデマルチプレクサ１２１に供給される。デマルチプレクサ１２１では、多重化ストリームから符号化ビデオストリームおよび符号化オーディオストリームが抽出される。
【００６２】
デマルチプレクサ１２１で抽出された符号化ビデオストリームは、ビデオデコーダ１２２に供給される。ビデオデコーダ１２２では、符号化ビデオストリームに対して復号化処理が施されて、非圧縮の画像データが得られる。この画像データは、グラフィック生成回路１２３で必要に応じてグラフィックスデータの重畳処理等が行われた後に、映像出力端子１２４に出力される。また、ユーザ操作に応じて、グラフィック生成回路１２３からパネル駆動回路１２５に画像データが供給され、表示パネル１２６に再生画像が表示される。
【００６３】
また、デマルチプレクサ１２１で抽出された符号化オーディオストリームは、オーディオデコーダ１２７に供給される。この符号化オーディオストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームである。
【００６４】
オーディオデコーダ１２７では、デマルチプレクサ１２１で抽出された符号化オーディオストリームに含まれる複数のオブジェクト音源の符号化データのうち、自身が復号化可能な所定の優先度までのオブジェクト音源の符号化データに復号化処理が施されて、受信側のスピーカ構成情報で示されるチャネル数の非圧縮の音声データが得られる。
【００６５】
そして、オーディオデコーダ１２７では、復号化されて得られた所定チャネル数の非圧縮の音声データを含む復号化済オーディオストリームが生成される。また、オーディオデコーダ１２７では、所定の優先度を越えるオブジェクト音源の符号化データが存在し、かつ受信側が分割復号化オーディオストリームに対応し、かつ受信側がこの所定の優先度を越えるオブジェクト音源の符号化データの復号化能力があるとき、この所定の優先度を越えるオブジェクト音源の符号化データを含む符号化オーディオストリームがさらに生成される。オーディオデコーダ１２７で生成された所定チャネル数の非圧縮の音声データは、音声出力端子１２９に出力される。
【００６６】
また、オーディオデコーダ１２７で生成されたオーディオストリーム、すなわち分割復号化オーディオストリーム（復号化済オーディオストリームと符号化オーディオストリーム）または復号化済オーディオストリームは、送信オーディオストリームとしてＨＤＭＩ送信部１０２に供給される。このＨＤＭＩ送信部１０２には、ビデオデコーダ１２２で得られた非圧縮の画像データもＨＤＭＩ送信部１０２に供給される。ＨＤＭＩ送信部１０２では、これらの画像データおよび送信オーディオストリームがパッキングされ、ＨＤＭＩ端子１０１に出力される。
【００６７】
［オーディオアンプの構成例］
図６は、オーディオアンプ２００の構成例を示している。オーディオアンプ２００は、ＨＤＭＩ端子２０１ａ，２０１ｂと、ＨＤＭＩ受信部２０２ａと、ＨＤＭＩ送信部２０２ｂを有している。また、オーディオアンプ２００は、オーディオデコーダ２２１と、音声処理回路２２３と、音声増幅回路２２４と、音声出力端子２２５を有している。
【００６８】
また、オーディオアンプ２００は、内部バス２０３と、ＣＰＵ２０４と、フラッシュＲＯＭ２０５と、ＳＤＲＡＭ２０６と、表示制御部２０７と、パネル駆動回路２０８と、表示パネル２０９と、リモコン受信部２１０と、リモコン送信機２１１と、電源部２１２を有している。ＣＰＵ２０４、フラッシュＲＯＭ２０５、ＳＤＲＡＭ２０６および表示制御部２０７は、内部バス２０３に接続されている。
【００６９】
ＣＰＵ２０４は、オーディオアンプ２００の各部の動作を制御する。フラッシュＲＯＭ２０５は、制御ソフトウェアの格納およびデータの保管を行う。ＳＤＲＡＭ２０６は、ＣＰＵ２０４のワークエリアを構成する。ＣＰＵ２０４は、フラッシュＲＯＭ２０５から読み出したソフトウェアやデータをＳＤＲＡＭ２０６上に展開してソフトウェアを起動させ、オーディオアンプ２００の各部を制御する。
【００７０】
リモコン受信部２１０は、リモコン送信機２１１から送信されたリモーコントロール信号（リモコンコード）を受信し、ＣＰＵ２０４に供給する。ＣＰＵ２０４は、このリモコンコードに基づいて、オーディオアンプ２００の各部を制御する。なお、この実施の形態では、ユーザ指示入力部としてリモートコントロール部を示しているが、ユーザ指示入力部は、その他の構成、例えば、スイッチ、ホイール、近接/タッチにより指示入力を行うタッチパネル部、マウス、キーボード、カメラで指示入力を検出するジェスチャ入力部、音声により指示入力を行う音声入力部などであってもよい。
【００７１】
表示制御部２０７は、例えば、ユーザインタフェース表示あるいはオーディオアンプ２００のステータス表示等を行うために、パネル駆動回路２０８を制御し、表示パネル２０９における表示を制御する。表示パネル２０９は、例えば、ＬＣＤ(Liquid Crystal Display)、有機ＥＬパネル（Organic Electro-Luminescence Panel）等で構成されている。
【００７２】
なお、この実施の形態では、ＣＰＵ２０４の他に表示制御部２０７を有する例を示しているが、表示パネル２０９における表示をＣＰＵ２０４が直接制御するようにしてもよい。また、ＣＰＵ２０４と表示制御部２０７は、１つのチップになっていても、複数コアであってもよい。電源部２１２は、オーディオアンプ２００の各部に電源を供給する。この電源部２１２は、ＡＣ電源であっても、電池（蓄電池、乾電池）であってもよい。
【００７３】
ＨＤＭＩ受信部２０２ａは、ＨＤＭＩに準拠した通信により、ＨＤＭＩケーブルを介してＨＤＭＩ端子２０１ａに供給される非圧縮の画像データおよびオーディオストリームを受信する。オーディオストリームは、分割復号化オーディオストリーム（復号化済オーディオストリームと符号化オーディオストリーム）または復号化済オーディオストリームである。
【００７４】
ここで、復号化済オーディオストリームには、送信側で復号化可能な所定の優先度までのオブジェクト音源の符号化データに対して復号化が施されて得られた所定チャネル数の非圧縮の音声データが含まれている。また、符号化オーディオストリームには、その所定の優先度を越えるオブジェクト音源の符号化データが含まれている。
【００７５】
ＨＤＭＩ受信部２０２ａは、ＴＭＤＳ伝送データのブランキング期間に挿入されている各種インフォフレームパケットを抽出し、ＣＰＵ２０４に送る。このインフォフレームパケットには、受信オーディオストリームが分割復号化オーディオストリームであるか復号化済オーディオストリームであるかを示す情報も含まれている。ＣＰＵ２０４は、この情報により、受信オーディオストリームが分割復号化オーディオストリームであるか復号化済オーディオストリームであるかを認識する。
【００７６】
なお、ＨＤＭＩ受信部２０２ａは、自身の性能（Configuration・Capability）に関する性能情報であるＥＤＩＤを記憶しているＥＤＩＤ ＲＯＭ（Read Only Memory）を有している。このＥＤＩＤには、例えば、分割復号化ストリーム対応情報、復号化能力情報、スピーカ構成情報も含まれている。送信側がこのＥＤＩＤを読み出すことで、オーディオアンプ２００における分割復号化ストリーム対応情報、復号化能力情報、スピーカ構成情報が送信側に送られる。
【００７７】
オーディオデコーダ２２１は、ＣＰＵ２０４の制御のもと、ＨＤＭＩ受信部２０２ａで受信されたオーディオストリームが分割復号化オーディオストリーム（復号化済オーディオストリームと符号化オーディオストリーム）であるときは、符号化オーディオストリームに含まれる優先度を持つオブジェクト音源の符号化データのうち、自身の復号化能力の範囲内の優先度を持つオブジェクト音源の符号化データに対して、自身の復号化能力の範囲内の復号化処理を施して、所定チャネル数の非圧縮の音声データを得る。
【００７８】
そして、オーディオデコーダ２２１は、このように復号化処理で得られた所定チャネル数の非圧縮の音声データと、復号化済オーディオストリームに含まれている所定チャネル数の非圧縮の音声データとをミキシング（合成）し、ミキシングされた所定チャネル数の非圧縮の音声データを含む復号化済オーディオストリームを生成して出力する。
【００７９】
また、オーディオデコーダ２２１は、ＣＰＵ２０４の制御のもと、ＨＤＭＩ受信部２０２ａで受信されたオーディオストリームが復号化済オーディオストリームであるときは、この復号化済オーディオストリームをそのまま出力する。
【００８０】
図７は、オーディオデコーダ２２１の構成例を示している。オーディオデコーダ２２１は、復号化部２２１ａおよびミキシング部２２１ｂを有している。復号化部２２１ａは、符号化オーディオストリームに含まれる優先度を持つオブジェクト音源の符号化データに対して復号化処理を施して、所定チャネル数の非圧縮の音声データを得る。
【００８１】
ミキシング部２２１ｂは、復号化部２２１ａで得られた所定チャネル数の非圧縮の音声でデータと、復号化済オーディオストリームに含まれている所定チャネル数の非圧縮の音声データとをミキシング（合成）して、ミキシングされた所定チャネル数の非圧縮の音声データを含む復号化済オーディオストリームを生成して出力する。なお、ミキシング部２２１ｂは、オーディオデコーダ２２１の入力が復号化済オーディオストリームだけである場合には、この復号化済オーディオストリームをそのまま出力する。
【００８２】
図６に戻って、音声処理回路２２３は、オーディオデコーダ２２１から出力された復号化済オーディオストリームから所定チャネル数の非圧縮の音声データを取り出し、Ｄ／Ａ変換等の必要な処理を施す。音声増幅回路２２４は、音声処理回路２２３で得られた所定チャネル数のオーディオ信号を増幅して音声出力端子２２５に出力する。なお、音声出力端子２２５にはスピーカシステム４００が接続される。
【００８３】
ＨＤＭＩ送信部２０２ｂは、ＨＤＭＩに準拠した通信により、ＨＤＭＩ受信部２０２ａで受信された非圧縮の画像データと、オーディオデコーダ２２１から出力された復号化済オーディオストリームを、ＨＤＭＩ端子２０１ｂから送出する。ＨＤＭＩ送信部２０２ｂは、ＨＤＭＩのＴＭＤＳチャネルで送信するため、画像データおよびオーディオストリームをパッキングして、ＨＤＭＩ端子２０１ｂに出力する。このＨＤＭＩ送信部２０２ｂの詳細は後述する。
【００８４】
図８のフローチャートは、オーディオアンプ２００における音声出力に係る処理手順の一例を示している。オーディオアンプ２００は、ステップＳＴ１１において、処理を開始する。そして、オーディオアンプ２００は、ステップＳＴ１２において、分割復号化ストリーム対応情報、復号化能力情報、スピーカ構成情報を送信側に送る。例えば、この情報の送信は、送信側がＤＤＣチャネルでＥＤＩＤの読み出しを行うことで行われる。また、例えば、この情報の送信は、送信側とのＣＥＣラインを介しての通信により行われる。
【００８５】
次に、オーディオアンプ２００は、ステップＳＴ１３において、受信オーディオストリームの種類、つまり分割復号化オーディオストリーム（復号化済オーディオストリームと符号化オーディオストリーム）であるか復号化済オーディオストリームであるかを認識する。この認識は、ＴＭＤＳ伝送データのブランキング期間に挿入されている所定のインフォフレームパケットに含まれている、受信オーディオストリームが分割復号化オーディオストリームであるか復号化済オーディオストリームであるかを示す情報に基づいて行われる。
【００８６】
次に、オーディオアンプ２００は、ステップＳＴ１４において、受信オーディオストリームが分割復号化オーディオストリームであるとき、符号化オーディオストリームに対して復号化処理を施し、所定チャネル数の非圧縮の音声データを得る。そして、オーディオアンプ２００は、ステップＳＴ１５において、復号化処理で得られた所定チャネル数の非圧縮の音声データと、復号化済オーディオストリームに含まれている所定チャネル数の非圧縮の音声データとをミキシング（合成）して、所定チャネル数の非圧縮の出力音声データを得る。
【００８７】
次に、オーディオアンプ２００は、ステップＳＴ１６において、所定チャネル数の非圧縮の音声データをスピーカシステム４００に出力する。この場合、受信オーディオストリームが分割復号化オーディオストリームであるときは、ステップＳＴ１５でミキシングされた所定チャネル数の非圧縮の音声データが出力される。一方、受信オーディオストリームが復号化済オーディオストリームであるときは、その復号化済オーディオストリームに含まれている所定チャネル数の非圧縮の音声データが出力される。
【００８８】
オーディオアンプ２００は、ステップＳＴ１６の処理の後、ステップＳＴ１７において、処理を終了する。
【００８９】
図６に示すオーディオアンプ２００の動作を簡単に説明する。ＨＤＭＩ受信部２０２ａでは、ＨＤＭＩ端子２０１ａにＢＤプレーヤ１００からＨＤＭＩケーブルを介して送信されてくる、非圧縮の画像データとオーディオストリームが受信される。オーディオストリームは、分割復号化オーディオストリーム（復号化済オーディオストリームと符号化オーディオストリーム）または復号化済オーディオストリームである。
【００９０】
ＨＤＭＩ受信部２０２ａで受信されたオーディオストリームは、オーディオデコーダ２２１に供給される。オーディオデコーダ２２１では、受信オーディオストリームが分割復号化オーディオストリームであるときは、符号化オーディオストリームに含まれる優先度を持つオブジェクト音源の符号化データのうち、自身の復号化能力の範囲内の優先度を持つオブジェクト音源の符号化データに対して、自身の復号化能力の範囲内の復号化処理が施される。
【００９１】
そして、オーディオデコーダ２２１では、復号化処理で得られた所定チャネル数の非圧縮の音声データと、復号化済オーディオストリームに含まれている所定チャネル数の非圧縮の音声データとがミキシング（合成）されて、ミキシング後の所定チャネル数の非圧縮の音声データを含む復号化済オーディオストリームが生成される。
【００９２】
また、オーディオデコーダ２２１では、受信オーディオストリームが復号化済オーディオストリームであるときは、実質的な復号化処理が施されることはなく、この復号化済オーディオストリームをそのまま出力することが行われる。
【００９３】
オーディオデコーダ２２１から出力された復号化済オーディオストリームは、音声処理回路２２３に供給される。音声処理回路２２３では、復号化済オーディオストリームから所定チャネル数の非圧縮の音声データが取り出され、Ｄ／Ａ変換等の必要な処理が施され、所定チャネル数の音声信号が得られる。そして、ミューティングがオフ状態にあるとき、音声処理回路２２３から出力される各チャネルの音声信号が音声増幅回路２２４で増幅されて音声出力端子２２５に出力される。そのため、音声出力端子２２５に接続されたスピーカシステム４００から所定チャネル数の音声出力が得られる。
【００９４】
また、ＨＤＭＩ受信部２０２ａで受信された非圧縮の画像データと、オーディオデコーダ２２１から出力された復号化済オーディオストリームは、ＨＤＭＩ送信部２０２ｂに供給される。なお、ＨＤＭＩ受信部２０２ａで受信された非圧縮の画像データそのものではなく、この画像データにグラフィックスデータの重畳等の処理が施された後の画像データがＨＤＭＩ送信部２０２ｂに供給されてもよい。ＨＤＭＩ送信部２０２ｂでは、これらの画像データおよびオーディオストリームがパッキングされ、ＨＤＭＩ端子２０１ｂに出力される。
【００９５】
［テレビ受信機の構成例］
図９は、テレビ受信機３００の構成例を示している。テレビ受信機３００は、ＨＤＭＩ端子３０１と、ＨＤＭＩ受信部３０２を有している。また、テレビ受信機３００は、内部バス３０３と、ＣＰＵ３０４と、フラッシュＲＯＭ３０５と、ＳＤＲＡＭ（Synchronous RAM）３０６と、表示制御部３０７と、リモコン受信部３０８と、リモコン送信機３０９と、電源部３１０と、イーサネットインタフェース（Ethernet I/F）３１１と、ネットワーク端子３１２を有している。
【００９６】
また、テレビ受信機３００は、アンテナ端子３２１と、デジタルチューナ３２２と、デマルチプレクサ３２３と、ビデオデコーダ３２４と、映像処理回路３２５と、グラフィック生成回路３２６と、パネル駆動回路３２７と、表示パネル３２８を有している。また、テレビ受信機３００は、オーディオデコーダ３２９と、音声処理回路３３０と、音声増幅回路３３１と、スピーカ３３２を有している。ＣＰＵ３０４、フラッシュＲＯＭ３０５、ＳＤＲＡＭ３０６、表示制御部３０７、イーサネットインタフェース３１１およびデマルチプレクサ３２３は、内部バス３０３に接続されている。
【００９７】
ＣＰＵ３０４は、テレビ受信機３００の各部の動作を制御する。フラッシュＲＯＭ３０５は、制御ソフトウェアの格納およびデータの保管を行う。ＳＤＲＡＭ３０６は、ＣＰＵ３０４のワークエリアを構成する。ＣＰＵ３０４は、フラッシュＲＯＭ３０５から読み出したソフトウェアやデータをＳＤＲＡＭ３０６上に展開してソフトウェアを起動させ、テレビ受信機３００の各部を制御する。
【００９８】
リモコン受信部３０８は、リモコン送信機３０９から送信されたリモートコントロール信号（リモコンコード）を受信し、ＣＰＵ３０４に供給する。ＣＰＵ３０４は、このリモコンコードに基づいて、テレビ受信機３００の各部を制御する。なお、この実施の形態では、ユーザ指示入力部としてリモートコントロール部を示しているが、ユーザ指示入力部は、その他の構成、例えば、スイッチ、ホイール、近接/タッチにより指示入力を行うタッチパネル部、マウス、キーボード、カメラで指示入力を検出するジェスチャ入力部、音声により指示入力を行う音声入力部などであってもよい。
【００９９】
電源部３１０は、テレビ受信機３００の各部に電源を供給する。なお、電源部３１０は、ＡＣ電源であっても、電池（蓄電池、乾電池）であってもよい。ネットワーク端子３１２は、ネットワークに接続する端子であり、イーサネットインタフェース３１１に接続される。イーサネットインタフェース３１１は、ネットワーク端子３１２を介して、ネットワーク接続をする。
【０１００】
ＨＤＭＩ受信部３０２は、ＨＤＭＩに準拠した通信により、ＨＤＭＩケーブルを介してＨＤＭＩ端子３０１に供給される非圧縮の画像データと復号化済オーディオストリームを受信する。この復号化済オーディオストリームには、所定チャネル数の非圧縮の音声データが含まれている。このＨＤＭＩ受信部３０２の詳細は後述する。
【０１０１】
アンテナ端子３２１は、受信アンテナ（図示せず）で受信されたテレビ放送信号を入力する端子である。デジタルチューナ３２２は、アンテナ端子３２１に入力されたテレビ放送信号を処理して、ユーザの選択チャネルに対応したコンテンツデータである多重化ストリームを得る。
【０１０２】
デマルチプレクサ３２３は、デジタルチューナ３２２で得られた多重化ストリームから符号化ビデオストリームおよび符号化オーディオストリームを抽出する。ビデオデコーダ３２４は、符号化ビデオストリームに対して復号化処理を行って、非圧縮の画像データを得る。映像処理回路３２５およびグラフィック生成回路３２６は、ビデオデコーダ３２４で得られた画像データ、あるいはＨＤＭＩ受信部３０２で受信された画像データに対して、必要に応じてスケーリング処理（解像度変換処理）、グラフィックスデータの重畳処理等を行う。
【０１０３】
パネル駆動回路３２７は、グラフィック生成回路３２６から出力される画像データに基づいて、表示パネル３２８を駆動する。表示制御部３０７は、グラフィクス生成回路３２６やパネル駆動回路３２７を制御して、表示パネル３２８における表示を制御する。表示パネル３２８は、例えば、ＬＣＤ(Liquid Crystal Display)、ＰＤＰ(Plasma Display Panel)、有機ＥＬパネル（Organic Electro-Luminescence Panel）等で構成されている。
【０１０４】
なお、この実施の形態では、ＣＰＵ３０４の他に表示制御部３０７を有する例を示しているが、表示パネル３２８における表示をＣＰＵ３０４が直接制御するようにしてもよい。また、ＣＰＵ３０４と表示制御部３０７は、１つのチップになっていても、複数コアであってもよい。
【０１０５】
オーディオデコーダ３２９は、デマルチプレクサ１２１で抽出された符号化オーディオストリームに対して復号化処理を施し、所定チャネル数の非圧縮の音声データを得る。
【０１０６】
音声処理回路３３０は、オーディオデコーダ３２９で得られた所定チャネル数の非圧縮の音声データに、スピーカ３３２の構成に応じたアップ/ダウンミックスやＤ／Ａ変換等の必要な処理を施し、必要なチャネル数の音声信号を得る。あるいは、音声処理回路３３０は、ＨＤＭＩ受信部３０２で受信された復号化済オーディオストリームから所定チャネル数の非圧縮の音声データを取り出し、スピーカ３３２の構成に応じたアップ/ダウンミックスやＤ／Ａ変換等の必要な処理を施し、必要なチャネル数の音声信号を得る。
【０１０７】
音声増幅回路３３１は、音声処理回路３３０で得られた各チャネルのオーディオ信号を増幅してスピーカ３３２に供給する。なお、スピーカ３３２は、モノラルでもステレオでもよい。また、スピーカ３３２は、イヤホン、ヘッドホンでもよい。また、スピーカ３３２は、２．１チャネルや、５．１チャネルなどのマルチチャネル対応であってもよい。また、スピーカ３３２は、テレビ受信機３００と無線で接続されてもよい。また、スピーカ３３２は、他機器であってもよい。
【０１０８】
図６に示すテレビ受信機３００の動作を簡単に説明する。ＨＤＭＩ受信部３０２では、ＨＤＭＩ端子３０１にオーディオアンプ２００からＨＤＭＩケーブルを介して送信されてくる、非圧縮の画像データと復号化済オーディオストリームが受信される。復号化済オーディオストリームには、所定チャネル数の非圧縮の音声データが含まれている。非圧縮の画像データは、映像処理回路３２５に供給され、復号化済オーディオストリームは音声処理回路３３０に供給される。
【０１０９】
また、アンテナ端子３２１に入力されたテレビ放送信号はデジタルチューナ３２２に供給される。このデジタルチューナ３２２では、テレビ放送信号が処理されて、ユーザの選択チャネルに対応したコンテンツデータである多重化ストリームが得られる。この多重化ストリームは、デマルチプレクサ３２３に供給される。
【０１１０】
デマルチプレクサ３２３では、多重化ストリームから符号化ビデオストリームおよび符号化オーディオストリームが抽出される。符号化ビデオストリームはビデオデコーダ３２４に供給される。ビデオデコーダ３２４では、符号化ビデオストリームに対して復号化処理が施されて、非圧縮の画像データが得られる。この非圧縮の画像データは、映像処理回路３２５に供給される。
【０１１１】
映像処理回路３２５およびグラフィック生成回路３２６では、ビデオデコーダ３２４で得られた画像データ、あるいはＨＤＭＩ受信部３０２で受信された画像データに対して、必要に応じてスケーリング処理（解像度変換処理）、グラフィックスデータの重畳処理等が行われる。処理後の画像データは、パネル駆動回路３２７に供給され、表示パネル３２８には、その画像データに対応した画像が表示される。
【０１１２】
また、デマルチプレクサ３２３で抽出された符号化オーディオストリームは、オーディオデコーダ３２９に供給される。オーディオデコーダ３２９では、符号化オーディオストリームに対して復号化処理が施されて、所定チャネル数の非圧縮の音声データが得られる。この所定チャネル数の非圧縮の音声データは、音声処理回路３３０に供給される。
【０１１３】
音声処理回路３３０では、オーディオデコーダ３２９で得られた所定チャネル数の非圧縮の音声データに、スピーカ３３２の構成に応じたアップ/ダウンミックスやＤ／Ａ変換等の必要な処理が施されて、必要なチャネル数の音声信号が得られる。あるいは、この音声処理回路３３０では、ＨＤＭＩ受信部３０２で受信された復号化済オーディオストリームから所定チャネル数の非圧縮の音声データが取り出された後に、スピーカ３３２の構成に応じたアップ/ダウンミックスやＤ／Ａ変換等の必要な処理が施されて、必要なチャネル数の音声信号が得られる。
【０１１４】
音声処理回路３３０で得られた所定チャネル数の音声信号は、音声増幅回路３３１で増幅された後に、スピーカ３３２に供給される。そのため、スピーカ３３２から、表示パネル３２８の画像表示に対応した、モノラル、ステレオあるいはマルチチャネルの音声が出力される。
【０１１５】
「ＨＤＭＩ送信部/受信部の構成例」
図１０は、図１のＡＶシステム１０における、ＢＤプレーヤ１００のＨＤＭＩ送信部１０２とオーディオアンプ２００のＨＤＭＩ受信部２０２ａの構成例を示している。なお、オーディオアンプ２００のＨＤＭＩ送信部２０２ｂとテレビ受信機３００のＨＤＭＩ受信部３０２の構成例に関しては、同様の構成となるので、説明は省略する。
【０１１６】
ＨＤＭＩ送信部１０２は、一の垂直同期信号から次の垂直同期信号までの区間から、水平帰線区間２２および垂直帰線区間２３を除いた区間である有効画像区間２１（以下、適宜、「アクティブビデオ区間」ともいう）（図１１参照）において、非圧縮の１画面分の画像の画素データに対応する差動信号を、複数のチャネルで、ＨＤＭＩ受信部２０２ａに一方向に送信する。また、ＨＤＭＩ送信部１０２は、水平帰線区間２２または垂直帰線区間２３において、少なくとも画像に付随する音声データや制御データ、その他の補助データ等に対応する差動信号を、複数のチャネルで、ＨＤＭＩ受信部２０２ａに一方向に送信する。
【０１１７】
すなわち、ＨＤＭＩ送信部１０２は、ＨＤＭＩトランスミッタ３１を有する。トランスミッタ３１は、例えば、非圧縮の画像の画素データを対応する差動信号に変換し、複数のチャネルである３つのＴＭＤＳ（Transition Minimized Differential Signaling）チャネル＃０，＃１，＃２で、ＨＤＭＩ受信部２０２ａに、一方向にシリアル伝送する。
【０１１８】
また、トランスミッタ３１は、非圧縮の画像に付随する音声データ、さらには、必要な制御データその他の補助データ等を、対応する差動信号に変換し、３つのＴＭＤＳチャネル＃０，＃１，＃２で、ＨＤＭＩ受信部２０２ａに一方向にシリアル伝送する。
【０１１９】
ＨＤＭＩ受信部２０２ａは、アクティブビデオ区間２１（図１１参照）において、複数のチャネルで、ＨＤＭＩ送信部１０２から一方向に送信されてくる、画素データに対応する差動信号を受信する。また、ＨＤＭＩ受信部２０２ａは、水平帰線区間２２（図１１参照）または垂直帰線区間２３（図１１参照）において、複数のチャネルで、ＨＤＭＩ送信部１０２から一方向に送信されてくる、音声データや制御データに対応する差動信号を受信する。
【０１２０】
ＨＤＭＩ送信部１０２とＨＤＭＩ受信部２０２ａとからなるＨＤＭＩシステムの伝送チャネルには、画素データおよび音声データを伝送するための伝送チャネルとしての３つのＴＭＤＳチャネル＃０乃至＃２と、ピクセルクロックを伝送する伝送チャネルとしてのＴＭＤＳクロックチャネルの他に、ＤＤＣ（Display Data Channel）３３やＣＥＣ（Consumer Electronics Control）ライン３４と呼ばれる伝送チャネルがある。
【０１２１】
ＤＤＣ３３は、ＨＤＭＩケーブル５１０に含まれる２本の信号線からなり、ＨＤＭＩ送信部１０２が、ＨＤＭＩケーブル５１０を介して接続されたＨＤＭＩ受信部２０２ａから、ＥＤＩＤ（Extended Display Identification Data）を読み出すために使用される。すなわち、ＨＤＭＩ受信部２０２ａは、ＨＤＭＩレシーバ３２の他に、自身の性能（Configuration・Capability）に関する性能情報であるＥＤＩＤを記憶している、ＥＤＩＤ ＲＯＭ（Read Only Memory）を有している。
【０１２２】
オーディオアンプ２００においては、このＥＤＩＤの一つとして分割復号化ストリーム対応情報、復号化能力情報、スピーカ構成情報が記録されている。ＨＤＭＩ送信部１０２がＥＤＩＤを読み出すことで、受信側の分割復号化ストリーム対応情報、復号化能力情報、スピーカ構成情報が送信側に送られることになる。
【０１２３】
ＨＤＭＩ送信部１０２は、ＨＤＭＩケーブル５１０を介して接続されているＨＤＭＩ受信部２０２ａから、ＥＤＩＤを、ＤＤＣ３３を介して読み出す。そして、ＢＤプレーヤ１００のＣＰＵ１０４は、そのＥＤＩＤに基づき、ＨＤＭＩ受信部２０２ａを有するオーディオアンプ２００の性能を認識する。
【０１２４】
ＣＥＣライン３４は、ＨＤＭＩケーブル５１０に含まれる１本の信号線からなり、ＨＤＭＩ送信部１０２とＨＤＭＩ受信部２０２ａとの間で、制御用のデータの双方向通信を行うために用いられる。また、ＨＤＭＩケーブル５１０には、ＨＰＤ（Hot Plug Detect）と呼ばれるピンに接続されるＨＰＤライン３５が含まれている。
【０１２５】
ソース機器は、このＨＰＤライン３５を利用して、直流バイアス電位により、シンク機器の接続を検出することができる。この場合、ＨＰＤライン３５は、ソース機器側から見ると、直流バイアス電位によってシンク機器から接続状態の通知を受ける機能を有するものとなる。一方、このＨＰＤラインは、シンク機器側から見ると、直流バイアス電位によってソース機器に接続状態を通知する機能を有するものとなる。
【０１２６】
また、ＨＤＭＩケーブル５１０には、ソース機器からシンク機器に電源を供給するために用いられる電源ライン３６が含まれている。さらに、ＨＤＭＩケーブル５１０には、リザーブライン３７が含まれている。ＨＰＤライン３５とリザーブライン３７を用い て、一対の差動伝送路を構成し、双方向通信路として用いる場合もある。
【０１２７】
図１１は、ＴＭＤＳチャネルにおいて、横×縦が１９２０ピクセル×１０８０ラインの画像データが伝送される場合の、各種の伝送データの区間を示している。ＨＤＭＩの３つのＴＭＤＳチャネルで伝送データが伝送されるビデオフィールド（Video Field）には、伝送データの種類に応じて、ビデオデータ区間２４（Video Data Period）、データアイランド区間２５（Data Island Period）、およびコントロール区間２６（Control Period）の３種類の区間が存在する。
【０１２８】
ここで、ビデオフィールド区間は、ある垂直同期信号の立ち上がりエッジ（Active Edge）から次の垂直同期信号の立ち上がりエッジまでの区間であり、水平帰線期間２２（Horizontal Blanking）、垂直帰線期間２３（Vertical Blanking）、並びに、ビデオフィールド区間から、水平帰線期間および垂直帰線期間を除いた区間である有効画素区間２１（Active Video）に分けられる。
【０１２９】
ビデオデータ区間２４は、有効画素区間２１に割り当てられる。このビデオデータ区間２４では、非圧縮の１画面分の画像データを構成する１９２０ピクセル（画素）×１０８０ライン分の有効画素（Active Pixel）のデータが伝送される。データアイランド区間２５およびコントロール区間２６は、水平帰線期間２２および垂直帰線期間２３に割り当てられる。このデータアイランド区間２５およびコントロール区間２６では、補助データ（Auxiliary Data）が伝送される。
【０１３０】
すなわち、データアイランド区間２５は、水平帰線期間２２と垂直帰線期間２３の一部分に割り当てられている。このデータアイランド区間２５では、補助データのうち、制御に関係しないデータである、例えば、音声データのパケット等が伝送される。コントロール区間２６は、水平帰線期間２２と垂直帰線期間２３の他の部分に割り当てられている。このコントロール区間２６では、補助データのうちの、制御に関係するデータである、例えば、垂直同期信号および水平同期信号、制御パケット等が伝送される。
【０１３１】
上述したように、図１に示すＡＶシステム１０において、ＢＤプレーヤ１００は、受信側に復号化済オーディオストリームおよび符号化オーディオストリームを分割復号化オーディオストリームとして同時に送信するものであり、受信側において良好な音声出力を得ることが可能となる。例えば、オーディオデコーダを持たない受信側では復号化済オーディオストリームを用いて簡易的に音声出力が可能となり、一方、高品質なオーディオデコーダを持つ受信側では符号化オーディオストリームをさらに復号化することで高品質な音声出力が可能となる。
【０１３２】
また、図１に示すＡＶシステム１０において、オーディオアンプ２００は、送信側から分割復号化オーディオストリーム（復号化済オーディオストリームと符号化オーディオストリーム）を受信した場合、復号化済オーディオストリームに含まれている所定チャネル数の非圧縮の音声データに、符号化オーディオストリームに復号化処理を施して得られた所定チャネル数の非圧縮の音声データをミキシング（合成）して、出力音声データを得るものであり、ユーザの操作を不要とした形で、高品質な音声出力が可能となる。
【０１３３】
この場合、ＢＤプレーヤ１００に簡易再生のためのオーディオデコーダ１２７を持たせ、オーディオアンプ２００に高品質再生のためのオーディオデコーダ２２１を持たせることにより、双方のオーディオデコーダを最適化することが可能となる。
【０１３４】
＜２．変形例＞
なお、上述実施の形態においては、優先度情報を持つ複数の符号化データを含む符号化ストリームがオブジェクトベースオーディオの符号化オーディオストリームである例を示した。本技術は、優先度情報を持つ複数の符号化ビデオデータを含む符号化ビデオストリームを取り扱う場合にも同様に適用できることは勿論である。この場合にも、送信側と受信側との間で復号化処理を分割して、最高の品質の再生を提供することが可能になる。
【０１３５】
また、上述実施の形態においては、ＨＤＭＩのデジタルインタフェースである例を示したが、デジタルインタフェースはＨＤＭＩに限定されない。
【０１３６】
また、技術は、以下のような構成もとることができる。
（１）優先度情報を持つ複数の符号化データを含む符号化ストリームを取得するストリーム取得部と、
上記複数の符号化データのうち所定の優先度までの符号化データに復号化処理を施して復号化済データを含む復号化済ストリームを生成すると共に、上記複数の符号化データのうち上記所定の優先度を越える符号化データを含む符号化ストリームを生成するデコード部と、
受信側に、デジタルインタフェースを介して、上記デコード部で生成された復号化済ストリームおよび符号化ストリームを分割復号化ストリームとして同時に送信するストリーム送信部を備える
送信装置。
（２）上記受信側が上記分割復号化ストリームに対応しているか判断する判断部をさらに備え、
上記送信部は、上記判断部で対応していると判断されるとき、上記受信側に上記分割復号化ストリームを送信する
前記（１）に記載の送信装置。
（３）上記判断部は、上記受信側から取得された上記分割復号化ストリームに対応していることを示す情報により、上記受信側が上記分割復号化ストリームに対応していると判断する
前記（２）に記載の送信装置。
（４）上記受信側に、上記デジタルインタフェースを介して、上記分割復号化ストリームの送信であることを示す情報を送信する情報送信部をさらに備える
前記（１）から（３）のいずれかに記載の送信装置。
（５）上記符号化ストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームであり、
上記デコード部は、上記複数のオブジェクト音源の符号化データのうち所定の優先度までのオブジェクト音源の符号化データに復号化処理を施して所定チャネル数の音声データを含む復号化済オーディオストリームを生成すると共に、上記複数のオブジェクト音源の符号化データのうち上記所定の優先度を越えるオブジェクト音源の符号化データを含む符号化オーディオストリームを生成する
前記（１）から（４）のいずれかに記載の送信装置。
（６）上記受信側から、上記デジタルインタフェースを介して、スピーカ構成情報を取得する情報取得部をさらに備え、
上記デコード部は、スピーカ構成情報で示されるチャネル数の音声データを含む復号化済オーディオストリームを生成する
前記（５）に記載の送信装置。
（７）上記デジタルインタフェースはＨＤＭＩである
前記（１）から（６）のいずれかに記載の送信装置。
（８）優先度情報を持つ複数の符号化データを含む符号化ストリームを取得するストリーム取得ステップと、
上記複数の符号化データのうち所定の優先度までの符号化データに復号化処理を施して復号化済データを含む復号化済ストリームを生成すると共に、上記複数の符号化データのうち上記所定の優先度を越える符号化データを含む符号化ストリームを生成するデコードステップと、
ストリーム送信部により、デジタルインタフェースを介して、上記デコード部で生成された復号化済ストリームおよび符号化ストリームを分割復号化ストリームとして同時に送信するストリーム送信ステップを有する
送信方法。
（９）送信側から、デジタルインタフェースを介して、復号化済データを含む復号化済ストリームと優先度情報を持つ所定数の符号化データを含む符号化ストリームからなる分割復号化ストリームを受信するストリーム受信部と、
上記符号化ストリームに復号化処理を施して復号化済データを得るデコード部と、
上記デコード部で得られた復号化済データと上記復号化済ストリームに含まれている復号化済データとを合成して出力データを得る合成部を備える
受信装置。
（１０）上記送信側に、上記デジタルインタフェースを介して、上記分割復号化ストリームに対応していることを示す情報を送信する情報送信部をさらに備える
前記（９）に記載の受信装置。
（１１）上記送信側から、上記デジタルインタフェースを介して、上記分割復号化ストリームの送信であることを示す情報を受信する情報受信部をさらに備える
前記（９）または（１０）に記載の受信装置。
（１２）上記符号化ストリームは、優先度情報を持つ複数のオブジェクト音源の符号化データを含むオブジェクトベースオーディオの符号化オーディオストリームである
前記（９）から（１１）のいずれかに記載の受信装置。
（１３）上記デジタルインタフェースはＨＤＭＩである
前記（９）から（１２）のいずれかに記載の受信装置。
（１４）受信部により、送信側から、デジタルインタフェースを介して、復号化済データを含む復号化済ストリームと優先度情報を持つ所定数の符号化データを含む符号化ストリームからなる分割復号化ストリームを受信するストリーム受信ステップと、
上記符号化ストリームに復号化処理を施して復号化済データを得るデコードステップと、
上記デコードステップで得られた復号化済データと上記復号化済ストリームに含まれている復号化済データとを合成して出力データを得る合成ステップを有する
受信方法。
【符号の説明】
【０１３７】
１０・・・・ＡＶシステム
１００・・・ＢＤプレーヤ
１０１・・・ＨＤＭＩ端子
１０２・・・ＨＤＭＩ送信部
１０３・・・内部バス
１０４・・・ＣＰＵ
１０５・・・フラッシュＲＯＭ
１０６・・・ＳＤＲＡＭ
１０７・・・表示制御部
１０８・・・リモコン受信部
１０９・・・リモコン送信機
１１１・・・記憶媒体制御インタフェース
１１２・・・ＢＤドライブ
１１３・・・ＨＤＤ
１１４・・・ＳＳＤ
１１５・・・イーサネットインタフェース
１１６・・・ネットワーク端子
１２１・・・デマルチプレクサ
１２２・・・ビデオデコーダ
１２３・・・グラフィック生成回路
１２４・・・映像出力端子
１２５・・・パネル駆動回路
１２６・・・表示パネル
１２７・・・オーディオデコーダ
１２９・・・音声出力端子
１３１・・・電源部
２００・・・オーディオアンプ
２０１ａ，２０１ｂ・・・ＨＤＭＩ端子
２０２ａ・・・ＨＤＭＩ受信部
２０２ｂ・・・ＨＤＭＩ送信部
２０３・・・内部バス
２０４・・・ＣＰＵ
２０５・・・フラッシュＲＯＭ
２０６・・・ＳＤＲＡＭ
２０７・・・表示制御部
２０８・・・パネル駆動回路
２０９・・・表示パネル
２１０・・・リモコン受信部
２１１・・・リモコン送信機
２１２・・・電源部
２２１・・・オーディオデコーダ
２２３・・・音声処理回路
２２４・・・音声増幅回路
２２５・・・音声出力端子
３００・・・テレビ受信機
３０１・・・ＨＤＭＩ端子
３０２・・・ＨＤＭＩ受信部
３０３・・・内部バス
３０４・・・ＣＰＵ
３０５・・・フラッシュＲＯＭ
３０６・・・ＳＤＲＡＭ
３０７・・・表示制御部
３０８・・・リモコン受信部
３０９・・・リモコン送信機
３１０・・・電源部
３１１・・・イーサネットインタフェース
３１２・・・ネットワーク端子
３２１・・・アンテナ端子
３２２・・・デジタルチューナ
３２３・・・デマルチプレクサ
３２４・・・ビデオデコーダ
３２５・・・映像処理回路
３２６・・・グラフィック生成回路
３２７・・・パネル駆動回路
３２８・・・表示パネル
３２９・・・オーディオデコーダ
３３０・・・音声処理回路
３３１・・・音声増幅回路
３３２・・・スピーカ
４００・・・スピーカシステム
５１０，５２０・・・ＨＤＭＩケーブル
【図１】
2016163329.tif 000003
【図２】
2016163329.tif 000004
【図３】
2016163329.tif 000005
【図４】
2016163329.tif 000006
【図５】
2016163329.tif 000007
【図６】
2016163329.tif 000008
【図７】
2016163329.tif 000009
【図８】
2016163329.tif 000010
【図９】
2016163329.tif 000011
【図１０】
2016163329.tif 000012
【図１１】
2016163329.tif 000013
【国際調査報告】
2016163329.tif 000014
2016163329.tif 000015
2016163329.tif 000016
2016163329.tif 000017