(57)【要約】  ２Ｄ表示される映像について冗長な処理を行うことなく２Ｄ表示する再生装置を提供する。再生装置は、符号化された第１タイプの映像と第２タイプの映像とを含む第１ストリームを受信し、復号して、復号した映像を第１バッファに格納するとともに、復号される映像が第１タイプの映像であるか、第２タイプの映像であるかを判別し、前記第１タイプの映像の視点とは異なる視点の映像であり、符号化された第３タイプの映像を含む第２ストリームを受信し、復号して、復号した映像を第２バッファに格納し、第１タイプの映像であると判別された映像については前記第１バッファに格納された当該第１タイプの映像と前記第２バッファに格納された第３タイプの映像を用いて３Ｄ再生を行い、第２タイプの映像であると判別された映像については前記第１バッファに格納された当該第２タイプの映像を用いて２Ｄ再生を行う。
2013099289.tif 000002
【特許請求の範囲】
【請求項１】
３Ｄ再生に用いる符号化された第１タイプの映像と、２Ｄ再生に用いる符号化された第２タイプの映像とを含み、当該第１タイプの映像と第２タイプの映像とが連なって構成される第１伝送用ストリームを受信する第１受信手段と、
前記第１タイプの映像の視点とは異なる視点の映像であり、前記第１タイプの映像と共に用いて立体表示に供する符号化された第３タイプの映像を含む第２伝送用ストリームを受信する第２受信手段と、
前記第１伝送用ストリームに含まれる符号化された第１タイプ及び第２タイプの映像を復号して、第１バッファに格納する第１復号手段と、
前記第２伝送用ストリームに含まれる符号化された第３タイプの映像を復号して、第２バッファに格納する第２復号手段と、
前記第１復号手段で復号される映像が第１タイプの映像であるか、第２タイプの映像であるかを判別する判別手段と、
前記判別手段で第１タイプの映像であると判別された映像については、前記第１バッファに格納された当該第１タイプの映像と前記第２バッファに格納された第３タイプの映像とを用いて３Ｄ再生を行い、前記判別手段で第２タイプの映像であると判別された映像については、前記第１バッファに格納された当該第２タイプの映像を用いて２Ｄ再生を行う再生処理手段とを備える
ことを特徴とする再生装置。
【請求項２】
前記第１伝送用ストリームに含まれる各映像には、当該映像が第１タイプの映像であるか、第２タイプの映像であるかを示す識別情報が対応付けられており、
前記判別手段は、復号される映像に対応付けられた識別情報を用いて、当該映像が前記第１タイプの映像であるか前記第２タイプの映像であるかを判別する
ことを特徴とする請求項１に記載の再生装置。
【請求項３】
前記第２伝送用ストリームは、さらに、前記第１伝送用ストリームに含まれる前記第２タイプの映像と同一視点の映像である同一視点映像を含み、
前記判別手段は、
復号される映像が前記第２タイプの映像であると判別した場合において、さらに、当該映像の画質と、前記同一視点映像との画質を比較し、
前記再生処理手段は、
前記判別手段で前記第２タイプの映像の画質が低いと判断される場合には、前記第１バッファに格納された第２タイプの映像による２Ｄ再生の代わりに、前記第２バッファに格納された前記同一視点映像を用いて２Ｄ再生を行い、前記第２タイプの映像の画質が高いと判断される場合には、前記第１バッファに格納された前記第２タイプの映像を用いて２Ｄ再生を行う
ことを特徴とする請求項２に記載の再生装置。
【請求項４】
前記第２タイプの映像に対して、当該映像の画質が、前記同一視点映像の画質よりも高いか否かを識別する画質情報が対応付けられ、
前記判別手段は、
前記画質情報を用いた前記比較を行う
ことを特徴とする請求項３に記載の再生装置。
【請求項５】
前記第２伝送用ストリームは、さらに、前記第１伝送用ストリームに含まれる前記第２タイプの映像と同一視点の映像である同一視点映像を含み、
前記第１伝送用ストリームと前記第２伝送用ストリームとから３Ｄ番組が構成され、
前記第１伝送用ストリームには、さらに、前記３Ｄ番組に対して第２タイプの映像及び前記同一視点映像の何れの映像を用いて再生を行うかを示す再生情報が含まれ、
前記判別手段は、
復号される映像が前記第２タイプの映像であると判別した場合において、さらに、前記再生情報を用いて前記第２タイプの映像及び前記同一視点映像の何れの映像を用いて２Ｄ再生を行うかを判別し、
前記再生処理手段は、
前記判別手段で前記第２タイプの映像を用いると判断される場合には、前記第１バッファに格納された前記第２タイプの映像を用いて２Ｄ再生を行い、前記同一視点映像を用いると判断される場合には、前記第１バッファに格納された前記第２タイプの映像による２Ｄ再生の代わりに前記第２バッファに格納された前記同一視点映像を用いて２Ｄ再生を行う
ことを特徴とする請求項２に記載の再生装置。
【請求項６】
前記第２伝送用ストリームは、前記第１伝送用ストリームに含まれる前記第２タイプの映像と同一視点の映像である同一視点映像を含み、
前記第１伝送用ストリームと前記第２伝送用ストリームとから３Ｄ番組が構成され、
前記第１伝送用ストリームは、さらに、ＰＭＴ（Ｐｒｏｇｒａｍ  Ｍａｐ  Ｔａｂｌｅ）又はＶＣＴ（Ｖｉｒｔｕａｌ  Ｃｈａｎｎｅｌ  Ｔａｂｌｅ）を含み、
前記ＰＭＴ又は前記ＶＣＴには、前記３Ｄ番組に対して第２タイプの映像及び前記同一視点映像の何れの映像を用いて再生を行うかを示す再生情報が含まれ、
前記判別手段は、
復号される映像が前記第２タイプの映像であると判別した場合に、さらに、前記ＰＭＴ又は前記ＶＣＴに含まれる前記再生情報を用いて、当該第２タイプの映像及び前記同一視点映像の何れの映像を用いて再生を行うかを判別し、
前記再生処理手段は、
前記判別手段で前記第２タイプの映像を用いて再生を行うと判断される場合には、前記第１バッファに格納された前記第２タイプの映像を用いて２Ｄ再生を行い、前記同一視点映像を用いて再生を行うと判断される場合には、前記第１バッファに格納された前記第２タイプの映像による２Ｄ再生の代わりに前記第２バッファに格納された前記同一視点映像を用いて２Ｄ再生を行う
ことを特徴とする請求項２に記載の再生装置。
【請求項７】
前記再生装置は、さらに、
前記第１タイプの映像と前記第３タイプの映像とを用いた３Ｄ再生から一のタイプの映像を用いた２Ｄ再生へと切替指示を受け付ける受付手段を備え、
前記判別手段は、前記受付手段が前記切替指示を受け付けた場合、さらに、前記第１タイプの映像及び前記第３タイプの映像の何れを用いて２Ｄ再生を行うかを判別し、
前記再生処理手段は、前記受付手段が前記切替指示を受け付けた場合、前記判別手段の判別結果に応じた２Ｄ再生を行う
ことを特徴とする請求項１に記載の再生装置。
【請求項８】
前記第１伝送用ストリームに含まれる各第１タイプの映像には、第１タイプの映像の画質が、当該第１タイプの映像に対応する第３タイプの映像の画質よりも高いか否かを識別する画質情報が対応付けられており、
前記判別手段は、第１タイプの映像に対応付けられた画質情報が、対応する前記第１タイプの映像の画質が前記第３タイプの映像の画質より高いことを示す場合には、前記第１タイプの映像を用いて２Ｄ再生を行うと判別し、対応する前記第１タイプの映像の画質が前記第３タイプの映像の画質より低いことを示す場合には前記第３タイプの映像を用いて２Ｄ再生を行うと判別する
ことを特徴とする請求項７に記載の再生装置。
【請求項９】
前記判別手段は、
前記第１タイプの映像の画質と、前記第３タイプの映像の画質とを比較し、前記第１タイプの映像の画質が高いと判断する場合には前記第１タイプの映像を用いて２Ｄ再生を行うと判別し、前記第３タイプの映像の画質が高いと判断する場合には前記第３タイプの映像を用いて２Ｄ再生を行うと判別する
ことを特徴とする請求項７に記載の再生装置。
【請求項１０】
前記第１伝送用ストリームから得られる複数の前記第１タイプの映像、及び前記第２伝送用ストリームから得られる複数の前記第３タイプの映像から３Ｄ番組が構成され、
前記第１伝送用ストリームは、前記３Ｄ番組に対して、３Ｄ再生の代わりに２Ｄ再生を行う際に、前記第１タイプの映像、及び前記第３タイプの映像の何れかを用いて再生するかを識別する再生情報を含み、
前記判別手段は、
前記受付手段が前記番組に対する前記切替指示を受け付けると、前記再生情報を用いて、前記第１タイプの映像及び前記第３タイプの映像の何れを用いて２Ｄ再生を行うかを判別する
ことを特徴とする請求項７に記載の再生装置。
【請求項１１】
前記第１伝送用ストリームから得られる複数の前記第１タイプの映像、及び前記第２伝送用ストリームから得られる複数の前記第３タイプの映像から３Ｄ番組が構成され、
前記第１伝送用ストリームは、さらに、ＰＭＴ又はＶＣＴを含み、
前記ＰＭＴ又は前記ＶＣＴには、前記３Ｄ番組に対して第１タイプの映像及び前記第３タイプの映像の何れの映像を用いて２Ｄ再生を行うかを示す再生情報が含まれ、
前記判別手段は、
さらに、前記受付手段が前記番組に対する前記切替指示を受け付けると、前記ＰＭＴ又は前記ＶＣＴに含まれる前記再生情報を用いて、前記第１タイプの映像及び前記第３タイプの映像の何れを用いて２Ｄ再生を行うかを判別する
ことを特徴とする請求項７に記載の再生装置。
【請求項１２】
前記再生処理手段は、
前記３Ｄ再生を行う際には、所定期間内に、前記第１バッファに格納された当該第１タイプの映像と、前記第２バッファに格納された第３タイプの映像とを異なるタイミングで１回ずつ読み出して表示し、
前記２Ｄ再生を行う際には、前記所定期間内に、前記第１バッファに格納された前記第２タイプの映像を、異なるタイミングで２回読み出して表示する
ことを特徴とする請求項１に記載の再生装置。
【請求項１３】
３Ｄ再生に用いる符号化された第１タイプの映像と、２Ｄ再生に用いる第２タイプの映像と、第１タイプの映像及び前記第２タイプの映像それぞれに対して、当該映像が第１タイプの映像であるか第２タイプの映像であるかを識別する映像識別子を含む第１伝送用ストリームを保持する第１保持手段と、
前記第１タイプの映像の視点とは異なる視点の映像であり、３Ｄ再生時に前記第１タイプの映像とから立体視を可能とする、符号化された第３タイプの映像を含む第２伝送用ストリームを保持する第２保持手段と、
前記第１伝送用ストリームを送信する第１送信手段と、
前記第２伝送用ストリームを送信する第２送信手段とを備える
ことを特徴とする送信装置。
【請求項１４】
前記第２伝送用ストリームは、さらに、前記第１伝送用ストリームに含まれる前記第２タイプの映像と同一視点の映像である同一視点映像を含み、
前記第１伝送用ストリームは、さらに、各第２タイプの映像それぞれに対応付けられた情報であって、当該映像の画質が前記同一視点映像の画質よりも高いか否かを識別する画質情報を含む
ことを特徴とする請求項１３に記載の送信装置。
【請求項１５】
前記第１伝送用ストリームは、さらに、各第１タイプの映像それぞれに対応付けられた情報であって、当該映像の画質が当該第１タイプの映像に対応する第３タイプの映像の画質よりも高いか否かを識別する画質情報を含む
ことを特徴とする請求項１３に記載の送信装置。
【請求項１６】
再生装置で用いられる再生方法であって、
３Ｄ再生に用いる符号化された第１タイプの映像と、２Ｄ再生に用いる符号化された第２タイプの映像とを含み、当該第１タイプの映像と第２タイプの映像とが連なって構成される第１伝送用ストリームを受信する第１受信ステップと、
前記第１タイプの映像の視点とは異なる視点の映像であり、前記第１タイプの映像と共に用いて立体表示に供する符号化された第３タイプの映像を含む第２伝送用ストリームを受信する第２受信ステップと、
前記第１伝送用ストリームに含まれる符号化された第１タイプ及び第２タイプの映像を復号して、第１バッファに格納する第１復号ステップと、
前記第２伝送用ストリームに含まれる符号化された第３タイプの映像を復号して、第２バッファに格納する第２復号ステップと、
前記第１復号ステップで復号される映像が第１タイプの映像であるか、第２タイプの映像であるかを判別する判別ステップと、
前記判別ステップで第１タイプの映像であると判別された映像については、前記第１バッファに格納された当該第１タイプの映像と前記第２バッファに格納された第３タイプの映像とを用いて３Ｄ再生を行い、前記判別ステップで第２タイプの映像であると判別された映像については、前記第１バッファに格納された当該第２タイプの映像を用いて２Ｄ再生を行う再生処理ステップとを含む
ことを特徴とする再生方法。
【請求項１７】
３Ｄ再生に用いる符号化された第１タイプの映像と、２Ｄ再生に用いる第２タイプの映像と、第１タイプの映像及び前記第２タイプの映像それぞれに対して、当該映像が第１タイプの映像であるか第２タイプの映像であるかを識別する映像識別子を含む第１伝送用ストリームを保持する第１保持手段と、前記第１タイプの映像の視点とは異なる視点の映像であり、３Ｄ再生時に前記第１タイプの映像とから立体視を可能とする、符号化された第３タイプの映像を含む第２伝送用ストリームを保持する第２保持手段とを備える送信装置で用いられる送信方法であって、
前記第１伝送用ストリームを送信する第１送信ステップと、
前記第２伝送用ストリームを送信する第２送信ステップとを含む
ことを特徴とする送信方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、３Ｄ映像の再生及び２Ｄ映像の再生の技術に関するものである。
【背景技術】
【０００２】
近年、３Ｄ映像の表示を行うための映像を送受信する方法がいろいろと提案されている。ここで、以下において、３Ｄ映像の表示を行うことを３Ｄ再生、２Ｄ映像の表示を行うことを２Ｄ再生ともいう。【０００３】
例えば、特許文献１では、左目映像を含むトランスポートストリーム、及び右目映像を含むトランスポートストリームを個別に生成し、それぞれを異なる送信経路で送信する方法が提案されている。この方法では、受信側である再生装置は、個別に受信した映像について、左目映像を一のフレームバッファに、右目映像を他のフレームバッファに格納し、表示周期（例えば１／１２０秒）に応じて、表示対象の映像の読み出し先として一のフレームバッファ及び他のフレームバッファを交互に切り替えることで、３Ｄ映像の再生が可能となる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】ＷＯ２０１０／０５３２４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、現状の３Ｄ番組の放送では、当該番組の本編を表す映像は立体表示（３Ｄ表示ともいう。）されるが、当該番組の本編以外の映像、例えばコマーシャルメッセージの映像は平面表示（２Ｄ表示ともいう。）される。つまり、現状の３Ｄ番組の放送では、２Ｄ表示と３Ｄ表示が混在している。そのため、特許文献１に開示された技術を用いた場合、３Ｄ番組の本編以外の映像は、２つの送信経路双方で送信される必要があり、再生装置は、同一の映像（本編以外の映像）であるにもかかわらず、フレームバッファを交互に切り替えて表示することとなる。同一の映像を、２つのフレームバッファそれぞれに格納し、フレームバッファに格納された同一の映像を交互に切り替えて表示することは、冗長な処理であるといえる。【０００６】
そこで、本発明は、３Ｄ番組における本編以外の映像であって、２Ｄ表示される映像については、冗長な処理を行うことなく２Ｄ表示する再生装置、送信装置、再生方法及び送信方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するために、本発明は、再生装置であって、３Ｄ再生に用いる符号化された第１タイプの映像と、２Ｄ再生に用いる符号化された第２タイプの映像とを含み、当該第１タイプの映像と第２タイプの映像とが連なって構成される第１伝送用ストリームを受信する第１受信手段と、前記第１タイプの映像の視点とは異なる視点の映像であり、前記第１タイプの映像と共に用いて立体表示に供する符号化された第３タイプの映像を含む第２伝送用ストリームを受信する第２受信手段と、前記第１伝送用ストリームに含まれる符号化された第１タイプ及び第２タイプの映像を復号して、第１バッファに格納する第１復号手段と、前記第２伝送用ストリームに含まれる符号化された第３タイプの映像を復号して、第２バッファに格納する第２復号手段と、前記第１復号手段で復号される映像が第１タイプの映像であるか、第２タイプの映像であるかを判別する判別手段と、前記判別手段で第１タイプの映像であると判別された映像については、前記第１バッファに格納された当該第１タイプの映像と前記第２バッファに格納された第３タイプの映像とを用いて３Ｄ再生を行い、前記判別手段で第２タイプの映像であると判別された映像については、前記第１バッファに格納された当該第２タイプの映像を用いて２Ｄ再生を行う再生処理手段とを備えることを特徴とする。
【発明の効果】
【０００８】
上記構成によると、再生装置は、第２タイプの映像を表示する場合には、第１バッファに格納された当該第２タイプの映像を用いた２Ｄ再生を行うので、各フレームバッファを交互に切り替える必要がない。そのため、再生装置は、２Ｄ表示される映像については、冗長な処理を行うことなく当該映像を再生（表示）することができる。
【図面の簡単な説明】
【０００９】
【図１】２Ｄ映像とデプスマップから左目映像と右目映像の視差画像を生成する例を説明する図である。
【図２】再生装置（デジタルテレビ）１０の使用行為を説明する図である。
【図３】トランスポートストリーム形式のデジタルストリームの構成を示す図である。
【図４】ＰＭＴのデータ構造を説明する図である。
【図５】（ａ）ビデオストリームを構成するＧＯＰの構造を説明する図であり、（ｂ）はビデオアクセスユニットのデータ構造を説明する図である。
【図６】ＰＥＳパケットの構成を説明する図である。
【図７】（ａ）はトランスポートストリームを構成するＴＳパケットのデータ構造を説明する図であり、（ｂ）はＴＳヘッダのデータ構造を説明する図である。
【図８】立体視画像の表示の一例を示す図である
【図９】Ｓｉｄｅ−ｂｙ−Ｓｉｄｅ方式を説明する図である。
【図１０】マルチビュー符号化方式による立体視方式を説明する図である。
【図１１】ベースビュービデオストリームの各ピクチャと右目映像ビデオストリームの各ピクチャのビデオアクセスユニットの構成を説明する図である。
【図１２】ベースビュービデオストリームとディペンデントビュービデオストリームの各ビデオアクセスユニットに割り当てるＰＴＳとＤＴＳの関係を説明する図である。
【図１３】ベースビュービデオストリームとディペンデントビュービデオストリームのＧＯＰ構成を示す図である。
【図１４】ディペンデントＧＯＰに含まれるビデオアクセスユニットの構成を説明する図である。
【図１５】映像送受信システム１０００の構成を示す図である。
【図１６】送信装置２００の構成を示すブロック図である。
【図１７】再生装置１０の構成を示すブロック図である。
【図１８】送信装置２００で行われる送信処理を示す流れ図である。
【図１９】再生装置１０で行われる再生処理を示す流れ図である。
【図２０】送信装置２００ａの構成を示すブロック図である。
【図２１】再生装置１０ａの構成を示すブロック図である。
【図２２】再生装置１０ａで行われる再生処理を示す流れ図である。
【図２３】送信装置２００ｂの構成を示すブロック図である。
【図２４】再生装置１０ｂの構成を示すブロック図である。
【図２５】再生装置１０ｂで行われる再生処理を示す流れ図である。
【図２６】従来の送信装置４００の構成を示すブロック図である。
【発明を実施するための形態】
【００１０】
１．概要
図２６に、一例として従来の放送における送信装置４００を示す。図２６で示すように送信装置４００は、映像格納部４０１に格納された２Ｄ番組の映像をビデオ符号化部４０５で放送規格に対応したビデオ形式で圧縮されたビデオストリームを生成し、ビデオストリーム格納部４０６に格納する。ここで、放送規格に対応したビデオ形式とは、例えばＭＰＥＧ（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）２ Ｖｉｄｅｏ、ＭＰＥＧ−４ ＡＶＣ（Ａｄｖａｎｃｅｄ  Ｖｉｄｅｏ  Ｃｏｄｉｎｇ）及びＶＣ１などといった形式である。送信装置４００は、ビデオストリーム格納部４０６に格納されたビデオストリームを、ストリーム管理情報格納部４０２に格納された情報（ＥＩＴ（Ｅｖｅｎｔ  Ｉｎｆｏｒｍａｔｉｏｎ  Ｔａｂｌｅ）などの２Ｄ番組に係る情報）、字幕ストリーム格納部に格納された字幕データ、オーディオストリーム格納部に格納されたオーディオデータとともに多重化処理部４０７で多重化してトランスポートストリームを生成し、生成したトランスポートストリームをトランスポートストリーム格納部４０８に格納する。送信装置４００は、トランスポートストリーム格納部４０８に格納されているトランスポートストリームを、送信部４０９で放送波に適した形式に変調し、放送波として送出する。この時、放送波として送出されるトランスポートストリームのビットレートは、送信部４０９で送出の際に使用できる電波帯域や変調方式によって異なるが、例えば日本の地上波放送では１７Ｍｂｐｓ程度、衛星放送では２４Ｍｂｐｓ程度のビットレートのトランスポートストリームを放送波で送出することが可能である。
【００１１】
従来の２Ｄ放送において、日本や北米で規定されている地上波放送の場合、ビデオの圧縮方式としてＭＰＥＧ２ Ｖｉｄｅｏが使用されており、前述のトランスポートストリームで確保しているビットレート帯域のほとんどがＭＰＥＧ２ Ｖｉｄｅｏの格納に使われている。なお、地上波放送の規定は、日本では、ＡＲＩＢ（Ａｓｓｏｃｉａｔｉｏｎ  ｏｆ  Ｒａｄｉｏ  Ｉｎｄｕｓｔｒｉｅｓ  ａｎｄ  Ｂｕｓｉｎｅｓｓｅｓ）で、北米では、ＡＴＳＣ（Ａｄｖａｎｃｅｄ  Ｔｅｌｅｖｉｓｉｏｎ  Ｓｙｓｔｅｍ  Ｃｏｍｍｉｔｔｅｅ）で行われている。
【００１２】
近年、３Ｄ番組を放送する放送局が増えてきているが、この状況で従来のトランスポートストリームで放送を３Ｄ化するには以下のような３つの方法が考えられる。
【００１３】
１つ目の方法は、左右の映像をＳｉｄｅ−ｂｙ−Ｓｉｄｅ形式（右目用映像信号の１フレームと左目用映像信号の１フレームとの２つのフレームをそれぞれ水平方向に１／２に圧縮し、それらを横に並べて１枚のフレームとして送信する方式のこと）で放送する方法である。この場合、従来の２Ｄ放送に比較して、横方向の解像度が１／２になるという欠点がある。しかしながら、図２６で説明した従来の２Ｄ放送の送信側において、２Ｄ映像をＳｉｄｅ−ｂｙ−Ｓｉｄｅの映像に入れ替えるだけで実現できるので、既にいくつかの放送局はこの形式での３Ｄ放送を行っている。
【００１４】
２つ目の方法は、ＭＰＥＧ２ Ｖｉｄｅｏの代わりに、ＭＰＥＧ−４ ＭＶＣ（Ｍｕｌｔｉｖｉｅｗ  Ｖｉｄｅｏ  Ｃｏｄｉｎｇ）を使用して３Ｄ映像を送出する方法である。この場合、従来のＭＰＥＧ２ Ｖｉｄｅｏしか復号できないテレビでは、３Ｄはおろか、２Ｄでの表示もできないことになる。つまり、既存のテレビで全く表示ができなくなるため、従来の放送波を使って、この方式の映像を送出することは商業的に困難である。
【００１５】
３つ目の方法は、従来の２Ｄ映像のビットレートを落とし（例えば１５Ｍｂｐｓから１０Ｍｂｐｓまで落とし）て、この２Ｄ映像を左目用映像とし、余った帯域にＭＰＥＧ２ ＶｉｄｅｏやＭＰＥＧ−４ ＡＶＣなどで圧縮された右目用映像を追加する。この場合、従来のＴＶではＭＰＥＧ２ Ｖｉｄｅｏを復号して２Ｄ表示が可能となり、追加された右目用映像も復号できるテレビでは、３Ｄ表示が可能となる。しかしながら、右目映像を追加する帯域を確保するためにＭＰＥＧ２ Ｖｉｄｅｏのビットレートを落としているので、従来の２Ｄ放送に比べて画質が悪くなる。
【００１６】
そこで、上述したように、左目映像を含むトランスポートストリームと、右目映像を含むトランスポートストリームとを個別に生成し、それぞれを異なる送信経路で送信する方法が考えられている。
【００１７】
この方法を用いると、受信側の装置であるテレビ（再生装置）は、個別に受信した映像について、左目映像を一のフレームバッファに、右目映像を他のフレームバッファに格納し、表示周期（例えば１／１２０秒）に応じて、表示対象の映像の読み出し先として一のフレームバッファ及び他のフレームバッファを切り替えることで、３Ｄ表示が可能となる。また、左目映像と、右目映像とを異なる送信経路で送信するので、従来のテレビは、左目映像のみを受信することで２Ｄ表示は可能となり、ビットレートを落とす必要もない。
【００１８】
しかしながら、上述したように、現状の３Ｄ番組の放送を考慮した場合、３Ｄ番組に含まれる、ＣＭなどのような本編に関係のない映像を２Ｄ表示する際には、無駄な処理が行われているという問題を、発明者は知見した。
【００１９】
そこで、発明者らが鋭意検討して本発明に至った。
【００２０】
本発明の一態様によれば、再生装置は、３Ｄ再生に用いる符号化された第１タイプの映像と、２Ｄ再生に用いる符号化された第２タイプの映像とを含み、当該第１タイプの映像と第２タイプの映像とが連なって構成される第１伝送用ストリームを受信する第１受信手段と、前記第１タイプの映像の視点とは異なる視点の映像であり、前記第１タイプの映像と共に用いて立体表示に供する符号化された第３タイプの映像を含む第２伝送用ストリームを受信する第２受信手段と、前記第１伝送用ストリームに含まれる符号化された第１タイプ及び第２タイプの映像を復号して、第１バッファに格納する第１復号手段と、前記第２伝送用ストリームに含まれる符号化された第３タイプの映像を復号して、第２バッファに格納する第２復号手段と、前記第１復号手段で復号される映像が第１タイプの映像であるか、第２タイプの映像であるかを判別する判別手段と、前記判別手段で第１タイプの映像であると判別された映像については、前記第１バッファに格納された当該第１タイプの映像と前記第２バッファに格納された第３タイプの映像とを用いて３Ｄ再生を行い、前記判別手段で第２タイプの映像であると判別された映像については、前記第１バッファに格納された当該第２タイプの映像を用いて２Ｄ再生を行う再生処理手段とを備えることを特徴とする。
【００２１】
２．実施の形態１
以下、本発明に係る実施の形態１について、図面を参照しながら説明する。
【００２２】
２．１  準備
先ず始めに、立体視の原理について簡単に述べる。立体視の実現法としては、ホログラフィ技術等を用いる光線再生方式と、視差画像を用いる方式とがある。
【００２３】
まず、１つ目のホログラフィ技術を用いる方式の特徴としては、人間が通常物体を認識するのと全く同じように物体を立体として再現することができるが、動画生成に関しては、技術的な理論は確立しているが、ホログラフィ用の動画をリアルタイムで生成する膨大な演算量を伴うコンピュータ、及び１ｍｍの間に数千本の線を引けるだけの解像度を持った表示装置が必要であるが、現在の技術での実現は非常に難しく、商用として実用化されている例はほとんどない。
【００２４】
次に、２つ目の視差画像を用いる方式について説明する。一般に右目と、左目は、その位置の差に起因して、右目から見える像と左目から見える像には見え方に若干の差がある。この差を利用して人間は目に見える像を立体として認識できるのである。視差画像を用いて立体表示をする場合には、人間の視差を利用し平面の画像があたかも立体に見えるようにしている。
【００２５】
この方式のメリットは、高々右目用と左目用の２つの視点の映像を準備するだけで立体視を実現できることにあり、技術的には、左右のそれぞれの目に対応した絵を、いかにして対応した目にだけ見せることができるかの観点から、継時分離方式を始めとするいくつかの技術が実用化されている。
【００２６】
継時分離方式とは、左目用映像及び右目用映像を時間軸方向で交互に表示させ、目の残像反応により左右のシーンを脳内で重ね合わさせて、立体映像として認識させる方法である。
【００２７】
また、視差画像を用いた立体視においては、右目に入る映像と左目に入る映像をそれぞれ用意する方式の他に、２Ｄ映像に対して画素単位で奥行き値が与えられたデプスマップを別途用意して、２Ｄ映像とデプスマップに基づいて左目映像と右目映像の視差画像をプレーヤやディスプレイで生成する方法がある。図１は、２Ｄ映像とデプスマップから左目映像と右目映像の視差画像を生成する例を模式的に示している。デプスマップは２Ｄ映像内のそれぞれの画素に対応して奥行き値をもっており、図１の例では、２Ｄ映像の円形の物体は、デプスマップでは奥行きが高いことを示す情報が割り当てられ、それ以外の領域は奥行きが低いことを示す情報が割り当てられている。この情報は、画素ごとのビット列で格納しても良いし、画像イメージ（例えば「黒」を奥行きが低いことを示し、「白」を奥行きが高いことを示す画像イメージ）として格納しても良い。視差画像は、デプスマップの奥行き値から、２Ｄ映像の視差量を調整することによって作成することができる。図１の例では、２Ｄ映像内の円形の物体の奥行き値は高いため、視差画像を作成するときには、円形の物体の画素の視差量を大きくし、円形物体以外の領域は、奥行き値が低いため、円形の物体の画素の視差量を小さくして、左目映像、右目映像を作成する。この左目映像と右目映像を、継時分離方式等を使って表示すれば立体視が可能となる。
【００２８】
以上が立体視の原理についての説明である。
【００２９】
次に、本実施の形態における再生装置１０の使用形態について説明する。
【００３０】
本実施の形態における再生装置１０は、例えば２Ｄ映像及び３Ｄ映像の視聴が可能なデジタルテレビである。図２（ａ）は、当該受信装置（デジタルテレビ）１０の使用行為についての形態を示す図である。本図に示すように、再生装置（デジタルテレビ）１０と３Ｄ眼鏡２０とから構成され、ユーザによる使用が可能となる。
【００３１】
再生装置１０は、２Ｄ映像及び３Ｄ映像を表示することができるものであり、受信した放送波に含まれるストリームを再生することで映像を表示する。
【００３２】
本実施形態の再生装置１０は、３Ｄ眼鏡２０をユーザが着用することで立体視を実現するものである。３Ｄ眼鏡２０は、液晶シャッターを備え、継時分離方式による視差画像をユーザに視聴させる。視差画像とは、右目に入る映像と、左目に入る映像とから構成される一組の映像であり、それぞれの目に対応したピクチャだけがユーザの目に入るようにして立体視を行わせる。図２（ｂ）は、左目用映像の表示時を示す。画面上に左目用の映像が表示されている瞬間において、前述の３Ｄ眼鏡２０は、左目に対応する液晶シャッターを透過にし、右目に対応する液晶シャッターは遮光する。同図（ｃ）は、右目用映像の表示時を示す。画面上に右目用の映像が表示されている瞬間において、先ほどと逆に右目に対応する液晶シャッターを透光にし、左目に対応する液晶シャッターを遮光する。
【００３３】
また、２Ｄ映像及び３Ｄ映像を表示することができる別の方法の再生装置としては、先ほどの継時分離方式では左右のピクチャを時間軸方向で交互に出力していたのに対して、一画面中の縦方向に左目用のピクチャと右目用のピクチャを同時に交互に並べ、ディスプレイ表面にレンチキュラーレンズと呼ばれる蒲鉾上のレンズを通して、左目用のピクチャを構成する画素は左目だけに結像し、右目用のピクチャを構成する画素は右目だけに結像するようにすることで、左右の目に視差のあるピクチャを見せ、３Ｄとしてみることができる方式がある。なお、レンチキュラーレンズだけでなく、同様の機能を持たせたデバイス、例えば液晶素子を用いてもよい。また左目用の画素には縦偏光のフィルタ、右目用の画素には横偏光のフィルタを設置し、視聴者は、左目用には縦偏光、右目用には横偏光のフィルタを設置した偏光メガネを用いてディスプレイを見ることによって立体視が可能となる偏光方式がある。
【００３４】
視差画像を用いた立体視のための方法はこの他にも２色分離方式などさまざまな技術が提案されており、本実施の例においては、継時分離方式を例として用いて説明するが、視差画像を用いる限りこの方式に限定するものではない。
【００３５】
以上が、再生装置の使用形態についての説明である。
【００３６】
次に、デジタルテレビの放送波等で伝送される一般的なストリームの構造について説明する。
【００３７】
デジタルテレビの放送波等での伝送では、ＭＰＥＧ−２トランスポートストリーム（Ｔｒａｎｓｐｏｒｔ  Ｓｔｒｅａｍ：ＴＳ）形式のデジタルストリームが使われている。ＭＰＥＧ−２トランスポートストリームとは、ビデオやオーディオなど様々なストリームを多重化して伝送するための規格であり、ＩＳＯ／ＩＥＣ１３８１８−１およびＩＴＵ−Ｔ勧告Ｈ２２２．０において標準化されている。
【００３８】
図３は、ＭＰＥＧ−２トランスポートストリーム形式のデジタルストリームの構成を示す図である。本図に示すようにトランスポートストリームは、ビデオストリーム、オーディオストリーム、字幕ストリーム及びストリーム管理情報などを多重化することで得られる。ビデオストリームは番組の主映像を、オーディオストリームは番組の主音声部分や副音声を、字幕ストリームは番組の字幕情報を格納している。ビデオストリームは、ＭＰＥＧ−２、ＭＰＥＧ−４  ＡＶＣなどの方式を使って符号化されている。オーディオストリームは、ドルビーＡＣ−３、ＭＰＥＧ−２  ＡＡＣ、ＭＰＥＧ−４  ＡＡＣ、ＨＥ−ＡＡＣなどの方式で圧縮・符号化されている。
【００３９】
ビデオストリームは、図３に示すように、先ずビデオフレーム列３１がＰＥＳパケット列３２に変換され、その後ＴＳパケット列３３に変換されることで得られる。
【００４０】
オーディオストリームは、図３に示すように、オーディオ信号が量子化・サンプリングを経てオーディオフレーム列３４に変換され、その後オーディオフレーム列３４がＰＥＳパケット列３５に変換され、そしてＴＳパケット列３６に変換されることで得られる。
【００４１】
字幕ストリームは、図３に示すように、Ｐａｇｅ  Ｃｏｍｐｏｓｉｔｉｏｎ  Ｓｅｇｍｅｎｔ（ＰＣＳ）、Ｒｅｇｉｏｎ  Ｃｏｍｐｏｓｉｔｉｏｎ  Ｓｅｇｍｅｎｔ（ＲＣＳ）、Ｐａｌｌｅｔ  Ｄｅｆｉｎｅ  Ｓｅｇｍｅｎｔ（ＰＤＳ）、Ｏｂｊｅｃｔ  Ｄｅｆｉｎｅ  Ｓｅｇｍｅｎｔ（ＯＤＳ）といった複数種別からなる機能セグメント列３８を、ＴＳパケット列３９に変換されることで得られる。
【００４２】
ストリーム管理情報は、ＰＳＩ（Ｐｒｏｇｒａｍ  Ｓｐｅｃｉｆｉｃａｔｉｏｎ  Ｉｎｆｏｒｍａｔｉｏｎ）と呼ばれるシステムパケットに格納され、トランスポートストリームに多重化されているビデオストリーム、オーディオストリーム、字幕ストリームを１つの放送番組として管理する情報のことである。ストリーム管理情報には、図４に示すように、ＰＡＴ（Ｐｒｏｇｒａｍ  Ａｓｓｏｃｉａｔｉｏｎ  Ｔａｂｌｅ）、ＰＭＴ（Ｐｒｏｇｒａｍ  Ｍａｐ  Ｔａｂｌｅ）、イベント情報テーブルＥＩＴ及びサービス情報テーブルＳＩＴ（Ｓｅｒｖｉｃｅ  Ｉｎｆｏｒｍａｔｉｏｎ  Ｔａｂｌｅ）といった情報から構成されている。ＰＡＴはトランスポートストリーム中に利用されるＰＭＴのＰＩＤが何であるかを示し、ＰＡＴ自身のＰＩＤ配列で登録される。ＰＭＴは、トランスポートストリーム中に含まれる映像・音声・字幕などの各ストリームのＰＩＤと各ＰＩＤに対応するストリームの属性情報を持ち、またトランスポートストリームに関する各種ディスクリプタを持つ。ディスクリプタにはＡＶストリームのコピーを許可・不許可を指示するコピーコントロール情報などがある。ＳＩＴは、ＭＰＥＧ−２  ＴＳ標準でユーザが定義可能な領域を用いて各放送波の標準に従って定義した情報である。ＥＩＴは、番組の名称や放送日時、放送内容など番組に関連する情報を持つ。上述の情報の具体的なフォーマットについては、“ｈｔｔｐ：ｗｗｗ．ａｒｉｂ．ｏｒ．ｊｐ／ｅｎｇｌｉｓｈ／ｈｔｍｌ／ｏｖｅｒｖｉｅｗ／ｄｏｃ／４−ＴＲ−Ｂ１４ｖ４＿４−２ｐ３．ｐｄｆ”に格納されたＡＲＩＢ（Ａｓｓｏｃｉａｔｉｏｎ  ｏｆ  Ｒａｄｉｏ  Ｉｎｄｕｓｔｒｉｅｓ  ａｎｄ  Ｂｕｓｉｎｅｓｓｅｓ）の公開資料を参照されたい。
【００４３】
図４は、ＰＭＴのデータ構造を詳しく説明する図である。ＰＭＴ５０の先頭には、そのＰＭＴに含まれるデータの長さなどを記したＰＭＴヘッダ５１が配置される。その後ろには、トランスポートストリームに関する複数のディスクリプタ５２、・・・、５３が配置される。ディスクリプタ５２、・・・、５３には、前述したコピーコントロール情報などが記載される。ディスクリプタ５２、・・・、５３の後には、トランスポートストリームに含まれる各ストリームに関する複数のストリーム情報５４、・・・、５５が配置される。各ストリーム情報は、ストリームの圧縮コーデックなどを識別するためストリームタイプ５６、ストリームのＰＩＤ５７、ストリームの属性情報（フレームレート、アスペクト比など）が記載されたストリームディスクリプタ５８、・・・、５９から構成される。  
【００４４】
以上がトランスポートストリームと、そのストリーム管理情報についての説明である。続いて、ビデオストリームの詳細について説明する。
【００４５】
実施の形態１の符号化方式で生成されるビデオストリームは、ＭＰＥＧ−２、ＭＰＥＧ−４  ＡＶＣ、ＳＭＰＴＥ（Ｓｏｃｉｅｔｙ  ｏｆ  Ｍｏｔｉｏｎ  Ｐｉｃｔｕｒｅ  ａｎｄ  Ｔｅｌｅｖｉｓｉｏｎ  Ｅｎｇｉｎｅｅｒｓ）  ＶＣ１などの動画圧縮符号化方式による圧縮符号化がなされている。これらの圧縮符号化方式においては、動画像の空間方向および時間方向の冗長性を利用してデータ量の圧縮を行う。時間方向の冗長性を利用する方法として、ピクチャ間予測符号化が用いられる。ピクチャ間予測符号化では、あるピクチャを符号化する際に、表示時間順で前方または後方にあるピクチャを参照ピクチャとする。そして、その参照ピクチャからの動き量を検出し、動き補償を行ったピクチャと符号化対象のピクチャとの差分値に対して空間方向の冗長度を取り除くことによりデータ量の圧縮を行う。
【００４６】
上述したような各符号化方式のビデオストリームは、図５（ａ）に示すようなＧＯＰ（Ｇｒｏｕｐ  ｏｆ  Ｐｉｃｔｕｒｅｓ）構造を有する点で共通している。ビデオストリームは、複数のＧＯＰから構成されており、ＧＯＰを符号化処理の基本単位とすることで動画像の編集やランダムアクセスが可能となっている。ＧＯＰは１つ以上のビデオアクセスユニットにより構成されている。図５（ａ）は、ＧＯＰの一例である。
【００４７】
図５（ａ）に示すように、ＧＯＰは、Ｉピクチャ、Ｐピクチャ、Ｂピクチャ、Ｂｒピクチャといった複数種別のピクチャデータから構成される。
【００４８】
ＧＯＰ構造における個々のピクチャデータのうち、参照ピクチャを持たずに符号化対象ピクチャのみを用いてピクチャ内予測符号化を行うピクチャをＩｎｔｒａ（Ｉ）ピクチャと呼ぶ。ピクチャとは、フレームおよびフィールドの両者を包含する１つの符号化の単位である。また、既に処理済の１枚のピクチャを参照してピクチャ間予測符号化するピクチャをＰピクチャと呼び、既に処理済みの２枚のピクチャを同時に参照してピクチャ間予測符号化するピクチャをＢピクチャと呼び、Ｂピクチャの中で他のピクチャから参照されるピクチャをＢｒピクチャと呼ぶ。また、フレーム構造の場合のフレーム、フィールド構造の場合のフィールドを、ここでは“ビデオアクセスユニット”と呼ぶ。
【００４９】
ビデオアクセスユニットは、ピクチャの符号化データを格納する単位であり、フレーム構造の場合は１フレーム、フィールド構造の場合は１フィールドのデータが格納される。ＧＯＰの先頭は、Ｉピクチャとなる。ＭＰＥＧ−４  ＡＶＣ、ＭＰＥＧ−２の双方について説明を行うとすると説明が冗長になるので、以降の説明では、特に断らない限り、ビデオストリームの圧縮符号化形式はＭＰＥＧ−４  ＡＶＣであるとの前提で説明を進める。
【００５０】
図５（ｂ）は、ＧＯＰの先頭に位置するＩピクチャデータに該当するビデオアクセスユニットの内部構成を示す。ＧＯＰ先頭にあたるビデオアクセスユニットは、複数のネットワーク抽象化レイヤ（Ｎｅｔｗｏｒｋ  Ａｂｓｔｒａｃｔｉｏｎ  Ｌａｙｅｒ：ＮＡＬ）ユニットから構成される。ＧＯＰの先頭にあたるビデオアクセスユニットは、図５（ｂ）に示すように、ＡＵ（Ａｃｃｅｓｓ  Ｕｎｉｔ）識別コード６１、シーケンスヘッダ６２、ピクチャヘッダ６３、補足データ６４、圧縮ピクチャデータ６５及びパディングデータ６６を含むＮＡＬユニットで構成される。
【００５１】
ＡＵ識別コード６１は、ビデオアクセスユニットの先頭を示す開始符号である。シーケンスヘッダ６２は、複数ビデオアクセスユニットから構成される再生シーケンスでの共通の情報を格納している。共通の情報としては、解像度、フレームレート、アスペクト比、ビットレートなどがある。ピクチャヘッダ６３は、ピクチャ全体の符号化の方式などの情報を格納している。補足データ６４は、圧縮データの復号化に必須ではない付加データであり、例えば、映像と同期してＴＶに表示するクローズドキャプションの文字情報やＧＯＰ構造情報などを格納している。圧縮ピクチャデータ６５には、圧縮符号化されたピクチャのデータが格納される。パディングデータ６６には、形式を整えるための意味のないデータが格納される。例えば、決められたビットレートを保つためのスタッフィングデータとして用いる。
【００５２】
ＡＵ識別コード６１、シーケンスヘッダ６２、ピクチャヘッダ６３、補足データ６４、圧縮ピクチャデータ６５、パディングデータ６６の中身の構成は、ビデオの符号化方式によって異なる。
【００５３】
例えば、ＭＰＥＧ−４  ＡＶＣの場合であれば、ＡＵ識別コード６１はＡＵデリミタ（Ａｃｃｅｓｓ  Ｕｎｉｔ  Ｄｅｌｉｍｉｔｅｒ）に、シーケンスヘッダ６２はＳＰＳ（Ｓｅｑｕｅｎｃｅ  Ｐａｒａｍｅｔｅｒ  Ｓｅｔ）に、ピクチャヘッダ６３はＰＰＳ（Ｐｉｃｔｕｒｅ  Ｐａｒａｍｅｔｅｒ  Ｓｅｔ）に、補足データ６４はＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ  Ｅｎｈａｎｃｅｍｅｎｔ  Ｉｎｆｏｒｍａｔｉｏｎ）に、圧縮ピクチャデータ６５は複数個のスライス（ｓｌｉｃｅ）に、パディングデータ６６はＦｉｌｌｅｒＤａｔａに対応する。
【００５４】
例えば、ＭＰＥＧ−２の場合であれば、シーケンスヘッダ６２はｓｅｑｕｅｎｃｅ＿Ｈｅａｄｅｒ、ｓｅｑｕｅｎｃｅ＿ｅｘｔｅｎｓｉｏｎ、ｇｒｏｕｐ＿ｏｆ＿ｐｉｃｔｕｒｅ＿ｈｅａｄｅｒに、ピクチャヘッダ６３はｐｉｃｔｕｒｅ＿ｈｅａｄｅｒ、ｐｉｃｔｕｒｅ＿ｃｏｄｉｎｇ＿ｅｘｔｅｎｓｉｏｎに、補足データ６４はｕｓｅｒ＿ｄａｔａに、圧縮ピクチャデータ６５は複数個のスライスに対応する。ＡＵ識別コード６１は存在しないが、それぞれのヘッダのスタートコードを使えば、ビデオアクセスユニットの切れ目を判断できる。トランスポートストリームに含まれる各ストリームはＰＩＤと呼ばれるストリーム識別ＩＤによって識別される。このＰＩＤのパケットを抽出することでデコーダは、対象のストリームを抽出することができる。ＰＩＤとストリームの対応は以降で説明するＰＭＴパケットのディスクリプタに格納される。
【００５５】
個々のピクチャデータは図６の変換の過程を経て、ＰＥＳ（Ｐａｃｋｅｔｉｚｅｄ  Ｅｌｅｍｅｎｔａｒｙ  Ｓｔｒｅａｍ）パケットのペイロードに配置される。図６は、個々のピクチャデータがＰＥＳパケットに変換される過程を示す図である。
【００５６】
図６における第１段目はビデオストリームのビデオフレーム列７０を示す。第２段目は、ＰＥＳパケット列７１を示す。図６の矢印ｙｙ１、ｙｙ２、ｙｙ３、ｙｙ４に示すように、ビデオストリームにおける複数のＶｉｄｅｏ  Ｐｒｅｓｅｎｔａｔｉｏｎ  ＵｎｉｔであるＩピクチャ、Ｂピクチャ、Ｐピクチャは、ピクチャ毎に分割され、ＰＥＳパケットのペイロードに格納される。各ＰＥＳバケットはＰＥＳヘッダを持ち、ＰＥＳヘッダには、ピクチャの表示時刻であるＰＴＳ（Ｐｒｅｓｅｎｔａｔｉｏｎ  Ｔｉｍｅ−Ｓｔａｍｐ）やピクチャの復号化時刻であるＤＴＳ（Ｄｅｃｏｄｉｎｇ  Ｔｉｍｅ−Ｓｔａｍｐ）が格納される。
【００５７】
個々のピクチャデータを変換することで得られたＰＥＳパケットは複数に分割され、個々の分割部分は、ＴＳパケットのペイロードに配置される。図７（ａ）は、トランスポートストリームを構成するＴＳパケット８１ａ、８１ｂ、８１ｃ、８１ｄのデータ構造を示している。ＴＳパケット８１ａ、８１ｂ、８１ｃ、８１ｄのデータ構造は同一であるので、ＴＳパケット８１ａのデータ構造について説明する。ＴＳパケット８１ａは、４ＢｙｔｅのＴＳヘッダ８２と、アダプテーションフィールド８３と、ＴＳペイロード８４から構成される、１８８Ｂｙｔｅ固定長のパケットである。ＴＳヘッダ８２は、図７（ｂ）に示すように、ｔｒａｎｓｐｏｒｔ−ｐｒｉｏｒｉｔｙ８５、ＰＩＤ８６、ａｄａｐｔａｔｉｏｎ＿ｆｉｅｌｄ＿ｃｏｎｔｒｏｌ８７などから構成される。
【００５８】
ＰＩＤ８６は、前述したとおりトランスポートストリームに多重化されているストリームを識別するためのＩＤである。
【００５９】
ｔｒａｎｓｐｏｒｔ＿ｐｒｉｏｒｉｔｙ８５は、同一ＰＩＤのＴＳパケットの中のパケットの種別を識別するための情報である。
【００６０】
また、以上の各部は、全て具備する必要がある部分ではなく、アダプテーションフィールドとＴＳペイロードはどちらかだけが存在する場合と両方が存在する場合がある。ここで、ａｄａｐｔａｔｉｏｎ＿ｆｉｅｌｄ＿ｃｏｎｔｒｏｌ８７は、アダプテーションフィールド８３とＴＳペイロード８４が存在するかを示すものである。ａｄａｐｔａｔｉｏｎ＿ｆｉｅｌｄ＿ｃｏｎｔｒｏｌ８７が示す値が“１”の場合はＴＳペイロード８４のみが存在し、ａｄａｐｔａｔｉｏｎ＿ｆｉｅｌｄ＿ｃｏｎｔｒｏｌ８７が示す値が“２”の場合はアダプテーションフィールド８３のみが存在し、ａｄａｐｔａｔｉｏｎ＿ｆｉｅｌｄ＿ｃｏｎｔｒｏｌ８７が示す値が“３”の場合はアダプテーションフィールド８３とＴＳペイロード８４の両方が存在することを示す。
【００６１】
アダプテーションフィールド８３は、ＰＣＲなどの情報や、ＴＳパケットを１８８バイト固定長にするためにスタッフィングするデータの格納領域である。ＴＳペイロード８４にはＰＥＳパケットが分割されて格納される。
【００６２】
以上のように、個々のピクチャデータは、ＰＥＳパケット化、ＴＳパケット化の過程を経てトランスポートストリームにされており、また、ピクチャデータを構成する個々のパラメータは、ＮＡＬユニットに変換されていることがわかる。
【００６３】
また、トランスポートストリームに含まれるＴＳパケットには、映像・音声・字幕などの各ストリーム以外にもＰＡＴ、ＰＭＴ、ＰＣＲ（Ｐｒｏｇｒａｍ  Ｃｌｏｃｋ  Ｒｅｆｅｒｅｎｃｅ）などがある。これらのパケットが上述したＰＳＩと呼ばれている。このとき、ＰＡＴが含まれるＴＳパケットのＰＩＤは０である。ＰＣＲは、ＴＳパケットのデコーダへの到着時刻とＰＴＳ・ＤＴＳの時間軸であるＳＴＣ（Ｓｙｓｔｅｍ  Ｔｉｍｅ  Ｃｌｏｃｋ）の同期を取るために、そのＰＣＲパケットがデコーダに転送されるタイミングに対応するＳＴＣ時間の情報を持つ。
【００６４】
以上がデジタルテレビの放送波等で伝送される一般的なストリーム構造の説明である。
【００６５】
次に、立体視に使う視差画像を実現するための一般的な映像フォーマットについて説明する。
【００６６】
視差画像を使った立体視の方式では、右目に入る映像と、左目に入る映像とを各々用意し、それぞれの目に対応したピクチャだけが入るようにして立体視を行う。図８は、ユーザの顔を左側に描き、右側には、対象物たる恐竜の骨格を左目から見た場合の例と、対象物たる恐竜の骨格を、右目から見た場合の例とを示している。右目及び左目の透光、遮光から繰り返されれば、ユーザの脳内では、目の残像反応により左右のシーンの重合せがなされ、顔の中央の延長線上に立体映像が存在すると認識することができる。
【００６７】
視差画像のうち、左目に入る画像を左目画像（Ｌ画像）といい、右目に入る画像を右目画像（Ｒ画像）という。そして、各々のピクチャが、Ｌ画像になっている動画像をレフトビュービデオといい、各々のピクチャがＲ画像になっている動画像をライトビュービデオという。
【００６８】
レフトビュービデオとライトビュービデオを合成して圧縮符号化する３Ｄの映像方式には、フレーム互換方式とマルチビュー符号化方式がある。
【００６９】
まず１つ目のフレーム互換方式は、レフトビュービデオとライトビュービデオの対応する各ピクチャをそれぞれ間引きまたは縮小した上で一つのピクチャに合成して、通常の動画像圧縮符号化を行う方式である。一例としては、図９に示すような、Ｓｉｄｅ−ｂｙ−Ｓｉｄｅ方式がある。Ｓｉｄｅ−ｂｙ−Ｓｉｄｅ方式では、レフトビュービデオとライトビュービデオの対応する各ピクチャをそれぞれ水平方向に１／２に圧縮した上で、左右に並べることで一つのピクチャに合成する。合成されたピクチャによる動画像は、通常の動画像圧縮符号化が行われてストリーム化される。一方再生時は、ストリームを通常の動画像圧縮符号化方式に基づいて動画像に復号化される。復号化された動画像の各ピクチャは、左右画像に分割されて、それぞれ水平方向に２倍に伸長されることによって、レフトビュービデオとライトビュービデオの対応する各ピクチャが得られる。得られたレフトビュービデオのピクチャ（Ｌ画像）とライトビュービデオのピクチャ（Ｒ画像）を交互に表示することによって、図８に示すような立体視画像を得ることができる。フレーム互換方式にはＳｉｄｅ−ｂｙ−Ｓｉｄｅ方式の他に、左右画像を上下に並べるＴｏｐ  ａｎｄ  Ｂｏｔｔｏｍ方式や、ピクチャ内の１ライン毎に左右画像を交互に配置するＬｉｎｅ  Ａｌｔｅｒｎａｔｉｖｅ方式などがある。
【００７０】
次に、２つ目のマルチビュー符号化方式について説明する。マルチビュー符号化方式の例として、３Ｄ映像を高効率に圧縮する符号化方式である、ＭＰＥＧ−４  ＭＶＣ（Ｍｕｌｔｉｖｉｅｗ  Ｖｉｄｅｏ  Ｃｏｄｉｎｇ）と呼ばれるＭＰＥＧ−４  ＡＶＣ／Ｈ．２６４の修正規格が挙げられる。ＩＳＯ／ＩＥＣ  ＭＰＥＧとＩＴＵ−Ｔ  ＶＣＥＧの共同プロジェクトであるＪｏｉｎｔ  Ｖｉｄｅｏ  Ｔｅａｍ（ＪＶＴ）は、２００８年７月にＭｕｌｔｉｖｉｅｗ  Ｖｉｄｅｏ  Ｃｏｄｉｎｇ（ＭＶＣ）と呼ばれるＭＰＥＧ−４  ＡＶＣ／Ｈ．２６４の修正規格の策定を完了した。
【００７１】
マルチビュー符号化方式では、レフトビュービデオ、ライトビュービデオをデジタル化し、圧縮符号化することにより得られるビデオストリームである。
【００７２】
図１０は、マルチビュー符号化方式による立体視のためのレフトビュービデオストリーム、ライトビュービデオストリームの内部構成の一例を示す図である。
【００７３】
本図の第２段目は、レフトビュービデオストリームの内部構成を示す。このストリームには、ピクチャデータＩ１、Ｐ２、Ｂｒ３、Ｂｒ４、Ｐ５、Ｂｒ６、Ｂｒ７、Ｐ９というピクチャデータが含まれている。これらのピクチャデータは、ＤＴＳに従いデコードされる。第１段目は、左目画像を示す。そうしてデコードされたピクチャデータＩ１、Ｐ２、Ｂｒ３、Ｂｒ４、Ｐ５、Ｂｒ６、Ｂｒ７、Ｐ９をＰＴＳに従い、Ｉ１、Ｂｒ３、Ｂｒ４、Ｐ２、Ｂｒ６、Ｂｒ７、Ｐ５の順序で再生することで、左目画像が再生されることになる。本図において、参照ピクチャを持たずに符号化対象ピクチャのみを用いてピクチャ内予測符号化を行うピクチャをＩピクチャと呼ぶ。ピクチャとは、フレームおよびフィールドの両者を包含する１つの符号化の単位である。また、既に処理済の１枚のピクチャを参照してピクチャ間予測符号化するピクチャをＰピクチャと、既に処理済みの２枚のピクチャを同時に参照してピクチャ間予測符号化するピクチャをＢピクチャと、Ｂピクチャの中で他のピクチャから参照されるピクチャをＢｒピクチャとそれぞれ呼ばれる。
【００７４】
第４段目は、ライトビュービデオストリームの内部構成を示す。このレフトビュービデオストリームは、Ｐ１、Ｐ２、Ｂ３、Ｂ４、Ｐ５、Ｂ６、Ｂ７、Ｐ８というピクチャデータが含まれている。これらのピクチャデータは、ＤＴＳに従いデコードされる。第３段目は、右目画像を示す。そうしてデコードされたピクチャデータＰ１、Ｐ２、Ｂ３、Ｂ４、Ｐ５、Ｂ６、Ｂ７、Ｐ８をＰＴＳに従い、Ｐ１、Ｂ３、Ｂ４、Ｐ２、Ｂ６、Ｂ７、Ｐ５の順序で再生することで、右目画像が再生されることになる。ただし、継時分離方式の立体視再生では、同じＰＴＳが付された左目画像と右目画像とのペアうち一方の表示を、ＰＴＳの間隔の半分の時間（以下、「３Ｄ表示ディレイ」という）分だけ遅延して表示する。
【００７５】
第５段目は、３Ｄ眼鏡２０の状態をどのように変化させるかを示す。この第５段目に示すように、左目画像の視聴時は、右目のシャッターを閉じ、右目画像の視聴時は、左目のシャッターを閉じていることがわかる。
【００７６】
これらのレフトビュービデオストリーム、ライトビュービデオストリームは、時間方向の相関特性を利用したピクチャ間予測符号化に加えて、視点間の相関特性を利用したピクチャ間予測符号化によって圧縮されている。ライトビュービデオストリームのピクチャは、レフトビュービデオストリームの同じ表示時刻のピクチャを参照して圧縮されている。
【００７７】
例えば、ライトビュービデオストリームの先頭Ｐピクチャは、レフトビュービデオストリームのＩピクチャを参照し、ライトビュービデオストリームのＢピクチャは、レフトビュービデオストリームのＢｒピクチャを参照し、ライトビュービデオストリームの二つ目のＰピクチャは、レフトビュービデオストリームのＰピクチャを参照している。
【００７８】
そして、圧縮符号化されたレフトビュービデオストリーム及びライトビュービデオストリームのうち、単体で復号化が可能になるものを“ベースビュービデオストリーム”という。また、レフトビュービデオストリーム及びライトビュービデオストリームのうち、ベースビュービデオストリームを構成する個々のピクチャデータとのビュー間でのフレーム間相関特性に基づき圧縮符号化されており、ベースビュービデオストリームが復号された上で復号可能になるビデオストリームを、“ディペンデントビュービデオストリーム”という。また、ベースビュービデオストリームとディペンデントビュービデオストリームを合わせて、”マルチビュービデオストリーム”と呼ぶ。なおベースビュービデオストリームとディペンデントビュービデオストリームは、それぞれ別々のストリームとして格納や伝送されてもよいし、例えばＭＰＥＧ２−ＴＳなどの同一のストリームに多重化されてもよい。
【００７９】
次に、ベースビュービデオストリームとディペンデントビュービデオストリームのアクセスユニットの関係について説明する。図１１はベースビュービデオストリームの各ピクチャと右目映像ビデオストリームの各ピクチャのビデオアクセスユニットの構成を示している。前述したとおり、図１１上段のように、ベースビュービデオストリームは、各ピクチャが１つのビデオアクセスユニットとして構成される。図１１下段のように、ディペンデントビュービデオストリームも同様に、各ピクチャが１つのビデオアクセスユニットを構成するが、ベースビュービデオストリームのビデオアクセスユニットとはデータ構造が異なる。また、図１１下段のように、ベースビュービデオストリームのビデオアクセスユニットは、表示時刻で対応するディペンデントビュービデオストリームのビデオアクセスユニットによって、３Ｄビデオアクセスユニット９０を構成し、後述するビデオデコーダは、この３Ｄビデオアクセスユニット単位でデコードおよび表示を行う。なお、ＭＰＥＧ−４  ＭＶＣのビデオコーデックでは、１つのビューにおける各ピクチャ（ここでいうビデオアクセスユニット）を「ビューコンポーネント」と定義し、マルチビューにおける同一時刻のピクチャ群（ここでいう３Ｄビデオアクセスユニット）を「アクセスユニット」と定義しているが、本実施の形態では図１１で説明した定義で説明を行う。
【００８０】
図１２はＡＶストリーム中におけるベースビュービデオストリームとディペンデントビュービデオストリームの各ビデオアクセスユニットに割り当てる表示時刻（ＰＴＳ）、デコード時刻（ＤＴＳ）の関係の例を示している。
【００８１】
同時刻の視差画像を格納するベースビュービデオストリームのピクチャとディペンデントビュービデオストリームのピクチャは、同一のＤＴＳ／ＰＴＳになるように設定される。これは、ピクチャ間予測符合化の参照関係にあるベースビューピクチャとディペンデントビューピクチャのデコード／表示順を同一に設定することで実現できる。このように構成することで、ベースビュービデオストリームのピクチャとディペンデントビュービデオストリームのピクチャをデコードするビデオビコーダは、３Ｄビデオアクセスユニット単位でデコードおよび表示を行うことができる。
【００８２】
図１３はベースビュービデオストリームとディペンデントビュービデオストリームのＧＯＰ構成を示している。ベースビュービデオストリームのＧＯＰ構造は、従来のビデオストリームの構成と同じであり、複数のビデオアクセスユニットで構成される。また、ディペンデントビュービデオストリームは、従来のビデオストリームと同様に、複数のディペンデントＧＯＰ１００、１０１、・・・から構成される。また、各ディペンデントＧＯＰは、複数のビデオアクセスユニットＵ１００、Ｕ１０１、Ｕ１０２、・・・から構成される。各ディペンデントＧＯＰの先頭ピクチャは、３Ｄ映像を再生する際に、ベースビュービデオストリームのＧＯＰ先頭のＩピクチャとペアで表示されるピクチャであり、ベースビュービデオストリームのＧＯＰ先頭のＩピクチャのＰＴＳと同じＰＴＳが付与されたピクチャである。
【００８３】
図１４（ａ）、（ｂ）は、ディペンデントＧＯＰに含まれるビデオアクセスユニットの構成を示している。ビデオアクセスユニットは、図１４（ａ）、（ｂ）に示すように、ＡＵ識別コード１１１、シーケンスヘッダ１１２、ピクチャヘッダ１１３、補足データ１１４、圧縮ピクチャデータ１１５、パディングデータ１１６、シーケンス終端コード１１７及びストリーム終端コード１１８から構成されている。ＡＵ識別コード１１１は、図４で示したＡＵ識別コード６１と同様に、アクセスユニットの先頭を示す開始符号が格納される。シーケンスヘッダ１１２、ピクチャヘッダ１１３、補足データ１１４、圧縮ピクチャデータ１１５、パディングデータ１１６、のそれぞれは、図４で示したシーケンスヘッダ６２、ピクチャヘッダ６３、補足データ６４、圧縮ピクチャデータ６５、パディングデータ６６と同様であるので、ここでの説明は省略する。シーケンス終端コード１１７には、再生シーケンスの終端を示すデータが格納される。ストリーム終端コード１１８には、ビットストリームの終端を示すデータが格納される。
【００８４】
図１４（ａ）に示すディペンデントＧＯＰ先頭のビデオアクセスユニットは、圧縮ピクチャデータ１１５として、ベースビュービデオストリームのＧＯＰ先頭のＩピクチャと同時刻に表示されるピクチャのデータが必ず格納され、ＡＵ識別コード１１１、シーケンスヘッダ１１２及びピクチャヘッダ１１３にもデータが必ず格納される。補足データ１１４、パディングデータ１１６、シーケンス終端コード１１７及びストリーム終端コード１１８にはデータが格納されていてもよいし、格納されなくてもよい。シーケンスヘッダ１１２のフレームレート、解像度、アスペクト比の値は、対応するベースビュービデオストリームのＧＯＰ先頭のビデオアクセスユニットに含まれるシーケンスヘッダのフレームレート、解像度、アスペクト比と同じである。図１４（ｂ）に示すようにＧＯＰ先頭以外のビデオアクセスユニットは、ＡＵ識別コード１１１、圧縮ピクチャデータ１１５にはデータが必ず格納され、ピクチャヘッダ１１３、補足データ１１４、パディングデータ１１６、シーケンス終端コード１１７、ストリーム終端コード１１８にはデータは格納されていてもよいし、格納されなくてもよい。
【００８５】
以上が立体視に使う視差画像を実現するための一般的な映像フォーマットについての説明である。
【００８６】
２．２  構成
２．２．１  映像送受信システム１０００について
映像送受信システム１０００は、図１５に示すように、デジタルテレビ（再生装置）１０と送信装置２００とから構成されている。
【００８７】
送信装置２００は、３Ｄ映像と２Ｄ映像とが混在する３Ｄ番組を送信する装置である。３Ｄ番組中の３Ｄ映像とは、当該番組の本編を表す映像、例えば３Ｄ番組がドラマであればそのドラマの映像であり、左目映像と右目映像とによって実現される。３Ｄ番組中の２Ｄ映像とは、当該番組の本編以外の映像、例えばコマーシャルメッセージの映像であり、立体視（３Ｄ再生）に用いられることのない２Ｄ映像である。以下において、立体視（３Ｄ再生）に用いられることのない２Ｄ映像を平面視専用の映像という。
【００８８】
送信装置２００は、３Ｄ映像を実現するための左目映像と、平面視専用の映像とを、それぞれ符号化してトランスポートストリームを生成し、これらトランスポートストリームを多重化し放送波として再生装置１０へ送信する。
【００８９】
また、送信装置２００は、３Ｄ映像を実現するための右目映像を符号化してトランスポートストリームを生成し、生成した右目映像のトランスポートストリームをインターネットのようなＩＰネットワークを介して、再生装置１０へ送信する。
【００９０】
再生装置１０は、符号化された左目映像及び平面視専用の映像を放送波として受信、復号する。さらに再生装置１０は、符号化された右目映像をＩＰネットワークを介して受信、復号する。再生装置１０は、復号した左目映像と右目映像とを交互に再生することで、視聴者に立体視させる。また、再生装置１０は、復号した平面視専用の映像を従来と同様に平面の映像として再生する。
【００９１】
以下、各装置の構成について具体的に説明する。
【００９２】
２．２．２  送信装置２００について
送信装置２００は、図１６に示すように、映像格納部２０１、ストリーム管理情報格納部２０２、字幕ストリーム格納部２０３、オーディオストリーム格納部２０４、第１ビデオ符号化部２０５、第２ビデオ符号化部２０６、ビデオストリーム格納部２０７、第１多重化処理部２０８、第２多重化処理部２０９、第１トランスポートストリーム格納部２１０、第２トランスポートストリーム格納部２１１、第１送信部２１２及び第２送信部２１３から構成されている。
【００９３】
（１）映像格納部２０１
映像格納部２０１は、放送対象（送信対象）となる３Ｄ番組を構成する複数の映像（左目映像、右目映像、及び平面視専用の映像）を格納している記憶領域である。
【００９４】
映像格納部２０１に格納される各映像には、当該映像が３Ｄ映像であるのか平面視専用の映像であるのかを区別する映像識別子が対応付けられている。
【００９５】
また、映像格納部２０１には、各映像は、左目映像と平面視専用の映像とからなるグループ（左目用グループ）と、右目映像と平面視専用の映像とからなるグループ（右目用グループ）とに分けられ、さらに各グループにおいては再生順となるよう格納されている。この時点では、平面視専用の映像は、どちらのグループにも属することとなる。
【００９６】
（２）ストリーム管理情報格納部２０２
ストリーム管理情報格納部２０２は、左目映像及び平面視専用の映像とともに放送波として送信されるＳＩ（Ｓｅｒｖｉｃｅ  Ｉｎｆｏｒｍａｔｉｏｎ）／ＰＳＩ（Ｐｒｏｇｒａｍ  Ｓｐｅｃｉｆｉｃ  Ｉｎｆｏｒｍａｔｉｏｎ）を格納している記憶領域である。
【００９７】
ＳＩ／ＰＳＩには、放送局、チャンネル（サービス）の詳細情報、及び番組詳細情報などが記載されており、これらの記載内容については既知であるため、ここでの説明は省略する。
【００９８】
（３）字幕ストリーム格納部２０３
字幕ストリーム格納部２０３は、映像に重畳して再生される字幕に係る字幕データを格納している記憶領域である。
【００９９】
字幕データは、既に字幕に対してＭＰＥＧ−１、ＭＰＥＧ−２などの方式を使ってエンコードされて字幕ストリーム格納部２０３に格納されている。
【０１００】
（４）オーディオストリーム格納部２０４
オーディオストリーム格納部２０４は、リニアＰＣＭなどの方式で圧縮・符号化されたオーディオデータを格納している記憶領域である。
【０１０１】
（５）第１ビデオ符号化部２０５
第１ビデオ符号化部２０５は、映像格納部２０１に格納されている左目映像及び平面視専用の映像を、ＭＰＥＧ２  Ｖｉｄｅｏ方式による符号化を行うものである。
【０１０２】
具体的には、第１ビデオ符号化部２０５は、予め定められた符号化順序に基づいて、左目用グループから左目映像又は平面視専用の映像を映像格納部２０１から読み出す。
【０１０３】
第１ビデオ符号化部２０５は、読み出した映像に対応付けられた映像識別子を用いて当該映像が３Ｄ映像（この場合、左目映像）であるのか平面視専用の映像であるのかを識別する。
【０１０４】
第１ビデオ符号化部２０５は、読み出した映像を圧縮・符号化により、映像（ピクチャ）単位のビデオアクセスユニットを生成する際に、補足データには映像識別子を用いた判別結果に応じて、圧縮・符号化した映像が平面視専用の映像であるか否かを示す２Ｄ映像フラグを格納する。
【０１０５】
第１ビデオ符号化部２０５は、圧縮・符号化された左目映像及び平面視専用の映像を、ビデオストリーム格納部２０７へ格納する。
【０１０６】
なお、第１ビデオ符号化部２０５で圧縮・符号化された左目映像及び平面視専用の映像が混在するビデオストリームを、以下においては左目用ビデオストリームという。左目用ビデオストリームがＥｌｅｍｅｎｔａｒｙ  Ｓｔｒｅａｍ（ＥＳ）に該当する。
【０１０７】
また、ＭＰＥＧ２  Ｖｉｄｅｏ方式による符号化は既知の技術であるので、ここでの説明は省略する。
【０１０８】
（６）第２ビデオ符号化部２０６
第２ビデオ符号化部２０６は、映像格納部２０１に格納されている右目映像を、ＭＰＥＧ２  Ｖｉｄｅｏ方式による符号化を行うものである。
【０１０９】
具体的には、第２ビデオ符号化部２０６は、予め定められた符号化順序に基づいて、右目用グループから右目映像又は平面視専用の映像を映像格納部２０１から読み出す。
【０１１０】
第２ビデオ符号化部２０６は、読み出した映像に対応付けられた映像識別子を用いて当該映像が３Ｄ映像（この場合、右目映像）であるのか平面視専用の映像であるのかを識別する。
【０１１１】
第２ビデオ符号化部２０６は、識別結果により読み出した映像が３Ｄ映像であると判別した場合には、当該映像（右目映像）の圧縮・符号化を行う。  第２ビデオ符号化部２０６は、識別結果により読み出した映像が平面視専用の映像であると判別した場合には、当該映像（平面視専用の映像）の圧縮・符号化の代わりに、黒画面の圧縮・符号化を行う。あるいは、当該映像（平面視専用の映像）の圧縮時のビットレートを、３Ｄ映像（この場合、右目映像）の場合に比較して、低く設定して圧縮・符号化を行っても良い。
【０１１２】
なお、第２ビデオ符号化部２０６で圧縮・符号化された右目映像及び黒画面が混在するビデオストリームを、以下においては右目用ビデオストリームという。右目用ビデオストリームがＥＳに該当する。
【０１１３】
（７）ビデオストリーム格納部２０７
ビデオストリーム格納部２０７は、第１ビデオ符号化部２０５により圧縮・符号化された左目映像及び平面視専用の映像を格納するための記憶領域である。
【０１１４】
（８）第１多重化処理部２０８
第１多重化処理部２０８は、ストリーム管理情報格納部２０２、字幕ストリーム格納部２０３、オーディオストリーム格納部２０４及びビデオストリーム格納部２０７に格納された各種情報（ＳＩ／ＰＳＩ、字幕データ、圧縮・符号化されたオーディオデータ及び圧縮・符号化された映像）に対して、必要に応じてパケット化した後、多重化して、ＭＰＥＧ２−ＴＳ形式の１つ以上のＴＳ（Ｔｒａｎｓｐｏｒｔ  Ｓｔｒｅａｍ）を生成し、生成したＴＳを第１トランスポートストリーム格納部２１０へ格納する。
【０１１５】
なお、以降において、第１多重化処理部２０８で生成されたＴＳを左目用ＴＳという。
【０１１６】
（９）第２多重化処理部２０９
第２多重化処理部２０９は、第２ビデオ符号化部２０６で圧縮・符号化された映像に対して、必要に応じてパケット化した後、多重化して、ＭＰＥＧ２−ＴＳ形式の１つ以上のＴＳを生成し、生成したＴＳを第２トランスポートストリーム格納部２１１へ格納する。
【０１１７】
なお、以降において、第２多重化処理部２０９で生成されたＴＳを右目用ＴＳという。
【０１１８】
（１０）第１トランスポートストリーム格納部２１０
第１トランスポートストリーム格納部２１０は、第１多重化処理部２０８で生成された左目用ＴＳを格納するための記憶領域である。
【０１１９】
（１１）第２トランスポートストリーム格納部２１１
第２トランスポートストリーム格納部２１１は、第２多重化処理部２０９で生成された右目用ＴＳを格納するための記憶領域である。
【０１２０】
（１２）第１送信部２１２
第１送信部２１２は、第１トランスポートストリーム格納部２１０に格納された左目用ＴＳを、放送波として送信する。
【０１２１】
（１３）第２送信部２１３
第２送信部２１３は、第２トランスポートストリーム格納部２１１に格納された右目用ＴＳを、ＩＰネットワークを介して外部へ送信する。
【０１２２】
２．２．３  再生装置１０について
再生装置１０は、図１７に示すように、チューナ３０１、ＮＩＣ（Ｎｅｔｗｏｒｋ  Ｉｎｔｅｒｆａｃｅ  Ｃａｒｄ）３０２、ユーザーインターフェイス部３０３、第１多重分離部３０４、第２多重分離部３０５、第１ビデオ復号部３０６、第２ビデオ復号部３０７、字幕復号部３０８、ＯＳＤ（Ｏｎ−ｓｃｒｅｅｎ  ｄｉｓｐｌａｙ）作成部３０９、オーディオ復号部３１０、判定部３１１、再生処理部３１２及びスピーカ３１３から構成されている。
【０１２３】
（１）チューナ３０１
チューナ３０１は、デジタル放送波（ここでは、左目用ＴＳ）を受信し、受信した放送波の信号を復調するものである。
【０１２４】
チューナ３０１は、復調した左目用ＴＳを第１多重分離部３０４へ出力する。
【０１２５】
（２）ＮＩＣ３０２
ＮＩＣ３０２は、ＩＰネットワークと接続されており、外部から出力されたストリーム（ここでは、右目用ＴＳ）を受信するものである。
【０１２６】
ＮＩＣ３０２は、受信した右目用ＴＳを第２多重分離部３０５へ出力する。
【０１２７】
（３）ユーザーインターフェイス部３０３
ユーザーインターフェイス部３０３は、ユーザによる選局の指示や電源オフの指示をリモコン３３０から受け付ける。
【０１２８】
ユーザーインターフェイス部３０３がユーザから選局の指示（チャネル変更の指示）を受け付けると、チューナ３０１で設定されているチャネルを、ユーザから指示されたチャネルへと変更する。これにより、チューナ３０１は、ユーザから選局された放送波を受信することとなる。
【０１２９】
ユーザーインターフェイス部３０３は、ユーザから電源オフの指示を受け付けると、再生装置１０は電源オフされる。
【０１３０】
（４）第１多重分離部３０４
第１多重分離部３０４は、チューナ３０１で受信・復調された左目用ＴＳを、平面視専用の映像と左目映像とが混在する左目用ビデオストリーム、ＳＩ／ＰＳＩ、字幕データのストリーム及びオーディオデータのストリームに分離し、分離した左目用ビデオストリームを第１ビデオ復号部３０６へ、字幕データのストリームを字幕復号部３０８へ、オーディオデータのストリームをオーディオ復号部３１０へ、それぞれ出力する。
【０１３１】
（５）第２多重分離部３０５
第２多重分離部３０５は、ＮＩＣ３０２で受信された右目用ＴＳから、黒画面と右目映像とが混在する右目用ビデオストリームを分離し、分離した右目用ビデオストリームを第２ビデオ復号部３０７へ出力する。
【０１３２】
（６）第１ビデオ復号部３０６
第１ビデオ復号部３０６は、第１多重分離部３０４から受け取った左目用ビデオストリームを復号し、復号された各映像を再生順序に従って順次、再生処理部３１２へ出力する。なお、２Ｄ映像を表示するのみを行う再生装置での再生を可能とするために、映像の出力周期は、従来の再生装置の表示周期（例えば１／６０秒）と同じ周期である。
【０１３３】
また、第１ビデオ復号部３０６は、復号した各映像に対応する補足データに含まれる映像識別子を判定部３１１へ出力する。
【０１３４】
（７）第２ビデオ復号部３０７
第２ビデオ復号部３０７は、第２多重分離部３０５から受け取った右目用ビデオストリームを復号し、復号された各映像を再生順序に従って順次、再生処理部３１２へ出力する。
【０１３５】
なお、映像の出力周期は、第１ビデオ復号部３０６における出力周期と同じである。
【０１３６】
（８）字幕復号部３０８
字幕復号部３０８は、第１多重分離部３０４から受け取った字幕データのストリームを復号して字幕を生成し、生成した字幕を再生処理部３１２へ出力する。
【０１３７】
（９）ＯＳＤ作成部３０９
ＯＳＤ作成部３０９は、現在受信中の番組とともにチャネル番号、放送局名などを表示するために、これら情報を生成し、生成した情報（チャネル番号、放送局名など）を再生処理部３１２へ出力する。
【０１３８】
（１０）オーディオ復号部３１０
オーディオ復号部３１０は、第１多重分離部３０４から逐次受け取ったオーディオデータのストリームを復号して、オーディオデータを生成し、生成したオーディオデータを音声としてスピーカ３１３を介して出力する。
【０１３９】
（１１）判定部３１１
判定部３１１は、第１ビデオ復号部３０６から受け取った映像識別子が平面視専用の映像を示すか否かを判断、つまり映像識別子に対応する復号された映像（再生対象の映像）が平面視専用の映像であるか３Ｄ映像（左目映像）であるかを判定し、その結果を再生処理部３１２へ出力する。
【０１４０】
（１２）再生処理部３１２
再生処理部３１２は、図１７に示すように、第１フレームバッファ３２１、第２フレームバッファ３２２、フレームバッファ切替部３２３、切替制御部３２４、重畳部３２５及び表示部３２６から構成されている。
【０１４１】
第１フレームバッファ３２１は、第１ビデオ復号部３０６で復号された各映像を映像単位（フレーム単位）に格納するための記憶領域である。
【０１４２】
第２フレームバッファ３２２は、第２ビデオ復号部３０７で復号された各映像を映像単位（フレーム単位）に格納するための記憶領域である。
【０１４３】
フレームバッファ切替部３２３は、再生対象（出力対象）の映像を切り替えるために、重畳部３２５の接続先を、第１フレームバッファ３２１及び第２フレームバッファ３２２の何れかに切り替える。具体的には、３Ｄ再生を行う場合には、フレームバッファ切替部３２３は、重畳部３２５の接続先として第１フレームバッファ３２１及び第２フレームバッファ３２２を交互に切り替えることで、左目映像及び右目映像を交互に再生することができるので、立体視が可能となる。切り替えの周期は、例えば１／１２０秒である。
【０１４４】
切替制御部３２４は、フレームバッファ切替部３２３の切替先を制御するものである。具体的には、切替制御部３２４は、判定部３１１から受け取った判定結果が再生対象の映像が２Ｄであることを示す場合には、以降の判定結果において再生対象の映像が２Ｄでないことが判定されるまでは、フレームバッファ切替部３２３の接続先を第１フレームバッファ３２１のままとする。切替制御部３２４は、判定部３１１から受け取った判定結果が再生対象の映像が２Ｄでないこと、つまり再生対象が３Ｄ映像であることを示す場合には、映像の表示周期（例えば１／１２０秒）でフレームバッファ切替部３２３の接続先として第１フレームバッファ３２１及び第２フレームバッファ３２２を交互に切り替える。
【０１４５】
重畳部３２５は、表示周期（１／１２０秒）に基づいて、フレームバッファ切替部３２３の接続先のフレームバッファから映像を読み出し、読み出した映像に対して、必要に応じて字幕復号部３０８で復号された字幕データ及びＯＳＤ作成部３０９で作成された情報を重畳し、表示部３２６へ出力する。重畳部３２５は、左目映像（ＰＬ１）を読み出し、１／１２０秒経過後、右目映像を読み出す。さらに、１／１２０秒経過すると、左目映像を読み出すが、左目映像（ＰＬ１）を読み出してから１／６０秒経過しているので、第１フレームバッファ３２１からは別の左目映像（ＰＬ２）が読み出される。つまり、３Ｄ表示として対となる左目映像と右目映像とは、１／６０秒の間にそれぞれ１回ずつ各フレームバッファから読み出されることとなる。一方、平面視専用の映像が第１フレームバッファ３２１に格納されている場合には、第１フレームバッファ３２１の更新周期、つまり第１ビデオ復号部３０６から平面視専用の映像が出力されてから次の映像が出力されるまでの間（１／６０秒間）には、重畳部３２５は、平面視専用の映像を２回読み出すタイミングがあることが分かる。なお、１／１２０秒の表示周期で２Ｄ再生を行っても、同一の映像を２回表示するだけで視差は生じないため、映像が立体的に見えることはなく、平面視による視聴が可能である。
【０１４６】
表示部３２６は、重畳部３２５から受け取った映像を、ディスプレイ（図示せず）に表示する。
【０１４７】
（１３）スピーカ３１３
スピーカ３１３は、オーディオ復号部３１０で復号されたオーディオデータを音声として出力する。
【０１４８】
２．３  動作
ここでは、送信装置２００及び再生装置１０のそれぞれの動作について説明する。
【０１４９】
２．３．１  送信装置２００の動作
ここでは、送信装置２００が行う送信処理について図１８に示す流れ図を用いて説明する。
【０１５０】
送信装置２００の第１ビデオ符号化部２０５は、映像格納部２０１に格納されている左目用グループに含まれる左目映像及び平面視専用の映像に対して符号化を行い、左目用ビデオストリームを生成し、ビデオストリーム格納部２０７に格納する（ステップＳ５）。
【０１５１】
第２ビデオ符号化部２０６は、映像格納部２０１に格納されている右目用グループに含まれる右目映像、及び黒画面に対して符号化を行い、右目用ビデオストリームを生成する（ステップＳ１０）。
【０１５２】
第１多重化処理部２０８は、ストリーム管理情報格納部２０２、字幕ストリーム格納部２０３、オーディオストリーム格納部２０４及びビデオストリーム格納部２０７に格納された各種情報を、多重化して、ＭＰＥＧ２−ＴＳ形式の１つ以上のＴＳを生成し、生成したＴＳを第１トランスポートストリーム格納部２１０へ格納する（ステップＳ１５）。
【０１５３】
第２多重化処理部２０９は、ステップＳ１０で生成された右目用ビデオストリームを、多重化して、ＭＰＥＧ２−ＴＳ形式の１つ以上のＴＳを生成し、生成したＴＳを第２トランスポートストリーム格納部２１１へ格納する（ステップＳ２０）。
【０１５４】
第１送信部２１２は、第１トランスポートストリーム格納部２１０に格納された左目用ＴＳを、放送波として送信する（ステップＳ２５）。
【０１５５】
第２送信部２１３は、第２トランスポートストリーム格納部２１１に格納された右目用ＴＳを、ＩＰネットワークを介して外部へ送信する（ステップＳ３０）。
【０１５６】
２．３．２  再生装置１０の動作
ここでは、再生装置１０が行う送信処理について図１９に示す流れ図を用いて説明する。
【０１５７】
再生装置１０のチューナ３０１は、左目用トランスポートストリームを受信する（ステップＳ１００）。
【０１５８】
ＮＩＣ３０２は、右目用トランスポートストリームを受信する（ステップＳ１０５）。
【０１５９】
第１多重分離部３０４は、チューナ３０１で受信した左目用トランスポートストリームから左目用ビデオストリーム、字幕データのストリーム及びオーディオデータのストリームを分離する（ステップＳ１１０）。第１多重分離部３０４は、分離した左目用ビデオストリームを第１ビデオ復号部３０６へ、字幕データのストリームを字幕復号部３０８へ、オーディオデータのストリームをオーディオ復号部３１０へ、それぞれ出力する。
【０１６０】
第２多重分離部３０５は、ＮＩＣ３０２で受信した右目用トランスポートストリームから右目用ビデオストリームを分離する（ステップＳ１１５）。第２多重分離部３０５は、分離した右目用ビデオストリームを第２ビデオ復号部３０７へ出力する。
【０１６１】
第１ビデオ復号部３０６は、左目用ビデオストリームを復号し、復号した各映像を第１フレームバッファ３２１に格納する（ステップＳ１２０）。
【０１６２】
第１ビデオ復号部３０６は、復号した各映像に対応する映像識別子を判定部３１１へ出力する（ステップＳ１２５）。
【０１６３】
第２ビデオ復号部３０７は、右目用ビデオストリームを復号し、復号した各映像を第２フレームバッファ３２２に格納する（ステップＳ１３０）。
【０１６４】
判定部３１１は、再生対象の映像に対応する映像識別子が当該映像が平面視専用の映像であることを示すか否かを判定する（ステップＳ１３５）。
【０１６５】
判定部３１１で再生対象の映像が平面視専用の映像でないと判定される場合には（ステップＳ１３５における「Ｎｏ」）、再生処理部３１２は、切替制御部３２４によりフレームバッファ切替部３２３の接続先として第１フレームバッファ３２１及び第２フレームバッファ３２２を交互に切り替えて、第１フレームバッファ３２１及び第２フレームバッファ３２２のそれぞれに格納された映像を用いた再生（３Ｄ再生）を行う（ステップＳ１４０）。
【０１６６】
判定部３１１で再生対象の映像が平面視専用の映像であると判定される場合には（ステップＳ１３５における「Ｙｅｓ」）、再生処理部３１２は、切替制御部３２４によりフレームバッファ切替部３２３の接続先を第１フレームバッファ３２１として、第１フレームバッファ３２１に格納された映像を用いた再生（２Ｄ再生）を行う（ステップＳ１４５）。
【０１６７】
２．４  変形例
以上、実施の形態に基づいて説明したが、本発明は上記の実施の形態に限られない。例えば、以下のような変形例が考えられる。
【０１６８】
（１）上記実施の形態においては、左目用ビデオストリームと、右目用ビデオストリームとは、同一の符号化方式（ＭＰＥＧ２  Ｖｉｄｅｏ）で生成されるとしたが、これに限定されない。
【０１６９】
左目用ビデオストリームと、右目用ビデオストリームとは、異なる符号化方式で符号化されてもよい。例えば、左目用ビデオストリームはＭＰＥＧ２  Ｖｉｄｅｏ方式により符号化され、右目用ビデオストリームはＭＰＥＧ−４  ＡＶＣ方式により符号化されてもよい。
【０１７０】
（２）上記実施の形態において、送信装置２００は、映像識別子を左目用ビデオストリームに含まれる映像それぞれに対応する補足データに格納したが、これに限定されない。送信装置２００は、映像識別子を右目用ビデオストリームに含まれる映像それぞれに対応する補足データに格納してもよい。
【０１７１】
この場合、送信装置２００は、黒画面に対応する補足データに対して平面視専用の映像である旨を示す映像識別子を、右目映像に対応する補足データに対して平面視専用の映像ではない旨、つまり３Ｄ映像（右目映像）である旨を示す映像識別子を格納する。
【０１７２】
再生装置１０は、右目用ビデオストリームの復号時に、復号した映像に対応する補足データに含まれる映像識別子が平面視専用の映像であることを示すものであるのか、３Ｄ映像であることを示すものであるのかを判定する。映像識別子が平面視専用の映像であることを示すと判定する場合には、フレームバッファ切替部３２３の接続先を第１フレームバッファ３２１として、第１フレームバッファ３２１のみに格納された映像（平面視専用の映像）を用いた再生（２Ｄ再生）を行う。
【０１７３】
このとき、２Ｄ再生では、左目用ビデオストリームに含まれる平面視専用の映像が再生される。以下、その理由を説明する。図１１で示したように、再生時間軸上（表示順）において、左目映像と、当該左目映像に対応する右目視点の右目映像とは対をなしている。対をなしていないと、３Ｄ表示ができないからである。そうすると、左目用ビデオストリームに含まれる平面視専用の映像には、右目用ビデオストリームの黒画面と対になっていることが分かる。そのため、右目用ビデオストリームの復号時に、復号した映像に対応する映像識別子が平面視専用の映像であることを示しているならば、対応する左目用ビデオストリームに含まれる映像は平面視専用の映像となるので、上記のような仕組みで２Ｄ再生が可能となる。
【０１７４】
また、例えば、右目用ビデオストリームがＭＰＥＧ−４  ＡＶＣ方式により符号化されている場合において、映像識別子を含む補足データが、図１４で示したように圧縮ピクチャデータより手前に入っているときには、圧縮・符号化された映像の復号処理(つまり図１４に示す圧縮ピクチャデータ１１５の復号処理)を停止させることができる。これは処理の大部分を占める処理を回避できることになるため、復号処理に使用されるＬＳＩやＣＰＵの消費電力を軽減させられるなどの効果がある。
【０１７５】
このように、右目用ビデオストリームに映像識別子を含めることで、従来の放送波によって送信される信号内に、新規の情報(ここでは、映像識別子)を追加する必要がないため、これを受信する従来の機器(ＩＰネットワークを介して映像を受信しない機器）が、映像識別子を想定外のデータとして扱うことによって発生しかねない互換性問題などを回避することが可能となる。
【０１７６】
（３）上記実施の形態において、右目用ビデオストリームでは、左目用ビデオストリームに含まれる平面視専用の映像と同一の映像を含む代わりに、黒画面を含むものとしたが、これに限定されない。
【０１７７】
左目用ビデオストリームに含まれる平面視専用の映像が表示されている間は、右目用ビデオストリームに含まれ、且つ再生時間が左目用ビデオストリームの２Ｄ映像と同じ映像は表示されない。そこで、黒画面の代わりに、例えば左目用ビデオストリームに含まれる平面視専用の映像のビットレートよりも低いビットレートの平面視専用の映像を含めてもよい。
【０１７８】
（４）上記実施の形態において、再生装置１０は、再生対象の映像が２Ｄ映像であると判定した場合には、ＩＰネットワークから右目用トランスポートストリームの受信を中止してもよい。
【０１７９】
この場合、ＩＰネットワークから右目用トランスポートストリームの受信を再開するタイミングは、再生装置１０が、左目用ビデオストリームに含まれ、復号された映像が平面視専用の映像から３Ｄ映像に変更されたタイミングである。
【０１８０】
このような制御を行うことで、再生装置１０は、消費電力の低減を図ることができる。
【０１８１】
（５）上記実施の形態１及び上記変形例をそれぞれ組み合わせるとしてもよい。
【０１８２】
３．実施の形態２
上記実施の形態１では、左目用ビデオストリームのみに平面視専用の映像を含めるものとしたが、本実施の形態では、右目用ビデオストリームにも平面視専用の映像が含まれる場合について説明する。
【０１８３】
３．１  構成
実施の形態２における映像送受信システムは、デジタルテレビ（再生装置）１０ａと送信装置２００ａとから構成されている。
【０１８４】
以下、再生装置１０ａと、送信装置２００ａとの構成について、実施の形態１の再生装置１０と送信装置２００との構成と異なる点を中心に説明する。
【０１８５】
なお、実施の形態１と変更がない構成要素については、実施の形態１と同様の符号を付し、本実施の形態における説明は省略する。
【０１８６】
３．１．１  送信装置２００ａについて
送信装置２００ａは、図２０に示すように、映像格納部２０１、ストリーム管理情報格納部２０２、字幕ストリーム格納部２０３、オーディオストリーム格納部２０４、第１ビデオ符号化部２０５ａ、第２ビデオ符号化部２０６ａ、ビデオストリーム格納部２０７、第１多重化処理部２０８、第２多重化処理部２０９、第１トランスポートストリーム格納部２１０、第２トランスポートストリーム格納部２１１、第１送信部２１２及び第２送信部２１３から構成されている。
【０１８７】
以下、第１ビデオ符号化部２０５ａ、第２ビデオ符号化部２０６ａについて説明する。
【０１８８】
（１）第２ビデオ符号化部２０６ａ
第２ビデオ符号化部２０６ａは、映像格納部２０１に格納されている右目映像及び平面視専用の映像を、ＭＰＥＧ−４  ＡＶＣ方式による符号化を行うものである。
【０１８９】
具体的には、第２ビデオ符号化部２０６ａは、予め定められた符号化順序に基づいて、右目用グループから右目映像又は平面視専用の映像を映像格納部２０１から読み出す。
【０１９０】
第２ビデオ符号化部２０６ａは、読み出した映像を圧縮・符号化し、圧縮・符号化した右目映像及び平面視専用の映像を、第２多重化処理部２０９へ出力する。
【０１９１】
（２）第１ビデオ符号化部２０５ａ
第１ビデオ符号化部２０５ａは、映像格納部２０１に格納されている左目映像及び平面視専用の映像を、ＭＰＥＧ２  Ｖｉｄｅｏ方式による符号化を行うものである。
【０１９２】
具体的には、第１ビデオ符号化部２０５ａは、実施の形態１で示す第１ビデオ符号化部２０５と同様の機能を有し、さらに以下の機能をも有している。
【０１９３】
第１ビデオ符号化部２０５ａは、平面視専用の映像について圧縮・符号化すると、第２ビデオ符号化部２０６ａで圧縮・符号化された同一の平面視専用の映像と画質を比較して、自身が圧縮・符号化した平面視専用の映像の画質が、他方で圧縮・符号化された平面視専用の映像の画質より良いものであるか否かを示す２Ｄ画質フラグを生成し、生成した２Ｄ画質フラグを、対応する補足データに格納する。
【０１９４】
ここで、画質判定の一例について説明する。
【０１９５】
画質の優劣については、映像のビットレートを用いた判定、及びブロックノイズの有無を用いた判定などがある。ここでは、映像のビットレートを用いた判定について説明する。
【０１９６】
一般にＭＰＥＧ−４ ＡＶＣの圧縮効率はＭＰＥＧ２ Ｖｉｄｅｏの２倍程度であると言われているので、ＭＰＥＧ２ Ｖｉｄｅｏのビットレートと、ＭＰＥＧ−４ ＡＶＣのビットレートを比較して、ＭＰＥＧ２ Ｖｉｄｅｏのビットレートの１／２よりＭＰＥＧ−４ ＡＶＣのビットレートが高ければＭＰＥＧ−４ ＡＶＣの方が高画質と判定することができる。
【０１９７】
３．１．２  再生装置１０ａについて
再生装置１０ａは、図２１に示すように、チューナ３０１、ＮＩＣ３０２、ユーザーインターフェイス部３０３、第１多重分離部３０４、第２多重分離部３０５、第１ビデオ復号部３０６ａ、第２ビデオ復号部３０７、字幕復号部３０８、ＯＳＤ作成部３０９、オーディオ復号部３１０、判定部３１１ａ、再生処理部３１２ａ及びスピーカ３１３から構成されている。
【０１９８】
以下、第１ビデオ復号部３０６ａ、判定部３１１ａ及び再生処理部３１２ａについて説明する。
【０１９９】
（１）第１ビデオ復号部３０６ａ
第１ビデオ復号部３０６ａは、第１多重分離部３０４から受け取った左目用ビデオストリームを復号し、復号した各映像を再生順序に従って順次、再生処理部３１２へ出力する。
【０２００】
また、第１ビデオ復号部３０６ａは、復号した各映像に対応する補足データに含まれる映像識別子及び２Ｄ画質フラグを判定部３１１ａへ出力する。
【０２０１】
（２）判定部３１１ａ
判定部３１１ａは、第１ビデオ復号部３０６ａから受け取った映像識別子が平面視専用の映像を示すか否かを判断、つまり映像識別子に対応する再生対象の映像が平面視専用の映像であるか３Ｄ映像であるかを判定する。
【０２０２】
判定部３１１ａは、再生対象の映像が平面視専用の映像であると判定する場合、第１ビデオ復号部３０６ａから受け取った２Ｄ画質フラグを用いて、第１ビデオ復号部３０６ａで復号された平面視専用の映像が、他方で復号された平面視専用の映像よりも高画質であるか否か判定する。
【０２０３】
判定部３１１ａは、再生対象の映像が平面視専用の映像であるか３Ｄ映像であるかの判定結果を再生処理部３１２ａへ出力し、さらに平面視専用の映像の画質の判定を行った場合には画質の判定結果を再生処理部３１２ａへ出力する。
【０２０４】
（３）再生処理部３１２ａ
再生処理部３１２ａは、図２１に示すように、第１フレームバッファ３２１、第２フレームバッファ３２２、フレームバッファ切替部３２３、切替制御部３２４ａ、重畳部３２５及び表示部３２６から構成されている。
【０２０５】
第１フレームバッファ３２１、第２フレームバッファ３２２、フレームバッファ切替部３２３、重畳部３２５及び表示部３２６は、実施の形態１で説明しているので、ここでの説明は省略し、切替制御部３２４ａについてのみ説明する。
【０２０６】
切替制御部３２４ａは、フレームバッファ切替部３２３の切替先を制御するものである。具体的には、切替制御部３２４ａは、判定部３１１ａから受け取った映像の判定結果が平面視専用の映像である旨の場合であって、平面視専用の映像の画質判定の判定結果が第１ビデオ復号部３０６ａで復号された平面視専用の映像が他方で復号された平面視専用の映像よりも高画質である旨を示す場合には、フレームバッファ切替部３２３の接続先を第１フレームバッファ３２１とする。判定部３１１から受け取った映像の判定結果が平面視専用の映像である旨の場合であって、平面視専用の映像の画質判定の判定結果が高画質でない旨を示す場合には、切替制御部３２４ａは、フレームバッファ切替部３２３の接続先を第２フレームバッファ３２１とする。
【０２０７】
切替制御部３２４ａは、映像の判定結果が再生対象の映像は平面視専用の映像でない、つまり３Ｄ映像である旨を示す場合には、１２０Ｈｚの周期で接続先として第１フレームバッファ３２１及び第２フレームバッファ３２２を交互に切り替える。
【０２０８】
３．２  動作
３．２．１  送信装置２００ａの動作
送信装置２００ａで行われる送信処理の動作について、実施の形態１との変更点を図１８に示す流れ図を用いて説明する。
【０２０９】
実施の形態１との変更点は、図１８に示すステップＳ５の動作とステップＳ１０の動作とを入れ替える。そして、ステップＳ５の動作において、画質判定を行い、その結果を左目用ビデオストリームに含まれる各映像に対応する補足データに格納する。
【０２１０】
ステップＳ１５以降の動作順序には変更はない。
【０２１１】
３．２．２  再生装置１０ａの動作
ここでは、再生装置１０ａが行う送信処理について図２２に示す流れ図を用いて説明する。
【０２１２】
図２２に示すステップＳ２００からステップＳ２２０は、図１９に示すステップＳ１００からステップＳ１２０と同じであるので、ここでの説明は省略する。
【０２１３】
ステップＳ２２０が実行された後、第１ビデオ復号部３０６ａは、復号した各映像に対応する映像識別子及び２Ｄ画質フラグを判定部３１１ａへ出力する（ステップＳ２２５）。
【０２１４】
第２ビデオ復号部３０７は、右目用ビデオストリームを復号し、復号した各映像を第２フレームバッファ３２２に格納する（ステップＳ２３０）。
【０２１５】
判定部３１１ａは、再生対象の映像に対応する映像識別子が当該映像が平面視専用の映像であることを示すか否かを判定する（ステップＳ２３５）。
【０２１６】
判定部３１１ａで再生対象の映像が平面視専用の映像でないと判定される場合には（ステップＳ２３５における「Ｎｏ」）、再生処理部３１２ａは、切替制御部３２４ａによりフレームバッファ切替部３２３の接続先として第１フレームバッファ３２１及び第２フレームバッファ３２２を交互に切り替えて、第１フレームバッファ３２１及び第２フレームバッファ３２２のそれぞれに格納された映像を用いた再生（３Ｄ再生）を行う（ステップＳ２４０）。
【０２１７】
再生対象の映像が平面視専用の映像であると判定される場合には（ステップＳ２３５における「Ｙｅｓ」）、判定部３１１ａは、さらに、２Ｄ画質フラグを用いて、第１ビデオ復号部３０６ａで復号された平面視専用の映像は他方で復号された平面視専用の映像よりも高画質であるか否かを判定する（ステップＳ２４５）。
【０２１８】
判定部３１１ａで高画質であると判定された場合には（ステップＳ２４５における「Ｙｅｓ」）、再生処理部３１２ａは、切替制御部３２４ａによりフレームバッファ切替部３２３の接続先を第１フレームバッファ３２１として、第１フレームバッファ３２１に格納された映像を用いた再生（２Ｄ再生）を行う（ステップＳ２５０）。
【０２１９】
判定部３１１ａで高画質でないと判定された場合には（ステップＳ２４５における「Ｎｏ」）、再生処理部３１２ａは、切替制御部３２４ａによりフレームバッファ切替部３２３の接続先を第２フレームバッファ３２２として、第２フレームバッファ３２１に格納された映像を用いた再生（２Ｄ再生）を行う（ステップＳ２５５）。
【０２２０】
３．３  変形例１
上記実施の形態２では、平面視専用の映像について画質判定を行い、高画質の平面視専用の映像を優先して再生するものとした。ところで、視聴者は、３Ｄ映像を視聴しているとき、目の疲れなどにより３Ｄ映像を平面視したい、つまり３Ｄ映像を２Ｄ再生により視聴したいと考える。
【０２２１】
そこで、変形例１では、視聴者の指示により３Ｄ再生から２Ｄ再生へと切り替える機能について説明する。
【０２２２】
変形例１における映像送受信システムは、デジタルテレビ（再生装置）１０ｂと送信装置２００ｂとから構成されている。
【０２２３】
以下、再生装置１０ｂと、送信装置２００ｂとの構成について、実施の形態１及び実施の形態２における各装置の構成と異なる点を中心に説明する。
【０２２４】
なお、実施の形態１及び実施の形態２と変更がない構成要素については、実施の形態１及び実施の形態２と同様の符号を付し、本変形例での説明は省略する。
【０２２５】
３．３．１  送信装置２００ｂについて
送信装置２００ｂは、図２３に示すように、映像格納部２０１、ストリーム管理情報格納部２０２、字幕ストリーム格納部２０３、オーディオストリーム格納部２０４、第１ビデオ符号化部２０５ｂ、第２ビデオ符号化部２０６ａ、ビデオストリーム格納部２０７、第１多重化処理部２０８、第２多重化処理部２０９、第１トランスポートストリーム格納部２１０、第２トランスポートストリーム格納部２１１、第１送信部２１２及び第２送信部２１３から構成されている。
【０２２６】
以下、第１ビデオ符号化部２０５ｂについて説明する。
【０２２７】
（１）第１ビデオ符号化部２０５ｂ
第１ビデオ符号化部２０５ｂは、映像格納部２０１に格納されている左目映像及び平面視専用の映像を、ＭＰＥＧ２  Ｖｉｄｅｏ方式による符号化を行うものである。
【０２２８】
具体的には、第１ビデオ符号化部２０５ｂは、実施の形態２で示す第１ビデオ符号化部２０５ａと同様の機能を有し、さらに以下の機能をも有している。
【０２２９】
第１ビデオ符号化部２０５ｂは、３Ｄ映像（左目映像）について圧縮・符号化すると、第２ビデオ符号化部２０６ａで圧縮・符号化された同一の３Ｄ映像（右目映像）と画質を比較して、自身が圧縮・符号化した３Ｄ映像の画質が、他方で圧縮・符号化された３Ｄ映像の画質より良いものであるか否かを示す３Ｄ画質フラグを生成し、生成した３Ｄ画質フラグを、対応する補足データに格納する。
【０２３０】
ここで、３Ｄ映像の画質判定については、実施の形態２で説明した平面視専用の映像の画質判定と同じであるので、ここでの説明は省略する。
【０２３１】
３．３．２  再生装置１０ａについて
再生装置１０ａは、図２１に示すように、チューナ３０１、ＮＩＣ３０２、ユーザーインターフェイス部３０３ｂ、第１多重分離部３０４、第２多重分離部３０５、第１ビデオ復号部３０６ｂ、第２ビデオ復号部３０７、字幕復号部３０８、ＯＳＤ作成部３０９、オーディオ復号部３１０、判定部３１１ｂ、再生処理部３１２ｂ及びスピーカ３１３から構成されている。
【０２３２】
以下、ユーザーインターフェイス部３０３ｂ、第１ビデオ復号部３０６ｂ、判定部３１１ｂ及び再生処理部３１２ｂについて説明する。
【０２３３】
（１）ユーザーインターフェイス部３０３ｂ
ユーザーインターフェイス部３０３ｂは、実施の形態１で示すユーザーインターフェイス部３０３と同様の機能を有し、さらに以下の機能をも有している。
【０２３４】
ユーザーインターフェイス部３０３ｂは、ユーザから３Ｄ映像の視聴形態を３Ｄ再生から２Ｄ再生への変更を示す、又は２Ｄ再生から３Ｄ再生への変更を示す視聴形態変更指示を受け付ける。ユーザーインターフェイス部３０３ｂは、受け付けた視聴形態変更指示を判定部３１１ｂに通知する。
【０２３５】
（２）第１ビデオ復号部３０６ｂ
第１ビデオ復号部３０６ｂは、第１多重分離部３０４から受け取った左目用ビデオストリームを復号し、復号した各映像を再生順序に従って順次、再生処理部３１２へ出力する。
【０２３６】
また、第１ビデオ復号部３０６ｂは、復号した各映像に対応する補足データに含まれる映像識別子、２Ｄ画質フラグ及び３Ｄ画質フラグを判定部３１１ｂへ出力する。
【０２３７】
（３）判定部３１１ｂ
判定部３１１ｂは、実施の形態２に示す判定部３１１ａと同様の機能を有し、さらに以下の機能を有する。
【０２３８】
判定部３１１ｂは、ユーザーインターフェイス部３０３ｂから視聴形態変更指示を受け取る。受け取った視聴形態変更指示が３Ｄ再生から２Ｄ再生への変更を示す旨である場合には、判定部３１１ｂは、再生対象の映像が３Ｄ映像であるときには、第１ビデオ復号部３０６ｂから受け取った３Ｄ画質フラグを用いて、第１ビデオ復号部３０６ｂで復号された３Ｄ映像（左目映像）が、他方で復号された３Ｄ映像（右目映像）よりも高画質であるか否か判定する。
【０２３９】
判定部３１１ｂは、３Ｄ映像の画質の判定を行った場合には画質の判定結果を再生処理部３１２ｂへ出力する。
【０２４０】
判定部３１１ｂは、ユーザーインターフェイス部３０３ｂから受け取った視聴形態変更指示が２Ｄ再生から３Ｄ再生への変更を示す旨である場合には、３Ｄ映像の画質判定は行わない。
【０２４１】
（３）再生処理部３１２ｂ
再生処理部３１２ｂは、図２４に示すように、第１フレームバッファ３２１、第２フレームバッファ３２２、フレームバッファ切替部３２３、切替制御部３２４ｂ、重畳部３２５及び表示部３２６から構成されている。
【０２４２】
第１フレームバッファ３２１、第２フレームバッファ３２２、フレームバッファ切替部３２３、重畳部３２５及び表示部３２６は、実施の形態１で説明しているので、ここでの説明は省略し、切替制御部３２４ｂについてのみ説明する。
【０２４３】
切替制御部３２４ｂは、フレームバッファ切替部３２３の切替先を制御するものであり、実施の形態２で示す切替制御部３２４ａと同様の機能を有し、さらに以下の機能をも有する。
【０２４４】
切替制御部３２４ｂは、判定部３１１ｂから受け取った映像の判定結果が３Ｄ映像である旨の場合であって、３Ｄ映像の画質判定の判定結果が第１ビデオ復号部３０６ｂで復号された３Ｄ映像（左目映像）が他方で復号された３Ｄ映像（右目映像）よりも高画質である旨を示す場合には、フレームバッファ切替部３２３の接続先を第１フレームバッファ３２１とする。判定部３１１ｂから受け取った映像の判定結果が３Ｄ映像である旨の場合であって、３Ｄ映像の画質判定の判定結果が高画質でない旨を示す場合には、切替制御部３２４ｂは、フレームバッファ切替部３２３の接続先を第２フレームバッファ３２１とする。
【０２４５】
切替制御部３２４ａは、映像の判定結果が再生対象の映像は平面視専用の映像でない、つまり３Ｄ映像である旨を示す場合であって、３Ｄ映像の画質判定の判定結果が通知されない場合には、１２０Ｈｚの周期で接続先として第１フレームバッファ３２１及び第２フレームバッファ３２２を交互に切り替える。
【０２４６】
３．３．３  動作
（１）送信装置２００ｂの動作
送信装置２００ｂで行われる送信処理の動作について、実施の形態１及び実施の形態２との変更点を図１８に示す流れ図を用いて説明する。
【０２４７】
実施の形態１及び実施の形態２との変更点は、図１８に示すステップＳ５の動作とステップＳ１０の動作とを入れ替える。そして、ステップＳ５の動作において、平面視専用の映像及び３Ｄ映像それぞれの画質判定を行い、その結果を、２Ｄ画質フラグ及び３Ｄ画質フラグとして、左目用ビデオストリームに含まれる各映像に対応する補足データに格納する。
【０２４８】
なお、ステップＳ１５以降の動作順序には変更はない。
【０２４９】
（２）再生装置１０ｂの動作
ここでは、再生装置１０ｂが行う送信処理について図２５に示す流れ図を用いて説明する。
【０２５０】
再生装置１０ｂは、図１９に示すステップＳ１００からステップＳ１１５を実行する。
【０２５１】
再生装置１０ｂの第１ビデオ復号部３０６ｂは、左目用ビデオストリームを復号し、復号した各映像を第１フレームバッファ３２１に格納する（ステップＳ３２０）。
【０２５２】
第１ビデオ復号部３０６ｂは、復号した各映像に対応する映像識別子、２Ｄ画質フラグ及び３Ｄ画質フラグを判定部３１１ｂへ出力する（ステップＳ３２５）。
【０２５３】
第２ビデオ復号部３０７は、右目用ビデオストリームを復号し、復号した各映像を第２フレームバッファ３２２に格納する（ステップＳ３３０）。
【０２５４】
判定部３１１ｂは、再生対象の映像に対応する映像識別子が当該映像が平面視専用の映像であることを示すか否かを判定する（ステップＳ３３５）。
【０２５５】
再生対象の映像が平面視専用の映像でないと判定する場合には（ステップＳ３３５における「Ｎｏ」）、判定部３１１ｂは、ユーザーインターフェイス部３０３ｂから受け取った視聴形態変更指示が３Ｄ再生から２Ｄ再生への変更を示すものであるか否か、つまり現在の視聴形態が３Ｄ再生であるか否かを判断する（ステップＳ３４０）。
【０２５６】
現在の視聴形態が３Ｄ再生であると判断される場合（ステップＳ３４０における「Ｙｅｓ」）、再生処理部３１２ａは、切替制御部３２４ａによりフレームバッファ切替部３２３の接続先として第１フレームバッファ３２１及び第２フレームバッファ３２２を交互に切り替えて、第１フレームバッファ３２１及び第２フレームバッファ３２２のそれぞれに格納された映像を用いた再生（３Ｄ再生）を行う（ステップＳ３４５）。
【０２５７】
再生対象の映像が平面視専用の映像であると判定される場合には（ステップＳ３３５における「Ｙｅｓ」）、判定部３１１ｂは、さらに、２Ｄ画質フラグを用いて、第１ビデオ復号部３０６ａで復号された平面視専用の映像は他方で復号された平面視専用の映像よりも高画質であるか否かを判定する（ステップＳ３５０）。
【０２５８】
判定部３１１ｂで高画質であると判定された場合には（ステップＳ３５０における「Ｙｅｓ」）、再生処理部３１２ｂは、切替制御部３２４ｂによりフレームバッファ切替部３２３の接続先を第１フレームバッファ３２１として、第１フレームバッファ３２１に格納された映像（平面視専用の映像）を用いた再生（２Ｄ再生）を行う（ステップＳ２５０）。
【０２５９】
判定部３１１ｂで高画質でないと判定された場合には（ステップＳ３５０における「Ｎｏ」）、再生処理部３１２ｂは、切替制御部３２４ｂによりフレームバッファ切替部３２３の接続先を第２フレームバッファ３２２として、第２フレームバッファ３２１に格納された映像（平面視専用の映像）を用いた再生（２Ｄ再生）を行う（ステップＳ３６０）。
【０２６０】
現在の視聴形態が３Ｄ再生でない、つまり２Ｄ再生であると判断される場合（ステップＳ３４０における「Ｎｏ」）、
判定部３１１ｂは、さらに、３Ｄ画質フラグを用いて、第１ビデオ復号部３０６ａで復号された３Ｄ映像（左目映像）は他方で復号された３Ｄ映像（右目映像）よりも高画質であるか否かを判定する（ステップＳ３６５）。
【０２６１】
判定部３１１ｂで高画質であると判定された場合には（ステップＳ３６５における「Ｙｅｓ」）、再生処理部３１２ｂは、切替制御部３２４ｂによりフレームバッファ切替部３２３の接続先を第１フレームバッファ３２１として、第１フレームバッファ３２１に格納された映像（左目映像）を用いた再生（２Ｄ再生）を行う（ステップＳ３７０）。
【０２６２】
判定部３１１ｂで高画質でないと判定された場合には（ステップＳ３６５における「Ｎｏ」）、再生処理部３１２ｂは、切替制御部３２４ｂによりフレームバッファ切替部３２３の接続先を第２フレームバッファ３２２として、第２フレームバッファ３２１に格納された映像（右目映像）を用いた再生（２Ｄ再生）を行う（ステップＳ３７５）。
【０２６３】
３．４  その他の変形例
以上、実施の形態及び変形例１に基づいて説明したが、本発明は上記の実施の形態及び変形例１に限られない。例えば、以下のような変形例が考えられる。
【０２６４】
（１）上記実施の形態２において、送信装置２００ａは、２Ｄ画質フラグを左目用ビデオストリームに含まれる映像それぞれに対応する補足データに格納したが、これに限定されない。送信装置２００ａは、２Ｄ画質フラグを右目用ビデオストリームに含まれる映像それぞれに対応する補足データに格納してもよい。右目ビデオストリームをＭＰＥＧ−４  ＡＶＣ方式で生成する場合における補足データとは、ＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ  Ｅｎｈａｎｃｅｍｅｎｔ  Ｉｎｆｏｒｍａｔｉｏｎ）のユーザデータである。
【０２６５】
再生装置１０ａは、右目用ビデオストリームの復号時に、復号した平面視専用の映像に対応する補足データに含まれる２Ｄ画質フラグが左目用ビデオストリームに含まれる平面視専用の映像よりも高画質であることを示すものであるのか否かを判定する。高画質であると判定する場合には、フレームバッファ切替部３２３の接続先を第２フレームバッファ３２２として、第２フレームバッファ３２２に格納された映像のみを用いた再生（２Ｄ再生）を行う。高画質でないと判定する場合には、フレームバッファ切替部３２３の接続先を第１フレームバッファ３２１として、第１フレームバッファ３２１に格納された映像のみを用いた再生（２Ｄ再生）を行う。
【０２６６】
または、２Ｄ画質フラグを、左目用ビデオストリーム及び右目用ビデオストリームの双方の映像それぞれに対応する補足データに格納してもよい。
【０２６７】
また、３Ｄ画質フラグについても、同様に、右目用ビデオストリームに含まれる映像それぞれに対応する補足データに格納してもよい。
【０２６８】
この場合、再生装置１０ｂは、右目用ビデオストリームの復号時に、復号した３Ｄ映像（右目映像）に対応する補足データに含まれる３Ｄ画質フラグが左目用ビデオストリームに含まれる３Ｄ映像（左目映像）よりも高画質であることを示すものであるのか否かを判定する。高画質であると判定する場合には、フレームバッファ切替部３２３の接続先を第２フレームバッファ３２２として、第２フレームバッファ３２２に格納された映像（右目映像）を用いた再生（２Ｄ再生）を行う。高画質でないと判定する場合には、フレームバッファ切替部３２３の接続先を第１フレームバッファ３２１として、第１フレームバッファ３２１に格納された映像（左目映像）を用いた再生（２Ｄ再生）を行う。
【０２６９】
または、３Ｄ画質フラグを、左目用ビデオストリーム及び右目用ビデオストリームの双方の映像それぞれに対応する補足データに格納してもよい。
【０２７０】
（２）上記実施の形態２において、２Ｄ画質フラグは、平面視専用の映像の画質の優劣を識別するために映像単位に対応付けられたが、これに限定されない。
【０２７１】
２Ｄ画質フラグの代わりに、平面視専用の映像の画質の優劣に関係なく左目用ビデオストリームに含まれる平面視専用の映像、及び右目用ビデオストリームに含まれる平面視専用の映像の何れを用いて２Ｄ再生を行うかを示す平面視専用の映像用の再生情報（以下、「２Ｄ再生情報」という。）を、例えば、ＭＰＥＧ２  Ｖｉｄｅｏ方式で規定されるＰＭＴ（Ｐｒｏｇｒａｍ  Ｍａｐ  Ｔａｂｌｅｓ）に含めてもよい。これによると、再生装置は、映像単位で切り替えを行う必要はなく、所定の時間間隔（例えば、１００ｍｓｅｃ）で切り替えを行うことができる。
【０２７２】
または、２Ｄ再生情報を、ＭＰＥＧ２  Ｖｉｄｅｏ方式で規定されるＥＩＴに含めてもよい。これによると、番組単位で、左目用ビデオストリームに含まれる平面視専用の映像、及び右目用ビデオストリームに含まれる平面視専用の映像の何れを用いるかを指定することができる。
【０２７３】
または、ＡＴＳＣ規格に基づいて放送波を送信する場合には、ＡＴＳＣで定義されているＶＣＴ（Ｖｉｒｔｕａｌ  Ｃｈａｎｎｅｌ  Ｔａｂｌｅ）やＥＩＴ（Ｅｖｅｎｔ  Ｉｎｆｏｒｍａｔｉｏｎ  Ｔａｂｌｅ）に、再生情報を含めてもよい。ここで、ＶＣＴは、ＡＴＳＣの規格ａ−６５ｃのセクション６．３に、ＥＩＴはセクション６．５に、それぞれ規定されている。ＶＣＴは、現在放送中の番組に関して、番組を放送しているチャンネル番号の情報と、仮想チャンネル（major num.及びminor num.）と１対１に関連づけされるｓｏｕｒｃｅ  ｉｄとを含んでいる。ＥＩＴは、現在放送中及び今後放送予定の番組に関して、番組名、番組の放送開始及び終了時間等の番組情報と、source idとを含んでいる。
【０２７４】
２Ｄ再生情報をＶＣＴに含める場合には、例えば“ｎｕｍ＿ｃｈａｎｎｅｌｓ＿ｉｎ＿ｓｅｃｔｉｏｎ”内のｒｅｓｅｒｖｅｄフィールドに当該２Ｄ再生情報を定義する。または、“ｎｕｍ＿ｃｈａｎｎｅｌｓ＿ｉｎ＿ｓｅｃｔｉｏｎ”内にｄｅｓｃｒｉｐｔｏｒ（）として２Ｄ再生情報を定義する。
【０２７５】
２Ｄ再生情報をＥＩＴに含める場合には、例えば“ｎｕｍ＿ｅｖｅｎｔｓ＿ｉｎ＿ｓｅｃｔｉｏｎ” 内のｒｅｓｅｒｖｅｄフィールドに当該２Ｄ再生情報を定義する。または、“ｎｕｍ＿ｅｖｅｎｔｓ＿ｉｎ＿ｓｅｃｔｉｏｎ”内にｄｅｓｃｒｉｐｔｏｒ（）として２Ｄ再生情報を定義する。
【０２７６】
（３）上記変形例１において、３Ｄ画質フラグは、左目画像と右目画像の画質の優劣を識別するために映像単位に対応付けられたが、これに限定されない。
【０２７７】
３Ｄ画質フラグの代わりに、左目画像と右目画像の画質の優劣に関係なく左目用ビデオストリームに含まれる左目映像、及び右目用ビデオストリームに含まれる右目映像の何れを用いて２Ｄ再生を行うかを示す３Ｄ映像用の再生情報（以下、「３Ｄ再生情報」という。）を、左目用ビデオストリームに含まれる左目映像それぞれについて、当該左目映像に対応する補足データに格納してもよい。
【０２７８】
例えば、３Ｄ映像が映画などの場合において、３Ｄ映像の製作者（映画作成者）が左目用映像と右目用映像のどちらで２Ｄ再生させるべきかをあらかじめ決めているケースがある。例えば、ある映画製作者は左目映像を２Ｄ再生させるべきと考え、別の映画製作者は右目映像を２Ｄ再生させるべきと考える。このような場合に、３Ｄ再生情報を用いることで、映画製作者に意図を反映した２Ｄ再生が可能となる。
【０２７９】
この場合フレーム単位で、放送波経由と、ＩＰ経由のどちらの映像を２Ｄとして出力すべきか切り替えが可能となる利点があるが、ハイブリッド３Ｄ放送の受信機として考えると、フレーム（映像）単位での切り替えは、フレームバッファ切替部が頻繁に切り替えを行うため、実装負担となる懸念がある。従って、頻繁に起こる切り替え動作を抑制するために、例えば１０フレーム以上は連続して同じ経路（つまり１０フレーム以上は連続して放送波からのみ、あるいは１０フレーム以上は連続してＩＰ経由からのみ）からのみと限定しても良い。このようにすることで、再生装置側での頻繁に切り替えが抑制されるとともに、番組と構成としても、ある番組のコーナーＡでは左目映像を２Ｄ表示に用いて、同じ番組内のコーナーＢでは右目映像を２Ｄ表示に用いるなど柔軟な切り替えが可能となる。
【０２８０】
以下、頻繁に起こる切り替え動作を抑制するための３Ｄ再生情報の格納先の具体例について、説明する。
【０２８１】
３Ｄ再生情報は、ＭＰＥＧ２  Ｖｉｄｅｏ方式で規定されるＰＭＴに含めてもよい。この場合、再生装置は、ＰＭＴに含まれる３Ｄ再生情報を読み出し、読み出した３Ｄ再生情報に基づいて左目映像及び右目映像の何れを用いて２Ｄ再生を行うかを判定し、判定結果に応じて、フレームバッファ切替部の接続先を切り替えて２Ｄ再生を行う。これによると、再生装置は、映像単位でフレームバッファ切替部の接続先の切り替えを行う必要はなく、所定の時間間隔（例えば、１００ｍｓｅｃ）で切り替えを行うことができる。
【０２８２】
または、３Ｄ再生情報を、ＭＰＥＧ２  Ｖｉｄｅｏ方式で規定されるＥＩＴに含めてもよい。これによると、番組単位で、左目用ビデオストリームに含まれる平面視専用の映像、及び右目用ビデオストリームに含まれる平面視専用の映像の何れを用いるかを指定することができる。
【０２８３】
または、ＡＴＳＣ規格で定義されているＶＣＴやＥＩＴに、３Ｄ再生情報を含めてもよい。
【０２８４】
３Ｄ再生情報をＶＣＴに含める場合には、例えば“ｎｕｍ＿ｃｈａｎｎｅｌｓ＿ｉｎ＿ｓｅｃｔｉｏｎ”内のｒｅｓｅｒｖｅｄフィールドに当該３Ｄ再生情報を定義する。または、“ｎｕｍ＿ｃｈａｎｎｅｌｓ＿ｉｎ＿ｓｅｃｔｉｏｎ”内にｄｅｓｃｒｉｐｔｏｒ（）として３Ｄ再生情報を定義する。
【０２８５】
３Ｄ再生情報をＥＩＴに含める場合には、例えば“ｎｕｍ＿ｅｖｅｎｔｓ＿ｉｎ＿ｓｅｃｔｉｏｎ” 内のｒｅｓｅｒｖｅｄフィールドに当該３Ｄ再生情報を定義する。または、“ｎｕｍ＿ｅｖｅｎｔｓ＿ｉｎ＿ｓｅｃｔｉｏｎ”内にｄｅｓｃｒｉｐｔｏｒ（）として３Ｄ再生情報を定義する。
【０２８６】
なお、３Ｄ再生情報の格納先がＭＰＥＧ２  Ｖｉｄｅｏ方式で規定されるＥＩＴ、ＡＴＳＣ規格で定義されているＶＣＴやＥＩＴである場合の再生装置の動作の説明については省略する。なぜなら、ＰＭＴから３Ｄ再生情報を読み出す再生装置の動作と、読み出し先がＰＭＴから、ＭＰＥＧ２  Ｖｉｄｅｏ方式で規定されるＥＩＴ、ＡＴＳＣ規格で定義されているＶＣＴやＥＩＴと変更されるのみであり、動作の概念自体には何ら変わりはないからである。
【０２８７】
（４）上記の２Ｄ再生情報及び３Ｄ再生情報は、放送波として送信されるトランスポートストリームに含まれることを前提としているが、これに限定されない。
【０２８８】
２Ｄ再生情報及び３Ｄ再生情報は、ＩＰネットワークを介して送信されるトランスポートストリームに含めてもよい。
【０２８９】
または、送信装置は、ＩＰネットワークを介して送信されるトランスポートストリーム（右目ビデオストリーム）の送信に先立って、２Ｄ再生情報及び３Ｄ再生情報を含む再生制御ファイルをＩＰネットワークを介して送信してもよい。
【０２９０】
また、２Ｄ画質フラグ及び３Ｄ画質フラグについても同様に、送信装置は、ＩＰネットワークを介して送信されるトランスポートストリーム（右目ビデオストリーム）の送信に先立って、２Ｄ画質フラグ及び３Ｄ画質フラグを含む再生制御ファイルをＩＰネットワークを介して送信してもよい。
【０２９１】
（５）上記実施の形態１では、再生装置１０ａは、２Ｄ画質フラグを用いて平面視専用の映像の画質判定を行ったが、これに限定されない。
【０２９２】
再生装置１０ａは、左目用ビデオストリームに含まれる平面視専用の映像のビットレートと、右目用ビデオストリームに含まれる平面視専用の映像のビットレートを比較して、何れの平面視専用の映像が高画質であるかを判定してもよい。つまり、送信装置２００ａで行った、左目用ビデオストリームに含まれる平面視専用の映像と、右目用ビデオストリームに含まれる平面視専用の映像の画質判定を再生装置１０ａで行ってもよい。
【０２９３】
また、変形例１では、再生装置１０ｂは、３Ｄ画質フラグを用いて左目映像と右目映像の画質判定を行ったが、これに限定されない。
【０２９４】
再生装置１０ｂは、左目映像のビットレートと、右目映像のビットレートを比較して、何れの映像が高画質であるかを判定してもよい。つまり、送信装置２００ｂで行った左目映像と右目映像の画質判定を再生装置１０ｂで行ってもよい。
【０２９５】
（６）ＩＰネットワーク経由で送信されるトランスポートストリーム（ＴＳ）は１つとは限らず、右目映像についてネットワークの帯域に応じてビットレートが異なる複数のＴＳが用意されている可能性がある。
【０２９６】
例えばＩＰネットワーク経由でビットレートの異なるＴＳが２本用意されている場合について説明する（ここでは、ＴＳ１及びＴＳ２とする。）。比較的ビットレートの高いＴＳ１が放送波より高画質である場合には、ＴＳ１中のＳＥＩに、ＴＳ１に含まれる右目映像を２Ｄ再生で使用されるべきであることを示す３Ｄ画質フラグを格納する。さらに、比較的ビットレートの低いＴＳ２が放送波より画質が低いことが分かっている場合には、ＴＳ２中のＳＥＩに放送波で送信される左目映像を２Ｄ再生で用いるべきであることを示す３Ｄ画質フラグを格納すればよい。
【０２９７】
また、再生装置は、放送波として送信されるＴＳではＩＰ経由で受信される右目映像が、放送波経由で受信される左目映像よりも高画質の映像なのか低画質の映像なのか分からない可能性がある。そこで、放送波経由の映像（ＭＰＥＧ２ Ｖｉｄｅｏ）の補足データ内に、「２Ｄ再生で放送波の映像を使うのか、ＩＰ経由の映像を使うのかの判断は、ＩＰ経由の映像の情報を元に判断する」ことを示す旨の情報を入れておけばよい。
【０２９８】
または、送信装置は、ＴＳ１、ＴＳ２それぞれのビットレート、及び放送波として送信されるＴＳのビットレートを記載したテーブルを、放送波として送信されるＴＳに含めて送信してもよい。これにより、再生装置は、ＩＰネットワーク経由で受信しているＴＳ（ＴＳ１又はＴＳ２）を用いることなく、放送波として送信されるＴＳのみを用いて、ＩＰ経由で受信される右目映像が、放送波経由で受信される左目映像よりも高画質の映像なのか低画質の映像なのかを判断することができる。
【０２９９】
（７）上記実施の形態２において、再生装置１０ａは、平面視専用の映像を再生する際に、左目用ビデオストリームに含まれる平面視専用の映像及び右目用ビデオストリームに含まれる平面視専用の映像のうち高画質の平面視専用の映像を再生するとしたが、これに限定されない。
【０３００】
再生装置１０ａは、平面視専用の映像を再生する際に、左目用ビデオストリームに含まれる平面視専用の映像及び右目用ビデオストリームに含まれる平面視専用の映像のうち低画質の平面視専用の映像を再生してもよい。
【０３０１】
また、変形例１にでは、再生装置１０ｂは、３Ｄ再生から２Ｄ再生へと３Ｄ番組の視聴形態が変更された場合、再生装置は、左目映像及び右目映像のうち高画質の映像を再生したが、これに限定されない。
【０３０２】
再生装置１０ｂは、左目映像及び右目映像のうち低画質の映像を用いて２Ｄ再生してもよい。
【０３０３】
（８）上記実施の形態２及び上記変形例をそれぞれ組み合わせるとしてもよい。
【０３０４】
４．  変形例
また、上記実施の形態などに限らず、例えば、以下のような変形例が考えられる。
【０３０５】
（１）上記実施の形態などにおいて、左目映像は放送波として送信され、右目映像はＩＰネットワークを介して送信されたが、これに限定されない。
【０３０６】
左目映像がＩＰネットワークを介して送信され、右目映像が放送波として送信されてもよい。
【０３０７】
または、左目映像を含むトランスポートストリームと、右目映像を含むトランスポートストリームとを、放送波としてそれぞれ別のチャネルで送信してもよい。
【０３０８】
または、左目映像を含むトランスポートストリームと、右目映像を含むトランスポートストリームとを、個別にＩＰネットワークを介して送信してもよい。
【０３０９】
（２）上記実施の形態などにおいて、２Ｄ再生を行う際の表示周期は、３Ｄ再生と同様の周期としたが、これに限定されない。２Ｄ再生を行う際の表示周期は、従来の再生装置と同様の表示周期（例えば、１／６０秒）としてもよい。
【０３１０】
（３）上記実施の形態などにおいて、ＩＰネットワークを介して送受信される右目映像は、ＭＰＥＧ２  Ｖｉｄｅｏ形式又はＭＰＥＧ−４  ＡＶＣ形式のトランポートストリームとしたが、これに限定されない。
【０３１１】
右目映像は、ＭＰ４形式のファイルにてＩＰネットワークを介して送受信されてもよいし、その他別のファイル形式により送受信されてもよい。
【０３１２】
（４）上記の各装置は、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭ、ハードディスクユニット、ディスプレイユニット、キーボード、マウスなどから構成されるコンピュータシステムである。前記ＲＡＭまたはハードディスクユニットには、コンピュータプログラムが記憶されている。前記マイクロプロセッサが、前記コンピュータプログラムにしたがって動作することにより、各装置は、その機能を達成する。ここでコンピュータプログラムは、所定の機能を達成するために、コンピュータに対する指令を示す命令コードが複数個組み合わされて構成されたものである。
【０３１３】
（５）上記の各装置を構成する構成要素の一部または全部は、１個の集積回路から構成されているとしてもよい。
【０３１４】
（６）上記の各装置を構成する構成要素の一部または全部は、各装置に脱着可能なＩＣカードまたは単体のモジュールから構成されているとしてもよい。前記ＩＣカードまたは前記モジュールは、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどから構成されるコンピュータシステムである。前記ＩＣカードまたは前記モジュールは、上記の超多機能ＬＳＩを含むとしてもよい。マイクロプロセッサが、コンピュータプログラムにしたがって動作することにより、前記ＩＣカードまたは前記モジュールは、その機能を達成する。
【０３１５】
（７）上記の実施の形態及び変形例で説明した手法の手順を記述したプログラムをメモリに記憶しておき、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）などがメモリからプログラムを読み出して、読み出したプログラムを実行することによって、上記の手法が実現されるようにしてもよい。
【０３１６】
また、当該手法の手順を記述したプログラムを記録媒体に格納して、頒布するようにしてもよい。なお、上記プログラムを記憶する媒体としては、例えば、ＩＣカード、ハードディスク、光ディスク、フレキシブルディスク、ＲＯＭ、フラッシュメモリ等がある。
【０３１７】
（８）上記実施の形態及び上記変形例をそれぞれ組み合わせるとしてもよい。
【０３１８】
５．まとめ
ここでは、上記各実施の形態及び変形例について補足説明する。
【０３１９】
送信装置２００では、実施の形態１で述べたように、３Ｄ番組を構成する各種映像（左目映像、右目映像、及び平面視専用の映像）が映像格納部２０１に格納されている。
【０３２０】
ここで格納されている各種映像は、従来の２Ｄ放送と同じ解像度（例えば１９２０×１０８０）を持つ映像である。左目映像及び平面視専用の映像は、第１ビデオ符号化部２０５で従来の２Ｄ放送と同じビットレートで圧縮された後、第１多重化処理部２０８で従来の２Ｄ放送と同じ系で多重化された後、第１送信部２１２を経て放送波として送出される。
【０３２１】
右目映像は第２ビデオ符号化部２０６で圧縮された後、第２多重化処理部２０９で多重化された後、第２送信部２１３からＩＰネットワーク経由で送出される。
【０３２２】
この方式の利点は、２Ｄ表示として使用される左目映像の送出は、従来の放送システムを変更せず使えること、右目映像は放送波とは独立したトランスポートストリームとして送出されるため、左目映像に使えるビットレートは変わらない（つまり画質劣化がない）ことである。
【０３２３】
また、従来の放送がＭＰＥＧ２ Ｖｉｄｅｏなどのように古い圧縮技術を用いらざるを得ないのに対して、ＩＰネットワーク経由で送信される右目用映像はＭＰＥＧ−４  ＡＶＣなどの圧縮効率のよい新しい圧縮技術を使用することが出来る。従って、ＣＭなどのような平面視専用の映像を放送波とＩＰネットワーク経由の双方で送信した場合において、ＩＰネットワーク経由で送信する平面視専用の映像のビットレートによっては、放送波として送信される平面視専用の映像の画質よりもＩＰネットワーク経由で送信される平面視専用の映像の方が高画質となるケースも考えられる。
【０３２４】
このような場合には、例えば実施の形態２で示す第１ビデオ復号部３０６ａで復号した平面視専用の映像を２Ｄ表示に使う代わりに、ＩＰネットワーク経由で伝送されてきた平面視専用の映像（つまり第２ビデオ復号部３０７で復号された映像)で２Ｄ再生を行うことで、ＣＭなどを高画質な映像で視聴することができる。
【０３２５】
６．補足
（１）本発明の一態様は、再生装置であって、３Ｄ再生に用いる符号化された第１タイプの映像と、２Ｄ再生に用いる符号化された第２タイプの映像とを含み、当該第１タイプの映像と第２タイプの映像とが連なって構成される第１伝送用ストリームを受信する第１受信手段と、前記第１タイプの映像の視点とは異なる視点の映像であり、前記第１タイプの映像と共に用いて立体表示に供する符号化された第３タイプの映像を含む第２伝送用ストリームを受信する第２受信手段と、前記第１伝送用ストリームに含まれる符号化された第１タイプ及び第２タイプの映像を復号して、第１バッファに格納する第１復号手段と、前記第２伝送用ストリームに含まれる符号化された第３タイプの映像を復号して、第２バッファに格納する第２復号手段と、前記第１復号手段で復号される映像が第１タイプの映像であるか、第２タイプの映像であるかを判別する判別手段と、前記判別手段で第１タイプの映像であると判別された映像については、前記第１バッファに格納された当該第１タイプの映像と前記第２バッファに格納された第３タイプの映像とを用いて３Ｄ再生を行い、前記判別手段で第２タイプの映像であると判別された映像については、前記第１バッファに格納された当該第２タイプの映像を用いて２Ｄ再生を行う再生処理手段とを備えることを特徴とする。
【０３２６】
この構成によると、再生装置は、第２タイプの映像を表示する場合には、第１バッファに格納された当該第２タイプの映像を用いて２Ｄ再生を行うので、各フレームバッファを交互に切り替える必要がない。そのため、再生装置は、２Ｄ表示される映像については、冗長な処理を行うことなく当該映像を再生（表示）することができる。
【０３２７】
（２）ここで、前記第１伝送用ストリームに含まれる各映像には、当該映像が第１タイプの映像であるか、第２タイプの映像であるかを示す識別情報が対応付けられており、前記判別手段は、復号される映像に対応付けられた識別情報を用いて、当該映像が前記第１タイプの映像であるか前記第２タイプの映像であるかを判別するとしてもよい。
【０３２８】
この構成によると、再生装置は、第１伝送用ストリームに含まれる映像それぞれに対応付けられた識別情報を用いて、第１伝送用ストリームに含まれる映像ごとに当該映像が第１タイプの映像であるか第２タイプの映像であるかを判別することができる。
【０３２９】
（３）ここで、前記第２伝送用ストリームは、さらに、前記第１伝送用ストリームに含まれる前記第２タイプの映像と同一視点の映像である同一視点映像を含み、前記判別手段は、復号される映像が前記第２タイプの映像であると判別した場合において、さらに、当該映像の画質と、前記同一視点映像との画質を比較し、前記再生処理手段は、前記判別手段で前記第２タイプの映像の画質が低いと判断される場合には、前記第１バッファに格納された第２タイプの映像による２Ｄ再生の代わりに、前記第２バッファに格納された前記同一視点映像を用いて２Ｄ再生を行い、前記第２タイプの映像の画質が高いと判断される場合には、前記第１バッファに格納された前記第２タイプの映像を用いて２Ｄ再生を行うとしてもよい。
【０３３０】
この構成によると、再生装置は、第１伝送用ストリームに含まれる第２タイプの映像と、第２伝送用ストリームに含まれる同一視点映像との画質を比較し、高画質の映像を用いて２Ｄ再生を行う。そのため、視聴者は、第２タイプの映像又は当該映像と同一視点の映像である同一視点映像のうち高画質な映像の視聴を楽しむことができる。
【０３３１】
（４）ここで、前記第２タイプの映像に対して、当該映像の画質が、前記同一視点映像の画質よりも高いか否かを識別する画質情報が対応付けられ、前記判別手段は、前記画質情報を用いた前記比較を行うとしてもよい。
【０３３２】
この構成によると、再生装置は、画質情報を用いて画質比較を行うことができる。
【０３３３】
（５）ここで、前記第２伝送用ストリームは、さらに、前記第１伝送用ストリームに含まれる前記第２タイプの映像と同一視点の映像である同一視点映像を含み、前記第１伝送用ストリームと前記第２伝送用ストリームとから３Ｄ番組が構成され、前記第１伝送用ストリームには、さらに、前記３Ｄ番組に対して第２タイプの映像及び前記同一視点映像の何れの映像を用いて再生を行うかを示す再生情報が含まれ、前記判別手段は、復号される映像が前記第２タイプの映像であると判別した場合において、さらに、前記再生情報を用いて前記第２タイプの映像及び前記同一視点映像の何れの映像を用いて２Ｄ再生を行うかを判別し、前記再生処理手段は、前記判別手段で前記第２タイプの映像を用いると判断される場合には、前記第１バッファに格納された前記第２タイプの映像を用いて２Ｄ再生を行い、前記同一視点映像を用いると判断される場合には、前記第１バッファに格納された前記第２タイプの映像による２Ｄ再生の代わりに前記第２バッファに格納された前記同一視点映像を用いて２Ｄ再生を行うとしてもよい。
【０３３４】
この構成によると、再生装置は、第１伝送用ストリームに含まれる第２タイプの映像と、第２伝送用ストリームに含まれる同一視点映像とのうち、再生情報に指定される映像を用いて２Ｄ再生を行うことができる。例えば、３Ｄ番組の提供者は、再生情報を用いることで、第２タイプの映像及び同一視点映像のうち視聴者に見せたい映像を指定することができる。
【０３３５】
（６）ここで、前記第２伝送用ストリームは、前記第１伝送用ストリームに含まれる前記第２タイプの映像と同一視点の映像である同一視点映像を含み、前記第１伝送用ストリームと前記第２伝送用ストリームとから３Ｄ番組が構成され、前記第１伝送用ストリームは、さらに、ＰＭＴ（Ｐｒｏｇｒａｍ  Ｍａｐ  Ｔａｂｌｅ）又はＶＣＴ（Ｖｉｒｔｕａｌ  Ｃｈａｎｎｅｌ  Ｔａｂｌｅ）を含み、前記ＰＭＴ又は前記ＶＣＴには、前記３Ｄ番組に対して第２タイプの映像及び前記同一視点映像の何れの映像を用いて再生を行うかを示す再生情報が含まれ、前記判別手段は、復号される映像が前記第２タイプの映像であると判別した場合に、さらに、前記ＰＭＴ又は前記ＶＣＴに含まれる前記再生情報を用いて、当該第２タイプの映像及び前記同一視点映像の何れの映像を用いて再生を行うかを判別し、前記再生処理手段は、前記判別手段で前記第２タイプの映像を用いて再生を行うと判断される場合には、前記第１バッファに格納された前記第２タイプの映像を用いて２Ｄ再生を行い、前記同一視点映像を用いて再生を行うと判断される場合には、前記第１バッファに格納された前記第２タイプの映像による２Ｄ再生の代わりに前記第２バッファに格納された前記同一視点映像を用いて２Ｄ再生を行うとしてもよい。
【０３３６】
この構成によると、再生装置は、ＰＭＴ又はＶＣＴで指定される区間ごとに、第１伝送用ストリームに含まれる第２タイプの映像と、第２伝送用ストリームに含まれる同一視点映像とのうち、再生情報に指定される映像を用いて２Ｄ再生を行うことができる。
【０３３７】
（７）ここで、前記再生装置は、さらに、前記第１タイプの映像と前記第３タイプの映像とを用いた３Ｄ再生から一のタイプの映像を用いた２Ｄ再生へと切替指示を受け付ける受付手段を備え、前記判別手段は、前記受付手段が前記切替指示を受け付けた場合、さらに、前記第１タイプの映像及び前記第３タイプの映像の何れを用いて２Ｄ再生を行うかを判別し、前記再生処理手段は、前記受付手段が前記切替指示を受け付けた場合、前記判別手段の判別結果に応じた２Ｄ再生を行うとしてもよい。
【０３３８】
この構成によると、再生装置は、切替指示を受け付けると、第１タイプの映像及び第３タイプの映像のうち、一の映像を用いて２Ｄ再生を行うことができる。
【０３３９】
（８）ここで、前記第１伝送用ストリームに含まれる各第１タイプの映像には、第１タイプの映像の画質が、当該第１タイプの映像に対応する第３タイプの映像の画質よりも高いか否かを識別する画質情報が対応付けられており、前記判別手段は、第１タイプの映像に対応付けられた画質情報が、対応する前記第１タイプの映像の画質が前記第３タイプの映像の画質より高いことを示す場合には、前記第１タイプの映像を用いて２Ｄ再生を行うと判別し、対応する前記第１タイプの映像の画質が前記第３タイプの映像の画質より低いことを示す場合には前記第３タイプの映像を用いて２Ｄ再生を行うと判別するとしてもよい。
【０３４０】
この構成によると、再生装置は、切替指示を受け付けた場合、画質情報に基づいて、第１タイプの映像及び第３タイプの映像のうち高画質の映像を用いて２Ｄ再生を行うことができる。そのため、視聴者は、第１タイプの映像及び第３タイプの映像のうち高画質な映像の２Ｄ再生による視聴を楽しむことができる。
【０３４１】
（９）ここで、前記判別手段は、前記第１タイプの映像の画質と、前記第３タイプの映像の画質とを比較し、前記第１タイプの映像の画質が高いと判断する場合には前記第１タイプの映像を用いて２Ｄ再生を行うと判別し、前記第３タイプの映像の画質が高いと判断する場合には前記第３タイプの映像を用いて２Ｄ再生を行うと判別するとしてもよい。
【０３４２】
この構成によると、再生装置は、切替指示を受け付けた場合、第１タイプの映像及び第３タイプの映像の画質を比較して高画質の映像の２Ｄ再生を行うことができる。
【０３４３】
（１０）ここで、前記第１伝送用ストリームから得られる複数の前記第１タイプの映像、及び前記第２伝送用ストリームから得られる複数の前記第３タイプの映像から３Ｄ番組が構成され、前記第１伝送用ストリームは、前記３Ｄ番組に対して、３Ｄ再生の代わりに２Ｄ再生を行う際に、前記第１タイプの映像、及び前記第３タイプの映像の何れかを用いて再生するかを識別する再生情報を含み、前記判別手段は、前記受付手段が前記番組に対する前記切替指示を受け付けると、前記再生情報を用いて、前記第１タイプの映像及び前記第３タイプの映像の何れを用いて２Ｄ再生を行うかを判別するとしてもよい。
【０３４４】
この構成によると、再生装置は、第１伝送用ストリームに含まれる第１タイプの映像と、第２伝送用ストリームに含まれる第３タイプの映像とのうち、再生情報に指定される映像を用いて２Ｄ再生を行うことができる。例えば、３Ｄ番組の提供者は、一の３Ｄ番組に対して再生情報を用いることで、第１タイプの映像及び第３タイプの映像のうち視聴者に見せたい映像を指定することができる。
【０３４５】
（１１）ここで、前記第１伝送用ストリームから得られる複数の前記第１タイプの映像、及び前記第２伝送用ストリームから得られる複数の前記第３タイプの映像から３Ｄ番組が構成され、前記第１伝送用ストリームは、さらに、ＰＭＴ又はＶＣＴを含み、前記ＰＭＴ又は前記ＶＣＴには、前記３Ｄ番組に対して第１タイプの映像及び前記第３タイプの映像の何れの映像を用いて２Ｄ再生を行うかを示す再生情報が含まれ、前記判別手段は、さらに、前記受付手段が前記番組に対する前記切替指示を受け付けると、前記ＰＭＴ又は前記ＶＣＴに含まれる前記再生情報を用いて、前記第１タイプの映像及び前記第３タイプの映像の何れを用いて２Ｄ再生を行うかを判別するとしてもよい。
【０３４６】
この構成によると、再生装置は、ＰＭＴ又はＶＣＴで指定される区間ごとに、第１伝送用ストリームに含まれる第１タイプの映像と、第２伝送用ストリームに含まれる第３タイプの映像とのうち、再生情報に指定される映像を用いて２Ｄ再生を行うことができる。
【０３４７】
（１２）ここで、前記再生処理手段は、前記３Ｄ再生を行う際には、所定期間内に、前記第１バッファに格納された当該第１タイプの映像と、前記第２バッファに格納された第３タイプの映像とを異なるタイミングで１回ずつ読み出して表示し、前記２Ｄ再生を行う際には、前記所定期間内に、前記第１バッファに格納された前記第２タイプの映像を、異なるタイミングで２回読み出して表示するとしてもよい。
【０３４８】
この構成によると、再生装置は、第２タイプの映像を２Ｄ再生する際には、第１バッファに格納された当該第２タイプの映像を２回読み出すことで、２Ｄ再生を行うことができる。
【０３４９】
（１３）また、本発明の一態様は、送信装置であって、３Ｄ再生に用いる符号化された第１タイプの映像と、２Ｄ再生に用いる第２タイプの映像と、第１タイプの映像及び前記第２タイプの映像それぞれに対して、当該映像が第１タイプの映像であるか第２タイプの映像であるかを識別する映像識別子を含む第１伝送用ストリームを保持する第１保持手段と、前記第１タイプの映像の視点とは異なる視点の映像であり、３Ｄ再生時に前記第１タイプの映像とから立体視を可能とする、符号化された第３タイプの映像を含む第２伝送用ストリームを保持する第２保持手段と、前記第１伝送用ストリームを送信する第１送信手段と、前記第２伝送用ストリームを送信する第２送信手段とを備えることを特徴とする。
【０３５０】
この構成によると、送信装置は、第１伝送用ストリームに含まれる映像ごとに映像識別子を対応付けて送信するので、受信側の装置は、第１伝送用ストリームに含まれる映像ごとに対応付けられた映像識別子を用いることで当該映像が第１タイプの映像であるか第２タイプの映像であるかを判別することができる。
【０３５１】
（１４）ここで、前記第２伝送用ストリームは、さらに、前記第１伝送用ストリームに含まれる前記第２タイプの映像と同一視点の映像である同一視点映像を含み、前記第１伝送用ストリームは、さらに、各第２タイプの映像それぞれに対応付けられた情報であって、当該映像の画質が前記同一視点映像の画質よりも高いか否かを識別する画質情報を含むとしてもよい。
【０３５２】
この構成によると、送信装置は、第２タイプの映像ごとに画質情報を対応付けて送信するので、受信側の装置は、第２タイプの映像ごとに対応付けられた画質情報を用いることで第２タイプの映像、及び第２伝送用ストリームに含まれ、当該映像と同一視点である同一視点映像のうち高画質の映像を判別することができる。
【０３５３】
（１５）ここで、前記第１伝送用ストリームは、さらに、各第１タイプの映像それぞれに対応付けられた情報であって、当該映像の画質が当該第１タイプの映像に対応する第３タイプの映像の画質よりも高いか否かを識別する画質情報を含むとしてもよい。
【０３５４】
この構成によると、送信装置は、第１タイプの映像ごとに画質情報を対応付けて送信するので、受信側の装置は、第１タイプの映像ごとに対応付けられた画質情報を用いることで第１タイプの映像、及び第２伝送用ストリームに含まれる第３タイプの映像のうち高画質の映像を判別し、高画質の映像を用いた２Ｄ再生を行うことできる。
【産業上の利用可能性】
【０３５５】
本発明の送信装置及び再生装置は、２つの独立したトランスポートストリームを用いて３Ｄ番組を送信する装置、及び受信して再生する装置に適用することが可能である。
【符号の説明】
【０３５６】
１０、１０ａ、１０ｂ  再生装置
２００、２００ａ、２００ｂ  送信装置
２０１    映像格納部
２０２    ストリーム管理情報格納部
２０３    字幕ストリーム格納部
２０４    オーディオストリーム格納部
２０５、２０５ａ、２０５ｂ  第１ビデオ符号化部
２０６、２０６ａ  第２ビデオ符号化部
２０７    ビデオストリーム格納部
２０８    第１多重化処理部
２０９    第２多重化処理部
２１０    第１トランスポートストリーム格納部
２１１    第２トランスポートストリーム格納部
２１２    第１送信部
２１３    第２送信部
３０１    チューナ
３０２    ＮＩＣ
３０３、３０３ｂ  ユーザーインターフェイス部
３０４    第１多重分離部
３０５    第２多重分離部
３０６、３０６ａ、３０６ｂ  第１ビデオ復号部
３０７    第２ビデオ復号部
３０８    字幕復号部
３０９    ＯＳＤ作成部
３１０    オーディオ復号部
３１１、３１１ａ、３１１ｂ  判定部
３１２、３１２ａ、３１２ｂ  再生処理部
３１３    スピーカ
３２１    第１フレームバッファ
３２２    第２フレームバッファ
３２３    フレームバッファ切替部
３２４、３２４ａ、３２４ｂ  切替制御部
３２５    重畳部
３２６    表示部
１０００    映像送受信システム
【図１】
2013099289.tif 000003
【図２】
2013099289.tif 000004
【図３】
2013099289.tif 000005
【図４】
2013099289.tif 000006
【図５】
2013099289.tif 000007
【図６】
2013099289.tif 000008
【図７】
2013099289.tif 000009
【図８】
2013099289.tif 000010
【図９】
2013099289.tif 000011
【図１０】
2013099289.tif 000012
【図１１】
2013099289.tif 000013
【図１２】
2013099289.tif 000014
【図１３】
2013099289.tif 000015
【図１４】
2013099289.tif 000016
【図１５】
2013099289.tif 000017
【図１６】
2013099289.tif 000018
【図１７】
2013099289.tif 000019
【図１８】
2013099289.tif 000020
【図１９】
2013099289.tif 000021
【図２０】
2013099289.tif 000022
【図２１】
2013099289.tif 000023
【図２２】
2013099289.tif 000024
【図２３】
2013099289.tif 000025
【図２４】
2013099289.tif 000026
【図２５】
2013099289.tif 000027
【図２６】
2013099289.tif 000028
【国際調査報告】
2013099289.tif 000029
2013099289.tif 000030
2013099289.tif 000031
2013099289.tif 000032
2013099289.tif 000033