"複数のビューストリームが多重化された多重化ストリームを送信する送信部と、上記複数のビューストリームに、表示周期を細分化した間隔でデコードタイムスタンプを割り当てるタイムスタンプ割り当て部とを備える送信装置。上記送信部は、上記多重化ストリームを含む所定フォーマットのコンテナを送信し、上記複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す割り当て情報を、上記コンテナのレイヤに挿入する情報挿入部をさらに備える請求項1に記載の送信装置。上記コンテナは、トランスポートストリームであり、上記情報挿入部は、上記割り当て情報を、プログラムマップテーブルの配下に挿入する請求項2に記載の送信装置。上記割り当て情報には、対応するエレメンタリストリームが、複数のビューストリームを持つか否かを示す情報が含まれている請求項3に記載の送信装置。上記多重化ストリームは、複数のビューストリームを含むエレメンタリストリームを有する請求項1に記載の送信装置。各ビューストリームの間にビュー間境界を示す情報が配置される請求項5に記載の送信装置。上記複数のビューストリームは、多視点立体画像表示のための複数のビューから選択された所定数のビューのストリームである請求項1に記載の送信装置。上記複数のビューストリームは、ステレオ立体画像表示のための2つのビューのストリームである請求項1に記載の送信装置。上記複数のビューストリームに、視差情報のストリームが追加のビューストリームとして含まれる請求項1に記載の送信装置。複数のビューストリームが多重化された多重化ストリームを送信する送信ステップと、上記複数のビューストリームに、表示周期を細分化した間隔でデコードタイムスタンプを割り当てるタイムスタンプ割り当てステップとを備える送信方法。複数のビューストリームが多重化された多重化ストリームを受信する受信部と、上記多重化ストリーム内の上記複数のビューストリームをデコードするデコード部とを備え、上記複数のビューストリームには表示周期を細分化した間隔でデコードタイムスタンプが割り当てられており、上記デコード部は、複数のビューストリームを、上記各ビューストリームに割り当てられているデコードタイムスタンプに基づいて順次デコードする受信装置。上記受信部は、上記多重化ストリームを含む所定フォーマットのコンテナを受信し、上記コンテナのレイヤには、上記複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す割り当て情報が挿入されており、上記デコード部は、上記割り当て情報が存在するとき、複数のビューストリームを、上記各ビューストリームに割り当てられているデコードタイムスタンプに基づいて順次デコードする請求項11に記載の受信装置。複数のビューストリームが多重化された多重化ストリームを受信する受信ステップと、上記多重化ストリーム内の上記複数のビューストリームをデコードするデコードステップとを備え、上記複数のビューストリームには表示周期を細分化した間隔でデコードタイムスタンプを割り当てられており、上記デコードステップでは、複数のビューストリームを、上記各ビューストリームに割り当てられているデコードタイムスタンプに基づいて順次デコードする受信方法。複数のビューストリームが多重化された多重化ストリームを送信する送信部と、上記複数のビューストリームに、ストリーム間の依存関係を考慮してタイムスタンプを割り当てるタイムスタンプ割り当て部とを備える送信装置。上述のマルチビューサービスのために、送信側から受信側に、複数のビューストリームが多重化されて多重化ストリームを伝送することが行われる。ストリームをデコードするタイミングと表示するタイミングは、通常タイムスタンプで制御される。あるサービスにおいて、複数のストリームが供給され、それらが有機的に結合されて表示へ至る際、参照関係にある複数のストリームのデコード、表示のタイミングは、破綻のないようにピクチャ毎に制御されなければならない。また、ライブ配信の場合に、時刻の推移に応じてリアルタイムに多重化を行う際、ある一定の決まりに従って、複数のストリームにタイムスタンプを付して多重化を行う必要がある。マルチビューサービスにおいて、各ビューが一つのストリームで符号化される場合、ビュー間のデコード順と参照関係を保証する多重化方法、そして各ビューの表示関係を制御する多重化方法が望まれる。本技術の目的は、マルチビューサービスのための複数のビューストリームの伝送を良好に行うことにある。本技術の概念は、複数のビューストリームが多重化された多重化ストリームを送信する送信部と、上記複数のビューストリームに、表示周期を細分化した間隔でデコードタイムスタンプを割り当てるタイムスタンプ割り当て部とを備える送信装置にある。本技術において、送信部により、複数のビューストリームが多重化された多重化ストリームが送信される。この場合、タイムスタンプ割り当て部により、複数のビューストリームに、表示周期を細分化した間隔でデコードタイムスタンプが割り当てられる。例えば、複数のビューストリームは、多視点立体画像表示のための複数のビューから選択された所定数のビューのストリームであってもよい。また、例えば、複数のビューストリームは、ステレオ立体画像表示のための2つのビューのストリームであってもよい。また、例えば、複数のビューストリームに、視差情報のストリームが追加のビューストリームとして含まれていてもよい。例えば、多重化ストリームは、複数のビューストリームを含むエレメンタリストリームを有していてもよい。すなわち、多重化ストリームは、複数のビューストリームを含むエレメンタリストリームおよび単一のビューストリームを含むエレメンタリストリームのいずれか一方、あるいは双方を含むこととなる。複数のビューストリームを含むエレメンタリストリームにあっては、例えば、各ビューストリームの間にビュー間境界を示す情報が配置されるようにしてもよい。この場合、各ビューストリームの先頭に瞬時にアクセスすることが可能となる。このように本技術においては、多重化ストリーム内の複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられる。そのため、ビュー間のデコード順と参照関係が保証されることから、受信側においてデコード処理を破綻なくスムーズに行い得るようになる。なお、本技術において、送信部は、多重化ストリームを含む所定フォーマットのコンテナを送信し、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す割り当て情報を、このコンテナのレイヤに挿入する情報挿入部をさらに備える、ようにされてもよい。例えば、コンテナは、トランスポートストリームであり、情報挿入部は、割り当て情報を、プログラムマップテーブルの配下に挿入してもよい。例えば、この割り当て情報には、対応するエレメンタリストリームが、複数のビューストリームを持つか否かを示す情報が含まれていてもよい。この場合、受信側では、この割り当て情報に基づいて、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを認識できる。これにより、受信側では、各ビューストリームに割り当てられているデコードタイムスタンプによるタイムスタンプ管理に速やかに移ることができる。また、本技術の他の概念は、複数のビューストリームが多重化された多重化ストリームを受信する受信部と、上記多重化ストリーム内の上記複数のビューストリームをデコードするデコード部とを備え、上記複数のビューストリームには表示周期を細分化した間隔でデコードタイムスタンプを割り当てられており、上記デコード部は、複数のビューストリームを、上記各ビューストリームに割り当てられているデコードタイムスタンプに基づいて順次デコードする受信装置にある。本技術において、受信部により、複数のビューストリームが多重化された多重化ストリームが受信される。そして、デコード部により、多重化ストリーム内の複数のビューストリームがデコードされる。ここで、複数のビューストリームには、表示周期を細分化した間隔でデコードタイムスタンプが割り当てられている。そして、デコード部では、複数のビューストリームが、各ビューストリームに割り当てられているデコードタイムスタンプに基づいて順次デコードされる。このように本技術においては、複数のビューストリームが、各ビューストリームに割り当てられている、表示周期を細分化した間隔のデコードタイムスタンプに基づいて順次デコードされる。そのため、デコード処理を破綻なくスムーズに行うことが可能となる。なお、本技術において、例えば、受信部は、多重化ストリームを含む所定フォーマットのコンテナを受信し、コンテナのレイヤには、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す割り当て情報が挿入されており、デコード部は、割り当て情報が存在するとき、複数のビューストリームを、各ビューストリームに割り当てられているデコードタイムスタンプに基づいて順次デコードする、ようにされてもよい。この場合、割り当て情報に基づいて、各ビューストリームに割り当てられているデコードタイムスタンプによるタイムスタンプ管理に速やかに移行することとなる。本技術によれば、マルチビューサービスのための複数のビューストリームの伝送を良好に行うことができる。以下、発明を実施するための形態以下、実施の形態とするについて説明する。なお、説明は以下の順序で行う。1.実施の形態2.変形例<1.実施の形態>[画像送受信システム]図1は、実施の形態としての画像送受信システム10の構成例を示している。この画像送受信システム10は、放送局100および受信機200により構成されている。放送局100は、コンテナとしてのトランスポートストリームTSを放送波に載せて送信する。このトランスポートストリームTSには、マルチビューサービスのための複数のビューストリームが多重化された多重化ストリームが含まれる。上述したように、マルチビューサービスには、立体画像表示サービスの他に、マルチアングルビューの同時表示サービス、ユーザに応じたビューの提供サービスなどもあるが、ここでは、立体画像表示サービスの例とする。図2は、トランスポートストリームTSに含まれるビューストリームの一例を示している。図示の例では、各ビューのピクチャデータは、19201080のフルHDのサイズとされている。図2aは、裸眼で立体視が可能な多視点立体画像表示のサービスにおける例である。この場合、トランスポートストリームTSに、例えば、中央Centerのビュー、左端のビューおよび右端のビューの画像データが符号化されて得られたビューストリームビデオストリームが含まれる。この場合、中央Center、左端および右端のビューストリームの間には参照関係依存関係がある。図2bも、裸眼で立体視が可能な多視点立体画像表示のサービスにおける例である。この場合、中央Center、左端および右端のビューストリームの他に、視差データDisparitydataのストリームが含まれる。この視差データストリームは、追加のビューストリームとして含まれる。この場合、中央Center、左端および右端のビューストリーム、さらには視差データストリームの間には参照関係依存関係がある。なお、視差データの代わりに、この視差データに対応した奥行きデータDepthdataであってもよい。図2cは、シャッタメガネなどの特殊なメガネの装着が必要なステレオ立体画像表示における例である。この場合、左眼のビューおよび右眼のビューの画像データが符号化されて得られたビューストリームビデオストリームが含まれる。この場合、左眼および右眼のビューストリームの間には参照関係依存関係がある。トランスポートストリームTSに含まれる各ビューストリームには、表示周期を細分化した間隔でデコードタイムスタンプDTS:DecodingTimeStampが割り当てられる。図3は、トランスポートストリームTSに中央Center、左端および右端の3つのビューストリームが含まれる場合を示している。図3aは、各表示タイミングで表示される各ビューのピクチャを示している。ここで、P11,P21,P31はあるタイミングで表示される各ビューのピクチャを示し、P12,P22,P32はその次のタイミングで表示される各ビューのピクチャを示している。図3bに示すように、ビュー1のピクチャデータを含むPESパケットに割り当てられるデコードタイムスタンプがDTSであるとき、ビュー2のピクチャデータを含むPESパケットに割り当てられるデコードタイムスタンプDTSは、DTSに固定値のオフセット1/3Fが付加されたものとなる。同様に、ビュー3のピクチャデータを含むPESパケットに割り当てられるデコードタイムスタンプDTSは、DTSに固定値のオフセット1/3Fが付加されたものとなる。ここで、Fは、ピクチャの表示周期を表している。ここで、一般定式化すると、ビューの総数をN、ビューの順番をK、表示周期をFとするとき、DTSは、DTSを用いて、以下の1式のように表すことができる。この関係は、後述する図4、図5の例においても同様である。DTS=DTS1/3F1図4は、トランスポートストリームTSに中央Center、左端および右端の3つのビューストリームと共に、1つの視差データストリームが追加のビューストリームとして含まれる場合を示している。図4aは、各表示タイミングで表示される各ビューのピクチャを示している。ここで、P11,P21,P31,P41はあるタイミングで表示される各ビューのピクチャを示し、P12,P22,P32,P42はその次のタイミングで表示される各ビューのピクチャを示している。図4bに示すように、ビュー1のピクチャデータを含むPESパケットに割り当てられるデコードタイムスタンプがDTSであるとき、ビュー2のピクチャデータを含むPESパケットに割り当てられるデコードタイムスタンプDTSは、DTSに固定値のオフセット1/4Fが付加されたものとなる。同様に、ビュー3のピクチャデータを含むPESパケットに割り当てられるデコードタイムスタンプDTSは、DTSに固定値のオフセット1/4Fが付加されたものとなる。さらに、視差データを含むPESパケットに割り当てられるデコードタイムスタンプDTSは、DTSに固定値のオフセット1/4Fが付加されたものとなる。図5は、トランスポートストリームTSに左眼および右眼の2つのビューストリームが含まれる場合を示している。図5aは、各表示タイミングで表示される各ビューのピクチャを示している。ここで、P11,P21はあるタイミングで表示される各ビューのピクチャを示し、P12,P22はその次のタイミングで表示される各ビューのピクチャを示している。図5bに示すように、ビュー1のピクチャデータを含むPESパケットに割り当てられるデコードタイムスタンプがDTSであるとき、ビュー2のピクチャデータを含むPESパケットに割り当てられるデコードタイムスタンプDTSは、DTSに固定値のオフセット1/2Fが付加されたものとなる。図6は、各表示タイミングで表示される各ビューのピクチャと、そのデータPESパケットの多重化ストリーム内における配置位置、さらには、各PESパケットのヘッダへのDTS,PTSの挿入例を示している。なお、図示の例は、トランスポートストリームTSに中央Center、左端および右端の3つのビューストリームが含まれる場合を示している。最初に、図示のように、エンコーダ側のクロックをデコーダ側に伝えるためのPCRが付される。なお、PCRのデータは、PESのデータとは、別個に送信されることもある。多重化ストリーム内には、P11,P21,P31,P12,P22,P32,のピクチャ順にデータPESパケット配置される。この場合、P11,P21,P31のピクチャは同じ表示タイミングで表示されるものであり、それらのデータが含まれるPESパケットのヘッダには同一の表示タイムスタンプPTS1が挿入される。ただし、デコードタイムスタンプに関しては、DTS1,DTS2,DTS3という異なるタイムスタンプが挿入される。詳細説明は省略するが、P12,P22,P32移行のピクチャに関しても同様である。トランスポートストリームTSのレイヤ、つまりコンテナのレイヤに、上述したように、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す割り当て情報が挿入される。この割り当て情報は、例えば、トランスポートストリームTSに含まれるプログラムマップテーブルPMT:ProgramMapTableのビデオエレメンタリループVideoESloopの配下などに挿入される。この割り当て情報により、受信側では、この割り当て情報に基づいて、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを認識することが可能となる。この割り当て情報の詳細については後述する。図1に戻って、受信機200は、放送局100から放送波に載せて送られてくるトランスポートストリームTSを受信する。また、受信機200は、このトランスポートストリームTSに含まれる各ビューストリームをデコードして、各ビューのピクチャデータを順次取得し、立体画像表示多視点立体画像表示あるいはステレオ立体画像表示のために用いる。上述したように、各ビューストリームには、表示周期を細分化した間隔でデコードタイムスタンプが割り当てられている。そのため、受信器200では、各ビューストリームを、各ビューストリームに割り当てられているデコードタイムスタンプに基づいて、順次デコードする。上述したように、トランスポートストリームTSのレイヤに、割り当て情報が挿入される。受信機200では、この割り当て情報に基づいて、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを認識できる。これにより、受信機200では、各ビューストリームに割り当てられているデコードタイムスタンプによるタイムスタンプ管理に速やかに移ることができる。図7は、図6に示す多重化ストリームを受信した際の、各ビューのピクチャデータPESパケットのデコードタイミングと、各ビューのピクチャの表示タイミングの一例を示している。図示のように、PCRが付されている場合には、このPCRに基づいて、デコーダクロックがセットされる。多重化ストリーム内には、P11,P21,P31,P12,P22,P32,のピクチャ順にデータPESパケットが配置されている。P11,P21,P31のピクチャに関しては、それぞれ、PESヘッドに挿入されているデコードタイムスタンプDTS1,DTS2,DTS3のタイミングで順にそのデータのデコードが行われる。そして、PESヘッドの挿入されている表示タイムスタンプPTS1のタイミングで同時表示される。詳細説明は省略するが、P12,P22,P32移行のピクチャに関しても同様である。多重化ストリームは、複数のビューストリームを含むエレメンタリストリームおよび単一のビューストリームを含むエレメンタリストリームのいずれか一方、あるいは双方を含むものとされる。つまり、多重化ストリームは、複数のビューストリームを含むエレメンタリストリームを有することができる。図8は、送信側放送局100における多重化エンコードの回路例を示している。この例は、多重化ストリームが有する1つのエレメンタリストリームに、ビュー1およびビュー2の2つのビューストリームが含まれる、いわゆる1-pidの場合の例である。ビュー1の画像データV1はエンコーダ111でエンコードされ、符号化後のビデオストリームは、cpbcodedpicturebufferバッファ12に一時的に記憶される。また、ビュー2の画像データV2はエンコーダ112でエンコードされ、符号化後のビデオストリームは、cpbバッファ12に一時的に記憶される。cpbバッファ12は、ビデオに関してのデコード側のバッファリングを規定するためのエンコード側のバッファである。このcpbバッファ12で発生したビット量が、デコード側のバッファで破綻しないように、管理される。このcpbバッファ12に入力された2つのビデオストリームは、このcpbバッファ12から1つのエレメンタリストリームとして出て行く。この1つのエレメンタリストリームは、コンテナバッファ14に一時的に記憶され、その後に、マルチプレクサ13により多重化ストリームに含まれて送信される。図9は、上述の1-pidの場合におけるエレメンタリストリームの構成例を示している。この1つのエレメンタリストリームには、ビュー1およびビュー2の2つのビューストリームが含まれる。この場合、各ビューのピクチャはそれぞれアクセスユニットになり、そのピクチャデータをペイロード部分に持つPESパケットが順次連続したものとなる。この場合、DTS2=DTS11/2Fとすることで、多重化のバッファに入るアクセスユニットAccessUnitタイミングがエンコーダ側のクロックを止めずに多重化処理を行うことが可能になる。図10は、図8の多重化エンコードの回路例に対応した、受信側受信機200における多重化デコードの回路例を示している。送信側から送られてきた多重化ストリームは、コンテナバッファ22に一時的に記憶され、その後に、デマルチプレクサ21により1つのエレメンタリストリームが抽出され、cpbcodedpicturebufferバッファ23に一時的に記憶される。cpbバッファ23に記憶されている1つのエレメンタリストリームのうち、ビュー1のピクチャデータアクセスユニットは対応するDTSのタイミングによりデコーダ241でデコードされる。そして、ビュー1の画像データV1が得られ、一時的にdpbdecodedpicturebufferバッファ251に記憶される。また、cpbバッファ23に記憶されている1つのエレメンタリストリームのうち、ビュー2のピクチャデータアクセスユニットは対応するDTSのタイミングによりデコーダ242でデコードされる。そして、ビュー2の画像データV2が得られ、一時的にdpbバッファ252に記憶される。レンダリング部261,262により、PTSのタイミングで、画像データV1,V2による表示が行われる。図11は、送信側放送局100における多重化エンコードの回路例を示している。この例は、多重化ストリームが有する2つのエレメンタリストリームに、それぞれ、ビュー1、ビュー2のビューストリームが含まれる、いわゆる2-pidの場合の例である。ビュー1の画像データV1はエンコーダ111でエンコードされ、符号化後のビデオストリームは、cpbcodedpicturebufferバッファ121に一時的に記憶される。また、ビュー2の画像データV2はエンコーダ112でエンコードされ、符号化後のビデオストリームは、cpbバッファ122に一時的に記憶される。cpbバッファ121,122は、ビデオに関してのデコード側のバッファリングを規定するためのエンコード側のバッファである。このcpbバッファ121,122で発生したビット量が、デコード側のバッファで破綻しないように、管理される。このcpbバッファ121,122にそれぞれ入力されたビデオストリームは、このcpbバッファ121,122からそれぞれ1つのエレメンタリストリームとして出て行く。この2つのエレメンタリストリームは、コンテナバッファ14に一時的に記憶され、その後に、マルチプレクサ13により多重化ストリームに含まれて送信される。図12は、上述の2-pidの場合における2つのエレメンタリストリームの構成例を示している。第1のエレメンタリストリームには、ビュー1のビューストリームが含まれる。この場合、ビュー1のピクチャはアクセスユニットになり、そのピクチャデータをペイロード部分に持つPESパケットが存在するものとなる。第2のエレメンタリストリームには、ビュー2のビューストリームが含まれる。この場合、ビュー2のピクチャはアクセスユニットになり、そのピクチャデータをペイロード部分に持つPESパケットが存在するものとなるこの場合、DTS2=DTS11/2Fとすることで、多重化のバッファに入るアクセスユニットAccessUnitタイミングがエンコーダ側のクロックを止めずに多重化処理を行うことが可能になる。ストリームタイプStreamtypeで、2つのPESパケットの関連が記載される。図13は、図11の多重化エンコードの回路例に対応した、受信側受信機200における多重化デコードの回路例を示している。送信側から送られてきた多重化ストリームは、コンテナバッファ22に一時的に記憶され、その後に、デマルチプレクサ21により第1、第2のエレメンタリストリームが抽出され、それぞれ、cpbcodedpicturebufferバッファ231,232に一時的に記憶される。cpbバッファ231に記憶されているエレメンタリストリームに含まれるビュー1のピクチャデータアクセスユニットは、対応するDTSのタイミングによりデコーダ241でデコードされる。そして、ビュー1の画像データV1が得られ、一時的にdpbdecodedpicturebufferバッファ251に記憶される。また、cpbバッファ232に記憶されているエレメンタリストリームに含まれるビュー1のピクチャデータアクセスユニットは、対応するDTSのタイミングによりデコーダ242でデコードされる。そして、ビュー2の画像データV2が得られ、一時的にdpbdecodedpicturebufferバッファ253に記憶される。レンダダリング部261,262により、PTSのタイミングで、画像データV1,V2による表示が行われる。図14a,bは、複数のビューストリームを含むエレメンタリストリームの一例を示している。各アクセスユニットに、各ビューのピクチャの符号化データが順次配置される。この場合、最初のピクチャの符号化データは、SPS~CodedSliceで構成され、2番目以降のピクチャの符号化データは、SubsetSPS~CodedSliceで構成される。なお、この例は、MPEG4-AVCの符号化がされている例であるが、他の符号化方式でも適用可能である。なお、図中の16進数字はNALunittypeを示している。1つのエレメンタリストリームに複数のビューストリームが含まれる場合、各ビューストリームの境界が瞬時に識別可能なことが要求される。そこで、図14bに示すように、各ピクチャの符号化データの間に、ViewSeparationMarkerというビュー間境界を示す新たなNALunitを定義して配置することが考えられる。これにより、各ビューストリームの先頭データに瞬時にアクセスすることが可能となる。なお、図14aは、各ビューストリームの間に、ViewSeparationMarkerが配置されていない例を示している。図15a,bは、1つのエレメンタリストリームに3つのビューストリームが含まれる場合の例を示している。ここでは、各ビューのピクチャの符号化データをサブストリームsubstreamとして示している。図15aは、ランダムアクセス時の先頭アクセスユニットを示しており、図15bは、ランダムアクセス時の非先頭アクセスユニットを示している。[割り当て情報の構造と、TS構成]上述したように、トランスポートストリームTSのレイヤに、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す割り当て情報が挿入される。図16は、この割り当て情報としてのマルチプルストリームデスクリプタmultiplestreamdescriptorの構造例Syntaxを示している。また、図17は、図16に示す構造例における主要な情報の内容Semanticsを示している。multiplestreamtagは、デスクリプタタイプを示す8ビットのデータであり、ここでは、マルチプルストリームデスクリプタであることを示す。multiplestreamlengthは、デスクリプタの長さサイズを示す8ビットのデータである。このデータは、デスクリプタの長さとして、以降のバイト数を示す。multiplestreamflagの1ビットフィールドは、該当するストリームが複数のビューのストリームを持つか否かを示す。1は、複数のビューストリームがあることを示しし、0は、複数のビューストリームがないことを示す。multiplestreamflag1のとき、vieworderingおよび1stviewleftなどの情報がさらに存在する。vieworderingの4ビットフィールドは、表示の基準となる、ビューの最初を1とし、1~15までの値をとる。1stviewleftの1ビットフィールドは、vieworderingの1がleftかrightかを示す。1は、vieworderingはleftであることを示し、他のビューの場合、viewordering順にrightへ近づく。0は、vieworderingはrightであることを示し、他のビューの場合、viewordering順にleftに近づく。図18は、トランスポートストリームTSの構成例を示している。なお、この構成例では、図面の簡単化のために、オーディオなどに関しては、その図示を省略している。この構成例は、トランスポートストリームTSが、複数のビューストリームを含む1つのエレメンタリストリームを有する場合を示している。この図18の構成例では、1つのエレメンタリストリームのPESパケットvideoPES1が含まれている。また、トランスポートストリームTSには、PSIProgramSpecificInformationとして、PMTProgramMapTableが含まれている。PMTには、各エレメンタリストリームに関連した情報を持つエレメンタリループが存在する。この構成例では、ビデオエレメンタリループVideoESloopが存在する。このエレメンタリループには、ストリーム毎に、パケット識別子PID等の情報が配置されると共に、そのエレメンタリストリームに関連する情報を記述するデスクリプタも配置される。この構成例では、PMTのビデオエレメンタリループVideoESloopの配下に、各ビデオストリームに関連して、マルチプルストリームデスクリプタmultiplestreamdescriptorが挿入されている。このデスクリプタでmultiplestreamflag1とされ、該当するストリームが複数のビューストリームを持つことが示されている。図19は、トランスポートストリームTSの他の構成例を示している。なお、この構成例では、図面の簡単化のために、オーディオなどに関しては、その図示を省略している。この構成例は、トランスポートストリームTSが、1つのビューストリームを含む2つのエレメンタリストリームを有する場合を示している。この図19の構成例では、2つのエレメンタリストリームのPESパケットvideoPES1、videoPES2が含まれている。また、この構成例では、PMTのビデオエレメンタリループVideoESloopの配下に、各エレメンタリストリームに関連して、マルチプルストリームデスクリプタmultiplestreamdescriptorが挿入されている。PESパケットvideoPES1に対応したデスクリプタでは、multiplestreamflag0とされ、該当するストリームが複数のビューストリームを持っていないことが示されている。また、このデスククリプタでは、viewordering1とされ、表示の基準となるビューであることが示されている。また、PESパケットvideoPES2に対応したデスクリプタでは、multiplestreamflag0とされ、該当するストリームが複数のビューストリームを持っていないことが示されている。また、このデスククリプタでは、viewordering2とされ、表示の基準となるビューに隣接した2番目のビューであることが示されている。図20は、トランスポートストリームTSのさらに他の構成例を示している。なお、この構成例では、図面の簡単化のために、オーディオなどに関しては、その図示を省略している。この構成例は、トランスポートストリームTSが、1つのビューストリームを含む3つのエレメンタリストリームを有する場合を示している。この図20の構成例では、3つのエレメンタリストリームのPESパケットvideoPES1、videoPES2、videoPES3が含まれている。また、この構成例では、PMTのビデオエレメンタリループVideoESloopの配下に、各エレメンタリストリームに関連して、マルチプルストリームデスクリプタmultiplestreamdescriptorが挿入されている。PESパケットvideoPES1に対応したデスクリプタでは、multiplestreamflag0とされ、該当するストリームが複数のビューストリームを持っていないことが示されている。また、このデスククリプタでは、viewordering1とされ、表示の基準となるビューであることが示されている。また、PESパケットvideoPES2に対応したデスクリプタでは、multiplestreamflag0とされ、該当するストリームが複数のビューストリームを持っていないことが示されている。また、このデスククリプタでは、viewordering2とされ、表示の基準となるビューに隣接した2番目のビューであることが示されている。また、PESパケットvideoPES3に対応したデスクリプタでは、multiplestreamflag0とされ、該当するストリームが複数のビューストリームを持っていないことが示されている。また、このデスククリプタでは、viewordering3とされ、2番目のビューに隣接した3番目のビューであることが示されている。[送信データ生成部、受信機の構成例]放送局100における送信データ生成部110と、受信機200の構成例について説明する。送信データ生成部の構成例図21は、送信データ生成部110の構成例を示している。この送信データ生成部110は、N個の画像データ出力部1111~111Nと、ビューセレクタ112と、スケーラ1131,1132,1133と、ビデオエンコーダ1141,1142,1143と、マルチプレクサ115と、コンテナバッファ120を有している。また、この送信データ生成部110は、視差データ生成部116と、視差エンコーダ117と、音声データ出力部118と、オーディオエンコーダ119を有している。画像データ出力部1111~111Nは、多視点立体画像表示のためのN個のビューView1ViewNの画像データを出力する。この画像データ出力部は、例えば、被写体を撮像して画像データを出力するカメラ、あるいはストレージ記憶媒体から画像データを読み出して出力する画像データ読み出し部などにより構成される。なお、伝送されないビューの画像データは、実際にはなくてもよい。また、ビューセレクタ112は、N個のビューView1ViewNの画像データから、少なくとも左端のビューおよび右端のビューの画像データと、左端および右端の間に位置する中間のビュー1つまたは2つ以上の画像データを選択的に取り出す。この実施の形態において、ビューセレクタ112は、左端のビューの画像データVLおよび右端のビューの画像データVRを取り出すと共に、中央のビューの画像データVCを取り出す。また、スケーラ1131,1132,1133は、それぞれ、画像データVC,VL,VRに対してスケーリング処理を施して、例えば、19201080のフルHDのサイズの画像データVC′,VL′,VR′を得る。この場合、画像データVC,VL,VRが19201080のフルHDのサイズであるときは、そのまま出力する。また、画像データVC,VL,VRが19201080のサイズより大きいときは、スケールダウンして出力する。ビデオエンコーダ1141は、中央のビューの画像データVC′に対して、例えば、MPEG4-AVCMVC、MPEG2videoなどの符号化を施して、符号化ビデオデータを得る。そして、このビデオエンコーダ1141は、後段に備えるストリームフォーマッタ図示せずにより、この符号化データを含むビューストリームを生成する。また、ビデオエンコーダ1142は、左端のビューの画像データVL′に対して、例えば、MPEG4-AVCMVC、MPEG2videoなどの符号化を施して、符号化ビデオデータを得る。そして、このビデオエンコーダ1142は、後段に備えるストリームフォーマッタ図示せずにより、この符号化データを含むビューストリームを生成する。さらに、ビデオエンコーダ1143は、右端のビューの画像データVR′に対して、例えば、MPEG4-AVCMVC、MPEG2videoなどの符号化を施して、符号化ビデオデータを得る。そして、このビデオエンコーダ1143は、後段に備えるストリームフォーマッタ図示せずにより、この符号化データを含むビューストリームを生成する。視差データ生成部116は、ビューセレクタ112から出力される中央、左端および右端の各ビューの画像データに基づいて、視差データDisparitydataを生成する。この視差データには、例えば、中央のビューおよび左端のビューの間の視差データと、中央のビューおよび右端のビューの間の視差データが含まれている。この場合、画素単位、あるいはブロックBlock単位で、視差データが生成される。視差エンコーダ117は、視差データ生成部116で生成された視差データに符号化を施して視差データストリームを生成する。この視差データストリームには、画素単位、またはブロック単位の視差データが含まれることとなる。視差データが画素単位である場合には、画素データと同様に、圧縮符号化して伝送できる。なお、この視差データストリームにブロック単位の視差データが含まれる場合には、受信側で、上述した変換処理を行うことで、画素単位に変換することも可能である。また、このような視差データストリームの送信がない場合、受信側で、上述したように各ビュー間におけるブロック単位の視差データを求め、さらに画素単位に変換することが可能である。音声データ出力部118は、画像データに対応した音声データを出力する。この音声データ出力部118は、例えば、マイクロホン、あるいは記憶媒体から音声データを読み出して出力する音声データ読み出し部などにより構成される。オーディオエンコーダ119は、音声データ出力部118から出力される音声データに対して、MPEG-2Audio、AAC等の符号化を施し、オーディオストリームを生成する。コンテナバッファ120は、エンコード後の各ストリームを一時的に記憶する。マルチプレクサ115は、ビデオエンコーダ1141,1142,1143、視差データエンコーダ117およびオーディオエンコーダ119で生成された各ストリームをパケット化して多重し、多重化ストリームを生成する。この場合、それぞれのPESのヘッダには、受信側における同期再生のために、DTSDecodingTimeStamp、PTSPresentationTimeStampが挿入される。マルチプレクサ115は、トランスポートストリームTSのレイヤに、割り当て情報としてのマルチプルストリームデスクリプタmultiplestreamdescriptor図16参照を挿入する。このデスクリプタは、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す情報を持っている。このデスクリプタは、例えば、トランスポートストリームTSに含まれるプログラムマップテーブルPMT:ProgramMapTableの配下などに挿入される。図21に示す送信データ生成部110の動作を簡単に説明する。N個の画像データ出力部1111~111Nから出力される多視点立体画像表示のためのN個のビューView1ViewNの画像データは、ビューセレクタ112に供給される。ビューセレクタ112では、N個のビューの画像データから、中央のビューの画像データVC、左端のビューの画像データVLおよび右端のビューの画像データVRが取り出される。ビューセレクタ112で取り出された中央のビューの画像データVCはスケーラ1131に供給され、例えば、19201080のフルHDのサイズにスケーリング処理される。スケーリング処理後の画像データVC′は、ビデオエンコーダ1141に供給される。ビデオエンコーダ1141では、この画像データVC′に対して符号化が施されて符号化ビデオデータが得られ、この符号化データを含むビューストリームが得られる。このビューストリームは、コンテナバッファ120に供給されて、一時的に記憶される。また、ビューセレクタ112で取り出された左端のビューの画像データVLはスケーラ1132に供給され、例えば、19201080のフルHDのサイズにスケーリング処理される。スケーリング処理後の画像データVL′は、ビデオエンコーダ1142に供給される。ビデオエンコーダ1142では、この画像データVL′に対して符号化が施されて符号化ビデオデータが得られ、この符号化データ含むビューストリームが生成される。このビューストリームは、コンテナバッファ120に供給されて、一時的に記憶される。さらに、ビューセレクタ112で取り出された右端のビューの画像データVRはスケーラ1133に供給され、例えば、19201080のフルHDのサイズにスケーリング処理される。スケーリング処理後の画像データVR′は、ビデオエンコーダ1143に供給される。ビデオエンコーダ1143では、この画像データVR′に対して符号化が施されて符号化ビデオデータが得られ、この符号化データを含むビューストリームが生成される。このビューストリームは、コンテナバッファ120に供給されて、一時的に記憶される。また、ビューセレクタ112から出力される中央、左端および右端の各ビューの画像データは視差データ生成部116に供給される。この視差データ生成部116では、各ビューの画像データに基づいて、視差データDisparitydataが生成される。この視差データには、中央のビューおよび左端のビューの間の視差データと、中央のビューおよび右端のビューの間の視差データが含まれる。この場合、画素単位、あるいはブロックBlock単位で、視差データが生成される。視差データ生成部116で生成された視差データは、視差エンコーダ117に供給される。この視差エンコーダ117では、視差データに符号化処理が施されて、視差データストリームが生成される。この視差データストリームは、コンテナバッファ120に供給されて、一時的に記憶される。また、音声データ出力部118から出力される音声データは、オーディオエンコーダ119に供給される。このオーディオエンコーダ119では、音声データに対して、MPEG-2Audio、AAC等の符号化が施され、オーディオストリームが生成される。このオーディオストリームは、コンテナバッファ120に供給されて、一時的に記憶される。マルチプレクサ115では、コンテナバッファ120に記憶されている各エンコーダからのストリームがパケット化されて多重され、トランスポートストリームTSが生成される。この場合、それぞれのPESヘッダには、受信側における同期再生のために、DTS、PTSが挿入される。また、マルチプレクサ115では、PMTの配下などに、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す割り当て情報であるマルチプルストリームデスクリプタが挿入される。受信機の構成例図22は、上述の図21に示す送信データ生成部110に対応した受信機200の構成例を示している。この受信機200は、コンテナバッファ213と、デマルチプレクサ214と、コーデッドバッファ2151,2152,2153と、ビデオデコーダ2161,2162,2163と、デコーデッドバッファ2171,2172,2173と、スケーラ2181,2182,2183を有している。また、受信機200は、ビュー補間部219と、ピクセルインターリーバ220を有している。また、受信機200は、コーデッドバッファ221と、視差デコーダ222と、視差バッファ223と、視差データ変換部224を有している。また、受信機200は、コーデッドバッファ225と、オーディオデコーダ226と、チャネルミキシング部227を有している。コンテナバッファ213は、デジタルチューナ等で受信されたトランスポートストリームTSを一時的に記憶する。このトランスポートストリームTSには、多視点立体画像表示のための複数のビューのうち、少なくとも左端のビューおよび右端のビューの画像データと、左端および右端の間に位置する中間のビューとしての中央のビューの画像データとが符号化されて得られたビューストリームが含まれている。このトランスポートストリームTSには、上述したように、PMTの配下などに、割り当て情報であるマルチプルストリームデスクリプタが挿入されている。このデスクリプタは、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す。デマルチプレクサ214は、コンテナバッファ213に一時的に蓄積されたトランスポートストリームTSから、ビデオ、視差およびオーディオの各ストリームを抽出する。また、デマルチプレクサ214は、このトランスポートストリームTSから、上述のマルチプルストリームデスクリプタを抽出し、図示しない制御部CPUに送る。制御部は、このデスクリプタにより、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを認識できる。これにより、受信機200では、各ビューストリームに割り当てられているデコードタイムスタンプによるタイムスタンプ管理に速やかに移ることができる。コーデッドバッファ2151,2152,2153は、それぞれ、デマルチプレクサ214で抽出される中央、左端および右端の各ビューのビューストリームを一時的に記憶する。ビデオデコーダ2161,2162,2163は、それぞれ、コーデッドバッファ2151,2152,2153に記憶されているビューストリームにデコード処理を行って、中央、左端および右端の各ビューの画像データを取得する。上述のデマルチプレクサ214は、各ビューのビューストリーム視差データストリームも含むに割り当てられているDTS,PTSを抽出する。コーデッドバッファ2151,2152,2153からの各ビューのビューストリームの取り出しは、それぞれ、対応するDTSのタイミングで行われる。したがって、各ビューのビューストリームに対するデコード処理は、それぞれ、対応するDTSのタイミングで開始される。ここで、ビデオデコーダ2161は、中央ビューcenterviewの画像データを取得する。また、ビデオデコーダ2162は、左端ビューleftviewの画像データを取得する。さらに、ビデオデコーダ2163は、右端ビューrightviewの画像データを取得する。デコーデッドバッファ2171,2172,2173は、それぞれ、ビデオデコーダ2161,2162,2163で取得された各ビューの画像データを一時的に記憶する。スケーラ2181,2182,2183は、それぞれ、デコーデッドバッファ2171,2172,2173から出力される各ビューの画像データの出力解像度が、所定の解像度となるように調整する。コーデッドバッファ221は、デマルチプレクサ214で抽出される視差データストリームを一時的に記憶する。視差デコーダ222は、上述の送信データ生成部110の視差エンコーダ117図21参照とは逆の処理を行う。すなわち、視差デコーダ222は、コーデッドバッファ221に記憶されている視差データストリームのデコード処理を行って、視差データを得る。この視差データには、中央ビューと左端ビューとの間の視差データと、中央ビューと右端ビューとの間の視差データが含まれている。また、この視差データは、画素単位、あるいはブロック単位の視差データである。視差バッファ223は、視差デコーダ222で取得された視差データを一時的に記憶する。ここで、コーデッドバッファ221からの視差データストリームの取り出しは、デマルチプレクサ214で抽出された対応するDTSのタイミングで行われる。したがって、視差データストリームに対するデコード処理は、対応するDTSのタイミングで開始される。視差データ変換部224は、視差バッファ223に蓄積されている視差データに基づいて、スケーリング後の画像データのサイズに合った画素単位の視差データを生成する。例えば、生成された視差データがブロック単位である場合には、画素単位の視差データに変換する。また、例えば、生成された視差データが画素単位であるが、スケーリング後の画像データのサイズに合っていない場合には、適宜、スケーリングされる。ビュー補間部219は、スケーリング後の中央、左端および右端の各ビューの画像データから、視差データ変換部224で得られた各ビュー間の視差データに基づいて、伝送されてこない所定数のビューの画像データを補間合成する。すなわち、ビュー補間部219は、中央ビューと左端ビューとの間に位置する各ビューの画像データを補間合成して出力する。また、ビュー補間部219は、中央ビューと右端ビューとの間に位置する各ビューの画像データを補間合成して出力する。ピクセルインターリーバ220は、ビュー補間部219から出力されるN個のビューView1View2ViewNの画像データに対してピクセルインターリーブ処理を行って、3次元画像立体画像の裸眼観賞のための表示用画像データを生成する。コーデッドバッファ225は、デマルチプレクサ214で抽出されるオーディオストリームを一時的に記憶する。オーディオデコーダ226は、上述の送信データ生成部110のオーディオエンコーダ119図21参照とは逆の処理を行う。すなわち、オーディオデコーダ226は、コーデッドバッファ225に記憶されているオーディオストリームの復号化処理を行って、復号化された音声データを得る。チャネルミキシング部227は、オーディオデコーダ226で得られる音声データに対して、例えば5.1chサラウンド等を実現するための各チャネルの音声データを生成して出力する。なお、デコーデッドバッファ2171,2172,2173からの各ビューの画像データの読み出しと、視差バッファ223からの視差データの読み出しとは、PTSに基づいて行われ、転送同期が取られる。受信機200の動作を簡単に説明する。デジタルチューナ等で受信されたトランスポートストリームTSは、コンテナバッファ213に一時的に記憶される。このトランスポートストリームTSには、多視点立体画像表示のための複数のビューのうち、左端のビューおよび右端のビューの画像データと、左端および右端の間に位置する中間のビューとしての中央のビューの画像データとが符号化されて得られたビューストリームが含まれている。デマルチプレクサ214では、コンテナバッファ213に一時的に記憶されたトランスポートストリームTSから、ビデオ、視差およびオーディオの各ストリームが抽出される。また、デマルチプレクサ214では、このトランスポートストリームTSから、割り当て情報としてのマルチプルストリームデスクリプタが抽出され、制御部CPUに送られる。制御部では、このデスクリプタにより、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることが認識される。制御部では、各ビューストリームに割り当てられているデコードタイムスタンプによるタイムスタンプ管理に速やかに移ることができる。デマルチプレクサ214で抽出される中央、左端および右端の各ビューのビューストリームは、それぞれ、コーデッドバッファ2151,2152,2153に供給されて一時的に記憶される。そして、ビデオデコーダ2161,2162,2163では、それぞれ、コーデッドバッファ2151,2152,2153に記憶されているビューストリームの復号化処理が行われて、中央、左端および右端の各ビューの画像データが取得される。ビデオデコーダ2161,2162,2163で取得された各ビューの画像データは、それぞれ、デコーデッドバッファ2171,2172,2173に供給されて一時的に記憶される。スケーラ2181,2182,2183では、それぞれ、デコーデッドバッファ2171,2172,2173から出力される各ビューの画像データの出力解像度が所定の解像度となるように調整される。また、デマルチプレクサ214で抽出される視差データストリームは、コーデッドバッファ221に供給されて一時的に記憶される。視差デコーダ222では、コーデッドバッファ221に記憶されている視差データストリームのデコード処理が行われて、視差データが得られる。この視差データには、中央ビューと左端ビューとの間の視差データと、中央ビューと右端ビューとの間の視差データが含まれている。また、この視差データは、画素単位、あるいはブロック単位の視差データである。視差デコーダ222で取得された視差データは、視差バッファ223に供給されて一時的に記憶される。視差データ変換部224は、視差バッファ223に蓄積されている視差データに基づいて、スケーリング後の画像データのサイズに合った画素単位の視差データが生成される。この場合、生成された視差データがブロック単位である場合には、画素単位の視差データに変換される。また、この場合、生成された視差データが画素単位であるが、スケーリング後の画像データのサイズに合っていない場合には、適宜、スケーリングされる。ビュー補間部219では、スケーリング後の中央、左端および右端の各ビューの画像データから、視差データ変換部224で得られた各ビュー間の視差データに基づいて、伝送されてこない所定数のビューの画像データが補間合成される。このビュー補間部219からは、3次元画像立体画像を裸眼観賞するためのN個のビューView1View2ViewNの画像データが得られる。なお、中央、左端および右端の各ビューの画像データも含まれる。ピクセルインターリーバ220では、N個のビューView1View2ViewNの画像データに対してピクセルインターリーブ処理が行われて、3次元画像立体画像の裸眼観賞のための表示用画像データが生成される。この表示用画像データがディスプレイに供給されることで、3次元画像立体画像の裸眼観賞のための、画像表示が行われる。また、デマルチプレクサ214で抽出されるオーディオストリームは、コーデッドバッファ225に供給されて一時的に記憶される。オーディオデコーダ226では、コーデッドバッファ225に記憶されているオーディオスストリームの復号化処理が行われて、復号化された音声データが得られ。この音声データはチャネルミキシング部227に供給される。チャネルミキシング部227では、音声データに対して、例えば5.1chサラウンド等を実現するための各チャネルの音声データが生成される。この音声データは例えばスピーカに供給され、画像表示に合わせた音声出力がなされる。[送信データ生成部、受信機の他の構成例]上述の図21に示す送信データ生成部110および図22に示す受信機200は、トランスポートストリームTSに視差データが符号化されて得られた視差データストリームが含まれる場合の構成例である。トランスポートストリームTSに視差データストリームが含まれない場合も考えられる。図23は、その場合における送信データ生成部110Aの構成例を示している。この図23において、図21と対応する部分には同一符号を付し、その詳細説明は省略する。この送信データ生成部110Aは、図21に示す送信データ生成部110における視差データ生成部116および視差エンコーダ117が除かれた構成となる。この場合、マルチプレクサ115は、ビデオエンコーダ1141,1142,1143およびオーディオエンコーダ119で生成された各ストリームをパケット化して多重し、多重化ストリームを生成する。この図23に示す送信データ生成部110Aにおけるその他の構成は、図21に示す送信データ生成部110の構成と同様とされる。また、図24は、その場合における受信機200Aの構成例を示している。この図24において、図22と対応する部分には同一符号を付し、その詳細説明は省略する。この受信機200Aは、視差データ生成部228を有している。この視差データ生成部228は、スケーリング処理された中央、左端および右端の各ビューの画像データに基づいて、視差データを生成する。詳細説明は省略するが、この場合における視差データの生成方法は、上述した送信データ生成部110図21参照における視差データ生成部116における視差データ生成方法と同様である。なお、この視差データ生成部228は、図22に示す受信機200の視差データ変換部224で生成される画素単位の視差データと同様の視差データを生成して出力する。視差データ生成部228で生成された視差データは、ビュー補間部219に供給される。なお、図24に示す受信機200Aにおいては、図22に示す受信機200におけるコーデッドバッファ221、視差デコーダ222、視差バッファ223および視差データ変換部224は、省略される。この図24に示す受信機200Aにおけるその他の構成は、図22に示す受信機200の構成と同様とされる。[送信データ生成部、受信機のさらに他の構成例]上述の図21、図23に示す送信データ生成部110,110Aおよび図22、図24に示す受信機200,200Aは、トランスポートストリームTSに多視点立体画像表示用のビューストリームが含まれる場合の構成例である。トランスポートストリームTSにステレオ立体画像表示用のビューストリームが含まれる場合の構成例について説明する。送信データ生成部の構成例図25は、その場合における送信データ生成部110Bの構成例を示している。この図25において、図21と対応する部分には同一符号を付して示している。この送信データ生成部110Bは、2個の画像データ出力部1111,1112と、スケーラ1131,1132と、ビデオエンコーダ1141,1142と、マルチプレクサ115と、コンテナバッファ120を有している。また、この送信データ生成部110Bは、音声データ出力部118と、オーディオエンコーダ119を有している。画像データ出力部1111,1112は、それぞれ、ステレオ立体画像表示のための左眼View1画像データVL、右眼View2画像データVRを出力する。この画像データ出力部は、例えば、被写体を撮像して画像データを出力するカメラ、あるいはストレージ記憶媒体から画像データを読み出して出力する画像データ読み出し部などにより構成される。また、スケーラ1131,1132は、それぞれ、画像データVL,VRに対してスケーリング処理を施して、例えば、19201080のフルHDのサイズの画像データVL′,VR′を得る。この場合、画像データVL,VRが19201080のフルHDのサイズであるときは、そのまま出力する。また、画像データVL,VRが19201080のサイズより大きいときは、スケールダウンして出力する。ビデオエンコーダ1141は、左眼画像データVL′に対して、例えば、MPEG4-AVCMVC、MPEG2videoなどの符号化を施して、符号化ビデオデータを得る。そして、このビデオエンコーダ1141は、後段に備えるストリームフォーマッタ図示せずにより、この符号化データを含むビューストリームを生成する。また、ビデオエンコーダ1142は、右眼画像データVR′に対して、例えば、MPEG4-AVCMVC、MPEG2videoなどの符号化を施して、符号化ビデオデータを得る。そして、このビデオエンコーダ1142は、後段に備えるストリームフォーマッタ図示せずにより、この符号化データを含むビューストリームを生成する。音声データ出力部118は、画像データに対応した音声データを出力する。この音声データ出力部118は、例えば、マイクロホン、あるいは記憶媒体から音声データを読み出して出力する音声データ読み出し部などにより構成される。オーディオエンコーダ119は、音声データ出力部118から出力される音声データに対して、MPEG-2Audio、AAC等の符号化を施し、オーディオストリームを生成する。コンテナバッファ120は、エンコード後の各ストリームを一時的に記憶する。マルチプレクサ115は、ビデオエンコーダ1141,1142およびオーディオエンコーダ119で生成された各ストリームをパケット化して多重し、多重化ストリームを含むトランスポートストリームTSを生成する。この場合、それぞれのPESのヘッダには、受信側における同期再生のために、DTSDecodingTimeStamp、PTSPresentationTimeStampが挿入される。マルチプレクサ115は、トランスポートストリームTSのレイヤに、割り当て情報としてのマルチプルストリームデスクリプタmultiplestreamdescriptor図16参照を挿入する。このデスクリプタは、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す情報を持っている。このデスクリプタは、例えば、トランスポートストリームTSに含まれるプログラムマップテーブルPMT:ProgramMapTableの配下などに挿入される。図25に示す送信データ生成部110Bの動作を簡単に説明する。2個の画像データ出力部1111,1112から出力される、ステレオ立体画像表示のための左眼画像データVL、右眼画像データVRは、スケーラ1131,1132に供給され、例えば、19201080のフルHDのサイズにスケーリング処理される。スケーリング処理後の画像データVL′は、ビデオエンコーダ1141に供給される。ビデオエンコーダ1141では、この画像データVL′に対して符号化が施されて符号化ビデオデータが得られ、この符号化データ含むビューストリームが生成される。このビューストリームは、コンテナバッファ120に供給されて、一時的に記憶される。また、スケーリング処理後の画像データVR′は、ビデオエンコーダ1142に供給される。ビデオエンコーダ1142では、この画像データVR′に対して符号化が施されて符号化ビデオデータが得られ、この符号化データ含むビューストリームが生成される。このビューストリームは、コンテナバッファ120に供給されて、一時的に記憶される。また、音声データ出力部118から出力される音声データは、オーディオエンコーダ119に供給される。このオーディオエンコーダ119では、音声データに対して、MPEG-2Audio、AAC等の符号化が施され、オーディオストリームが生成される。このオーディオストリームは、コンテナバッファ120に供給されて、一時的に記憶される。マルチプレクサ115では、コンテナバッファ120に記憶されている各エンコーダからのストリームがパケット化されて多重され、トランスポートストリームTSが生成される。この場合、それぞれのPESヘッダには、受信側における同期再生のために、DTS、PTSが挿入される。また、マルチプレクサ115では、PMTの配下などに、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す割り当て情報であるマルチプルストリームデスクリプタが挿入される。受信機の構成例図26は、上述の図25に示す送信データ生成部110Bに対応した受信機200Bの構成例を示している。この受信機200Bは、コンテナバッファ213と、デマルチプレクサ214と、コーデッドバッファ2151,2152と、ビデオデコーダ2161,2162と、デコーデッドバッファ2171,2172と、スケーラ2181,2182と、レンダリング部229を有している。また、この受信機200Bは、コーデッドバッファ225と、オーディオデコーダ226と、チャネルミキシング部227を有している。コンテナバッファ213は、デジタルチューナ等で受信されたトランスポートストリームTSを一時的に記憶する。このトランスポートストリームTSには、ステレオ立体画像表示のための左眼、右眼の画像データがそれぞれ符号化されて得られたビューストリームが含まれている。このトランスポートストリームTSには、上述したように、PMTの配下などに、割り当て情報であるマルチプルストリームデスクリプタが挿入されている。このデスクリプタは、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す。デマルチプレクサ214は、コンテナバッファ213に一時的に記憶されたトランスポートストリームTSから、ビデオおよびオーディオの各ストリームを抽出する。また、デマルチプレクサ214は、このトランスポートストリームTSから、上述のマルチプルストリームデスクリプタを抽出し、図示しない制御部CPUに送る。制御部は、このデスクリプタにより、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを認識できる。これにより、受信機200では、各ビューストリームに割り当てられているデコードタイムスタンプによるタイムスタンプ管理に速やかに移ることができる。コーデッドバッファ2151,2152は、それぞれ、デマルチプレクサ214で抽出される左眼、右眼の各ビューのビューストリームを一時的に記憶する。ビデオデコーダ2161,2162は、それぞれ、コーデッドバッファ2151,2152に記憶されているビューストリームにデコード処理を行って、左眼画像データ、右眼画像データを取得する。上述のデマルチプレクサ214は、各ビューのビューストリームに割り当てられているDTS,PTSを抽出する。コーデッドバッファ2151,2152からの各ビューのビューストリームの取り出しは、それぞれ、対応するDTSのタイミングで行われる。したがって、各ビューのビューストリームに対するデコード処理は、それぞれ、対応するDTSのタイミングで開始される。ここで、ビデオデコーダ2161は左眼画像データを取得し、ビデオデコーダ2162は右眼画像データを取得する。デコーデッドバッファ2171,2172は、それぞれ、ビデオデコーダ2161,2162で取得された左眼、右眼の画像データを一時的に記憶する。スケーラ2181,2182は、それぞれ、デコーデッドバッファ2171,2172から出力される左眼、右眼の画像データの出力解像度が、所定の解像度となるように調整する。レンダリング部229は、左眼、右眼の画像データに対して、ステレオ立体画像表示のための処理を行って、ディスプレイに供給する。コーデッドバッファ225は、デマルチプレクサ214で抽出されるオーディオストリームを一時的に記憶する。オーディオデコーダ226は、上述の送信データ生成部110Bのオーディオエンコーダ119図25参照とは逆の処理を行う。すなわち、オーディオデコーダ226は、コーデッドバッファ225に記憶されているオーディオストリームの復号化処理を行って、復号化された音声データを得る。チャネルミキシング部227は、オーディオデコーダ226で得られる音声データに対して、例えば5.1chサラウンド等を実現するための各チャネルの音声データを生成して出力する。なお、デコーデッドバッファ2171,2172からの各ビューの画像データの読み出しは、PTSに基づいて行われ、転送同期が取られる。受信機200Bの動作を簡単に説明する。デジタルチューナ等で受信されたトランスポートストリームTSは、コンテナバッファ213に一時的に記憶される。このトランスポートストリームTSには、ステレオ立体画像表示のための左眼画像データと右眼画像データとが符号化されて得られたビューストリームが含まれている。デマルチプレクサ214では、コンテナバッファ213に一時的に記憶されたトランスポートストリームTSから、ビデオおよびオーディオの各ストリームが抽出される。また、デマルチプレクサ214では、このトランスポートストリームTSから、割り当て情報としてのマルチプルストリームデスクリプタが抽出され、制御部CPUに送られる。制御部では、このデスクリプタにより、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることが認識される。制御部では、各ビューストリームに割り当てられているデコードタイムスタンプによるタイムスタンプ管理に速やかに移ることができる。デマルチプレクサ214で抽出される左眼、右眼の各ビューのビューストリームは、それぞれ、コーデッドバッファ2151,2152に供給されて一時的に記憶される。そして、ビデオデコーダ2161,2162では、それぞれ、コーデッドバッファ2151,2152に記憶されているビューストリームの復号化処理が行われて、左眼画像データおよび右眼画像データが取得される。ビデオデコーダ2161,2162で取得された左眼、右眼の画像データは、それぞれ、デコーデッドバッファ2171,2172に供給されて一時的に記憶される。スケーラ2181,2182では、それぞれ、デコーデッドバッファ2171,2172から出力される左眼、右眼の画像データの出力解像度が所定の解像度となるように調整される。解像度調整された左眼、右眼の画像データは、レンダリング部229に供給される。そして、このレンダリング部229では、左眼、右眼の画像データに対して、ステレオ立体画像表示のための処理が行われて、ディスプレイに供給される。これにより、ステレオ立体画像表示のための画像表示、例えば、左眼画像および右眼画像の時分割表示などが行われる。上述したように、図1に示す画像送受信システム10においては、多重化ストリーム内の複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられる。そのため、ビュー間のデコード順と参照関係が保証されることから、受信側においてデコード処理を破綻なくスムーズに行うことが可能となる。また、図1に示す画像送受信システム10においては、トランスポートストリームTSのレイヤ、例えばPMTの配下に、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す割り当て情報が挿入される。そのため、受信側では、この割り当て情報に基づいて、複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを認識できる。これにより、受信側では、各ビューストリームに割り当てられているデコードタイムスタンプによるタイムスタンプ管理に速やかに移ることができる。<2.変形例>なお、上述実施の形態においては、マルチビューサービスとして立体画像表示サービスに着目したものであるが、本技術は、その他のマルチビューサービス、例えば、マルチアングルビューの同時表示サービス、ユーザに応じたビューの提供サービスなどにも、同様に適用できる。また、上述実施の形態においては、放送局100と受信機200からなる画像送受信システム10を示したが、本技術を適用し得る画像送受信システムの構成は、これに限定されるものではない。例えば、受信機200の部分が、例えば、HDMIHighDefinitionMultimediaInterfaceなどのデジタルインタフェースで接続されたセットトップボックスおよびモニタの構成などであってもよい。また、上述実施の形態においては、コンテナがトランスポートストリームMPEG-2TSである例を示した。しかし、本技術は、インターネット等のネットワークを利用して受信端末に配信される構成のシステムにも同様に適用できる。インターネットの配信では、MP4やそれ以外のフォーマットのコンテナで配信されることが多い。つまり、コンテナとしては、デジタル放送規格で採用されているトランスポートストリームMPEG-2TS、インターネット配信で使用されているMP4などの種々のフォーマットのコンテナが該当する。また、本技術は、以下のような構成を取ることもできる。1複数のビューストリームが多重化された多重化ストリームを送信する送信部と、上記複数のビューストリームに、表示周期を細分化した間隔でデコードタイムスタンプを割り当てるタイムスタンプ割り当て部とを備える送信装置。2上記送信部は、上記多重化ストリームを含む所定フォーマットのコンテナを送信し、上記複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す割り当て情報を、上記コンテナのレイヤに挿入する情報挿入部をさらに備える前記1に記載の送信装置。3上記コンテナは、トランスポートストリームであり、上記情報挿入部は、上記割り当て情報を、プログラムマップテーブルの配下に挿入する前記2に記載の送信装置。4上記割り当て情報には、対応するエレメンタリストリームが、複数のビューストリームを持つか否かを示す情報が含まれている前記3に記載の送信装置。5上記多重化ストリームは、複数のビューストリームを含むエレメンタリストリームを有する前記1から4のいずれかに記載の送信装置。6各ビューストリームの間にビュー間境界を示す情報が配置される前記5に記載の送信装置。7上記複数のビューストリームは、多視点立体画像表示のための複数のビューから選択された所定数のビューのストリームである前記1から6のいずれかに記載の送信装置。8上記複数のビューストリームは、ステレオ立体画像表示のための2つのビューのストリームである前記1から6のいずれかに記載の送信装置。9上記複数のビューストリームに、視差情報のストリームが追加のビューストリームとして含まれる前記1から8のいずれかに記載の送信装置。10複数のビューストリームが多重化された多重化ストリームを送信する送信ステップと、上記複数のビューストリームに、表示周期を細分化した間隔でデコードタイムスタンプを割り当てるタイムスタンプ割り当てステップとを備える送信方法。11複数のビューストリームが多重化された多重化ストリームを受信する受信部と、上記多重化ストリーム内の上記複数のビューストリームをデコードするデコード部とを備え、上記複数のビューストリームには表示周期を細分化した間隔でデコードタイムスタンプが割り当てられており、上記デコード部は、複数のビューストリームを、上記各ビューストリームに割り当てられているデコードタイムスタンプに基づいて順次デコードする受信装置。12上記受信部は、上記多重化ストリームを含む所定フォーマットのコンテナを受信し、上記コンテナのレイヤには、上記複数のビューストリームに表示周期を細分化した間隔でデコードタイムスタンプが割り当てられていることを示す割り当て情報が挿入されており、上記デコード部は、上記割り当て情報が存在するとき、複数のビューストリームを、上記各ビューストリームに割り当てられているデコードタイムスタンプに基づいて順次デコードする前記11に記載の受信装置。13複数のビューストリームが多重化された多重化ストリームを受信する受信ステップと、上記多重化ストリーム内の上記複数のビューストリームをデコードするデコードステップとを備え、上記複数のビューストリームには表示周期を細分化した間隔でデコードタイムスタンプを割り当てられており、上記デコードステップでは、複数のビューストリームを、上記各ビューストリームに割り当てられているデコードタイムスタンプに基づいて順次デコードする受信方法。14複数のビューストリームが多重化された多重化ストリームを送信する送信部と、上記複数のビューストリームに、ストリーム間の依存関係を考慮してタイムスタンプを割り当てるタイムスタンプ割り当て部とを備える送信装置。本技術の主な特徴は、同時表示に係るN個のビューストリームを多重化して伝送する際に、各ビューストリームに割り当てられるデコードタイムスタンプに、順次1/NFFは表示周期の固定オフセットを付加するようにしたことで、ビュー間のデコード順と参照関係を保証して行い得るようにしたことである図3参照。"