(57)【要約】【課題】伝送帯域を圧迫することなく、各再生装置が、より簡易に同期をとることが可能な同期再生システムを提供すること。【解決手段】アンプ２００が、マルチメディアデータを、インターネット４１０を介して受信する受信部２１０と、マルチメディアデータから音声データを分離する分離部２２０と、当該音声データに基づき、同期用データを生成する同期用データ生成部２５０と、当該同期用データを、セットトップボックス１００へ向け赤外通信路４２０を介して送信する同期用データ送信部２６０とを含み、セットトップボックス１００が、マルチメディアデータを、インターネット４１０を介して受信する受信部１１０と、マルチメディアデータから画像データを分離する分離部１２０と、同期用データを、赤外通信路４２０を介して受信する同期用データ受信部１５０と、同期用データに基づき、再生対象の画像データを決定するマッチング部１６０とを含んで構成される。【選択図】図１
2008079114.tif 000002
【特許請求の範囲】
【請求項１】
画像データおよび音声データを含むマルチメディアデータに基づき、画像を再生する少なくとも１台の画像再生装置と、前記マルチメディアデータに基づき、音声を再生する音声再生装置とを含む同期再生システムにおいて、
前記音声再生装置は、
前記マルチメディアデータを、情報提供装置から第１の伝送路を介して受信する受信部と、
前記マルチメディアデータから前記音声データを分離する分離部と、
当該音声データに基づき、同期用データを生成する同期用データ生成部と、
当該同期用データを、前記画像再生装置へ向け前記第１の伝送路とは異なる第２の伝送路を介して送信する同期用データ送信部と、
を含み、
前記画像再生装置は、
前記マルチメディアデータを、前記情報提供装置から前記第１の伝送路を介して受信する受信部と、
前記マルチメディアデータから画像データおよび音声データを分離する分離部と、
当該画像データおよび当該音声データを記憶する記憶部と、
前記同期用データを、前記第２の伝送路を介して受信する同期用データ受信部と、
前記同期用データに基づき、前記記憶部に記憶された前記音声データから対応する音声データを決定するとともに、前記記憶部に記憶された画像データのうち、決定した音声データに対応する再生対象の画像データを決定するマッチング部と、
を含むことを特徴とする同期再生システム。
【請求項２】
画像データおよび音声データを含むマルチメディアデータに基づき、画像を再生する少なくとも１台の画像再生装置と、前記マルチメディアデータに基づき、音声を再生する音声再生装置とを含む同期再生システムにおいて、
前記音声再生装置は、
前記マルチメディアデータを、情報提供装置から第１の伝送路を介して受信する受信部と、
前記マルチメディアデータから前記音声データを分離する分離部と、
当該音声データに基づき、同期用データを生成する同期用データ生成部と、
当該同期用データを、前記画像再生装置へ向け前記第１の伝送路とは異なる第２の伝送路を介して送信する同期用データ送信部と、
を含み、
前記画像再生装置は、
前記マルチメディアデータを、前記情報提供装置から前記第１の伝送路を介して受信する受信部と、
前記マルチメディアデータから画像データを分離する分離部と、
当該画像データを記憶する記憶部と、
前記同期用データを、前記第２の伝送路を介して受信する同期用データ受信部と、
前記同期用データに基づき、再生対象の画像データを決定するマッチング部と、
を含むことを特徴とする同期再生システム。
【請求項３】
請求項１、２のいずれかに記載の同期再生システムにおいて、
前記同期用データは、音声データの再生予定時刻を示すパターンデータを含み、
前記マッチング部は、当該パターンデータに基づき、前記再生対象の画像データを決定することを特徴とする同期再生システム。
【請求項４】
請求項１に記載の同期再生システムにおいて、
前記同期用データは、音声データの一部を示すパターンデータを含み、
前記マッチング部は、前記パターンデータに基づき、前記記憶部に記憶された前記音声データから対応する音声データを決定することを特徴とする同期再生システム。
【請求項５】
請求項１、２のいずれかに記載の同期再生システムにおいて、
前記マルチメディアデータは、前記情報提供装置によって複数のパケットに分割されて送信され、
前記同期用データは、パケット識別情報を示すパターンデータを含み、
前記マッチング部は、当該パケット識別情報に基づき、前記再生対象の画像データを決定することを特徴とする同期再生システム。
【請求項６】
請求項３〜５のいずれかに記載の同期再生システムにおいて、
前記同期用データ生成部は、前記音声データの種別を判定するとともに、当該種別に基づき、当該種別を示す種別データおよび前記パターンデータを含む前記同期用データを生成することを特徴とする同期再生システム。
【請求項７】
請求項６に記載の同期再生システムにおいて、
前記マッチング部は、前記種別データに基づき、マッチング手法を決定することを特徴とする同期再生システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像データと音声データを含むマルチメディアデータを、画像再生装置と音声再生装置が同期して再生する同期再生システムに関する。
【背景技術】
【０００２】
従来、再生装置は、画像データと音声データを含むストリームをネットワーク経由で送受信することによって音声を含む動画を再生している。例えば、ＲＦＣ１８８９で規定されているＲＴＰ（Real-time Transport Protocol）等によってこのような同期再生技術が実現されている。
【０００３】
しかし、例えば、画像を投写するプロジェクタと接続されたセットトップボックスと、音声を出力するスピーカーと接続されたアンプのように、画像再生装置と音声再生装置が分離している場合、ＲＴＰでは同期をとることができない。
【０００４】
そこで、各再生装置は、ＲＴＣＰ（RTP Control Protocol）、ＮＴＰ（Network Time Protocol）を用い、基準クロックに基づき、再生時刻を調整しながら同期をとることが提案されている。
【０００５】
しかし、ＲＴＣＰは、伝送帯域幅の５％程度がコマンド送受信のために必要になり、コンテンツを伝送するための帯域が狭くなってしまう。
【０００６】
また、ストリームに独自の同期信号を付加することも提案されているが、この場合も伝送帯域をより圧迫することになる上、ストリームに同期信号を付加するための処理が必要になり、装置構成が複雑化してしまう欠点がある。
【０００７】
また、例えば、特開２００６−１４８６７９号公報では、データ処理装置が、データストリームを受信し、当該データストリームを複製し、データストリームに含まれる映像データの時刻情報と音声データの時刻情報を用いて映像と音声を同期させて再生することが記載されている。
【特許文献１】特開２００６−１４８６７９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
しかし、特開２００６−１４８６７９号公報の手法では、データストリームを複製するための処理、複製したデータストリームを記憶するための記憶領域が必要になる。
【０００９】
本発明の目的は、画像再生装置と音声再生装置が分離している場合に、ストリームの伝送帯域を圧迫することなく、各再生装置が、より簡易に同期をとることが可能な同期再生システムを提供することである。
【課題を解決するための手段】
【００１０】
上記課題を解決するため、本発明に係る同期再生システムは、
画像データおよび音声データを含むマルチメディアデータに基づき、画像を再生する少なくとも１台の画像再生装置と、前記マルチメディアデータに基づき、音声を再生する音声再生装置とを含む同期再生システムにおいて、
前記音声再生装置は、
前記マルチメディアデータを、情報提供装置から第１の伝送路を介して受信する受信部と、
前記マルチメディアデータから前記音声データを分離する分離部と、
当該音声データに基づき、同期用データを生成する同期用データ生成部と、
当該同期用データを、前記画像再生装置へ向け前記第１の伝送路とは異なる第２の伝送路を介して送信する同期用データ送信部と、
を含み、
前記画像再生装置は、
前記マルチメディアデータを、前記情報提供装置から前記第１の伝送路を介して受信する受信部と、
前記マルチメディアデータから画像データおよび音声データを分離する分離部と、
当該画像データおよび当該音声データを記憶する記憶部と、
前記同期用データを、前記第２の伝送路を介して受信する同期用データ受信部と、
前記同期用データに基づき、前記記憶部に記憶された前記音声データから対応する音声データを決定するとともに、前記記憶部に記憶された画像データのうち、決定した音声データに対応する再生対象の画像データを決定するマッチング部と、
を含むことを特徴とする。
【００１１】
本発明によれば、同期再生システムは、ストリーム（マルチメディアデータ）が伝送される第１の伝送路とは異なる第２の伝送路を用いて同期用データを伝送することにより、第１の伝送路の伝送帯域を圧迫することなく、画像再生装置と音声再生装置が分離した状態で画像と音声を同期させることができる。
【００１２】
また、本発明によれば、同期再生システムは、元のストリームに独自の同期用データを付加したり、ストリームを複製したりすることなく、同期をとることができるため、各再生装置が、より簡易に同期をとることができる。
【００１３】
さらに、本発明によれば、同期再生システムは、音声データに基づく同期用データに基づいて対応する音声データを決定するとともに、決定した音声データに対応する再生対象の画像データを決定することにより、音声データと画像データが共通の同期情報を有していない場合であっても同期させやすく、より柔軟に同期をとることができる。
【００１４】
また、本発明に係る同期再生システムは、
画像データおよび音声データを含むマルチメディアデータに基づき、画像を再生する少なくとも１台の画像再生装置と、前記マルチメディアデータに基づき、音声を再生する音声再生装置とを含む同期再生システムにおいて、
前記音声再生装置は、
前記マルチメディアデータを、情報提供装置から第１の伝送路を介して受信する受信部と、
前記マルチメディアデータから前記音声データを分離する分離部と、
当該音声データに基づき、同期用データを生成する同期用データ生成部と、
当該同期用データを、前記画像再生装置へ向け前記第１の伝送路とは異なる第２の伝送路を介して送信する同期用データ送信部と、
を含み、
前記画像再生装置は、
前記マルチメディアデータを、前記情報提供装置から前記第１の伝送路を介して受信する受信部と、
前記マルチメディアデータから画像データを分離する分離部と、
当該画像データを記憶する記憶部と、
前記同期用データを、前記第２の伝送路を介して受信する同期用データ受信部と、
前記同期用データに基づき、再生対象の画像データを決定するマッチング部と、
を含むことを特徴とする。
【００１５】
本発明によれば、同期再生システムは、ストリーム（マルチメディアデータ）が伝送される第１の伝送路とは異なる第２の伝送路を用いて同期用データを伝送することにより、第１の伝送路の伝送帯域を圧迫することなく、画像再生装置と音声再生装置が分離した状態で画像と音声を同期させることができる。
【００１６】
また、本発明によれば、同期再生システムは、元のストリームに独自の同期用データを付加したり、ストリームを複製したりすることなく、同期をとることができるため、各再生装置が、より簡易に同期をとることができる。
【００１７】
さらに、本発明によれば、同期再生システムは、画像再生装置側で音声データを記憶することなく、同期をとることができるため、同期のために必要になる記憶容量をより抑制することができる。
【００１８】
また、前記同期再生システムにおいて、
前記同期用データは、音声データの再生予定時刻を示すパターンデータを含み、
前記マッチング部は、当該パターンデータに基づき、前記再生対象の画像データを決定してもよい。
【００１９】
これによれば、同期再生システムは、時刻を基準にして同期をとることができる。
【００２０】
また、前記同期再生システムにおいて、
前記同期用データは、音声データの一部を示すパターンデータを含み、
前記マッチング部は、前記パターンデータに基づき、前記記憶部に記憶された前記音声データから対応する音声データを決定してもよい。
【００２１】
これによれば、同期再生システムは、音声データの一部を用いて同期をとることができる。これにより、同期再生システムは、音声データに時刻情報が含まれない場合であっても同期をとることができ、より多種類の音声データに対応することができる。
【００２２】
また、前記同期再生システムにおいて、
前記マルチメディアデータは、前記情報提供装置によって複数のパケットに分割されて送信され、
前記同期用データは、パケット識別情報を示すパターンデータを含み、
前記マッチング部は、当該パケット識別情報に基づき、前記再生対象の画像データを決定してもよい。
【００２３】
これによれば、同期再生システムは、パケット識別データを用いて同期をとるできるため、音声データの一部を用いて同期をとる場合と比べ、第２の伝送路における伝送帯域の占有量をより低減できる。
【００２４】
また、前記同期再生システムにおいて、
前記同期用データ生成部は、前記音声データの種別を判定するとともに、当該種別に基づき、当該種別を示す種別データおよび前記パターンデータを含む前記同期用データを生成してもよい。
【００２５】
これによれば、同期再生システムは、音声データの種別に適した同期用データを用いて同期をとることができる。
【００２６】
また、前記同期再生システムにおいて、
前記マッチング部は、前記種別データに基づき、マッチング手法を決定してもよい。
【００２７】
これによれば、同期再生システムは、音声データの種別に適した同期用データを用いて同期をとることができる。より具体的には、マッチング部は、例えば、音声データに再生予定時刻が含まれる場合は当該再生予定時刻を検索キーとしてマッチングし、音声データにパケット識別情報が含まれる場合は当該パケット識別情報を検索キーとしてマッチングし、音声データに再生予定時刻もパケット識別情報も含まれない場合は当該音声データの一部のデータ列を検索キーとしてマッチングすることができる。
【発明を実施するための最良の形態】
【００２８】
以下、本発明を同期再生システムに適用した場合を例に採り、図面を参照しつつ説明する。なお、以下に示す実施例は、特許請求の範囲に記載された発明の内容を何ら限定するものではない。また、以下の実施例に示す構成の全てが、特許請求の範囲に記載された発明の解決手段として必須であるとは限らない。
【００２９】
（第１の実施例）
図１は、第１の実施例における同期再生システムの機能ブロック図である。
【００３０】
本実施例における同期再生システムは、画像再生装置の一種であるセットトップボックス１００と、音声再生装置の一種であるアンプ２００とを含んで構成されている。
【００３１】
ユーザーは、セットトップボックス１００から情報提供装置３００に所望のマルチメディアデータ（例えば、映画、ドラマ等）の配信を要求する。
【００３２】
情報提供装置３００は、当該要求に応じてインターネット４１０を介して画像データおよび音声データを含むマルチメディアデータを、セットトップボックス１００とアンプ２００にマルチキャスト送信する。ここで、マルチメディアデータは、例えば、ストリームの一種であるＭＰＥＧ２−ＴＳ（Moving Picture Experts Group 2 Transport Stream）であり、１８８バイトの複数のパケットに分割されて送信される。
【００３３】
以下、ＭＰＥＧ２−ＴＳを用いてビデオオンデマンド方式で、セットトップボックス１００とアンプ２００が画像（映像）と音声を同期して再生する場合を例に採り説明する。
【００３４】
アンプ２００は、パケットを、情報提供装置３００から第１の伝送路であるインターネット４１０を介して受信する受信部２１０と、当該パケットから音声データを分離する分離部２２０と、当該音声データを音声データのフォーマットにデコードする音声１次デコード部２３０と、デコードされた音声データを出力するデジタル音声出力部２４０と、デジタル音声出力部２４０からの音声データに基づき、同期用データを生成する同期用データ生成部２５０と、当該同期用データを、セットトップボックス１００へ向け第２の伝送路である赤外通信路４２０を介して送信する同期用データ送信部２６０とを含んで構成されている。
【００３５】
また、アンプ２００は、音声１次デコード部２３０によってデコードされた音声データ（例えば、ＡＣ３データ等）を、さらにデジタルデータ（単なるビット列）にデコードする音声２次デコード部２７０と、当該デジタルデータをアナログ信号に変換するデジタルアナログ変換部２７２と、当該アナログ信号を増幅する増幅部２７４と、増幅された信号をスピーカー２９０に出力する出力部２８０とを含んで構成されている。
【００３６】
また、セットトップボックス１００は、パケットを、情報提供装置３００からインターネット４１０を介して受信する受信部１１０と、当該パケットから画像データおよび音声データを分離する分離部１２０と、当該画像データおよび当該音声データを各データのフォーマットにデコードする画像音声１次デコード部１３０と、デコードされたデータを画像データ群１４２および音声データ群１４４として記憶する記憶部１４０とを含んで構成されている。
【００３７】
また、セットトップボックス１００は、アンプ２００からの同期用データを、赤外通信路４２０を介して受信する同期用データ受信部１５０と、当該同期用データに基づき、音声データ群１４４から対応する音声データを決定するとともに、画像データ群１４２のうち、決定した音声データに対応する再生対象の画像データを決定するマッチング部１６０と、決定された画像データをデジタルデータ（単なるビット列）にデコードする画像２次デコード部１７０と、当該デジタルデータをプロジェクタ１９０に出力する出力部１８０とを含んで構成されている。
【００３８】
なお、これらの各部の機能を実装するためのハードウェアとしては、例えば、以下のものを採用してもよい。例えば、デジタル音声出力部２４０としては、光デジタル音声信号を出力するデジタル音声出力インターフェース等、同期用データ生成部２５０、マッチング部１６０としては、ＣＰＵ等、同期用データ送信部２６０、同期用データ受信部１５０としては、赤外通信インターフェース等を採用してもよい。なお、これら以外の各部は、セットトップボックス１００やアンプ２００に備わっているハードウェアをそのまま使用可能である。また、受信部１１０および受信部２１０の機能は、各再生装置の外部のモデム等を共通で使用することによって実装してもよい。また、デジタル音声出力部２４０を省略し、音声１次デコード部２３０から同期用データ生成部２５０に１次デコード後音声データを出力してもよい。
【００３９】
次に、これらの各部を用いた処理の流れについて説明する。まず、アンプ２００における処理の流れについて説明する。
【００４０】
図２は、第１の実施例におけるアンプ２００における処理の流れを示すフローチャートである。また、図３は、第１の実施例におけるアンプにおけるデータの変化を示す模式図であり、図３（Ａ）は、マルチメディアデータを示す模式図であり、図３（Ｂ）は、パケットデータを示す模式図であり、図３（Ｃ）は、分離後の音声データを示す模式図であり、図３（Ｄ）は、同期用データと１次デコード後の音声データを示す模式図である。
【００４１】
情報提供装置３００は、図３（Ａ）に示すマルチメディアデータを複数のパケットに分割して図３（Ｂ）に示すＭＰＥＧ２−ＴＳ（ストリーム）としてセットトップボックス１００およびアンプ２００に配信する。
【００４２】
受信部２１０は、インターネット４１０を介して情報提供装置３００からの複数のパケットを先頭のパケットから順次受信する（ステップＳ１）。なお、各パケットは、ヘッダ部（Ｈ）とデータ部（画像データ（Ｖ１等）、音声データ（Ａ１等）等）で構成されている。また、ヘッダ部には、パケットの種別を識別するためのＰＩＤ（Packet Identifier）、パケット番号を示すカウンタ等が含まれる。また、データ部は、基本的には画像データまたは音声データであるが、制御データ等であってもよい。
【００４３】
分離部２２０は、複数のパケットを組み立てて元の音声データを分離する（ステップＳ２）。これにより、図３（Ｃ）に示す音声データが生成される。なお、ＭＰＥＧ２−ＴＳでは、この分離はＤＥＭＵＸ（De-multiplex）と呼ばれ、分離された音声データは音声エレメンタリストリームと呼ばれる。
【００４４】
音声１次デコード部２３０は、音声データを１次デコードする（ステップＳ３）。これにより、図３（Ｄ）に示す１次デコード後音声データが生成される。なお、本実施例では、音声データのフォーマットとしてＡＣ３（Audio Code number 3）を用いている。
【００４５】
デジタル音声出力部２４０は、デコード後の音声データをデジタル出力し、同期用データ生成部２５０は、当該音声データに基づき、図３（Ｄ）に示す同期用データを生成する（ステップＳ４）。具体的には、同期用データ生成部２５０は、ＡＣ３のヘッダから音声データの種別を判定し、ＡＣ３のtimecod1とtimecod2から再生予定時刻を判定し、同期用データ送信部２６０での通信に適したヘッダ、音声データの種別を示す種別データ、当該音声データの再生予定時刻を示す再生予定時刻データを含む同期用データを生成する。
【００４６】
同期用データ送信部２６０は、当該同期用データを、赤外通信路４２０に適した形式に変調し、赤外通信路４２０を介してセットトップボックス１００へ向け送信する（ステップＳ５）。
【００４７】
なお、音声２次デコード部２７０は、１次デコードされた音声データをデジタル値に変換し、デジタルアナログ変換部２７２は、当該デジタル値をアナログ信号に変換し、増幅部２７４は、当該アナログ信号を増幅し、出力部２８０は、当該アナログ信号をスピーカー２９０に出力し、スピーカー２９０は、当該アナログ信号に基づく音声を出力する。この処理の流れは一般的なＭＰＥＧ２における音声の再生と同様である。
【００４８】
次に、セットトップボックス１００における処理について説明する。
【００４９】
図４は、第１の実施例におけるセットトップボックス１００における処理の流れを示すフローチャートである。また、図５は、第１の実施例におけるセットトップボックスにおけるデータの変化を示す模式図であり、図５（Ａ）は、マルチメディアデータを示す模式図であり、図５（Ｂ）は、パケットデータを示す模式図であり、図５（Ｃ）は、分離後の画像データおよび音声データを示す模式図であり、図５（Ｄ）は、１次デコード後の画像データおよび音声データを示す模式図であり、図５（Ｅ）は、同期用データを示す模式図である。
【００５０】
情報提供装置３００は、図５（Ａ）に示すマルチメディアデータを複数のパケットに分割して図５（Ｂ）に示すＭＰＥＧ２−ＴＳ（ストリーム）としてセットトップボックス１００およびアンプ２００に配信する。
【００５１】
受信部１１０は、インターネット４１０を介して情報提供装置３００からの複数のパケットを順次受信する（ステップＳ１１）。
【００５２】
分離部１２０は、複数のパケットを組み立てて元の画像データおよび音声データを分離する（ステップＳ１２）。これにより、図５（Ｃ）に示す画像データおよび音声データが生成される。
【００５３】
画像音声１次デコード部１３０は、画像データおよび音声データを１次デコードする（ステップＳ１３）。これにより、図５（Ｄ）に示す１次デコード後画像データおよび１次デコード後音声データが生成される。なお、本実施例では、画像データのフォーマットとしてＨＤ（High Definition）解像度のＭＰＥＧ−２Ｖｉｄｅｏを、音声データのフォーマットとしてＡＣ３を用いている。
【００５４】
そして、画像音声１次デコード部１３０は、１次デコード後の各データを画像データ群１４２、音声データ群１４４の一部として記憶部１４０に記憶する（ステップＳ１４）。
【００５５】
また、同期用データ受信部１５０は、アンプ２００からの図５（Ｅ）に示す同期用データを、赤外通信路４２０を介して受信する（ステップＳ１５）。なお、同期用データ受信部１５０は、同期用データが変調されている場合（例えば、デジタル値が赤外光に変わっている場合等）は復調（例えば、赤外光をデジタル値に戻す等）して受信する。
【００５６】
マッチング部１６０は、同期用データに含まれる種別データに基づき、対象の音声データがＡＣ３であることを判定し、同期用データに含まれる再生予定時刻データを参照し、当該再生予定時刻と適合する音声データを音声データ群１４４から検索して決定する（ステップＳ１６）。
【００５７】
そして、マッチング部１６０は、決定した音声データに対応する再生対象の画像データを画像データ群１４２から検索して決定する（ステップＳ１７）。具体的には、例えば、画像データに再生予定時刻が含まれる場合は当該再生予定時刻が音声データの再生予定時刻と一致する画像データが再生対象の画像データとして決定される。また、例えば、画像データにパケットの連続番号（パケット識別情報）が含まれる場合は当該連続番号が、音声データの連続番号に最も近い画像データが再生対象の画像データとして決定される。
【００５８】
そして、マッチング部１６０は、現在時刻（例えば、画像２次デコード部１７０での再生時刻、セットトップボックス１００でのシステムタイマーの時刻等）と再生対象の画像データの再生予定時刻に基づき、再生タイミングを調整（例えば、画像２次デコード部１７０に再生すべき画像データを指示、画像データの補間、間引き等）し、画像２次デコード部１７０は、ＨＤ解像度のＭＰＥＧ−２Ｖｉｄｅｏフォーマットの画像データをデジタル値にデコードし、出力部１８０は、当該デジタル値をプロジェクタ１９０に出力し、プロジェクタ１９０は、当該デジタル値に基づいて画像を投写することにより、画像データを再生する（ステップＳ１８）。なお、画像と音声の同期手法自体は、一般的な手法であり、マッチング部１６０は、画像に対する音声の遅延が０〜３０ミリ秒程度に収まるように画像の再生タイミングを調整する。
【００５９】
以上のように、本実施例によれば、同期再生システムは、ストリームが伝送されるインターネット４１０とは異なる伝送路である赤外通信路４２０を用いて同期用データを伝送することにより、インターネット４１０の伝送帯域を圧迫することなく、画像再生装置と音声再生装置が分離した状態で画像と音声を同期させることができる。
【００６０】
また、同期用データには、音声データは含まれないため、同期再生システムは、セットトップボックス１００やアンプ２００が有している赤外通信等の比較的低速な伝送路を用いることができ、新たなハードウェアを追加することなく、かつ、省電力で同期をとることができる。
【００６１】
また、本実施例によれば、同期再生システムは、元のストリームに独自の同期用データを付加したり、ストリームを複製したりすることなく、同期をとることができるため、各再生装置が、より簡易に同期をとることができる。
【００６２】
さらに、本実施例によれば、同期再生システムは、音声データに基づく同期用データに基づいて対応する音声データを決定するとともに、決定した音声データに対応する再生対象の画像データを決定することにより、音声データと画像データが共通の同期情報（例えば、再生予定時刻情報等）を有していない場合であっても同期させやすく、より柔軟に同期をとることができる。
【００６３】
具体的には、例えば、音声データには再生予定時刻情報、パケット識別情報が含まれ、画像データには再生予定時刻情報が含まれず、パケット識別情報のみが含まれる場合、マッチング部１６０は、同期用データに含まれる再生予定時刻情報から再生対象の画像データを直接決定することはできないが、当該再生予定時刻情報と一致する音声データを決定し、当該音声データのパケット識別情報から再生対象の画像データを決定することができる。
【００６４】
（第２の実施例）
第１の実施例では、画像再生装置が音声データも記憶し、同期用データと当該音声データを用いて同期をとっているが、画像再生装置は、音声データを記憶せず、同期用データと画像データを用いて同期をとってもよい。次に、この同期方式の処理手順について説明する。
【００６５】
図６は、第２の実施例における画像再生装置における処理の流れを示すフローチャートである。
【００６６】
本実施例では、画像データおよび音声データには共通の再生予定時刻情報が含まれるものとする。なお、再生予定時刻情報としては、例えば、ＰＴＳ（Presentation Time Stamp）等が該当する。
【００６７】
受信部１１０は、インターネット４１０を介して情報提供装置３００からの複数のパケットを順次受信する（ステップＳ１１）。
【００６８】
分離部１２０は、複数のパケットを組み立てて元の画像データを分離する（ステップＳ２２）。
【００６９】
画像音声１次デコード部１３０は、画像データを１次デコードする（ステップＳ２３）。なお、本実施例では、画像音声１次デコード部１３０は、画像データのデコード機能のみを有していればよい。
【００７０】
そして、画像音声１次デコード部１３０は、１次デコード後の画像データを画像データ群１４２として記憶部１４０に記憶する（ステップＳ２４）。なお、本実施例では、記憶部１４０に音声データ群１４４は記憶されない。
【００７１】
また、同期用データ受信部１５０は、アンプ２００からの同期用データを、赤外通信路４２０を介して受信する（ステップＳ２５）。なお、本実施例では、同期用データは、種別データを有していなくてもよく、再生予定時刻データを有していればよい。
【００７２】
マッチング部１６０は、同期用データに含まれる再生予定時刻データを参照し、当該再生予定時刻と適合する画像データを画像データ群１４２から検索して決定する（ステップＳ２６）。
【００７３】
そして、マッチング部１６０等は、現在時刻と再生対象の画像データの再生予定時刻に基づき、再生タイミングを調整して画像データを再生する（ステップＳ１８）。
【００７４】
以上のように、第２の実施例によれば、同期再生システムは、第１の実施例と同様の作用効果を奏することができる。
【００７５】
さらに、本実施例によれば、同期再生システムは、画像再生装置側で音声データを記憶することなく、同期をとることができるため、同期のために必要になる記憶容量をより抑制することができる。
【００７６】
（その他の実施例）
なお、本発明の適用は、上述した実施例に限定されず、種々の変形が可能である。
【００７７】
例えば、上述した実施例では、同期用データのパターンデータとして、再生予定時刻を示すパターンデータを採用したが、音声データに再生予定時刻が含まれない場合は音声データのパケット識別情報を示すパターンデータを用いてもよく、音声データに再生予定時刻もパケット識別情報も含まれない場合は音声データの一部（例えば、音声データの先頭から数バイトのデータ等）を示すパターンデータを用いてもよい。
【００７８】
これによれば、同期再生システムは、音声データに再生予定時刻情報が含まれない場合であっても、同期をとることができるため、より種々のパターンの音声データに対応することができる。
【００７９】
例えば、上述した実施例では、音声データのフォーマットはＡＣ３であったが、例えば、ＬＰＣＭ（Linear Pulse Code Modulation）、ＤＴＳ（Digital Theater Systems）、ＭＰＥＧ１レイヤー２等であってもよい。
【００８０】
また、画像再生装置は、セットトップボックス１００とプロジェクタ１９０の組み合わせには限定されず、例えば、ＴＶ、モニター、ＰＣ（Personal Computer）等の画像出力が可能な種々のであってもよい。
【００８１】
また、１台の音声再生装置と、複数台の画像再生装置を同期させる場合にも本発明は有効である。具体的には、例えば、展示会場において、複数のモニターを並べて１つの大きな画像を表示しながらスピーカーから音声を出力する同期再生システム等にも本発明は有効である。
【００８２】
また、音声再生装置は、アンプ２００とスピーカーの組み合わせには限定されず、セットトップボックス、ＴＶ等の音声出力が可能な種々の装置を採用可能である。
【００８３】
また、第１の伝送路は、インターネット４１０には限定されず、例えば、家庭内ネットワーク等であってもよい。
【００８４】
また、情報提供装置３００の送信方式は、マルチキャスト方式には限定されず、例えば、ユニキャスト方式等であってもよい。
【００８５】
また、上述した実施例では、マルチメディアデータは複数のパケットに分割されて各再生装置に配信されたが、例えば、第１の伝送路が高速大容量の伝送路である場合、マルチメディアデータは単一のストリームとしてフレームごとに各再生装置に配信されてもよい。
【００８６】
また、第２の伝送路は、赤外通信路４２０には限定されず、例えば、レーザー通信路等の種々の無線伝送路、ＩＥＥＥ１３９４ケーブル、ＵＳＢケーブル等を用いた種々の有線伝送路であってもよい。
【００８７】
また、上述した実施例では、各再生装置は、１次デコード、２次デコードを行っているが、デコードの手法は任意であり、２回デコードを行うことは必須ではない。
【００８８】
また、上述した実施例では、ストリームとして、ＭＰＥＧ２−ＴＳを用いているが、その他のＭＰＥＧ等のストリームを用いてもよい。
【図面の簡単な説明】
【００８９】
【図１】第１の実施例における同期再生システムの機能ブロック図である。
【図２】第１の実施例におけるアンプにおける処理の流れを示すフローチャートである。
【図３】第１の実施例におけるアンプにおけるデータの変化を示す模式図であり、図３（Ａ）は、マルチメディアデータを示す模式図であり、図３（Ｂ）は、パケットデータを示す模式図であり、図３（Ｃ）は、分離後の音声データを示す模式図であり、図３（Ｄ）は、同期用データと１次デコード後の音声データを示す模式図である。
【図４】第１の実施例におけるセットトップボックスにおける処理の流れを示すフローチャートである。
【図５】第１の実施例におけるセットトップボックスにおけるデータの変化を示す模式図であり、図５（Ａ）は、マルチメディアデータを示す模式図であり、図５（Ｂ）は、パケットデータを示す模式図であり、図５（Ｃ）は、分離後の画像データおよび音声データを示す模式図であり、図５（Ｄ）は、１次デコード後の画像データおよび音声データを示す模式図であり、図５（Ｅ）は、同期用データを示す模式図である。
【図６】第２の実施例における画像再生装置における処理の流れを示すフローチャートである。
【符号の説明】
【００９０】
１００  セットトップボックス（画像再生装置）、１１０、２１０  受信部、１２０、２２０  分離部、１５０  同期用データ受信部、１６０  マッチング部、２００  アンプ（音声再生装置）、２５０  同期用データ生成部、２６０  同期用データ送信部、３００  情報提供装置、４１０  インターネット（第１の伝送路）、４２０  赤外通信路（第２の伝送路）
【図１】
2008079114.tif 000003
【図２】
2008079114.tif 000004
【図３】
2008079114.tif 000005
【図４】
2008079114.tif 000006
【図５】
2008079114.tif 000007
【図６】
2008079114.tif 000008