(57)【要約】【課題】コストの上昇を抑制しつつ、複数のメディアから得られる符号化されたマルチメディアデータを復号するデータ処理システムを提供する。【解決手段】データ入出力装置は、符号化された第１及び第２のマルチメディアデータを入力する第１の入力部及び第２の入力部と、符号化されたデータの多重化データを生成する多重化データ生成部と、多重化データを送信する第１の送信部と、を備える。データ処理装置は、多重化データを受信する第１の受信部と、多重化データから、符号化されたデータを抽出するデータ抽出部と、データの復号を行う第１の処理部及び第２の処理部と、復号されたデータに応じて、再生用データを生成する再生データ生成部と、再生用データを送信する第２の送信部を備える。さらに、データ入出力装置は、再生用データを受信する第２の受信部と、再生用データを再生する再生部と、をさらに備える。【選択図】図１
2014212368.tif 000002
【特許請求の範囲】
【請求項１】
符号化された第１のマルチメディアデータを入力する第１の入力部と、
符号化された第２のマルチメディアデータを入力する第２の入力部と、
前記符号化された第１及び第２のマルチメディアデータの多重化データを生成する多重化データ生成部と、
前記多重化データを送信する第１の送信部と、
を備えるデータ入出力装置と、
前記多重化データを受信する第１の受信部と、
前記多重化データから、前記符号化された第１及び第２のマルチメディアデータを抽出するデータ抽出部と、
前記符号化された第１のマルチメディアデータの復号を行う第１の処理部と、
前記符号化された第２のマルチメディアデータの復号を行う第２の処理部と、
前記復号された第１及び第２のマルチメディアデータに応じて、再生用マルチメディアデータを生成する再生データ生成部と、
前記再生用マルチメディアデータを送信する第２の送信部と、
を備えるデータ処理装置と、
を含み、
前記データ入出力装置は、
前記再生用マルチメディアデータを受信する第２の受信部と、
前記再生用マルチメディアデータを再生する再生部と、をさらに備える、データ処理システム。
【請求項２】
前記データ入出力装置と前記データ処理装置は、双方向伝送インターフェイスにより接続されている請求項１のデータ処理システム。
【請求項３】
前記多重化データ生成部は、前記第１及び第２のマルチメディアデータを識別するラベル情報を含むヘッダを、前記第１及び第２のマルチメディアデータに付加した後に、前記多重化データを生成し、
前記データ抽出部は、前記ラベル情報に基づいて、前記第１及び第２のマルチメディアデータのそれぞれを、前記第１及び第２の処理部に振り分ける請求項２のデータ処理システム。
【請求項４】
前記データ入出力装置は、
ユーザの操作を受け付け、前記ユーザの操作を操作情報に変換する操作部と、
前記操作情報に基づいて、制御データを生成する第１の制御部と、
をさらに備え、
前記多重化データ生成部は、前記多重化データを生成する際に、前記符号化された第１のマルチメディアデータ、前記符号化された第２のマルチメディアデータ及び前記制御データを使用し、
前記データ抽出部は、前記制御データが多重化された多重化データから前記制御データを抽出し、
前記データ処理装置は、
前記制御データに基づいて、前記再生データ生成部の動作を制御する第２の制御部をさらに備える請求項３のデータ処理システム。
【請求項５】
前記データ処理装置は、
前記再生用マルチメディアデータを、予め定めた圧縮方式により符号化する符号化部をさらに備え、
前記第２の送信部は、前記符号化された再生用マルチメディアデータを送信し、
前記データ入出力装置は、
前記符号化された再生用マルチメディアデータを復号する復号部をさらに備え、
前記再生部は、前記復号された再生用マルチメディアデータを再生する、請求項４のデータ処理システム。
【請求項６】
前記多重化データ生成部は、時分割多重化方式により、前記多重化データを生成する請求項５のデータ処理システム。
【請求項７】
符号化された第１及び第２のマルチメディアデータの多重化データを生成する多重化データ生成工程と、
前記多重化データから、前記符号化された第１及び第２のマルチメディアデータを抽出するデータ抽出工程と、
前記符号化された第１のマルチメディアデータの復号を行う第１の復号工程と、
前記符号化された第２のマルチメディアデータの復号を行う第２の復号工程と、
前記復号された第１及び第２のマルチメディアデータに応じて、再生用マルチメディアデータを生成する再生データ生成工程と、
前記再生用マルチメディアデータを再生する工程と、
を含むデータ処理方法。
【請求項８】
前記多重化データ及び／又は前記再生用マルチメディアデータを、双方向伝送インターフェイスにより送受信する工程をさらに含む請求項７のデータ処理方法。
【請求項９】
前記多重化データ生成工程は、前記第１及び第２のマルチメディアデータを識別するラベル情報を含むヘッダを、前記第１及び第２のマルチメディアデータに付加した後に、前記多重化データを生成し、
前記データ抽出工程は、前記ラベル情報に基づいて、前記第１及び第２のマルチメディアデータのそれぞれを、前記第１及び第２の復号工程に振り分ける請求項８のデータ処理方法。
【請求項１０】
ユーザの操作を受け付け、前記ユーザの操作を操作情報に変換する工程と、
前記操作情報に基づいて、制御データを生成する工程と、
をさらに含み、
前記多重化データ生成工程は、前記多重化データを生成する際に、前記符号化された第１のマルチメディアデータ、前記符号化された第２のマルチメディアデータ及び前記制御データを使用し、
前記データ抽出工程は、前記制御データが多重化された多重化データから前記制御データを抽出し、
前記再生データ生成工程は、前記制御データに基づいて、前記再生用マルチメディアデータを生成する際の処理を決定する請求項９のデータ処理方法。
【請求項１１】
前記再生用マルチメディアデータを、予め定めた圧縮方式により符号化する符号化工程と、
前記符号化された再生用マルチメディアデータを復号する工程と、
前記復号された再生用マルチメディアデータを再生する工程と、
をさらに含む請求項１０のデータ処理方法。
【請求項１２】
符号化された第１のマルチメディアデータを入力する第１の入力部と、
符号化された第２のマルチメディアデータを入力する第２の入力部と、
前記符号化された第１及び第２のマルチメディアデータの多重化データを生成する多重化データ生成部と、
前記多重化データを送信する送信部と、
外部にて前記多重化データから生成された再生用マルチメディアデータを受信する受信部と、
前記再生用マルチメディアデータを再生する再生部と、
を備えるデータ入出力装置。
【請求項１３】
前記多重化データ生成部は、前記第１及び第２のマルチメディアデータを識別するラベル情報を含むヘッダを、前記第１及び第２のマルチメディアデータに付加した後に、前記多重化データを生成する請求項１２のデータ入出力装置。
【請求項１４】
ユーザの操作を受け付け、前記ユーザの操作を操作情報に変換する操作部と、
前記操作情報に基づいて、制御データを生成する制御部と、
をさらに備え、
前記多重化データ生成部は、前記多重化データを生成する際に、前記符号化された第１のマルチメディアデータ、前記符号化された第２のマルチメディアデータ及び前記制御データを使用する請求項１３のデータ入出力装置。
【請求項１５】
符号化された前記再生用マルチメディアデータの復号を行う復号部をさらに備え、
前記再生部は、前記復号された再生用マルチメディアデータを再生する請求項１４のデータ入出力装置。
【請求項１６】
前記多重化データ生成部は、時分割多重化方式により、前記多重化データを生成する請求項１５のデータ入出力装置。
【請求項１７】
符号化された第１及び第２のマルチメディアデータを多重化することで生成された多重化データを受信する受信部と、
前記多重化データから、前記符号化された第１及び第２のマルチメディアデータを抽出するデータ抽出部と、
前記符号化された第１のマルチメディアデータの復号を行う第１の処理部と、
前記符号化された第２のマルチメディアデータの復号を行う第２の処理部と、
前記復号された第１及び第２のマルチメディアデータに応じて、再生用マルチメディアデータを生成する再生データ生成部と、
前記再生用マルチメディアデータを送信する送信部と、
を備えるデータ処理装置。
【請求項１８】
前記多重化データに含まれる前記符号化された第１及び第２のマルチメディアデータには、それぞれを識別するラベル情報を含むヘッダが付加され、
前記データ抽出部は、前記ラベル情報に基づいて、前記第１及び第２のマルチメディアデータのそれぞれを、前記第１及び第２の処理部に振り分ける請求項１７のデータ処理装置。
【請求項１９】
前記多重化データは、ユーザの操作に基づいて生成された制御データを使用して多重化され、
前記データ抽出部は、前記制御データが多重化された多重化データから前記制御データを抽出し、
前記制御データに基づいて、前記再生データ生成部の動作を制御する制御部をさらに備える請求項１８のデータ処理装置。
【請求項２０】
前記再生用マルチメディアデータを、予め定めた圧縮方式により符号化する符号化部をさらに備え、
前記送信部は、前記符号化された再生用マルチメディアデータを送信する請求項１９のデータ処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、データ処理システム、データ処理方法、データ入出力装置及びデータ処理装置に関する。例えば、映像や音声等からなるマルチメディアデータの処理に好適に利用できるものである。
【背景技術】
【０００２】
近年、ネットワーク技術や電波を用いた通信技術の発展により、１台の装置（例えば、テレビ装置）で複数のメディアから得られる映像や音声を視聴することが珍しくない。例えば、地上デジタル放送や衛星デジタル放送に対応するテレビ装置において、インターネット上のサーバから動画等をダウンロードし、視聴する形態が普及しつつある。
【０００３】
また、映像データや音声データを扱うテレビ装置やデジタルデータの記憶・再生を行うレコーダ装置は耐用年数が長く、頻繁に買い換えることは想定されていない。一方で、デジタルデータの符号化技術（圧縮技術）の進歩は早く、テレビ装置等の買い換えサイクルよりも短期間で、新たな符号化方式が普及することがある。とりわけ、ネットワークから得られる動画や音声等のファイルにこのような傾向が強く、テレビ装置等にとって未知のフォーマット（符号化方式）により動画や音声が配信されることがある。そのため、最新の符号化方式に対応するべく、ＳＴＢ（Set Top Box）と呼ばれる機器がテレビ装置等に接続され、使用される。
【０００４】
ＳＴＢは、放送波を受信するためのインターフェイスや、ネットワークに接続をするためのインターフェイスを備える。ＳＴＢは、これらのインターフェイスから取得した信号から、映像データや音声データを取り出し、テレビ装置等が対応可能な信号を出力する。また、近年においては、例えば、非特許文献１が開示するように、装置のサイズが小さく、テレビ装置のＨＤＭＩ（High-Definition Multimedia Interface；登録商標、以下同じ）端子に直接、差し込んで使用するＳＴＢが開発されている。
【０００５】
特許文献１において、録画された映像のうち、録画された映像を再生する際には意味のない情報（例えば、緊急ニュース情報）を加工する技術が開示されている。また、特許文献２において、映像を含むコンテンツデータを、テレビ装置のモニタに簡単に表示させる技術が開示されている。さらに、特許文献３において、高性能なプロセッサや高度なＯＳを必要とせず、放送波データに映像データを合成する技術が開示されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００２−０７７７８９号公報
【特許文献２】特開２００５−０２７０５３号公報
【特許文献３】特開２０１２−０７４７７１号公報
【非特許文献】
【０００７】
【非特許文献１】Ｒｏｋｕ社、“［CES］スマートテレビの体験を安く簡単に、Roku社がUSBフラッシュ・メモリ大のアダプターを開発”、2012年01月16日、［online］、［平成25年3月21日検索］、インターネット〈URL：http://techon.nikkeibp.co.jp/article/NEWS/20120116/203625/>
【発明の概要】
【発明が解決しようとする課題】
【０００８】
なお、上記先行技術文献の各開示を、本書に引用をもって繰り込むものとする。以下の分析は、本発明者らによってなされたものである。
【０００９】
上述のように、ＳＴＢには、符号化されたマルチメディアデータ（映像データや音声データ）を入力するためのインターフェイスが必要となる。また、ＳＴＢには、符号化された映像データ等を復号することにより得られる再生用データを、テレビ装置等に出力するためのインターフェイスも必要になる。しかし、データを入力するためのインターフェイスと、データを出力するためのインターフェイスと、をＳＴＢに設けることはＳＴＢ自身のコストを上昇させてしまう。とりわけ、複数のメディアから得られるマルチメディアデータに対応しようとするならば、各メディアに対応してデータ入力用とデータ出力用のインターフェイスが必要となり、これらのインターフェイスに必要な回路やコネクタ等のコストが上昇する。
【００１０】
なお、その他の課題と新規な特徴は、本明細書の記述及び添付図面から明らかになるであろう。
【課題を解決するための手段】
【００１１】
一実施の形態によれば、データ処理システムは、データ入出力装置とデータ処理装置を含む。データ入出力装置は、符号化された第１及び第２のマルチメディアデータを入力する第１の入力部及び第２の入力部と、符号化された第１及び第２のマルチメディアデータの多重化データを生成する多重化データ生成部と、多重化データを送信する第１の送信部と、を備える。データ処理装置は、多重化データを受信する第１の受信部と、多重化データから、符号化された第１及び第２のマルチメディアデータを抽出するデータ抽出部と、符号化された第１及び第２のマルチメディアデータの復号を行う第１の処理部及び第２の処理部と、復号された第１及び第２のマルチメディアデータに応じて、再生用マルチメディアデータを生成する再生データ生成部と、再生用マルチメディアデータを送信する第２の送信部を備える。さらに、データ入出力装置は、再生用マルチメディアデータを受信する第２の受信部と、再生用マルチメディアデータを再生する再生部と、をさらに備える。
【発明の効果】
【００１２】
一実施の形態によれば、コストの上昇を抑制しつつ、複数のメディアから得られる符号化されたマルチメディアデータを復号することに寄与するデータ処理システム、データ処理方法、データ入出力装置及びデータ処理装置が、提供される。
【図面の簡単な説明】
【００１３】
【図１】一実施形態の概要を説明するための図である。
【図２】第１の実施形態に係るデータ処理システム１の構成の一例を示す図である。
【図３】データ入出力装置１０の内部構成の一例を示す図である。
【図４】データ送受信部１０９に入力するデータの一例を示す図である。
【図５】データ処理装置２０の内部構成の一例を示す図である。
【図６】データ処理システム１の動作の一例を示すシーケンス図である。
【図７】表示パネル１０７の表示画面の一例を示す図である。
【図８】放送データ処理部２０２ａの内部構成の一例を示す図である。
【図９】表示パネル１０７の表示画面の一例を示す図である。
【図１０】通信データ処理部２０３ａの内部構成の一例を示す図である。
【図１１】データ入出力装置１０ａの内部構成の一例を示す図である。
【図１２】第２の実施形態に係るデータ処理システム２の構成の一例を示す図である。
【図１３】データ入出力装置６０の内部構成の一例を示す図である。
【図１４】データ処理装置７０の内部構成の一例を示す図である。
【発明を実施するための形態】
【００１４】
初めに、図１を用いて一実施形態の概要について説明する。なお、この概要に付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、この概要の記載はなんらの限定を意図するものではない。
【００１５】
上述のように、コストの上昇を抑制しつつ、複数のメディアから得られる符号化されたマルチメディアデータを復号するデータ処理システムが望まれている。
【００１６】
そこで、一例として図１に示すデータ処理システム３を提供する。データ処理システム３は、データ入出力装置６とデータ処理装置７を含む。データ入出力装置６は、符号化された第１及び第２のマルチメディアデータを入力する第１の入力部６０１及び第２の入力部６０２と、符号化された第１及び第２のマルチメディアデータの多重化データを生成する多重化データ生成部６０３と、多重化データを送信する第１の送信部６０４と、を備える。データ処理装置７は、多重化データを受信する第１の受信部７０１と、多重化データから、符号化された第１及び第２のマルチメディアデータを抽出するデータ抽出部７０２と、符号化された第１及び第２のマルチメディアデータの復号を行う第１の処理部７０３及び第２の処理部７０４と、復号された第１及び第２のマルチメディアデータに応じて、再生用マルチメディアデータを生成する再生データ生成部７０５と、再生用マルチメディアデータを送信する第２の送信部７０６を備える。さらに、データ入出力装置６は、再生用マルチメディアデータを受信する第２の受信部６０５と、再生用マルチメディアデータを再生する再生部６０６と、を備える。
【００１７】
データ入出力装置６は、複数のメディアから得られるマルチメディアデータを、例えば、時分割方式等により多重化する。多重化されたマルチメディアデータは、多重化データとして、データ処理装置７に送信される。データ処理装置７は、データ入出力装置６が送信するマルチメディアデータの信号処理に特化した構成とし、各マルチメディアデータを復号する。データ処理装置７は、復号したマルチメディアデータに応じて、再生用マルチメディアデータを生成する。データ入出力装置６は、データ処理装置７から再生用マルチメディアデータを受信し、スピーカや表示パネル等を用いて再生する。このように、データ処理システム３は、複数のマルチメディアデータを１つの多重化データに集約した上で、当該マルチメディアデータに対する信号処理及び再生用マルチメディアデータの生成をデータ処理装置７に委ねる。その結果、データ入出力装置６とデータ処理装置７の間のインターフェイスが削減され、コストの上昇を抑制できる。
【００１８】
以下に具体的な実施の形態について、図面を参照してさらに詳しく説明する。
【００１９】
［第１の実施形態］
第１の実施形態について、図面を用いてより詳細に説明する。
【００２０】
図２は、本実施形態に係るデータ処理システム１の構成の一例を示す図である。図２を参照すると、データ処理システム１は、データ入出力装置１０と、データ処理装置２０と、を含んで構成される。
【００２１】
データ入出力装置１０は、アンテナ３０から電波を受信する。データ入出力装置１０は、受信した電波を同調し、ＯＦＤＭ（直交波周波数分割多重；Orthogonal Frequency Division Multiplexing）方式等で変調された変調波を復調することで、ＭＰＥＧ−ＴＳ（MPEG-Transport Stream）に変換する。データ入出力装置１０は、ＨＤＭＩケーブル５０を介して、ＭＰＥＧ−ＴＳをデータ処理装置２０に送信する。
【００２２】
また、データ入出力装置１０は、インターネットやイントラネット等のネットワーク４０上のサーバから、ＨＴＭＬ（Hyper Text Markup Language）文書、動画ファイル又は音声ファイル等のデータを格納するパケットを受信する。なお、データ入出力装置１０がネットワーク４０を介して受信する又は送信するパケットを、ネットワークデータと表記し、以降の説明を行う。データ入出力装置１０は、ＨＤＭＩケーブル５０を介して、ネットワークデータをデータ処理装置２０に送信する。
【００２３】
データ処理装置２０は、データ入出力装置１０が送信するＭＰＥＧ−ＴＳ又はネットワークデータに対する信号処理を実行する。詳細は後述するが、データ処理装置２０は、データ入出力装置１０が送信するＭＰＥＧ−ＴＳから、映像データ及び音声データを生成する。データ処理装置２０は、データ入出力装置１０が送信するネットワークデータからＷＥＢ（ウェブ）ページを構成し、又は、動画ファイル又は音声ファイルのデコードを行うことで、映像データ及び音声データを生成する。
【００２４】
データ処理装置２０は、ＭＰＥＧ−ＴＳ及びネットワークデータから生成した映像データ及び音声データに応じて、再生用マルチメディアデータ（再生用映像データ及び再生用音声データ）を生成する。データ処理装置２０は、生成した再生用映像データ及び再生用音声データを、ＨＤＭＩケーブル５０を介して、データ入出力装置１０に送信する。データ処理装置２０からデータ入出力装置１０に向けた再生用映像データ及び再生用音声データの送信は、ＨＤＭＩケーブル５０を介して行われるため、再生用映像データ及び再生用音声データを圧縮することなく、データ入出力装置１０に入力できる。
【００２５】
データ入出力装置１０は、外部（データ処理装置２０）にて生成された再生用映像データ及び再生用音声データを受信し、液晶パネル等の表示パネルやスピーカを用いて、映像及び音声の再生を行う。
【００２６】
なお、図２に示すデータ処理システム１の構成は例示であって、システム構成を限定する趣旨ではない。例えば、アンテナ３０を介して電波を取得するのではなく、ケーブルテレビ局が送信するＤＯＣＳＩＳ（Data Over Cable Service Interface Specification）規格やＭｏＣＡ（Multimedia over Coax Alliance）規格に対応する信号を受信する形態であってもよい。また、データ入出力装置１０とデータ処理装置２０を接続するケーブルは、ＨＤＭＩケーブルに限定されず、他の双方向伝送規格に適合したケーブルであってもよい。
【００２７】
図３は、データ入出力装置１０の内部構成の一例を示す図である。データ入出力装置１０は、操作部１０１と、放送波インターフェイス（放送波ＩＦ）部１０２と、通信インターフェイス（通信ＩＦ）部１０３と、音声再生部１０４と、スピーカ１０５と、映像再生部１０６と、表示パネル１０７と、制御部１０８と、データ送受信部１０９と、ＨＤＭＩインターフェイス（ＨＤＭＩ  ＩＦ）部１１０と、を含んで構成される。
【００２８】
操作部１０１はユーザの操作を受け付ける手段である。操作部１０１は、例えば、リモコンが発する赤外線を受光し、リモコンコードを生成する手段である。あるいは、操作部１０１は、タッチパネル等の操作デバイスを含んで構成され、ユーザの指が接触する場所を、表示パネル１０７上の位置情報に変換する手段であってもよい。このように、操作部１０１は、ユーザの操作を受け付け、ユーザの操作を操作情報（リモコンコードや位置情報）に変換する。操作部１０１は、操作情報を制御部１０８に出力する。
【００２９】
放送波インターフェイス部１０２は、上述の第１の入力部６０１に相当する。即ち、所定の方式（例えば、ＭＰＥＧ２圧縮方式）により符号化されたマルチメディアデータを入力する手段である。放送波インターフェイス部１０２は、アンテナ３０を介して受信する電波を入力し、電波を同調することで、所望のチャンネルを選択する。また、放送波インターフェイス部１０２は、変調波を復調し、ＭＰＥＧ−ＴＳに変換する。放送波インターフェイス部１０２は、ＭＰＥＧ−ＴＳをデータ送受信部１０９に出力する。
【００３０】
通信インターフェイス部１０３は、上述の第２の入力部６０２に相当する。即ち、所定の方式（例えば、ＭＰＥＧ４圧縮方式）により符号化されたマルチメディアデータを入力する手段である。通信インターフェイス部１０３は、ネットワークインターフェイスカード（ＮＩＣ；Network Interface Card）として機能し、ネットワーク４０上のサーバとパケットの送受信を行う手段である。通信インターフェイス部１０３は、ネットワーク４０上のサーバから受信したネットワークデータを、データ送受信部１０９に出力する。あるいは、通信インターフェイス部１０３は、ネットワーク４０上のサーバに対して、ネットワークデータを送信する。なお、ネットワーク４０上のサーバに対して送信するネットワークデータは、データ処理装置２０が生成するデータであって、ＨＤＭＩケーブル５０及びＨＤＭＩインターフェイス部１１０を介して、データ送受信部１０９に入力される。
【００３１】
データ入出力装置１０は、イーサネット（登録商標、以下同じ）ケーブル等の有線ケーブルを用いてネットワーク４０と接続してもよいし、ＩＥＥＥ（The Institute of Electrical and Electronics Engineers）８０２ａ／ｂ／ｇ／ｎ等により規定される無線ＬＡＮ（Local Area Network）を用いてネットワーク４０と接続してもよい。
【００３２】
音声再生部１０４は、ＨＤＭＩインターフェイス部１１０を介して、再生用音声データ（非圧縮のデジタルデータ）を入力し、スピーカ１０５を駆動する手段である。音声再生部１０４には、デジタル信号をアナログ信号に変換するＤ／Ａ（Digital To Analog）変換器や、アナログ信号を増幅するアンプを含んで構成される。
【００３３】
映像再生部１０６は、ＨＤＭＩインターフェイス部１１０を介して、再生用映像データ（非圧縮のデジタルデータ）を入力し、表示パネル１０７を駆動する手段である。映像再生部１０６には、入力したデジタルデータを表示パネル１０７に適したサイズにスケーリングするビデオスケーラや、表示パネル１０７を駆動するための制御信号を生成するドライバ回路等を含んで構成される。なお、音声再生部１０４、スピーカ１０５、映像再生部１０６及び表示パネル１０７が、上述の再生部６０６に相当する。
【００３４】
制御部１０８は、データ送受信部１０９や放送波インターフェイス部１０２等のデータ入出力装置１０に含まれる各部を制御する手段である。制御部１０８は、操作部１０１から取得した操作情報（例えば、リモコンコード）に応じて、音声再生部１０４や映像再生部１０６の動作を制御する。例えば、制御部１０８は、音量アップに対応するリモコンコードを受け取った場合には、音声再生部１０４に対して、音量アップを指示する。あるいは、制御部１０８は、放送波インターフェイス部１０２における同調周波数を切り替えることで、ユーザが希望するチャンネルの選択を可能とする。
【００３５】
制御部１０８は、操作部１０１から取得した操作情報を、データ処理装置２０に送る必要があると判断した場合には、データ処理装置２０に送信するデータを生成し、データ送受信部１０９に出力する。例えば、制御部１０８は、操作情報と、操作情報に対応する処理内容（後述する制御データ）と、の対応関係をテーブル情報として管理し、必要に応じて制御データをデータ送受信部１０９に出力する。あるいは、操作部１０１が出力する操作情報は一律にデータ送受信部１０９に送信してもよい。この場合には、データ処理装置２０の側で、制御データの取捨選択をする。
【００３６】
データ送受信部１０９は、上述の多重化データ生成部６０３に相当する。即ち、データ送受信部１０９は、少なくともＭＰＥＧ−ＴＳ及びネットワークデータに対して多重化処理を施すことで、多重化データを生成する。データ送受信部１０９は、放送波インターフェイス部１０２、通信インターフェイス部１０３及び制御部１０８が、出力するデータを入力し、これらのデータからイーサネット規格に適合するフレーム（パケット）を生成する。データ送受信部１０９は、ＨＤＭＩインターフェイス部１１０及びＨＤＭＩケーブル５０を介して、生成したイーサネットフレームを多重化データとしてデータ処理装置２０に送信する。
【００３７】
データ送受信部１０９は、放送波インターフェイス部１０２、通信インターフェイス部１０３及び制御部１０８のそれぞれが出力するデータを、時分割方式により多重化し、多重化したデータをイーサネット規格に適合するフレームにカプセル化することで、多重化データを生成する。なお、以降の説明において、放送波インターフェイス部１０２がデータ送受信部１０９に出力するデータを放送データ、通信インターフェイス部１０３がデータ送受信部１０９に出力するデータを通信データ、制御部１０８がデータ送受信部１０９に出力するデータを制御データ、とそれぞれ表記する。
【００３８】
データ送受信部１０９は、図４に例示する放送データ、通信データ及び制御データを入力する。データ送受信部１０９は、内蔵するバッファに、上記データ（放送データ、通信データ及び制御データ）を蓄積する。その後、データ送受信部１０９は、各データを予め定めたサイズに分割し、それぞれのデータにヘッダを付加する。データ送受信部１０９が付加するヘッダには、分割されたデータのソースを識別する情報と前後関係を明示するラベル情報が含まれる。
【００３９】
例えば、図４において、データ送受信部１０９は、最初に取得したＭＰＥＧ−ＴＳには「１−１」というラベルを付与し、続くＭＰＥＧ−ＴＳには「１−２」というラベルを付与する。同様に、通信データや制御データに対しても、予め定めた規則に従って、ラベルを付与する。次に、データ送受信部１０９は、新たなヘッダが付加された後の各データを、時分割方式により多重化し、多重化データを構成する（図４（ｂ）参照）。データ送受信部１０９は、ＨＤＭＩインターフェイス部１１０及びＨＤＭＩケーブル５０を介して、多重化データをデータ処理装置２０に送信する。
【００４０】
なお、データ入出力装置１０とデータ処理装置２０の時刻同期が可能であれば、ラベル情報としてタイムスタンプを用いることもできる。この場合には、例えば、データ入出力装置１０又はデータ処理装置２０が起動する際、互いの時刻を同期する処理を行う。
【００４１】
ＨＤＭＩインターフェイス部１１０は、上述の第１の送信部６０４及び第２の受信部６０５に相当する。ＨＤＭＩインターフェイス部１１０は、データ送受信部１０９が生成する多重化データを、データ処理装置２０に向けて送信する。ＨＤＭＩインターフェイス部１１０は、データ処理装置２０が送信する再生用マルチメディアデータを受信する。
【００４２】
ＨＤＭＩインターフェイス部１１０は、イーサネット規格により規定されたタイミング及び波形により、多重化データをデータ処理装置２０に送信する。ここで、ＨＤＭＩインターフェイス部１１０及びＨＤＭＩケーブル５０には、ＨＤＭＩ１．４規格に適合する制御回路、コネクタ及びケーブルを使用する。なお、ＨＤＭＩ１．４は、ＨＤＭＩケーブル上にて、映像及び音声のマルチメディアデータと、イーサネットフレームの送受信を実現する規格である。即ち、データ入出力装置１０は、ＨＥＣ（ＨＤＭＩ  Ｅｔｈｅｒｎｅｔ  Ｃｈａｎｎｅｌ）を備えるＨＤＭＩを、双方向伝送インターフェイスとして使用する。
【００４３】
図５は、データ処理装置２０の内部構成の一例を示す図である。データ処理装置２０は、データ送受信部２０１と、放送データ処理部２０２と、通信データ処理部２０３と、制御部２０４と、映像データ生成部２０５と、音声データ生成部２０６と、ＨＤＭＩインターフェイス（ＨＤＭＩ  ＩＦ）部２０７と、を含んで構成される。
【００４４】
データ送受信部２０１は、上述のデータ抽出部７０２に相当する。データ送受信部２０１は、ＨＤＭＩインターフェイス部２０７を介して、データ入出力装置１０が送信する多重化データを受信する。データ送受信部２０１は、受信した多重化データから放送データ、通信データ及び制御データを抽出する。その際、データ送受信部２０１は、放送データ等に付加されたヘッダのラベル情報を参照することで、各データを抽出する。
【００４５】
データ送受信部２０１は、抽出したデータを内蔵するバッファに蓄積する。例えば、ラベル「１−１」、「１−２」、・・・、「１−ｎ」（ただし、ｎは正の整数）が格納されたヘッダが付加されたデータは、予め、放送データと定められているので、これらのデータを同じバッファに蓄積する。通信データや制御データについても同様に処理する。なお、データ送受信部２０１は、放送データ等をバッファに蓄積する際に、データ入出力装置１０が付加したヘッダを削除する。
【００４６】
データ送受信部２０１は、バッファに蓄積した各データを、放送データ処理部２０２、通信データ処理部２０３及び制御部２０４の各部に振り分ける。より具体的には、データ送受信部２０１は、放送データを放送データ処理部２０２に、通信データを通信データ処理部２０３に、制御データを制御部２０４に、それぞれ振り分け出力する。
【００４７】
放送データ処理部２０２は、上述の第１の処理部７０３に相当する。放送データ処理部２０２は、データ送受信部２０１が出力する放送データ（即ち、ＭＰＥＧ−ＴＳ）から、非圧縮の映像データ及び音声データを生成する手段である。放送データ処理部２０２は、データ分離部３０１と、映像デコーダ３０２と、音声デコーダ３０３と、を含んで構成される。
【００４８】
データ分離部３０１は、ＭＰＥＧ−ＴＳから、映像データ及び音声データを抽出する手段である。より具体的には、ＭＰＥＧ−ＴＳに含まれるＰＩＤ（パケット識別子）を参照することで、映像データと音声データを抽出する。その際、映像データや音声データが暗号化されていれば、データ分離部３０１は、暗号の復号も併せて実行する。
【００４９】
データ分離部３０１は、映像データを映像デコーダ３０２に、音声データを音声デコーダ３０３に、それぞれ出力する。
【００５０】
映像デコーダ３０２は、データ分離部３０１が出力する映像データに施された圧縮（例えば、ＭＰＥＧ２圧縮）を復号し、非圧縮の映像データを生成する。映像デコーダ３０２は、ＲＧＢ（Red Green Blue）形式やＹＵＶ形式の映像データを生成する。映像デコーダ３０２は、生成した映像データを映像データ生成部２０５に出力する。
【００５１】
音声デコーダ３０３は、データ分離部３０１が出力する音声データに施された圧縮（例えば、ＭＰＥＧ２−ＡＡＣ（Advanced Audio Coding））を復号し、非圧縮の音声データを生成する。音声デコーダ３０３は、例えば、ＬＰＣＭ（Liner Pulse Code Modulation）形式の音声データを生成する。音声デコーダ３０３は、生成した音声データを音声データ生成部２０６に出力する。
【００５２】
通信データ処理部２０３は、上述の第２の処理部７０４に相当する。通信データ処理部２０３は、データ送受信部２０１が出力する通信データ（即ち、ネットワークデータ）から、非圧縮の映像データ及び音声データを生成する手段である。通信データ処理部２０３は、プロトコル処理部４０１と、ＷＥＢページ構成部４０２と、映像デコーダ４０３と、音声デコーダ４０４と、を含んで構成される。
【００５３】
プロトコル処理部４０１は、ＴＣＰ（Transmission Control Protocol）／ＩＰ（Internet Protocol）等の通信プロトコルに適合したパケットの送受信に係る制御を実行する。例えば、プロトコル処理部４０１は、ＷＥＢサーバとの間でセッションを確立し、当該ＷＥＢサーバからＨＴＭＬ文書を取得する。プロトコル処理部４０１が取得したＨＴＭＬ文書は、ＷＥＢページ構成部４０２に送られる。なお、プロトコル処理部４０１は、受信したパケットが暗号化されている場合には、当該暗号を復号する。
【００５４】
ＷＥＢページ構成部４０２は、プロトコル処理部４０１から取得したＨＴＭＬ文書からＷＥＢページを構成する手段でもある。ＷＥＢページ構成部４０２は、取得したＨＴＭＬ文書からＷＥＢページを構成し、映像デコーダ４０３に出力する。その際、ＷＥＢページ構成部４０２は、例えば、ＲＧＢフォーマットのような非圧縮の映像データを映像デコーダ４０３に出力する。
【００５５】
プロトコル処理部４０１は、取得したファイルが動画ファイルや静止画ファイルである場合には、当該ファイルを映像デコーダ４０３に出力する。あるいは、プロトコル処理部４０１は、サーバから取得したファイルが音声ファイルであれば、当該ファイルを音声デコーダ４０４に出力する。
【００５６】
映像デコーダ４０３は、受け付けた映像データが非圧縮である場合には、特段の処理を行わず、そのまま映像データ生成部２０５に出力する。例えば、ＷＥＢページ構成部４０２が出力するＷＥＢページに係る映像データは非圧縮であるため、映像デコーダ４０３は、ＷＥＢページに係る映像データを、そのまま映像データ生成部２０５に出力する。一方、受け付けたデータが圧縮されている場合には、映像デコーダ４０３は、映像データに施された圧縮を復号し、非圧縮の映像データを生成する。映像デコーダ４０３は、生成した映像データを映像データ生成部２０５に出力する。
【００５７】
音声デコーダ４０４は、プロトコル処理部４０１が出力する音声データに施された圧縮を復号し、非圧縮の音声データを生成する。音声デコーダ４０４は、生成した音声データを音声データ生成部２０６に出力する。
【００５８】
映像データ生成部２０５は、放送データ処理部２０２及び通信データ処理部２０３が出力する非圧縮の映像データを入力し、これらのデータに応じて、データ入出力装置１０に出力する再生用映像データを生成する。
【００５９】
音声データ生成部２０６は、放送データ処理部２０２及び通信データ処理部２０３が出力する非圧縮の音声データを入力し、これらのデータに応じて、データ入出力装置１０に出力する再生用音声データを生成する。
【００６０】
映像データ生成部２０５及び音声データ生成部２０６の少なくともいずれかが、上述の再生データ生成部７０５に相当する。即ち、映像データ生成部２０５及び音声データ生成部２０６の少なくともいずれかが、放送データ処理部２０２及び通信データ処理部２０３が生成する非圧縮のマルチメディアデータ（映像データ又は音声データ）に応じて、再生用マルチメディアデータを生成する。
【００６１】
なお、映像データ生成部２０５は、放送データ処理部２０２及び通信データ処理部２０３が出力する映像データを合成することで、再生用映像データを生成してもよい。その場合には、映像データ生成部２０５は、放送データ処理部２０２及び通信データ処理部２０３が出力する映像データを、内蔵するバッファに蓄積する。その後、映像データ生成部２０５は、それぞれの映像データをスケーリングすることで縮小し、２つの映像データを合成した再生用映像データを生成する。あるいは、映像データ生成部２０５は、放送データ処理部２０２及び通信データ処理部２０３が出力する映像データのいずれか一方を選択するスイッチとして動作してもよい。同様に、音声データ生成部２０６は、２つの音声データを合成してもよいし、いずれか一方の音声データを選択することで、再生用音声データを生成してもよい。なお、映像データ生成部２０５及び音声データ生成部２０６の動作は、制御部２０４の指示に基づいて切り替わる。
【００６２】
制御部２０４は、データ送受信部２０１が出力する制御データに基づいて、データ処理装置２０の各部を制御する。例えば、データ入出力装置１０から放送データ処理部２０２の起動（活性化）を指示された場合には、制御部２０４は、放送データ処理部の起動を行う。また、ＷＥＢブラウザの起動を指示された場合には、制御部２０４は、通信データ処理部２０３（ＷＥＢページ構成部４０２）の起動を行う。
【００６３】
また、制御部２０４は、データ入出力装置１０から取得する制御データに基づいて、映像データ生成部２０５や音声データ生成部２０６の動作を制御する。例えば、ユーザがデータ入出力装置１０に対して、ＷＥＢページの表示位置や表示サイズの変更に係る操作を行うことで、当該操作に相当する制御データを受け取った場合には、制御部２０４は、当該操作の実現を映像データ生成部２０５に指示する。指示を受けた映像データ生成部２０５は、当該操作に応じた再生用映像データを生成する。また、例えば、制御部２０４は、操作情報に基づいて、音声データ生成部２０６が生成する再生用音声データを、順次、切り替える。具体的には、ユーザがリモコンの所定のボタンを押下するたびに、放送波の音声とネットワーク４０から取得した動画の音声を切り替えてもよい。
【００６４】
さらに、制御部２０４は、映像データ生成部２０５と音声データ生成部２０６の制御を連携させてもよい。例えば、映像データ生成部２０５が生成する再生用映像データのうち、最も広い面積を持つ映像データに対応する音声データを、再生用音声データとすることもできる。例えば、再生用映像データにおいて、放送波に係る映像の面積が最も広ければ、再生用音声データとして放送波の音声データを使用する等の制御が可能である。
【００６５】
あるいは、ユーザが、データ入出力装置１０に対して表示パネル１０７に映るＷＥＢページ上のリンクをクリックする等の操作を行うことで、当該操作に相当する制御データを受け取った場合には、制御部２０４は、当該操作の実現を通信データ処理部２０３に指示する。指示を受けた通信データ処理部２０３は、リンクに記載されたサーバからＨＴＭＬ文書を取得することで、新たなＷＥＢページを構成し、映像データ生成部２０５を介して、データ入出力装置１０の表示パネル１０７に映るＷＥＢページを更新する。
【００６６】
ＨＤＭＩインターフェイス部２０７は、上述の第１の受信部７０１及び第２の送信部７０６に相当する。即ち、ＨＤＭＩインターフェイス部２０７は、データ入出力装置１０が出力する多重化データを受信する。また、ＨＤＭＩインターフェイス部２０７は、再生用映像データ及び再生用音声データを、データ入出力装置１０に送信する。なお、ＨＤＭＩインターフェイス部２０７は、データ入出力装置１０のＨＤＭＩインターフェイス部１１０と同様に、ＨＤＭＩ１．４規格に適合する制御回路及びコネクタを含んで構成される。
【００６７】
次に、本実施形態に係るデータ処理システム１の動作について説明する。
【００６８】
図６は、データ処理システム１の動作の一例を示すシーケンス図である。
【００６９】
データ入出力装置１０は、ユーザの操作を、操作部１０１を用いて受け付ける（ステップＳ１０１）。データ入出力装置１０は、アンテナ３０から電波を受信する（ステップＳ１０２）。データ入出力装置１０は、ネットワーク４０上のサーバにアクセスする（ステップＳ１０３）。データ入出力装置１０は、ステップＳ１０１〜Ｓ１０３で取得したデータ（放送データ、通信データ、制御データ）の多重化データを、データ処理装置２０に向けて送信する（ステップＳ１０４）。
【００７０】
データ処理装置２０は、受信した多重化データから、放送データ、通信データ及び制御データを抽出し、それぞれのデータに対応した処理を行う。より具体的には、放送データ処理部２０２は、放送データから非圧縮の映像データ及び音声データを生成し、映像データ生成部２０５及び音声データ生成部２０６に出力する（ステップＳ２０１）。通信データ処理部２０３では、通信データからＷＥＢページを構成し、又は、動画ファイルや音声ファイル等から非圧縮の映像データ及び音声データの生成を生成し、映像データ生成部２０５及び音声データ生成部２０６に出力する（ステップＳ２０２）。データ入出力装置１０から取得した多重化データに制御データが含まれている場合には、制御部２０４は、当該制御データに従った処理を行う（ステップＳ２０３）。映像データ生成部２０５及び音声データ生成部２０６は、入力する非圧縮の映像データ及び音声データと、制御部２０４からの指示に基づいて、データ入出力装置１０に出力する再生用映像データ及び再生用音声データを生成する（ステップＳ２０４）。その後、データ処理装置２０は、ＨＤＭＩインターフェイス部２０７を介して、再生用映像データ及び再生用音声データを、データ入出力装置１０に送信する（ステップＳ２０５）。
【００７１】
データ入出力装置１０は、受信した非圧縮の再生用映像データ及び再生用音声データに基づき、映像及び音声の再生を行う（ステップＳ１０４）。
【００７２】
なお、図６に示すシーケンス図は例示であって、データ入出力装置１０及びデータ処理装置２０で実行する処理の順序等を限定する趣旨ではない。例えば、ステップＳ１０１〜Ｓ１０３に係る処理の実行順序は、それぞれ前後してもよいし、これらの処理が平行して実行されてもよい。
【００７３】
上述のように、データ処理装置２０は、複数のメディア（本実施形態においては、放送波及びネットワーク４０）から得られる映像データを合成し、合成後の再生用映像データを、データ入出力装置１０に送信することができる。データ入出力装置１０は、受信した再生用映像データを表示パネル１０７に表示する。例えば、図７を参照すると、放送波から得られる映像データを放送波表示領域５０１に表示する。さらに、ＷＥＢページをブラウザ表示領域５０２に表示し、動画ファイル等の再生をネットワーク動画表示領域５０３〜５０５にて行う。
【００７４】
本実施形態に係るデータ入出力装置１０は、１つの放送波インターフェイス部１０２を備える構成を例示したが、２つの放送波インターフェイスを備える構成であってもよい。例えば、データ入出力装置１０は、地上デジタル放送と衛星デジタル放送に対応するインターフェイスを備えていてもよい。この場合には、図７の放送波表示領域５０１に地上デジタル放送に係る番組を、ブラウザ表示領域５０２及びネットワーク動画表示領域５０３〜５０５を統合した領域に衛星デジタル放送に係る番組を表示させることができる。即ち、データ入出力装置１０がテレビ装置であって、単体では「２画面表示」に対応していない場合であっても、データ入出力装置１０を「２画面表示」に対応する機器にできる。
【００７５】
なお、データ入出力装置１０の制御部１０８及びデータ送受信部１０９は、データ入出力装置１０に搭載されたコンピュータに、そのハードウェアを用いて、上記処理を実行させるコンピュータプログラムにより実現することもできる。同様に、データ処理装置２０の放送データ処理部２０２、通信データ処理部２０３及び制御部２０４は、データ処理装置２０に搭載されたコンピュータに、そのハードウェアを用いて、上記処理を実行させるコンピュータプログラムにより実現することもできる。これらのプログラムは、コンピュータが読み取り可能な記憶媒体に記録することができる。記憶媒体は、半導体メモリ、ハードディスク、磁気記録媒体、光記録媒体等の非トランジェント（ｎｏｎ−ｔｒａｎｓｉｅｎｔ）なものとすることができる。
【００７６】
放送波の送受信に係るＩＳＤＢ（Integrated Services Digital Broadcasting）規格や、ネットワークの物理層に係る規格は、一旦普及すると、頻繁にその仕様が変更になることは少ない。しかし、映像データ及び音声データといったマルチメディアデータを圧縮する符号化方式には、短期間に世代交代が生じる。最新の符号化方式に対応するためにＳＴＢが使用されるが、ＳＴＢには電波を受信するためのインターフェイスやネットワークデータを受信するためのインターフェイス等が必要となり、ＳＴＢのコストが上昇する要因となっている。
【００７７】
そこで、データ入出力装置１０は、複数のメディアから得られるマルチメディアデータを時分割方式等により多重化し、１本のＨＤＭＩケーブルを介して送信する。一方、データ処理装置２０は、データ入出力装置１０が送信するマルチメディアデータの信号処理に特化した最小限の構成とする。換言するならば、データ処理装置２０には、多重化データと再生用マルチメディアデータの送受信を実現するＨＤＭＩインターフェイスと、放送データ処理部２０２や通信データ処理部２０３等を実装するＣＰＵ（Central Processing Unit）やＤＳＰ(Digital Signal Processor)と、これらの動作に必要な電源部が含まれていればよい。即ち、複数のマルチメディアデータの信号処理を実行する際に、それぞれのメディアに対応したインターフェイスは不要となる。その結果、データ処理装置２０のコストの上昇を抑制しつつ、複数のマルチメディアデータの信号処理を実現できる。
【００７８】
また、データ入出力装置１０とデータ処理装置２０を接続するケーブルの本数が削減されるため、データ処理装置２０を設置する際のケーブル引き回しに係る煩わしさが解消する。
【００７９】
さらに、新たな符号化方式が普及し、現状のデータ処理装置では対応できない場合であっても、新たな符号化方式に対応する信号処理のプログラムを実装したＣＰＵ等を内蔵するデータ処理装置を提供することで、データ入出力装置の陳腐化を防ぐことができる。その際、データ入出力装置の構成を変更する必要がなく、安価なデータ処理装置を入れ替えれば足りる。データ入出力装置は、非圧縮の再生用映像データ及び再生用音声データをＨＤＭＩケーブルから受信すればよいためである。
【００８０】
次に、第１の実施形態に係るデータ処理システム１の変形例について説明する。
【００８１】
［変形例１］
放送波から得られるＭＰＥＧ−ＴＳには、字幕データやデータ放送データが含まれている。そこで、これらのデータをＭＰＥＧ−ＴＳから抽出し、データ入出力装置に出力する再生用映像データを生成することができる。
【００８２】
図８は、放送データ処理部２０２ａの内部構成の一例を示す図である。図８において、図５と同一の構成要素には同一の符号を付し、その説明を省略する。図８に示すデータ分離部３０１ａは、ＭＰＥＧ−ＴＳから字幕データやデータ放送データを抽出する。データ分離部３０１ａは、抽出した字幕データやデータ放送データを、それぞれ、字幕デコーダ３０４及びデータ放送デコーダ３０５に出力する。字幕デコーダ３０４は、字幕データを復号し、字幕を表す非圧縮の映像データを生成する。生成した字幕画像（映像データ）は、映像データ生成部２０５ａに出力される。
【００８３】
また、データ放送デコーダ３０５は、受け付けたデータ放送データを解釈して、データ放送に係る表示画面を構成する映像データを生成する。生成した映像データは、映像データ生成部２０５ａに出力される。
【００８４】
映像データ生成部２０５ａは、映像デコーダ３０２及び映像デコーダ４０３が出力する映像データに加えて、上記の字幕やデータ放送に係る映像データを用いて、データ入出力装置１０に出力する再生用映像データを生成する。
【００８５】
図９は、表示パネル１０７の表示画面の一例を示す図である。映像データ生成部２０５ａは、例えば、図９に示す表示をなす再生用映像データを生成し、データ入出力装置１０に出力する。図９では、データ放送表示領域５０６にデータ放送に係る表示を行い、放送波表示領域５０１の一部に字幕画像５０７を表示する。このように、ＭＰＥＧ−ＴＳに含まれる字幕データやデータ放送データに対応する表示画面をユーザに提供できる。
【００８６】
［変形例２］
近年では、ネットワークを介してＭＰＥＧ−ＴＳを受信し、テレビ番組等を視聴するＩＰ放送が普及している。このようなＩＰ放送に対し、通信データ処理部２０３ａを図１０に示す構成とすることで対応可能である。
【００８７】
図１０は、通信データ処理部２０３ａの内部構成の一例を示す図である。図１０において、図５と同一の構成要素には同一の符号を付し、その説明を省略する。
【００８８】
ＩＰ放送サーバからは、ＭＰＥＧ−ＴＳやＭＰＥＧ−ＰＳ（MPEG-Program Stream）がネットワークデータとして配信されるので、プロトコル処理部４０１ａでは受け付けた通信データがＭＰＥＧ−ＴＳ等であると判断した場合に、当該通信データをデータ分離部４０５に出力する。
【００８９】
データ分離部４０５は、上述のデータ分離部３０１と同等の動作を行い、抽出した映像データ及び音声データを、それぞれ、映像デコーダ４０６及び音声デコーダ４０７に出力する。映像デコーダ４０６及び音声デコーダ４０７は、映像デコーダ３０２及び音声デコーダ３０３と同等の機能を持ち、非圧縮の映像データ及び音声データを生成する。
【００９０】
このように、ネットワーク４０から配信されるＭＰＥＧ−ＴＳ等のネットワークデータに対応することもできる。
【００９１】
［変形例３］
第１の実施形態に係るデータ入出力装置１０では、マルチメディアデータのソースとして、地上デジタル放送や衛星デジタル放送等の放送波と、ＷＥＢサーバ等が接続されたネットワーク４０を例示した。しかし、マルチメディアデータのソースは、これらに限定されるものではない。
【００９２】
図１１は、データ入出力装置１０ａの内部構成の一例を示す図である。図１１において、図３と同一の構成要素には同一の符号を付し、その説明を省略する。データ入出力装置１０ａとデータ入出力装置１０の相違点は、ストレージインターフェイス（ストレージＩＦ）部１１１が追加されている点である。
【００９３】
ストレージインターフェイス部１１１は、例えば、ＢＤ（Blu-Ray Disc；登録商標）等の光ディスクや、ＳＤ（Secure Digital）カード等の半導体メモリから符号化されたマルチメディアデータを入力し、データ送受信部１０９に出力する。データ送受信部１０９では、放送データ及びネットワークデータに加えて、ストレージメディアから得られるデータを多重化し、多重化データを送信する。データ処理装置２０では、ストレージメディアから得られる映像データ及び音声データから、再生用映像データ及び再生用音声データを生成し、データ入出力装置１０に送信する。
【００９４】
このように、マルチメディアデータのソースに、ＳＤカード等のストレージを用いることもできる。
【００９５】
本実施形態に係るデータ入出力装置１０は、複数のメディアをソースとして、符号化されたマルチメディアデータを受信するデジタルＴＶ等の実現に好適である。また、データ処理装置２０は、デジタルＴＶ等のＨＤＭＩ端子に接続して使用するのが好適である。つまり、本実施形態に係るデータ処理システム１において、ＨＤＭＩケーブル５０は必ずしも必要ではなく、データ入出力装置１０とデータ処理装置２０を直接接続することも可能である。
【００９６】
［第２の実施形態］
続いて、第２の実施形態について図面を参照して詳細に説明する。
【００９７】
図１２は、本実施形態に係るデータ処理システム２の構成の一例を示す図である。図１２において、図２と同一構成要素には、同一の符号を付し、その説明を省略する。データ処理システム１及び２の相違点は、データ入出力装置６０とデータ処理装置７０とをＵＳＢ（Universal Serial Bus）ケーブル８０を用いて接続する点である。
【００９８】
第１の実施形態において、データ入出力装置１０とデータ処理装置２０を、ＨＥＣ規格に適合するＨＤＭＩケーブル５０を用いて接続する場合について説明した。しかし、データ入出力装置１０が必ずしも、ＨＥＣ規格に適合するＨＤＭＩケーブルに対応できるとは限らない。そこで、本実施形態に係るデータ処理システム２では、双方向伝送インターフェイスとして、普及の進んでいるＵＳＢケーブルを使用し、データ入出力装置６０とデータ処理装置７０を接続する。
【００９９】
データ入出力装置６０は、放送データやネットワークデータを、ＵＳＢケーブル８０を介してデータ処理装置７０に送信する。データ処理装置７０では、放送データやネットワークデータから、非圧縮の再生用映像データ及び再生用音声データを生成する。その後、データ処理装置７０は、生成した再生用映像データ及び再生用音声データを、ＭＰＥＧ２等の圧縮方式で符号化し、符号化したデータからＭＰＥＧ−ＴＳを生成する。
【０１００】
データ処理装置７０は、生成したＭＰＥＧ−ＴＳを、ＵＳＢケーブル８０を用いて、データ入出力装置６０に送信する。ＭＰＥＧ−ＴＳを受け付けたデータ入出力装置６０は、ＭＰＥＧ−ＴＳから再生用映像データ及び再生用音声データを取得する。データ入出力装置６０は、取得した再生用映像データ及び再生用音声データを再生する。
【０１０１】
図１３は、データ入出力装置６０の内部構成の一例を示す図である。図１３において、図３と同一構成要素には、同一の符号を付し、その説明を省略する。データ入出力装置１０とデータ入出力装置６０の相違点は、ＵＳＢインターフェイス（ＵＳＢ  ＩＦ）部１１２と、データ分離部１１３と、音声デコーダ１１４と、映像デコーダ１１５と、を含む点である。
【０１０２】
ＵＳＢインターフェイス部１１２は、データ送受信部１０９が出力する多重化データを、ＵＳＢ規格に適合したデータに変換し、ＵＳＢケーブル８０を介して送信する手段である。また、ＵＳＢインターフェイス部１１２は、データ処理装置７０が出力するデータを入力し、データ分離部１１３に出力する手段でもある。なお、本実施形態に係るＵＳＢインターフェイス部１１２は、ＵＳＢ２．０規格対応とする。ただし、ＵＳＢインターフェイス部１１２が対応するＵＳＢ規格のバージョンは、ＵＳＢ２．０に限定されず、ＵＳＢ３．０であってもよい。
【０１０３】
データ分離部１１３は、ＵＳＢインターフェイス部１１２を介して受け付けたＭＰＥＧ−ＴＳから、映像データ及び音声データを抽出する手段である。データ分離部１１３は、抽出した映像データを映像デコーダ１１５に、抽出した音声データを音声デコーダ１１４に、それぞれ出力する。
【０１０４】
映像デコーダ１１５は、映像データを復号することで、非圧縮の再生用映像データを生成し、映像再生部１０６に出力する。同様に、音声デコーダ１１４は、音声データを復号することで、非圧縮の再生用音声データを生成し、音声再生部１０４に出力する。
【０１０５】
図１４は、データ処理装置７０の内部構成の一例を示す図である。図１４において、図５と同一構成要素には、同一の符号を付し、その説明を省略する。データ処理装置２０とデータ処理装置７０の相違点は、ＵＳＢインターフェイス（ＵＳＢ  ＩＦ）部２０８と、トランスポートストリーム（ＴＳ）生成部２０９と、を含む点である。
【０１０６】
ＵＳＢインターフェイス部２０８は、データ入出力装置６０が送信する多重化データを受け取り、データ入出力装置にＭＰＥＧ−ＴＳを送信する手段である。
【０１０７】
トランスポートストリーム生成部２０９は、映像データ生成部２０５が出力する非圧縮の再生用映像データと、音声データ生成部２０６が出力する非圧縮の再生用音声データと、に基づいて、ＭＰＥＧ−ＴＳを生成する手段である。より具体的には、トランスポートストリーム生成部２０９は、再生用映像データ及び再生用音声データをＭＰＥＧ２等の圧縮方式により符号化し、その後、ＭＰＥＧ−ＴＳのデータ形式に格納する。
【０１０８】
トランスポートストリーム生成部２０９が生成したＭＰＥＧ−ＴＳは、ＵＳＢインターフェイス部２０８を介して、データ入出力装置６０に送信される。
【０１０９】
以上のように、本実施形態に係るデータ処理システム２では、データ処理装置７０が生成する再生用マルチメディアデータを、ＭＰＥＧ２等の圧縮方式により再圧縮する。その結果、再圧縮されたデータを送受信するのに必要な伝送帯域が減少し、ＨＤＭＩケーブル５０に代えてＵＳＢケーブル８０を用いることもできる。
【０１１０】
さらに、下記の形態が可能である。
【０１１１】
［形態１］
符号化された第１のマルチメディアデータを入力する第１の入力部と、符号化された第２のマルチメディアデータを入力する第２の入力部と、前記符号化された第１及び第２のマルチメディアデータの多重化データを生成する多重化データ生成部と、前記多重化データを送信する第１の送信部と、を備えるデータ入出力装置と、前記多重化データを受信する第１の受信部と、前記多重化データから、前記符号化された第１及び第２のマルチメディアデータを抽出するデータ抽出部と、前記符号化された第１のマルチメディアデータの復号を行う第１の処理部と、前記符号化された第２のマルチメディアデータの復号を行う第２の処理部と、前記復号された第１及び第２のマルチメディアデータに応じて、再生用マルチメディアデータを生成する再生データ生成部と、前記再生用マルチメディアデータを送信する第２の送信部と、を備えるデータ処理装置と、を含み、前記データ入出力装置は、前記再生用マルチメディアデータを受信する第２の受信部と、前記再生用マルチメディアデータを再生する再生部と、をさらに備える、データ処理システム。
［形態２］
前記データ入出力装置と前記データ処理装置は、双方向伝送インターフェイスにより接続されていることが好ましい。
［形態３］
前記多重化データ生成部は、前記第１及び第２のマルチメディアデータを識別するラベル情報を含むヘッダを、前記第１及び第２のマルチメディアデータに付加した後に、前記多重化データを生成し、前記データ抽出部は、前記ラベル情報に基づいて、前記第１及び第２のマルチメディアデータのそれぞれを、前記第１及び第２の処理部に振り分けることが好ましい。
［形態４］
前記データ入出力装置は、ユーザの操作を受け付け、前記ユーザの操作を操作情報に変換する操作部と、前記操作情報に基づいて、制御データを生成する第１の制御部と、をさらに備え、前記多重化データ生成部は、前記多重化データを生成する際に、前記符号化された第１のマルチメディアデータ、前記符号化された第２のマルチメディアデータ及び前記制御データを使用し、前記データ抽出部は、前記制御データが多重化された多重化データから前記制御データを抽出し、前記データ処理装置は、前記制御データに基づいて、前記再生データ生成部の動作を制御する第２の制御部をさらに備えることが好ましい。
［形態５］
前記データ処理装置は、前記再生用マルチメディアデータを、予め定めた圧縮方式により符号化する符号化部をさらに備え、前記第２の送信部は、前記符号化された再生用マルチメディアデータを送信し、前記データ入出力装置は、前記符号化された再生用マルチメディアデータを復号する復号部をさらに備え、前記再生部は、前記復号された再生用マルチメディアデータを再生する、ことが好ましい。
［形態６］
前記多重化データ生成部は、時分割多重化方式により、前記多重化データを生成することが好ましい。
［形態７］
符号化された第１及び第２のマルチメディアデータの多重化データを生成する多重化データ生成工程と、前記多重化データから、前記符号化された第１及び第２のマルチメディアデータを抽出するデータ抽出工程と、前記符号化された第１のマルチメディアデータの復号を行う第１の復号工程と、前記符号化された第２のマルチメディアデータの復号を行う第２の復号工程と、前記復号された第１及び第２のマルチメディアデータに応じて、再生用マルチメディアデータを生成する再生データ生成工程と、前記再生用マルチメディアデータを再生する工程と、を含むデータ処理方法。
［形態８］
前記多重化データ及び／又は前記再生用マルチメディアデータを、双方向伝送インターフェイスにより送受信する工程をさらに含むことが好ましい。
［形態９］
前記多重化データ生成工程は、前記第１及び第２のマルチメディアデータを識別するラベル情報を含むヘッダを、前記第１及び第２のマルチメディアデータに付加した後に、前記多重化データを生成し、前記データ抽出工程は、前記ラベル情報に基づいて、前記第１及び第２のマルチメディアデータのそれぞれを、前記第１及び第２の復号工程に振り分けることが好ましい。
［形態１０］
ユーザの操作を受け付け、前記ユーザの操作を操作情報に変換する工程と、前記操作情報に基づいて、制御データを生成する工程と、をさらに含み、前記多重化データ生成工程は、前記多重化データを生成する際に、前記符号化された第１のマルチメディアデータ、前記符号化された第２のマルチメディアデータ及び前記制御データを使用し、前記データ抽出工程は、前記制御データが多重化された多重化データから前記制御データを抽出し、前記再生データ生成工程は、前記制御データに基づいて、前記再生用マルチメディアデータを生成する際の処理を決定することが好ましい。
［形態１１］
前記再生用マルチメディアデータを、予め定めた圧縮方式により符号化する符号化工程と、前記符号化された再生用マルチメディアデータを復号する工程と、前記復号された再生用マルチメディアデータを再生する工程と、をさらに含むことが好ましい。
［形態１２］
符号化された第１のマルチメディアデータを入力する第１の入力部と、符号化された第２のマルチメディアデータを入力する第２の入力部と、前記符号化された第１及び第２のマルチメディアデータの多重化データを生成する多重化データ生成部と、前記多重化データを送信する送信部と、外部にて前記多重化データから生成された再生用マルチメディアデータを受信する受信部と、前記再生用マルチメディアデータを再生する再生部と、を備えるデータ入出力装置。
［形態１３］
前記多重化データ生成部は、前記第１及び第２のマルチメディアデータを識別するラベル情報を含むヘッダを、前記第１及び第２のマルチメディアデータに付加した後に、前記多重化データを生成することが好ましい。
［形態１４］
ユーザの操作を受け付け、前記ユーザの操作を操作情報に変換する操作部と、前記操作情報に基づいて、制御データを生成する制御部と、をさらに備え、前記多重化データ生成部は、前記多重化データを生成する際に、前記符号化された第１のマルチメディアデータ、前記符号化された第２のマルチメディアデータ及び前記制御データを使用することが好ましい。
［形態１５］
符号化された前記再生用マルチメディアデータの復号を行う復号部をさらに備え、前記再生部は、前記復号された再生用マルチメディアデータを再生することが好ましい。
［形態１６］
前記多重化データ生成部は、時分割多重化方式により、前記多重化データを生成することが好ましい。
［形態１７］
符号化された第１及び第２のマルチメディアデータを多重化することで生成された多重化データを受信する受信部と、前記多重化データから、前記符号化された第１及び第２のマルチメディアデータを抽出するデータ抽出部と、前記符号化された第１のマルチメディアデータの復号を行う第１の処理部と、前記符号化された第２のマルチメディアデータの復号を行う第２の処理部と、前記復号された第１及び第２のマルチメディアデータに応じて、再生用マルチメディアデータを生成する再生データ生成部と、前記再生用マルチメディアデータを送信する送信部と、を備えるデータ処理装置。
［形態１８］
前記多重化データに含まれる前記符号化された第１及び第２のマルチメディアデータには、それぞれを識別するラベル情報を含むヘッダが付加され、前記データ抽出部は、前記ラベル情報に基づいて、前記第１及び第２のマルチメディアデータのそれぞれを、前記第１及び第２の処理部に振り分けることが好ましい。
［形態１９］
前記多重化データは、ユーザの操作に基づいて生成された制御データを使用して多重化され、前記データ抽出部は、前記制御データが多重化された多重化データから前記制御データを抽出し、前記制御データに基づいて、前記再生データ生成部の動作を制御する制御部をさらに備えることが好ましい。
［形態２０］
前記再生用マルチメディアデータを、予め定めた圧縮方式により符号化する符号化部をさらに備え、前記送信部は、前記符号化された再生用マルチメディアデータを送信することが好ましい。
【０１１２】
なお、引用した上記の特許文献等の各開示は、本書に引用をもって繰り込むものとする。本発明の全開示（請求の範囲を含む）の枠内において、さらにその基本的技術思想に基づいて、実施形態ないし実施例の変更・調整が可能である。また、本発明の請求の範囲の枠内において種々の開示要素（各請求項の各要素、各実施形態ないし実施例の各要素、各図面の各要素等を含む）の多様な組み合わせ、ないし、選択が可能である。すなわち、本発明は、請求の範囲を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。特に、本書に記載した数値範囲については、当該範囲内に含まれる任意の数値ないし小範囲が、別段の記載のない場合でも具体的に記載されているものと解釈されるべきである。
【符号の説明】
【０１１３】
１〜３  データ処理システム
６、１０、１０ａ、６０  データ入出力装置
７、２０、７０  データ処理装置
３０  アンテナ
４０  ネットワーク
５０  ＨＤＭＩケーブル
８０  ＵＳＢケーブル
１０１  操作部
１０２  放送波インターフェイス（放送波ＩＦ）部
１０３  通信インターフェイス（通信ＩＦ）部
１０４  音声再生部
１０５  スピーカ
１０６  映像再生部
１０７  表示パネル
１０８、２０４  制御部
１０９、２０１  データ送受信部
１１０、２０７  ＨＤＭＩインターフェイス（ＨＤＭＩ  ＩＦ）部
１１１  ストレージインターフェイス（ストレージＩＦ）部
１１２、２０８  ＵＳＢインターフェイス（ＵＳＢ  ＩＦ）部
１１３、３０１、３０１ａ、４０５  データ分離部
１１４、３０３、４０４、４０７  音声デコーダ
１１５、３０２、４０３、４０６  映像デコーダ
２０２、２０２ａ  放送データ処理部
２０３、２０３ａ  通信データ処理部
２０５、２０５ａ  映像データ生成部
２０６  音声データ生成部
２０９  トランスポートストリーム（ＴＳ）生成部
３０４  字幕デコーダ
３０５  データ放送デコーダ
４０１、４０１ａ  プロトコル処理部
４０２  ＷＥＢページ構成部
５０１  放送波表示領域
５０２  ブラウザ表示領域
５０３、５０４、５０５  ネットワーク動画表示領域
５０６  データ放送表示領域
５０７  字幕画像
６０１  第１の入力部
６０２  第２の入力部
６０３  多重化データ生成部
６０４  第１の送信部
６０５  第２の受信部
６０６  再生部
７０１  第１の受信部
７０２  データ抽出部
７０３  第１の処理部
７０４  第２の処理部
７０５  再生データ生成部
７０６  第２の送信部
【図１】
2014212368.tif 000003
【図２】
2014212368.tif 000004
【図３】
2014212368.tif 000005
【図４】
2014212368.tif 000006
【図５】
2014212368.tif 000007
【図６】
2014212368.tif 000008
【図７】
2014212368.tif 000009
【図８】
2014212368.tif 000010
【図９】
2014212368.tif 000011
【図１０】
2014212368.tif 000012
【図１１】
2014212368.tif 000013
【図１２】
2014212368.tif 000014
【図１３】
2014212368.tif 000015
【図１４】
2014212368.tif 000016