(57)【特許請求の範囲】
【請求項１】
０°乃至３６０°を撮影範囲とする全方位映像情報のうちの各々異なる角範囲に対応する複数の映像情報を符号化する複数の符号化手段と、
上記複数の映像情報の各々を識別する複数の識別情報、当該複数の映像情報の各々の撮像アングルを示す撮像アングル情報、及び当該複数の映像情報により受信側のメモリ上に上記全方位映像情報を再構成するためのアドレス情報を有する付加情報を符号化する付加情報符号化手段と、
上記複数の符号化手段により符号化された複数の符号化情報、及び上記付加情報符号化手段により符号化された符号化付加情報を多重化して送信する送信手段とを備えることを特徴とする送信装置。
【請求項２】
上記複数の符号化手段のうちの一の符号化手段は、上記全方位映像情報とは異なる映像情報を符号化し、
上記送信手段は、上記複数の符号化情報、上記付加情報符号化情報、及び上記一の符号化手段により符号化された更なる符号化情報を多重化して送信することを特徴とする請求項１に記載の送信装置。
【請求項３】
上記複数の符号化手段は、少なくとも、
全方位映像情報のうちの第１の角範囲に対応する第１の映像情報を符号化する第１の符号化手段と、
上記全方位映像情報のうちの第２の角範囲に対応する第２の映像情報を符号化する第２の符号化手段と、
上記全方位映像情報のうちの第３の角範囲に対応する第３の映像情報を符号化する第３の符号化手段とを有し、
上記付加情報符号化手段は、少なくとも、上記第１、第２、及び第３の映像情報を識別する第１、第２、及び第３の識別情報、上記第１、第２、及び第３の映像情報の各撮像アングルを示す第１、第２、及び第３の撮像アングル情報、及び、上記第１、第２、及び第３の映像情報により受信側のメモリ上に上記全方位映像情報を再構成するための第１、第２、及び第３のアドレス情報を有する付加情報を符号化し、
上記送信手段は、少なくとも、上記第１の符号化手段により符号化された第１の符号化情報、上記第２の符号化手段により符号化された第２の符号化情報、上記第３の符号化手段により符号化された第３の符号化情報、及び上記付加情報符号化手段により符号化された符号化付加情報を多重化して送信することを特徴とする請求項１に記載の送信装置。
【請求項４】
上記全方位映像情報とは異なる第４の映像情報を符号化する第４の符号化手段を有し、
上記付加情報符号化手段は、更に上記第４の映像情報を識別する第４の識別情報を有する付加情報を符号化することを特徴とする請求項１に記載の送信装置。
【請求項５】
上記第１、上記第２、及び上記第３の映像情報は同じ撮影アングルを有するカメラにより、当該順に互いに隣接する角範囲が撮像された映像情報であることを特徴とする請求項３に記載の送信装置。
【請求項６】
上記第１、上記第２、及び上記第３の映像情報は、隣接する映像情報同士の角範囲は一部オーバーラップしていることを特徴とする請求項５に記載の送信装置。
【請求項７】
上記第１の符号化手段は、上記第１の映像情報に対応する第１の音声信号も上記第１の映像情報と共に符号化し、
上記第２の符号化手段は、上記第２の映像情報に対応する第２の音声信号も上記第２の映像情報と共に符号化し、
上記第３の符号化手段は、上記第３の映像情報に対応する第３の音声信号も上記第３の映像情報と共に符号化することを特徴とする請求項３に記載の送信装置。
【請求項８】
０°乃至３６０°を撮影範囲とする全方位映像情報のうちの各々異なる角範囲に対応する複数の映像情報が符号化された複数の符号化情報と、複数の映像情報の各々を識別する複数の識別情報、当該複数の映像情報の各々の撮像アングルを示す撮像アングル情報、及び当該複数の映像情報により受信側のメモリ上に上記全方位映像情報を再構成するためのアドレス情報を有する付加情報が符号化された符号化付加情報とが多重化されて送信される放送信号を受信する装置であって、
上記放送信号を受信して特定の放送信号を選局する選局手段と、
上記選局手段により選局された上記特定の放送信号を少なくとも複数の符号化情報、及び符号化付加情報に分離する信号分離手段と、
上記複数の符号化情報の各々を復号して０°乃至３６０°を撮影範囲とする全方位映像情報のうちの各々が異なる角範囲に対応する複数の映像情報を出力する複数の復号手段と、
上記符号化付加情報を復号して上記複数の映像情報を各々識別する複数の識別情報を有する付加情報を出力する付加情報復号手段と、
視聴者の動きを検出する検出手段と、
上記検出手段による検出結果、及び上記付加情報に応じて、上記複数の映像情報の一部をモニタに出力するように制御する制御手段と、
を備えることを特徴とする受信装置。
【請求項９】
上記付加情報復号手段は、上記符号化付加情報を復号して、上記複数の映像情報により上記全方位映像情報を再構成するための各映像情報に対応する複数のアドレス情報を有し、
更に、上記複数の映像情報を一時的に記憶するメモリ手段と、
上記複数のアドレス情報に応じて上記複数の映像情報を上記メモリ手段に書き込むメモリ制御手段とを備え、
上記検出手段による検出結果及び上記複数のアドレス情報に基づく上記制御手段による制御のもと上記メモリ制御手段は、上記メモリ手段の所望のアドレスから映像情報を読み出すように制御することを特徴とする請求項８に記載の受信装置。
【請求項１０】
上記メモリ制御手段は、上記制御手段による制御のもと上記メモリ手段から上記映像情報を読み出す読み出し位置を水平方向に徐々にシフトするように制御することを特徴とする請求項９に記載の受信装置。
【請求項１１】
上記複数の復号手段は、少なくとも
第１の符号化情報を復号して全方位映像情報のうちの第１の角範囲に対応する第１の映像情報を出力する第１の復号手段と、
第２の符号化情報を復号して全方位映像情報のうちの第２の角範囲に対応する第２の映像情報を出力する第２の復号手段と、
第３の符号化情報を復号して全方位映像情報のうちの第３の角範囲に対応する第３の映像情報を出力する第３の復号手段とを有し、
上記付加情報復号手段は、
上記符号化付加情報を復号して少なくとも上記第１、上記第２、及び上記第３の映像情報を識別する第１、第２、及び第３の識別情報を有する付加情報を出力し、
上記制御手段は、上記検出手段による検出結果及び上記付加情報に応じて、上記第１、上記第２、及び上記第３の映像情報の一部を選択的にモニタに出力するように制御することを特徴とする請求項８に記載の受信装置。
【請求項１２】
上記第１、上記第２、及び上記第３の映像情報は同じ撮影アングルを有するカメラにより、当該順に互いに隣接する角範囲が撮像された映像情報であることを特徴とする請求項１１に記載の受信装置。
【請求項１３】
上記第１、上記第２、及び上記第３の映像情報は、隣接する映像情報同士の角範囲は一部オーバーラップしていることを特徴とする請求項１２に記載の受信装置。
【請求項１４】
上記付加情報復号手段は、上記符号化付加情報を復号して、少なくとも上記第１、第２、及び第３の映像情報により上記全方位映像情報を再構成するための各映像情報に対応する第１、第２、及び第３のアドレス情報を有し、
更に、
少なくとも、上記第１、上記第２、及び上記第３の復号手段により復号された上記第１、上記第２、及び上記第３の映像情報を一時的に記憶する第１、第２、及び第３のメモリ手段と、
上記第１、第２、及び第３のアドレス情報に応じて上記第１、第２、及び第３の映像情報を各々上記第１、第２、及び第３のメモリ手段に書き込むメモリ制御手段とを備え、
上記検出手段による検出結果及び少なくとも上記第１、第２、及び第３のアドレス情報に基づく上記制御手段による制御のもと上記第１、第２、及び第３メモリ制御手段は、上記第１、第２，及び第３のメモリ手段の所望のアドレスから映像情報を読み出すように制御することを特徴とする請求項８に記載の受信装置。
【請求項１５】
少なくとも上記第１、第２、及び第３のメモリ制御手段により上記第１、第２、及びメモリ手段から読み出された映像情報が入力され、上記制御手段から入力されるスイッチング情報に応じて上記第１、第２、及び第３のメモリ手段から読み出された映像情報を選択的に出力するスイッチャーを備えることを特徴とする請求項１４に記載の受信装置。
【請求項１６】
上記複数の復号手段は、
更に、第４の符号化情報を復号して上記全方位映像情報の一部ではない第４の映像情報を出力する第４の復号手段を有し、
上記制御手段は、上記検出手段により異常状態が検出されたとき、上記第４の映像情報をモニタに出力するように制御することを特徴とする請求項８に記載の受信装置。
【請求項１７】
上記検出手段は、上記視聴者の少なくとも２次元的動きを検出することを特徴とする請求項８に記載の受信装置。
【請求項１８】
上記検出手段は、上記視聴者の３次元的動きを検出することを特徴とする請求項８に記載の受信装置。
【請求項１９】
上記検出手段は、上記視聴者が乗るボードの３次元的な方向、傾き、傾きの速度のうちいずれか一つを検出することを特徴とする請求項８に記載の受信装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、放送システムなどに適用して好適な送信装置および受信装置に関する。詳しくは、相互に関連する複数の映像をリアルタイムで送信すると共に、受信端末では二次元若しくは三次元検知センサからの出力に応じて同時送信された複数チャネルの映像を適宜切り替えて映し出すようにすることによって、受信端末側で映像を処理して映し出すことができるようにしたもので、一種のユーザ参加型映像を楽しむことができるようにしたものである。スポーツ模擬練習装置などにも適用できる。
【０００２】
【従来の技術】
ディジタル技術の発展に伴い、放送界でも放送信号を含めた各種情報をディジタル化したインタラクティブ形式の統合ディジタル放送システム（ＩＳＤＢ（Integrated Services Digital Broadcasting）システムという）が研究・開発されている。
【０００３】
具体的には、このＩＳＤＢシステムとは現行の放送信号（標準テレビジョン信号、ハイビジョン信号）を始めとして、ソフトウエアやファクシミリなどのデータ、さらには音声、文字、図形、画像などのマルチメディア情報をそれぞれディジタル化（符号化）し、それらを統合多重化した上で、伝送形態に合致した変調処理を施して送受信するようにした放送システムのことである。
【０００４】
放送信号を含めた各種情報を統合多重化する場合、これらの情報の他に受信側での制御情報として使用する付加情報も同時に統合多重化されて送信することができる。図７は映像情報、音声情報およびデータをそれぞれパケット化して伝送するときの例である。統合化されたＩＳＤＢ用放送信号（ディジタル信号）は地上波、衛星波、光ケーブルなどを利用して送信される。
【０００５】
受信端末側では、統合化されたＩＳＤＢ用放送信号を受信して目的の信号を弁別することによってそれをモニタに表示させて通常のテレビ放送として楽しむことができることは勿論、記録手段を用いて記録（保存）したり、他の端末に転送したりすることができる。さらに受信した付加情報を利用すれば、モニタ制御、記録制御さらにはモニタされた画像に対する加工制御など、ユーザの好みに応じて受信情報を利用できることになる。つまり、対話形式（インタラクティブ）の放送システムを構築できる。
【０００６】
【発明が解決しようとする課題】
したがってこのＩＳＤＢシステムを利用すれば、送信される付加情報が多種、多様になる程、ユーザに対するサービス内容が向上し、より双方向的な放送システムを構築できる。
【０００７】
ところで、使用者の操作によって画像や音声が切り替わる映像装置として現在ではコンピュータゲームやフライトシミュレータなどが知られている。
【０００８】
コンピュータゲームは基本的には単一チャネル映像と特性づけられる。これは確かにゲーム全体としては、使用者からの入力により様々な内容が用意されているが、映像内容としての本質は単一チャネルを使用した映像情報に対して拡大縮小などを行う画像変換処理のみであるからである。単一チャネル映像には拡大・縮小などの処理を施したとしても映像表現には限界がある。したがって、それぞれの時点での画像表現内容の自由度は乏しい。
【０００９】
他方フライトシミュレータ的な映像装置は、装置自体が一般的に大掛かりとなってしまう。それは使用者の操作に応じて様々な視点からの映像が必要となるためである。さらに膨大な画像情報を用いた演算を行う必要があるため装置が高価になってしまう。そのため、このような映像装置を使用して一般の消費者が楽しめる機会は極めて少ない。
【００１０】
そこで、この発明は上述したコンピュータゲームやフライトシミュレータなどと類似した機能をＩＳＤＢ用放送システムで実現しようとするものである。すなわち、ディジタル放送における複数チャネル同時伝送という機能を利用することによって、ダイナミックな信号切り換え機能を安価に実現しようとするものである。
【００１１】
【課題を解決するための手段】
上述した課題を解決するため請求項１に記載したこの発明に係る送信装置では、０°乃至３６０°を撮影範囲とする全方位映像情報のうちの各々異なる角範囲に対応する複数の映像情報を符号化する複数の符号化手段と、上記複数の映像情報の各々を識別する複数の識別情報、当該複数の映像情報の各々の撮像アングルを示す撮像アングル情報、及び当該複数の映像情報により受信側のメモリ上に上記全方位映像情報を再構成するためのアドレス情報を有する付加情報を符号化する付加情報符号化手段と、上記複数の符号化手段（以下で符号化部１２Ｎ，１６Ａ〜１６Ｄ等ともいう）により符号化された複数の符号化情報、及び上記付加情報符号化手段（以下で単に符号化部１８ともいう）により符号化された符号化付加情報を多重化して送信する送信手段（多重化部２０，送信部２２，アップコンバータ２４、アンテナ２６等）とを備えることを特徴とするものである。
【００１２】
請求項８に記載したこの発明に係る受信装置では、０°乃至３６０°を撮影範囲とする全方位映像情報のうちの各々異なる角範囲に対応する複数の映像情報が符号化された複数の符号化情報と、複数の映像情報の各々を識別する複数の識別情報、当該複数の映像情報の各々の撮像アングルを示す撮像アングル情報、及び当該複数の映像情報により受信側のメモリ上に上記全方位映像情報を再構成するためのアドレス情報を有する付加情報が符号化された符号化付加情報とが多重化されて送信される放送信号を受信する装置であって、上記放送信号を受信して特定の放送信号を選局する選局手段と、上記選局手段（以下でＩＳＤＢ用チューナー４６という）により選局された上記特定の放送信号を少なくとも複数の符号化情報、及び符号化付加情報に分離する信号分離手段（以下で信号分離部５０という）と、上記複数の符号化情報の各々を復号して全方位映像情報のうちの各々が異なる角範囲に対応する複数の映像情報を出力する複数の復号手段（以下で復号部６０，６２，６４，６６ともいう）と、上記符号化付加情報を復号して上記複数の映像情報を各々識別する複数の識別情報を有する付加情報を出力する付加情報復号手段と、視聴者の動きを検出する検出手段と、上記検出手段による検出結果、及び上記付加情報に応じて、上記複数の映像情報の一部をモニタに出力するように制御する制御手段とを備えることを特徴とするものである。
【００１３】
この発明の受信装置では、上記付加情報復号手段（以下で復号部６８という）は、上記符号化付加情報を復号して、上記複数の映像情報により上記全方位映像情報を再構成するための各映像情報に対応する複数のアドレス情報を有し、更に、上記複数の映像情報を一時的に記憶するメモリ手段と、上記複数のアドレス情報に応じて上記複数の映像情報を上記メモリ手段に書き込むメモリ制御手段とを備え、上記検出手段（以下でセンサ７という）による検出結果及び上記複数のアドレス情報に基づく上記制御手段（以下で制御部９０という）による制御のもと上記メモリ制御手段（以下でアドレスコントロール回路８０，８２，８４，８６ともいう）は、上記メモリ手段の所望のアドレスから映像情報を読み出すように制御することを特徴とするものである。また、検出手段（以下でセンサ７という）は視聴者が乗るボードの３次元的な方向、傾き、傾きの速度のうちいずれか一つを検出することを特徴とするものである。
【００１４】
この発明によるダイナミックな映像切り換えによれば、特にスポーツの練習などに適用できる。スポーツとしてサーフィンを例示すると、その場合には自らがサーフボードの上に乗り、波が砕け散る波頭を切りながら海岸に向かって突き進む景観を捉えた映像が送出される。この映像は１８０°以上の広角映像となるので、通常は所定の画角を複数のカメラでリアルタイムに撮影した映像が複数のチャネルを利用して送出される。これと同時に別の映像、例えばバランスを崩してサーフボードから落ち、サーファーが波間に消えたときの映像も別チャネルとして多重化されて送信される。
【００１５】
一方、受信端末側には３軸方向に動きが自在なサーフボードが用意され、このボードにはさらに三次元センサ（３軸センサ）などの多機能センサが取り付けられ、多機能センサの出力が受信装置に与えられる。受信装置では多機能センサの出力を利用してチャネルが切り替えられる。例えば、波頭を順調に進むようなときはそれぞれのチャネル映像の水平読み出し位置を時間と共にずらして読み出すと、サーフボードに乗ったサーファーが目にする光景を画面上に映し出すことができるので、あたかも視聴者自らがサーフボードに乗っていると同じ光景を映像として映し出すことができる。
【００１６】
水平読み出し位置のスピードはサーフボードのスピードに関連して制御され、サーフボードの角度が変わると今度は映像の水平および垂直の読み出し位置がその角度情報に応じて変化する。バランスが崩れると映像チャネルが沈没映像に切り替えられ、波中に没する映像が映し出される。このように、サーフボードの３軸移動に応じた映像切り替えが行われ、サーファーがサーフボードを正しく操作していないと目的の方向となる映像（光景）は映し出されないから、サーフボードの模擬練習が可能になる。
【００１７】
【発明の実施の形態】
続いて、この発明に係る送信装置および受信装置の実施の一形態を、図面を参照して詳細に説明する。
【００１８】
この発明では上述したようにディジタル放送を利用して、関連を持つ複数の画像並びに音声信号と制御用付加情報を圧縮多重伝送し、受信端末側では視聴者（利用者）の動きに応じ、表示される画像並びに音声を制御用付加情報を下にダイナミックに切り替えるものである。これによって視聴者はスポーツの練習などを楽しむことができる。
【００１９】
このようなダイナミック情報切り替えシステムを実現するこの発明の一実施形態を以下に示す。情報としてはスポーツ例えばサーフィンの練習を取り上げる。図１は受信端末側に置かれるスポーツ模擬練習装置１０の概観図であって、大きな映像表示装置であるこの例ではプロジェクタスクリーン１が用意され、その画面２には ＳＤＢ用受信装置４０で受信した多チャネル映像が映し出される。映像としてはサーファー（画像）３がサーフボード（画像）４に乗ってサーフィンを楽しんでいる光景が映し出される。
【００２０】
一方室内には支持台６上に自由自在に支持されたサーフボード５が置かれ、その上にはサーフィン練習者８が乗り、スクリーン画面２を見ながら波頭を利用して波乗りの練習をしている様子を示している。
【００２１】
乗っているサーフボード５には、サーフボード５の方向、傾き、傾きの速度や圧力などを検知できる多機能センサ（三次元センサ）７が装備され、練習者のサーフボード５上での運動状態が多機能センサにより検知され、その出力が受信装置４０に与えられる。多機能センサ７の１つとして、ｘ，ｙ，ｚ軸の動きを検知できる３軸センサなどを利用できる。多機能センサ７は二次元センサでもよい。受信装置４０ではセンサ出力を判断してそのサーフボード５の運動（動き）に即した内容の映像を複数チャネルから選択して画面２に映し出す。
【００２２】
したがってサーフボード５を正しくコントロールして正しく乗っている状態であれば、サーフィンをしている時のさわやかな情景が画面２に映し出され、音声もそれにふさわしい風を切るような爽快な音がスピーカから出力される。しかし、サーフボード５の操作を誤ると、スクリーン１上の映像は波をかぶって沈没する様子に瞬時に切り替わり、音声もその状況に合致した激しい音に変わる。サーフボード５の進行方向に応じてサーファー８が見る光景も違ってくるので、そのときにはその光景を映し出せるように別のチャネル映像に切り替えられる。
こうしたスリルを味わいながら練習することにより、学習効果が促進される。
【００２３】
このような機能を実現するためには送信装置としては次のようなものが考えられる。
図２はこの発明に係るＩＳＤＢ用送信装置１１の一形態を示す要部の系統図であって、統合されて送信されるメイン情報としては、標準テレビジョン信号、ハイビジョン信号、データなどが考えられるが、この発明ではこれらの情報の他に、スポーツを練習する放送プログラムが組まれているときは、同じスポーツの映像が多角的な視野から撮られた映像が多チャネルを利用して伝送されるものとする。そのため本例ではメイン情報として標準テレビジョン信号の処理系のみを例示することにする。
【００２４】
図２を参照すると、端子１２ａには標準テレビジョン信号のうち映像信号Ｓｎが、端子１２ｂにはそれに付随した音声信号Ａｎが供給され、符号化部１２Ｎで圧縮などを含めた適切な符号化処理が施される。この符号化処理に同期して付加情報発生手段１４Ｎが動作して、制御情報などの付加情報が生成される。本例では付加情報としてはタイムコードなどが考えれる。符号化された標準テレビジョン信号およびタイムコードは多重化部２０に供給されて他の情報と共に多重化処理がなされる。
【００２５】
多重化部２０にはさらに以下のような情報が入力される。この例ではスポーツ番組のうち、特にサーフィンを例示する。サーフィンの場合必要な映像としてはサーファーが波乗りをしている連続する波頭を始めとしてこれに続く海岸線、陸地などがサーファーが目にする光景である。この光景をサーファーを中心にして広角に捉えた映像、可能ならば３６０°全方位の映像が使用される。これはサーファーの動きがどのような動きをとるか予測が尽きにくいからである。これらの映像の他にさらにサーフボードから海中に落ちるときの映像が用意されていればさらにリアリティーが増す。
【００２６】
以下に示す例は、図３のように全方位映像（若しくはパノラマ映像）として３つのアングル（ほぼ１２０°角）に分けた映像が使用される。全方位映像とは図３に示すように、０°〜３６０°の全範囲を撮像範囲とするもので、図の例では３等分され、ほぼ１２０°角範囲がカメラアングル（撮像アングル）となる。等分数は一例である。
【００２７】
３等分したそれぞれの位置で撮像情報を得るには、最も簡単な例としては３台の撮像カメラを用意し、図３のように例えばＡカメラでは０°から１２０°の角範囲を撮像し、Ｂカメラは同一地点で１２０°から２４０°の角範囲を撮像する。同様にＣカメラは同じ地点で２４０°から３６０°の角範囲を撮像する。カメラアングルは実際には図４のように所定の角範囲Ｌ（５°〜１０°の範囲）だけ隣接撮像カメラ間でオーバーラップさせて撮像される。一部撮像されていない区域が発生しないようにするためである。
【００２８】
以上のようなことを考慮すると、互いに関連する映像としては少なくとも３チャネル分の映像が必要である。そのため図２のように３チャネル分の映像信号Ｓａ〜Ｓｃと音声信号Ａａ〜Ａｃが使用され、これらが符号化部１６Ａ〜１６Ｃにおいて上述したと同様な圧縮処理を伴う符号化処理が施される。この例ではさらに海中の映像信号Ｓｄと対応する音声信号Ａｄが用意され、これらが符号化部１６Ｄにおいて符号化処理される。
【００２９】
これらの情報の他に対話機能を実現するため上述した複数チャネルの映像表示を適宜制御する付加情報ＣＤが端子１８ａを介して符号化部１８に供給されて符号化される。付加情報はディジタルデータであり、圧縮する場合でも映像や音声とは異なる処理が施される。
【００３０】
付加情報の例としては、各チャネルの信号内容の識別信号や、受信側に用意されたメモリ上に映像空間を再構成するために必要な各種データが挙げられる。例えば、サーフィンに関しては、サーフボードの進む方向に応じて映像内容が変化するように構成するため、複数使用されるメモリ空間上でパノラマ映像もしくは全方位画像を正しく再構成するために、それぞれのチャネルで送られる映像のアドレス情報や画角（東西南北を示す画像角度つまり撮像アングル）などのデータである。
【００３１】
以上の処理を経た複数チャネルからの信号と付加情報が多重化部２０において多重化され、送信部２２ではこの多重化信号に対し、チャネルコーデックや変調などの送信に必要な処理が施されて、送信形態（例えば衛生放送波）に適したＩＳＤＢ用放送信号に変調されたのち、この例ではアップコンバータ２４を経て送信アンテナ（パラボラアンテナ）２６で放送衛星に向けて送信される。
【００３２】
図５は上述したようなＩＳＤＢ用放送信号を受信するこの発明に係る受信装置４０の一例を示す。
【００３３】
受信アンテナ（パラボラアンテナ）４２で受信した衛星波はダウンコンバータ４４によって１ＧＨｚ帯にダウンコンバートされ、その後ＩＳＤＢ用チューナ４６に供給されて選局処理が行なわれる。そのため端子４８よりの選局信号によって文字放送を含めた特定チャネルのＩＳＤＢ用放送信号が選局される。
【００３４】
選局されたＩＳＤＢ用放送信号は復調されたのち信号分離部５０に供給されて、本来のメイン情報と付加情報に分離される。例えば標準テレビジョン信号のうち特定のチャネルが選局されたときには、標準テレビジョン信号とこの特定チャネルに付随する付加情報（タイムコードなど）とに分離される。
【００３５】
分離されたメイン情報は復号部５２（デコーダ）に供給されて復号処理が行なわれる。その後この例では直接モニタ（ＣＲＴなど）５４に供給されて映像が映し出されると共にスピーカ５６で音声信号が再生される。
【００３６】
メイン情報として上述したスポーツ番組を取り扱うときには全方位映像信号などの復調、復号処理がなされる。そのためこの例ではさらにチャネル数分の復号部この例ではトータル５個の復号部６０〜６８が設けられ、５チャネルのＩＳＤＢ用放送信号が復号される。復号部６８においては付加情報ＣＤが復号される。付加情報を除く復号された４チャネルの映像信号はそれぞれ画像処理のために設けられたメモリ手段（ＲＡＭなどの二次元メモリ）７０〜７６に入力される。音声信号も音声処理部に供給されて音声データが復号処理されるが、図では説明の便宜上省略してある。
【００３７】
アドレス情報や撮像アングル情報などが含まれている付加情報ＣＤは復号部６８でデコードされ、デコードされた付加情報のうちそのうちの書き込みスタート情報がアドレスコントロール回路８０〜８６に供給され、ここで生成された書き込みアドレスに同期してデコードされた４チャネル映像信号が対応するメモリ手段７０〜７６に書き込まれる。
【００３８】
アドレスコントロール回路８０〜８６からのリードアドレスデータに基づきメモリ空間上での読み出し位置がコントロールされながらリードされる。その結果画像が再構成される。読み出し位置やどのチャネルの映像を使用するかなどは多機能センサ７からのセンサ情報に基づいて制御されることになる。
【００３９】
多機能センサ７は図１にも示したようにサーフボード５に取り付けられた位置検出センサであって、サーフボード５の回転、傾き、方位（方角）などのモーションに応じた出力が得られるもので、これらのセンサ出力がマイコンで構成された制御部９０に供給される。
【００４０】
制御部９０はデコーダ６８からの付加情報が供給され、センサ出力と付加情報を基準にしてその時点でのサーフボード５の向きなどに応じた最適な映像チャネルや、サーフボード５の傾きに応じた画像読み出し位置などが求められ、これがリードアドレスコントロール情報としてアドレスコントロール回路８０〜８６に供給され、対応するリードアドレスに基づいて映像データの読み出しがコントロールされる。その結果、スイッチャー９２を介して大型スクリーン１に再構築された映像が拡大表示されると共に、スピーカ９４より音声信号が再生される。
【００４１】
ここで、サーファーが正しくサーフボード５をコントロールしている状態では、サーフボード５の進行方向に応じた映像が拡大表示されるようにメモリ手段７０〜７６から画像データの読み出しと、スイッチャー９２でのチャネル切り替えが行われる。これによって大型スクリーン１には３チャネル映像を用いたパンニング映像とサーフボード５に乗ったサーファー８の映像が同時に映し出され、あたかも利用者自身がサーファーとなって波乗りをしている光景を再現できる。ここに、パンニングとは周知のように撮像しながらカメラの方向を水平に一定速度で旋回させる撮像手法のことであって、メモリ手段７０〜７６の水平アドレス方向を順次変更することによってサーファーを中心とした広範囲なパンニング映像を得ることもできる。
【００４２】
サーファー８が方向を変えたときには、図６に示す実線図示の画角から波線図示の画角に移るように、メモリ空間をその向きに変えたのと同じような読み出しを行うべく、水平および垂直アドレスに対する読み出し位置を適宜変更すればよい。またサーファー８がバランスを崩したようなときの入力モーションを示すセンサ出力、例えば沈没などの異常事態を示すセンサ出力が得られたときには、緊急に沈没用の映像信号（音声信号も含む）となるようにメモリ手段７６のコントロールとスイッチャー９２の切り替えが行われることになるので、リアリティーが一層増大する。
【００４３】
沈没用のチャネル信号に関しては、必ずしもメモリ上に展開する必要はない。このチャネル映像は沈没した場合の緊急映像であり、他チャネル信号との再構成を必要としない場合があるからである。
【００４４】
このような処理を行うことによって利用者からの入力に応じた対話性を持った映像出力と音声出力が得られるようになり、大画面プロジェクタや大音響スピーカなどを用いた臨場感溢れるスポーツ模擬練習装置（システム）を実現できる。
【００４５】
上述した例は、スポーツ模擬練習装置としてサーフィンを例示したが、その他のスポーツ（ゴルフ、野球、サッカー、スキーなど）の練習システムにもこの発明を適用することができる。その場合にはスポーツの種類に応じた検知センサが必要になる。例えばゴルフでは打球するときの方向やスピード、体重移動などをそれぞれ計測する必要があるので、それらに対応した検知センサを用意することになる。
【００４６】
スイッチャーの代わりにメモリで構成された映像合成部を用い、そのリードライトデータをコントロールすることによって上述したように映像を再構成することもできる。
【００４７】
【発明の効果】
以上のように、この発明に係る送信装置および受信装置では、放送信号の一態様として、１つのスポーツ番組互いに関連する複数のチャネルを使用してその制御情報となる付加情報を含めて放送し、受信側ではスポーツ用具に対するセンサ手段を配し、そのセンサ出力に基づいて送信映像を切り替えたり、画像空間を再構成するなどして、ダイナミックにチャネル映像を切り替え、表示できるようにしたものである。
【００４８】
これによれば映像の中に表示されたスポーツをする人物があたかも視聴者自身となって表示されると共に、視聴者自身がスポーツを楽しんでいる光景を映像化できる特徴を有する。したがって、複数チャネルを利用して互いに関連する映像を多重化して伝送できるＩＳＤＢ放送システムを利用することによって、スポーツの練習効果を一層高められるスポーツ模擬練習装置などを構築できる実益を有する。
【図面の簡単な説明】
【図１】この発明を適用できるスポーツ模擬練習装置の一例を示す概念図である。
【図２】この発明に係るＩＳＤＢ用送信装置の実施の一形態を示す要部の系統図である。
【図３】全方位映像の説明図である。
【図４】カメラアングルと撮像範囲との関係を示す図である。
【図５】  この発明に係るＩＳＤＢ用受信装置の実施の一形態を示す要部の系統図である。
【図６】画角を変更して画像データを読み出すときの図である。
【図７】  情報多重化送信の一例を示す図である。
【符号の説明】
１  スクリーン
５  サーフボード
７  多機能センサ
１０  スポーツ模擬練習装置
１１  ＩＳＤＢ用送信装置
１２Ｎ，１６Ａ〜１６Ｄ，１８  符号化部
２０  多重化部
４６  ＩＳＤＢ用チューナ
５２，６０〜６８  復号部（デコーダ）
５４  モニタ
７０〜７６  メモリ手段
８０〜８６  アドレスコントロール回路
９０  制御部
【図１】
0003876448.tif 000002
【図２】
0003876448.tif 000003
【図３】
0003876448.tif 000004
【図４】
0003876448.tif 000005
【図５】
0003876448.tif 000006
【図６】
0003876448.tif 000007
【図７】
0003876448.tif 000008