(57)【特許請求の範囲】
【請求項１】
映像と当該映像の特定シーンに関連する少なくとも一つの関連データを表示する方法であって、
（ａ）あらかじめ定められた利用者識別子や利用者の属性を含む利用条件に合致する利用者識別子や利用条件を含む関連データを選択し、
（ｂ）当該特定シーンの表示中は、前記ステップ（ａ）にて選択された少なくとも一つの関連データの内容を示す画像や文字列であって前記関連データに含まれる前記画像や文字列を、利用者が利用している端末の画面サイズに応じたサイズに編集して、前記映像とともに表示し、表示された前記画像や文字列を自動保存し、
（ｃ）利用者から当該画像や文字列の少なくとも一つが選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示し、
（ｄ）利用者から一覧表示の指示が入力されると、前記一覧表示の指示が入力される時点までに前記ステップ（ｂ）にて自動保存された前記画像や文字列の一覧を表示し、前記画像や文字列の一覧から少なくとも１つが選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示することを特徴とする映像・データ表示方法。
【請求項２】
映像と当該映像の特定シーンに関連する少なくとも一つの関連データを表示する方法であって、本体装置と表示装置と利用者からの指示を受け取る入力手段とを備えた利用者端末によって行われる方法であって、
（ａ）前記本体装置が、あらかじめ定められた利用者識別子や利用者の属性を含む利用条件に合致する利用者識別子や利用条件を含む関連データを選択し、
（ｂ）前記本体装置が、当該特定シーンの表示中は、少なくとも一つの関連データの内容を示す画像や文字列であって前記関連データに含まれる前記画像や文字列を、前記表示装置の画面サイズに応じたサイズに編集して、前記映像とともに表示し、表示された前記画像や文字列を自動保存し、
（ｃ）前記本体装置が、前記入力手段を介して利用者から当該画像や文字列の少なくとも一つが選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示し、
（ｄ）前記本体装置が、前記入力手段を介して利用者から一覧表示の指示が入力されると、前記一覧表示の指示が入力される時点までに前記ステップ（ｂ）にて自動保存された前記画像や文字列の一覧を表示し、前記画像や文字列の一覧から少なくとも１つが選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示することを特徴とする映像・データ表示方法。
【請求項３】
映像と当該映像に関連する少なくとも一つの関連データを表示する方法であって、本体装置と表示装置と利用者からの指示を受け取る入力手段とを備えた利用者端末によって行われる方法であって、
（ａ）前記本体装置が、前記入力手段を介して利用者からチャンネルが選択されると、当該チャンネルに応じた映像に関連する少なくとも一つの関連データを選択し、
（ｂ）前記本体装置が、前記ステップ（ａ）にて選択された前記少なくとも一つの関連データのうち、あらかじめ定められた利用者識別子や利用者の属性を含む利用条件に合致する利用者識別子や利用条件を含む関連データを選択し、
（ｃ）前記本体装置が、該特定シーンの表示中は、前記ステップ（ｂ）にて選択された少なくとも一つの関連データの内容を示す画像や文字列であって前記関連データに含まれる前記画像や文字列を、前記表示装置の画面サイズに応じたサイズに編集して、前記映像とともに表示し、表示された前記画像や文字列を自動保存し、
（ｄ）前記本体装置が、前記入力手段を介して利用者から当該画像や文字列の少なくとも一つが選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示し、
（ｅ）前記本体装置が、前記入力手段を介して利用者から一覧表示の指示が入力されると、前記一覧表示の指示が入力されるまでに前記ステップ（ｃ）にて自動保存された前記画像や文字列の一覧を表示し、前記画像や文字列の一覧から少なくとも１つが選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示することを特徴とする映像・データ表示方法。
【請求項４】
映像と当該映像の特定シーンに関連する少なくとも一つの関連データを表示する方法であって、
（ａ）利用者からチャンネルが選択されると、当該チャンネルに応じた映像に関連する少なくとも一つの関連データを選択し、
（ｂ）前記ステップ（ａ）にて選択された前記少なくとも一つの関連データのうち、あらかじめ定められた利用者識別子や利用者の属性を含む利用条件に合致する利用者識別子や利用条件を含む関連データを選択し、
（ｃ）当該特定シーンの表示中は、前記ステップ（ｂ）にて選択された少なくとも一つの関連データの内容を示す画像や文字列であって前記関連データに含まれる前記画像や文字列を、利用者が利用している端末の画面サイズに応じたサイズに編集して、前記映像とともに表示し、表示された前記画像や文字列を自動保存し、
（ｄ）利用者から当該画像や文字列の少なくとも一つが選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示し、
（ｅ）利用者から一覧表示の指示が入力されると、前記一覧表示の指示が入力される時点までに前記ステップ（ｃ）にて自動保存された前記画像や文字列の一覧を表示し、前記画像や文字列の一覧から少なくとも１つが選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示することを特徴とする映像・データ表示方法。
【請求項５】
映像と当該映像の特定シーンに関連する関連データを表示する方法であって、
（ａ）利用者からチャンネルが選択されると、当該チャンネルに応じた映像に関連する少なくとも一つの関連データを選択し、
（ｂ）前記ステップ（ａ）にて選択された前記少なくとも一つの関連データのうち、あらかじめ定められた利用者識別子や利用者の属性を含む利用条件に合致する利用者識別子や利用条件を含む関連データを選択し、
（ｃ）前記ステップ（ｂ）にて複数の関連データが選択された場合は当該複数の関連データ間で表示優先度を決定し、
（ｄ）当該特定シーンの表示中は、前記ステップ（ｃ）にて決めた表示優先度に基づき、各関連データの内容を示す画像や文字列であって前記各関連データに含まれる前記画像や文字列を、利用者が利用している端末の画面サイズに応じたサイズに編集して、前記映像とともに表示し、表示された前記画像や文字列を自動保存し、
（ｅ）利用者から当該画像や文字列が選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示し、
（ｆ）利用者から一覧表示の指示が入力されると、前記一覧表示の指示が入力される時点までに前記ステップ（ｄ）にて自動保存された前記画像や文字列の一覧を表示し、前記画像や文字列の一覧から少なくとも１つが選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示することを特徴とする映像・データ表示方法。
【請求項６】
前記関連データを表示する場合に、少なくとも一つの映像表示領域と少なくとも一つのデータ表示領域に分割し、それぞれ映像と当該映像に関連する関連データを同時表示する映像・データ同時モードと、画面全体で少なくともひとつの関連データを表示するデータ表示モードを設け、
前記ステップ（ｅ）は、利用者から表示切替の指示が入力されると、映像を表示する映像表示モードと前記映像・データ同時表示モードと前記データ表示モードを切り替えることを特徴とする請求項５に記載の映像・データ表示方法。
【請求項７】
前記ステップ（ｄ）は、前記表示優先度が低いため表示しきれなかった関連データの画像や文字列があった場合は、前記映像と共に表示された前記画像や文字列と共に、前記表示優先度が低いため表示しきれなかった関連データの画像や文字列を自動保存し、
前記ステップ（ｆ）は、利用者から一覧表示の指示が入力されると、前記一覧表示の指示が入力される時点までに前記ステップ（ｄ）にて自動保存された前記画像や文字列と、前記ステップ（ｄ）にて記録された前記表示優先度が低いため表示しきれなかった画像や文字列の一覧を表示し、前記画像や文字列の一覧から少なくとも１つが選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示することを特徴とする請求項５から６のいずれかに記載の映像・データ表示方法。
【請求項８】
前記ステップ（ｆ）にて一覧表示する画像や文字列の数に制限を設け、
前記ステップ（ｆ）は、前記制限を超えた場合は前記表示優先度に基づいて、一覧表示する関連データの画像や文字列を選別することを特徴とする請求項５から７のいずれかに記載の映像・データ表示方法。
【請求項９】
前記画像は、前記関連データがどのような種類のものかを表すもアイコンであり、
前記文字列は、前記関連データのヘッドラインを表すテロップであることを特徴とする請求項１から８のいずれかに記載の映像・データ表示方法。
【請求項１０】
前記映像を提供する情報提供者が前記関連データの内容を示す画像や文字列を強制表示する強制表示モードと、利用者が前記関連データの内容を示す画像や文字列を表示又は非表示する表示モードとを設け、
前記強制表示モードでは、利用者が前記関連データの画像や文字列を非表示に設定していたとしても、前記画像や文字列を強制的に表示することを特徴とする請求項７に記載の映像・データ表示方法。
【請求項１１】
本体装置と表示装置と利用者からの指示を受け取る入力手段とを備え、映像と当該映像の特定シーンに関連する少なくとも一つの関連データを表示する映像・データ表示装置であって、
あらかじめ登録された利用者識別子や利用者の属性を含む利用条件に合致する利用者識別子や利用条件を含む関連データを選択する第１の手段と、
前記特定シーンの表示中に、前記第１の手段にて選択された少なくとも一つの関連データの内容を示す画像や文字列であって前記関連データに含まれる前記画像や文字列を、前記表示装置の画面サイズに応じたサイズに編集して、前記映像とともに表示し、表示された前記画像や文字列を自動保存する第２の手段と、
前記入力手段を介して利用者から前記画像や文字列の少なくとも一つが選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示する第３の手段と、
前記入力手段を介して利用者から一覧表示の指示が入力されると、前記一覧表示の指示が入力される時点までに前記第２の手段にて自動保存された前記画像や文字列の一覧を表示し、前記画像や文字列の一覧から少なくとも１つが選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示する第４の手段とを備えたことを特徴とする映像・データ表示装置。
【請求項１２】
本体装置と表示装置と利用者からの指示を受け取る入力手段とを備え、映像と当該映像の特定シーンに関連する少なくとも一つの関連データを表示する映像・データ表示装置であって、
前記入力手段を介して利用者からチャンネルが選択されると、前記チャンネルに応じた映像に関連する少なくとも一つの関連データを選択する第１の手段と、
前記第１の手段にて選択された前記少なくとも一つの関連データのうち、あらかじめ定められた利用者識別子や利用者の属性を含む利用条件に合致する利用者識別子や利用条件を含む関連データを選択する第２の手段と、
前記特定シーンの表示中に、前記第２の手段にて選択された少なくとも一つの関連データの内容を示す画像や文字列であって前記関連データに含まれる前記画像や文字列を、前記表示装置の画面サイズに応じたサイズに編集して、前記映像とともに表示し、表示された前記画像や文字列を自動保存する第３の手段と、
前記入力手段を介して利用者から当該画像や文字列の少なくとも一つが選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示する第４の手段と、
前記入力手段を介して利用者から一覧表示の指示が入力されると、前記一覧表示の指示が入力される時点までに前記第３の手段にて自動保存された前記画像や文字列の一覧を表示し、前記画像や文字列の一覧から少なくとも１つが選択されると、選択された前記画像や文字列に対応する関連データを前記画面サイズに応じたサイズの表示領域に表示する第５の手段とを有する映像・デ−タ表示装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、放送などにより取得した映像とデータを表示する方法及び装置に係わり、特にユーザごとに種別化または個別化されたデータを映像に同期して表示する映像・データ表示方法及び装置に関する。
【０００２】
【従来の技術】
映像の他に文字や画像などのデータを放送するサービスとしては、現在、地上波による文字放送や、衛星またはＣＡＴＶを使ったデータ配信サービスが始まっている。将来、放送がディジタル化されるようになると、データ圧縮技術やデータ多重化技術により、映像と同時に大量のデータを送ることが可能になるので、これらデータ放送のサービスはますます盛んになると考えられる。
以下、従来のデータ放送における表示方法について順に説明する。
まず、文字放送では地上波の空き領域にデータを多重化して送信し、受信端末側で受け取った電波を映像とデータに分割する。データは映像と関連しているわけではないので、映像の表示画面とは切り離して表示する。例えば、図８に示すように画面を二つに分割し、それぞれに映像とデータを表示する。または、一画面に映像とデータをリモコン操作で交互に表示するなどが一般的である。あるいは、映像を見ている最中にデータの受け取りが完了したら、それを映像の上にテロップとして流すといった表示の仕方もある。端末側には一時記憶領域も設けてあるので、受け取ったデータを一時保存し、後で見るといった使い方もできる。いずれにしろ、データは映像から独立しているので、データの受け取りが完了した時点から随時映像とは関係なく見ることになる。
また、一般にインタラクティブテレビと呼ばれるサービスでは、映像に関連したデータを映像とともに送信する。先の文字放送と同じく、地上波の空き領域にデータを多重化して送信する仕組みである。その時点におけるシーンに関連するデータが端末側に届くと、映像の隅に特定のアイコンを表示し、その旨視聴者に知らせる。視聴者がデータ表示を指定すると、図８に示すように画面を二つに分割し、映像とデータを同時に表示する。あるいは一画面に映像とデータを交互に表示するといった方法もある。
一方、最近ではインターネット上のホームページを見ることができるテレビ（インターネットテレビと呼ばれる）が世に出てきつつある。表示方法は先の文字放送とほぼ同じで、映像とはまったく同期しないでホームページを表示する。一般的にその表示の仕方は、図８に示す２画面にテレビ映像とホームページを同時に表示する方法や、一画面をテレビ映像とホームページで切り替える表示方法がある。また、最近のテレビ番組ではよくホームページのアドレスを視聴者に知らせることも多くなったが、それをインターネットテレビで見るためにはいちいち利用者がそのアドレスを入力する必要がある。
以上、インタラクティブテレビやインターネットテレビに関する従来技術は、「日経トレンディ」（日経ホーム社）９６年１０月号のｐｐ５４〜ｐｐ７３の「デジタルテレビ時代が来た！」に詳しい。
【０００３】
【発明が解決しようとする課題】
まず、本発明が想定している情報サービスを、具体例を用いて説明する。
最近、ハードウェア性能の向上やネットワークの普及に伴い、インタラクティブな情報サービスが容易に実現できるようになってきた。ここで言うインタラクティブな情報サービスとは、情報提供者から利用者に情報を一方的に送るだけでなく、利用者からも積極的に情報提供者にアクセスするという双方向性を持った情報サービスのことである。例えば、従来のテレビ放送やラジオ放送は番組提供者から視聴者への一方向メディアであったが、最近は双方向メディアであるファックスや電話を用いて、視聴者参加番組などのインタラクティブ情報サービスを実現している。また、ファックスや電話の代わりにインターネットやパソコン通信を使った実験的な番組も開始されており、今後はインターネットのブームと相まってテレビ放送とインターネットを融合した情報サービスもますます増えてくると考えられる。
このような双方向型の情報サービスでは、情報提供者側から利用者への効果的かつ効率的な問いかけが重要である。情報提供者側からの問いかけが最初になければインタラクションも開始されないし、情報提供者側のメリットを考えるとその問いかけは大きな効果を少ない労力であげることを望まれるからである。
効果的な情報提供の仕方について考えると、映像とあわせて情報（本発明では映像と対比させるためデータと呼ぶこともある）も送るわけであるから、両者に何らかの関連があることが望まれる。例えば、テレビ番組でその番組に対するアンケートを同時に送ったり、テレビコマーシャルでさらに詳しい商品情報を送るといった利用イメージが考えられる。インターネットやＣＤ−ＲＯＭにアクセス可能なテレビ端末を想定するならば、ホームページのアドレスやＣＤ−ＲＯＭ内のデータへの自動アクセスプログラムが送られてくるだけでもよい。このように、映像から情報へのアクセス方法が定義されていると、映像で視聴者を引き込んで、即座に双方向メディアに移行させるといったメリットがある。同時に、視聴者にとっては、映像に関連する詳細情報をさらに簡単に知ることができる。
効率的な情報提供の方法としては、個々の利用者に適した情報をダイレクトに送るといったことが考えられる。例えば、現在のテレビコマーシャルやテレビショッピングではすべての利用者に対して一様な映像情報を提供しているが、これが顧客情報をもとに利用者個別に真に訴求力のある商品情報を映像とあわせて提供できるようにと、マーケティングの効率は飛躍的に向上する。同時に、利用者にとっても自分の興味にそった情報が送られてくるので、情報参照の効率もあがる。このような個別化技術をマスカスタマイゼーションと呼ぶ。また、利用者ごとに別々の情報を送っていたのでは情報提供者側の負担も大きく、ネットワークの負荷も高くなるので、利用者を共通な特徴で分類し、各分類毎に情報提供する種別化といった概念もマスカスタマイゼーションは含む。
次に、以上のインタラクティブ情報サービスを従来の映像・データ表示方法にあてはめた場合の問題点について述べる。
まず、文字放送では映像とデータ間に特に関連が定義されているわけではない。同様に、インターネットテレビにおいてもテレビ映像とホームページ間に関連があることを前提としていない。このため、映像とデータを別画面に独立して表示しても構わなかった。また、文字放送において、データを映像の上に重ねて表示する方法であったとしても、それはデータの受信が終了した後に表示準備が整ったことを知らせるだけで十分であった。しかし、本発明が対象とする情報サービスでは映像に関連付けられたデータを扱うので、映像のどのシーンに対応するデータであるかを利用者に知らせる必要がある。
一方、現在のインタラクティブテレビにおいては映像に関連したデータを映像とともに表示する。このため、関連データが映像のどのシーンに対応するかを利用者に知らせる表示方法となっている。しかし、マスカスタマイゼーションを前提とした表示方法にはなっておらず、利用者には同じデータが配信されるので、映像と同期してみるデータも利用者間でみな同じである。
本発明の目的は、前記情報サービスを実現するため、上記問題点を解決することにあり、まず第一に利用者ごとに種別化または個別化されたデータが映像と同期して存在することを利用者に知らせ、当該データを映像と同期して表示する映像・データ表示方法を提供することにある。
また、利用者を関連データにアクセスさせるためには、関連データの存在がよりわかりやすくなくてはならない。特定の映像シーンには複数のデータが関連付けしてあることも考えられるので、複数データ間の違いがすぐに分かる工夫も必要である。このため、本発明の他の目的は、どのようなデータが映像に関連付けられているのかわかりやすく利用者に提示する映像・データ表示方法を提供することにある。
また、映像は時間的に連続したメディアなので、いかなるものからも邪魔されることなく連続して見ていたいという要望が利用者にはある。そこで、本発明の他の目的は、映像の連続性を損なわず、かつ関連データの利用者への提供をも保証する映像・データ表示方法を提供することにある。
また、前記のインタラクティブ情報サービスでは一般家庭をターゲットとしているので、利用者側の端末は操作が簡単で使い勝手のよいものでなければならない。そこで、本発明の他の目的は、操作が簡単で使い勝手のよい映像・データ表示方法を提供することにある。
また、前記のインタラクティブ情報サービスが広く一般家庭に普及するためには、利用者側の端末が低価格であることも必須である。そこで、本発明の他の目的は、端末を低価格に実現できる映像・データ表示方法を提供することにある。
さらに、前記のインタラクティブ情報サービスでは、例えばターゲットとなる利用者にきちんと情報を伝えたいなど、情報提供者側の意向を十分に満足することが重要である。そこで、本発明の他の目的は、情報提供者の意向を反映できる映像・データ表示方法を提供することにある。
【０００４】
【課題を解決するための手段】
本願の代表的な発明は、映像と当該映像の特定シーンに関連する少なくとも一つの関連データを表示する場合に、（ａ）あらかじめ定められた利用者識別子や利用者の属性を含む利用条件に合致する利用者識別子や利用条件を含む関連データを選択し、（ｂ）当該特定シーンの表示中は、（ａ）にて選択された少なくとも一つの関連データの内容を示す画像や文字列であって関連データに含まれる画像や文字列を、利用者が利用している端末の画面サイズに応じたサイズに編集して、映像とともに表示し、表示された画像や文字列を自動保存し、（ｃ）利用者から当該画像や文字列の少なくとも一つが選択されると、選択された画像や文字列に対応する関連データを画面サイズに応じたサイズの表示領域に表示し、（ｄ）利用者から一覧表示の指示が入力されると、一覧表示の指示が入力される時点までに（ｂ）にて自動保存された画像や文字列の一覧を表示し、画像や文字列の一覧から少なくとも１つが選択されると、選択された画像や文字列に対応する関連データを画面サイズに応じたサイズの表示領域に表示する。
また、本願の代表的な発明は、映像と当該映像の特定シーンに関連する少なくとも一つの関連データを表示する場合に、（ａ）利用者からチャンネルが選択されると、当該チャンネルに応じた映像に関連する少なくとも一つの関連データを選択し、（ｂ）（ａ）にて選択された少なくとも一つの関連データのうち、あらかじめ定められた利用者識別子や利用者の属性を含む利用条件に合致する利用者識別子や利用条件を含む関連データを選択し、（ｃ）当該特定シーンの表示中は、（ｂ）にて選択された少なくとも一つの関連データの内容を示す画像や文字列であって関連データに含まれる画像や文字列を、利用者が利用している端末の画面サイズに応じたサイズに編集して、映像とともに表示し、表示された画像や文字列を自動保存し、（ｄ）利用者から当該画像や文字列の少なくとも一つが選択されると、選択された画像や文字列に対応する関連データを画面サイズに応じたサイズの表示領域に表示し、（ｅ）利用者から一覧表示の指示が入力されると、一覧表示の指示が入力される時点までに（ｃ）にて自動保存された画像や文字列の一覧を表示し、画像や文字列の一覧から少なくとも１つが選択されると、選択された画像や文字列に対応する関連データを画面サイズに応じたサイズの表示領域に表示する。
また、本願の代表的な発明は、映像と当該映像の特定シーンに関連する少なくとも一つの関連データを表示する場合に、（ａ）利用者からチャンネルが選択されると、当該チャンネルに応じた映像に関連する少なくとも一つの関連データを選択し、（ｂ）（ａ）にて選択された少なくとも一つの関連データのうち、あらかじめ定められた利用者識別子や利用者の属性を含む利用条件に合致する利用者識別子や利用条件を含む関連データを選択し、（ｃ）（ｂ）にて複数の関連データが選択された場合は当該複数の関連データ間で表示優先度を決定し、（ｄ）当該特定シーンの表示中は、（ｃ）にて決めた表示優先度に基づき、各関連データの内容を示す画像や文字列であって各関連データに含まれる画像や文字列を、利用者が利用している端末の画面サイズに応じたサイズに編集して、映像とともに表示し、表示された画像や文字列を自動保存し、（ｅ）利用者から当該画像や文字列が選択されると、選択された画像や文字列に対応する関連データを画面サイズに応じたサイズの表示領域に表示し、（ｆ）利用者から一覧表示の指示が入力されると、一覧表示の指示が入力される時点までに（ｄ）にて自動保存された画像や文字列の一覧を表示し、画像や文字列の一覧から少なくとも１つが選択されると、選択された画像や文字列に対応する関連データを画面サイズに応じたサイズの表示領域に表示する。
【０００５】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して説明する。
図２は、本発明で対象とするインタラクティブ情報サービスのシステム構成図を表す。当該システムは、大きく情報提供者側サブシステム１０２と情報伝達メディア１０１と利用者側端末１からなる。まず、情報伝達メディア１０１としては、地上波や衛星放送１０３及びＣＡＴＶなどによる放送メディアと、インターネット１０４などのネットワークメディアと、ＣＤ−ＲＯＭ１０５やＤＶＤ（Digital Video Disc）などのパッケージメディアを想定している。情報提供者側サブシステム１０２では、モジュール１０９において映像やデータなどの各種コンテンツ１１０を各伝送メディア向けに加工するとともに、メディア間のリンクを定義する。メディア間のリンクとは、各伝送メディアで利用者側に送る情報間の参照関係のことを言い、例えば放送メディアで流す映像から関連するインターネット上のホームページやＣＤ−ＲＯＭ上のデータにアクセス可能にする。各種伝送メディア向けには、放送局１０６からは衛星放送１０３などへ、インターネットサーバ１０７からはインターネット１０４へ、パッケージ作成サブシステム１０８からはＣＤ−ＲＯＭ１０５へそれぞれ情報を送出する。これを利用者端末１で受け取り、参照する仕組みである。
次に、図１は利用者端末１の機能ブロック図を表す。利用者端末１は、本体装置２と表示装置３とユーザ入力手段４からなる。本体装置２は、少なくとも一つの映像ソース５と、同じく少なくとも一つのデータ６を受け取る。映像とデータの送信方法及びデータの構造については後述する。
さて、本体装置２では、映像とその映像に関連したデータを選択受信する機能ブロック１０と、当該映像と関連データを互いに同期して表示する機能ブロック１１と、インターネットやＣＤ−ＲＯＭなど外部リソースにアクセスする機能ブロック１２に大きく分けることができる。まず、機能ブロック１０では、ユーザ入力手段４からの指示に基づき、映像選択部１３にて少なくとも一つを選択する。通常のテレビにおけるチャンネル選択と同じ処理であるが、本発明では同時に映像に関連するデータを選択することに特徴がある。例えば、利用者がチャンネル番号１の映像Ａを選択したとすると、映像Ａに関連付けられたデータａとデータｂがそのまま選択されたことになる。この後、映像は映像入力部１４を介して、機能ブロック１１中の映像・データ合成部２２に送られる。
一方、関連データはデータ入力部１５を介し、データ選択部１６に送られる。本発明のデ−タ選択部１６では、あらかじめ定められた利用条件１７に基づき、関連データをさらに選択することに特徴がある。例えば、利用者が３０歳男性とし、その旨利用条件１７が登録されていたとして、送られてきた関連データの利用条件と比較して、データａを選択することになる。利用条件としては、年齢や性別の他に、住所やその他趣味・性格など複数種類を登録することができる。同時に、利用者個別の識別子も登録するので、特定利用者だけに送りたい情報に関しては関連データ側で利用者識別子を利用条件に設定する。この仕組みにより、情報提供者側からはターゲット利用者を絞った効率的な情報提供が実現できると同時に、利用者側でも自分に真に関連するデータのみ参照できるので、情報参照の効率があがる。
同時に、利用環境に関する条件が登録されていると、当該条件に基づき、関連データの表示条件１８を規定する。例えば、関連データの表示領域を画面サイズにあわせるなどといった処理が考えられる。また、実現に際しては、Ａという条件下であればａの表示条件に従うといった具合に、利用環境条件ごとに表示条件を規定し、利用者端末側でこれを選ぶといったやり方を想定している。
次に、機能ブロック１１では、映像と関連データを両者の関連が利用者に分かりやすいように表示する必要がある。このため、機能ブロック１１では映像表示部２６と合成表示部２７とデータ表示部２８の３種類の表示手段を用意している。各表示手段による画面例は図４〜７を使って詳細に説明するが、簡単に言うと映像表示部２６では画面全体で映像を中心に表示し、合成表示部２７では映像とデータをあわせて表示し、データ表示部では画面全体でデータのみ表示する。また、各表示画面は、ユーザ入力手段４からの指示により、表示切替部２９を介してそれぞれ画面を切り替える。
映像表示部２６にて、映像のみ表示装置３に出力していたのでは、映像とデータの関連性を利用者に伝えることができない。そこで、本発明では、映像の特定シーンに関連するデータをその内容を示すアイコンやテロップを映像に重畳して表示するため、同期制御部２１と映像・データ合成部２２を設けたことに特徴がある。特に、映像・データ合成部２２では、映像上にアイコンやテロップを重ねて合成するデータオーバレイ処理２４を用いる。ここで、アイコンは当該関連データがどのような種類のものかを表すために用いる。例えば、関連データがプレゼント情報であったり、会員向けの限定情報であるなど。また、テロップは関連データのヘッドラインを表す。新聞の大見出しのように一目でその内容が分かるものであることが望ましい。
同時に、関連データに表示条件１８が規定されている場合は、当該条件に基づき、アイコンやテロップを前もって編集するため、データ編集部２０も設けた。例えば、画面サイズが小さい場合はアイコンやテロップのサイズも同様に小さくしたり、テロップの長さも短めにしたりする。以上より、映像に関連したデータの存在をアイコンやテロップを使って、わかりやすくかつ効果的に利用者に知らせることができる。
なお、映像・データ合成部２２におけるスルー処理２５では、映像にアイコンやテロップを重ねることなくそのまま表示する。映像に関連するデータがない場合や利用者がアイコンやテロップの表示をＯＦＦにしている場合に用いる。
次に、合成表示部２７では、映像と関連データをあわせて表示する。合成表示の方法としては、映像オーバレイ処理２３による関連データ上に映像を重畳する方法、データオーバレイ処理２４による映像上にデータを重畳する方法、表示装置３の画面を映像表示領域とデータ表示領域に分割する方法などがある。各々の画面例については図４〜７にて説明する。本発明では、映像表示中の特定シーンにて関連データが存在すると、映像表示部２６と同じく、映像にアイコンやテロップを重ねて表示し、利用者のデータ表示の指示が入力されると、データ表示領域に関連データを表示することに特徴がある。利用者は、連続メディアである映像をデータ表示で妨げられることなく続けて観賞でき、同時に関連データをも同一画面にて参照できるというメリットがある。
次に、データ表示部２８では関連データのみを表示する。この際、表示条件１８が規定してある場合は、あらかじめデータ編集部２０にて当該条件に従うようデータを加工・編集しておく。なお、機能ブロック１１では、データ一時記憶領域１９を設け、データ選択部１６からの選択済み関連データを一時的に保管する。そして、各表示部からの要求に応じて関連データを各処理部に送出する。
ここで関連データについて簡単に説明すると、本発明では関連データとして、インターネット上のホームページなどのように、いわゆるリンク構造を持った文字や画像を想定している。このため、データ表示画面上で操作を行うということは、すなわちリンクを辿ることにほかならない。そこで、機能ブロック１２では、リンク先指定などのデータ操作部３２と、リンク先を検索するなどのデータ探索部３３を設けた。また、本発明では、関連データを送られてくるものばかりでなく、インターネット１０４やＣＤ−ＲＯＭ１０５など他の伝送メディアから取り出すことに特徴がある。このため、データ探索部では、関連データのアクセス方法に関する情報により、データ一時記憶領域１９だけでなく、インターネットアクセス部３４やＣＤ−ＲＯＭアクセス部３５にもデータ探索を依頼する。インターネットアクセス部３４では、インターネット１０４上のホームページのＵＲＬ（Universal Resource Locator）を受け取り、ＵＲＬに該当するホームページを入手してデータ一時記憶領域１９に格納する。ＣＤ−ＲＯＭアクセス部３５についても処理はほぼ同様であるが、ＣＤ−ＲＯＭタイトルごとにアクセス方法が違う可能性があるため、本情報サービスで用いるＣＤ−ＲＯＭとのアクセスプロトコルをあらかじめ決めておく必要がある。以下、本実施例では、映像に関連したデータの内容としておもにホームページを代表にとって説明する。
次に、図３は利用者端末１のハードウェア構成を表す。利用者端末１は、本体装置２と表示装置３とユーザ入力手段４からなる。また、本体装置２のハードウェア構成は、中央制御装置１１１と、それぞれバス１１２でつながった記憶部１１２と表示制御部１１３と入力制御部１１４と放送受信部１１６とディスク制御部１１７と通信制御部１１８からなる。記憶部１１３は、図１に示すデータ一時記憶領域を設け、処理プログラムやデータを記憶する。表示制御部１１４では表示装置３への出力を制御する。入力制御部１１５では、利用者からの指示がユーザ入力手段４より入力されるので、これを受け取り、指示を中央制御装置に送る。中央制御装置でその指示内容を解釈してその指示を実現するための命令を実行する。放送受信部１１６では、アンテナ１１９を介して放送局から送られてきた映像やデータを受け取る。ディスク制御部１１７では、ＣＤ−ＲＯＭ１０５などのパッケージメディア中のデータにアクセスする。同様に、通信制御部１１８では、インターネット１０４上のホームページなど各種情報源にアクセスする。
図４〜図７は、本発明に係わる実施例の表示画面の遷移を表す。
図４を例に、画面遷移について説明すると、まず表示画面２００では映像のみ表示している。映像表示中にタイムスタンプが開始されると、表示画面２０１または２０３に遷移する。ここで、タイムスタンプとは、特定映像シーンと当該シーンに関連するデータを同期付ける仕組みであり、関連付けされた映像シーンの開始から終了までの時間を表す。タイムスタンプ中に利用者から何の指示も入力されなければ表示画面２０１または２０３から表示画面２００に戻る。
表示画面２０１では関連データの種類を表すアイコン２０２を表示し、表示画面２０３ではアイコンとともに関連データの内容を示すテロップ２０４を表示している。アイコン２０２やテロップ２０４は関連デ−タに含まれる。本発明では、映像シーンに関連したデータが存在することをこのようなアイコンやテロップで知らせることに特徴がある。また、本発明では、利用者ごとに種別化または個別化したデータを表示するので、アイコンやテロップを使ってデータの種類や内容を分かりやすく利用者に知らせることにも特徴がある。なお、本実施例ではテロップの表示・非表示は情報提供者側で設定できるものとしている。また、アイコンやテロップに邪魔されることなく映像を楽しみたいという利用者のために、アイコンやテロップを利用者側で表示ＯＦＦにするモードも設ける。しかし、関連データの内容によっては情報提供者が必ず利用者に伝えたいデータもあるので、アイコンやテロップの強制表示モードも設けた。
次に、表示画面２００の状態で、利用者が表示切替を指示すると、表示画面２０５に遷移し、それまでに見た一番最後のホームページ２０６またはデフォルトホームページを表示する。一方、表示画面２０１または２０３の状態で利用者が表示切替を指示すると、表示画面２１３に遷移し、映像に関連したホームページ２１４を表示する。このように、アイコンやテロップを表示中に表示切替が指示されると、当該映像シーンに関連したホームページを表示することに本発明の特徴がある。
また、表示画面２０５と２１３においては、現在選択中の映像の縮小映像２０７をホームページ上に重ねて表示する。このように、利用者は映像をデータ表示に邪魔されることなく連続して見ながら、同時に関連データをも参照できるところに本発明の特徴がある。
また、縮小映像２０７は通常映像の表示画面２００と同等機能を持つ。このため、表示画面２０５において、タイムスタンプが開始されると、表示画面２０９に遷移し、縮小映像２１０にテロップ２１１とアイコン２１２を表示する。この状態で、表示切替を利用者が指示すると、表示画面２１３に遷移し、映像に同期したホームページを表示する。このように、映像と関連データの同時表示中に、映像に関連した新たなデータがあることを利用者に知らせることができるので、利用者は即座に当該関連データを参照することができる。
次に、表示画面２０５の状態で再度表示切替が指示されると、表示画面２１５に遷移し、縮小映像２０７を画面から消去し、現在表示中のホームページだけを表示する。同様に、表示画面２０９の状態で表示切替が指示されると、表示画面２１８に遷移し、縮小映像２１０を消去すると同時に、映像に同期したホームページ２１９を表示する。この表示モードは、映像とホームページの合成表示モードとは逆に、映像に邪魔されることなくホームページを見たい場合に適切である。なお、ホームページの操作はメニュー２０８で行う。また、再度表示切替を指示すると、映像のみを表示する表示画面２００に戻る。
メニュー２０８には「自動保存されたアイコンやテロップの再表示」という項目を設けてある。つまり、利用者がこれまでに見てきたアイコンやテロップの一覧を自動保存し、利用者からの指示があった時点でこれをホームページの形式（つまりＨＴＭＬ：Hypertext Markup Language形式）に変換して利用者に提示する。例えば、表示画面２１５においてその旨指示が入力されると、表示画面２１７に遷移する。表示画面２１７では、これまでに自動保存されたアイコンやテロップを一覧表示する。利用者が映像に熱中するあまり関連データを見逃したり、あとでもう一度見たいといったニーズがあることを想定し、本発明では当該機能を設ける。また、アイコンやテロップをすべて保存していたのでは記憶部１１３がいくらあっても足りないので、適宜いらないものを消去できるよう、関連データに優先度を設け、優先度の低いデータから消去する仕組みにする。例えば、この優先度を情報提供にかかったコストに応じて定めるとすると、コストが安かった順に消去されることになる。
以上、図４を用いて画面遷移を説明したが、表示画面には大きく、映像のみの表示モードと、映像とホームページの合成表示モードと、ホームページのみの表示モードの３種類があることがわかる。図４では、映像表示モード、合成表示モード、ホームページ表示モードそして映像表示モードに戻るといった順に遷移している。一方、図５では本発明の別の実施画面例を表し、映像表示モード、ホームページ表示モード、合成表示モードの順に遷移している。ホームページを中心的に見る利用例に適した画面遷移である。同様に、図６も本発明の別の実施画面例を表すが、本画面例では合成表示モードが存在しない。映像とホームページを合成させて表示するためにはその分コストもかかるが、図６による実施ではコストを低く押えることができる。
また、映像とデータの合成表示モードとしては、図７に示すようにいくつか他にも実施画面例がある。例えば、図７（ａ）では、画面２３０を２分割し、一方を映像表示領域２３１、他方をホームページ表示領域２３２とし、映像側で関連するホームページの存在をアイコン２３４やテロップ２３３で知らせる。この時点で、利用者が画面切替を指示すると、ホームページ表示領域２３２に映像に同期したホームページ２３５を表示する。
図７（ｂ）では、画面２４０を一つのホームページ表示領域２４１と３つの映像表示領域２４２、２４３、２４４に分割している。利用者は映像表示領域にて映像をそれぞれ選択し、そして当該映像に関連するデータが存在する場合は、アイコン２４５やテロップ２４６にて通知される。表示切替の指示入力により、映像Ｂに同期したホームページを表示することができる。
図７（ｃ）では、特定映像シーンに関連するデータが複数ある場合を想定した表示例である。現在映像２５１を表示していたとして、関連するデータのタイトルなどを関連データのリスト２５２として表示する。利用者がこのリストから関連データを選ぶと、該当するホームページ２５３を表示する。特定映像シーンに関連するデータが複数ある場合の表示方法としては、他にも図４の表示画面２０１または２０３において、アイコンやテロップの表示時間を各関連データ間で時分割したり、あるいは関連データのアイコンやテロップを全部画面上にならべるといった表示方法も考えられる。
また、図４〜７では、関連するデータの存在を利用者に知らせてから、利用者がデータを選択して表示するということを前提としてきた。図４の表示画面２０９や図７の各表示画面のように、映像と関連データを同一画面で見ることができるのであれば、映像のタイムスタンプが変われば、関連データの表示も自動的に変わるといった利用形態も考えられる。
次に、図９は本発明におけるユーザ入力手段の一例である操作リモコン２６０を表す。通常のテレビリモコンと同様に、電源ボタン２６１、チャンネル切替ボタン２６２、音量変更ボタン２６４、チャンネル直接切替ボタン群２６３などを備える。本発明では、操作リモコン２６０において、表示切替ボタン２６５と、ホームページ表示ボタン２６６を備えたことを特徴とする。表示切替ボタンは、図４の表示画面遷移において、表示切替による状態遷移を司る。つまり、利用者は表示切替ボタンを押すことによって、各表示画面間を遷移する。また、図４中で表示画面２０９から表示画面２１３への遷移、及び表示画面２０１または２０３から表示画面２１８への遷移は、ホームページ表示ボタン２６６による。
また、本実施例では、ホームページでリンク先を指定するなどの処理が必要になるため、カーソル移動用に上下左右にカーソル移動する十字キー２６７、２６８、２６９、２７０及び確定ボタン２７１を用意している。本発明では、十字キーでホームページ内のリンク先を指定するだけでなく、特定映像シーンに関連したデータが複数ある場合、例えば図７（ｃ）のごとくそれぞれをリスト表示した場合に、この中から利用者が見たい関連データを選択するのに十字キーを用いることに特徴がある。
次に、図１０では、地上波における映像とデータの同時伝送の仕組みを表している。地上波では通常映像を各映像フレーム２８０ごとに送っているが、各フレーム間には垂直方向の同期をとるＶＢＩ（Vertical Blanking Interval）と呼ばれる領域２８１があり、最近、この領域で空いている個所をデータ放送に用いることが許可されつつある。放送局側で領域２８１にデータ群２８２を埋め込み、利用者端末側でこれを取り出す仕組みである。
また、図１１では、ディジタル衛星放送におけるデータ放送の仕組みを表す。通常のアナログ衛星放送では、衛星の１トランスポンダを使って１チャンネルを送っていたが、ディジタル衛星放送では、映像圧縮技術やデータ多重化技術を用い、１トランスポンダ当たり４番組分の映像を送ることができる。同時に、いくらかの空き領域もできるので、この部分を使ってデータを利用者端末側に送ることになる。現在は、この領域を使って番組ガイドなどを送っている。
次に、図１２は本発明における関連データのデータモデルを表す。データ２９０は当該データを参照可能な利用者を規定した利用条件２９１を保持する。同時に、関連付けされた映像シーン２９２を特定できるようにタイムスタンプ２９３も持つ。また、関連データの存在を利用者に知らしめるため、映像に重畳して表示するためのアイコン２９４とテロップ２９５を保持する。同時に、データ内容２９６そのものまたはデータ実体へのアクセス方法も保持する。
以上、これをデータ構造として具体化すると、図１３に示すようになる。つまり、各データはＩｄ番号にて管理し、映像Ｉｄ、利用条件、タイムスタンプの開始時刻、終了時刻、継続時刻、アイコンを表す画像、テロップとして表示する文字列、データ内容をそれぞれ保持する。映像Ｉｄとは番組映像の識別子のことであり、例えばＧコードなどを用いる。また、映像Ｉｄとタイムスタンプ開始時刻及び終了時刻によって、データが関連付けられた映像シーンを特定できる。また、利用条件としてはあらかじめ決められた属性ごとに属性値が設定されている。例えば、１つの映像に対応した複数の関連デ−タの中から１つを選択するための優先度も属性の１つとして含まれる。あるいは、個別化されたデータならば、この領域には利用者識別子が格納されている。データ内容については、データがインターネット上のホームページやＣＤ−ＲＯＭ内にある場合もありえる。この場合は、データへのアクセス方法がこの領域に格納してある。
次に、本発明における映像・データ表示方法を実施する処理の流れを図１４〜１８のＰＡＤ図を用いて説明する。図１４〜１８に示す処理に対応するプログラムをフロッピィディスクなどの可搬記憶媒体に格納し、プログラムの起動時にメモリに読み込んで実行することもできる。
図１４は、映像・データ表示方法におけるメインプログラム３００の処理フローを表す。まず、ステップ３０１では、利用者が操作リモコン２６０で、電源ボタン２６１を押し、スイッチを入れたことを検出する。次に、ステップ３０２では、前回スイッチＯＦＦ時のチャンネルを表示する。ここでの処理は、映像表示部２６での処理に対応するが、詳細は後述する。次に、ステップ３０３では、ステップ３０４とステップ３０５の処理をスイッチＯＦＦとなるまで繰り返す。ステップ３０４では、利用者が選択した操作リモコン２６０のボタンを検出し、ステップ３０５では、各ボタンに応じた処理を実行する。表示切替ボタン２６５が選択された場合は、表示切替部における処理３０６を実行する。
次に、ホームページ表示ボタン２６６が選択された場合は、ホームページ表示処理３０７を実行する。このホームページ表示処理は、図４において、映像表示モードにおいて関連データの存在をアイコンやテロップが知らせてくれた場合にデータ表示モードに移行し、映像に同期したデータを表示する。同様に、合成表示モードにあって、縮小映像画面中にテロップやアイコンが流れ、関連データの存在が利用者に知らされた時、同じく合成表示モードのままで、映像に同期したホームページに表示を切り替える。次に、チャンネルボタン２６２またはチャンネル直接選択ボタン群２６３が選択された場合は、映像選択部１３における処理３０８を実行する。通常のテレビのチャンネル切り替えとは違い、映像に関連するデータの入力切替も行っているところに本発明の特徴がある。
次に、データ操作ボタンとは、ボタン２６７〜２７１の十字キーを意味し、これが選択された場合はデータ操作部における処理３０９が実行される。例えば、ホームページ上のリンク先の指定といった処理などがある。次に、電源ボタン２６１が選択されると、プログラム３００はスイッチＯＦＦを検出し、ループ３０３を抜ける。次いで、ステップ３１１において、スイッチＯＦＦ時のチャンネルを記録し、次にスイッチＯＮした際に番組を即座に表示できるようにしておく。そして、ステップ３１２にてプログラムを終了する。この他にも、例えば音量調整などの操作が考えられるが、本発明の主旨から外れるので割愛する。
次に、図１５は表示切替部２９における処理フロー３０６を表す。まず、ステップ３２１では、現時点の表示モードを検出する。本実施例では、図４に示すように、映像表示モードと、映像・データ合成表示モードと、データ表示モードの３種類の表示モードが存在する。ステップ３２２で、現在の表示モードがデータ表示モードにあった場合は、映像表示部２６における処理３０２を実行し、映像表示モードに移行する。映像表示モードにあった場合は、合成表示部２７における処理３２３を実行し、合成表示モードに移行する。合成表示モードにあった場合は、データ表示部２８における処理３２４を実行し、データ表示モードに移行する。最後に、ステップ３２５にて処理３０６を終了する。
ここで、本実施例におけるデータ表示部の処理３２４は、ホームページ表示の処理となる。また、合成表示部２７における処理３２３では、画面切り替えの際に映像の裏面で映像シーンに関連するホームページの表示準備を行う。ここで、関連データが存在しなかった場合は、最後に見たホームページまたはデフォルトホームページの表示を準備する。準備終了後、映像表示領域を順次縮小すると同時に、データ表示領域を順次利用者に見せることになる。ここで映像表示領域を順次縮小するなどアニメーションを用いている理由は、映像とデータの表示切り分けが瞬間的に起きたため利用者にわかりにくいと感じさせることを防ぐためである。
次に、図１６は映像表示部２６における処理フロー３０２を表す。ここでは、映像とデータの同時伝送の仕組みとして、図１０における方法を考える。映像の１フレームごとにデータが格納されているので、フレーム単位にデータを取り出す仕組みが必要となる。そこで、ステップ３３０では、一定周期ごと（ここでは１フレーム単位ごと）にステップ３３１〜３４４を繰り返す。
まず、ステップ３３１では、映像入力部において１フレーム映像を入力する。次に、ステップ３３２では、フレーム間に埋め込まれたデータを抽出する。ここで、データが埋め込まれていない場合も考えられるので、ステップ３３３ではデータがあるかどうかを判別し、データありの場合にステップ３３４〜３３８を実行する。ステップ３３４では、データ入力部１５の処理に相当し、データを抽出してデコードする。次に、ステップ３３５は、データ選択部１６での処理に相当し、登録済み利用条件とデータ中の利用条件とを照らし合わせる。次いで、ステップ３３６にて、利用条件が合致した場合に、ステップ３３７にてデータを一時記憶領域１９に保存し、合致しなかった場合に、ステップ３３８にてデータを保存しないで捨てる。また、ステップ３３５では、画面サイズなどの利用環境の条件に基づき、アイコンサイズや文字列のフォントサイズなどデータの表示条件も規定する。ここで、１フレーム単位に受け取るデータの量はそれほど多くないので、データを分割して送るといった運用も考えられる。この場合は、データ保存処理３３７の後で、セグメントごとに分けられたデータを合成して同一データにする処理が必要となる。
次に、ステップ３３９は、同期制御部２１における処理に相当し、現在表示している番組で今の時間帯にあうデータを検索する。図１３のデータ構造を見ると、映像のＩｄもタイムスタンプもあらかじめ規定してあるので、これらと現在表示中の映像Ｉｄ及び現在時刻を比較することになる。ステップ３４０では、合致するデータがある場合とない場合に分けて、それぞれステップ３４１〜３４２とステップ３４３を実行する。まず、ステップ３４１では、同時に複数のデータが選ばれる可能性があるので、このような競合を解消する処理が必要となる。競合解消後は、ステップ３４２にてアイコンやテロップを映像上にオーバレイ表示する。各処理の詳細については後述する。
この後、表示したアイコンとテロップまたは表示優先度が低く表示できなかったアイコンとテロップをあわせて記録しておく。利用者からの要求に応じてこれをホームページに変換し、いつでもアクセス可能な状態に準備しておく。また、ステップ３４３では、該当するデータがなかったので、映像をそのまま表示装置にスルー（そのまま出力）する。ステップ３４４では、アイコンやテロップを合成した映像あるいはそのままの映像を１フレーム単位で表示する。なお、ステップ３３９〜３４３の処理は、ある一定周期ごとに繰り返しさえすればよく、フレームごとに処理を実行する必要は必ずしもないが、説明の都合上、１フレーム単位のループ３３０の中に埋めこんだ。データ表示モードに切り替えられたり、スイッチＯＦＦとなった場合にステップ３４５にて処理を終了する。
次に、図１７は競合解消処理３４１の処理フローを表す。ステップ３５０では、同一時間帯に関連付けられたデータが他にあるかどうかを調べる。ここでは、同一時間帯に複数のデータが割り当てられている場合を競合と呼んでいる。図７（ｃ）のごとく、関連データの一覧をリスト形式で表示できる場合は、そのまま表示しても構わないが、図４のごとく、一つ一つの関連データの内容を示すアイコンやテロップを表示する場合は、表示する順番や表示時間などを決める必要がある。そこで、ステップ３５１で競合があるかどうかを検出し、なかったらそのまま処理を終了するが（ステップ３５２）、競合があった場合は、データの表示優先度を決めて、優先度の高い順にアイコンやテロップを表示するようスケジューリングし直す。最後にステップ３５４にて処理３４１を終了する。
次に、図１８はオーバレイ表示処理３４２の処理フローを表す。ステップ３６０では、利用者によるアイコンとテロップの表示モードと、情報提供者によるアイコンとテロップの強制表示モードを検出する。アイコンとテロップの表示モードがＯＦＦとなっていても強制表示モードがＯＮであるならば、映像上にデータとテロップを強制的に重ねあわせて表示する。このため、オーバレイ処理を実行させないためには、アイコンとテロップの表示モードをＯＦＦにし、かつ情報提供者による強制表示モードもＯＦＦである必要がある。ステップ３６２では、先に決めた表示条件に基づき、アイコンやテロップを利用者ごとに個別化する。次に、ステップ３６３と３６４では、テロップありの場合に、テロップを映像に重畳する処理３６４を実行する。同様に、ステップ３６５にてアイコンありの場合に、アイコンを映像に重畳する処理３６６を実行する。文字列や画像を映像に重畳する処理の方法については、通常の映像にデータを重ねあわせて表示する処理に準ずる。
以上、放送メディアを中心に本発明の１実施例を説明してきたが、本発明はパッケージメディアや通信メディアを用いた映像・データ表示方法としても用いることができる。
本発明によると、利用者ごとに種別化または個別化されたデータが、表示中の映像シーンに関連して存在することを、関連データの内容を示す画像や文字列で利用者に知らせることができる。同時に、利用者の要求に応じて関連データを映像と同期して表示できる。このように、映像から関連データに簡単にアクセスできるようになると、情報提供者側にとっては、放送映像で視聴者を引き込んで、即座にインターネットなどの双方向メディアに移行させるといったメリットがある。同時に、視聴者にとっては、映像に関連する詳細情報をさらに簡単に知ることができるようになる。同時に、個々の利用者に適した情報をダイレクトに送ることができるので、効率的な情報提供及び参照が可能になる。
また、本発明によると、関連データの存在を示す画像や文字列の表示条件や表示順序を利用環境条件に基づいて決めるので、より見やすく関連データの存在を利用者に知らせることができる。
また、本発明では、映像とデータを同時に表示するモードを設けるので、映像とデータ間を自由に遷移して情報参照できる。
また、利用者が一覧表示の指示を入力すると、その時点までに表示された画像や文字列の一覧を表示し、利用者がいずれかを選択すると、関連データを表示する。よって、映像だけ連続して見て、後から関連データをゆっくり参照するといった利用が可能になる。
また、本発明では、一覧表示する関連データの数に制限を設け、データ数が制限を超えた場合は表示優先度によって選別を行う。このため、記憶領域を少なく保つことができ、結果的に端末のコストが削減するという効果がある。
さらに、本発明では、関連データの内容を示す画像や文字列を強制表示するモードを設けるので、ターゲットとなる利用者に情報提供者側の意向をきちんと伝えることができる。
【０００６】
【発明の効果】
本発明によると、映像と当該映像の特定シーンに関連する少なくとも一つの関連データが、表示中の映像シーンに関連して存在することを、関連データの内容を示す画像や文字列で利用者に知らせることができる。同時に、利用者の要求に応じて関連データを映像と同期して表示できる。このように、映像から関連データに簡単にアクセスできるようになると、情報提供者側にとっては、放送映像で視聴者を引き込んで、即座にインターネットなどの双方向メディアに移行させるといったメリットがある。同時に、視聴者にとっては、映像に関連する詳細情報をさらに簡単に知ることができるようになる。同時に、個々の利用者に適した情報をダイレクトに送ることができるので、効率的な情報提供及び参照が可能になる。
また、利用者が一覧表示の指示を入力すると、その時点までに表示された画像や文字列の一覧を表示し、利用者がいずれかを選択すると、関連データを表示する。よって、映像だけ連続して見て、後から関連データをゆっくり参照するといった利用が可能になる。
【図面の簡単な説明】
【図１】  本発明の一実施例に係る映像・データ表示方法及び装置の機能ブロックを表す説明図。
【図２】  本発明の一実施例に係るインタラクティブ情報サービスのシステム構成を表す説明図。
【図３】  本発明の一実施例に係る映像・データ表示方法及び装置のハードウェア構成を表す説明図。
【図４】  本発明の一実施例に係る映像・データ表示方法及び装置の表示画面を表す説明図。
【図５】  本発明の一実施例に係る映像・データ表示方法及び装置の別の表示画面を表す説明図。
【図６】  本発明の一実施例に係る映像・データ表示方法及び装置の別の表示画面を表す説明図。
【図７】  本発明の一実施例に係る映像・データ表示方法及び装置の別の表示画面を表す説明図。
【図８】  従来の映像・データ表示方法及び装置における表示画面を表す説明図。
【図９】  本発明の一実施例に係る映像・データ表示方法及び装置の操作リモコンの外観を表す説明図。
【図１０】  映像とデータの同時伝送の仕組みを概念的に表す説明図。
【図１１】  映像とデータの別の同時伝送の仕組みを概念的に表す説明図。
【図１２】  本発明の一実施例に係る映像・データ表示方法及び装置のデータモデルを表す説明図。
【図１３】  本発明の一実施例に係る映像・データ表示方法及び装置のデータ構造を表す説明図。
【図１４】  本発明の一実施例に係る映像・データ表示方法及び装置の全体処理を表す説明図。
【図１５】  表示切替部の処理の流れを表す説明図。
【図１６】  映像表示部の処理の流れを表す説明図。
【図１７】  競合解消処理の流れを表す説明図。
【図１８】  オーバレイ処理の流れを表す説明図。
【符号の説明】
１ ・・・利用者端末、２ ・・・本体装置、３ ・・・表示装置、４ ・・・ユーザ入力手段、５ ・・・映像群、６ ・・・データ群、１０ ・・・映像・データ選択機能ブロック、１１ ・・・映像・データ表示機能ブロック、１２ ・・・映像・データ外部アクセス機能ブロック、１３ ・・・映像選択部、１４ ・・・映像入力部、１５ ・・・データ入力部、１６ ・・・データ選択部、１７ ・・・登録済み利用条件、１８ ・・・表示条件、１９ ・・・データ一時記憶領域、２０ ・・・データ編集部、２１ ・・・同期制御部、２２ ・・・映像・データ合成部、２３ ・・・映像オーバレイ処理、２４ ・・・データオーバレイ処理、２５ ・・・スルー処理、２６ ・・・映像表示部、２７ ・・・合成表示部、２８ ・・・データ表示部、２９ ・・・表示切替部、３２ ・・・データ操作部、３３ ・・・データ探索部、３４ ・・・インターネットアクセス部、３５ ・・・ＣＤ−ＲＯＭアクセス部、１０１ ・・・情報伝達メディア、１０２ ・・・情報提供者側サブシステム、１０３ ・・・衛星放送（放送メディア）、１０４ ・・・インターネット（ネットワークメディア）、１０５ ・・・ＣＤ−ＲＯＭ（パッケージメディア）、１０６ ・・・放送局、１０７ ・・・インターネットサーバ、１０８ ・・・パッケージ作成サブシステム、１０９ ・・・メディア間リンク定義モジュール、１１０ ・・・コンテンツ、１１１ ・・・中央制御装置、１１２ ・・・バス、１１３ ・・・記憶部、１１４ ・・・表示制御部、１１５ ・・・入力制御部、１１６ ・・・放送受信部、１１７ ・・・ディスク制御部、１１８ ・・・通信制御部、１１９ ・・・アンテナ、２００ ・・・表示画面例、２０１ ・・・表示画面例、２０２ ・・・アイコン、２０３ ・・・表示画面例、２０４ ・・・テロップ、２０５ ・・・表示画面例、２０６ ・・・ホームページ、２０７ ・・・縮小映像、２０８ ・・・ホームページ用メニュー、２０９ ・・・表示画面例、２１０ ・・・縮小映像、２１１ ・・・テロップ、２１２ ・・・アイコン、２１３ ・・・表示画面例、２１４ ・・・ホームページ、２１５ ・・・表示画面例、２１６ ・・・ホームページ、２１７ ・・・表示画面例、２１８ ・・・表示画面例、２１９ ・・・ホームページ、 ２３０ ・・・表示画面例、２３１ ・・・映像表示領域、２３２ ・・・ホームページ表示領域、２３３ ・・・テロップ、２３４ ・・・アイコン、２３５ ・・・ホームページ、２４０ ・・・表示画面例、２４１ ・・・ホームページ、２４２ ・・・映像Ａ、２４３ ・・・映像Ｂ、２４４ ・・・映像Ｃ、２４５ ・・・アイコン、２４６ ・・・テロップ、２５０ ・・・映像表示領域、２５１ ・・・現在表示中の映像、２５２ ・・・関連データのリスト表示、２５３ ・・・ホームページ表示、２６０ ・・・操作リモコン、２６１ ・・・電源ボタン、２６２ ・・・チャンネルボタン、２６３ ・・・チャンネル直接選択ボタン、２６４ ・・・音量ボタン、２６５ ・・・表示切替ボタン、２６６ ・・・ホームページ表示ボタン、２６７〜２７１ ・・・カーソル移動ボタン、２８０ ・・・フレーム、２８１ ・・・フレーム間空き領域（ＶＢＩ）、２８２ ・・・データ群、２９０ ・・・関連データ、２９１ ・・・利用条件、２９２ ・���・映像、２９３ ・・・タイムスタンプ、２９４ ・・・アイコン、２９５ ・・・テロップ、２９６ ・・・データ内容、３００ ・・・映像・データ表示プログラム、３０２ ・・・映像表示部２６における処理、３０６ ・・・表示切替部２９における処理、３０７ ・・・ホームページ表示処理、３０８ ・・・映像選択部１３における処理、３０９ ・・・データ操作部３２における処理、３２３ ・・・合成表示部２７における処理、３２４ ・・・データ表示部２８における処理、３３１ ・・・映像入力部１４における処理、３３４ ・・・データ入力部１５における処理、３３５ ・・・データ選択部１６における処理、３３９ ・・・同期制御部２１における処理、３４１ ・・・競合解消処理、３４２ ・・・オーバレイ処理
【図１】
0003814903.tif 000002
【図２】
0003814903.tif 000003
【図３】
0003814903.tif 000004
【図４】
0003814903.tif 000005
【図５】
0003814903.tif 000006
【図６】
0003814903.tif 000007
【図７】
0003814903.tif 000008
【図８】
0003814903.tif 000009
【図９】
0003814903.tif 000010
【図１０】
0003814903.tif 000011
【図１１】
0003814903.tif 000012
【図１２】
0003814903.tif 000013
【図１３】
0003814903.tif 000014
【図１４】
0003814903.tif 000015
【図１５】
0003814903.tif 000016
【図１６】
0003814903.tif 000017
【図１７】
0003814903.tif 000018
【図１８】
0003814903.tif 000019