(57)【要約】  音声及び／又は映像データ等のマルチメディア情報としてユーザに情報提供している最中に、各ユーザがその嗜好、個性などに適した商品、サービスなどを簡単、適切に、検索、選択することを可能ならしめる情報提供システムを提供する。  音声及び／又は映像データに対して当該音声及び／又は映像データとは異なるレイヤーでポップタグ情報を当該音声及び／又は映像データに記述するポップタグ情報記述手段を備えている、当該ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報が、前記音声及び／又は映像データへの前記ポップタグ情報の記述が開始される時刻（ｔ１）及び記述が終了する時刻（ｔ２）に関する時間軸情報と、前記音声及び／又は映像データに前記ポップタグ情報が記述される位置に関するｘ軸、ｙ軸に関する位置情報と文字列データ及び／又はバイナリデータとを含んでいる。
2011021632.tif 000002
【特許請求の範囲】
【請求項１】
音声及び／又は映像データに対して当該音声及び／又は映像データとは異なるレイヤーでポップタグ情報を当該音声及び／又は映像データに記述するサーバ装置側ポップタグ情報記述手段と、
前記ポップタグ情報が記述されたポップタグ情報付音声及び／又は映像データが保存されるサーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段と、
ネットワークを介して情報の交信を行うサーバ装置側情報入出力手段とを備えていて、
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報が、
前記音声及び／又は映像データへの前記ポップタグ情報の記述が開始される時刻（ｔ１）及び記述が終了する時刻（ｔ２）に関する時間軸情報と、
前記音声及び／又は映像データに前記ポップタグ情報が記述される位置に関するｘ軸、ｙ軸に関する位置情報と
を含んでいる
サーバ装置と、
前記サーバ装置とネットワークを介して接続される端末装置であって、
ネットワークを介して情報の交信を行う端末装置側情報入出力手段と、
前記ポップタグ情報が記述されたポップタグ情報付音声及び／又は映像データが保存される端末装置側ポップタグ情報付音声及び／又は映像データ保存手段と、
前記ポップタグ情報付音声及び／又は映像データを再生するポップタグ情報付音声及び／又は映像データ再生手段と、
前記ポップタグ情報付音声及び／又は映像データが当該端末装置で再生されている際に、前記ポップタグ情報を当該端末装置において出力させるポップタグ情報出力手段とを
備えている端末装置と
からなる情報提供システム。
【請求項２】
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
文字列データ及び／又はバイナリデータが含まれる
ことを特徴とする請求項１記載の情報提供システム。
【請求項３】
前記端末装置はポップタグ情報リンク手段を、更に、備えており、
当該ポップタグ情報リンク手段により、前記ポップタグ情報出力手段によって前記端末装置において出力された前記ポップタグ情報を利用して、前記ポップタグ情報に含まれているデータを再生可能であることを特徴とする請求項２記載の情報提供システム。
【請求項４】
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される文字列データにはハイパーリンクが含まれていると共に、
前記端末装置が備えている前記ポップタグ情報リンク手段により、前記ポップタグ情報出力手段によって前記端末装置において出力された前記ポップタグ情報に含まれている前記ハイパーリンクを利用してネットワークへのアクセスが可能であることを特徴とする請求項３記載の情報提供システム。
【請求項５】
前記サーバ装置はポップタグ情報検索手段と、
特定時刻情報出力手段とを、更に、備えており、
前記ポップタグ情報検索手段は、
前記サーバ装置側情報入出力手段で取得した問い合わせ情報に基づき前記サーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段に保存されているポップタグ情報付音声及び／又は映像データを検索し、
前記問い合わせ情報で指定されるポップタグ情報が記述されている前記音声及び／又は映像データを抽出すると共に、
前記問い合わせ情報で指定されるポップタグ情報が当該抽出された前記音声及び／又は映像データに対して記述開始されている時刻（ｔ１）を抽出する処理を行い、
前記特定時刻情報出力手段は、前記抽出された前記音声及び／又は映像データを、前記サーバ装置側情報入出力手段を介して、前記抽出された時刻（ｔ１）から前記ネットワークに送信する処理を行う
ことを特徴とする請求項１〜４のいずれか一項記載の情報提供システム。
【請求項６】
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
前記ｘ軸、ｙ軸に関する位置情報で指標されるｘ−ｙ座標を中心とする図形範囲情報が含まれる
ことを特徴とする請求項１乃至５のいずれか一項記載の情報提供システム。
【請求項７】
前記端末装置は、更に、
音声及び／又は映像データに対して当該音声及び／又は映像データとは異なるレイヤーでポップタグ情報を当該音声及び／又は映像データに記述する端末装置側ポップタグ情報記述手段を備えていて、
当該端末装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報が、
前記音声及び／又は映像データへの前記ポップタグ情報の記述が開始される時刻（ｔ１）及び記述が終了する時刻（ｔ２）に関する時間軸情報と、
前記音声及び／又は映像データに前記ポップタグ情報が記述される位置に関するｘ軸、ｙ軸に関する位置情報とを
含んでいることを特徴とする請求項１乃至６のいずれか一項記載の情報提供システム。
【請求項８】
前記端末装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
文字列データ及び／又はバイナリデータが含まれる
ことを特徴とする請求項７記載の情報提供システム。
【請求項９】
前記端末装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
前記ｘ軸、ｙ軸に関する位置情報で指標されるｘ−ｙ座標を中心とする図形範囲情報が含まれる
ことを特徴とする請求項７又は８記載の情報提供システム。
【請求項１０】
前記ポップタグ情報がＭＰＥＧ−７規格によるものであることを特徴とする請求項１乃至９のいずれか一項記載の情報提供システム。
【請求項１１】
前記サーバ装置は、前記ポップタグ情報付音声及び／又は映像データの中の一部のデータを暗号化するポップタグ情報暗号化手段を、更に、備えていることを特徴とする請求項１乃至１０のいずれか一項記載の情報提供システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、インターネット等のネットワークを介して情報を提供するシステムに関し、特に、言語化して紹介することが難しい商品、サービス、情報の提供に適している情報提供システムに関する。
【背景技術】
【０００２】
従来からインターネット等のネットワークを介して情報を提供するシステムに関して種々の提案がされている（例えば、特許文献１）。【０００３】
近年のインターネットの普及に伴い、インターネット等のネットワークで取り扱われる情報は、テキスト情報だけでなく、音楽等の音声データ、静止画・動画を含めた映像データが複合化された、音声及び／又は映像データとしてのマルチメディア情報に移行している。【０００４】
このようなマルチメディア情報である音声及び／又は映像データから必要な情報を見つけることは、テキストデータのみが提供されている場合に比較すると困難である。【０００５】
そこで、マルチメディア情報である音声及び／又は映像データを効率よく検索する手段として、対象とする音声及び／又は映像データから検索対象となる特徴をあらかじめ抽出しておき、この特徴データであるメタデータを直接の検索対象とする手法が採用されている。【０００６】
このメタデータを表記する方法に関しては、ＭＰＥＧ−7という国際標準規格が定められている。ＭＰＥＧ−7は、メタデータが検索対象となる音声及び／又は映像データと別の場所にファイル形式で保存される形態も、あるいは、メタデータが検索対象となる音声及び／又は映像データと共に検索を行う利用者に伝送される形態も採りえるようにできる。なおかつ、ＭＰＥＧ−7は、検索対象となるマルチメディア情報である音声及び／又は映像データがデジタル情報であるか、アナログ情報であるかを問わずに適用できるという利点を有している。【０００７】
このようなメタデータの作成方法に関しては、例えば、メタデータの作成者が、時間情報を持つコンテンツを視聴し、意味内容を判断しながらリアルタイムに観点及び観点スコアを入力することで、コンテンツの時間情報が付与された観点及び観点スコアのメタデータを自動的に作成する方法、装置が提案されている（特許文献２）。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特開２００３−７８８３４号公報
【特許文献２】特開２００２−３１８８０７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００９】
今日では、インターネット等のネットワークや、地上波デジタル放送への移行に伴うデジタルテレビ放送などを介して、市場に無数に存在する種々の商品、サービス等に関する種々の情報が提供されている。この一方で、嗜好も、個性も、それぞれ、異なる無数のユーザが前記の無数の情報の中から自分が希望する商品、サービス等に関する情報の取得を希望している。【００１０】
このような中で、各ユーザがその嗜好、個性などに適した商品、サービスなどをより簡単、適切に、検索、選択することを可能ならしめる情報提供システムが存在すれば便利である。【００１１】
特に、服飾関係の商品などに代表されるように、言語化して紹介することが難しく、音声及び／又は映像データ等のマルチメディア情報としてユーザに提供することによって視覚、聴覚の方面から、また、感覚的に商品、サービスの紹介を行う方が適切な商品、サービスなどに関して、前記のようなことが要請されている。すなわち、このような商品、サービスなどに関して、音声及び／又は映像データ等のマルチメディア情報としてユーザに情報提供している最中に、各ユーザがその嗜好、個性などに適した商品、サービスなどを簡単、適切に、検索、選択することを可能ならしめる情報提供システムがあれば便利である。【００１２】
そこで、この発明は、前述した状況の下で、各ユーザがその嗜好、個性などに適した商品、サービスなどをより簡単、適切に、検索、選択することを可能ならしめる情報提供システムを提供することを目的にしている。【００１３】
特に、音声及び／又は映像データ等のマルチメディア情報としてユーザに情報提供が行われている最中に、各ユーザがその嗜好、個性などに適した商品、サービスなどを簡単、適切に、検索、選択することを可能ならしめる情報提供システムを提供することを目的にしている。【００１４】
なお、本明細書、あるいは、図面中において、マルチメディア情報である「音声及び／又は映像データ」を、単に、「動画・音声データ」、「動画データ」、あるいは、「音声データ」と表すことがある。
【課題を解決するための手段】
【００１５】
この発明が提案する情報提供システムは以下の通りのものである。【００１６】
請求項１記載の発明は、
音声及び／又は映像データに対して当該音声及び／又は映像データとは異なるレイヤーでポップタグ情報を当該音声及び／又は映像データに記述するサーバ装置側ポップタグ情報記述手段と、
前記ポップタグ情報が記述されたポップタグ情報付音声及び／又は映像データが保存されるサーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段と、
ネットワークを介して情報の交信を行うサーバ装置側情報入出力手段とを備えていて、
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報が、
前記音声及び／又は映像データへの前記ポップタグ情報の記述が開始される時刻（ｔ１）及び記述が終了する時刻（ｔ２）に関する時間軸情報と、
前記音声及び／又は映像データに前記ポップタグ情報が記述される位置に関するｘ軸、ｙ軸に関する位置情報と
を含んでいる
サーバ装置と、
前記サーバ装置とネットワークを介して接続される端末装置であって、
ネットワークを介して情報の交信を行う端末装置側情報入出力手段と、
前記ポップタグ情報が記述されたポップタグ情報付音声及び／又は映像データが保存される端末装置側ポップタグ情報付音声及び／又は映像データ保存手段と、
前記ポップタグ情報付音声及び／又は映像データを再生するポップタグ情報付音声及び／又は映像データ再生手段と、
前記ポップタグ情報付音声及び／又は映像データが当該端末装置で再生されている際に、前記ポップタグ情報を当該端末装置において出力させるポップタグ情報出力手段とを
備えている端末装置と
からなる情報提供システムである。【００１７】
請求項２記載の発明は、
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
文字列データ及び／又はバイナリデータが含まれる
ことを特徴とする請求項１記載の情報提供システムである。【００１８】
請求項３記載の発明は、
前記端末装置はポップタグ情報リンク手段を、更に、備えており、
当該ポップタグ情報リンク手段により、前記ポップタグ情報出力手段によって前記端末装置において出力された前記ポップタグ情報を利用して、前記ポップタグ情報に含まれているデータを再生可能であることを特徴とする請求項２記載の情報提供システムである。【００１９】
請求項４記載の発明は、
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される文字列データにはハイパーリンクが含まれていると共に、
前記端末装置が備えている前記ポップタグ情報リンク手段により、前記ポップタグ情報出力手段によって前記端末装置において出力された前記ポップタグ情報に含まれている前記ハイパーリンクを利用してネットワークへのアクセスが可能であることを特徴とする請求項３記載の情報提供システムである。【００２０】
請求項５記載の発明は、
前記サーバ装置はポップタグ情報検索手段と、
特定時刻情報出力手段とを、更に、備えており、
前記ポップタグ情報検索手段は、
前記サーバ装置側情報入出力手段で取得した問い合わせ情報に基づき前記サーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段に保存されているポップタグ情報付音声及び／又は映像データを検索し、
前記問い合わせ情報で指定されるポップタグ情報が記述されている前記音声及び／又は映像データを抽出すると共に、
前記問い合わせ情報で指定されるポップタグ情報が当該抽出された前記音声及び／又は映像データに対して記述開始されている時刻（ｔ１）を抽出する処理を行い、
前記特定時刻情報出力手段は、前記抽出された前記音声及び／又は映像データを、前記サーバ装置側情報入出力手段を介して、前記抽出された時刻（ｔ１）から前記ネットワークに送信する処理を行う
ことを特徴とする請求項１〜４のいずれか一項記載の情報提供システムである。【００２１】
請求項６記載の発明は、
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
前記ｘ軸、ｙ軸に関する位置情報で指標されるｘ−ｙ座標を中心とする図形範囲情報が含まれる
ことを特徴とする請求項１乃至５のいずれか一項記載の情報提供システムである。【００２２】
請求項７記載の発明は、
前記端末装置は、更に、
音声及び／又は映像データに対して当該音声及び／又は映像データとは異なるレイヤーでポップタグ情報を当該音声及び／又は映像データに記述する端末装置側ポップタグ情報記述手段を備えていて、
当該端末装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報が、
前記音声及び／又は映像データへの前記ポップタグ情報の記述が開始される時刻（ｔ１）及び記述が終了する時刻（ｔ２）に関する時間軸情報と、
前記音声及び／又は映像データに前記ポップタグ情報が記述される位置に関するｘ軸、ｙ軸に関する位置情報とを
含んでいることを特徴とする請求項１乃至６のいずれか一項記載の情報提供システムである。【００２３】
請求項８記載の発明は、
前記端末装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
文字列データ及び／又はバイナリデータが含まれる
ことを特徴とする請求項７記載の情報提供システムである。【００２４】
請求項９記載の発明は、
前記端末装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
前記ｘ軸、ｙ軸に関する位置情報で指標されるｘ−ｙ座標を中心とする図形範囲情報が含まれる
ことを特徴とする請求項７又は８記載の情報提供システムである。【００２５】
請求項１０記載の発明は、
前記ポップタグ情報がＭＰＥＧ−７規格によるものであることを特徴とする請求項１乃至９のいずれか一項記載の情報提供システムである。【００２６】
請求項１１記載の発明は、
前記サーバ装置は、前記ポップタグ情報付音声及び／又は映像データの中の一部のデータを暗号化するポップタグ情報暗号化手段を、更に、備えていることを特徴とする請求項１乃至１０のいずれか一項記載の情報提供システムである。
【発明の効果】
【００２７】
この発明によれば、インターネット等のネットワークや、地上波デジタル放送への移行に伴うデジタルテレビ放送などを介して、市場に無数に存在する種々の商品、サービス等に関する種々の情報がユーザに提供され、その一方で、嗜好も、個性もそれぞれ異なる無数のユーザが前記の無数の情報の中から自分が希望する商品、サービス等に関する情報の取得を行っている中で、各ユーザがその嗜好、個性などに適した商品、サービスなどをより簡単、適切に、検索、選択することを可能ならしめる情報提供システムを提供することができる。【００２８】
また、音声及び／又は映像データ等のマルチメディア情報としてユーザに情報提供が行われている最中に、各ユーザがその嗜好、個性などに適した商品、サービスなどを簡単、適切に、検索、選択することを可能ならしめる情報提供システムを提供することができる。
【図面の簡単な説明】
【００２９】
【図１】本発明の情報提供システムの概略構成の一例を説明する図。
【図２】本発明の情報提供システムにおいて音声及び／又は映像データへのポップタグ情報の記述の一例を説明する概念図。
【図３】本発明の情報提供システムにおいて音声及び／又は映像データからポップタグ情報を手がかりにユーザが取得を希望する情報を入手する工程の一例を説明する概略構成図。
【図４】本発明の情報提供システムにおいてユーザが希望した特定の時刻から音声及び／又は映像データが再生される工程の一例を説明する概略構成図。
【図５】（ａ）、（ｂ）は、本発明の情報提供システムにおいてユーザが使用している端末装置に表示される画像情報の一例を表わす図。
【図６】本発明の情報提供システムにおいて、音声及び／又は映像データにポップタグ情報を記述する工程の一例を説明する概略構成図。
【図７】ポップタグ情報暗号化手段によるポップタグ情報付音声及び／又は映像データの中の一部のデータを暗号化する工程の一例を説明する概略構成図。
【発明を実施するための形態】
【００３０】
以下、添付図面を参照して本発明の好ましい実施形態を説明する。
【００３１】
本発明の情報提供システムは、インターネット等の有線又は無線のネットワーク１を介して相互に交信可能なサーバ装置２と、端末装置３とからで構成される。
【００３２】
コンピュータからなるサーバ装置１は、本発明の情報提供システムの提供を行う者がインターネット等のネットワーク１に接続可能に設置しているものである。
【００３３】
パーソナルコンピュータやＰＤＡ等からなる端末装置３は、一般に、情報提供者側から提供される商品やサービスなどに関する情報を取得、検索、選択するユーザが使用するものである。図示の実施形態では一台しか図示していないが、当然、本発明の情報提供システムを利用する無数のユーザの数に対応して配備、利用されるものである。
【００３４】
コンピュータからなるサーバ装置１は、サーバ装置側ポップタグ情報記述手段２１、ポップタグ情報検索手段２２、特定時刻情報出力手段２３、サーバ装置側情報入出力手段２４、ポップタグ情報暗号化手段２５、サーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段２０を備えている。
【００３５】
サーバ装置側情報入出力手段２４は、インターネット等のネットワーク１に接続し、情報交信を行うインターフェイス部からなり、ポップタグ情報付音声及び／又は映像データをネットワーク１に送信する処理や、ネットワーク１を介して端末装置３側から情報を取得する処理を行う。
【００３６】
サーバ装置側ポップタグ情報記述手段２１、ポップタグ情報検索手段２２、特定時刻情報出力手段２３、ポップタグ情報暗号化手段２５は、ＣＰＵなどがサーバ装置２の記憶手段に記録されている所定のコンピュータプログラムを実行することによって実現されるものである。
【００３７】
サーバ装置側ポップタグ情報記述手段２１は、メタデータを表記する国際標準規格であるＭＰＥＧ−7を利用して、音声及び／又は映像データに対して当該音声及び／又は映像データとは異なるレイヤーでポップタグ情報を当該音声及び／又は映像データに記述する処理動作を行なう。
【００３８】
ここで、前記のポップタグ情報Ｉ１には、図２に示すように、少なくとも、音声及び／又は映像データへのポップタグ情報の記述が開始される時刻（ｔ１）及び記述が終了する時刻（ｔ２）に関する時間軸情報と、音声及び／又は映像データに前記ポップタグ情報が記述される位置に関するｘ軸、ｙ軸に関する位置情報とが含まれている。
【００３９】
また、図２に示すように、ポップタグ情報Ｉ１に、更に、テキスト、ハイパーリンク、データベースのキー等の文字列データ及び／又はバイナリデータＢ１や、前記ｘ軸、ｙ軸に関する位置情報で指標されるｘ−ｙ座標を中心とする図形範囲情報である範囲情報Ｒ１を含めることができる。
【００４０】
サーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段２０は、例えば、外部記憶手段、ハードディスクなどからなるものであり、ポップタグ情報が記述されたポップタグ情報付音声及び／又は映像データを保存している。以下、ポップタグ情報が記述されたポップタグ情報付音声及び／又は映像データ、すなわち、ポップタグ情報付音声及び／又は映像データを「ポップタグ情報ファイル」と表すことがある。
【００４１】
ポップタグ情報検索手段２２は、サーバ装置側情報入出力手段２４で取得した問い合わせ情報に基づいて所定の処理動作を行なう。まず、サーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段２０に保存されているポップタグ情報付音声及び／又は映像データを検索する。そして、前記の問い合わせ情報で指定されるポップタグ情報が記述されている音声及び／又は映像データを抽出する。その上で、前記の問い合わせ情報で指定されるポップタグ情報が当該抽出された前記音声及び／又は映像データに対して記述開始されている時刻（ｔ１）を抽出する処理を行う。
【００４２】
特定時刻情報出力手段２３は、ポップタグ情報検索手段２２によって抽出された前記音声及び／又は映像データを、サーバ装置側情報入出力手段２４を介して、前記抽出された時刻（ｔ１）からネットワーク１に送信する処理を行う。
【００４３】
ポップタグ情報暗号化手段２５は、前記のポップタグ情報付音声及び／又は映像データの中の一部のデータを暗号化する処理を行う。例えば、サーバ装置側ポップタグ情報記述手段２１によって、前述したように、音声及び／又は映像データにポップタグ情報が記述される際に、ポップタグ情報付音声及び／又は映像データの中の一部のデータを暗号化する処理を行う。
【００４４】
このポップタグ情報暗号化手段２５が行う暗号化処理はＷ３Ｃ  ＸＭＬ  Ｅｎｃｒｙｐｔｉｏｎ  ＷＧで最終的な勧告としてまとめられているＸＭＬ暗号の技術を利用するものである。ポップタグ情報付音声及び／又は映像データの中の任意のデータ（非ＸＭＬも含む）の暗号化ばかりでなく、任意のＸＭＬの要素やコンテントの暗号化を行うことができるものである。すなわち、ポップタグ情報付音声及び／又は映像データを作成しようとする者が、秘密にしたいと考える部分のみを暗号化し、その他の部分は、可読性を維持できるようにできるものである。
【００４５】
パーソナルコンピュータやＰＤＡ等からなる端末装置３は、液晶表示手段などからなる画像表示手段３１、スピーカなどからなる音声情報出力手段３２、ポップタグ情報付音声及び／又は映像データ再生手段３３、ポップタグ情報出力手段３４、ポップタグ情報リンク手段３５、端末装置側ポップタグ情報記述手段３６、端末装置側情報入出力手段３７、端末装置側ポップタグ情報付音声及び／又は映像データ保存手段３０を備えている。
【００４６】
端末装置側情報入出力手段３７は、インターネット等のネットワーク１に接続し、情報交信を行うインターフェイス部からなり、ポップタグ情報付音声及び／又は映像データをネットワークに送信する処理や、ネットワークを介してサーバ装置２などから情報を取得する処理を行う。
【００４７】
ポップタグ情報付音声及び／又は映像データ再生手段３３、ポップタグ情報出力手段３４、ポップタグ情報リンク手段３５、端末装置側ポップタグ情報記述手段３６は、ＣＰＵなどが端末装置３の記憶手段に記録されている所定のコンピュータプログラムを実行することによって実現されるものである。
【００４８】
端末装置側ポップタグ情報記述手段３６は、サーバ装置側ポップタグ情報記述手段２１と同じように、メタデータを表記する国際標準規格であるＭＰＥＧ−7を利用して、音声及び／又は映像データに対して当該音声及び／又は映像データとは異なるレイヤーでポップタグ情報を当該音声及び／又は映像データに記述する処理動作を行なう。
【００４９】
端末装置側ポップタグ情報記述手段３６によって記述される前記のポップタグ情報Ｉ１にも、前述したサーバ装置側ポップタグ情報記述手段２１によって記述されるポップタグ情報Ｉ１の場合と同じく、図２に示すように、少なくとも、音声及び／又は映像データへのポップタグ情報の記述が開始される時刻（ｔ１）及び記述が終了する時刻（ｔ２）に関する時間軸情報と、音声及び／又は映像データに前記ポップタグ情報が記述される位置に関するｘ軸、ｙ軸に関する位置情報とが含まれている。
【００５０】
また、図２に示すように、ポップタグ情報Ｉ１に、更に、テキスト、ハイパーリンク、データベースのキー等の文字列データ及び／又はバイナリデータＢ１や、前記ｘ軸、ｙ軸に関する位置情報で指標されるｘ−ｙ座標を中心とする図形範囲情報である範囲情報Ｒ１を含めることができる。
【００５１】
端末装置側ポップタグ情報付音声及び／又は映像データ保存手段３０は、サーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段２０と同様に、例えば、外部記憶手段、ハードディスクなどからなるものであり、ポップタグ情報が記述されたポップタグ情報付音声及び／又は映像データを保存している。
【００５２】
ポップタグ情報付音声及び／又は映像データ再生手段３３は、ポップタグ情報付音声及び／又は映像データを再生し、画像表示手段３１、音声情報出力手段３２から出力させる処理を行う。
【００５３】
ポップタグ情報出力手段３４は、ポップタグ情報付音声及び／又は映像データが端末装置３で再生されている際に、ポップタグ情報を端末装置３において出力させる処理を行う。
【００５４】
ポップタグ情報リンク手段３５は、ポップタグ情報出力手段３４によって端末装置３において出力されたポップタグ情報を利用して、当該ポップタグ情報に含まれているデータを再生可能にする処理動作を行なう。
【００５５】
また、ポップタグ情報出力手段３４によって端末装置３において出力されたポップタグ情報に含まれているハイパーリンクを利用してネットワーク１へのアクセスを可能ならしめる処理を行う。
【００５６】
（音声及び／又は映像データへのポップタグ情報の記述）
図２、図５、図６、図７を参照して音声及び／又は映像データへのポップタグ情報の記述の一例を説明する。
【００５７】
サーバ装置２あるいは、端末装置３において音声及び／又は映像データを再生し、ポップタグ情報を記述しようと意図した時点で、サーバ装置側ポップタグ情報記述手段２１あるいは、端末装置側ポップタグ情報記述手段３６により、図５（ａ）に符号４で示されているターゲットマークを、サーバ装置２の画像表示手段、あるいは端末装置３の画像表示手段３１に表示させる。
【００５８】
サーバ装置２あるいは、端末装置３に備えられているマウス、キーボード等の情報入力手段を利用して、図５（ａ）に示されているようにポイントをマーキングする。これにより、時刻（ｔ１）と、ｘ軸、ｙ軸に関する位置情報とが、前記の再生されている音声及び／又は映像データに対して、当該音声及び／又は映像データとは異なるレイヤーで記述される。ここで、時刻（ｔ１）は、音声及び／又は映像データを再生開始してからマーキングが行われた時点までの時間、すなわち、音声及び／又は映像データへのポップタグ情報の記述が開始される時刻である。また、ｘ軸、ｙ軸に関する位置情報は、前記のマーキングが行われたポイントを示す、音声及び／又は映像データにポップタグ情報が記述される位置に関する情報である
引き続き、サムネイル表示で前記音声及び／又は映像データの画像をサーバ装置２の画像表示手段、あるいは端末装置３の画像表示手段３１に表示させ、マーキングを終了させる時点で、サーバ装置２あるいは、端末装置３に備えられているマウス、キーボード等の情報入力手段を利用して、マーキングを停止させる。
【００５９】
これによって、記述が終了する時刻（ｔ２）が、前記と同様に、音声及び／又は映像データに対して当該音声及び／又は映像データとは異なるレイヤーで記述される。
【００６０】
この時刻（ｔ２）はポップタグ情報の表示を終了させる時刻を示すものであり、前記時刻（ｔ１）からどのくらいの時間経過した時点でポップタグ情報の表示を終了させるかを示すものである。
【００６１】
引き続き、必要であれば、テキスト、ハイパーリンク、データベースのキー等の文字列データや、バイナリデータＢ１、ｘ軸、ｙ軸に関する位置情報で指標されるｘ−ｙ座標を中心とする図形範囲情報である範囲情報Ｒ１をポップタグ情報として、サーバ装置側ポップタグ情報記述手段２１あるいは、端末装置側ポップタグ情報記述手段３６により、音声及び／又は映像データとは異なるレイヤーで音声及び／又は映像データに記述する。
【００６２】
なお、この際、ポップタグ情報暗号化手段２５によって、前記のように生成されるポップタグ情報付音声及び／又は映像データ、すなわち、ポップタグ情報ファイルを暗号化する処理が行われるようにすることもできる。
【００６３】
例えば、サーバ装置２がポップタグ情報暗号化手段２５を備えており、ポップタグ情報付音声及び／又は映像データを作成しようとする者が、「音声及び／又は映像データ」の部分を秘密にしたいと考えた場合、ポップタグ情報暗号化手段２５を機能させることによって、ポップタグ情報付音声及び／又は映像データ中、「音声及び／又は映像データ」の部分のみを暗号化する（図７）。
【００６４】
上述したように、ポップタグ情報暗号化手段２５が行う暗号化は、秘密にしたいと考える部分のみを暗号化し、その他の部分は、可読性を維持できるようにできるものである。そこで、暗号化が行なわれても、図7図示のように、時間軸（ｔ１、ｔ２）に関する情報や、ｘ軸、ｙ軸に関する位置情報などは読み取り可能になっている。
【００６５】
ポップタグ情報暗号化手段２５によってポップタグ情報ファイルが暗号化された場合、キーを持っている者しか暗号化された部分を読み取ることができない。そこで、サーバ装置にポップタグ情報暗号化手段２５を装備させ、これを機能させる場合には、端末装置３を使用するユーザにキー情報をあらかじめ付与しておくことになる。
【００６６】
なお、図面では省略しているが、端末装置３でも端末装置側ポップタグ情報記述手段３６によりポップタグ情報ファイルの作成が行われるので、端末装置３にも、サーバ装置に配備するポップタグ情報暗号化手段２５と同様の機能を発揮するポップタグ情報暗号化手段を配備しておくことができる。
【００６７】
こうして、ポップタグ情報が記述されたポップタグ情報付音声及び／又は映像データは、サーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段２０、あるいは端末装置側ポップタグ情報付音声及び／又は映像データ保存手段３０に保存される。前述したポップタグ情報暗号化手段２５によってポップタグ情報付音声及び／又は映像データが暗号化された場合には、暗号化されているポップタグ情報付音声及び／又は映像データが保存されることになる。
【００６８】
なお、１件の音声及び／又は映像データ中に複数のポップタグ情報を記述し、これを１つのファイルとしてサーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段２０、あるいは端末装置側ポップタグ情報付音声及び／又は映像データ保存手段３０に保存することができる。
【００６９】
この保存の形式はＸＭＬ等の文字列データ、バイナリデータのいずれにもすることができる。
【００７０】
前記の記述されるテキスト、ハイパーリンク、データベースのキー等の文字列データは、例えば、図５（ａ）図示の例では、ターゲットマーク４でマーキングされた衣服５に関する情報を提供するものである。
【００７１】
また、範囲情報Ｒ１は、ｘ軸、ｙ軸に関する位置情報で指標されるｘ−ｙ座標を中心とする矩形、円、アウトラインデータ等の図形範囲情報となる。
【００７２】
この音声及び／又は映像データへのポップタグ情報の記述は、本発明の情報提供システムを利用して情報提供しようとする者や、本発明の情報提供システムを利用して情報を取得しようと考えている者が、自己が利用しているパーソナルコンピュータ等の端末装置３からネットワーク１を介してサーバ装置２にアクセスし、サーバ装置２から提供される音声及び／又は映像データを再生しながら行うことができる。また、本発明の情報提供システムを提供している者が、サーバ装置２で音声及び／又は映像データを再生しながら行うことができる。
【００７３】
例えば、再生される音声及び／又は映像データの中に図５（ａ）図示のような映像データが含まれており、情報を提供したい者が、図５（ａ）の画像情報に含まれている女性が身に付けている衣服５に関する情報を提供したいと考えた場合、サーバ装置２あるいは、端末装置３において音声及び／又は映像データを再生し、図５（ａ）の画像情報の状態で動画を停止させ、サーバ装置側ポップタグ情報記述手段２１あるいは、端末装置側ポップタグ情報記述手段３６により、ターゲットマーク４を、サーバ装置２の画像表示手段、あるいは端末装置３の画像表示手段３１に表示させる。
【００７４】
そして、サーバ装置２あるいは、端末装置３に備えられているマウス、キーボード等の情報入力手段を利用して、図５（ａ）に示されているようにポイントである衣服５をマーキングする。
【００７５】
これに引き続いて上述したようにして、音声及び／又は映像データに対して音声及び／又は映像データとは異なるレイヤーでポップタグ情報を記述する。
【００７６】
この場合、前述したテキスト、ハイパーリンク、バイナリデータＢ１としては、衣服５の説明を行うテキストや、バイナリデータＢ１、あるいは衣服５の説明が行われているウェブサイトのハイパーリンクを記述する。
【００７７】
これによって、ポップタグ情報付音声及び／又は映像データを端末装置３で再生している者が前述したポップタグ情報を参考にして、衣服５の説明を行うテキストや、バイナリデータＢ１を視聴したり、衣服５の説明が行われているウェブサイトを閲覧可能ならしめるものである。
【００７８】
このようにすれば、服飾関係の商品などに代表されるように、言語化して紹介することが難しいものであっても、音声及び／又は映像データ等のマルチメディア情報としてユーザに提供することによって視覚、聴覚の方面から、また、感覚的に商品、サービスの紹介を行い、音声及び／又は映像データ等のマルチメディア情報としてユーザに情報提供している最中に、各ユーザがその嗜好、個性などに適した商品、サービスなどを簡単、適切に、検索、選択することを可能にできる。
【００７９】
（ポップタグ情報を利用した情報の取得）
図３を参照して、音声及び／又は映像データからポップタグ情報を手がかりにユーザが取得を希望する情報を入手する工程の一例を説明する。
【００８０】
本発明の情報提供システムを利用して情報の収集、検索、選択を希望するユーザはネットワーク１を介して自己の端末装置３によりサーバ装置２にアクセスし、ポップタグ情報付音声及び／又は映像データを取得し、ポップタグ付音声及び／又は映像データ再生手段３３により当該ポップタグ付音声及び／又は映像データを再生し、画像表示手段３１、音声情報出力手段３２から出力させる。
【００８１】
ポップタグ情報出力手段３４はポップタグ付音声及び／又は映像データの再生開始からの経過時間を管理し、再生開始から時刻（ｔ１）になった時点で、ポップタグ情報が、前記のように再生されて画像表示手段３１に表示されているポップタグ情報付音声及び／又は映像データ中に表示される。
【００８２】
例えば、図５（ａ）に符号４で示すように、ポップタグ情報に含まれているｘ軸、ｙ軸に関する位置情報、及び、これで指標されるｘ−ｙ座標を中心とする図形範囲情報である範囲情報Ｒ１で特定される位置、領域にアイコンが表示される。このアイコンによって、再生中のポップタグ情報付音声及び／又は映像データの、この領域にポップタグ情報が記述されていることをユーザに知らせる。
【００８３】
なお、再生開始から時刻（ｔ１）になった時点で、再生中のポップタグ情報付音声及び／又は映像データにポップタグ情報が記述されていることをユーザに知らせる手段としては、効果音の出力、アプリケーションの起動、データベースの検索などによるものとすることもできる。いずれも、ポップタグ情報出力手段３４がポップタグ付音声及び／又は映像データの再生開始からの経過時間を管理し、再生開始から時刻（ｔ１）になった時点でこれらの処理を行う。
【００８４】
そして、時刻（ｔ１）から時刻（ｔ２）になった時点で、ポップタグ情報出力手段３４が、前述したような形態でポップタグ情報の出力を停止させる。
【００８５】
端末装置３を操作し、ポップタグ情報付音声及び／又は映像データを再生していたユーザは、ポップタグ情報が表示された映像情報中の商品に注目したならば、ポップタグ情報リンク手段３５により、マウス等の入力手段を介して、当該ポップタグ情報を指定することにより、当該ポップタグ情報に含まれている画像情報や、ファイルのダウンロードなどを行うことができる。また、当該ポップタグ情報に含まれているハイパーリンクを利用し、ネットワーク１を介して、当該商品を紹介しているウェブサイトにアクセスして、当該商品に関する情報を収集することもできる（図５（ｂ））。
【００８６】
図５（ｂ）は、ポップタグ情報付音声及び／又は映像データにおいて音声及び／又は映像データに記述さている文字列データにハイパーリンクが含まれていて、端末装置３が備えているポップタグ情報リンク手段３５により当該ハイパーリンクを利用してネットワーク１へのアクセスし、衣服５の情報を提供しているウェブサイトを閲覧している状態を説明するものである。
【００８７】
なお、ユーザが操作している端末装置３でポップタグ情報付音声及び／又は映像データが再生されている際に表示されたポップタグ情報が指標している商品などに注目したときに、ポップタグ情報リンク手段３５により、マウス等の入力手段を介して、当該ポップタグ情報を指定し、当該ポップタグ情報及びそれに含まれている情報を一時的にユーザが操作している端末装置３に保存する事ができる。この場合、ポップタグ情報付音声及び／又は映像データの再生が終了した後に、あらためて、ポップタグ情報リンク手段３５により、保存していたポップタグ情報に含まれている画像情報や、ファイルのダウンロードなどを行ったり、当該ポップタグ情報に含まれているハイパーリンクを利用し、ネットワーク１を介して、当該商品を紹介しているウェブサイトにアクセスして、当該商品に関する情報を収集することができる。
【００８８】
（ユーザ提供の情報に基づく特定の時刻にシークした音声及び／又は映像データ再生）
図４を参照して、ユーザが希望した特定の時刻から音声及び／又は映像データが再生される工程の一例を説明する。
【００８９】
端末装置３を使用しているユーザがネットワーク１を介してサーバ装置２にアクセスし、特定の時刻からの音声及び／又は映像データ再生を希望して、そのための情報を提供する。
【００９０】
サーバ装置２では、ポップタグ情報検索手段２２がサーバ装置側情報入出力手段２４で取得した問い合わせ情報に基づきサーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段２０に保存されているポップタグ情報付音声及び／又は映像データを検索する。
【００９１】
そして、前記の問い合わせ情報で指定されるポップタグ情報が記述されている音声及び／又は映像データを抽出する。更に、前記の問い合わせ情報で指定されるポップタグ情報が当該抽出された前記音声及び／又は映像データに対して記述開始されている時刻（ｔ１）を抽出する。
【００９２】
これに基づいて、特定時刻情報出力手段２３が、前記の抽出された前記音声及び／又は映像データを、サーバ装置側情報入出力手段２４を介して、前記の抽出された時刻（ｔ１）からネットワーク１に送信する処理を行う。
【００９３】
これにより、問い合わせを行ったユーザは、自己の端末装置３で、問い合わせの情報に係るポップタグ情報が記述されている音声及び／又は映像データを、当該ポップタグ情報が記述開始された時点にシークさせて再生して視聴することができる。
【００９４】
以上、添付図面を参照して本発明の好ましい実施形態を説明したが、本発明はかかる実施形態に限定されるものではなく、特許請求の範囲の記載から把握される技術的範囲において種々の形態に変更可能である。
【００９５】
例えば、端末装置３に備えられているポップタグ情報付音声及び／又は映像データ再生手段３３、ポップタグ情報出力手段３４、ポップタグ情報リンク手段３５と同様の機能を果たす処理動作部がサーバ装置２に備えられていて、サーバ装置２において前述した端末装置３で行われる処理動作が実行されるようにすることができる。
【００９６】
また、サーバ装置２備えられているポップタグ情報検索手段２２、特定時刻情報出力手段２３と同様の機能を果たす処理動作部が端末装置３に備えられていて、端末装置３において前述したサーバ装置２で行われる処理動作が実行されるようにすることもできる。
【符号の説明】
【００９７】
１  ネットワーク
２  サーバ装置
３  端末装置
２０  サーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段
２１  サーバ装置側ポップタグ情報記述手段
２２  ポップタグ情報検索手段
２３  特定時刻情報出力手段
２４  サーバ装置側情報入出力手段
２５  ポップタグ情報暗号化手段
３０  端末装置側ポップタグ情報付音声及び／又は映像データ保存手段
３１  画像表示手段
３２  音声情報出力手段
３３  ポップタグ情報付音声及び／又は映像データ再生手段
３４  ポップタグ情報出力手段
３５  ポップタグ情報リンク手段
３６  端末装置側ポップタグ情報記述手段
３７  端末装置側情報入出力手段
【図１】
2011021632.tif 000003
【図２】
2011021632.tif 000004
【図３】
2011021632.tif 000005
【図４】
2011021632.tif 000006
【図５】
2011021632.tif 000007
【図６】
2011021632.tif 000008
【図７】
2011021632.tif 000009
【手続補正書】
【提出日】平成23年8月30日(2011.8.30)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
音声及び／又は映像データに対して当該音声及び／又は映像データとは異なるレイヤーでポップタグ情報を当該音声及び／又は映像データに記述するサーバ装置側ポップタグ情報記述手段と、
前記ポップタグ情報が記述されたポップタグ情報付音声及び／又は映像データが保存されるサーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段と、
ネットワークを介して情報の交信を行うサーバ装置側情報入出力手段とを備えていて、
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報が、
前記音声及び／又は映像データへの前記ポップタグ情報の記述が開始される時刻（ｔ１）及び記述が終了する時刻（ｔ２）に関する時間軸情報と、
前記音声及び／又は映像データに前記ポップタグ情報が記述される位置に関するｘ軸、ｙ軸に関する位置情報と
を含んでいる
サーバ装置と、
前記サーバ装置とネットワークを介して接続される端末装置であって、
ネットワークを介して情報の交信を行う端末装置側情報入出力手段と、
前記ポップタグ情報が記述されたポップタグ情報付音声及び／又は映像データが保存される端末装置側ポップタグ情報付音声及び／又は映像データ保存手段と、
前記ポップタグ情報付音声及び／又は映像データを再生するポップタグ情報付音声及び／又は映像データ再生手段と、
前記ポップタグ情報付音声及び／又は映像データが当該端末装置で再生されている際に、前記ポップタグ情報を当該端末装置において出力させるポップタグ情報出力手段とを
備えている端末装置と
からなり、
前記サーバ装置はポップタグ情報検索手段と、
特定時刻情報出力手段とを、更に、備えており、
前記ポップタグ情報検索手段は、
前記サーバ装置側情報入出力手段で取得した問い合わせ情報に基づき前記サーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段に保存されているポップタグ情報付音声及び／又は映像データを検索し、
前記問い合わせ情報で指定されるポップタグ情報が記述されている前記音声及び／又は映像データを抽出すると共に、
前記問い合わせ情報で指定されるポップタグ情報が当該抽出された前記音声及び／又は映像データに対して記述開始されている時刻（ｔ１）を抽出する処理を行い、
前記特定時刻情報出力手段は、前記抽出された前記音声及び／又は映像データを、前記サーバ装置側情報入出力手段を介して、前記抽出された時刻（ｔ１）から前記ネットワークに送信する処理を行う
ことを特徴とする情報提供システム。
【請求項２】
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
文字列データ及び／又はバイナリデータが含まれる
ことを特徴とする請求項１記載の情報提供システム。
【請求項３】
前記端末装置はポップタグ情報リンク手段を、更に、備えており、
当該ポップタグ情報リンク手段により、前記ポップタグ情報出力手段によって前記端末装置において出力された前記ポップタグ情報を利用して、前記ポップタグ情報に含まれているデータを再生可能であることを特徴とする請求項２記載の情報提供システム。
【請求項４】
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される文字列データにはハイパーリンクが含まれていると共に、
前記端末装置が備えている前記ポップタグ情報リンク手段により、前記ポップタグ情報出力手段によって前記端末装置において出力された前記ポップタグ情報に含まれている前記ハイパーリンクを利用してネットワークへのアクセスが可能であることを特徴とする請求項３記載の情報提供システム。
【請求項５】
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
前記ｘ軸、ｙ軸に関する位置情報で指標されるｘ−ｙ座標を中心とする図形範囲情報が含まれる
ことを特徴とする請求項１乃至５のいずれか一項記載の情報提供システム。
【請求項６】
前記端末装置は、更に、
音声及び／又は映像データに対して当該音声及び／又は映像データとは異なるレイヤーでポップタグ情報を当該音声及び／又は映像データに記述する端末装置側ポップタグ情報記述手段を備えていて、
当該端末装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報が、
前記音声及び／又は映像データへの前記ポップタグ情報の記述が開始される時刻（ｔ１）及び記述が終了する時刻（ｔ２）に関する時間軸情報と、
前記音声及び／又は映像データに前記ポップタグ情報が記述される位置に関するｘ軸、ｙ軸に関する位置情報とを
含んでいることを特徴とする請求項１乃至６のいずれか一項記載の情報提供システム。
【請求項７】
前記端末装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
文字列データ及び／又はバイナリデータが含まれる
ことを特徴とする請求項６記載の情報提供システム。
【請求項８】
前記端末装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
前記ｘ軸、ｙ軸に関する位置情報で指標されるｘ−ｙ座標を中心とする図形範囲情報が含まれる
ことを特徴とする請求項６又は７記載の情報提供システム。
【請求項９】
前記ポップタグ情報がＭＰＥＧ−７規格によるものであることを特徴とする請求項１乃至８のいずれか一項記載の情報提供システム。
【請求項１０】
前記サーバ装置は、前記ポップタグ情報付音声及び／又は映像データの中の一部のデータを暗号化するポップタグ情報暗号化手段を、更に、備えていることを特徴とする請求項１乃至９のいずれか一項記載の情報提供システム。
【手続補正書】
【提出日】平成23年12月5日(2011.12.5)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
音声及び／又は映像データに対して当該音声及び／又は映像データとは異なるレイヤーでポップタグ情報を当該音声及び／又は映像データに記述するサーバ装置側ポップタグ情報記述手段と、
前記ポップタグ情報が記述されたポップタグ情報付音声及び／又は映像データが保存されるサーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段と、
ネットワークを介して情報の交信を行うサーバ装置側情報入出力手段とを備えていて、
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報が、
前記音声及び／又は映像データへの前記ポップタグ情報の記述が開始される時刻（ｔ１）及び記述が終了する時刻（ｔ２）に関する時間軸情報と、
前記音声及び／又は映像データに前記ポップタグ情報が記述される位置に関するｘ軸、ｙ軸に関する位置情報と、
前記ｘ軸、ｙ軸に関する位置情報で指標されるｘ−ｙ座標を中心とする矩形、円、又は、アウトラインデータからなる図形範囲情報と
を含んでいる
サーバ装置と、
前記サーバ装置とネットワークを介して接続される端末装置であって、
ネットワークを介して情報の交信を行う端末装置側情報入出力手段と、
前記ポップタグ情報が記述されたポップタグ情報付音声及び／又は映像データが保存される端末装置側ポップタグ情報付音声及び／又は映像データ保存手段と、
前記ポップタグ情報付音声及び／又は映像データを再生するポップタグ情報付音声及び／又は映像データ再生手段と、
前記ポップタグ情報付音声及び／又は映像データが当該端末装置で再生されている際に、前記ポップタグ情報を当該端末装置において出力させるポップタグ情報出力手段であって、前記ポップタグ情報に含まれているｘ軸、ｙ軸に関する前記位置情報及び、これで指標されるｘ−ｙ座標を中心とする前記図形範囲情報で特定される位置、領域にアイコンを表示するポップタグ情報出力手段とを
備えている端末装置と
からなり、
前記サーバ装置はポップタグ情報検索手段と、
特定時刻情報出力手段とを、更に、備えており、
前記ポップタグ情報検索手段は、
前記サーバ装置側情報入出力手段で取得した問い合わせ情報に基づき前記サーバ装置側ポップタグ情報付音声及び／又は映像データ保存手段に保存されているポップタグ情報付音声及び／又は映像データを検索し、
前記問い合わせ情報で指定されるポップタグ情報が記述されている前記音声及び／又は映像データを抽出すると共に、
前記問い合わせ情報で指定されるポップタグ情報が当該抽出された前記音声及び／又は映像データに対して記述開始されている時刻（ｔ１）を抽出する処理を行い、
前記特定時刻情報出力手段は、前記抽出された前記音声及び／又は映像データを、前記サーバ装置側情報入出力手段を介して、前記抽出された時刻（ｔ１）から前記ネットワークに送信する処理を行う
ことを特徴とする情報提供システム。
【請求項２】
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
文字列データ及び／又はバイナリデータが含まれる
ことを特徴とする請求項１記載の情報提供システム。
【請求項３】
前記端末装置はポップタグ情報リンク手段を、更に、備えており、
当該ポップタグ情報リンク手段により、前記ポップタグ情報出力手段によって前記端末装置において出力された前記ポップタグ情報を利用して、前記ポップタグ情報に含まれているデータを再生可能であることを特徴とする請求項２記載の情報提供システム。
【請求項４】
前記サーバ装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される文字列データにはハイパーリンクが含まれていると共に、
前記端末装置が備えている前記ポップタグ情報リンク手段により、前記ポップタグ情報出力手段によって前記端末装置において出力された前記ポップタグ情報に含まれている前記ハイパーリンクを利用してネットワークへのアクセスが可能であることを特徴とする請求項３記載の情報提供システム。
【請求項５】
前記端末装置は、更に、
音声及び／又は映像データに対して当該音声及び／又は映像データとは異なるレイヤーでポップタグ情報を当該音声及び／又は映像データに記述する端末装置側ポップタグ情報記述手段を備えていて、
当該端末装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報が、
前記音声及び／又は映像データへの前記ポップタグ情報の記述が開始される時刻（ｔ１）及び記述が終了する時刻（ｔ２）に関する時間軸情報と、
前記音声及び／又は映像データに前記ポップタグ情報が記述される位置に関するｘ軸、ｙ軸に関する位置情報とを
含んでいることを特徴とする請求項１乃至４のいずれか一項記載の情報提供システム。
【請求項６】
前記端末装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
文字列データ及び／又はバイナリデータが含まれる
ことを特徴とする請求項５記載の情報提供システム。
【請求項７】
前記端末装置側ポップタグ情報記述手段によって前記音声及び／又は映像データに記述される前記ポップタグ情報に、更に、
前記ｘ軸、ｙ軸に関する位置情報で指標されるｘ−ｙ座標を中心とする図形範囲情報が含まれる
ことを特徴とする請求項５又は６記載の情報提供システム。
【請求項８】
前記ポップタグ情報がＭＰＥＧ−７規格によるものであることを特徴とする請求項１乃至７のいずれか一項記載の情報提供システム。
【請求項９】
前記サーバ装置は、前記ポップタグ情報付音声及び／又は映像データの中の一部のデータを暗号化するポップタグ情報暗号化手段を、更に、備えていることを特徴とする請求項１乃至８のいずれか一項記載の情報提供システム。
【国際調査報告】
2011021632.tif 000010
2011021632.tif 000011
2011021632.tif 000012
2011021632.tif 000013