(57)【要約】【課題】  利用者が面倒な作業を行うことなく、またコンテンツに関する詳しい知識がなくても、自動的に関連情報の検索を行い、利用者に対してコンテンツと共に提示することを目的とする。【解決手段】  音声や映像やテキストなどのコンテンツに付与されたメタ情報を用いて、そのコンテンツに関する関連情報の検索を依頼して、関連情報を取得し、利用者に提示する。この結果、利用者は、面倒な作業をすることなく、またコンテンツに関する詳しい知識がなくても、関連情報を取得することが可能となる。【選択図】      図１
2005141507.tif 000002
【特許請求の範囲】
【請求項１】
音声、映像、テキストのうち少なくとも一つを含むコンテンツの関連情報を利用者に提供する関連情報提供装置であって、
メタ情報を付与されたコンテンツを受信するコンテンツ受信部と、
受信したメタ情報を付与されたコンテンツから、指示されたタイミングで前記メタ情報を抽出する抽出部と、
抽出したメタ情報を関連情報検索装置へ送信する送信部と、
コンテンツを提示する提示部と、
前記関連情報を関連情報検索装置から受信する関連情報受信部と、
受信した関連情報を提示する提示部と
を備えることを特徴とする関連情報提供装置。
【請求項２】
前記メタ情報として、
コンテンツ全体に関する情報と、
コンテンツの部分を時間的に特定する情報と、
前記時間的に特定する情報により特定されたコンテンツの部分に関する情報と
コンテンツの部分を空間の位置として特定する情報と、
前記空間の位置として特定する情報により特定されたコンテンツの部分に関する情報
のうち少なくとも一つ以上を備えることを特徴とする請求項１に記載の関連情報提供装置。
【請求項３】
前記指示されたタイミングとして、
コンテンツが提示部に提示されたこと、
コンテンツの部分が時間的に特定されたこと、
コンテンツの部分が空間の位置として特定されたこと
のうち少なくとも一つ以上を用いることを特徴とする請求項１に記載の関連情報提供装置。
【請求項４】
前記メタ情報を付与されたコンテンツとして、
前記受信した関連情報を用いること
を特徴とする請求項１に記載の関連情報提供装置。
【請求項５】
前記抽出したメタ情報に記載されている時間情報と、
関連情報提供装置に付属している時計が示す時間情報とが一致するタイミングで、
コンテンツとその関連情報とを提示部において提示する手段
を備えることを特徴とする請求項１に記載の関連情報提供装置。
【請求項６】
利用者に提供する音声、映像、テキストのうち少なくとも一つを含むコンテンツの関連情報を検索する関連情報検索装置であって、
メタ情報を関連情報提示装置から受信する受信部と、
受信したメタ情報を解析し、前記メタ情報が含む種別と個別情報とを抽出する解析部と、
抽出した種別を検索情報へ変換する種別変換部と、
抽出した個別情報と変換により得た検索情報とのうち少なくとも一つを用いて関連情報データベースから関連情報を検索する検索部と、
検索により得た前記関連情報を関連情報提示装置へ送信する送信部と
を備えることを特徴とする関連情報検索装置。
【請求項７】
前記種別変換部において
前記種別を前記検索情報に変換する際に、
前記関連情報提示装置から送られた利用者の利用履歴情報と、ＩＤと、性別と、年齢と、居所と、住所と、利用した時期と、時刻と、契約したサービス内容とのうち少なくとも一つ以上から構成される情報を利用すること
を特徴とする請求項６に記載に関連情報検索装置。
【請求項８】
前記種別変換部において
前記種別を検索キーワードと検索カテゴリの少なくとも一つに変換して検索情報とすること
を特徴とする請求項６に記載の関連情報検索装置。
【請求項９】
コンテンツ受信機能と、抽出機能と、提示機能と、送信機能と、関連情報受信機能とを備え、
音声、映像、テキストのうち少なくとも一つを含むコンテンツの関連情報を提供する関連情報提供方法であって、
コンテンツ受信機能が、メタ情報を付与されたコンテンツを受信する手順と、
抽出機能が、受信したメタ情報を付与されたコンテンツから、指示されたタイミングで前記メタ情報を抽出する手順と、
送信機能が、抽出したメタ情報を送信する手順と、
提示機能が、コンテンツを提示する手順と、
関連情報受信機能が、関連情報を受信する手順と、
提示機能が、受信した関連情報を提示する手順と
を実行することを特徴とする関連情報提供方法。
【請求項１０】
受信機能と、解析機能と、種別変換機能と、検索機能と、関連情報データベース機能と、送信機能とを備え、
利用者に提供する音声、映像、テキストのうち少なくとも一つを含むコンテンツの関連情報を検索する関連情報検索方法であって、
受信機能が、メタ情報を受信する手順と、
解析機能が、受信したメタ情報を解析し、前記メタ情報が含む個別情報と種別とを抽出する手順と、
種別変換機能が、抽出した種別を検索情報へ変換する手順と、
検索機能が、抽出した個別情報と変換により得た検索情報とのうち少なくとも一つを用いて関連情報データベース機能から関連情報を検索する手順と、
送信機能が、検索により得た前記関連情報を送信する手順と
を実行することを特徴とする関連情報検索方法。
【請求項１１】
音声、映像、テキストのうち少なくとも一つを含むコンテンツの関連情報を提供する関連情報提供プログラムであって、
コンピュータに、
メタ情報を付与されたコンテンツを受信するコンテンツ受信機能と、
受信したメタ情報を付与されたコンテンツから、指示されたタイミングで前記メタ情報を抽出する抽出機能と、
抽出したメタ情報を送信する送信機能と、
コンテンツを提示する提示機能と、
関連情報を受信する関連情報受信機能と、
受信した関連情報を提示する提示機能と
を実現させることを特徴とする関連情報提供プログラム。
【請求項１２】
利用者に提供する音声、映像、テキストのうち少なくとも一つを含むコンテンツの関連情報を検索する関連情報検索プログラムであって、
コンピュータに、
メタ情報を受信する受信機能と、
受信したメタ情報を解析し、メタ情報が含む個別情報と種別とを抽出する解析機能と、
抽出した種別を検索情報へ変換する種別変換機能と、
抽出した個別情報と変換により得た検索情報とのうち少なくとも一つを用いて関連情報データベース機能から関連情報を検索する検索機能と、
検索により得た前記関連情報を送信する送信機能と
を実現させることを特徴とする関連情報検索プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像や音声などのコンテンツや閲覧中のＷＷＷホームページの関連情報を、利用者へ提供するための関連情報提示装置、関連情報検索装置、関連情報提示方法、関連情報検索方法、関連情報提示プログラム及び関連情報検索プログラムに関する。
【背景技術】
【０００２】
近年のＦＴＴＨ（Fiber To The Home）やｘＤＳＬ(x Digital Subscriber Line）の普及に伴うネットワークのブロードバンド化や常時接続サービスの一般化によって、ネットワークを利用した情報提供サービスをごく普通の家庭でも利用できるようになってきている。
【０００３】
ネットワークを利用した情報提供サービスの代表的なものに、いわゆるホームページと呼ばれるＷＷＷ（World Wide Web）の仕組みを利用した文書型コンテンツのオンデマンドサービスがある。このＷＷＷでのオンデマンドサービスは、例えばテレビジョン放送の視聴中に、放送内容に関する情報をネットワークを経由して取得するといった、関連情報の取得にも利用されている。
【０００４】
また近年では、ネットワークにおいても、ストリーミング技術を用いることにより、文書に加えて映像や音楽等のコンテンツの配信が行われたり、これらのコンテンツを組み合わせた情報の提供も行われている。
【０００５】
一方、情報としてユーザに提示されるコンテンツには、その情報の再利用や検索を容易にするという観点から、メタ情報（またはメタデータ）と呼ばれるコンテンツを説明する情報が付与されるようになってきた。
【０００６】
非特許文献１には、メタ情報をコンテンツに付与する方法として、ＧＤＡ（Global Document Annotation）とＭＰＥＧ−７（Moving Picture Experts Group 7）が示されている。ＧＤＡは、言語データにＸＭＬ（eXtensible Markup Language）を用いて付加情報をマークアップ（文書の一部を「タグ」と呼ばれる特別な文字列で囲うことにより、文章の構造や修飾情報を文章中に記述すること）する方法であり、ＭＰＥＧ−７は動画や音声等のマルチメディアコンテンツを有効に検索するための記述方法である。これらの方法を用いることにより、コンテンツ中へのメタ情報の付与が実現されている。
【０００７】
ネットワーク上のコンテンツを情報として利用者が取得する場合、通常、オンデマンドという方式を用いる。このため利用者は、能動的にネットワーク上のサーバヘ働きかける必要がある。例えば、映像の視聴中に映像に映っている出演者に関する情報を知りたいときは、利用者は出演者の名前を検索キーワードとして、ネットワーク上にある検索サーバに対して検索を要求する。検索サーバからは、利用者が指定したキーワードにもとづいて検索したコンテンツのリストが返されてくるので、利用者はそのリストから自分が知りたい出演者の情報を選択することにより、関連情報を閲覧することが可能となる。このような手続を行うことは、利用者にとっては面倒な作業であることは言うまでもない。
【０００８】
またこのような検索は、出演者の名前を知っていることにより、初めて可能となる。従って、出演者の名前を知らないときには、関連情報を得る術がなかった。
【０００９】
さらに検索の手続をしているうちに映像はどんどん進行していくので、利用者が見ている映像に合わせて関連情報が提示されるわけではなかった。このため利用者は、映像の関連情報を効果的に閲覧することはできなかった。
【００１０】
さらに関連情報そのものが動的に変化する場合には、前記したような方法ではその時点で必要とする関連情報を取得できない。例えば出演者の出演に比べて検索するタイミングが遅れれば、所望とする関連情報とは異なった関連情報しか得られず、タイムリーな関連情報の取得が困難になる。
【非特許文献１】橋田浩一、“インテリジェントコンテンツ”、情報処理、Vol.43、No.7、PP.780−784、2002
【発明の開示】
【発明が解決しようとする課題】
【００１１】
前記したような問題を解決する方法として、近年、デジタル放送やネットワーク放送では、映像を詳細に説明した関連情報を予め用意し、それを映像の放送と同時に配信するサービスが実現されている。しかし予め関連情報を定義する必要があり、また映像の放送と関連情報の配信を行う事業者が同じでないとサービスの実現が困難であった。
【００１２】
本発明は、前記したような課題を鑑みてなされたものであり、視聴中または閲覧中のコンテンツに付与されているメタ情報を用いることにより、利用者が面倒な作業を行うことなく、またコンテンツに関する詳しい知識がなくても、関連情報の検索を実行でき、利用者に対してコンテンツと共に関連情報を提示する装置、方法またはプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１３】
前記課題を解決するため、本発明は以下のような構成に係るものとした。
請求項１に記載の発明は、関連情報提示装置を、メタ情報を付与されたコンテンツを受信するコンテンツ受信部と、受信したメタ情報を付与されたコンテンツから、指示されたタイミングでメタ情報を抽出する抽出部と、抽出したメタ情報を送信する送信部と、メタ情報を抽出した後のコンテンツを提示する提示部と、関連情報を受信する関連情報受信部と、受信した関連情報を提示する提示部とを備える構成とした。
【００１４】
このように発明を構成することにより、関連情報提示装置は、メタ情報が付与されたコンテンツをコンテンツ受信部において受信し、指示されたタイミングで抽出部において受信したコンテンツからメタ情報を抽出し、抽出したメタ情報を送信部から関連情報検索装置に対して送信する。また提示部において、受信したコンテンツからメタ情報を抽出した後のコンテンツを提示する。その後、関連情報提示装置は、関連情報検索装置から関連情報を関連情報受信部において受信し、受信した関連情報を提示部において提示する。
【００１５】
請求項２に記載の発明は、関連情報提示装置で用いるメタ情報として、コンテンツ全体に関する情報と、コンテンツの部分を時間的に特定する情報と、時間的に特定する情報により特定されたコンテンツの部分に関する情報と、コンテンツの部分を空間の位置として特定する情報と、空間の位置として特定する情報により特定されたコンテンツの部分に関する情報のうち少なくとも一つ以上を備える構成とした。
【００１６】
このように発明を構成することにより、関連情報提示装置は、メタ情報として、コンテンツ全体に関する情報と、コンテンツの部分を時間的に特定する情報と、時間的に特定する情報により特定されたコンテンツの部分に関する情報と、コンテンツの部分を空間の位置として特定する情報と、空間の位置として特定する情報により特定されたコンテンツの部分に関する情報とを利用することが可能となる。
【００１７】
請求項３に記載の発明は、関連情報提示装置で用いる、指示されたタイミングとして、コンテンツが提示部に提示されたこと、コンテンツの部分が時間的に特定されたこと、コンテンツの部分が空間の位置として特定されたことのうち少なくとも一つ以上を用いる構成とした。
【００１８】
このように発明を構成することにより、関連情報提示装置は、コンテンツが提示部に提示されたことや、コンテンツの部分の時間的な特定や、コンテンツの部分の空間的な位置の特定により、メタ情報を抽出を指示するタイミングを生成することができる。
【００１９】
請求項４に記載の発明は、関連情報提示装置が受信するメタ情報を付与されたコンテンツとして、関連情報検索装置から受信した関連情報を用いる構成とした。
【００２０】
このように発明を構成することにより、関連情報提示装置は、受信した関連情報からそれに付与されたメタ情報を抽出し、抽出したメタ情報を送信部から関連情報検索装置に送信する。その後、関連情報提示装置は、関連情報検索装置で検索され、送信された関連情報を関連情報受信部において受信し、受信した関連情報を提示部において提示することにより、関連情報に関する関連情報をさらに利用者へ提示することが可能となる。
【００２１】
請求項５に記載の発明は、関連情報提示装置が、抽出したメタ情報に記載されている時間情報と、関連情報提示装置に付属している時計が示す時間情報とが一致するタイミングで、コンテンツとその関連情報とを提示部において提示する構成とした。
【００２２】
このように発明を構成することにより、関連情報提示装置は、コンテンツの提示にタイミングを合わせて、その関連情報を提示することが可能となる。
【００２３】
請求項６に記載の発明は、関連情報検索装置を、メタ情報を受信する受信部と、受信したメタ情報を解析し、メタ情報に含まれる種別と個々の情報（以後、個別情報と略称する）とを抽出する解析部と、抽出した種別を検索で利用する情報（以後、検索情報と略称する）へ変換する種別変換部と、少なくとも抽出した個別情報を用い、さらに可能な場合には、変換により得た検索情報を用いて、関連情報データベースから関連情報を検索する検索部と、検索により得た関連情報を送信する送信部とを備える構成とした。
【００２４】
このように発明を構成することにより、関連情報検索装置は、関連情報提示装置からメタ情報を受信部において受信して解析部へ送る。次に解析部では、受信したメタ情報からメタ情報が含む種別と個別情報とを抽出して、種別を種別変換部へ送り、個別情報を検索部へ送る。種別変換部では、種別を検索情報に変換して検索部へ送る。その後、検索部において、少なくとも抽出した個別情報を用い、さらに可能な場合には、変換により得た検索情報を用いて関連情報を検索し、検索により得た関連情報を送信部から関連情報提示装置へ送信する。
【００２５】
請求項７に記載の発明は、関連情報検索装置の種別変換部において、種別を前記検索情報に変換する際に、関連情報提示装置より送られた利用者の利用履歴情報と、ＩＤと、性別と、年齢と、居所と、住所と、利用した時期と、時刻と、契約したサービス内容とのうち少なくとも一つ以上より構成される情報（以後、状況情報と略記する）を利用することとした。
【００２６】
このように発明を構成することにより、関連情報検索装置は、利用者にさらに特化した検索情報を取得することが可能となる。
【００２７】
請求項８に記載の発明は、関連情報検索装置の種別変換部において、メタ情報に含まれる種別を検索キーワードと検索カテゴリの少なくとも一つに変換して検索情報とすることとした。
【００２８】
このように発明を構成することにより、関連情報検索装置は、キーワードを用いた検索や限定されたカテゴリ内での検索を実現できる。
【００２９】
請求項９に記載の発明は、関連情報提示方法が、コンテンツ受信機能と、抽出機能と、提示機能と、送信機能と、関連情報受信機能とを備え、コンテンツ受信機能が、メタ情報を付与されたコンテンツを受信する手順と、抽出機能が、受信したメタ情報を付与されたコンテンツから、指示されたタイミングでメタ情報を抽出する手順と、送信機能が、抽出したメタ情報を送信する手順と、提示機能が、メタ情報を抽出した後のコンテンツを提示する手順と、関連情報受信機能が、関連情報を受信する手順と、提示機能が、受信した関連情報を提示する手順とを実行する構成とした。
【００３０】
このように発明を構成することにより、関連情報提示方法は、メタ情報が付与されたコンテンツをコンテンツ受信機能を用いて受信し、指示されたタイミングで、抽出機能を用いて受信したコンテンツからメタ情報を抽出し、抽出したメタ情報を送信機能を用いて送信する。また提示部において、受信したコンテンツからメタ情報を抽出した後のコンテンツを提示する。その後、関連情報提示方法は、関連情報を関連情報受信機能を用いて受信し、受信した関連情報を提示機能を用いて提示する。
【００３１】
請求項１０に記載の発明は、関連情報検索方法が、受信機能と、解析機能と、種別変換機能と、検索機能と、関連情報データベース機能と、送信機能とを備え、受信機能が、メタ情報を受信する手順と、解析機能が、受信したメタ情報を解析し、メタ情報が含む個別情報と種別とを抽出する手順と、抽出した種別を種別変換機能を用いて検索情報へ変換する手順と、検索機能が、少なくとも抽出した個別情報を用い、さらに可能な場合には、変換により得た検索情報を用いて、関連情報データベース機能から関連情報を検索する手順と、送信機能が、検索により得た関連情報を送信する手順とを実行する構成とした。
【００３２】
このように発明を構成することにより、関連情報検索方法は、メタ情報を受信機能を用いて受信し、受信したメタ情報から解析機能を用いてメタ情報が含む個別情報と種別とを抽出し、抽出した種別を種別変換機能を用いて検索情報に変換し、少なくとも抽出した個別情報を用い、さらに可能な場合には、変換により得た検索情報を用いて、関連情報データベース機能から検索機能を用いて関連情報を検索し、検索により得た関連情報を送信機能を用いて送信する。
【００３３】
請求項１１に記載の発明は、関連情報提示プログラムが、コンピュータに、メタ情報を付与されたコンテンツを受信するコンテンツ受信機能と、受信したメタ情報を付与されたコンテンツから、指示されたタイミングでメタ情報を抽出する抽出機能と、抽出したメタ情報を送信する送信機能と、メタ情報を抽出した後のコンテンツを提示する提示機能と、関連情報を受信する関連情報受信機能と、受信した関連情報を提示する提示機能とを実現させる構成とした。
【００３４】
このように発明を構成することにより、関連情報提示プログラムは、コンピュータに、メタ情報を付与されたコンテンツの受信と、受信したメタ情報を付与されたコンテンツから、指示されたタイミングでのメタ情報の抽出と、抽出したメタ情報の送信と、メタ情報を抽出した後のコンテンツの提示と、関連情報の受信と、受信した関連情報の提示とを実現させる。
【００３５】
請求項１２に記載の発明は、関連情報検索プログラムが、コンピュータに、メタ情報を受信する受信機能と、受信したメタ情報を解析し、メタ情報が含む個別情報と種別とを抽出する解析機能と、抽出した種別を検索情報へ変換する種別変換機能と、少なくとも抽出した個別情報を用い、さらに可能な場合には、変換により得た検索情報を用いて、関連情報データベース機能から関連情報を検索する検索機能と、検索により得た関連情報を送信する送信機能とを実現させる構成とした。
【００３６】
このように発明を構成することにより、関連情報検索プログラムは、コンピュータに、関連情報提示装置より送られたメタ情報の受信と、受信したメタ情報の解析による、メタ情報が含む個別情報と種別との抽出と、抽出した種別の検索情報への変換と、少なくとも抽出した個別情報を用い、さらに可能な場合には、変換により得た検索情報を用いた関連情報データベース機能からの関連情報の検索と、検索により得た関連情報の送信とを実現させる。
【発明の効果】
【００３７】
請求項１、請求項９、請求項１１に記載の発明には、以下の効果がある。まず音声や映像等のコンテンツに付与されたメタ情報を用いて、そのコンテンツに関する関連情報の検索を依頼して、関連情報を取得し、利用者に提示することができる。このため利用者は、面倒な作業をすることなく、またコンテンツに関する詳しい知識がなくても、関連情報を取得することが可能となる。また関連情報が動的に変化する場合であっても、コンテンツに合わせて関連情報を取得できるので、タイムリーな関連情報の取得が可能となる。さらに本発明によれば、検索を行って関連情報を提供するので、映像や文書等のコンテンツの提供事業者とその関連情報の提供事業者とが異なっていてもサービスの提供は可能である。
【００３８】
請求項２に記載の発明によれば、関連情報を取得するためのメタ情報として、コンテンツ全体に関する情報と、コンテンツの部分を時間的に特定する情報と、時間的に特定する情報により特定されたコンテンツの部分に関する情報と、コンテンツの部分を空間の位置として特定する情報と、空間の位置として特定する情報により特定されたコンテンツの部分に関する情報とを利用することにより、例えば映像のはじめから３０分後の場面の左上に映っていた山の名前の特定などが可能となる。
【００３９】
請求項３に記載の発明によれば、関連情報提示装置は、コンテンツが提示部に提示されたことや、コンテンツの部分の時間的な特定や、コンテンツの部分の空間的な位置の特定により、メタ情報を抽出を指示するタイミングを生成することができる。
【００４０】
請求項４に記載の発明によれば、コンテンツだけでなく関連情報からも、さらに関連情報を取得することができ、コンテンツに関する関連情報を取得する領域を大幅に拡大することが可能となる。
【００４１】
請求項５に記載の発明によれば、コンテンツとその関連情報とを、タイミングを合わせて効果的に提示することが可能となる。
【００４２】
請求項６、請求項１０、請求項１２に記載の発明によれば、メタ情報を用いて、メタ情報が付与されていたコンテンツの関連情報を効率良く検索することが可能となる。
【００４３】
請求項７に記載の発明によれば、利用者にさらに特化した検索情報を取得することが可能となる。
【００４４】
請求項８に記載の発明によれば、キーワードを用いた検索や限定されたカテゴリ内での検索を実現できる。
【発明を実施するための最良の形態】
【００４５】
次に本発明の実施形態について、適宜図面を参照しながら詳細に説明する。
［第１の実施形態］
第１の実施形態では、コンテンツサーバから配信されたコンテンツをクライアントで提示すると共に、その関連情報も提示する場合を例として説明する。ここで「提示」とは、映像、音声、テキスト等のコンテンツを利用者へ視聴、閲覧させるために示すことを言う。
図１は、本発明をクライアントと関連情報サーバに適用した場合のシステム全体を示す構成図である。システムは、コンテンツサーバ１０とクライアント２０と関連情報サーバ３０とそれらを相互に接続するネットワーク４０とから構成される。またネットワーク４０は、例えば、インターネットや地域ＩＰ網に代表されるＩＰネットワークや、電話網に代表される公衆網、もしくは専用回線であり、有線無線の別は問わない。ここで、請求項における関連情報提示装置はクライアントに相当し、関連情報検索装置は関連情報サーバに相当する。
【００４６】
コンテンツサーバ１０とクライアント２０との組み合わせは、事前の契約やサービスによって決まり、クライアント２０は、一意に情報をやり取りするサーバを決定できるものとする。また、コンテンツの実体を送信するサーバは、ここでのコンテンツサーバ１０と異なるものであっても構わない。
【００４７】
コンテンツサーバ１０は、利用者にコンテンツを提示するクライアント２０に対して、コンテンツを配信するための装置であり、コンテンツを配信するサービスを行う事業者等により管理されている。コンテンツの配信には、コンテンツを一括して転送するダウンロードや先頭から徐々に転送するストリーミングを利用することができる。
【００４８】
またコンテンツサーバ１０は、コンテンツの配信と共に、コンテンツへのメタ情報の付与を行う。コンテンツへのメタ情報の付与の方法には、メタ情報をコンテンツ自体に内包する方法と、メタ情報をコンテンツとは別のファイルやストリームに格納する方法がある。メタ情報の記述には、例えば、映像の標準的な記述であるＭＰＥＧ−７やＸＭＬが利用
され、映像全体の記述や映像の部分、すなわち、場面やショットの記述が可能である。
【００４９】
クライアント２０は、図２に示すように、コンテンツ受信部２１と送信部２２と関連情報受信部２３と抽出部２４と提示部２５とから構成される。コンテンツ受信部２１は、コンテンツサーバ１０からメタ情報を付与されたコンテンツを受信する。抽出部２４は、コンテンツからのメタ情報を抽出する。送信部２２は、抽出したメタ情報を関連情報サーバ３０へ送信し、関連情報の検索を依頼する。関連情報受信部２３は、関連情報サーバ３０より検索の結果である関連情報を受信する。提示部２５は、コンテンツと関連情報を提示する。
【００５０】
抽出部２４でのメタデータを含んだコンテンツからのメタ情報の抽出の方法は、メタ情報をコンテンツ自体に内包している場合、例えば、コンテンツがＭＰＥＧ−２で圧縮された映像であり、メタ情報がＭＰＥＧ−２システム層のユーザ領域に記述されているときには、そのユーザ領域を抽出することによって行なわれ、また電子透かしを利用して埋め込まれているときには、専用の電子透かしの抽出方法によって抽出される。またメタ情報が別のファイルやストリームに格納されている場合は、そのファイルやストリームから抽出する。
【００５１】
関連情報サーバ３０は、図３に示すように、受信部３１と、送信部３２と、解析部３３と、種別変換部３４と、検索部３５と、関連情報データベース（ＤＢ）３６とから構成される。受信部３１は、クライアント２０からメタ情報を受信する。解析部３３は、受信したメタ情報を解析し、メタ情報が含む種別と個別情報を抽出する。種別変換部３４は、解析により得た種別を検索情報に変換する。検索部３５は、少なくとも抽出した個別情報を用い、さらに可能な場合には、変換により得た検索情報を用いて、関連情報データベース３６から関連情報を検索する。関連情報データベース３６には、関連情報が記憶されている。送信部３２は、クライアント２０へ関連情報を送信する。
【００５２】
ネットワーク４０は、コンテンツサーバ１０とクライアント２０と関連情報サーバとを相互に接続し、その間のデータ伝送を行う。
【００５３】
次に図１、図２及び図３を参照して、関連情報提示装置であるクライアント２０と関連情報検索装置である関連情報サーバ３０の動作を図４のフローチャートに従って説明する。
【００５４】
クライアント２０は、コンテンツサーバ１０が送信したメタ情報を付与したコンテンツをコンテンツ受信部２１で受信し、抽出部２４へ送る（Ｓ１０）。抽出部２４では、指示されたタイミングでコンテンツからメタ情報を抽出し、メタ情報を送信部２２へ送る（Ｓ２０）。このとき、コンテンツの部分に関するメタ情報だけではなく、コンテンツ全体に関わるメタ情報を送る場合もある。
【００５５】
ここで「指示されたタイミング」とは、例えば、コンテンツに付与されたメタ情報の記述を用いて、提示部２５が特定の出演者が登場する場面でタイミングを生成し、抽出部２４へ指示する。また事前に定めた一定の間隔毎にタイミングを生成し、抽出部２４へ指示してもよいし、センサや場面を認識するプログラム等によってタイミングを生成し、それを利用することも可能である。さらに利用者がタッチパネル式の画面にタッチするとか、キーボードから入力するとか、リモコンのボタンを押す等の操作を行うことにより、タイミングを生成することも可能である。
【００５６】
送信部２２では、メタ情報を関連情報サーバ３０へ送り、関連情報の検索を依頼する（３０）。
【００５７】
ここで、送信部２２からメタ情報を関連情報サーバ３０に送る際、同時に、ユーザの操作履歴や、ユーザのＩＤ、性別、年齢、居所、住所、及び、時刻、時期、契約サービス等の状況情報をサーバに送信することもある。
【００５８】
メタ情報を抽出した後のコンテンツは提示部２５へ送られ、利用者へ提示される。
【００５９】
次に関連情報サーバ３０は、クライアント２０が送信したメタ情報を受信部３１で受信し、解析部３３へ送る（Ｓ４０）。解析部３３では、メタ情報を解析して、メタ情報に含まれる種別と個別情報を抽出し、種別を種別変換部３４へ送り、個別情報を検索部３５へ送る（Ｓ５０）。
【００６０】
メタ情報がＭＰＥＧ−７やＸＭＬで記述されている場合、種別はメタ情報のタグに記載
されている。例えば、図５は映像の場面に関するメタ情報をＸＭＬで表現した例である。
ＭｅｄｉａＴｉｍｅＰｏｉｎｔタグ及びＭｅｄｉａＤｕｒａｔｉｏｎタグで囲まれた部分が、その場面の時間位置と場面の長さに関する情報を示し、ＳｔｒｕｃｔｕｒｅｄＡｎｎｏｔａｔｉｏｎタグで囲まれた部分が、構造化されたメタ情報が含まれていることを示し、Ｗｈｏタグで囲まれた部分に個別情報が記載されている。どの部分にどの情報が記載されているのかという情報は、事前に解析部３３に与えられている。この例では、個別情報が「水野ひろみ」であり、その種別が「Ｗｈｏ」であることがわかる。
【００６１】
種別変換部３４では、種別を検索キーワードや検索カテゴリ等の検索情報へ変換し、検索部３５へ送る（Ｓ６０）。
【００６２】
種別変換部３４での変換は、例えば、種別「Ｗｈｏ」を検索キーワードや検索カテゴリ名に変換する。変換は事前に定義された表や事前に与えられた辞書を用いて行なわれる。例えば、「Ｗｈｏ」は「出演者」というキーワードや「人物」という検索カテゴリに変換される。ここで、キーワードに変換されるか、検索カテゴリに変換されるか、それとも両方に変換されるかは、種別変換部３４の実装に依存する。以下の説明では両方に変換された場合について説明する。
【００６３】
クライアント２０から状況情報が送られてきた場合、その状況情報が種別変換部３４における変換に利用される。例えば利用者の年齢が３歳であった場合、「幼児向け」に限定された検索カテゴリが指定される。
【００６４】
検索部３５では、少なくとも個別情報を用い、さらに可能な場合には、検索キーワードや検索カテゴリ等の検索情報を用いて、関連情報データベースから検索を行い、関連情報を得て、送信部３２へ送られる（Ｓ７０）。例えば、検索カテゴリ「人物」と検索キーワード「出演者」と個別情報「水野ひろみ」から、最も適合した関連情報を得る。
【００６５】
送信部３２では、関連情報をクライアント２０へ送信する（Ｓ８０）。
【００６６】
前記では、関連情報データベース３６と検索部３５は、関連情報サーバ３０内に実装されているものとして説明したが、検索サーバとして別のサーバを用いて構成してもよい。また関連情報データベース３６は、関連情報の実体を管理している場合もあるし、関連情報のインデックスとＵＲＬを管理している場合がある。特に関連情報データベース３６が、動的に変化するコンテンツの関連情報をも管理している場合には、検索が行なわれた時点の新鮮なコンテンツから関連情報を検索することが可能となる。
【００６７】
クライアント２０は、関連情報サーバ３０が送信した関連情報を関連情報受信部２３で受信し、提示部２５へ送る（Ｓ９０）。提示部２５は、コンテンツと共に関連する関連情報を利用者に提示する（Ｓ１００）。
【００６８】
検索部３５が検索した関連情報が、ＸＭＬで記述されたコンテンツであった場合、提示
部２５では、元のコンテンツと受信したＸＭＬで記述されたコンテンツを、例えばホーム
ページ等の文書型のコンテンツとして、利用者に提示することができる。つまり利用者は、コンテンツとそのコンテンツの関連情報であるＸＭＬコンテンツを同時に視聴すること
ができる。
【００６９】
また関連情報にメタ情報が付与されている場合には、関連情報からメタ情報が抽出部２４で抽出される。その後、前記の方法と同様の方法によって、関連情報サーバ３０で関連情報が検索されて、クライアント２０ヘ送信される。このように関連情報に関する関連情報を検索により得ることもでき、より広い範囲で関連情報を得ることも可能となる。
【００７０】
このようにして、視聴中の映像や閲覧中の文書等のコンテンツの関連情報を取得し、利用者へ提示することが可能である。
【００７１】
［第２の実施形態］
第２の実施形態では、コンテンツサーバと関連情報サーバを兼ね備えたサーバ（以後、コンテンツ／関連情報サーバと略称する）からクライアントヘコンテンツと関連情報を提供する例について説明する。
【００７２】
図６は、本発明を関連情報提示装置であるクライアントと関連情報検索装置であるコンテンツ／関連情報サーバに適用した場合のシステム全体を示す構成図である。システムは、コンテンツ／関連情報サーバ５０とクライアント６０とそれらを相互に接続するネットワーク４０とから構成される。またネットワーク４０には、第１の実施形態で用いた同様のネットワークを利用することができる。
【００７３】
コンテンツ／関連情報サーバ５０は、図７に示すように、抽出部５１と、送信部５２と、解析部５３と、種別変換部５４と、検索部５５と、関連情報データベース５６とから構成される。抽出部５１は、コンテンツからのメタ情報を抽出する。解析部５３は、抽出したメタ情報を解析し、メタ情報が含む種別と個別情報を抽出する。種別変換部５４は、解析により得た種別を検索情報に変換する。検索部５５は、少なくとも個別情報を用い、さらに可能な場合には検索情報を用いて、関連情報データベース５６から関連情報の検索を行う。関連情報データベース５６には、関連情報が記憶されている。検索部５５は、検索により得た関連情報を送信部５２へ送る。また検索部５５は、関連情報を抽出部５１へ送り、同様の方法で関連情報をさらに検索することができる。送信部５２は、クライアント２０へ関連情報を送信する。
【００７４】
クライアント６０は、コンテンツを要求する際に、もしくはそれ以前に、利用者の操作履歴、ユーザのＩＤ、性別、年齢、居所、住所、及び、時刻、時期、契約サービス等の状況情報をサーバに送信することがある。この場合、第１の実施携帯の場合と同様に、検索情報への変換にその状況情報が利用される。
【００７５】
クライアント６０は、図８に示すように、受信部６１と、提示部６２、タイマー６３とから構成される。
【００７６】
受信部６１は、コンテンツ／関連情報サーバ５０から送られてくるコンテンツと関連情報を受信する。受信したコンテンツと関連情報は、提示部６２へ送られる。提示部６２は送られてきたコンテンツと関連情報とを提示する。
【００７７】
コンテンツと関連情報とをタイミングを一致させて提示部６２で提示するには、コンテンツのメタ情報に含まれる時間情報とタイマー６３から得られる時間情報を利用して、コンテンツに同期させて関連情報を提示部６２で提示する。
【００７８】
［第３の実施形態］
第３の実施形態では、放送局から放送された映像と音声のコンテンツをテレビ受像機で提示中に、その関連情報も提示する場合を例として説明する。
【００７９】
図９は、本発明を関連情報提示装置であるテレビ受像機と関連情報検索装置である関連情報サーバに適用した場合のシステム全体を示す構成図である。ここでテレビ受像機は、放送を受信する本来の機能の他に、クライアントとしての機能も備えているものとする。
システムは、放送局７０とテレビ受像機８０と関連情報サーバ３０とそれらを相互に接続するネットワーク４０とから構成される。またネットワーク４０には、第１の実施形態で用いた同様のネットワークを利用することができる。
【００８０】
放送局７０は、利用者が利用するテレビ受像機８０に対して、映像や音声のコンテンツを放送するための施設であり、テレビ放送を行う事業者等により管理されている。また放送局７０は、コンテンツの放送と共に、コンテンツへのメタ情報の付与を行う。
【００８１】
テレビ受像機８０は、図１０に示すように、第１の実施形態におけるクライアントと同様に構成され、コンテンツ受信部８１は、放送局７０からメタ情報を付与されたコンテンツを受信する。コンテンツ受信部８１での受信には、通常のテレビ受信機の受信機能を利用することができる。抽出部８４は、コンテンツからのメタ情報を抽出する。送信部８２は、抽出したメタ情報を関連情報サーバ３０へ送信し、関連情報の検索の依頼する。関連情報受信部８３は、関連情報サーバ３０より関連情報を受信する。提示部８５は、コンテンツと関連情報を提示する。これにも、通常のテレビ受信機の画像と音声を提示する機能を利用することができる。
【００８２】
関連情報サーバ３０は、第１の実施形態と同様の構成と機能を有しており、テレビ受信機８０から受信したメタ情報を用いて、メタ情報の付与されていたコンテンツの関連情報の検索を行い、その結果をテレビ受信機８０へ送信する。
【００８３】
ネットワーク４０は、テレビ受像機８０と関連情報検索サーバ３０との間を接続し、データを伝送する。
【００８４】
本実施形態において関連情報提示装置としてテレビ受像機を用い、関連情報検索装置として関連情報サーバを用いた場合の動作は、クライアントがネットワークを介してコンテンツを受信することを除き、第１の実施形態におけるクライアントと関連情報サーバの動作と同様であるので、ここでの説明は省略する。
【図面の簡単な説明】
【００８５】
【図１】第１の実施形態において、本発明をクライアントと関連情報サーバに適用した場合のシステム全体を示す構成図である。
【図２】第１の実施形態におけるクライアントの構成を示す図である。
【図３】第１の実施形態における関連情報サーバの構成を示す図である。
【図４】クライアント（関連情報提示装置）と関連情報サーバ（関連情報検索装置）の動作を示すフローチャートである。
【図５】映像の場面に関するメタ情報をＸＭＬで表現した例である。
【図６】第２の実施形態において、本発明をクライアントとコンテンツ／関連情報サーバに適用した場合のシステム全体を示す構成図である。
【図７】第２の実施形態におけるコンテンツ／関連情報サーバの構成を示す図である。
【図８】第２の実施形態におけるクライアントの構成を示す図である。
【図９】第３の実施形態において、本発明をテレビ受像機と関連情報サーバに適用した場合のシステム全体を示す構成図である。
【図１０】第３の実施形態におけるテレビ受像機の構成を示す図である。
【符号の説明】
【００８６】
１０    コンテンツサーバ
２０    クライアント（関連情報提示装置）
３０    関連情報サーバ（関連情報検索装置）
４０    ネットワーク
５０    コンテンツ／関連情報サーバ（関連情報検索装置）
６０    クライアント（関連情報提示装置）
７０    放送局
８０    テレビ受像機（関連情報提示装置）
【図１】
2005141507.tif 000003
【図２】
2005141507.tif 000004
【図３】
2005141507.tif 000005
【図４】
2005141507.tif 000006
【図５】
2005141507.tif 000007
【図６】
2005141507.tif 000008
【図７】
2005141507.tif 000009
【図８】
2005141507.tif 000010
【図９】
2005141507.tif 000011
【図１０】
2005141507.tif 000012