(57)【特許請求の範囲】
【請求項１】
映像中の各シーンまたは被写体に対する視聴者の指示に応じて関連情報を提供する情報提供装置であって、
予め設定された映像中のシーンまたは被写体に対するリンク情報の有効条件を蓄積しておく蓄積手段と、
映像中の各シーンまたは被写体に対する視聴者の指示を契機として、その時の映像の再生状況を抽出する抽出手段と、
該抽出された映像の再生状況から該蓄積されたリンク情報の有効条件を検索してリンクを決定する検索手段と、
該決定したリンク情報に定義されている関連情報を提示する関連情報提供手段とを具備し、
上記有効条件は映像の再生速度を限定する条件であり、上記映像の再生状況は映像の再生速度である
ことを特徴とする情報提供装置。
【請求項２】
映像中の各シーンまたは被写体に対する視聴者の指示に応じて関連情報を提供する情報提供装置であって、
予め設定された映像中のシーンまたは被写体に対するリンク情報の有効条件を蓄積しておく蓄積手段と、
映像中の各シーンまたは被写体に対する視聴者の指示を契機として、その時の映像の再生状況を抽出する抽出手段と、
該抽出された映像の再生状況から該蓄積されたリンク情報の有効条件を検索してリンクを決定する検索手段と、
該決定したリンク情報に定義されている関連情報を提示する関連情報提供手段とを具備し、
上記有効条件は映像の拡大率を限定する条件であり、上記映像の再生状況は映像の拡大率である
ことを特徴とする情報提供装置。
【請求項３】
コンピュータを、請求項１又は２に記載の情報提供装置の各手段として機能させる情報提供プログラム。
【請求項４】
請求項３に記載の情報提供プログラムを記録したコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、コンピュータシステムを用いた各種情報提供技術に関わり、特に情報間のハイパーリンク技術によって情報提供を行う方法および装置に関する。
【０００２】
【従来の技術】
従来、ハイパーリンクなる技術によって、関連する情報間を渡り歩きながら情報を享受することができるシステムが広く普及している。例えばインターネット上のホームページにおいては、テキスト情報内のキーワードに対して関連情報へのリンクが定義されており、そのキーワードを指示することによってリンク先のサイトにある関連情報を引き出すことができる。このようなハイパーリンク技術によって、情報の関連付けを行う方法が広く利用されており、これによって情報受給者は自分の所望する情報へ比較的容易に到達することができるようになっている。このハイパーリンク技術を映像情報に適用して、映像中の被写体を指示することによって、その映像中の被写体に関する情報を享受できるようなシステムが文献「マルチメディアアプリケーションのデータモデルと開発環境の考察」（池田哲夫、平野泰宏、湯口徹、星隆司：情報処理論文誌、Ｖｏｌ．４０，Ｎｏ．１，ｐｐ．２−１１，１９９９年）等で提案されている。
【０００３】
上記文献における方式では、映像内の被写体情報を特定する情報として動画像上の目的とする被写体を囲むような矩形を定義し、この矩形情報（映像のフレーム番号、矩形の座標）に関連する情報を定義することで、例えば水族館の泳ぐ魚の像をキーとして、その魚（正確にはその魚を囲む矩形領域）を指示することでその魚についての詳細な情報を引き出せるような方式を実現している。
【０００４】
【発明が解決しようとする課題】
しかしながら、上記文献に示されているような従来の技術による映像のハイパーリンクシステムでは、次のような問題がある。
【０００５】
従来の手法では、被写体情報およびそれに関連する情報は映像に対して固定的に定義されており、映像の再生状態や視聴者の視聴状況に関わらず一意な情報の提示しかできないものとなっていた。
【０００６】
これは、視聴者にとってみると、対象とする被写体を正しく指示することが可能であり、かつその被写体に関する情報を取得したいという目的をもっている場合には有効であるが、映像の種類やその再生状態によっては、必ずしも指示した被写体に関する情報を得ることが目的ではない場合もあり、その場合に上記の手法は有効ではない。しかもそのような場面は数多く存在する。
【０００７】
例えば、自動車レースの映像を例にとると、従来の技術においては映像に写っている自動車に対してリンク情報が定義されていた場合、自動車を正しく指示するとその自動車に関する情報が表示される。しかし、自動車レースの映像においては自動車が高速で映像中を動いており、またシーンの切り替えが頻繁に行われることが多く、たとえ目的の自動車があったとしても、通常の再生状態では正しく目的の自動車を指示することは非常に難しいと考えられる。そのため視聴者は、その自動車自体に興味を持っている場合、自動車を正しく指示することができるように映像をゆっくり再生すると言った操作をすることがある。またこの場合、通常の再生状態において映像を指示する時の視聴者の一般的な関心は、「どこのコースで行われているレースであるか」とか、「現在の順位はどうなっているか」といったように、個々の被写体に関してではなく映像全体について向けられている場合も多いと考えられる。
【０００８】
このように映像の再生状態によって、視聴者が映像を指示する際の興味の中心は変化する可能性が高い。すなわち、映像内のある特定の個所が指示されたとしても、その状況に応じて異なる目的をもっていることが多く、単純に映像内の指示された領域のみから関連情報を提供することは、視聴者の意図を反映しないものとなる。
【０００９】
本発明は、上述した問題に鑑みてなされたものであり、その課題とするところは、例えば映像ハイパーリンク等において、視聴者が映像または映像中の被写体等を指示した際、映像の再生状態に応じて異なるリンク情報を提供することによって、視聴者の関心に沿った関連情報を提供することができる情報提供装置、情報提供プログラムおよびそのプログラムを記録した記録媒体を提供することにある。
【００１０】
上述した課題を解決するために、本発明は、映像中の各シーンまたは被写体に対する視聴者の指示に応じて関連情報を提供する情報提供装置であって、予め設定された映像中のシーンまたは被写体に対するリンク情報の有効条件を蓄積しておく蓄積手段と、映像中の各シーンまたは被写体に対する視聴者の指示を契機として、その時の映像の再生状況を抽出する抽出手段と、該抽出された映像の再生状況から該蓄積されたリンク情報の有効条件を検索してリンクを決定する検索手段と、該決定したリンク情報に定義されている関連情報を提示する関連情報提供手段とを具備し、上記有効条件は映像の再生速度を限定する条件であり、上記映像の再生状況は映像の再生速度であることを特徴とする情報提供装置を手段とする。
【００１１】
また、映像中の各シーンまたは被写体に対する視聴者の指示に応じて関連情報を提供する情報提供装置であって、予め設定された映像中のシーンまたは被写体に対するリンク情報の有効条件を蓄積しておく蓄積手段と、映像中の各シーンまたは被写体に対する視聴者の指示を契機として、その時の映像の再生状況を抽出する抽出手段と、該抽出された映像の再生状況から該蓄積されたリンク情報の有効条件を検索してリンクを決定する検索手段と、該決定したリンク情報に定義されている関連情報を提示する関連情報提供手段とを具備し、上記有効条件は映像の拡大率を限定する条件であり、上記映像の再生状況は映像の拡大率であることを特徴とする情報提供装置を手段とする。
【００１２】
また、コンピュータを、請求項１又は２に記載の情報提供装置の各手段として機能させる情報提供プログラムを手段とする。
【００１３】
さらに、請求項３に記載の情報提供プログラムを記録したコンピュータ読み取り可能な記録媒体を手段とする。
【００１４】
本発明では、映像に関連する情報のリンク情報について、位置情報やメタ情報など映像への対応を示す情報のみでなく、個々のリンク情報が有効となり得る映像の再生状態等をリンク情報の有効条件としてあわせて定義可能とし、視聴者による映像の再生状態を抽出・取得して、該リンク情報の有効条件と照らし合わせて判断することにより、有効なリンク情報を自動的に変更できるようにする。
【００１５】
【発明の実施の形態】
以下、本発明の実施の形態について図を用いて説明する。
【００１６】
図１のフロー図に、本発明の原理的な処理手順を示す。本発明によるハイパーリンク情報提供方法では、まず映像中の被写体などに設定されたリンク情報とともに、そのリンク情報を有効にするための条件として、映像の再生速度や表示している大きさなどの再生条件を定義（設定）し、蓄積手段のリンク情報テーブルに蓄積しておく。
【００１７】
次に、例えば、視聴者が映像中のある場所を指示（イベントの発生）した際に、指示された時のフレーム情報や指示されたポイントの位置情報と併せて、そのターゲットである映像の表示・再生状態に関する情報を取得する（処理１１）。
【００１８】
次に、視聴者の操作した内容（イベントの種別・内容）と映像の表示・再生状態とからリンク情報テーブルを検索する（処理１２）。
【００１９】
次に、その時に有効となるリンクを上記検索により決定し、それに対応したアクション（関連情報の表示等）の処理を行う（処理１３）。
【００２０】
この方法によれば、同じ映像を視聴中であっても、視聴者の指示に対して、その表示・再生状態によって適切な関連情報を提供することが可能となる。
【００２１】
例えば、サッカーなどのスポーツ映像を例にとると、個々の選手が小さくてかつ動きが速いような場合には、個々の選手に関する情報ではなく、その試合全体に関する情報を提供・表示し、同じ映像でも大きさを拡大して表示していたり、速度を落としてみている状況で個々の選手に該当するような場所が指示された場合には、その対象となる選手に関する情報を提示することが可能となる。
【００２２】
図２は、本発明における一実施形態例について説明する装置構成図であり、その構成部分の一部もしくは全部もしくは複数が本発明の手段を構成している。本実施形態例は、映像再生装置に蓄積されている映像に対して、映像を再生しながらインタラクションすることによって、その映像の視聴状態に応じた関連情報の提示を受けることができるようにするものである。
【００２３】
図２に示す実施形態例は、表示する映像情報などを蓄積する映像蓄積部１００と、蓄積されている映像などの情報の再生を制御する再生制御部１０１と、映像情報などを表示する映像表示部１０２と、視聴者からユーザ入力などを受け付ける入力部１０３と、映像の表示や再生の状態を抽出する情報抽出部１０４と、リンク情報を検索する検索部１０５と、映像中に設定されているリンク情報およびそのリンクが有効となる条件を蓄積しておくデータベースやファイルなどのリンク情報蓄積部１０６と、それぞれのリンク情報に対応して、提示する関連情報やアクションなどの情報を蓄積しておくデータベースやファイルなどの関連情報蓄積部１０７と、視聴者からのユーザ入力による入力イベントがあった際に有効となる適切なリンク情報を決定するイベント制御部１０８とから構成される。
【００２４】
上記の構成において、予め設定・定義された映像中のシーンまたは被写体に対するリンク情報の有効条件は、リンク情報蓄積部１０６のリンク情報テーブルに蓄積される。情報抽出部１０４は、映像中の各シーンまたは被写体に対する指示入力（入力イベント）を契機として、その時の映像の再生状況を抽出する。検索部１０５は、入力イベントおよび抽出された映像の再生状況からリンク情報テーブルのリンク情報の有効条件を検索し、有効となるリンク情報を検索する。イベント制御部１０８は、検索結果から有効なリンクを決定し、関連情報蓄積部１０７内の、該決定したリンクに定義されている提示する関連情報やアクション情報に関して、映像表示部１０２に提示・表示したり、実行したりする。
【００２５】
また、図３は上記リンク情報蓄積手段１０６における蓄積例を示す図である。ここで、ＩＤ１のカラムでは、映像中の矩形（座標（５０，１００）と（３００，４００）を対角の頂点とする矩形）で表される被写体に対しては、”ｏｂｊｅｃｔ１．ｊｐｇ”というファイル名の静止画を表示するというアクションが関連付けられており、このリンクが有効となるのは、元の映像が再生速度０．５未満（例えば、１秒当り１５フレーム未満）で再生されている場合であることを示している。また、ＩＤ２のカラムでは、ＩＤ１と同じ対象の被写体に対して”ｏｂｊｅｃｔ２．ｍｐｇ”というファイル名の動画再生が関連付けられており、リンクの有効条件として映像が再生速度０．５以上（例えば、１秒当り１５フレーム以上）で再生されている場合であることを示している。同様に、ＩＤ３では映像中のある時間的な区間に対して、ＩＤ４では映像中の被写体に対して”○山Ｘ子”というメタ情報が付与された被写体に対して、それぞれアクションが定義されており、その有効条件が、”通常速度での再生時（例えば１秒当り３０フレーム）”・”視聴者が被写体の大きさを２倍に拡大した時”といったような条件が併せて定義されていることを示している。
【００２６】
上記再生制御部１０１では、映像情報をその大きさや再生速度などを自由に変更しながら映像表示部１０２上に再生することができる。入力部１０３では、マウスなどのポインティングデバイスや音声入力装置などからの音声入力などのユーザ入力を受け付けることができる。
【００２７】
今、映像情報が再生速度１．０で再生表示されているものとする。このとき、ユーザがある時刻（ｔ０）において、画面上のあるポイント（例えば、表示画面上の座標（１００，２００）のポイント）を指示したとすると、そのとき情報抽出部１０４では、映像表示部１０２における再生映像の再生位置や表示している大きさまたは再生速度などの再生状態を取得する。ここでは時刻ｔ０、表示フレーム１０、再生速度１．０、指示座標（１００，２００）といった情報が取得される。
【００２８】
検索部１０５では、入力部１０３で受け付けたユーザ入力の内容と、情報抽出部１０４で取得したその時点での映像の表示状態を元にして、リンク情報蓄積部１０６にあらかじめ作成され蓄積されているリンク情報を検索する。
【００２９】
図３の例では、指示された座標の情報から、ＩＤ１およびＩＤ２の被写体が条件に合致するが、表示フレーム情報やメタ情報からはＩＤ３およびＩＤ４は対象外となる。さらに、ＩＤ１とＩＤ２については、今ここでの動画の再生速度が１．０であるということから、ＩＤ１は無効となり、ＩＤ２のリンク情報のみが有効となる。
【００３０】
イベント制御部１０８では、この検索結果を元にして、関連情報蓄積部１０７にあらかじめ蓄積されている関連情報を利用してアクションを決定し、再生制御部１０１は、イベント制御部１０８で決定されたアクションの内容にしたがって情報の提示などを行う。ここではアクション情報として定義されている”ｏｂｊｅｃｔ２．ｍｐｇ”素材を再生する。
【００３１】
このように、ユーザのインタラクション情報のみでなく、映像の再生状態を有効条件として利用することで、映像の表示・再生状態に応じた関連情報を提示することが可能となる。
【００３２】
以上、本発明を前記実施形態例に基づき説明したが、本発明は、前記実施形態例に限定されるものではなく、その要旨を逸脱しない範囲において、種々変更可能である。例えば、
（１）映像蓄積部１００
上記実施形態例では、再生される映像がハードディスクなどの記憶媒体に蓄積されている場合について説明したが、情報は蓄積映像に限定されるものではなく、本発明を適用する分野によっては、通信回線や放送波を利用して送受信された情報であっても構わない。
【００３３】
（２）入力部１０３
上記実施形態例における入力部１０３については、その入力はマウスでのクリックやタッチスクリーンデバイスを利用した画面上の直接指示、キーボードからのキーワードの入力、音声入力などのさまざまな手段があり、いずれかの方法に限定するものではない。
【００３４】
（３）情報抽出部１０４
上記実施形態例における情報抽出部１０４について、ここで取得する情報は、映像の先頭位置からのフレーム数や時刻情報、または表示されている映像のＣＲＴなどの表示部上における物理的な位置、例えば左上隅から右方向へ何ドット、下方向へ何ドットの位置であるかなどのさまざまな情報を単独で、もしくは組み合わせて利用する方法があり、いずれかの手段に限定するものではない。
【００３５】
なお、図１で示した処理手順をコンピュータにて実行させることができること、あるいは図２に示した機能の全部もしくは一部についてコンピュータを用いて実現できることは言うまでもなく、コンピュータにその処理手順を実行させるためのプログラム、あるいはコンピュータでその各部の処理を実現させるためのプログラムを、コンピュータが読み取り可能な記憶媒体、例えばＦＤ、ＭＯ、メモリ、ＣＤなどの記憶媒体に記憶して保存したり提供または配布したりすることが可能である。また、該プログラムは、インターネットや電子メールなど、ネットワークを通して提供または配布することが可能である。
【００３６】
【発明の効果】
上記に説明したように、本発明によれば、映像の再生状態や表示状態に応じて、異なった関連情報を提供することができるため、情報提供者は、映像に対する関連情報をより多様な形態で提供することができ、例えば視聴者の意図に、より近いコンテンツを作成することも可能となる。
【図面の簡単な説明】
【図１】本発明の原理を説明するフロー図
【図２】本発明の一実施形態例を示す装置構成図
【図３】本発明のリンク情報の構成例を示す図
【符号の説明】
１００…映像蓄積部
１０１…再生制御部
１０２…映像表示部
１０３…入力部
１０４…情報抽出部
１０５…検索部
１０６…リンク情報蓄積部
１０７…関連情報蓄積部
１０８…イベント制御部
【図１】
0004006194.tif 000002
【図２】
0004006194.tif 000003
【図３】
0004006194.tif 000004