(57)【特許請求の範囲】
【請求項１】
予め映像ストリームに対する補足情報として、映像ストリーム中に発生した事象の種類を示す事象情報および前記事象情報に関する付加情報が生成された映像ストリームを対象として、前記映像ストリームに対する補足情報を利用して検索を行う映像検索装置において、
利用者が当該映像ストリーム中に含まれる、予め入手可能な事象を含む映像ストリームと、当該映像ストリーム中に発生した事象の種類を示す事象情報と加算可能な前記付加情報とを入力する映像情報入力処理手段と、
利用者が予め入手可能な情報であって、前記映像ストリームのうち同一の前記事象情報に対する複数の前記付加情報を加算する統計処理により得られる統計情報を前記事象毎に複数生成する統計情報生成手段と、
利用者からの指定により前記統計情報生成手段によって生成された複数の統計情報の中から映像検索に使用する統計情報を指定する指定手段と、
前記指定手段によって指定された前記統計情報に基づいて、前記映像ストリームの検索を行う映像検索手段と、
を備えたことを特徴とする映像検索装置。
【請求項２】
前記統計情報生成手段で生成する統計情報は、映像ストリーム中の所定の映像シーン中に発生した同一の事象の経過に基づく情報であることを特徴とする請求項１に記載の映像検索装置。
【請求項３】
前記映像ストリームはスポーツ映像であり、かつ、前記統計情報は、前記映像ストリーム中の所定の映像シーン中に発生した同一の事象の経過に基づく種々の成績情報であることを特徴とする請求項２に記載の映像検索装置。
【請求項４】
前記成績情報は前記スポーツ映像中の得点情報であることを特徴とする請求項３に記載の映像検索装置。
【請求項５】
前記統計情報生成手段は、前記映像ストリームに対する補足情報として存在する事象情報および付加情報のうち、予め指定されている事象情報のみの統計処理を行って、前記指定されている事象情報の統計情報を生成することを特徴とする請求項１〜４のいずれか一つに記載の映像検索装置。
【請求項６】
前記補足情報の付加情報は、対象とするオブジェクトを示す属性情報を有しており、
前記指定手段は、前記統計情報の指定に加えて、前記属性情報の指定が可能であり、
前記検索条件生成手段は、前記指定手段で属性情報が指定されている場合、前記検索条件の一つとして前記指定された属性情報を有する補足情報に対応する映像のみを映像検索の対象範囲とする制約条件を生成することを特徴とする請求項１〜５のいずれか一つに記載の映像検索装置。
【請求項７】
前記検索条件生成手段は、前記指定手段で指定された統計情報から映像検索のための検索条件を生成すると共に、前記補足情報から重要度を判定するためのパラメータ値を計算し、前記指定手段で指定された統計情報に応じてパラメータの重み値を設定し、前記パラメータ値に前記重み値を乗算した値を重要度判定パラメータとして生成し、
前記映像検索手段は、前記検索条件を用いて映像ストリームの検索を行う際に、前記検索条件と合致する補足情報を有する映像を検索すると共に、前記重要度判定パラメータを用いて、その映像の重要度を判定し、重要度の高い映像を優先的に検索することを特徴とする請求項６に記載の映像検索装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、予め映像ストリーム（音声を含む）に対する補足情報として、映像ストリーム中に発生した事象の種類を示す事象情報および該事象情報に関する付加情報が生成された映像ストリームを対象として、映像ストリームに対する補足情報を利用して検索を行う映像検索装置に関する。
【０００２】
【従来の技術】
近年、コンピュータ・ハードウェア技術、情報処理技術の進歩や、インターネット、デジタル衛生放送の普及に伴って、日常的に様々な映像を利用することが可能となっている。このため、映像の有する情報としての価値・多様性・娯楽性がさらに重要な意味を持つようになり、従来から利用されているテレビジョン放送やビデオの再生等のように、映像を連続的に再生して視聴することに加えて、インデックスを付与して構造化した映像から所望の映像データを検索して視聴したり、情報を収集したり、ダイジェスト版を作成する等、多彩な利用方法が提案されている。
【０００３】
例えば、２０００年に開始が予定されているＢＳディジタル放送では、これまでのストリームとしての番組放送に加えて、コンピュータ・データのような汎用的なディジタル情報も多重化して送ろうと計画されている。映像，テキスト，静止画像，関連情報等のマルチメディア情報を相互に関連付け、構造化することにより、制作，配信，閲覧，検索等の各処理において、より高度で効率的なサービスが可能となると考えられる。
【０００４】
情報放送においては、ディジタル化によるコンテンツの増大や、ＴＶゲーム，その他の影響による相対的なＴＶ視聴時間の低下、さらにＤＶＤ等の記録メディアの技術革新等が背景となり、例えば番組を一度蓄積してからノンリニアに視聴したり、蓄積した番組を高度な操作により加工して利用するという視聴形態も増加してくると考えられている。
【０００５】
ここで、関連する技術として、本出願人らが、これまで提案してきたノンリニア視聴形態におけるダイジェスト作成システムおよび映像の検索方法について説明する。本出願人は、まず、補足情報がインデックスとして付加された映像を対象として、そのインデックスを用いて重要場面と想定される映像シーンを検索し、映像のダイジェスト版（ダイジェスト映像）を作成するダイジェスト作成システムを考案し、このダイジェスト作成システムにおいて、重要場面と判定された映像シーンには音声解説も含まれているため、断面的なインデックスの概要を説明文として生成するだけで十分であるという考えで映像内容の説明文生成処理を考えてきた。また、インデックスを用いてダイジェスト映像を作成する際に、映像を利用する視聴者（利用者）の嗜好を反映したダイジェスト映像を作成するダイジェスト作成装置の提案も行っている。
【０００６】
なお、上記の技術の詳細は、以下の（１）〜（３）によって明らかにされている。
（１）  橋本隆子、他：「番組インデックスを利用したダイジェスト視聴方式の検      討」、映像情報メディア学会放送方式研究会予稿集、１９９９年３月、ｐ      ｐ．７−１２。
（２）  橋本隆子、他：「番組インデックスを利用したダイジェスト作成方式の試      作」、データ工学ワークショップ（ＤＥＷＳ’９９）予稿集ＣＤ−ＲＯＭ      、１９９９年３月。
（３）  橋本隆子、他：「ＴＶ受信端末におけるダイジェスト作成方式の試作」、      ＡＤＢＳ９９予稿集、１９９９年１２月。
【０００７】
【発明が解決しようとする課題】
ところで、映像検索において、利用者が映像を検索するための検索条件を入力する場合、次の３つの方法が想定される。
第１に、映像上で起こった事象（イベント）を検索条件として利用する方法。
第２に、利用者の好みのオブジェクト（例えば、映像中に登場する人物や、場所など）を検索条件として利用する方法。
第３に、抽象度の高い用語を検索条件として利用する方法。
なお、ここで抽象度の高い用語とは、所定の複数の事象が発生した結果、始めて意味が成立する用語を示す。例えば、野球映像において、『逆転』という用語は、先ず、一方のチームが得点するという事象が発生し、その後、他方のチームが一方のチームの得点より大きな得点を挙げるという事象が発生した時点で意味が成立する用語である。
【０００８】
上記第１および第２の方法で検索条件を指定する場合、利用者は予め映像上でどのような事象が起きているか、どのようなオブジェクトが表示されているかなどの情報を知っていなければならないと考えられる。しかしながら、利用者が映像検索を行う場合、必ずしも映像の内容を知っているとは限らず、あまり前知識（予備知識）のない状態で映像の検索を行う場合には、必ずしも使い勝手が良いとは言えないという問題点があった。
【０００９】
一方、野球映像や、サッカー映像などのスポーツ映像の場合、得失点情報、安打情報のような成績情報は、容易に入手できる。このような成績情報は、例えば、スポーツ新聞、ＨＰ（ホームページ）、ＴＶ（テレビ）画面上の表示などで必ずと言っていいほど記述される情報である。また、このような成績情報は、番組インデックスなど、映像の補足情報として映像に付加される情報の統計を取ることでも容易に算出可能である。
【００１０】
しかしながら、従来の技術によれば、得点情報のような成績情報（統計情報）だけを知っている場合、映像の検索を行うことはできるが、必ずしも重要な場面を検索することはできなかった。
例えば、重要な場面の検索にあたり、成績情報（統計情報）を表す映像シーンを検索結果として取り出してくるだけでは、利用者が望む検索結果になるとは限らない。利用者は、検索にあたって検索結果として得られる各映像シーンの最大長（時間の長さ）や、検索結果の映像シーンの総合計（総時間）などを検索時の制約条件として指定することもでき、このような場合、単に、成績情報を表す映像シーンを検索結果として集めただけでは、以下の理由により、この制約条件を満たす結果になるとはかぎらない。
【００１１】
先ず、検索条件と合致する全ての映像シーンを集めても、利用者が指定した検索結果の総合計に満たない場合がある。
また、検索条件と合致する全ての映像シーンを集めると、利用者が指定した検索結果の総合計を超える場合がある。
さらに、成績情報が示す映像シーンを集めただけでは、映像の内容の特徴を表すとは限らない。
【００１２】
具体的には、野球映像において、１対０であった場合、得点シーンはわずか１シーンであり、これはおそらく利用者が指定した検索結果の総合計に満たないと思われる。また、試合が投手戦であったり、残塁数が多いなどの特徴があったとしても、その特徴を抽出（検索）することができない。さらに、９対７のように多くの得点が入った場合、得点シーンを全て集めると、１５シーン（得点の合計値に相当）となって利用者が指定した検索結果の総合計を超えることも考えられる。この場合には、各得点シーンのうち、どの映像シーンが重要であるかを決めなければならないが、得点情報のような成績情報（統計情報）のみでは、重要な場面を決めることはできない。
【００１３】
本発明は上記に鑑みてなされたものであって、利用者が映像に対して前知識（予備知識）がなく、得点情報などのような成績情報（統計情報）のみを知っている場合でも、重要な場面（映像）を容易に検索できるようにすることを目的とする。
【００１４】
【課題を解決するための手段】
上記の目的を達成するために、請求項１に係る映像検索装置は、予め映像ストリームに対する補足情報として、映像ストリーム中に発生した事象の種類を示す事象情報および前記事象情報に関する付加情報が生成された映像ストリームを対象として、前記映像ストリームに対する補足情報を利用して検索を行う映像検索装置において、利用者が当該映像ストリーム中に含まれると予め入手可能な事象を含む映像ストリームと、当該映像ストリーム中に発生した事象の種類を示す事象情報と加算可能な前記付加情報とを入力する映像情報入力処理手段と、利用者が予め入手可能な情報であって、前記映像ストリームのうち同一の前記事象情報に対する複数の前記付加情報を加算する統計処理により得られる統計情報を前記事象毎に複数生成する統計情報生成手段と、利用者からの指定により前記統計情報生成手段によって生成された複数の統計情報の中から映像検索に使用する統計情報を指定する指定手段と、前記指定手段によって指定された前記統計情報に基づいて、前記映像ストリームの検索を行う映像検索手段と、を備えたものである。
【００１５】
また、請求項２に係る映像検索装置は、請求項１に記載の映像検索装置において、前記統計情報生成手段で生成する統計情報は、映像ストリーム中の所定の映像シーン中に発生した同一の事象の経過に基づく情報であるものである。
【００１６】
また、請求項３に係る映像検索装置は、請求項２に記載の映像検索装置において、前記映像ストリームはスポーツ映像であり、かつ、前記統計情報は、前記映像ストリーム中の所定の映像シーン中に発生した同一の事象の経過に基づく種々の成績情報であるものである。
【００００】
また、請求項４に係る映像検索装置は、請求項３に記載の映像検索装置において、前記成績情報は前記スポーツ映像中の得点情報であるものである。
【００１７】
また、請求項５に係る映像検索装置は、請求項１〜４のいずれか一つに記載の映像検索装置において、前記統計情報生成手段が、前記映像ストリームに対する補足情報として存在する事象情報および付加情報のうち、予め指定されている事象情報のみの統計処理を行って、前記指定されている事象情報の統計情報を生成するものである。
【００１８】
また、請求項６に係る映像検索装置は、請求項１〜５のいずれか一つに記載の映像検索装置において、前記補足情報の付加情報が、対象とするオブジェクトを示す属性情報を有しており、前記指定手段が、前記統計情報の指定に加えて、前記属性情報の指定が可能であり、前記検索条件生成手段が、前記指定手段で属性情報が指定されている場合、前記検索条件の一つとして前記指定された属性情報を有する補足情報に対応する映像のみを映像検索の対象範囲とする制約条件を生成するものである。
【００１９】
また、請求項７に係る映像検索装置は、請求項６に記載の映像検索装置において、前記検索条件生成手段は、前記指定手段で指定された統計情報から映像検索のための検索条件を生成すると共に、前記補足情報から重要度を判定するためのパラメータ値を計算し、前記指定手段で指定された統計情報に応じてパラメータの重み値を設定し、前記パラメータ値に前記重み値を乗算した値を重要度判定パラメータとして生成し、前記映像検索手段は、前記検索条件を用いて映像ストリームの検索を行う際に、前記検索条件と合致する補足情報を有する映像を検索すると共に、前記重要度判定パラメータを用いて、その映像の重要度を判定し、重要度の高い映像を優先的に検索するものである。
【００２０】
【発明の実施の形態】
以下、本発明の映像検索装置を適用したダイジェスト作成システムを一実施の形態として、添付の図面を参照しつつ詳細に説明する。
【００２１】
以下に、本発明の実施の形態について、
（１）ハードウェア構成
（２）映像検索装置の機能ブロック図
（３）前提条件
（４）映像検索処理
の順で詳細に説明する。
【００２２】
（１）ハードウェア構成
図１は、本実施の形態の映像検索装置を適用したダイジェスト作成システムの概略構成図である。図１に示すダイジェスト作成システムは、一例として、図示しない放送局から放送された映像情報（映像ストリームおよび補足情報）を受信するアンテナ１０１と、本発明の映像検索装置としての機能およびダイジェスト映像を作成する機能を有したセットトップボックス１０２と、受信した映像情報の映像を再生したり、検索結果を表示したり、作成したダイジェスト映像を再生するテレビ受像機１０３と、セットトップボックス１０２を操作するためのリモコン１０４と、映像情報（映像ストリームおよび補足情報）を記録した光ディスク１０５から映像情報を読み取るための光ディスクドライバー２０８と、を備えている。
【００２３】
図２は、図１に示したセットトップボックス１０２の概略構成を示すブロック構成図である。セットトップボックス１０２は、アンテナ１０１を介して映像情報の受信処理を行うチューナ・モジュール２０１と、受信した映像情報を用いて後述する映像検索処理およびダイジェスト作成処理を実行するＣＰＵ２０２と、ブートプログラム等を記憶したＲＯＭ２０３と、ＣＰＵ２０２のワークエリアとして使用されるＲＡＭ２０４と、チューナ・モジュール２０１で受信された映像情報を蓄積するためのハードディスク２０５と、リモコン１０４を使用してまたは直接に利用者が映像検索のための各種指定および入力を行うための操作モジュール２０６と、テレビ受像機１０３が接続され、映像や音声をテレビ受像機１０３に入力するための端子モジュール２０７と、光ディスク１０５から映像情報を入力するための光ディスクドライバー２０８と、上記各部を接続するためのバス２０９と、を備えている。
【００２４】
（２）映像検索装置の機能ブロック図
次に、図３の機能ブロック図を参照して、ダイジェスト作成システムの映像検索装置３００の概略構成について説明する。なお、本実施の形態では、映像検索装置３００の各部が、図１および図２に示したダイジェスト作成システムのハード構成を使用することを前提に、アプリケーション（ソフトウェア）として実現されているものとする。
【００２５】
映像ストリーム中に発生した事象の種類を示す事象情報および事象情報に関する付加情報からなる補足情報と、映像ストリームとを入力する映像情報入力処理部３０１と、映像情報入力処理部３０１から補足情報を入力して、事象情報および付加情報を用いた統計処理を行って統計情報を生成する成績情報生成処理部３０２と、成績情報生成処理部３０２で生成した統計情報の中から映像検索に使用する統計情報を指定する指定処理部３０３と、指定処理部３０３で指定された統計情報を入力し、統計情報から映像検索のための検索条件を生成する検索条件生成処理部３０４と、映像情報入力処理部３０１から映像ストリームおよび補足情報を入力し、検索条件生成処理部３０４から検索条件を入力し、検索条件に基づいて映像ストリームの検索を行い、検索結果を出力する映像検索処理部３０５と、から構成される。
【００２６】
ここで、成績情報生成処理部３０２は、映像ストリームに対する補足情報として存在する事象情報および付加情報のうち、予め指定されている事象情報または／および付加情報のみの統計処理を行って、指定されている事象情報または／および付加情報の統計情報を生成する。
【００２７】
また、指定処理部３０３は、テレビ受像機１０３およびリモコン１０４を制御して、成績情報生成処理部３０２が生成した統計情報をテレビ受像機１０３で表示し、リモコン１０４を用いて利用者に映像検索に使用する統計情報を指定させる。
【００２８】
なお、図１および図２に示したダイジェスト作成システムの構成はあくまで一例であって、キーボード、ディスプレイ画面、通信機能、光ディスクドライバー等を備えた一般的なパーソナルコンピュータで構成することも可能であるのは明らかであり、本発明の映像検索装置の各処理部を実行することが可能であれば、どのような構成であっても良い。
【００２９】
（３）前提条件
本実施の形態の映像検索装置３００は、予め映像ストリームに対する補足情報として、映像ストリーム中に発生した事象の種類を示す事象情報および事象情報に関する付加情報が生成された映像ストリームを対象として、映像ストリームに対する補足情報を利用して検索を行うものである。
【００３０】
また、補足情報は、映像に付加された情報としてのメタデータであり、映像ストリーム中に発生した事象を定義する事象情報や、各事象情報毎に、その事象情報に関する各種の情報が設定された付加情報などによって構成されている。
なお、事象情報は事象毎に複数の種類存在する。付加情報も１つの事象情報に対して基本的には複数存在する。さらに、本実施の形態では、映像ストリームの構造を定義する情報（構造情報）が事象情報の１種類として存在している。
【００３１】
以下に説明する本実施の形態においては、プロ野球中継映像を映像ストリームの例とし、この映像ストリームに対し、予め事象情報をインデックス（事象インデックス）として事象情報と付加情報のインデックス付けを行い、プロ野球中継映像と補足情報（事象情報および付加情報）とを含む映像情報をダイジェスト作成システムに入力するものとする。
【００３２】
図４は、野球中継映像中に発生する事象（イベント）を定義するために用いる事象情報およびその事象情報に関する付加情報の例を示す説明図である。図４において、例えば「game」インデックスは、試合の開始をイベントとして定義するインデックスである。この「game」インデックスは、試合開始時間，チーム名，球場名，日付等の付加情報が付加されて構成される。また、「batter」インデックスは、各打者の登場（打席の開始）をイベントとして定義するインデックスである。この「batter」インデックスは、時間，打者名，相手投手名，出塁中のランナーがいる場合には塁およびランナー名等の付加情報が付加されて構成される。さらに、「hit」インデックスは、ある打者が１塁打を打ったことをイベントとして定義するインデックスである。この「hit」インデックスは、時間，打球の飛んだ場所（ゾーン）等の付加情報が付加されて構成される。
【００３３】
また、図５は、西部対ダイエーの野球映像を例として、補足情報である事象情報（事象インデックス）と付加情報が作成された例を示す説明図である。
【００３４】
以下では、この図５に示すような補足情報を含む映像情報を、映像検索装置３００が、映像情報入力処理部３０１を介して入力し、本発明の映像検索処理を実行するものである。
【００３５】
（４）映像検索処理
以上の構成において、図６のフローチャートを参照して、本実施の形態の映像検索装置３００による映像検索処理について説明する。
利用者が、ダイジェスト作成システムにおいて、対象となる映像情報を選択し、映像検索処理の実行を入力すると、映像情報入力処理部３０１が該当する映像ストリームおよび補足情報を入力する（Ｓ６０１）。このとき、映像情報入力処理部３０１は、選択された映像情報が、放送された映像情報をハードディスク２０５に記憶したものである場合には、ハードディスク２０５から映像ストリームおよび補足情報を読み出し、光ディスク１０５に記録されている映像情報である場合には、光ディスクドライバー２０８を介して光ディスク１０５から映像ストリームおよび補足情報を読み込む。なお、実際には、１つの番組に相当する映像情報を一度に全て入力するのではなく、映像情報のデータ量が大きいため、映像情報入力処理部３０１は、以降のステップと並列させて映像情報入力処理を行う。
【００３６】
成績情報生成処理部３０２は、映像情報入力処理部３０１から補足情報を入力すると、事象情報および付加情報を用いた統計処理を行って成績情報（統計情報）を生成する（Ｓ６０２）。ここで、事象情報および付加情報から生成可能な成績情報としては、図５に示した事象情報および補足情報から明らかなように、野球映像中の得点両チームの得点状況に関する得点情報や、試合に登板した投手の成績に関する投手情報や、チーム打撃に関するチーム打撃情報等を生成することができる。
【００３７】
具体的には、（１）〜（３）のように算出できる。
（１）  得点情報
例：（西武対ダイエー、９対１）
統計処理の内容：事象情報（加点イベント）をチーム毎に加算する。
（２）  投手情報
例：（投手  西口、回数８、安打４、三振９、四球３、失点１）
例：（投手  佐久間、回数３と１／３、安打５、三振２、四球２、失点４）
統計処理の内容：投手毎に、イニングイベント（回数）や、                    １塁打・２塁打・３塁打・ホームランイベント（安打）、                    等をそれぞれ加算する。
（３）  チーム打撃情報
例：（西武、回数９、安打１３、９得点）
（ダイエー、回数９、安打４、得点１）
統計処理の内容：チーム毎に、イニングイベント（回数）、                              １塁打・２塁打・３塁打・ホームランイベント（安打）、                    加点イベントをそれぞれ加算する。
【００３８】
すなわち、成績情報生成処理部３０２は、補足情報として付加された情報のうち、試合得点、投手、チーム打撃などの対象となるオブジェクト毎に成績に関する情報の統計をとり、上記のような成績情報を算出し、次の指定処理部３０３へ成績情報を出力する。なお、このとき、全てのオブジェクト毎の成績情報を生成しても良いし、処理速度の高速化を図るために、予め成績情報を生成するオブジェクトを指定しておいても良い。例えば、加点イベント（事象情報）のみを指定することにより、成績情報として得点情報のみが生成される。
【００３９】
指定処理部３０３は、成績情報生成処理部３０２から成績情報を入力すると、各オブジェクト毎に成績情報を表示し、利用者へ検索に使用する成績情報を選択（指定）させる（Ｓ６０３）。具体的には、例えば、テレビ受像機１０３の画面に、図７の表示画面例のような選択画面を表示すると、利用者が選択画面からリモコン１０４等を操作して映像検索に使用する成績情報を指定する。図４および図５に示すように、付加情報として対象とするオブジェクトを示す属性情報（チーム名、ピッチャー名、打者名、選手名、ランナ名等）を有しているので、成績情報の指定に加えて、属性情報（例えば、打者名）の指定も可能である。さらに指定処理部３０３において、各映像シーンの最大長や、検索結果の映像シーンの総合計（総時間）を検索条件として入力することもできる。
【００４０】
検索条件生成処理部３０４は、指定処理部３０３から指定された成績情報を入力すると、成績情報から検索条件を生成する（Ｓ６０４）。成績情報から検索条件を生成する処理は、入力された成績情報から検索条件と、映像検索における制約条件と、重要度判定パラメータとを生成するものである。このとき、指定処理部３０３で特定のオブジェクトを示す属性情報が指定されている場合、検索条件の一つとして指定された属性情報を有する補足情報に対応する映像のみを映像検索の対象範囲とする制約条件を生成する。
【００４１】
ここで、検索条件生成処理部３０４における検索条件、制約条件、重要度判定パラメータの生成について説明する前に、理解を容易にするために処理の前提となる各種設定条件について説明する。映像検索装置３００の内部（ダイジェスト作成システムの内部）に用意されているパラメータには、次のＰ１〜Ｐ３のパラメータがある。これらのパラメータは打席の開始時に「０」にリセットされ、その後単調増加し、次の打席の開始時に再度「０」にリセットされる。
【００４２】
＊パラメータＰ１（攻撃レベルパラメータ）
攻撃的に重要なレベルを示すパラメータであり、攻撃に関係する補足情報に対して以下のようにパラメータＰ１の値が設定されている。
例、ヒット            Ｐ１＋＝２
ホームラン        Ｐ１＋＝４
進塁              Ｐ１＋＝１
加点              Ｐ１＋＝２
エラー            Ｐ１＋＝１
暴投              Ｐ１＋＝１
先制              Ｐ１＋＝３
同点              Ｐ１＋＝３
逆転              Ｐ１＋＝３
【００４３】
このパラメータＰ１（攻撃レベルパラメータ）は、図８に示すように、打席開始時にリセットによって「０」となり、打席シーン（映像シーン）中の補足情報に基づいて、パラメータＰ１の値が設定されている補足情報があると、そのパラメータＰ１の値を加算し、順次、パラメータＰ１の値が設定されている補足情報があると、該当するパラメータＰ１の値を加算して行く、例えば、ヒットの場合には「２」を加算し、進塁の場合には「１」を加算し、加点の場合には「２」を加算し、次の打席開始まで同様の加算処理を行い、次の打席開始になると、それまでの統計値を、その打席シーンの攻撃レベルの統計値として生成する。
【００４４】
＊パラメータＰ２（投手レベルパラメータ）
投手および守備の調子のレベルを示すパラメータであり、投手および守備に関係する補足情報に対して以下のようにパラメータＰ２の値が設定されている。
例、スリーアウト      Ｐ２＋＝３
ワンアウト        Ｐ２＋＝２
ツーアウト        Ｐ２＋＝２
ストライク        Ｐ２＋＝１
【００４５】
このパラメータＰ２（投手レベルパラメータ）は、図９に示すように、打席開始時にリセットによって「０」となり、打席シーン（映像シーン）中の補足情報に基づいて、パラメータＰ２の値が設定されている補足情報があると、そのパラメータＰ２の値を加算し、順次、パラメータＰ２の値が設定されている補足情報があると、該当するパラメータＰ２の値を加算して行く、例えば、ストライクの場合には「１」を加算し、アウト（三振）場合には「２」を加算し、スリーアウトの場合には「３」を加算し、次の打席開始まで同様の加算処理を行い、次の打席開始になると、それまでの統計値を、その打席シーンの投手レベルの統計値として生成する。
【００４６】
＊パラメータＰ３（興奮レベルパラメータ）
利用者（視聴者）の期待および興奮度のレベルを示すパラメータであり、興奮する状況であると推定される補足情報（例えば、打順が３番〜５番のクリーンナップの打席であったり、ランナが３塁に出ている等を示す補足情報）に対して以下のようにパラメータＰ３の値が設定されている。
例、打席開始〔打順＝〔３−５〕〕    Ｐ３＋＝２
打席開始〔３塁打者＝ＯＮ〕      Ｐ３＋＝２
【００４７】
このパラメータＰ３（興奮レベルパラメータ）も、打席開始時にリセットによって「０」となり、打席シーン（映像シーン）中の補足情報に基づいて、パラメータＰ３の値が設定されている補足情報があると、そのパラメータＰ３の値を加算し、順次、次の打席開始まで同様の加算処理を行い、次の打席開始になると、それまでの統計値を、その打席シーンの興奮レベルの統計値として生成する。
【００４８】
次に、成績情報に応じて検索条件（制約条件）およびパラメータ（Ｐ１〜Ｐ３）の重み値を設定する方法について説明する。
成績情報として得点情報が指定されている場合（例、「西武９点  対  ダイエー１点」の場合）、検索条件として、検索の対象「得点する映像シーン」、検索の対象となる範囲が試合全体であるので制約条件「なし」が生成される。
また、パラメータに対する重み値としては、得点情報に基づき、攻撃レベル、投手レベル、興奮レベルの重み（Ｐｌｗ，Ｐ２ｗ，Ｐ３ｗ）を設定する。なお、これらのデフォルト値は（１，１，１）である。
【００４９】
例えば、得点数／回数＞０．６の場合には、打撃好調であるという特徴があったと考え、攻撃レベルの重み値を２に設定し、重み値は（２，１，１）となる。また、西武は得点が９点であり、得点数／回数＞０．６となるため、西武に対する各パラメータの重み値は（２，１，１）となる。
【００５０】
得点数／回数＜０．３の場合には、投手が好調という特徴があったと考え、投手レベルの重み値を２に設置し、重み値は（１，２，１）となる。ダイエーは得点が１点であり、得点数／回数＜０．３となるため、ダイエーに対する各パラメータの重み値は（１，２，１）となる。
【００５１】
このように重み値を設定することにより、それぞれのチームの試合結果の特徴に応じた重み付けがなされるため、試合の特徴を表す映像シーンを検索することができる。西武では、攻撃的に重要な場面（映像シーン）の重要度が高くなり、ダイエーでは守備的に重要な場面（西武の守備がよかった映像シーン）の重要度が高くなる。
【００５２】
次に、成績情報として投手情報が指定されている場合（例、「西武・西口  回数８、安打４、三振９‥‥失点１」）、検索条件として、検索の対象「西口投手のイニングの映像シーン」、制約条件は「投手名＝西口」となる。
また、パラメータに対する重み値としては、安打数／回数＜１の場合、投手好調であったと考え、投手レベルの重み値を２とする。この場合、重み値は（１，２，１）となる。
【００５３】
他の投手情報が指定されている場合（例、「ダイエー・佐久間、回数３と１／３、安打５、三振２‥‥失点４」）、検索条件として、検索の対象「佐久間投手のイニングの映像シーン」、制約条件は「投手名＝佐久間」となる。
また、パラメータに対する重み値としては、安打数／回数＞１．５または失点／回数＞０．６の場合、打撃好調であったと考え、攻撃レベルの重み値を２とする。この場合、重み値は（２，１，１）となる。
【００５４】
次に、成績情報としてチームの打撃情報が指定されている場合（例、「ダイエー、回数９、安打４、得点１」）、検索条件として、検索の対象「ダイエーの攻撃イニングの映像シーン」、制約条件は「攻撃チーム名＝ダイエー」となる。
また、パラメータに対する重み値としては、安打数／回数＜１の場合、失点／回数＜０．３という条件が成立するため、投手レベルの重み値を２とする。この場合、重み値は（１，２，１）となる。
【００５５】
上記のようにパラメータの重み値のうち、投手レベルと攻撃レベルの重み値を左右するのは、得点／回数の値と、安打／回数の値である。一例として本実施の形態では、それぞれの重み値は、以下の条件１〜３に従って設定される。
条件１
得点／回数＞０．６  または  安打／回数＞１．５  →攻撃レベル「２」
条件２
得点／回数＜０．３  または  安打／回数＜１      →投手レベル「２」
条件３
条件１、２に該当しない場合                      →重み値「１」
【００５６】
上記条件１〜３によると、重み値は（１，１，１）、（１，２，１）、（２，１，１）、（２，２，１）のいずれかに設定される。
【００５７】
図６のステップＳ６０４に戻って、再度説明すると、検索条件生成処理部３０４は、指定処理部３０３で指定された成績情報から映像検索のための検索条件を生成する。例えば、成績情報として得点情報が指定されている場合、得点情報から両チームが得点する映像シーンを検索条件として生成し、次に補足情報から重要度を判定するためのパラメータ値（Ｐ１〜Ｐ３の統計値）を計算し、指定処理部３０３で指定された成績情報に応じてパラメータの重み値（Ｐ１ｗ，Ｐ２ｗ，Ｐ３ｗ）を設定し、パラメータ値（Ｐ１〜Ｐ３の統計値）のそれぞれに該当する重み値（Ｐ１ｗ，Ｐ２ｗ，Ｐ３ｗ）を乗算した値を重要度判定パラメータとして生成する。
【００５８】
最後に、映像検索処理部３０５は、検索条件を用いて映像ストリームの検索を行う際に、検索条件と合致する補足情報を有する映像（映像シーン）を検索すると共に、重要度判定パラメータの値を参照して、その映像の重要度を判定し、重要度の高い映像を優先的に検索結果として出力する。すなわち、検索条件生成処理部３０４により生成された検索条件、制約条件、重要度判定パラメータに基づいて、映像検索を行う。切り出しシーンは、各映像シーンの最大長や、検索結果の映像シーンの総合計（総時間）が検索条件として指定されている場合、指定された各映像シーンの最大長および総合計を超えないように切り出される。このとき、重要度判定パラメータの値が大きい映像シーンから優先的に検索結果として切り出すことにより、利用者が映像に対して前知識（予備知識）がなく、得点情報などのような成績情報（統計情報）のみを知っている場合でも、重要な場面（映像）を検索結果として出力できる。
【００５９】
また、映像検索装置３００の検索結果を用いて、ダイジェスト映像を作成することにより、成績情報のみからでも重要な場面（映像）の的確に抽出したダイジェスト映像を作成することが可能となる。
【００６０】
【発明の効果】
以上説明したように、本発明の映像検索装置（請求項１〜３）によれば、事象情報および付加情報を用いた統計処理を行って統計情報を生成し、生成した統計情報の中から映像検索に使用する統計情報を指定し、指定された統計情報から映像検索のための検索条件を生成し、該検索条件に基づいて映像ストリームの検索を行うため、利用者が映像に対して前知識（予備知識）がなく、得点情報などのような成績情報（統計情報）のみを知っている場合でも、重要な場面（映像）を容易に検索することができる。
【００６１】
また、映像ストリームに対する補足情報として存在する事象情報および付加情報のうち、予め指定されている事象情報または／および付加情報のみの統計処理を行って統計情報を生成することにより、より高速な検索を実現できる。
【００６２】
また、映像検索に使用する統計情報の指定に加えて、属性情報を指定することにより、検索条件の一つとして指定された属性情報を有する補足情報に対応する映像のみを映像検索の対象範囲とする制約条件を生成するので、映像検索処理の処理時間の短縮を図ることができる。
【００６３】
また、検索条件生成手段が、指定手段で指定された統計情報から映像検索のための検索条件を生成すると共に、補足情報から重要度を判定するためのパラメータ値を計算し、指定手段で指定された統計情報に応じてパラメータの重み値を設定し、パラメータ値に重み値を乗算した値を重要度判定パラメータとして生成し、映像検索手段が、検索条件を用いて映像ストリームの検索を行う際に、検索条件と合致する補足情報を有する映像を検索すると共に、重要度判定パラメータを用いて、その映像の重要度を判定し、重要度の高い映像を優先的に検索するため、統計情報を指定するだけで、選択された統計情報に相応しい重要な場面を検索することができる。
【図面の簡単な説明】
【図１】本実施の形態の映像検索装置を適用したダイジェスト作成システムの概略構成図である。
【図２】図１に示したセットトップボックスの概略構成を示すブロック構成図である。
【図３】本実施の形態の映像検索処理装置の機能ブロック図である。
【図４】野球中継映像中に発生する事象（イベント）を定義するために用いる事象情報およびその事象情報に関する付加情報の例を示す説明図である。
【図５】野球映像を例として、補足情報である事象情報（事象インデックス）と付加情報が作成された例を示す説明図である。
【図６】本実施の形態の映像検索装置による映像検索処理を示すフローチャートである。
【図７】本実施の形態の指定処理部における表示画面例を示す説明図である。
【図８】パラメータＰ１（攻撃レベルパラメータ）の統計値の算出例を示す説明図である。
【図９】パラメータＰ２（投手レベルパラメータ）の統計値の算出例を示す説明図である。
【符号の説明】
１０１    アンテナ
１０２    セットトップボックス
１０３    テレビ受像機
１０４    リモコン
１０５    光ディスク
２０８    光ディスクドライバー
３００    映像検索装置
３０１    映像情報入力処理部
３０２    成績情報生成処理部
３０３    指定処理部
３０４    検索条件生成処理部
３０５    映像検索処理部
【図１】
0003600186.tif 000002
【図２】
0003600186.tif 000003
【図３】
0003600186.tif 000004
【図４】
0003600186.tif 000005
【図５】
0003600186.tif 000006
【図６】
0003600186.tif 000007
【図７】
0003600186.tif 000008
【図８】
0003600186.tif 000009
【図９】
0003600186.tif 000010