(57)【要約】【課題】過不足のない最適な長さでイベント映像区間を特定することが可能な映像解析装置および映像解析方法を提供する。【解決手段】映像に含まれる重要な事象に係るイベント映像部分のイベント発生時刻情報を取得することが可能な映像解析装置であって、前記映像に含まれるリプレイシーンの再生開始時刻を検出するリプレイ再生開始時刻検出手段102と、前記リプレイシーンの準備に要した所定の時間を任意に決定するリプレイ準備時間決定手段104と、前記リプレイ再生開始時刻から、前記リプレイ準備時間決定手段で決定した所定の時間だけ遡った時点を前記イベント映像部分の終了時刻として特定するイベント終了時刻特定手段105と、を備える。【選択図】図１
2007318426.tif 000002
【特許請求の範囲】
【請求項１】
映像に含まれる重要な事象に係るイベント映像部分のイベント発生時刻情報を取得することが可能な映像解析装置であって、
前記映像に含まれるリプレイシーンの再生開始時刻を検出するリプレイ再生開始時刻検出手段と、
前記リプレイシーンの準備に要した所定の時間を任意に決定するリプレイ準備時間決定手段と、
前記リプレイ再生開始時刻から、前記リプレイ準備時間決定手段で決定した所定の時間遡った時点を前記イベント映像部分の終了時刻として特定するイベント終了時刻特定手段と、を備える映像解析装置。
【請求項２】
映像の切り替わり位置であるカット点を検出するカット点検出手段を備え、
前記イベント終了時刻特定手段は、前記イベント映像部分の終了時刻として特定した位置が含まれる映像シーンの終端をイベント終了時刻とする請求項１記載の映像解析装置。
【請求項３】
前記リプレイ準備時間決定手段は、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間の長短に応じて、前記リプレイ準備時間を変更する請求項１又は２に記載の映像解析装置。
【請求項４】
前記リプレイ準備時間決定手段は、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間と前記リプレイ準備時間との対応関係を表現した線形１次の関係式に基づいて、前記リプレイ準備時間を決定する請求項３に記載の映像解析装置。
【請求項５】
映像から前記イベントの名称に係る情報を取得するイベント名称取得手段と、
前記リプレイ準備時間の決定に使用する前記関係式を前記イベント名称に応じて選択する関係式選択手段と、を備え、
前記リプレイ準備時間決定手段は、前記関係式選択手段で選択された関係式を用いて、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間からリプレイ準備時間を算出する請求項４に記載の映像解析装置。
【請求項６】
映像に含まれる特定の音声情報を検出する音声情報検出手段と、
前記リプレイ準備時間の決定に使用する前記関係式を前記音声情報に応じて選択する関係式選択手段と、を備え、
前記リプレイ準備時間決定手段は、前記関係式選択手段で選択された関係式を用いて、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間からリプレイ準備時間を算出する請求項４に記載の映像解析装置。
【請求項７】
映像に含まれるテロップの内容を解析するテロップ情報解析手段と、
前記リプレイ準備時間の決定に使用する前記関係式を前記テロップ解析情報に応じて選択する関係式選択手段と、を備え、
前記リプレイ準備時間決定手段は、前記関係式選択手段で選択された関係式を用いて、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間からリプレイ準備時間を算出する請求項４に記載の映像解析装置。
【請求項８】
映像に含まれる重要な事象に係るイベント映像部分のイベント発生時刻情報に基づいて、イベント映像区間を特定する映像解析方法であって、
前記映像に含まれるリプレイシーンの再生開始時刻を検出するリプレイ再生開始時刻検出ステップと、
前記リプレイシーンの準備に要した所定の時間を任意に決定するリプレイ準備時間決定ステップと、
前記リプレイ再生開始時刻から、前記リプレイ準備時間決定ステップで決定した所定の時間遡った時点を前記イベント映像部分の終了時刻として特定するイベント終了時刻特定ステップと、を有する映像解析方法。
【請求項９】
映像の切り替わり位置であるカット点を検出するカット点検出ステップを有し、
前記イベント終了時刻特定ステップは、前記イベント映像部分の終了時刻として特定した位置が含まれる映像シーンの終端をイベント終了時刻とする請求項８記載の映像解析方法。
【請求項１０】
前記リプレイ準備時間決定ステップは、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間の長短に応じて、前記リプレイ準備時間を変更する請求項８又は９に記載の映像解析方法。
【請求項１１】
前記リプレイ準備時間決定ステップは、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間と前記リプレイ準備時間との対応関係を表現した線形１次の関係式に基づいて、前記リプレイ準備時間を決定する請求項１０に記載の映像解析方法。
【請求項１２】
映像から前記イベントの名称に係る情報を取得するイベント名称取得ステップと、
前記リプレイ準備時間の決定に使用する前記関係式を前記イベント名称に応じて選択する関係式選択ステップと、を有し、
前記リプレイ準備時間決定ステップは、前記関係式選択ステップで選択された関係式を用いて、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間からリプレイ準備時間を算出する請求項１１に記載の映像解析方法。
【請求項１３】
映像に含まれる特定の音声情報を検出する音声情報検出ステップと、
前記リプレイ準備時間の決定に使用する前記関係式を前記音声情報に応じて選択する関係式選択ステップと、を有し、
前記リプレイ準備時間決定ステップは、前記関係式選択ステップで選択された関係式を用いて、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間からリプレイ準備時間を算出する請求項１１に記載の映像解析方法。
【請求項１４】
映像に含まれるテロップの内容を解析するテロップ情報解析ステップと、
前記リプレイ準備時間の決定に使用する前記関係式を前記テロップ解析情報に応じて選択する関係式選択ステップと、を有し、
前記リプレイ準備時間決定ステップは、前記関係式選択ステップで選択された関係式を用いて、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間からリプレイ準備時間を算出する請求項１１に記載の映像解析方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像コンテンツにおける重要な映像部分を特定する映像解析装置および映像解析方法に関する。
【背景技術】
【０００２】
テレビ放送などの映像コンテンツの視聴に関しては、重要な映像部分だけを抽出して効率的な視聴を行いたいというニーズがある。これを実現する技術として、従来、重要な事象に係る映像部分（以降、イベントと称する）だけを抽出し、ダイジェストを作成する装置や方法などが提案されている（例えば、特許文献１参照）。
【０００３】
例えば、特許文献１に開示された映像記録再生装置では、特にスポーツ中継番組などで、イベント（例えば、野球におけるホームランなど）が発生した直後に放送されるリプレイ映像（スローモーション映像）を利用してイベント映像区間を特定している。具体的には、リプレイ映像の再生開始点、再生終了点、再生速度に関する情報を、元となる実時間映像から取得し、リプレイ映像の放送時間から実時間映像におけるイベントに係る放送時間（映像区間）を逆算する。そして、リプレイ映像の再生開始点から標準再生速度で放送時間分遡った時点をイベント開始点と推定し、当該時点からリプレイ映像開始点までをイベント映像区間として特定する。
【０００４】
図１９は、上記従来の映像記録再生装置でイベント映像区間を特定する状況を模式的に示す図である。映像記録再生装置は、映像の中からリプレイ映像の再生開始点（図中のＡ点）と再生終了点（図中のＢ点）を検出し、リプレイ映像時間を把握する。そして、リプレイ映像時間と再生倍率から、イベント映像時間を算出する。例えば、リプレイ映像時間が10秒でスロー再生倍率が0.5である場合、実時間映像は、10×0.5＝5秒間分の映像区間となる。従って、リプレイ再生開始点（図中のＡ点）から5秒分遡った位置（図中のＣ点）が、イベント映像区間におけるイベント発生点と算出される。
【０００５】
尚、上記の映像記録再生装置では、イベント映像区間の終了直後にリプレイ映像が放送される（即ち、イベント映像区間の終了点がリプレイ映像の再生開始点と一致する）との前提でイベント映像区間を特定している。
【特許文献１】特開２００３−３３３５０５号公報  第３頁〜第１１頁  図２
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかし、上記従来の映像記録再生装置では、イベント映像の終了直後にリプレイ映像の再生が開始すると仮定しているが、実際のスポーツ中継番組などの生放送番組ではリプレイ映像は編集等を行ってから再生する必要があるため、イベント映像からリプレイ映像へ移行する間に、本来はイベント映像とすべきではない映像（例えば、選手のアップ映像や、観客席の映像等）が不可避的に存在してしまうという問題があった（例えば、図１９のＸで示す映像部分）。
【０００７】
また、リプレイ映像は、イベント映像区間の途中を一部省略したり、同一区間を繰り返し再生したりするなどの編集を施して構成されているため、例えば、イベント映像区間の開始点が分かっていて、標準再生速度で放送時間分経過した時点をイベント映像の終了点として特定する場合であっても、イベント映像区間が長すぎて不要な映像が含まれてしまったり（例えば、図１９のＸで示す映像部分）、逆にイベント映像区間が短すぎて必要な映像が含まれなかったり（例えば、図１９のＹで示す映像部分）することがあるという課題があった。
【０００８】
そこで本発明は上記従来の事情に鑑みてなされたものであって、過不足のない最適な長さでイベント映像区間を特定することが可能な映像解析装置および映像解析方法を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の映像解析装置は、映像に含まれる重要な事象に係るイベント映像部分のイベント発生時刻情報を取得することが可能な映像解析装置であって、前記映像に含まれるリプレイシーンの再生開始時刻を検出するリプレイ再生開始時刻検出手段と、前記リプレイシーンの準備に要した所定の時間を任意に決定するリプレイ準備時間決定手段と、前記リプレイ再生開始時刻から、前記リプレイ準備時間決定手段で決定した所定の時間遡った時点を前記イベント映像部分の終了時刻として特定するイベント終了時刻特定手段と、を備える。
上記構成によれば、イベント映像を含まないと推定される映像部分に相当するリプレイ準備時間が、イベント映像区間から除外されるので、不要な映像部分を含まない最適な長さでイベント映像区間を特定することができる。
【００１０】
また、本発明の映像解析装置は、請求項１記載の映像解析装置であって、映像の切り替わり位置であるカット点を検出するカット点検出手段を備え、前記イベント終了時刻特定手段が、前記イベント映像部分の終了時刻として特定した位置が含まれる映像シーンの終端をイベント終了時刻とするものである。
上記構成によれば、イベント映像区間の終了時刻を特定の映像シーンの終端に一致させるので、イベント映像が途中で途切れることがなく、高い精度でイベント映像区間を特定することができる。尚、映像シーンとは、カット点で区切られた映像部分である。
【００１１】
また、本発明の映像解析装置は、前記リプレイ準備時間決定手段が、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間の長短に応じて、前記リプレイ準備時間を変更するものである。
上記構成によれば、リプレイ再生までの時間が長いイベントは、イベント自体の時間も長いという推定に基づいてリプレイ準備時間を決定することにより、高い精度でイベント映像区間を特定することができる。
【００１２】
また、本発明の映像解析装置は、前記リプレイ準備時間決定手段が、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間と前記リプレイ準備時間との対応関係を表現した線形１次の関係式に基づいて、前記リプレイ準備時間を決定するものである。
上記構成によれば、リプレイ再生までの時間が長いイベントは、イベント自体の時間も長いという推定に基づいてリプレイ準備時間を決定することにより、高い精度でイベント映像区間を特定することができる。
【００１３】
また、本発明の映像解析装置は、映像から前記イベントの名称に係る情報を取得するイベント名称取得手段と、前記リプレイ準備時間の決定に使用する前記関係式を前記イベント名称に応じて選択する関係式選択手段と、を備え、前記リプレイ準備時間決定手段が、前記関係式選択手段で選択された関係式を用いて、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間からリプレイ準備時間を算出するものである。
上記構成によれば、イベントの種類に応じて適切にリプレイ準備時間が決定されるため、高い精度でイベント映像区間を特定することができる。
【００１４】
また、本発明の映像解析装置は、映像に含まれる特定の音声情報を検出する音声情報検出手段と、前記リプレイ準備時間の決定に使用する前記関係式を前記音声情報に応じて選択する関係式選択手段と、を備え、前記リプレイ準備時間決定手段は、前記関係式選択手段で選択された関係式を用いて、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間からリプレイ準備時間を算出するものである。
上記構成によれば、音声情報の有無またはその内容に応じて適切にリプレイ準備時間が決定されるため、高い精度でイベント映像区間を特定することができる。
【００１５】
また、本発明の映像解析装置は、映像に含まれるテロップの内容を解析するテロップ情報解析手段と、前記リプレイ準備時間の決定に使用する前記関係式を前記テロップ解析情報に応じて選択する関係式選択手段と、を備え、前記リプレイ準備時間決定手段が、前記関係式選択手段で選択された関係式を用いて、前記イベント発生時刻から前記リプレイ再生開始時刻までの時間からリプレイ準備時間を算出するものである。
上記構成によれば、テロップ解析情報の内容に応じて適切にリプレイ準備時間が決定されるため、高い精度でイベント映像区間を特定することができる。
【発明の効果】
【００１６】
本発明の映像解析装置によれば、映像から検出可能なイベント発生時刻情報とリプレイ再生開始時刻情報とを利用して、冗長な映像部分が含まれるリプレイ準備時間をイベント映像区間から除去するため、過不足のない最適な長さでイベント映像区間を特定することができる。
【発明を実施するための最良の形態】
【００１７】
以下、本発明の実施形態における映像解析装置について図面を用いて説明する。尚、実施の形態を説明するための全図において、同一機能を有するものは同一符号を付与し、説明は繰り返さないこととする。
【００１８】
［実施の形態１］
図１は、本発明の実施の形態１における映像解析装置の構成を示す図である。映像解析装置は、主に、映像取得手段１０１、リプレイ再生開始時刻検出手段１０２、イベント発生時刻取得手段１０３、リプレイ準備時間決定手段１０４、イベント終了時刻特定手段１０５、で構成される。
【００１９】
映像取得手段１０１は、外部より映像を取得して、リプレイ再生開始時刻検出手段１０２に取得した映像を送出する。リプレイ再生開始時刻検出手段１０２は、映像取得手段１０１より取得した映像からリプレイの再生開始位置を検出し、検出結果をリプレイ再生開始時刻として、リプレイ準備時間決定手段１０４およびイベント終了時刻特定手段１０５に伝送する。
【００２０】
イベント発生時刻取得手段１０３は、外部から通知されるイベント発生時刻情報を取得して、リプレイ準備時間決定手段１０４に伝送する。リプレイ準備時間決定手段１０４は、リプレイの準備に要したリプレイ準備時間を決定する。尚、リプレイ準備時間は、予め設定した固有の時間を常に採用するようにしてもよいし、イベント発生時刻とリプレイ再生開始時刻とから算出される時間の長短に応じて適宜変化させてもよい（例えば、後述するように、イベント発生時刻からリプレイ再生開始時刻までの時間が長くなるほどリプレイ準備時間を長く設定するなど）。
【００２１】
決定されたリプレイ準備時間は、リプレイ準備時間情報としてイベント終了時刻特定手段１０５に伝送される。イベント終了時刻特定手段１０５は、リプレイ再生開始時刻からリプレイ準備時間だけ遡った時点をイベント終了時刻として、イベント映像時間を特定する。
【００２２】
尚、上記の構成において、イベント発生時刻取得手段１０３のイベント発生時刻取得方法およびリプレイ再生開始時刻検出手段１０２のリプレイ再生開始時刻検出方法は、それぞれ公知の手法を用いてかまわない。
【００２３】
次に、上記構成の映像解析装置の動作について説明する。
【００２４】
図２は、本発明の実施の形態１における映像解析装置の、イベント映像時間特定動作の手順を示すフローチャートである。はじめに、リプレイ準備時間決定手段１０４は、イベント発生時刻取得手段１０３からイベント発生時刻情報を取得する(ステップＳ１０１）。同様に、リプレイ再生開始時刻検出手段１０２からリプレイ再生開始時刻情報を取得する（ステップＳ１０２）。
【００２５】
次に、リプレイ準備時間決定手段１０４は、決定したリプレイ準備時間をイベント終了時刻特定手段１０５に伝送し（ステップＳ１０３）、イベント終了時刻特定手段１０５は、リプレイ再生開始時刻からリプレイ準備時間だけ遡った時刻をイベント終了時刻として特定する（ステップＳ１０４）。以上の手順により、イベント発生時刻とイベント終了時刻が把握できるので、適正なイベント映像区間を特定することができる。
【００２６】
図３は、本発明の実施の形態１における映像解析装置により、イベント映像区間が特定される状況を模式的に示す図である。イベント発生時刻（図中のＡ点）からリプレイ再生開始時刻（図中のＢ点）までの間の後方にリプレイ準備時間が設定されている。
【００２７】
以上のように、イベント映像を含まないと推定されるリプレイ準備時間に相当する映像部分がイベント映像区間から除外されるので、不要な映像部分を含まない最適な長さでイベント映像区間が特定される。
【００２８】
［実施の形態２］
図４は、本発明の実施の形態２における映像解析装置の構成を示す図である。実施の形態１の映像解析装置と比較して、カット点検出手段１０６、イベント名称取得手段１０７、関係式選択手段１０８が付加された点が異なる。
【００２９】
カット点検出手段１０６は、映像取得手段１０１から取得した映像の中から映像シーンの切り替わり位置を検出し、検出結果をカット点情報としてイベント終了時刻特定手段１０５に伝送する。イベント名称取得手段１０７は、イベント発生時刻取得手段１０３から取得したイベント発生時刻に発生したイベントの名称を外部より取得し、イベント名称情報を関係式選択手段１０８に伝送する。関係式選択手段１０８は、リプレイ準備時間を算出するための適切な関係式を選択してリプレイ準備時間決定手段１０４に伝送する。尚、関係式選択手段１０８には、イベント名称取得手段１０７から取得したイベント名称ごとに、一意に対応する関係式が予め複数設定されている。
【００３０】
リプレイ準備時間決定手段１０４は、イベント発生時刻とリプレイ再生開始時刻とから算出される時間の値を、関係式選択手段１０８から取得した関係式に代入してリプレイ準備時間を算出する。算出結果は、リプレイ準備時間情報としてイベント終了時刻特定手段１０５に伝送される。イベント終了時刻特定手段１０５は、カット点検出手段１０６より取得したカット点情報に基づいて、リプレイ再生開始時刻からリプレイ準備時間分だけ遡った時点を含む映像シーンの終端をイベント終了時刻として、イベント映像時間を特定する。
【００３１】
次に、上記構成の映像解析装置の動作について説明する。
【００３２】
図５は、本発明の実施の形態２における映像解析装置の、関係式選択手段の処理手順を示すフローチャートである。はじめに、関係式選択手段１０８は、イベント名称取得手段１０７からイベント名称を取得する（ステップＳ２０１）。次に、図６に示すようなイベント名称と関係式との対応関係が記述されているテーブルを参照して、イベント名称に対応する関係式を選択し（ステップＳ２０２）、選択した関係式をリプレイ準備時間決定手段１０４に伝送する（ステップＳ２０３）。例えば、イベント名称取得手段１０７から取得したイベント名称が「三振」である場合、テーブル（図６参照）から関係式「Ｘ−1.5」が選択され、リプレイ準備時間決定手段１０４に伝送される。
【００３３】
次に、図７は、本発明の実施の形態２における映像解析装置の、リプレイ準備時間決定手段の処理手順を示すフローチャートである。はじめに、リプレイ準備時間決定手段１０４は、イベント発生時刻取得手段１０３からイベント発生時刻情報を取得する（ステップＳ３０１）。同様に、リプレイ再生開始時刻検出手段１０２からリプレイ再生開始時刻情報を取得する（ステップＳ３０２）。
【００３４】
リプレイ準備時間決定手段１０４は、イベント発生時刻とリプレイ再生開始時刻とから時間を算出する（ステップＳ３０３）。次に、関係式選択手段１０８から伝送された関係式を取得し（ステップＳ３０４）、算出した時間の値を関係式に代入してリプレイ準備時間を決定する（ステップＳ３０５）。リプレイ準備時間決定手段１０４は、決定したリプレイ準備時間をイベント終了時刻特定手段１０５に伝送する（ステップＳ３０６）。
【００３５】
例えば、イベント発生時刻取得手段１０３から取得したイベント発生時刻が「19時49分13秒06」で、リプレイ再生開始時刻検出手段１０２から取得したリプレイ再生開始時刻が「19時49分27秒01」で、関係式選択手段１０８から取得した関係式が「Ｘ−1.5」である場合、イベント発生時刻からリプレイ再生開始時刻までの時間13.5秒より1.5を減じて、リプレイ準備時間は12.0秒となる。
【００３６】
次に、図８は、本発明の実施の形態２における映像解析装置の、イベント終了時刻特定手段の処理手順を示すフローチャートである。はじめに、イベント終了時刻特定手段１０５は、リプレイ再生開始時刻検出手段１０２からリプレイ再生開始時刻を取得する（ステップＳ４０１）。次に、リプレイ準備時間決定手段１０４からリプレイ準備時間を取得する（ステップＳ４０２）。
【００３７】
リプレイ再生開始時刻からリプレイ準備時間分だけ遡った時刻を仮のイベント終了時刻とする（ステップＳ４０３）。イベント終了時刻特定手段１０５は、カット点検出手段１０６からカット点を取得し（ステップＳ４０４）、特定した仮のイベント終了時刻よりも時間的に後方で、仮のイベント終了時刻に最も近接するカット点、即ち、仮のイベント終了時刻を含む映像シーンの終端をイベント終了時刻とする（ステップＳ４０５）。
【００３８】
例えば、リプレイ再生開始時刻検出手段１０２から取得したリプレイ再生開始時刻が「19時49分27秒01」で、リプレイ準備時間決定手段１０４から取得したリプレイ準備時間が12.0秒で、カット点検出手段から取得したカット点情報が図９に示すようなリスト構成である場合、仮のイベント終了時刻が「19時49分15秒01」となるので、イベント終了時刻は直近後方のカット点「19時49分19秒03」となる。
【００３９】
尚、図６に示した関係式のリストは、図１０に示すように、横軸に「イベント発生時刻からリプレイ再生開始時刻までの時間」、縦軸に「イベント終了時刻からリプレイ再生開始時刻までの時間」（Ｙ）と「イベント区間最終カット開始時刻からリプレイ再生開始時刻までの時間」（Ｚ）をプロットし、ＹとＺの間を通る線形式を関係式として採用したものである。但し、この方法にとらわれるものではなく、実際にリプレイを作成するのに要する時間を測定するなどの方法で関係式を作成してもよい。
【００４０】
図１１は、本発明の実施の形態２における映像解析装置により、イベント映像区間が特定される状況を模式的に示す図である。イベント発生時刻（図中のＡ点）からリプレイ再生開始時刻（図中のＢ点）までの時間の値を、イベント名称に対応して選択された関係式に代入してリプレイ準備時間が決定される。リプレイ開始時刻から当該リプレイ準備時間だけ遡った仮のイベント終了時刻（図中のＣ点）を含む「シーン４」の終端（図中のＤ点）がイベント終了時刻として設定され、イベント映像区間が特定される。
【００４１】
以上のように、イベントの種類及びイベント発生からリプレイ開始までの時間に応じてイベント準備時間が適切に調整されるので、過不足のない最適な長さでイベント映像区間が特定される。
【００４２】
［実施の形態３］
図１２は、本発明の実施の形態３における映像解析装置の構成を示す図である。実施の形態２の映像解析装置と比較して、音声取得手段１０９、音声情報検出手段１１０、テロップ検出手段１１１、テロップ解析手段１１２が付加された点が異なる。
【００４３】
テロップ検出手段１１１は、例えば、映像取得手段１０１から取得した映像に含まれる塁上ランナーテロップなどのテロップ表示タイミングを検出し、検出したテロップ内容と検出時刻をテロップ情報としてテロップ情報解析手段１１２に伝送する。テロップ情報解析手段１１２は、イベント発生時刻取得手段１０３からイベント発生時刻を、テロップ検出手段１１１からテロップ情報を取得し、イベント発生時刻の直前と直後のテロップ情報を抽出して、抽出した２つのテロップの違いを解析し、解析した結果をテロップ解析情報として、関係式選択手段１０８に伝送する。
【００４４】
音声取得手段１０９は、映像に付随する音声を取得し、音声情報検出手段１１０に取得した音声を伝送する。音声情報検出手段１１０は、イベント発生時刻取得手段１０３からイベント発生時刻を、音声取得手段１０９から音声を取得し、例えば、イベント発生時刻にボールを打った音（打撃音）などの音声の有無を検出し、検出した結果を音声情報として関係式選択手段１０８に伝送する。
【００４５】
関係式選択手段１０８は、テロップ情報解析手段１１２から取得したテロップ解析情報と音声情報検出手段１１０から取得した音声情報とから関係式を選択し、選択した関係式をリプレイ準備時間決定手段１０４に伝送する。
【００４６】
次に、上記構成の映像解析装置の動作について説明する。
【００４７】
図１３は、本発明の実施の形態３における映像解析装置の、テロップ情報解析手段の処理手順を示すフローチャートである。ここでは、前述の塁上ランナーテロップを例に説明する。はじめに、テロップ情報解析手段１１２は、イベント発生時刻取得手段１０３からイベント発生時刻を取得する（ステップＳ５０１）。次に、テロップ検出手段１１１から図１４に示すような検出時刻と塁上ランナーテロップの内容が記述されたテロップ情報を取得する（ステップＳ５０２）。イベント発生時刻の直前と直後のテロップ情報を抽出し（ステップＳ５０３）、抽出した二つのテロップ情報の塁上ランナーテロップの違いから進塁数を算出する（ステップＳ５０４）。算出した結果を関係式選択手段１０８に伝送する（ステップＳ５０５）。
【００４８】
例えば、イベント発生時刻取得手段１０３から取得したイベント発生時刻が「19時49分13秒06」である場合、図１４から、「検出時刻＝19時49分12秒02」と、「検出時刻＝19時49分44秒02」を抽出し、ともに「塁上ランナー＝ランナーなし」であるから、テロップ解析結果は「進塁数＝0」となる。
【００４９】
図１５は、本発明の実施の形態３における映像解析装置の、関係式選択手段の処理手順を示すフローチャートである。関係式選択手段１０８は、音声情報検出手段１１０から音声情報を取得する（ステップＳ６０１）。次に、テロップ情報解析手段１１２からテロップ解析情報を取得する（ステップＳ６０２）。次に、図１６に示すような音声情報およびテロップ解析情報と関係式との対応関係が記述されたテーブルを参照して、取得した音声情報・テロップ解析情報をもとに関係式を選択し（ステップＳ６０３）、選択した関係式をリプレイ準備時間決定手段１０４に伝送する（ステップＳ６０４）。
【００５０】
例えば、音声情報検出手段１１０から取得した音声情報が「あり」で、テロップ情報解析手段１１２から取得したテロップ解析情報が「0」である場合、図１６のテーブルを参照して関係式「Ｘ−4」が選択され、リプレイ準備時間決定手段１０４に伝送される。
【００５１】
図１７は、本発明の実施の形態３における映像解析装置により、イベント映像区間が特定される状況を模式的に示す図である。図１７（ａ）は、音声情報として“打撃音”が検知され、テロップ解析により“進塁数１”のヒットであると判断される映像部分の例を示している。図１６に示すテーブルでは関係式「Ｘ−4」が選択される。従って、イベント発生時刻からリプレイ再生開始時刻までの時間が12.01秒であるこの映像のリプレイ準備時間は12.01−4＝8.01秒となる。イベント発生時刻（図中のＡ点）から仮のイベント終了時刻を含む「シーン２」の終端（図中のＢ点）までがイベント映像区間として特定される。
【００５２】
一方、図１７（ｂ）は、音声情報として“打撃音”が検知され、テロップ解析により“進塁数２”のヒットであると判断される映像部分の例を示している。図１６に示すテーブルでは関係式「Ｘ−8」が選択される。従って、イベント発生時刻からリプレイ再生開始時刻までの時間が37.14秒であるこの映像のリプレイ準備時間は37.14−8＝29.14秒となる。イベント発生時刻（図中のＡ点）から仮のイベント終了時刻を含む「シーン４」の終端（図中のＢ点）までがイベント映像区間として特定される。
【００５３】
尚、音声情報が取得できない場合には、テロップ解析の内容によらず同一の関係式を適用するように設定してもかまわない。このような設定は、例えば、“打撃音”が検出されないイベントは「三振」と判断して特定の関係式を選択するというような設定に適用できる。
【００５４】
また、図１６に示した関係式のリストは、図１８に示すように、横軸に「イベント発生時刻からリプレイ再生開始時刻までの時間」、「縦軸にイベント終了時刻からリプレイ再生開始時刻までの時間」（Ｙ）と「イベント区間最終カット開始時刻からリプレイ再生開始時刻までの時間」（Ｚ）をプロットし、ＹとＺの間を通る線形式を関係式として採用したものである。但し、この方法にとらわれるものではなく、実際にリプレイを作成するのに要する時間を測定するなどの方法でして関係式を作成してもよい。
【００５５】
以上のように、音声情報／テロップ解析情報及びイベント発生からリプレイ開始までの時間によってイベント準備時間が適切に調整されるので、たとえイベントの種類や名称が把握できないような状況においても、過不足のない最適な長さでイベント映像区間を特定することができる。
【００５６】
以上説明した映像解析装置および映像解析方法は、過不足のない最適な長さでイベント映像区間を特定することができるという効果を有し、映像の重要なシーンだけを抽出するダイジェスト作成等に有用である。
【産業上の利用可能性】
【００５７】
本発明は、過不足のない最適な長さでイベント映像区間を特定することができるという効果を有し、映像コンテンツにおける重要な映像部分を特定する映像解析装置および映像解析方法等に有用である。
【図面の簡単な説明】
【００５８】
【図１】本発明の実施の形態１における映像解析装置の構成を示す図
【図２】本発明の実施の形態１における映像解析装置の、イベント映像時間特定動作の手順を示すフローチャート
【図３】本発明の実施の形態１における映像解析装置により、イベント映像区間が特定される状況を模式的に示す図
【図４】本発明の実施の形態２における映像解析装置の構成を示す図
【図５】本発明の実施の形態２における映像解析装置の、関係式選択手段の処理手順を示すフローチャート
【図６】イベント名称と関係式との対応関係が記述されているテーブルを概念的に示す図
【図７】本発明の実施の形態２における映像解析装置の、リプレイ準備時間決定手段の処理手順を示すフローチャート
【図８】本発明の実施の形態２における映像解析装置の、イベント終了時刻特定手段の処理手順を示すフローチャート
【図９】カット点検出手段から取得したカット点情報リストを概念的に示す図
【図１０】イベント発生時刻からリプレイ再生開始時刻までの時間とリプレイ準備時間との関係式を導くために行ったプロットを示す図
【図１１】本発明の実施の形態２における映像解析装置により、イベント映像区間が特定される状況を模式的に示す図
【図１２】本発明の実施の形態３における映像解析装置の構成を示す図
【図１３】本発明の実施の形態３における映像解析装置の、テロップ情報解析手段の処理手順を示すフローチャート
【図１４】検出時刻と塁上ランナーテロップの内容が記述されたテロップ情報を概念的に示す図
【図１５】本発明の実施の形態３における映像解析装置の、関係式選択手段の処理手順を示すフローチャート
【図１６】音声情報およびテロップ解析情報と関係式との対応関係が記述されたテーブルを概念的に示す図
【図１７】本発明の実施の形態３における映像解析装置により、イベント映像区間が特定される状況を模式的に示す図
【図１８】イベント発生時刻からリプレイ再生開始時刻までの時間とリプレイ準備時間との関係式を導くために行ったプロットを示す図
【図１９】従来の映像記録再生装置でイベント映像区間を特定する状況を模式的に示す図
【符号の説明】
【００５９】
１０１  映像取得手段
１０２  リプレイ再生開始時刻検出手段
１０３  イベント発生時刻取得手段
１０４  リプレイ準備時間決定手段
１０５  イベント終了時刻特定手段
１０６  カット点検出手段
１０７  イベント名称取得手段
１０８  関係式選択手段
１０９  音声取得手段
１１０  音声情報検出手段
１１１  テロップ検出手段
１１２  テロップ情報解析手段
【図１】
2007318426.tif 000003
【図２】
2007318426.tif 000004
【図３】
2007318426.tif 000005
【図４】
2007318426.tif 000006
【図５】
2007318426.tif 000007
【図６】
2007318426.tif 000008
【図７】
2007318426.tif 000009
【図８】
2007318426.tif 000010
【図９】
2007318426.tif 000011
【図１０】
2007318426.tif 000012
【図１１】
2007318426.tif 000013
【図１２】
2007318426.tif 000014
【図１３】
2007318426.tif 000015
【図１４】
2007318426.tif 000016
【図１５】
2007318426.tif 000017
【図１６】
2007318426.tif 000018
【図１７】
2007318426.tif 000019
【図１８】
2007318426.tif 000020
【図１９】
2007318426.tif 000021