(57)【要約】【課題】  出来るだけ少ない処理で実現できる映像データベース構築装置、映像検索装置及び不明語検索装置を提供する。【解決手段】  映像データベース構築装置は、映像以外の情報からニュースのタイトルを取得するタイトル取得装置１と、取得した複数のタイトルからニュースのキーワードを抽出するキーワード抽出装置２と、抽出したキーワードが表示されるシーンを含む映像を検出する映像検出装置３と、前記キーワードとタイトルと検出した映像及びシーンの位置とを関連付けて記録しておく映像データベース装置４とから成る。映像検索装置は、前記映像データベース装置４を用いて、ニュースのタイトル文字列から見たい映像を検索する。不明語検索装置は、映像データベース装置４を構築する際に抽出したキーワードを用いて、映像に関連する不明語を文字入力なしに検索する。【選択図】        図１
2008009807.tif 000002
【特許請求の範囲】
【請求項１】
映像以外の情報からニュースのタイトルを取得するタイトル取得手段と、取得した複数のタイトルからニュースのキーワードを抽出するキーワード抽出手段と、抽出したキーワードが表示されるシーンを含む映像を検出する映像検出手段と、前記キーワードとタイトルと検出した映像及びシーンの位置とを関連付けて記録しておく映像データベース手段とから成ることを特徴とする映像データベース構築装置。
【請求項２】
前記タイトル取得手段の情報源がインターネット上のホームページのニュースタイトルであり、前記キーワード抽出手段はそのタイトルで共通に使用されている使用頻度が高い文字列をキーワードとして抽出することを特徴とする請求項１記載の映像データベース構築装置。
【請求項３】
請求項１又は請求項２記載の映像データベース構築装置で構築した映像データベース手段を用いて、ニュースのタイトル文字列から見たい映像を検索することを特徴とする映像検索装置。
【請求項４】
請求項１又は請求項２記載の映像データベース構築装置で映像データベース手段を構築する際に抽出したキーワードを用いて、映像に関連する不明語を文字入力なしに検索することを特徴とする不明語検索装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本願発明は、ニュース映像の映像データベース構築装置、映像検索装置及び不明語検索装置に関するものである。
【背景技術】
【０００２】
放送の多チャンネル化やインターネット配信によって多くの映像コンテンツが生み出されて放送・配信されており、映像コンテンツ制作会社や放送各局は他社との差別化に力を注いでいる。一見、差別化は難しいと思えるニュース番組にしても、分かりやすい解説をつけたり、独自の論調を繰り広げるなどにより差別化を図っている。視聴者のニュースの見方は、その日に起こった出来事をお気に入りの１つか２つのニュース番組で視聴するという方法が一般的である。
【０００３】
しかし、新聞やインターネットのホームページなどで、その日の大まかな出来事は知っているが、特に気になる出来事は各ニュース番組がその出来事をどのような論調で報道しているのかを視聴者が知りたいという要求がある。あるいは、あるニュース番組の解説では理解できない出来事について、別のニュース番組の他の視点からの解説を視聴したいといった要求も存在する。
【０００４】
こういった要求を満たすため、いくつかの技術が提案されている。特許文献１の「映像検索装置、方法、映像検索プログラムを記録した記録媒体」は、映像中のフレーム毎に文字情報を認識し、その文字情報の類似度により映像を関連づけ、類似映像の検索に利用している。また、特許文献２の「データベース構築システム、パッセージ検索装置、データベース構築方法及びプログラム」は、映像中の文字情報と音声情報の類似度により映像を分類し、映像の検索に利用している。
【特許文献１】特開２００２−１４９７３号公報（G06F 17/30）
【特許文献２】特開２００３‐３４５８０９号公報（G06F 17/30）
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、これらの技術は、複雑な音声書き起こし技術や文字認識技術、文字列類似度判定技術から構成されており、検索対象の全ての映像において文字認識や音声書き起こしを行い、検索データベースを作成する必要がある。現状でこのような処理を行うためには、高い処理能力を持つ処理装置を長い時間動作させる必要がある。このため、処理能力が低い民生機器では実現が困難である。
【０００６】
そこで、本願発明はこのような課題を解決するためになされたものであり、出来るだけ少ない処理で実現できる映像データベース構築装置、映像検索装置及び不明語検索装置を提供することを目的とするものである。
【課題を解決するための手段】
【０００７】
上記のような目的を達成するために、本願の請求項１に係る発明の映像データベース構築装置は、映像以外の情報からニュースのタイトルを取得するタイトル取得手段と、取得した複数のタイトルからニュースのキーワードを抽出するキーワード抽出手段と、抽出したキーワードが表示されるシーンを含む映像を検出する映像検出手段と、前記キーワードとタイトルと検出した映像及びシーンの位置とを関連付けて記録しておく映像データベース手段とから成ることを特徴とするものである。
【０００８】
請求項２に係る発明の映像データベース構築装置は、前記タイトル取得手段の情報源がインターネット上のホームページのニュースタイトルであり、前記キーワード抽出手段はそのタイトルで共通に使用されている使用頻度が高い文字列をキーワードとして抽出することを特徴とするものである。
【０００９】
請求項３に係る発明の映像検索装置は、前記請求項１又は請求項２記載の映像データベース構築装置で構築した映像データベース手段を用いて、ニュースのタイトル文字列から見たい映像を検索することを特徴とするものである。
【００１０】
請求項４に係る発明の不明語検索装置は、前記請求項１又は請求項２記載の映像データベース構築装置で映像データベース手段を構築する際に抽出したキーワードを用いて、映像に関連する不明語を文字入力なしに検索することを特徴とするものである。
【発明の効果】
【００１１】
本願の請求項１記載の映像データベース構築装置によれば、予め映像以外の情報からタイトル取得手段で取得したニュースのタイトルに含まれるキーワードを、キーワード抽出手段で抽出しておき、そのキーワードと一致する字幕を一部でも表示したシーンを含む映像とそのシーンの位置を映像検出手段で検出する。この映像検出手段は、従来の技術と同様、映像を解析する必要があるが、予め出現する文字列をキーワードとして与えておくことにより、従来技術のように文字を映像から完全に読み取る文字認識まではしなくてもよく、その文字列が画面内に存在するかどうかを識別（弁別）するだけでいいので、従来技術より少ない処理での実現が可能である。
【００１２】
請求項２記載の映像データベース構築装置において、インターネット上のホームページとは、主に新聞社のトップページやポータルサイトのニュースページなどを指す。これらのページの多くが、短いニュースタイトル文字列をアンカ（リンク元）にして、そのニュースの詳細ページへのハイパーリンクが設定されているので、ホームページの記述言語であるＨＴＭＬ(Hyper Text Markup Language）を解析してタイトル文字列を機械的に取得することは容易である。新聞社各社のホームページなど複数のホームページからタイトル文字列を取得し、頻度の高い文字列を抽出することにより注目度の高いニュースのキーワードが抽出できる。また、ホームページ上でも、映像の字幕としても、ニュースのタイトルを表す文字列を使用しており、比較的表現方法が似通っているため映像で字幕として表示されるニュースタイトルとの頻出文字列のずれが少ない。
【００１３】
請求項３記載の映像検索装置によれば、上記のようにして構築された映像データベース手段を用いて、同じニュースについて報道している複数のニュース番組を、ユーザは簡単な操作で視聴することが出来る。
【００１４】
請求項４記載の不明語検索装置によれば、ユーザは文字を入力することなくインターネットから不明語の検索を簡単に行うことが出来る。
【発明を実施するための最良の形態】
【００１５】
以下、本願発明の実施形態を図面を参照して詳細に説明する。
【００１６】
図１は、本願発明に係る映像データベース構築装置の構成を示すブロック図である。この映像データベース構築装置は、タイトル取得装置１と、キーワード抽出装置２と、映像検出装置３と、映像データベース装置４とから成っている。
【００１７】
タイトル取得装置１は、ニュースに関するタイトル文字列を映像以外の情報から取得する。タイトル文字列の情報源は、インターネット上のホームページのニュースタイトルである。
【００１８】
図２は、上記タイトル取得装置１の構成例を示すブロック図である。このタイトル取得装置１は、ネットワーク制御部１１と、ホームページ取得部１２と、ホームページ解析部１３と、ＵＲＬ記憶部１４と、タイトル蓄積部１５とから構成されている。
【００１９】
ＵＲＬ記憶部１４に、予めタイトルの情報源となる新聞社のホームページなどのＵＲＬ（Uniform Resource Locator)を複数登録しておき、ホームページ取得部１２は、ＵＲＬ記憶部１４に登録されているＵＲＬのある時点でのホームページを全て、ネットワーク制御部１１を経由して、インターネット１００よりダウンロードする。ホームページ解析部１３は、ＨＴＭＬタグの＜ａ＞と＜／ａ＞で囲まれた文字列を取り出し、それをニュースのタイトル文字列の候補としてタイトル蓄積部１５に登録する。
【００２０】
図３は、キーワード抽出装置２の構成例を示すブロック図である。このキーワード抽出装置２は、上記タイトル取得装置１で取得した複数のタイトルからニュースのキーワードを抽出するもので、形態素解析部２１と、キーワード抽出部２２と、キーワード蓄積部２３とから構成されている。
【００２１】
キーワード抽出装置２は、上述したタイトル取得装置１のタイトル蓄積部１５に登録されたニュースのタイトル文字列候補を入力とする。キーワードを抽出する手順の一例を図４のフローチャートに示す。
【００２２】
まず、入力されたタイトル文字列候補を形態素解析部２１で形態素解析をする（図４のステップＳ１０１〜Ｓ１０６）。ここで形態素解析とは、文章を言語で意味を持つ最小の単位（形態素：単語）に分けることを表す。この時、数字や記号などキーワードに不適切なものや、「経済」「社会」「天気」など対象とするホームページに頻出する単語は処理の対象外とする（図４のステップＳ１０７）。また、キーワードは名詞であることがほとんどなので、以後の処理を名詞に絞る場合（図４のステップＳ１０８）、この形態素解析時に品詞の分類ができていると効率的に処理できる。
【００２３】
キーワード抽出部２２では、分けられた形態素がキーワードとしてどの程度の重みがあるかを計算し、結果は重みを表す数値と共にキーワード蓄積部２３に登録する（図４のステップＳ１０９〜Ｓ１１１）。キーワード抽出部２２で行う重み付けには、例えば特徴語を抽出する際によく使われる公知のアルゴリズムであるＴＦ−ＩＤＦを用いることが出来る。ＴＦはTerm Frequency（語彙頻度）であり、ＩＤＦはInverse Document Frequency（文書頻度の逆数）である。
【００２４】
ＴＦ−ＩＤＦ(w↓i,j)は以下のように示すことが出来る。
w↓i,j = tf↓i,j * log(N/df↓i)
tf↓i,j：特徴語抽出対象の全ドキュメントjの中の特徴語候補iの出現回数
df↓i：特徴語候補iが含まれるドキュメントの数
N：全ドキュメントの数
この場合のドキュメントとはタイトル文字列候補を指し、Nは登録している全ＵＲＬから取得したタイトル文字列候補の数である。
【００２５】
図５は、映像検出装置３の構成例を示すブロック図である。この映像検出装置３は、上記キーワード抽出装置２で抽出したキーワードが表示されるシーンを含む映像を検出するもので、キーワード字幕検出部３１と、映像解析準備部３２とから構成されている。
【００２６】
映像検出装置３で検出したいものは、例えば図６に示すように、アナウンサーがあるニュースについて冒頭のアナウンスをしており、画面の下や右上あるいは右下などにそのニュースの短いタイトルが字幕で表示されているシーンを含む映像やそのシーンが一番初めに出てきた位置である。キーワード字幕検出部３１では、上述したキーワード抽出装置２で、ある閥値以上の重みがついたキーワード、もしくは重みが上位から閾値個以内に入っているキーワードが対象となる映像の中に字幕として表示されている場所を検出する。前述の通り、予めキーワードとして探し出す文字列を絞っているため、全ての文字列を文字認識するよりは処理が軽い。しかし、それでも膨大な情報量の中からキーワード文字列が表示されているシーンを見つけなければならないため、映像解析準備部３２では文字識別（弁別）する映像の量を絞り込むための処理を行う。例えば、デジタル放送では放送映像と同時にその番組のジャンルなどＥＰＧ（Electronic Program Guide）情報も放送される。これから、「ニュース」に関するジャンルのみを解析対象とするといった絞込み処理である。そのほかにも、検出したいシーンはアナウンサーが正面を向いて比較的ズームで映っていることが多いため、このようなシーンのみを抽出する処理や、字幕が表示されているシーンのみを抽出する処理である。この時、これらの映像絞込み処理が文字識別（弁別）処理よりも軽い処理でなければならない。
【００２７】
このようにして文字識別（弁別）するシーンの絞込みを行ってから実際にキーワードを検出する。キーワードを検出したシーンを含む映像やシーンの位置はキーワードやタイトルと関連付けてハードディスク装置等から成る映像データベース装置４に登録される。
【００２８】
図７に、上記映像データベース装置４を用いた映像検索装置の画面例を示す。図７（ａ）では、その日にあったニュースのタイトルを一覧表示している。このタイトルは、タイトル取得装置１で取得したタイトル文字列候補で、キーワードとして抽出した文字が含まれているものから適当な基準で選んだ１つをそれぞれのキーワード毎に表示している。ユーザがこのタイトルの中から１つを選択すると、図７（ｂ）に示すような画面が表示される。
【００２９】
図７（ｂ）の画面中には、映像データベース装置４に記録している映像の一部を静止画にしたサムネイルが表示される。このサムネイルは、上述してきたようにして構築された映像データベース装置４の情報から、選択されたタイトルに含まれるキーワードと関連付けて登録されているシーンを含む映像を取り出し、当該映像からそのシーンを静止画として切り出して表示している。この例では、キーワードが「北日本」であり、「北日本」の字幕が表示されたシーンの静止画が表示されている。ユーザが、このサムネイルをリモコンなどから選択すると、そのシーンからの映像が再生され始める。
【００３０】
また、キーワードとして選ばれた単語はユーザがその意味を知りたい語である可能性が高い。ユーザの知りたい要求に応えるため、画面右下の“「北日本」とは？”の文字列を選択すると、インターネット上のgoogle（登録商標）などの検索サイトで「北日本とは」などで検索した結果を表示したブラウザが表示され、ユーザは文字を入力することなくインターネットから不明語の検索を簡単に行うことが出来る。
【００３１】
このように、構築した映像データベース装置４を用いて、ユーザは１つのニュースに関する情報を様々な情報源から簡単な操作で取得することが出来る。
【図面の簡単な説明】
【００３２】
【図１】本願発明に係る映像データベース構築装置の構成を示すブロック図。
【図２】そのタイトル取得装置の構成例を示すブロック図。
【図３】同じくキーワード抽出装置の構成例を示すブロック図。
【図４】キーワードを抽出する手順の一例を示すフローチャート。
【図５】図１の映像検出装置の構成例を示すブロック図。
【図６】映像検出装置による検出シーン例を示す図。
【図７】映像データベース装置を用いた映像検索装置の画面例を示す図。
【符号の説明】
【００３３】
１  タイトル取得装置
１１  ネットワーク制御部
１２  ホームページ取得部
１３  ホームページ解析部
１４  ＵＲＬ記憶部
１５  タイトル蓄積部
２  キーワード抽出装置
２１  形態素解析部
２２  キーワード抽出部
２３  キーワード蓄積部
３  映像検出装置
３１  キーワード字幕検出部
３２  映像解析準備部
４  映像データベース装置
１００  インターネット
【図１】
2008009807.tif 000003
【図２】
2008009807.tif 000004
【図３】
2008009807.tif 000005
【図４】
2008009807.tif 000006
【図５】
2008009807.tif 000007
【図６】
2008009807.tif 000008
【図７】
2008009807.tif 000009