(57)【要約】【課題】  ビデオファイルに記録された講義等の内容を効率的にユーザに伝える。【解決手段】  音声データを認識してテキストファイルに変換する音声認識部５と、上記テキストファイルとビデオファイルとを、そのテキストファイルがビデオファイルにおいてどの時刻の内容であるかを示す時刻情報に基づき関連づけるＬＩＶＥ教科書再生用ファイル作成部１０と、を備えている。【選択図】  図１
2006074514.tif 000002
【特許請求の範囲】
【請求項１】
動画像データおよび音声データを記録したビデオファイルを編集するための映像編集装置であって、
上記音声データを認識してテキストファイルに変換する音声認識手段と、
上記テキストファイルと上記ビデオファイルとを、そのテキストファイルが上記ビデオファイルにおいてどの時刻の内容であるかを示す時刻情報に基づき関連づけるファイル関連付け手段と、を備えていることを特徴とする映像編集装置。
【請求項２】
上記ビデオファイルにおいて場面が変化する箇所であるシーンチェンジを検出するシーンチェンジ検出手段と、
上記シーンチェンジの時刻に基づき、上記テキストファイルの内容を項目分けするためのタイトル名を、各項目について作成するタイトル作成手段と、を備えていることを特徴とする請求項１に記載の映像編集装置。
【請求項３】
上記シーンチェンジ検出手段により複数のシーンチェンジが上記ビデオファイルから検出される場合、
上記シーンチェンジ同士の時間間隔に基づき、上記テキストファイルを分ける項目の数を調整する項目数調整手段をさらに備えていることを特徴とする請求項２に記載の映像編集装置。
【請求項４】
上記ファイル関連付け手段は、さらに、上記ビデオファイルに記録された動画像内で配布された資料のデータと、上記テキストファイルおよび上記ビデオファイルの少なくとも一方とを関連付けることを特徴とする請求項１ないし３のいずれか１項に記載の映像編集装置。
【請求項５】
上記ファイル関連付け手段は、上記資料のデータを、その資料が配布された時刻を示す時刻情報に基づき関連付けることを特徴とする請求項４に記載の映像編集装置。
【請求項６】
動画像データおよび音声データを記録したビデオファイルを再生する映像再生装置であって、
上記音声データが変換されたテキストファイルであって、そのテキストファイルが上記ビデオファイルにおいてどの時刻の内容であるかを示す時刻情報に基づき関連付けられたテキストファイルを、上記ビデオファイルと同時に表示することを特徴とする映像再生装置。
【請求項７】
上記ビデオファイルに記録された動画像内で現在話されている内容に対応する上記テキストファイルの一部を、強調表示することを特徴とする請求項６に記載の映像再生装置。
【請求項８】
上記表示されているテキストファイルのうち、ユーザに選択された部分に対応する箇所から上記ビデオファイルを再生することを特徴とする請求項６または７に記載の映像再生装置。
【請求項９】
上記テキストファイルの内容を項目分けするためのタイトル名を複数表示するとともに、
上記複数のタイトル名のうち、ユーザに選択されたタイトル名に対応する箇所から上記ビデオファイルを再生することを特徴とする請求項６ないし８のいずれか１項に記載の映像再生装置。
【請求項１０】
上記ビデオファイルにおいて場面が変化する箇所に対応するサムネイル画像を複数並べて表示するとともに、
上記複数のサムネイル画像のうち、ユーザに選択されたサムネイル画像に対応する箇所から上記ビデオファイルを再生することを特徴とする請求項６ないし９のいずれか１項に記載の映像再生装置。
【請求項１１】
上記ビデオファイルに記録された動画像内で配布された資料のデータへのリンクを、上記テキストファイルまたは上記ビデオファイルの少なくとも一方と関連付けて表示することを特徴とする請求項６ないし１０のいずれか１項に記載の映像再生装置。
【請求項１２】
動画像データおよび音声データを記録したビデオファイルの音声データが変換されたテキストファイルと、そのビデオファイルを再生するためのビデオファイル再生用ファイルとが格納されているファイルデータベースであって、
上記ビデオファイル再生用ファイルは、上記テキストファイルを、そのテキストファイルが上記ビデオファイルにおいてどの時刻の内容であるかを示す時刻情報に基づき上記ビデオファイルと関連付けるものであり、
上記ビデオファイル再生用ファイルを外部機器が取得することにより、上記テキストファイルを上記ビデオファイルと関連付けて上記外部機器で再生するためのものであることを特徴とするファイルデータベース。
【請求項１３】
請求項１２に記載のファイルデータベースに格納された上記ビデオファイル再生用ファイルを外部機器に配信するためのファイル配信サーバ。
【請求項１４】
動画像データおよび音声データを記録したビデオファイルを編集するための映像編集方法であって、
上記音声データを認識してテキストファイルに変換する第１ステップと、
上記テキストファイルと上記ビデオファイルとを、そのテキストファイルが上記ビデオファイルにおいてどの時刻の内容であるかを示す時刻情報に基づき関連づける第２ステップと、を備えていることを特徴とする映像編集方法。
【請求項１５】
請求項１４に記載の映像編集方法の各ステップをコンピュータに実行させるための映像編集プログラム。
【請求項１６】
請求項１５に記載の映像編集プログラムを記録したことを特徴とするコンピュータ読み取り可能な記録媒体。
【請求項１７】
動画像データおよび音声データを記録したビデオファイルを再生する映像再生方法であって、
上記音声データが変換されたテキストファイルであって、そのテキストファイルが上記ビデオファイルにおいてどの時刻の内容であるかを示す時刻情報に基づき関連付けられたテキストファイルを、上記ビデオファイルと同時に表示することを特徴とする映像再生方法。
【請求項１８】
請求項１７に記載の映像再生方法をコンピュータに実行させるための映像再生プログラム。
【請求項１９】
請求項１８に記載の映像再生プログラムを記録したことを特徴とするコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、講義等を録画したビデオファイルの内容を効率的にユーザに伝えるための映像編集装置等に関する。
【背景技術】
【０００２】
大学の講義を録画してそれを学生にネットで配信したりメディアで貸し出したり、社会人に有料で提供したりするという活動は国内外の多くの大学ではるか以前から行われている。そして、遠隔講義やＥ−ラーニングの導入が進む中、情報メディア機器やネットワーク環境が整備されてくるにつれ、大学の講義の録画や配信が低コストで容易に行えるようになったため、講義録画の有効利用は大学のみが持つ知的財産を活用したサービスとしてますます重要になってくると考えられる（非特許文献１〜４参照）。
【０００３】
一般的に９０分の講義は、やはり９０分かけてその講義の録画物（ビデオ、ＤＶＤ等の媒体）を観ないと講義全体を理解することはできない。しかしこれでは、観たい所を探すための労力が大きく、試験の前に講義を復習しようという学生にとっては魅力的ではない。復習が魅力的であるためには、すくなくとも講義の全体構成をすばやく把握して、観たい場面を直接再生できるようなコンテンツの構成と効率的な操作機能が必要である。
【０００４】
そのためには、講義の録画内容の構造化を行うことが必須である。録画内容の構造化の技術では多くの提案がなされているが、大きく分けると映像認識と音声認識とによるインデキシング技術を挙げることができる。このインデキシング技術では、たとえば、シーンが変化する、顔がある、赤い色が多い、資料の画面であるとかを講義の録画内容から認識して、検索キーを作成することができる。
【非特許文献１】岩沢和男、石井光雄、岩田則和、小西克巳、「デジタルコンテンツ研究基盤としての公開講座アーカイブ」、コンピュータと教育研究報告, No.73, p47-54,2004
【非特許文献２】「講義映像のデジタル化と配信を行う教育支援システム−導入を想定したテストから見る問題と展望−」、コンピュータと教育研究報告, No.71, p35-42,2003
【非特許文献３】藤倉寛史他、「ビデオアーカイブを利用した学習を支援するシステムの提案」、音声言語情報処理研究報告、No040-001, 2001
【非特許文献４】梶原正宏、向日良夫、日野文男、高取和彦、「板書と音声を電子化した簡便な薬学授業アーカイブスの構築」、[online］、2003、［平成１６年７月２７日検索］、インターネット＜URL：http://www.shijokyo.or.jp/LINK/journal/0304/06_01.html＞
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、従来の検索キーは、講義が録画された画像の特徴を用いて作成されたものであり、講義の内容を密接に表すものではないので、講義の内容を録画物を用いて復習するための検索キーとしては有効ではない。すなわち、画像特徴による検索キーは、講義の内容とは関係がないので、講義の内容を理解するための補助としては使えない。
【０００６】
本発明は、上記従来の問題点に鑑みなされたものであって、ビデオファイルに記録された講義等の内容を効率的にユーザに伝え得る映像編集装置、映像再生装置、ファイルデータベース、ファイル配信サーバ、映像編集方法、映像編集プログラム、映像再生方法、映像再生プログラム、およびコンピュータ読み取り可能な記録媒体を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の映像編集装置は、上記課題を解決するために、動画像データおよび音声データを記録したビデオファイルを編集するための映像編集装置であって、上記音声データを認識してテキストファイルに変換する音声認識手段と、上記テキストファイルと上記ビデオファイルとを、そのテキストファイルが上記ビデオファイルにおいてどの時刻の内容であるかを示す時刻情報に基づき関連づけるファイル関連付け手段と、を備えていることを特徴としている。
【０００８】
また、本発明の映像編集方法は、動画像データおよび音声データを記録したビデオファイルを編集するための映像編集方法であって、上記音声データを認識してテキストファイルに変換する第１ステップと、上記テキストファイルと上記ビデオファイルとを、そのテキストファイルが上記ビデオファイルにおいてどの時刻の内容であるかを示す時刻情報に基づき関連づける第２ステップと、を備えていることを特徴としている。
【０００９】
上記構成によれば、音声認識手段または第１ステップにより変換されたテキストファイルにより、ビデオファイルの内容を外部機器で表示することができるので、ビデオファイルの内容を文章化して効率的にユーザに伝えることができる。
【００１０】
さらに、ファイル関連付け手段または第２ステップによりビデオファイルとテキストファイルとが関連付けられているので、ビデオファイルとテキストファイルとを同期させて外部機器で表示することができる。つまり、ビデオファイルとテキストファイルとを互いに関連させた状態で外部機器に表示することができ、ビデオファイルの内容をより効率的にユーザに伝えることができる。
【００１１】
さらに、上記構成の映像編集装置は、上記ビデオファイルにおいて場面が変化する箇所であるシーンチェンジを検出するシーンチェンジ検出手段と、上記シーンチェンジの時刻に基づき、上記テキストファイルの内容を項目分けするためのタイトル名を、各項目について作成するタイトル作成手段と、を備えていることが好ましい。
【００１２】
上記構成によれば、シーンチェンジ検出手段により検出されたシーンチェンジの時刻に基づいて、タイトル作成手段によりテキストファイルに関するタイトル名が作成される。したがって、このタイトル名を外部機器にて表示することにより、ユーザはテキストファイルの内容を大まかに把握することができる。それゆえ、ビデオファイルの内容をより効率的にユーザに伝えることができる。
【００１３】
さらに、上記構成の映像編集装置は、上記シーンチェンジ検出手段により複数のシーンチェンジが上記ビデオファイルから検出される場合、上記シーンチェンジ同士の時間間隔に基づき、上記テキストファイルを分ける項目の数を調整する項目数調整手段をさらに備えていることが好ましい。
【００１４】
すなわち、テキストファイルに関して作成されるタイトル名が多くなってしまうと、かえってユーザにビデオファイルの内容が伝わりにくくなってしまう場合がある。そこで、上記構成の映像編集装置では、特に項目数調整手段を備えている。
【００１５】
この項目数調整手段によれば、シーンチェンジ同士の時間間隔が長いものを、テキストファイルの項目数として妥当な数だけ選び出し、そのシーンチェンジの時刻に基づきタイトル名を作成することができる。これにより、項目数を適宜調整して、ビデオファイルの内容がより効率的にユーザに伝わるようにすることができる。
【００１６】
さらに、上記構成の映像編集装置は、上記ファイル関連付け手段が、さらに、上記ビデオファイルに記録された動画像内で配布された資料のデータと、上記テキストファイルおよび上記ビデオファイルの少なくとも一方とを関連付けるものであることが好ましい。
【００１７】
上記構成によれば、ファイル関連付け手段により、テキストファイルおよびビデオファイルの少なくとも一方と配布資料のデータとが関連付けられる。この関連付けは、たとえばその資料が配布された時刻を示す時刻情報に基づき行えばよい。これにより、テキストファイルおよびビデオファイルを外部機器にて表示する場合に、これらのファイルに配布資料のデータを関連付けて表示することができる。
【００１８】
よって、ユーザは、ビデオファイルを見る際に配布資料のデータを確認することができるので、ビデオファイルの内容をより効率的に理解することができる。
【００１９】
また、本発明の映像再生装置は、上記課題を解決するため、動画像データおよび音声データを記録したビデオファイルを再生する映像再生装置であって、上記音声データが変換されたテキストファイルであって、そのテキストファイルが上記ビデオファイルにおいてどの時刻の内容であるかを示す時刻情報に基づき関連付けられたテキストファイルを、上記ビデオファイルと同時に表示することを特徴としている。
【００２０】
また、本発明の映像再生方法は、上記課題を解決するために、動画像データおよび音声データを記録したビデオファイルを再生する映像再生方法であって、上記音声データが変換されたテキストファイルであって、そのテキストファイルが上記ビデオファイルにおいてどの時刻の内容であるかを示す時刻情報に基づき関連付けられたテキストファイルを、上記ビデオファイルと同時に表示することを特徴としている。
【００２１】
上記構成によれば、ビデオファイルの音声データが変換されたテキストファイルと、ビデオファイルとが同時に表示される。したがって、ユーザは、テキストファイルにより文章化されたビデオファイルの内容と、ビデオファイルの動画像および音声とを同時に得ることができるので、ビデオファイルの内容をより効率的に理解することができる。
【００２２】
さらに、上記構成の映像再生装置は、上記ビデオファイルに記録された動画像内で現在話されている内容に対応する上記テキストファイルの一部を、強調表示することが好ましい。
【００２３】
上記構成によれば、ユーザは、ビデオファイルに記録された動画像で現在話されている内容を、テキストファイルの強調表示された部分を視認することにより文章として理解することができるので、より効率的にビデオファイルの内容を理解することができる。
【００２４】
さらに、上記構成の映像再生装置は、上記表示されているテキストファイルのうち、ユーザに選択された部分に対応する箇所から上記ビデオファイルを再生することが好ましい。
【００２５】
さらに、上記構成の映像再生装置は、上記テキストファイルの内容を項目分けするためのタイトル名を複数表示するとともに、上記複数のタイトル名のうち、ユーザに選択されたタイトル名に対応する箇所から上記ビデオファイルを再生することが好ましい。
【００２６】
さらに、上記構成の映像再生装置は、上記ビデオファイルにおいて場面が変化する箇所に対応するサムネイル画像を複数並べて表示するとともに、上記複数のサムネイル画像のうち、ユーザに選択されたサムネイル画像に対応する箇所から上記ビデオファイルを再生することが好ましい。
【００２７】
上記構成によれば、ユーザは、テキストファイルの一部、タイトル名、またはサムネイル画像を選択すれば、その部分に対応する箇所からビデオファイルを再生することができる。さらに、ユーザは、テキストファイルの一部、タイトル名、またはサムネイル画像を選択する際に、テキストファイルの内容に基づきこれから再生されるビデオファイルの内容を確認できるので、ビデオファイルにおいて自分が見たいと思う箇所を的確に選択できる。
【００２８】
さらに、上記構成の映像再生装置は、上記ビデオファイルに記録された動画像内で配布された資料のデータへのリンクを、上記テキストファイルまたは上記ビデオファイルの少なくとも一方と関連付けて表示することが好ましい。
【００２９】
上記構成によれば、配布資料のデータへのリンクが、テキストファイルまたはビデオファイルと関連付けて表示されるので、ユーザは、これらのファイルが表示されている際に上記リンクを適宜選択することにより、配布資料を参照することができる。これにより、ユーザは、より効率的にビデオファイルの内容を理解することができる。
【００３０】
さらに、本発明のファイルデータベースは、上記課題を解決するために、動画像データおよび音声データを記録したビデオファイルの音声データが変換されたテキストファイルと、そのビデオファイルを再生するためのビデオファイル再生用ファイルとが格納されているファイルデータベースであって、上記ビデオファイル再生用ファイルは、上記テキストファイルを、そのテキストファイルが上記ビデオファイルにおいてどの時刻の内容であるかを示す時刻情報に基づき上記ビデオファイルと関連付けるものであり、上記ビデオファイル再生用ファイルを外部機器が取得することにより、上記テキストファイルを上記ビデオファイルと関連付けて上記外部機器で再生するためのものであることを特徴としている。
【００３１】
上記構成によれば、ビデオファイル再生用ファイルによりテキストファイルとビデオファイルとが関連付けられているので、このビデオファイル再生用ファイルをファイル配信サーバを用いて外部に配信することにより、外部機器にてビデオファイルとテキストファイルとを関連付けて再生することができる。したがって、ユーザは、テキストファイルにより文章化されたビデオファイルの内容と、ビデオファイルの動画像および音声とを同時に得ることができるので、ビデオファイルの内容をより効率的に理解することができる。
【００３２】
なお、コンピュータに上記映像編集方法を実行させる映像編集プログラムにより、コンピュータを用いて本発明の映像編集方法と同様の作用効果を得ることができる。さらに、上記映像編集プログラムをコンピュータ読み取り可能な記録媒体に記憶させることにより、任意のコンピュータ上で上記映像編集プログラムを実行させることができる。
【００３３】
また、コンピュータに上記映像再生方法を実行させる映像再生プログラムにより、コンピュータを用いて本発明の映像再生方法と同様の作用効果を得ることができる。さらに、上記映像再生プログラムをコンピュータ読み取り可能な記録媒体に記憶させることにより、任意のコンピュータ上で上記映像再生プログラムを実行させることができる。
【発明の効果】
【００３４】
本発明によれば、テキストファイルによりビデオファイルの内容を文章化してユーザに伝えることができ、さらにビデオファイルとテキストファイルとを互いに関連させた状態で表示することができるので、ビデオファイルの内容をより効率的にユーザに伝えることができる。
【発明を実施するための最良の形態】
【００３５】
〔１．システム全体の構成〕
本発明の映像編集装置の一実施形態を用いるシステムの構成について、図２を用いて説明する。
【００３６】
図２に示すように、本実施形態のＬＩＶＥ教科書データファイル配信システムでは、ＬＩＶＥ教科書作成装置（映像編集装置）１が、ネットワークを介して、ビデオファイル配信サーバ２、および複数の学習端末（映像再生装置）３…に接続されている。なお、ＬＩＶＥ教科書データファイルとは、講義内容を録画したビデオファイルが、後述する手順にて構造化されることにより、ユーザが講義を復習しやすくなるように構成されたファイルを意味する。
【００３７】
ビデオファイル配信サーバ２は、ビデオファイルデータベース２ａに格納されたＭＰＥＧ形式やＷＭＶ形式のビデオファイルを、ネットワーク経由で外部に配信するものである。このビデオファイルの配信に用いられるネットワークは、インターネットであってもよいし、ＬＡＮ（Local Area Network）であってもよい。なお、ビデオファイルデータベースは、図２において単に「ビデオファイルＤＢ」と記載されている。
【００３８】
ＬＩＶＥ教科書作成装置１は、ビデオファイル配信サーバ２から、ビデオファイル（たとえば講義を録画したファイル）の配信を受け、ＬＩＶＥ教科書データファイルを作成するものである。ＬＩＶＥ教科書作成装置１がＬＩＶＥ教科書データファイルを作成する手順に関しては、後述する。
【００３９】
そして、ＬＩＶＥ教科書作成装置１は、自身が作成したＬＩＶＥ教科書データファイルを、ＬＩＶＥ教科書データベース（ファイルデータベース）１ａに格納する。なお、図２においては、ＬＩＶＥ教科書データベースは、図２において単に「ＬＩＶＥ教科書ＤＢ」と記載されている。
【００４０】
学習端末３は、ＬＩＶＥ教科書データベース１ａから、ネットワーク経由でＬＩＶＥ教科書データファイルを取得し、該ファイルを再生して表示するためのものである。学習端末３におけるＬＩＶＥ教科書データファイルの表示態様については後述する。
【００４１】
このようにして、本実施形態のＬＩＶＥ教科書データファイル配信システムでは、ＬＩＶＥ教科書作成装置１が、ビデオファイルデータベース２ａから取得したビデオファイルからＬＩＶＥ教科書データファイルを作成し、そのＬＩＶＥ教科書データファイルを学習端末３においてネットワーク経由で再生できるように構成されている。
【００４２】
〔２．ＬＩＶＥ教科書作成装置１の構成〕
次に、ＬＩＶＥ教科書作成装置１の構成について、図１を用いてより具体的に説明する。図１に示すように、ＬＩＶＥ教科書作成装置１は、ビデオファイル取得部４と、音声認識部（音声認識手段）５と、テキストファイル加工部６と、シーンチェンジ検出部（シーンチェンジ検出手段）７と、インデックス画像ファイル作成部８と、全体構成調整部（タイトル作成手段、項目数調整手段）９と、ＬＩＶＥ教科書再生用ファイル作成部（ファイル関連付け手段）１０とを備えている。
【００４３】
ビデオファイル取得部４は、ビデオファイル配信サーバ２（図２）からネットワーク経由で講義内容を録画したビデオファイルを取得するものである。さらに、ビデオファイル取得部４では、ビデオファイル配信サーバ２から取得したビデオファイルを、編集が容易な形式に変換してもよい。たとえば、Adobe Premiere（Adobe社のソフトウェア製品名）を用いてビデオファイルをMPEG2形式に変換すると、種々の編集が容易となる。
【００４４】
音声認識部５は、ビデオファイル取得部４が取得したビデオファイルそのもの、または該ビデオファイルが編集容易な形式に変換されたファイルに記録された音声を認識し、その音声を、単語単位でテキストファイルに変換するものである。この音声認識は、市販されている音声認識ソフトを用いて自動で行われる。また、音声認識部５が変換するテキストファイルは、そのテキストファイルを構成する各データが、ビデオファイルにおいてどの時刻に再生される音声に対応するものであるかを示す情報（タイムスタンプ）が付与されている。
【００４５】
テキストファイル加工部６は、音声認識部５が変換したテキストファイルを、文節単位でまとめるものである。すなわち、テキストファイル加工部６は、音声認識部５において認識されている音声の無音期間が、所定の長さ（たとえば２秒）以上連続するならば、その無音期間を文節の区切りとする。さらに、テキストファイル加工部６は、文節単位でまとめたテキストファイルをＬＩＶＥ教科書データベース１ａに格納する。
【００４６】
シーンチェンジ検出部７は、ビデオファイルにおいてシーンが変化する部分（シーンチェンジ）を検出するものである。シーンチェンジは、たとえば以下のようにして検出することができる。
【００４７】
すなわち、シーンチェンジ検出部７は、ビデオファイルからたとえば１秒間隔で静止画像を抽出する。ビデオファイルが９０分の長さを有しているならば５４００枚の静止画像が抽出される。そして、シーンチェンジ検出部７は、１枚の静止画像を、たとえば９６×７２画素のサイズを有するサムネイル画像に縮小する。さらに、シーンチェンジ検出部７は、そのサムネイル画像を図３に示すように９分割して９個の分割画像を形成し、各分割画像に含まれる画素の画素値の平均を算出する。
【００４８】
そして、シーンチェンジ検出部７は、１秒毎に並べられたサムネイル画像間で対応する部分画像同士に関して、上記画素値の平均の差分を計算する。つまり、図３に示すように、時刻ｔにおける分割画像Ａに関する画素値の平均をＡｖ、時刻ｔ＋１における分割画像Ｂに関する画素値の平均をＢｖとした場合、Ｒ＝Ａｖ−Ｂｖを計算する。
【００４９】
さらに、シーンチェンジ検出部７は、上記Ｒをｒ色、ｇ色、およびｂ色のそれぞれについて計算し、各色についてのＲのうち最大のＲをＲｍとする。また、シーンチェンジ検出部７は、このようにして計算されるＲｍを、サムネイル画像内に含まれる全ての分割画像について計算する。
【００５０】
そして、シーンチェンジ検出部７は、Ｒｍが所定の閾値（Ｐ）を超える分割画像の個数が、所定数（ｑ個）よりも多いとき、時刻ｔ＋１においてシーンが変更したものと認識する。なお、Ｐ，ｑの値に関しては、妥当なシーンチェンジを検出できるように任意に設定することができる。
【００５１】
インデックス画像ファイル作成部８は、シーンチェンジ検出部７においてシーンが変更したと認識されたサムネイル画像を時系列に沿って複数並べることにより、たとえばｗｍｖ形式にてインデックス画像ファイルを作成するものである。このようにして作成されたインデックスファイル画像ファイルを参照することにより、ビデオファイル取得部４にて取得されたビデオファイルの概要を把握することができる。さらに、インデックス画像ファイル作成部８は、ＬＩＶＥ教科書データベース１ａにインデックス画像ファイルを格納する。
【００５２】
なお、ビデオファイル取得部４により取得されるビデオファイル、シーンチェンジ検出部７によりシーンがチェンジしたと検出されるサムネイル画像ファイル、およびインデックス画像ファイル作成部８により作成されるインデックス画像ファイルには、全てタイムスタンプが付与されている。
【００５３】
全体構成調整部９は、上記インデックス画像ファイルに含まれるサムネイル画像のタイムスタンプを参照して、テキストファイル加工部６が加工したテキストファイルを章単位で構成するものである。つまり、全体構成調整部９は、あるシーンが始まる時刻およびその次のシーンが始まる時刻を、シーンチェンジしたサムネイル画像ファイルのタイムスタンプに基づき判断し、これらの時刻の範囲に含まれるテキストファイルを、１つの章を構成するテキストファイルとする。
【００５４】
さらに、全体構成調整部９は、章の名前を示すテキストファイルを作成する。たとえば、シーンがチェンジしたサムネイル画像に付与されたタイムスタンプから、章が始まる時刻を示すテキストファイルを作成する一方、その章にて最初に発せられた文節を示すテキストファイルを抽出し、これら２つのテキストファイルを合わせたテキストファイルを章の名前を示すテキストファイルとすることができる。なお、テキストファイル加工部６が加工したテキストファイルから重要な単語を示すテキストファイルを抽出し、そのテキストファイルを章の名前を示すものとしてもよい。
【００５５】
さらに、全体構成調整部９において、章の数を調整することが可能である。たとえば、９０分のビデオファイルならばシーンチェンジ検出部７において数十個のサムネイル画像が検出されるが、章の数としては１０程度が好ましい。そこで、たとえば以下のようにして章の数を削減する。
【００５６】
すなわち、あるシーンチェンジから次のシーンチェンジまでの時間をサムネイル画像の提示継続時間とした場合において、インデックス画像に含まれるサムネイル画像を、提示継続時間の長いものから順番に１０画像ほど抽出する。そして、このように抽出されたサムネイル画像に基づき、全体構成調整部９に章の名前を示すテキストファイルを作成させる。
【００５７】
このサムネイル画像の抽出方法は、まとまった話をしているシーンの提示継続時間は長く、参考程度のそれほど重要でない話をしているシーンの提示継続時間は短いという傾向に基づいている。このようにして、提示継続時間に基づき抽出されるサムネイル画像の数を調整することにより、章の数を適宜調整することができる。また、講義の中で商用放送ビデオが用いられている場合も、これらは数秒単位でシーンが切り替わる。したがって、上述の提示継続時間に基づくサムネイル画像の抽出処理を行えば、商用放送ビデオが１つの章として認識されることを除外できる。
【００５８】
このようにして、全体構成調整部９は、章の名前を示すテキストファイルを作成するとともに、そのテキストファイルを連続させて、ビデオファイルの目次ページを示すテキストファイルを作成する。この目次ページを示すテキストファイルは、ＬＩＶＥ教科書データベース１ａに格納される。
【００５９】
ＬＩＶＥ教科書再生用ファイル作成部１０は、テキストファイル加工部６が加工したテキストファイルのタイムスタンプ、およびインデックス画像ファイル作成部８が作成したインデックス画像ファイルのタイムスタンプに基づき、テキストファイルとビデオファイルとを関連付けて再生するためのＬＩＶＥ教科書再生用ファイルを、たとえばＨＴＭＬ形式にて作成するものである。このＬＩＶＥ教科書再生用ファイルは、講義中に配布した資料のファイルをビデオファイルに関連付けてもよい。このようにして作成されたＬＩＶＥ教科書再生用ファイルは、ＬＩＶＥ教科書データベースに格納される。
【００６０】
上記構成により、ＬＩＶＥ教科書作成装置１は、インデックス画像ファイル、テキストファイル、およびＬＩＶＥ教科書再生用ファイルを、ＬＩＶＥ教科書データベース１ａに格納する。なお、上記テキストファイルには、テキストファイル加工部６により文節単位で構成されたテキストファイル、ならびに全体構成調整部９にて作成された章の名前を示すテキストファイルおよび目次ページを示すテキストファイルが含まれる。
【００６１】
また、ＬＩＶＥ教科書データベース１ａには、講義中で配布した資料のデータファイルを格納しておいてもよい。この場合には、ＬＩＶＥ教科書再生用ファイル作成部１０にて、資料のデータファイルと、インデックス画像ファイルおよびテキストファイルとの関連付けを行う必要がある。
【００６２】
つまり、資料のデータファイルがどの時刻での講義内容に対応するものであるかを示すタイムスタンプを、該データファイルに付与し、そのタイムスタンプと、インデックス画像ファイルおよびテキストファイルのそれぞれのタイムスタンプとを関連付けする必要がある。
【００６３】
〔３．処理フロー〕
次に、上記構成のＬＩＶＥ教科書作成装置１により実行されるＬＩＶＥ教科書データファイルの作成手順について、図４のフローチャートを用いて説明する。
【００６４】
図４に示すように、先ず、ＬＩＶＥ教科書作成装置１のビデオファイル取得部４により、ビデオファイルが取得される（ステップ１、以下ステップを単にＳと記載する）。その後、Ｓ１にて取得されたビデオファイルの音声認識が音声認識部５により実行される（Ｓ２）。さらに、音声認識部５が認識したテキストファイルが、テキストファイル加工部６により文節単位にまとめられる（Ｓ３）。
【００６５】
また、ビデオファイル取得部４にて取得されたビデオファイルに基づき、シーンチェンジ検出部７にてシーンチェンジが検出される（Ｓ４）。さらに、Ｓ５においては、シーンがチェンジしたと認識されるサムネイル画像が、インデックス画像ファイル作成部８により時系列で並べられてインデックス画像ファイルが作成される。
【００６６】
その後、全体構成調整部９は、テキストファイル加工部６が加工したテキストファイルを、Ｓ５にて作成されたインデックス画像ファイルに基づき、章単位で構成する（Ｓ６）。
【００６７】
さらに、全体構成調整部９において、上述した提示継続時間に基づく章の数の調整、および目次ページの作成が行われる（Ｓ７）。なお、章の数の調整は必ずしも行われる必要はない。
【００６８】
そして、上述のステップにより作成されたテキストファイルおよびインデックス画像ファイルのそれぞれのタイムスタンプにより、ＬＩＶＥ教科書再生用ファイル作成部１０によりＬＩＶＥ教科書再生用ファイルが作成される（Ｓ８）。その後、テキストファイル、インデックス画像ファイル、およびＬＩＶＥ教科書再生用ファイルがＬＩＶＥ教科書データベース１ａに格納されることにより、ＬＩＶＥ教科書データファイルの作成が終了する（Ｓ９）。
【００６９】
〔４．再生画面例〕
次に、上述のように作成されたＬＩＶＥ教科書データファイルの再生画面の一例について、図５および図６を用いて説明する。なお、以下に説明する再生画面は、学習端末３が、ネットワーク経由でＬＩＶＥ教科書データベース１ａからＬＩＶＥ教科書再生用ファイル、インデックス画像ファイル、およびテキストファイルを取得することにより、学習端末３側で表示されるものである。なお、ビデオファイルそのものは、学習端末３がビデオファイルデータベース２ａから取得するようにしてもよいし、ＬＩＶＥ教科書データベース１ａから取得するようにしてもよい。
【００７０】
図５は、ＬＩＶＥ教科書データファイルを再生する前に表示される、該ファイルの概要を示す画面（以下、単にホーム画面という）を示す図である。このホーム画面には、図５に示すように、講義名および講師名を表示するウインドウ、タイトルウインドウ、テキストウインドウ、インデックス画像表示用ウインドウ、章選択ボタン、および配布資料ファイルへのリンク等が表示される。
【００７１】
ホーム画面におけるタイトルウインドウには、講義名を表示することが好ましい。なお、タイトルウインドウには後述するように章の名前を表示してもよい。
【００７２】
また、ホーム画面におけるテキストウインドウには、講義の目次が表示される。このテキストウインドウに表示される目次は、ＬＩＶＥ教科書作成装置１の全体構成調整部９（図１参照）により作成される目次ページを示すテキストファイルに基づき表示されるものである。
【００７３】
インデックス画像表示用ウインドウには、インデックス画像ファイル作成部８にて作成されたインデックス画像ファイルが表示される。このインデックス画像ファイルは、図５に示すように、複数のサムネイル画像が時系列で並ぶように表示される。また、インデックス画像表示用ウインドウには、スクロールバーが設けられている。これにより、画面サイズとの関係から表示されていないサムネイル画像を、スクロールバーでインデックス画像をスライドさせることにより表示することができる。
【００７４】
章選択ボタンは、所望の章の画像をユーザが見れるように、ユーザが章番号を入力するためのものである。章選択ボタンは、図５に示すようにテンキー形式で表示してもよいし、その他の形式、たとえばスクロールバー形式により表示してもよい。
【００７５】
配布資料ファイルへのリンクは、講義で配布された資料を適宜参照できるようにするためのリンクである。講義で配布された資料が無い場合は、もちろんこのリンク表示を省略してもよい。また、講義に関連する教科書、参考書、ＨＰアドレスへのリンクを表示しても構わない。
【００７６】
また、ホーム画面においては、インデックス画像に含まれる代表的なサムネイル画像を適当な数抽出し、そのサムネイル画像を、インデックス画像表示用ウインドウにおけるサイズよりも大きなサイズで表示してもよい。これにより、ユーザが講師の顔を確認し、講義の雰囲気を大まかに把握することが可能となる。
【００７７】
図６は、ＬＩＶＥ教科書データファイルを再生する際に表示される画面（以下、ストリーミング画面という）を示す図である。このストリーミング画面には、図６に示すように、ビデオファイル再生用ウインドウ、タイトルウインドウ、テキストウインドウ、インデックス画像表示用ウインドウ、章選択ボタン、および配布資料のリンク等が表示されている。
【００７８】
ビデオファイル再生用ウインドウは、ビデオファイル取得部４（図１参照）が取得したビデオファイルを動画像で表示するものである。また、ストリーミング画面におけるタイトルウインドウには、ビデオファイル再生ウインドウにて現在再生されているビデオファイルに相当する章の名前が表示される。
【００７９】
また、ストリーミング画面におけるテキストウインドウには、ビデオファイル再生ウインドウにて現在再生されているビデオファイルに対応するテキストファイルが表示される。特に、このテキストウインドウにおいては、ビデオファイル再生ウインドウにて現在再生されている講義内容に対応するテキストが、たとえば反転表示等により強調表示されている。これにより、ユーザは、現在再生中の講義においてどのような内容が話されているかを瞬時に理解することができる。
【００８０】
また、強調表示の手法としては、図８に示すように、現在再生されている講義内容に対応するテキストを、拡大表示用ウインドウ内に拡大表示してもよい、これにより、弱視のユーザが講義内容を容易に理解できるようになる。さらに、現在再生されている講義内容に対応するテキストを英語に訳し、留学生のために英文にて講義内容を表示してもよい。
【００８１】
さらに、ストリーミング画面におけるインデックス画像表示ウインドウでは、ビデオファイル再生ウインドウにて現在再生されているビデオファイルに対応するサムネイル画像が、太枠で囲まれる等の手法により強調して表示されている。
【００８２】
このように表示される図５のホーム画面および図６のストリーミング画面では、インデックス画像表示用ウインドウに表示されるサムネイル画像ファイル、テキストウインドウに表示される目次または講義の内容を示すテキストファイル、およびビデオファイル再生用ウインドウに表示されるビデオファイルが、タイムスタンプにより関連づけられている。そして、これらのファイルの関連づけは、ＬＩＶＥ教科書再生用ファイルをＬＩＶＥ教科書データベース１ａから学習端末３が取得することにより、学習端末３にて把握することができる。
【００８３】
したがって、インデックス画像表示用ウインドウにて、特定のサムネイル画像をクリックすることにより、そのサムネイル画像のタイムスタンプの時刻からビデオファイルを再生することができる。また、テキストウインドウにて、特定の目次または文節をクリックすることにより、クリックされたテキストのタイムスタンプの時刻からビデオファイルが再生されるようにもできる。
【００８４】
参考のため、図５のホーム画面および図６のストリーミング画面を表示するためのＬＩＶＥ教科書データファイルの構成を、図７に示す。図７に示すように、ＬＩＶＥ教科書データファイルでは、講義のビデオファイル、サムネイル画像ファイル、テキストファイル、およびこれらのタイムスタンプが構造化されている。また、配布資料のファイルも、ＬＩＶＥ教科書データファイル内に含まれていることがわかる。
【００８５】
〔５．適用例〕
本実施形態のＬＩＶＥ教科書作成装置１によれば、上述のように講義内容のビデオファイルと、その講義で話されている内容を示すテキストファイルとが同期して再生されるので、種々の場面において好適である。以下、本実施形態の適用例をいくつか紹介する。
【００８６】
先ず、本実施形態のＬＩＶＥ教科書作成装置１は、大学・高校等の学校や研究機関における講義を、学生が復習するのに適している。つまり、講義の内容を理解するためには、講義で話されている内容が文字にて表されたものを視認することが直接的でありなおかつ効率的である。この点、本実施形態のＬＩＶＥ教科書作成装置１によれば、学習端末３側において講義内容がテキストファイルとして表示されるので（図６のテキストウインドウ参照）、講義の内容を効率的に理解し復習できる。
【００８７】
また、講義を担当する先生が、自分の講義をより良いものにするという観点からも、本実施形態のＬＩＶＥ教科書作成装置１は好適である。つまり、学生だけでなく先生にしてみても、ＬＩＶＥ教科書作成装置１により作成されたＬＩＶＥ教科書データファイルを学習端末３で再生すれば、効率的に自分の講義を復習し、次回の講義への改善点を見出すことができる。
【００８８】
さらに、本実施形態のＬＩＶＥ教科書作成装置１のユーザは、学生や先生だけに限られるものではない。たとえば、本実施形態のＬＩＶＥ教科書作成装置１によればビデオファイルとテキストファイルとを同期させて再生することができるので、難聴者が講義の内容をより容易に理解できるようになる。また、本実施形態のＬＩＶＥ教科書作成装置１の使用目的は、講義の復習に限定されるものではなく、たとえば、講演会、ドキュメンタリー、ドラマ、ニュース番組、英会話番組を見る目的で使用されてもよい。
【００８９】
〔６．補足〕
本実施形態のＬＩＶＥ教科書作成装置１の処理手順は、ＣＰＵなどの演算手段が、ＲＯＭ（Read Only Memory）やＲＡＭなどの記憶手段に記憶されたプログラムを実行し、キーボードなどの入力手段、ディスプレイなどの出力手段、あるいは、インターフェース回路などの通信手段を制御することにより実現することができる。
【００９０】
したがって、これらの手段を有するコンピュータが、上記プログラムを記録した記録媒体を読み取り、当該プログラムを実行するだけで、本実施形態のＬＩＶＥ教科書作成装置１の各種処理を実現することができる。また、上記プログラムをリムーバブルな記録媒体に記録することにより、任意のコンピュータ上で上記の各種機能および各種処理を実現することができる。
【００９１】
この記録媒体としては、マイクロコンピュータで処理を行うために図示しないメモリ、例えばＲＯＭのようなものがプログラムメディアであっても良いし、また、図示していないが外部記憶装置としてプログラム読み取り装置が設けられ、そこに記録媒体を挿入することにより読み取り可能なプログラムメディアであっても良い。
【００９２】
また、何れの場合でも、格納されているプログラムは、マイクロプロセッサがアクセスして実行される構成であることが好ましい。さらに、プログラムを読み出し、読み出されたプログラムは、マイクロコンピュータのプログラム記憶エリアにダウンロードされて、そのプログラムが実行される方式であることが好ましい。なお、このダウンロード用のプログラムは予め本体装置に格納されているものとする。
【００９３】
また、上記プログラムメディアとしては、本体と分離可能に構成される記録媒体であり、磁気テープやカセットテープ等のテープ系、フレキシブルディスクやハードディスク等の磁気ディスクやＣＤ／ＭＯ／ＭＤ／ＤＶＤ等のディスクのディスク系、ＩＣカード（メモリカードを含む）等のカード系、あるいはマスクＲＯＭ、ＥＰＲＯＭ（Erasable Programmable Read Only Memory）、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read Only Memory）、フラッシュＲＯＭ等による半導体メモリを含めた固定的にプログラムを担持する記録媒体等がある。
【００９４】
また、インターネットを含む通信ネットワークを接続可能なシステム構成であれば、通信ネットワークからプログラムをダウンロードするように流動的にプログラムを担持する記録媒体であることが好ましい。
【００９５】
さらに、このように通信ネットワークからプログラムをダウンロードする場合には、そのダウンロード用のプログラムは予め本体装置に格納しておくか、あるいは別な記録媒体からインストールされるものであることが好ましい。
【００９６】
このように、本実施形態のＬＩＶＥ教科書作成装置１は、動画像データおよび音声データを記録したビデオファイルを編集するものであって、上記音声データを認識してテキストファイルに変換する音声認識部５と、上記テキストファイルと上記ビデオファイルとを、そのテキストファイルが上記ビデオファイルにおいてどの時刻の内容であるかを示す時刻情報に基づき関連づけるＬＩＶＥ教科書再生用ファイル作成部１０と、を備えている。
【００９７】
上記構成によれば、音声認識部５により変換されたテキストファイルにより、ビデオファイルの内容を学習端末３で表示することができるので、ビデオファイルの内容を文章化して効率的にユーザに伝えることができる。
【００９８】
さらに、ＬＩＶＥ教科書再生用ファイル作成部１０によりビデオファイルとテキストファイルとが関連付けられているので、ビデオファイルとテキストファイルとを同期させて学習端末３で表示することができる。つまり、ビデオファイルとテキストファイルとを互いに関連させた状態で学習端末３に表示することができ、ビデオファイルの内容をより効率的にユーザに伝えることができる。
【００９９】
さらに、上記構成のＬＩＶＥ教科書作成装置１は、上記ビデオファイルにおいて場面が変化する箇所であるシーンチェンジを検出するシーンチェンジ検出部７と、上記シーンチェンジの時刻に基づき、上記テキストファイルの内容を項目分けするためのタイトル名を、各項目について作成する全体構成調整部９と、を備えている。
【０１００】
上記構成によれば、シーンチェンジ検出部７により検出されたシーンチェンジの時刻に基づいて、全体構成調整部９によりテキストファイルに関するタイトル名が作成される。したがって、このタイトル名を学習端末３にて表示することにより、ユーザはテキストファイルの内容を大まかに把握することができる。それゆえ、ビデオファイルの内容をより効率的にユーザに伝えることができる。
【０１０１】
さらに、全体構成調整部９は、シーンチェンジ検出部７により複数のシーンチェンジが上記ビデオファイルから検出される場合、上記シーンチェンジ同士の時間間隔（提示継続時間）に基づき、上記テキストファイルを分ける項目の数を調整することが好ましい。
【０１０２】
これにより、シーンチェンジ同士の時間間隔が長いものを、テキストファイルの項目数として妥当な数だけ選び出し、そのシーンチェンジの時刻に基づきタイトル名を作成することができる。これにより、項目数を適宜調整して、ビデオファイルの内容がより効率的にユーザに伝わるようにすることができる。
【０１０３】
さらに、ＬＩＶＥ教科書再生用ファイル作成部１０は、上記ビデオファイルに記録された動画像内で配布された資料のデータと、上記テキストファイルおよび上記ビデオファイルの少なくとも一方とを関連付けるものである。
【０１０４】
上記構成によれば、ＬＩＶＥ教科書再生用ファイル作成部１０により、テキストファイルおよびビデオファイルの少なくとも一方と配布資料のデータとが関連付けられる。この関連付けは、たとえばその資料が配布された時刻を示すタイムスタンプに基づき行えばよい。これにより、テキストファイルおよびビデオファイルを外部機器にて表示する場合に、これらのファイルに配布資料のデータを関連付けて表示することができる。
【０１０５】
よって、ユーザは、ビデオファイルを見る際に配布資料のデータを確認することができるので、ビデオファイルの内容をより効率的に理解することができる。
【０１０６】
また、本実施形態の学習端末３は、動画像データおよび音声データを記録したビデオファイルを再生するものであって、上記音声データが変換されたテキストファイルであって、そのテキストファイルが上記ビデオファイルにおいてどの時刻の内容であるかを示す時刻情報に基づき関連付けられたテキストファイルを、上記ビデオファイルと同時に表示する。
【０１０７】
上記構成によれば、ビデオファイルの音声データが変換されたテキストファイルと、ビデオファイルとが同時に表示される。したがって、ユーザは、テキストファイルにより文章化されたビデオファイルの内容と、ビデオファイルの動画像および音声とを同時に得ることができるので、ビデオファイルの内容をより効率的に理解することができる。
【０１０８】
さらに、上記構成の学習端末３は、上記ビデオファイルに記録された動画像内で現在話されている内容に対応する上記テキストファイルの一部を、強調表示する。
【０１０９】
上記構成によれば、ユーザは、ビデオファイルに記録された動画像で現在話されている内容を、テキストファイルの強調表示された部分を視認することにより文章として理解することができるので、より効率的にビデオファイルの内容を理解することができる。
【０１１０】
さらに、上記構成の学習端末３は、上記表示されているテキストファイルのうち、ユーザに選択された部分に対応する箇所から上記ビデオファイルを再生することが好ましい。
【０１１１】
または、上記テキストファイルの内容を項目分けするためのタイトル名を複数表示するとともに、上記複数のタイトル名のうち、ユーザに選択されたタイトル名に対応する箇所から上記ビデオファイルを再生するものであってもよい。
【０１１２】
さらに、上記構成の学習端末３は、上記ビデオファイルにおいて場面が変化する箇所に対応するサムネイル画像を複数並べて表示するとともに、上記複数のサムネイル画像のうち、ユーザに選択されたサムネイル画像に対応する箇所から上記ビデオファイルを再生するものであってもよい。
【０１１３】
上記構成によれば、ユーザは、テキストファイルの一部、タイトル名、またはサムネイル画像を選択すれば、その部分に対応する箇所からビデオファイルを再生することができる。さらに、ユーザは、テキストファイルの一部、タイトル名、またはサムネイル画像を選択する際に、テキストファイルの内容に基づきこれから再生されるビデオファイルの内容を確認できるので、ビデオファイルにおいて自分が見たいと思う箇所を的確に選択できる。
【０１１４】
さらに、上記構成の学習端末３は、上記ビデオファイルに記録された動画像内で配布された資料のデータへのリンクを、上記テキストファイルまたは上記ビデオファイルの少なくとも一方と関連付けて表示することが好ましい。
【０１１５】
上記構成によれば、配布資料のデータへのリンクが、テキストファイルまたはビデオファイルと関連付けて表示されるので、ユーザは、これらのファイルが表示されている際に上記リンクを適宜選択することにより、配布資料を参照することができる。これにより、ユーザは、より効率的にビデオファイルの内容を理解することができる。
【０１１６】
さらに、本実施形態のＬＩＶＥ教科書データベース１ａは、動画像データおよび音声データを記録したビデオファイルを再生するためのＬＩＶＥ教科書再生用ファイルを格納するものであって、上記ＬＩＶＥ教科書再生用ファイルは、上記音声データが変換されたテキストファイルを、そのテキストファイルが上記ビデオファイルにおいてどの時刻の内容であるかを示す時刻情報（タイムスタンプ）に基づき関連付けるものである。
【０１１７】
上記構成によれば、ＬＩＶＥ教科書再生用ファイルによりテキストファイルとビデオファイルとが関連付けられているので、このＬＩＶＥ教科書再生用ファイルをファイル配信サーバを用いて外部に配信することにより、学習端末３にてビデオファイルとテキストファイルとを関連付けて再生することができる。したがって、ユーザは、テキストファイルにより文章化されたビデオファイルの内容と、ビデオファイルの動画像および音声とを同時に得ることができるので、ビデオファイルの内容をより効率的に理解することができる。
【０１１８】
なお、本発明は上述した実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
【産業上の利用可能性】
【０１１９】
本発明によれば、テキストファイルによりビデオファイルの内容を文章化してユーザに伝えることができ、さらにビデオファイルとテキストファイルとを互いに関連させた状態で表示することができるので、ビデオファイルの内容をより効率的にユーザに伝えることができる。したがって、ビデオファイルに記録された講義等を学生や先生が復習するのに適している。
【図面の簡単な説明】
【０１２０】
【図１】本発明の映像編集装置の一実施形態に係るＬＩＶＥ教科書作成装置の構成を示すブロック図である。
【図２】図１のＬＩＶＥ教科書作成装置を用いるシステムの構成を示す図である。
【図３】図１のＬＩＶＥ教科書作成装置により行われるシーンチェンジ検出を説明するための図である。
【図４】本発明の映像編集方法の一実施形態に係る処理の流れを示すフローチャートである。
【図５】図２の学習端末において表示される画面の一例を示す図である。
【図６】図２の学習端末において表示される画面の一例を示す図である。
【図７】図１のＬＩＶＥ教科書作成装置により作成されるＬＩＶＥ教科書データファイルの構成を示す図である。
【図８】図２の学習端末において表示される画面の一例を示す図である。
【符号の説明】
【０１２１】
１    ＬＩＶＥ教科書作成装置（映像編集装置）
１ａ  ＬＩＶＥ教科書データベース（ファイルデータベース）
３    学習端末（映像再生装置）
５    音声認識部（音声認識手段）
７    シーンチェンジ検出部（シーンチェンジ検出手段）
８    インデックス画像ファイル作成部
９    全体構成調整部（タイトル作成手段、項目数調整手段）
１０  ＬＩＶＥ教科書再生用ファイル作成部（ファイル関連付け手段）
【図１】
2006074514.tif 000003
【図２】
2006074514.tif 000004
【図３】
2006074514.tif 000005
【図４】
2006074514.tif 000006
【図５】
2006074514.tif 000007
【図６】
2006074514.tif 000008
【図７】
2006074514.tif 000009
【図８】
2006074514.tif 000010