(57)【要約】【課題】音声付きムービーコンテンツ生成システムおよびプログラムの提供。【解決手段】電子データに含まれる、テキストデータおよび画像オブジェクトデータを抽出するテキスト・画像オブジェクトデータ抽出手段と、抽出されたテキストデータおよび画像オブジェクトデータをグループ化して所定の場所に記憶するテキスト・画像オブジェクトグループ化手段と、グループ化されたデータごとにテキストデータの音声変換処理を行い、グループ化されたデータごとに所定の場所に音声データおよび画像オブジェクトデータとして記憶する音声・画像オブジェクト変換・グループ化手段と、グループ化されたデータごとに音声データおよび画像オブジェクトデータを読み出して、関連付けられたグループごとに各ページごとのコンテンツを生成し、複数ページを構成するすべてのページを生成するムービーコンテンツ生成手段とを備える。【選択図】  図１
2004362167.tif 000002
【特許請求の範囲】
【請求項１】
テキストデータおよび画像オブジェクトデータを含む電子データから、画像オブジェクトデータおよび音声データを含むページを複数ページ有するムービーコンテンツを生成するシステムであって、
電子データに含まれる、テキストデータおよび画像オブジェクトデータを抽出するテキスト・画像オブジェクトデータ抽出手段と、
抽出されたテキストデータおよび画像オブジェクトデータを、グループ分けをした上で関連付けを行い、グループ化されたテキストデータおよび画像オブジェクトデータごとに所定の場所に記憶することにより、複数ページを構成するすべてのグループ化されたデータごとに所定の場所に記憶するテキスト・画像オブジェクトグループ化手段と、
グループ化されたデータごとに、前記のテキストデータの音声変換処理を行い、グループ化されたテキストデータおよび画像オブジェクトデータを、グループ化されたデータごとに、所定の場所に音声データおよび画像オブジェクトデータとして記憶することにより、複数ページを構成するすべての音声データおよび画像オブジェクトデータを所定の場所に記憶する音声・画像オブジェクト変換・グループ化手段と、
グループ化されたデータごとに、音声データおよび画像オブジェクトデータを読み出して、関連付けられたグループごとに各ページごとのコンテンツを生成し、複数ページを構成するすべてのページを生成するムービーコンテンツ生成手段とを備えたことを特徴とする、音声付きムービーコンテンツ生成システム。
【請求項２】
請求項１に記載の発明において、
前記のテキスト・画像オブジェクトデータ抽出手段は、電子データ編集画面において、電子データに含まれる、テキストデータおよび画像オブジェクトデータを、グループ化する順番に従い最前面化する処理により、グループ化するページごとに抽出するものであることを特徴とする、音声付きムービーコンテンツ生成システム。
【請求項３】
請求項１または２のいずれかに記載の発明において、
前記のテキスト・画像オブジェクトグループ化手段は、電子データ編集画面において、元の電子データの１ページごとに、少なくとも２ページ分のテキストデータおよび画像オブジェクトデータをグループ化するものであることを特徴とする、音声付きムービーコンテンツ生成システム。
【請求項４】
請求項１〜３のいずれかに記載の発明において、
前記のテキスト・画像オブジェクトグループ化手段は、グループ化されたページごとに記憶されたテキストデータおよび画像オブジェクトデータを、グループ化に対応した所定の記憶場所に、画像データファイルとテキストデータファイルとにそれぞれ記憶するものであることを特徴とする、音声付きムービーコンテンツ生成システム。
【請求項５】
請求項４に記載の発明において、
前記のテキスト・画像オブジェクトグループ化手段は、グループ化されたページごとに記憶されたテキストデータおよび画像オブジェクトデータを、グループ化に対応した所定の記憶場所に画像データファイルとテキストデータファイルとにそれぞれ記憶する際に、グループ化の関連付けをチェックする処理を行うことを特徴とする、音声付きムービーコンテンツ生成システム。
【請求項６】
請求項１〜５のいずれかに記載の発明において、
前記の音声・画像オブジェクト変換・グループ化手段は、音声変換画面において、グループ化されたデータごとに、前記のテキストデータを読み込んで音声読み上げ処理を行い、音声読み上げ処理において変換前のテキスト訂正画面を表示させるものであることを特徴とする、音声付きムービーコンテンツ生成システム。
【請求項７】
請求項１〜６のいずれかに記載の発明において、
前記の音声・画像オブジェクト変換・グループ化手段は、音声変換画面において、所定の場所に記憶された複数のグループ化されたテキストデータを、一括変換するための操作画面を備え、複数ページ分のテキストデータの音声データへの一括変換処理を行うものであることを特徴とする、音声付きムービーコンテンツ生成システム。
【請求項８】
請求項１〜７のいずれかに記載の発明において、
前記のムービーコンテンツ生成手段は、ムービーコンテンツ編集画面において、グループ化されたデータごとにタイムラインを設定し、所定の場所に記憶された音声データおよび画像データを読み込んで挿入し、複数ページを構成するすべてのページを生成することを特徴とする、音声付きムービーコンテンツ生成システム。
【請求項９】
テキストデータおよび画像オブジェクトデータを含む電子データから、画像オブジェクトデータおよび音声データを含むページを複数ページ有するムービーコンテンツを生成するプログラムであって、
電子データに含まれる、テキストデータおよび画像オブジェクトデータを抽出するテキスト・画像オブジェクトデータ抽出機能と、
抽出されたテキストデータおよび画像オブジェクトデータを、グループ分けをした上で関連付けを行い、グループ化されたテキストデータおよび画像オブジェクトデータごとに所定の場所に記憶することにより、複数ページを構成するすべてのグループ化されたデータごとに所定の場所に記憶するテキスト・画像オブジェクトグループ化機能とを備える電子データ編集プログラムと、
グループ化されたデータごとに、前記のテキストデータの音声変換処理を行い、グループ化されたテキストデータおよび画像オブジェクトデータを、グループ化されたデータごとに、所定の場所に音声データおよび画像オブジェクトデータとして記憶することにより、複数ページを構成するグループ化されたデータごとに、すべての音声データおよび画像オブジェクトデータを所定の場所に記憶する音声・画像オブジェクト変換・グループ化機能を備える音声変換プログラムと、
グループ化されたデータごとに、音声データおよび画像オブジェクトデータを読み出して、関連付けられたグループごとに各ページごとのコンテンツを生成し、複数ページを構成するすべてのページを生成するムービーコンテンツ生成機能を備えたコンテンツ生成プログラムとが連携して動作することを特徴とする、音声付きムービーコンテンツ生成プログラム。
【請求項１０】
請求項９に記載の発明において、
前記のテキスト・画像オブジェクトグループ化機能を備える電子データ編集プログラムは、グループ化されたページごとに記憶されたテキストデータおよび画像オブジェクトデータを、グループ化に対応した所定の記憶場所に画像データファイルとテキストデータファイルとにそれぞれ記憶する際に、グループ化の関連付けをチェックする処理を行うことを特徴とする、音声付きムービーコンテンツ生成プログラム。
【請求項１１】
請求項９または１０のいずれかに記載の発明において、
前記の音声・画像オブジェクト変換・グループ化機能を備える電子データ編集プログラムは、音声変換画面において、グループ化されたデータごとに、前記のテキストデータを読み込んで音声読み上げ処理を行い、音声読み上げ処理において変換前のテキスト訂正画面を表示させる処理を行うことを特徴とする、音声付きムービーコンテンツ生成プログラム。
【請求項１２】
請求項９〜１１のいずれかに記載の発明において、
前記の音声・画像オブジェクト変換・グループ化機能を備える電子データ編集プログラムは、音声変換画面において、所定の場所に記憶された複数のグループ化されたテキストデータを、一括変換するための操作画面を備え、複数ページ分のテキストデータの音声データへの一括変換処理を行うことを特徴とする、音声付きムービーコンテンツ生成プログラム。
【請求項１３】
請求項１〜８のいずれかに記載の音声付きスライドショームービーコンテンツ生成システムであって、
印刷物または出版物用に利用したデジタル編集データである、テキストデータおよび画像オブジェクトデータを含む電子データを、ムービーコンテンツを生成するために読み込んで記憶し、
当該印刷物または出版物用の電子データから、画像オブジェクトデータおよび音声データを含むページを複数ページ有するムービーコンテンツを生成することを特徴とする、印刷物または出版物用のデジタル編集データを利用した音声付きムービーコンテンツ生成システム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、テキスト・画像オブジェクトデータ変換による音声付きムービーコンテンツ生成システムに関する。
【０００２】
【従来の技術】
従来より、各種の印刷物や出版物などの、紙媒体のコンテンツの編集に、コンピュータ装置を利用したデジタル編集が行われている。
たとえば、印刷物または出版物用に利用したデジタル編集データである。
【０００３】
【発明が解決しようとする課題】
ところで、こうしたデジタル編集データは、紙媒体以外にも活用することができる。
特に、今日ではパーソナルコンピュータやインターネットの利用が普及し、これらを利用した電子データ、ウェブコンテンツとしての活用ができるならば、様々な用途が広がり、またコンテンツを保有する著者、編集者、出版社などにとっても販売などによる収益の機会が広がる。また、たとえば各種のテキストや教育用・解説用の出版物などを利用して、スライドショー形式のコンテンツを作ることができれば、これを利用したコンテンツ配信や、ネットワークを利用した遠隔配信などをすることもできる。
【０００４】
しかしながら、電子データからコンテンツを生成する場合において、各種の印刷物や出版物用の元の電子データは、文字と絵や写真（画像）とが含まれるデータであって、スライドショー形式のコンテンツにするためには音声が必要である。
ところで、音声変換には様々な技術が開発されている。
たとえば特開２００１−５４７６「プレゼンテーション装置」においては、
画像の切り替えと同期して、音声合成でテキストデータの読み上げを自動的に行うプレゼンテーション装置が提案されている。
また特開平６−２１４５８４「電子出版システム」においては、出版情報の中のテキスト情報を音声変換して出力するに際し、正しい読み上げが可能な電子出版システムが提案されている。
また特開２００２−４１５０２「ドキュメント作成システム及びドキュメント作成方法」においては、報告書等のドキュメントを、移動先で撮影した画像を使って簡便に作成できるようにする技術が提案されている。
【０００５】
しかしながら、これらの技術は、音声読み上げを行うテキスト部分を指定したり、ページを指定したりする操作を行いつつ、音声読み上げをするものであり、自動的にページめくりがされて動画として再生されるものではない。
さらに、自動的にページめくりがされて動画として再生されるスライドショー形式のムービーコンテンツにするためには、複数のページから構成される元の電子データを、時間の経過に従い表示・再生される複数ページのデータに変換する必要がある。
したがって、音声変換と、複数ページへの順序付け、ページ構成などを行う必要があり、これをすべて手作業で行うことには膨大な作業が必要となる。
【０００６】
また、特開２００１−３３１４０７「ユーザがアクセス可能なウェブページを変換する方法、ユーザがアクセス可能なウェブページを自動的に変換するためのインテリジェントエージェントプロセスを使用する方法、ボイスブラウザおよび変換システム、並びにウェブページにエンドユーザがカスタマイズしたマスクを作成する方法」においては、ウェブサイトを音声フレンドリにすることが可能なボイスブラウザおよび変換システムが提案されている。
ボイスブラウザおよび変換システムは、ウェブページを読み上げるためのテキスト／スピーチ変換ソフトウェアと、単純なキーストロークまたはスピーチ認識によって次のページへナビゲートするものであり、ウェブページへのユーザーのアクセスにより音声読み上げを行うため、あらかじめ音声変換をしておく必要がない。
しかしながら、こうした方法を採用した場合には、音声変換処理をアクセス中に逐次行うため、処理の負荷がかかり、通信環境によっては適正に再生が同期して行われない。
さらに、アクセスするユーザーごとに音声変換プログラムが起動されて使用されるため、既存の開発されている音声変換プログラムを使用する場合にはライセンス料がかさんでしまう。
【０００７】
そこで本発明においては、上記の様々な課題を解決し、印刷物または出版物用に利用したデジタル編集データである、テキストデータおよび画像オブジェクトデータを含む電子データを、自動的にページめくりがされるスライドショー形式のようなムービーコンテンツを生成するために読み込んで記憶し、当該印刷物または出版物用の電子データから、画像オブジェクトデータおよび音声データを含むページを複数ページ有するムービーコンテンツを生成するシステムと、そのためのプログラムを提供することを目的とする。
これにより、出版物や各種の印刷物、たとえば各種のテキストや説明書、出版物のデータなどを、紙媒体のデータとして利用するだけではなく再利用することにより、ウェブ上で利用可能な電子データとして販売したり、ウェブ上での教育コンテンツ、広報コンテンツ、電子出版ムービーコンテンツなどとして利用することができる。
さらに本発明においては、電子データからコンテンツを生成する場合において、各種の印刷物や出版物用の元の電子データは、文字と絵や写真（画像）とが含まれるデータであって、自動的にページめくりがされるスライドショー形式のようなコンテンツにするためには音声変換をあらかじめ行い、アクセス中に処理の負荷がかからず、さらに既存の開発されている音声変換プログラムを使用する場合であってもライセンス料がかさまないシステムを提供することを目的とする。
さらに本発明においては、複数のページから構成される元の電子データを、時間の経過に従い表示・再生される複数ページのデータに変換するために、順序、ページ構成、修正などを容易に行うことが可能なシステムと、そのためのプログラムを提供することを目的とする。
【０００８】
【課題を解決するための手段】
上記課題を解決するため、請求項１に記載の発明においては、
テキストデータおよび画像オブジェクトデータを含む電子データから、画像オブジェクトデータおよび音声データを含むページを複数ページ有するムービーコンテンツを生成するシステムであって、
電子データに含まれる、テキストデータおよび画像オブジェクトデータを抽出するテキスト・画像オブジェクトデータ抽出手段と、
抽出されたテキストデータおよび画像オブジェクトデータを、グループ分けをした上で関連付けを行い、グループ化されたテキストデータおよび画像オブジェクトデータごとに所定の場所に記憶することにより、複数ページを構成するすべてのグループ化されたデータごとに所定の場所に記憶するテキスト・画像オブジェクトグループ化手段と、
グループ化されたデータごとに、前記のテキストデータの音声変換処理を行い、グループ化されたテキストデータおよび画像オブジェクトデータを、グループ化されたデータごとに、所定の場所に音声データおよび画像オブジェクトデータとして記憶することにより、複数ページを構成するすべての音声データおよび画像オブジェクトデータを所定の場所に記憶する音声・画像オブジェクト変換・グループ化手段と、
グループ化されたデータごとに、音声データおよび画像オブジェクトデータを読み出して、関連付けられたグループごとに各ページごとのコンテンツを生成し、複数ページを構成するすべてのページを生成するムービーコンテンツ生成手段とを備えた、音声付きムービーコンテンツ生成システムであることを特徴としている。
【０００９】
また、上記課題を解決するため、請求項２に記載の発明においては、
請求項１に記載の発明において、
前記のテキスト・画像オブジェクトデータ抽出手段は、電子データ編集画面において、電子データに含まれる、テキストデータおよび画像オブジェクトデータを、グループ化する順番に従い最前面化する処理により、グループ化するページごとに抽出する、音声付きムービーコンテンツ生成システムであることを特徴としている。
【００１０】
また、上記課題を解決するため、請求項３に記載の発明においては、
請求項１または２のいずれかに記載の発明において、
前記のテキスト・画像オブジェクトグループ化手段は、電子データ編集画面において、元の電子データの１ページごとに、少なくとも２ページ分のテキストデータおよび画像オブジェクトデータをグループ化する、音声付きムービーコンテンツ生成システムであることを特徴としている。
【００１１】
また、上記課題を解決するため、請求項４に記載の発明においては、
請求項１〜３のいずれかに記載の発明において、
前記のテキスト・画像オブジェクトグループ化手段は、グループ化されたページごとに記憶されたテキストデータおよび画像オブジェクトデータを、グループ化に対応した所定の記憶場所に、画像データファイルとテキストデータファイルとにそれぞれ記憶する、音声付きムービーコンテンツ生成システムであることを特徴としている。
【００１２】
また、上記課題を解決するため、請求項５に記載の発明においては、
請求項４に記載の発明において、
前記のテキスト・画像オブジェクトグループ化手段は、グループ化されたページごとに記憶されたテキストデータおよび画像オブジェクトデータを、グループ化に対応した所定の記憶場所に画像データファイルとテキストデータファイルとにそれぞれ記憶する際に、グループ化の関連付けをチェックする処理を行う、音声付きムービーコンテンツ生成システムであることを特徴としている。
【００１３】
また、上記課題を解決するため、請求項６に記載の発明においては、
請求項１〜５のいずれかに記載の発明において、
前記の音声・画像オブジェクト変換・グループ化手段は、音声変換画面において、グループ化されたデータごとに、前記のテキストデータを読み込んで音声読み上げ処理を行い、音声読み上げ処理において変換前のテキスト訂正画面を表示させる、音声付きムービーコンテンツ生成システムであることを特徴としている。
【００１４】
また、上記課題を解決するため、請求項７に記載の発明においては、
請求項１〜６のいずれかに記載の発明において、
前記の音声・画像オブジェクト変換・グループ化手段は、音声変換画面において、所定の場所に記憶された複数のグループ化されたテキストデータを、一括変換するための操作画面を備え、複数ページ分のテキストデータの音声データへの一括変換処理を行う、音声付きムービーコンテンツ生成システムであることを特徴としている。
【００１５】
また、上記課題を解決するため、請求項８に記載の発明においては、
請求項１〜７のいずれかに記載の発明において、
前記のムービーコンテンツ生成手段は、ムービーコンテンツ編集画面において、グループ化されたデータごとにタイムラインを設定し、所定の場所に記憶された音声データおよび画像データを読み込んで挿入し、複数ページを構成するすべてのページを生成する、音声付きムービーコンテンツ生成システムであることを特徴としている。
【００１６】
また、上記課題を解決するため、請求項９に記載の発明においては、
テキストデータおよび画像オブジェクトデータを含む電子データから、画像オブジェクトデータおよび音声データを含むページを複数ページ有するムービーコンテンツを生成するプログラムであって、
電子データに含まれる、テキストデータおよび画像オブジェクトデータを抽出するテキスト・画像オブジェクトデータ抽出機能と、
抽出されたテキストデータおよび画像オブジェクトデータを、グループ分けをした上で関連付けを行い、グループ化されたテキストデータおよび画像オブジェクトデータごとに所定の場所に記憶することにより、複数ページを構成するすべてのグループ化されたデータごとに所定の場所に記憶するテキスト・画像オブジェクトグループ化機能とを備える電子データ編集プログラムと、
グループ化されたデータごとに、前記のテキストデータの音声変換処理を行い、グループ化されたテキストデータおよび画像オブジェクトデータを、グループ化されたデータごとに、所定の場所に音声データおよび画像オブジェクトデータとして記憶することにより、複数ページを構成するグループ化されたデータごとに、すべての音声データおよび画像オブジェクトデータを所定の場所に記憶する音声・画像オブジェクト変換・グループ化機能を備える音声変換プログラムと、
グループ化されたデータごとに、音声データおよび画像オブジェクトデータを読み出して、関連付けられたグループごとに各ページごとのコンテンツを生成し、複数ページを構成するすべてのページを生成するムービーコンテンツ生成機能を備えたコンテンツ生成プログラムとが連携して動作する、音声付きムービーコンテンツ生成プログラムであることを特徴としている。
【００１７】
また、上記課題を解決するため、請求項１０に記載の発明においては、
請求項９に記載の発明において、
前記のテキスト・画像オブジェクトグループ化機能を備える電子データ編集プログラムは、グループ化されたページごとに記憶されたテキストデータおよび画像オブジェクトデータを、グループ化に対応した所定の記憶場所に画像データファイルとテキストデータファイルとにそれぞれ記憶する際に、グループ化の関連付けをチェックする処理を行う、音声付きムービーコンテンツ生成プログラムであることを特徴としている。
【００１８】
また、上記課題を解決するため、請求項１１に記載の発明においては、
請求項９または１０のいずれかに記載の発明において、
前記の音声・画像オブジェクト変換・グループ化機能を備える電子データ編集プログラムは、音声変換画面において、グループ化されたデータごとに、前記のテキストデータを読み込んで音声読み上げ処理を行い、音声読み上げ処理において変換前のテキスト訂正画面を表示させる処理を行う、音声付きムービーコンテンツ生成プログラムであることを特徴としている。
【００１９】
また、上記課題を解決するため、請求項１２に記載の発明においては、
請求項９〜１１のいずれかに記載の発明において、
前記の音声・画像オブジェクト変換・グループ化機能を備える電子データ編集プログラムは、音声変換画面において、所定の場所に記憶された複数のグループ化されたテキストデータを、一括変換するための操作画面を備え、複数ページ分のテキストデータの音声データへの一括変換処理を行う、音声付きムービーコンテンツ生成プログラムであることを特徴としている。
【００２０】
また、上記課題を解決するため、請求項１３に記載の発明においては、
請求項１〜８のいずれかに記載の音声付きムービーコンテンツ生成システムであって、
印刷物または出版物用に利用したデジタル編集データである、テキストデータおよび画像オブジェクトデータを含む電子データを、ムービーコンテンツを生成するために読み込んで記憶し、
当該印刷物または出版物用の電子データから、画像オブジェクトデータおよび音声データを含むページを複数ページ有するムービーコンテンツを生成する、印刷物または出版物用のデジタル編集データを利用した音声付きムービーコンテンツ生成システムであることを特徴としている
【００２１】
【発明の実施の形態】
以下、本発明の実施の形態について図面を参照して説明する。
図１は、本発明のシステムの基本的な構成の一例を示すシステム構成図である。
本発明のシステムは、通常、パーソナルコンピュータやワークステーション、サーバ装置などのコンピュータ端末において実装され利用されるものである。
コンピュータ端末は、制御手段、記憶手段、入力手段、出力手段、表示手段などを備え、各種のアプリケーションプログラムや、オペレーティングシステム（ＯＳ）を備える。
【００２２】
本発明の第一の実施形態は、テキストデータおよび画像オブジェクトデータを含む電子データから、画像オブジェクトデータおよび音声データを含むページを複数ページ有する、自動的にページめくりがされるスライドショー形式のようなムービーコンテンツを生成するシステムである。
第一の実施形態の好ましい代表的な一例は、印刷物または出版物用に利用したデジタル編集データである、テキストデータおよび画像オブジェクトデータを含む電子データを、自動的にページめくりがされるスライドショー形式のようなムービーコンテンツを生成するために読み込んで記憶し、当該印刷物または出版物用の電子データから、画像オブジェクトデータおよび音声データを含むページを複数ページ有するムービーコンテンツを生成するシステムである。これにより、出版物や各種の印刷物、たとえば各種のテキストや説明書、出版物のデータなどを、紙媒体のデータとして利用するだけではなく再利用することにより、ウェブ上で利用可能な電子データとして販売したり、ウェブ上での教育コンテンツ、広報コンテンツ、電子出版ムービーコンテンツなどとして利用することができる。
【００２３】
本発明の第二の実施形態は、テキストデータおよび画像オブジェクトデータを含む電子データから、画像オブジェクトデータおよび音声データを含むページを複数ページ有するムービーコンテンツを生成するプログラムである。プログラムは、アプリケーションプログラムとして、前記のコンピュータ装置に記憶され、ムービーコンテンツを生成するシステムとして動作させるものである。
【００２４】
コンテンツ生成プログラムは、電子データ編集プログラムと、音声変換プログラムと、コンテンツ生成プログラムとを含み構成される。これらの各プログラムは、別個に構成された各プログラムが連携して動作するものであってもよい。あるいは各プログラムをモジュールとして組み込み一体となって構成されたコンテンツ生成プログラムであってもよい。
【００２５】
電子データ編集プログラムは、電子データに含まれる、テキストデータおよび画像オブジェクトデータを抽出するテキスト・画像オブジェクトデータ抽出機能と、抽出されたテキストデータおよび画像オブジェクトデータを、グループ分けをした上で関連付けを行い、グループ化されたテキストデータおよび画像オブジェクトデータごとに所定の場所に記憶することにより、複数ページを構成するすべてのグループ化されたデータごとに所定の場所に記憶するテキスト・画像オブジェクトグループ化機能とを備える。
【００２６】
また、音声変換プログラムは、グループ化されたデータごとに、前記のテキストデータの音声変換処理を行い、グループ化されたテキストデータおよび画像オブジェクトデータを、グループ化されたデータごとに、所定の場所に音声データおよび画像オブジェクトデータとして記憶することにより、複数ページを構成するグループ化されたデータごとに、すべての音声データおよび画像オブジェクトデータを所定の場所に記憶する音声・画像オブジェクト変換・グループ化機能を備える。
【００２７】
また、コンテンツ生成プログラムは、グループ化されたデータごとに、音声データおよび画像オブジェクトデータを読み出して、関連付けられたグループごとに各ページごとのコンテンツを生成し、複数ページを構成するすべてのページを生成するムービーコンテンツ生成機能を備える。
これらが連携して動作する音声付きムービーコンテンツ生成プログラムであって、これらの動作及び機能、処理の流れについては後述する。
【００２８】
以下、本発明のシステムおよびプログラムの基本的な動作及び機能、処理の流れについて説明する。
図２及び図３は、本発明の基本的な処理の流れの一例を示すフローチャートである。なお、ここに示す処理の流れは好ましい一例であって、これに限定されるものではなく、様々な応用や変形が可能である。
また図４から図４０は、本発明のシステムおよびプログラムを利用した操作および処理において、コンピュータ端末の画面に表示されるプログラムの画面の一例である。
【００２９】
初めに、本発明の音声付きムービーコンテンツ生成システムは、電子データに含まれる、テキストデータおよび画像オブジェクトデータを抽出するテキスト・画像オブジェクトデータ抽出手段を備えている。
テキスト・画像オブジェクトデータ抽出手段は、電子データ編集画面において、電子データに含まれる、テキストデータおよび画像オブジェクトデータを、グループ化する順番に従い最前面化する処理により、グループ化するページごとに抽出する。
【００３０】
初めに、電子データから画像とテキストヘ変換する処理について説明する。
ムービーコンテンツ生成プログラムを起動する（Ｓ１０１）。
電子データ編集プログラムにより、電子データを読み込みを行う（Ｓ１０２）。
図４は、読み込まれた電子データの一例を示す。
電子データは、たとえば前述のように印刷物・出版物用の電子データなどであり、好ましくは１ページに２つ又はそれ以上のグループを作る必要がある。２つのグループを作る場合には、真ん中あたりを境に上下２グループを作ることが望ましい。１つのグループには、画像が最低１つ、テキストが最低１つ入っていなくてはならない。また、ムービーコンテンツにするため、順番が重要であり、最前面化の際に順番を決めておく必要がある。
【００３１】
電子データ編集画面において、電子データに含まれる、テキストデータおよび画像オブジェクトデータを、グループ化する順番に従い最前面化する（Ｓ１０３）。
オブジェクトを任意の順番で抽出するために、それぞれのオブジェクトを最前面化するという方法を採用する。
まず、図５、図６に示したように、抽出したいオブジェクトを選択し、画面上中央にある最前面化の操作メニューをクリックする。
このように抽出したい順にオブジェクトを最前面化していくが、最前面化するのは少なくともテキストボックスだけでよい。
【００３２】
次に、本発明の音声付きムービーコンテンツ生成システムは、抽出されたテキストデータおよび画像オブジェクトデータを、グループ分けをした上で関連付けを行い、グループ化されたテキストデータおよび画像オブジェクトデータごとに所定の場所に記憶することにより、複数ページを構成するすべてのグループ化されたデータごとに所定の場所に記憶するテキスト・画像オブジェクトグループ化手段を備えている。
図７および図８は、グループ化を行う画面の一例を示す。
最前面化したオブジェクトをグループ化するが、その操作はたとえば、選びたい範囲をドラッグでつくった四角の中に収め、右クリックでグループ化を選ぶといった方法により行うことが好ましい。
【００３３】
テキスト・画像オブジェクトグループ化手段は、電子データ編集画面において、好ましくは、元の電子データの１ページごとに、少なくとも２ページ分のテキストデータおよび画像オブジェクトデータをグループ化する。これによりたとえば、出版物で利用された縦長の用紙に合った電子データから、ウェブでの画面による閲覧に適した横長のページにすることができる。
電子データ編集画面において、元の電子データの１ページごとに、少なくとも２ページ分のテキストデータおよび画像オブジェクトデータをグループ化を行い（Ｓ１０４）、抽出されたテキストデータおよび画像オブジェクトデータを、グループ分けをした上で関連付けをする（Ｓ１０５）
図９は、１ページに２つのグループをつくる処理画面の一例を示す。
１ページに上下２つのグループをつくる場合に、上だけで終わってしまいグループが１つになってしまうことがありうるが、そのような場合には、真っ白な画像データと何も書いてないテキストデータを下の方にグループ化して貼り付けておくことができる。白紙データは画面上部の「挿入」から、「図」−「ファイルから」−「白紙．ｊｐｇ」を選択する方法や、さらに「白紙データの挿入ボタン」などをプログラムに用意しておき、クリックによりあらかじめ用意された白紙の画像データを挿入することができる。空のテキストボックスの方は画面左端から選択することで挿入することができる。これにより、音声のみのページや、画像のみのページを含むムービーコンテンツが生成できる。
【００３４】
グループ化されたテキストデータおよび画像オブジェクトデータごとに所定の場所に記憶し（Ｓ１０６）、複数ページを構成するすべてのグループ化されたデータごとに同様の処理を行い、所定の場所に記憶する（Ｓ１０７）。
【００３５】
テキスト・画像オブジェクトグループ化手段は、グループ化されたページごとに記憶されたテキストデータおよび画像オブジェクトデータを、グループ化に対応した所定の記憶場所に、画像データファイルとテキストデータファイルとにそれぞれ記憶する。
すなわち、元の電子データからテキスト・画像オブジェクトグループ化手段によりグループ化されたデータは、電子データ編集プログラムが扱うオブジェクトであって、そのままではウェブコンテンツとして表示できないものであることが想定され、さらに後述するテキストからの音声変換処理を行うため、グループ化に対応した所定の記憶場所に、画像データファイルとテキストデータファイルとしてそれぞれ記憶する（Ｓ１０８）。
【００３６】
図１０は、マクロを使ってテキストと画像に分けるプログラムの操作画面の一例を示す。
図１１、図１２に示すように、次に操作画面において「ファイルのインポート」を選択し、テキスト・画像オブジェクトグループ化手段によりグループ化された画像・テキストデータをインポートする。
次にインポートしたファイルを、図１３および図１４に示すように画像データファイルとテキストデータファイルとしてそれぞれ記憶するための入力画面が表示される。画像の「保存」ボタン、テキストの「保存」ボタンを押すことで、それぞれ画像とテキストを保存することができる。
【００３７】
好ましい形態では、テキスト・画像オブジェクトグループ化手段は、グループ化されたページごとに記憶されたテキストデータおよび画像オブジェクトデータを、グループ化に対応した所定の記憶場所に画像データファイルとテキストデータファイルとにそれぞれ記憶する際に、グループ化の関連付けをチェックする処理を行う。
これにより、グループ化がうまくできていない場合には、図１５に一例を示すように、保存途中でデバッグモードが立ち上がる。
グループ化に失敗していると響告メッセージが出るが、無視して「終了」をクリックした場合には図１６に示す画面に戻るが、グループ化の関連付けを修正する場合には、図１７に示す電子データの編集プログラム画面に戻る。電子データの編集プログラム画面は、グループ化できていなかったページでとまっているので、そのページを隅から隅まで調べ、グループ化されていないものをグループ化する。すべてのページがきちんとグループ化されるまで繰り返す。
デバッグモードにならずに保存が終了すれば、全てがきちんとグループ化されている。
次に、本発明の音声付きムービーコンテンツ生成システムは、グループ化されたデータごとに、前記のテキストデータの音声変換処理を行い、グループ化されたテキストデータおよび画像オブジェクトデータを、グループ化されたデータごとに、所定の場所に音声データおよび画像オブジェクトデータとして記憶することにより、複数ページを構成するすべての音声データおよび画像オブジェクトデータを所定の場所に記憶する音声・画像オブジェクト変換・グループ化手段を備えている。
【００３８】
図１８に示すように、音声変換プログラムを起動し（Ｓ１０９）、音声変換画面において、グループ化されたデータごとに、前記のテキストデータを読み込んで音声読み上げ処理を行い、音声読み上げ処理において変換前のテキスト訂正画面を表示させる（Ｓ１１０）。
テキストデータの読み込みは、図１９に示すように次に前もって作成し所定の場所に記憶しておいたテキストを開く。テキストデータは、前述の処理でグループ化され記憶されたテキストデータである。
【００３９】
音声・画像オブジェクト変換・グループ化手段は、音声変換画面において、グループ化されたデータごとに、前記のテキストデータを読み込んで音声読み上げ処理を行い、音声読み上げ処理において変換前のテキスト訂正画面を表示させる。
音声変換プログラムには、好ましくは「コピーしたテキストを音声として読む」機能を備え、これを利用してテキスト文章のイントネーションを直していくことができる。図２０に示すようにテキストデータをドラッグしてコピーすると音声が流れ出すので、おかしなところを直し、適当なところに句読点をいれて休止させるなどして修正することができる。この作業をテキスト化した文章全てにおいて行う。
デバッグは、これまでの処理で直してきたテキストを音声として流しながら、必要に応じ図２１のように電子データ編集画面を見ておかしなところを直す。たとえばテキストボックスの中に表が入ったものなどはテキストとして抽出されていないことが想定され、そのテキスト部分をコピー＆ペーストしてテキストデータファイルの方に加えていく、また、おかしなところは適宜修正する。
【００４０】
次に、音声・画像オブジェクト変換・グループ化手段は、音声変換画面において、所定の場所に記憶された複数のグループ化されたテキストデータを、一括変換するための操作画面を備え、複数ページ分のテキストデータの音声データへの一括変換処理を行うことが望ましい。
所定の場所に記憶された複数のグループ化されたテキストデータを、一括変換するための操作画面を備え、複数ページ分のテキストデータの音声データへの一括変換処理を行う（Ｓ１１１）。
一括変換は、図２２に示す「テキスト一括変換」用のフォルダに先ほどまでの作業で直してきたテキストファイルを、図２３に示すようにコピーアンドペーストまたはドラッグアンドドロップで入れていく。
図２４に示すように音声変換プログラムを起動し、図２５に示すような一括変換ツールが立ち上がり、ここで「一括変換」を押すことで、先ほど「テキスト一括変換」フォルダに入れたテキストファイルがすべて音声化され、同じフォルダ内にできる。
複数ページを構成するグループ化されたデータごとに、すべての音声データおよび画像オブジェクトデータを所定の場所に記憶させ（Ｓ１１２）、以上でテキストの音声化処理が終了する。
【００４１】
次に、本発明の音声付きムービーコンテンツ生成システムは、グループ化されたデータごとに、音声データおよび画像オブジェクトデータを読み出して、関連付けられたグループごとに各ページごとのコンテンツを生成し、複数ページを構成するすべてのページを生成するムービーコンテンツ生成手段を備えている。
これまでの処理で作ってきた画像ファイルと音声ファイル用のフォルダを図２６に示すように設定し、画像はたとえば１０個ずつ（１〜１０、１１〜２０、・・・）、必要な数のフォルダを用意する。
また生成されるコンテンツ用のフォルダを設定し、スライドショームービーコンテンツのテンプレートを記憶させておく。
コンテンツ生成プログラムを起動すると、図２７に示すような画面が表示される。
コンテンツ生成プログラムを起動し、ムービーコンテンツ編集画面において、グループ化されたデータごとにタイムラインを設定し（Ｓ１１３）、グループ化されたデータごとに、所定の場所に記憶された音声データおよび画像オブジェクトデータを読み出して（Ｓ１１４）、音声データおよび画像データを読み込んで挿入する（Ｓ１１５）。
【００４２】
図２８、図２９、図３０は、音声データをインポートする処理画面の一例を示し、図３０において左上の「ファイル」から「ライブラリに読み込み」を選択し、１〜１０に対応した音声ファイルを選択する。（テンブレート２であれば音声データ１１〜２０）。
すると図３１のように表示され、「既存のアイテムを置き換え」を選択する。
【００４３】
ムービーコンテンツ生成手段は、ムービーコンテンツ編集画面において、グループ化されたデータごとにタイムラインを設定し、所定の場所に記憶された音声データおよび画像データを読み込んで挿入し、複数ページを構成するすべてのページを生成する。
図３２から図３４は、タイムラインを直していく作業画面の一例を示している。
まず、図３２において、コンテンツ生成プログラムの上方に位置するタイムラインのスクロールバーを移動し、音声の波を右力向に見ていくと、上二つは間違っている状態で、一番下のものが正しい状態を示す。
間違い１の修正は、図３３に示すように、正しい状態になるまでフレームを挿入していき、間違い２の修正は、図３４に示すよう荷正しい状態になるまでフレームを削除していく。
間違いの直しをスクロールバーの右端まで行う。ｐａｇｅ１に音声がひとつ、ｌｏｏｐ１に音声がひとつ、ｐａｇｅ２に音声がひとつ、というような繰り返しになり、音声のない白紙のページなどがある場合もある。
【００４４】
次に、図３５から図３９は、画像データをインポートする処理画面の一例を示す。
画像のインポート処理を選択し、図３５の右図にようにタイムラインの一番左端にあるフレームを選択する。フレームを選択した状態で、図３６の左上の「ファイル」から「読み込み」を選択し、ファイルの選択画面が現れるので、設定した画像フォルダを選択して、図３７に示すように画像はたとえば１０個ずつ（１〜１０、１１〜２０、・・・）が選択される。
図３８のように表示され、「イメージの読み込み」を選択すると、タイムラインに同フォルダにあった画像のすべてが図３９のように挿入される。
【００４５】
ムービーコンテンツの複数ページを構成するすべてのページを生成し記憶する（Ｓ１１６）。最後にムービーをプレビューしておかしな部分を直していく。
図４０のように「ムーピープレビュー」を選択することで、生成されたムービーコンテンツを見ることができ、プレビューしておかしなところがあったら修正等を行う。
【００４６】
【発明の効果】
以上詳細に説明したように、本発明によれば、印刷物または出版物用に利用したデジタル編集データである、テキストデータおよび画像オブジェクトデータを含む電子データを、ムービーコンテンツを生成するために読み込んで記憶し、当該印刷物または出版物用の電子データから、画像オブジェクトデータおよび音声データを含むページを複数ページ有する、自動的にページめくりがされるスライドショー形式のようなムービーコンテンツを生成するシステムと、そのためのプログラムを提供することができる。
これにより、出版物や各種の印刷物、たとえば各種のテキストや説明書、出版物のデータなどを、紙媒体のデータとして利用するだけではなく再利用することにより、ウェブ上で利用可能な電子データとして販売したり、ウェブ上での教育コンテンツ、広報コンテンツ、電子出版ムービーコンテンツなどとして利用することができる。
さらに本発明によれば、電子データからコンテンツを生成する場合において、各種の印刷物や出版物用の元の電子データは、文字と絵や写真（画像）とが含まれるデータであって、コンテンツにするためには音声変換をあらかじめ行い、アクセス中に処理の負荷がかからず、さらに既存の開発されている音声変換プログラムを使用する場合であってもライセンス料がかさまないシステムを提供することができる。
さらに本発明によれば、複数のページから構成される元の電子データを、時間の経過に従い表示・再生される複数ページのデータに変換するために、順序、ページ構成、修正などを容易に行うことが可能なシステムと、そのためのプログラムを提供することができる。
【図面の簡単な説明】
【図１】本発明のシステムの基本的な構成の一例を示すシステム構成図である。
【図２】本発明の基本的な処理の流れの一例を示すフローチャートである。
【図３】本発明の基本的な処理の流れの一例を示すフローチャートである。
【図４】読み込まれた電子データの一例を示す図である。
【図５】抽出したいオブジェクトを選択し、画面上中央にある最前面化をする操作メニューを示す図である。
【図６】抽出したいオブジェクトを選択し、画面上中央にある最前面化をする操作メニューを示す図である。
【図７】グループ化を行う画面の一例を示す図である。
【図８】グループ化を行う画面の一例を示す図である。
【図９】１ページに２つのグループをつくる処理画面の一例を示す図である。
【図１０】マクロを使ってテキストと画像に分けるプログラムの操作画面の一例を示す図である。
【図１１】画像・テキストデータをインポートする操作画面の一例を示す図である。
【図１２】画像・テキストデータをインポートする操作画面の一例を示す図である。
【図１３】次にインポートしたファイルを、画像データファイルとテキストデータファイルとして記憶するための入力画面の一例を示す図である。
【図１４】インポートしたファイルを、画像データファイルとテキストデータファイルとして記憶するための入力画面の一例を示す図である。
【図１５】グループ化のデバッグモードの一例を示す図である。
【図１６】グループ化のデバッグモードに進まなかった一例を示す図である。
【図１７】グループ化を修正する際の電子データの編集プログラム画面を示す図である。
【図１８】音声変換プログラムの起動を示す図である。
【図１９】テキストデータの読み込みの一例を示す図である。
【図２０】テキストデータのドラッグアンドコピーによる音声読み上げの一例を示す図である。
【図２１】電子データ編集画面により修正をする一例を示す図である。
【図２２】「テキスト一括変換」用のフォルダの一例を示す図である。
【図２３】テキストファイルをコピーアンドペーストまたはドラッグアンドドロップで入れていく処理の一例を示す図である。
【図２４】音声変換プログラムの起動を示す図である。
【図２５】一括変換ツールの一例を示す図である。
【図２６】画像ファイルと音声ファイル用のフォルダの一例を示す図である。
【図２７】コンテンツ生成プログラムの一例を示す図である。
【図２８】音声データをインポートする処理画面の一例を示す図である。
【図２９】音声データをインポートする処理画面の一例を示す図である。
【図３０】音声データをインポートする処理画面の一例を示す図である。
【図３１】音声データをインポートする処理画面の一例を示す図である。
【図３２】タイムラインを直していく作業画面の一例を示す図である。
【図３３】タイムラインを直していく作業画面の一例を示す図である。
【図３４】タイムラインを直していく作業画面の一例を示す図である。
【図３５】画像データをインポートする処理画面の一例を示す図である。
【図３６】画像データをインポートする処理画面の一例を示す図である。
【図３７】画像データをインポートする処理画面の一例を示す図である。
【図３８】画像データをインポートする処理画面の一例を示す図である。
【図３９】画像データをインポートする処理画面の一例を示す図である。
【図４０】「ムーピープレビュー」の選択画面の一例を示す図である。
【図１】
2004362167.tif 000003
【図２】
2004362167.tif 000004
【図３】
2004362167.tif 000005
【図４】
2004362167.tif 000006
【図５】
2004362167.tif 000007
【図６】
2004362167.tif 000008
【図７】
2004362167.tif 000009
【図８】
2004362167.tif 000010
【図９】
2004362167.tif 000011
【図１０】
2004362167.tif 000012
【図１１】
2004362167.tif 000013
【図１２】
2004362167.tif 000014
【図１３】
2004362167.tif 000015
【図１４】
2004362167.tif 000016
【図１５】
2004362167.tif 000017
【図１６】
2004362167.tif 000018
【図１７】
2004362167.tif 000019
【図１８】
2004362167.tif 000020
【図１９】
2004362167.tif 000021
【図２０】
2004362167.tif 000022
【図２１】
2004362167.tif 000023
【図２２】
2004362167.tif 000024
【図２３】
2004362167.tif 000025
【図２４】
2004362167.tif 000026
【図２５】
2004362167.tif 000027
【図２６】
2004362167.tif 000028
【図２７】
2004362167.tif 000029
【図２８】
2004362167.tif 000030
【図２９】
2004362167.tif 000031
【図３０】
2004362167.tif 000032
【図３１】
2004362167.tif 000033
【図３２】
2004362167.tif 000034
【図３３】
2004362167.tif 000035
【図３４】
2004362167.tif 000036
【図３５】
2004362167.tif 000037
【図３６】
2004362167.tif 000038
【図３７】
2004362167.tif 000039
【図３８】
2004362167.tif 000040
【図３９】
2004362167.tif 000041
【図４０】
2004362167.tif 000042