(57)【要約】【課題】編集結果を簡単に把握し編集することができる動画像編集装置を提供する。【解決手段】編集対象である同期マルチメディアプレゼンテーションを編集するための動画像編集装置と端末とが通信回線を介して接続される動画像編集システムにおける動画像編集装置であって、編集対象である同期マルチメディアプレゼンテーションの或る領域で再生されるクリップの属性として当該同期マルチメディアプレゼンテーションヘの当該クリップの挿入点及び消去点が設定された再生時間情報と領域を識別する領域識別情報とを対応付けて記憶するクリップ情報データベースと、クリップ情報に記憶される挿入点および消去点を経過時間に対応させて端末の表示画面に図形によって表示させる属性情報表示部とを有する。【選択図】　図１
2004015748.tif 000002
【特許請求の範囲】
【請求項１】
編集対象である同期マルチメディアプレゼンテーションを編集するための動画像編集装置と端末とが通信回線を介して接続される動画像編集システムにおける動画像編集装置であって、
前記編集対象である同期マルチメディアプレゼンテーションの或る領域で再生されるクリップの属性として当該同期マルチメディアプレゼンテーションヘの当該クリップの挿入点及び消去点が設定された再生時間情報と前記領域を識別する領域識別情報とを対応付けてクリップ情報として記憶するクリップ情報データベースと、
前記再生時間情報として記憶された挿入点および消去点に基づいて、同一領域内の各クリップを経過時間に対応させた図形によって前記端末の表示画面に表示させる属性情報表示部と
を有することを特徴とする動画像編集装置。
【請求項２】
前記クリップ情報には、前記再生時間情報にさらに前記クリップの属性を示す属性情報が前記クリップ毎に前記領域識別情報に対応付けて記憶されており、
前記属性情報表示部は、前記クリップ情報データベースに記憶された属性情報を読み出し、読み出した属性情報を前記図形の挿入点および消去点に対応付けて前記端末の表示画面に表示させる
ことを特徴とする請求項１記載の動画像編集装置。
【請求項３】
前記属性情報には、クリップのファイル名とテキストとをそれぞれ独立またはクリップのファイル名とテキストとの両方とが含まれることを特徴とする請求項２記載の動画像編集装置。
【請求項４】
前記端末の表示画面の図形に対して入力される再生時間情報または属性情報を編集する指示である編集指示を受信する編集指示受信部と、
前記編集指示受信部が受信した編集指示に基づいて、編集が指示された図形に対応する領域の領域識別情報を検出し、検出した領域識別子に対応するクリップ情報を前記編集指示の編集内容に応じて更新して前記クリップ情報データベースに記憶する情報変更部と
を有することを特徴とする請求項１から請求項３のうちいずれかに記載の動画像編集装置。
【請求項５】
前記端末から送信される再生時間または属性情報を検索するキーとなる検索キーと検索対象の領域を指定する検索領域指定情報とを受信する検索情報受信部と、
前記検索情報受信部が受信する検索領域指定情報によって指定される領域識別情報に対応する属性情報から、前記検索キーに対応する属性情報を検索する属性情報検索部と、
前記属性情報検索部の検索結果を前記端末に送信する検索結果送信部と、
を有することを特徴とする請求項１から請求項４のうちいずれかに記載の動画像編集装置。
【請求項６】
前記属性情報検索部は、検索対象の領域が複数指定された場合に、検索対象の領域の領域識別情報に対応する属性情報に共通に検索キーが含まれているか否かを検出する
ことを特徴とする請求項５記載の動画像編集装置。
【請求項７】
前記クリップを表示する大きさを指定する情報であるレイアウト情報を前記領域識別情報に対応付けて記憶するレイアウトデータベースと、前記端末から送信される、前記クリップを表示する大きさの変更指示を受信する変更指示受信部と、
前記変更指示受信部が受信する変更指示に応じて、クリップを表示する大きさを変更するレイアウト情報変更部と、
を有することを特徴とする請求項１から請求項６のうちいずれかに記載の動画像編集装置。
【請求項８】
編集対象である同期マルチメディアプレゼンテーションを編集するための動画像編集装置と端末とが通信回線を介して接続される動画像編集システムにおける動画像編集装置に用いられる動画編集支援方法であって、
前記編集対象である同期マルチメディアプレゼンテーションの或る領域で再生されるクリップの属性として当該同期マルチメディアプレゼンテーションヘの当該クリップの挿入点及び消去点が設定された再生時間情報と前記領域を識別する領域識別情報とを対応付けて記憶されるクリップ情報に基づいて、同一領域内の各クリップを経過時間に対応させた図形によって前記端末の表示画面に表示させる
ことを特徴とする動画編集支援方法。
【請求項９】
編集対象である同期マルチメディアプレゼンテーションを編集するための動画像編集装置と端末とが通信回線を介して接続される動画像編集システムにおける動画像編集装置に用いられる動画像編集支援プログラムであって、
前記編集対象である同期マルチメディアプレゼンテーションの或る領域で再生されるクリップの属性として当該同期マルチメディアプレゼンテーションヘの当該クリップの挿入点及び消去点が設定された再生時間情報と前記領域を識別する領域識別情報とを対応付けて記憶されるクリップ情報に基づいて、同一領域内の各クリップを経過時間に対応させた図形によって前記端末の表示画面に表示させるステップ
をコンピュータに実行させる動画像編集支援プログラム。
【請求項１０】
編集対象である同期マルチメディアプレゼンテーションを編集するための動画像編集装置と端末とが通信回線を介して接続される動画像編集システムにおける動画像編集装置に用いられる動画像編集支援プログラムを記録した記録媒体であって、
前記編集対象である同期マルチメディアプレゼンテーションの或る領域で再生されるクリップの属性として当該同期マルチメディアプレゼンテーションヘの当該クリップの挿入点及び消去点が設定された再生時間情報と前記領域を識別する領域識別情報とを対応付けて記憶されるクリップ情報に基づいて、同一領域内の各クリップを経過時間に対応させた図形によって前記端末の表示画面に表示させるステップ
をコンピュータに実行させるための動画像編集支援プログラムを記録したコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、ネットワークを介して接続される動画像編集装置と端末との間において動画像やテキストを編集を行う動画像編集装置に関するものである。
【０００２】
【従来の技術】
近年における通信回線の大容量化は、ユーザにとっての様々な恩恵を生み出している。個人によるストリーミング（動画像データを受信しながら再生する方式）での動画像配信が実現可能になってきたのもその１つである。ストリーミングは、ファイル全体のダウンロード完了を待たずに再生ができるので動画像配信に適するとされている。
【０００３】
さらには、動画像、静止画像、音声、テキストを複数の領域それぞれで同期再生させてストリーミングする技術が求められ、これに対し、同期マルチメディア記述言語が策定されたことにより、同期マルチメディアプレゼンテーションが可能となった。
【０００４】
図２２は、同期マルチメディアプレゼンテーションを例示する図である。
この同期マルチメディアプレゼンテーションは、２つの領域でそれぞれのプレゼンテーションを再生する最も単純なものである。例えば、ウィンドウ１００に構成された左のメイン領域５１には、サッカーの試合をストリーミング再生し、右のサブ領域５２には、メイン領域５１でプレーする選手のプロフィールをストリーミング再生するというように利用される。
【０００５】
これらの同期マルチメディアプレゼンテーションは、動画像や静止画、テキストなどの素材のデータが記憶されたサーバから素材のデータをストリーミングで端末側に受信しながら編集される。すなわち、端末のユーザは、ストリーミングを受信しながら再生し、再生画面を見ながら、同期マルチメディアプレゼンテーションに利用する各素材の挿入開始と終了時刻をそれぞれ指定することにより、行われる。
【０００６】
【発明が解決しようとする課題】
しかしながら、上述した編集方法によれば、以下のような問題点があった。
１．クリップを複数利用して作成された同期マルチメディアプレゼンテーションを編集する場合、同期マルチメディアプレゼンテーションを構成する各クリップの再生順や再生時刻を確認しようとすると、確認対象の同期マルチメディアプレゼンテーションを初めから終わりまで再生し、内容を確認していた。従って、同期マルチメディアプレゼンテーションの編集結果の確認に手間と時間がかかってしまい、編集作業の効率が低下してしまっていたという問題点があった。
【０００７】
２．ストリーミングを受信し再生しながら編集を行うようにしていたので、例えば、１０分の動画像の同期マルチメディアプレゼンテーションを一度作成したのち、動画像が９分を経過したに部分にテキストを挿入しようとすると、編集対象の動画像のストリーミングを受信しながら再生して９分経過するまで待ち、そして、編集タイミングを見計らってテキストを挿入する指示を入力していた。従って、ストリーミングを再生し、編集タイミングまで待たなければならなかったので、ユーザにとって、編集作業に手間と時間がかかってしまい、編集作業の効率が低下し、負担が大きくなってしまっていた。
【０００８】
３．一度作成した同期マルチメディアプレゼンテーションの中から、必要な動画像やテキストを探し出す場合、動画像やテキストのファイルに設定されている属性情報を利用し、検索するキーワードを指定し、キーワードに対応する属性情報を検索して必要な動画像やテキストを探し出すことが考えられる。しかし、従来においては、動画像やテキストの表示領域の大きさを変更して領域同士が重なった場合、重なった領域の属性情報の管理がうまくできず、結果的に、検索機能を設けることができなかった。
【０００９】
本発明は、このような事情に鑑みてなされたもので、その目的は、編集結果を簡単に把握することができる動画像編集装置を提供することにある。
また、本発明の他の目的は、編集作業を効率的に行うことができる動画像編集装置を提供することにある。
また、本発明の他の目的は、編集されたファイルを検索することができる動画像編集装置を提供することにある。
また、本発明の他の目的は、領域の大きさを変更した場合においても、編集されたファイルを検索することができる動画像編集装置を提供することにある。
【００１０】
【課題を解決するための手段】
上記目的を達成するために、本発明は、編集対象である同期マルチメディアプレゼンテーションを編集するための動画像編集装置と端末とが通信回線を介して接続される動画像編集システムにおける動画像編集装置であって、前記編集対象である同期マルチメディアプレゼンテーションの或る領域で再生されるクリップの属性として当該同期マルチメディアプレゼンテーションヘの当該クリップの挿入点及び消去点が設定された再生時間情報と前記領域を識別する領域識別情報とを対応付けてクリップ情報として記憶するクリップ情報データベースと、
前記再生時間情報として記憶された挿入点および消去点に基づいて、同一領域内の各クリップを経過時間に対応させた図形によって前記端末の表示画面に表示させる属性情報表示部とを有することを特徴とする。
【００１１】
また、本発明は、上述の動画像編集装置において、前記クリップ情報には、前記再生時間情報にさらに前記クリップの属性を示す属性情報が前記クリップ毎に前記領域識別情報に対応付けて記憶されており、前記属性情報表示部は、前記クリップ情報データベースに記憶された属性情報を読み出し、読み出した属性情報を前記図形の挿入点および消去点に対応付けて前記端末の表示画面に表示させることを特徴とする。
【００１２】
また、本発明は、上述の動画像編集装置において、前記属性情報には、クリップのファイル名とテキストとをそれぞれ独立またはクリップのファイル名とテキストとの両方とが含まれることを特徴とする。
【００１３】
また、本発明は、上述の動画像編集装置において、前記端末の表示画面の図形に対して入力される再生時間情報または属性情報を編集する指示である編集指示を受信する編集指示受信部と、前記編集指示受信部が受信した編集指示に基づいて、編集が指示された図形に対応する領域の領域識別情報を検出し、検出した領域識別子に対応するクリップ情報を前記編集指示の編集内容に応じて更新して前記クリップ情報データベースに記憶する情報変更部とを有することを特徴とする。
【００１４】
また、本発明は、上述の動画像編集装置において、前記端末から送信される再生時間または属性情報を検索するキーとなる検索キーと検索対象の領域を指定する検索領域指定情報とを受信する検索情報受信部と、前記検索情報受信部が受信する検索領域指定情報によって指定される領域識別情報に対応する属性情報から、前記検索キーに対応する属性情報を検索する属性情報検索部と、前記属性情報検索部の検索結果を前記端末に送信する検索結果送信部と、を有することを特徴とする。
【００１５】
また、本発明は、上述の動画像編集装置において、前記属性情報検索部は、検索対象の領域が複数指定された場合に、検索対象の領域の領域識別情報に対応する属性情報に共通に検索キーが含まれているか否かを検出することを特徴とする。
【００１６】
また、本発明は、上述の動画像編集装置において、前記クリップを表示する大きさを指定する情報であるレイアウト情報を前記領域識別情報に対応付けて記憶するレイアウトデータベースと、前記端末から送信される、前記クリップを表示する大きさの変更指示を受信する変更指示受信部と、前記変更指示受信部が受信する変更指示に応じて、クリップを表示する大きさを変更するレイアウト情報変更部と、を有することを特徴とする。
【００１７】
また、本発明は、上述の動画像編集装置において、編集対象である同期マルチメディアプレゼンテーションを編集するための動画像編集装置と端末とが通信回線を介して接続される動画像編集システムにおける動画像編集装置に用いられる動画像編集支援方法であって、前記編集対象である同期マルチメディアプレゼンテーションの或る領域で再生されるクリップの属性として当該同期マルチメディアプレゼンテーションヘの当該クリップの挿入点及び消去点が設定された再生時間情報と前記領域を識別する領域識別情報とを対応付けて記憶されるクリップ情報に基づいて、同一領域内の各クリップを経過時間に対応させた図形によって前記端末の表示画面に表示させることを特徴とする。
【００１８】
また、本発明は、上述の動画像編集装置において、編集対象である同期マルチメディアプレゼンテーションを編集するための動画像編集装置と端末とが通信回線を介して接続される動画像編集システムにおける動画像編集装置に用いられる動画像編集支援プログラムであって、前記編集対象である同期マルチメディアプレゼンテーションの或る領域で再生されるクリップの属性として当該同期マルチメディアプレゼンテーションヘの当該クリップの挿入点及び消去点が設定された再生時間情報と前記領域を識別する領域識別情報とを対応付けて記憶されるクリップ情報に基づいて、同一領域内の各クリップを経過時間に対応させた図形によって前記端末の表示画面に表示させるステップをコンピュータに実行させることを特徴とする。
【００１９】
また、本発明は、上述の動画像編集装置において、編集対象である同期マルチメディアプレゼンテーションを編集するための動画像編集装置と端末とが通信回線を介して接続される動画像編集システムにおける動画像編集装置に用いられる動画像編集支援プログラムを記録した記録媒体であって、前記編集対象である同期マルチメディアプレゼンテーションの或る領域で再生されるクリップの属性として当該同期マルチメディアプレゼンテーションヘの当該クリップの挿入点及び消去点が設定された再生時間情報と前記領域を識別する領域識別情報とを対応付けて記憶されるクリップ情報に基づいて、同一領域内の各クリップを経過時間に対応させた図形によって前記端末の表示画面に表示させるステップをコンピュータに実行させるための動画像編集支援プログラムを記録したことを特徴とする。
【００２０】
【発明の実施の形態】
以下、本発明の実施の形態を図面を参照して説明する。先ず、本実施の形態で使用される用語を説明する。
「同期マルチメディアプレゼンテーション」とは、プレーヤ（後述する）が端末の表示装置に表示するウィンドウ（以下、単にウィンドウという）内に複数設けられた領域（以下、単に領域という）のそれぞれでストリーミング再生されるプレゼンテーション（後述する）をまとめていう。
【００２１】
「プレゼンテーション」とは、同一の「領域」で連続的にストリーミング再生される複数または１つのクリップ（後述する）またはテキストコンテンツ（後述する）をいう。
【００２２】
「クリップ」とは、ＭＰＥＧ等の動画像、ＭＰ３等の音声、ＪＰＥＧ等の静止画、ＡＳＣＩＩ文字等のテキスト、アニメーションのいずれかを含んでいて、ストリーミングサーバからストリーミング再生されるメディア（「素材」といい、１
または複数のファイルから構成される）における任意２点間の部分をいう。主に素材の一部、稀には素材全部がクリップとなる。
【００２３】
「テキストクリップ」とは、ストリーミング再生されるのでなく、定義された表示時間の間に領域に単に表示される文字情報をいう。
【００２４】
「プレーヤ」とは、コンピュータで動作するストリーミング再生用のソフトウェアをいい、同期マルチメディアプレゼンテーション、プレゼンテーション、素材、クリップ、テキストクリップをそれぞれ再生等することができ、単体でも動作するが、ブラウザによっても起動される。
【００２５】
次に、本発明の一実施形態による動画像編集装置を適用した動画像編集システムを図面を参照して説明する。
図１は、この発明の一実施形態による動画像編集装置を適用した動画像編集システムの構成を示す概略ブロック図である。
この図において、動画像編集装置１は、同期マルチメディアプレゼンテーションの編集を、一般ユーザが利用するコンピュータ（端末という）２，２，…において、対話式で行わせるサービスを提供するコンピュータであり、インターネット等のネットワークを介して、端末２，２，…に接続されている。
【００２６】
端末２では、ＨＴＭＬ（Ｈｙｐｅｒ　Ｔｅｘｔ　Ｍａｒｋｕｐ　Ｌａｎｇｕａｇｅ）で記述されたソースコードを解釈して編集のための画面制御を行うブラウザ２１と、ストリーミング再生用のプレーヤ２２が起動される。また、動画像編集装置１が設置された施設内外のストリーミングサーバ３，３，…がネットワークに接続されて、端末２がＵＲＬ（Ｕｎｉｆｏｒｍ　Ｒｅｓｏｕｒｃｅ　Ｌｏｃａｔｏｒ）で指定した素材をストリーミング方式で供給できるようになっている。なお、プレーヤ２２は、複数個起動させることができる。
【００２７】
図２は、動画像編集装置１の構成について説明するための概略ブロック図である。動画像編集装置１は、個々の同期マルチメディアプレゼンテーションについての、主にレイアウトに関する属性等（レイアウト情報という）が含まれる格納されるレイアウトデータベースＤＢ１と、個々のクリップを定義するための属性情報と再生時間情報などが格納されるクリップ情報データベースＤＢ２と、素材のＵＲＬが格納される素材情報データベースＤＢ３を備える。
【００２８】
図３は、レイアウトデータベースＤＢ１に記憶されるレイアウト情報の一例を示す図である。レイアウトデータベースＤＢ１では、１つの同期マルチメディアプレゼンテーションについて領域ごとに設けられた領域レコードにレイアウト情報が各領域を識別する領域ＩＤ（上述の領域識別情報に対応）に対応付けられて格納される。このレイアウト情報は、クリップを表示する大きさを指定する情報が含まれる。つまり、これらの領域レコードに同一のレイアウトＩＤ並びにウィンドウの幅と高さが設定される。また、各領域レコードには、領域ＩＤ、領域の編集順序、上端座標（ウィンドウの上端を基準としたときの領域の上端の座標）、左端座標（ウィンドウの左端を基準としたときの領域の左端の座標）、そして領域の幅及び高さが、また重なりの順序（図示せず）が、それぞれ設定される。
【００２９】
図４は、クリップ情報データベースＤＢ２に記憶されるクリップ情報の一例を示す図面である。クリップ情報には、素材を必要とするクリップ及びテキストクリップの属性情報がクリップＩＤに対応付けて格納可能になっている。個々のクリップを識別するクリップＩＤに対応づけられたクリップレコードには、領域ＩＤ、挿入点及び消去点の情報である再生時間情報が設定され記憶される。特に、素材を必要とするクリップについては、クリップレコードに、素材ＩＤ、クリップの開始点及び終了点が、一方、テキストクリップについては、クリップレコードに、背景色、文字色、文字サイズ、縦方向及び横方向の位置合わせ情報、表示時間、内容（テキスト）、動画像または静止画像のファイル名、ユーザのコメントを記憶する追加内容が格納される。
【００３０】
図５（ａ）は、素材情報データベースＤＢ３を示す図である。素材情報データベースＤＢ３の素材レコードには、素材を識別する素材ＩＤに対応づけて素材のＵＲＬと素材属性が設定される。この素材属性は、素材のエンコード時にエンコードソフトウェアによって生成される素材のタイトル、作成者などの情報が後述する属性情報格納処理部１２によって抽出され、記憶される。この場合、素材に設定された素材属性のうち、どの項目の素材属性を抽出して記憶するかについては、端末２からの指示あるいは、動画像編集装置１の管理者の指示により決定される。この素材属性の一例を図５（ｂ）に示す。この図に示すように、素材属性には、タイトル、作者、コピーライトなどの項目が含まれる。
【００３１】
図２に戻り、説明を続ける。動画像編集装置１のうち、編集プログラム生成部１１は、端末２に各種画面を構成させるためのＨＴＭＬソースコードを生成する。属性情報格納部１２は、編集プログラムにより端末２から得られた属性情報をレイアウトデータベースＤＢ１、クリップ情報データベースＤＢ２、素材情報データベースＤＢ３に格納する処理を行う。また、属性情報格納処理部１２は、素材のエンコード時に生成される素材属性のうち、端末２または管理者から指示された項目の素材属性を抽出し、素材情報データベースＤＢ３に記憶する。
同期マルチメディア言語ファイル生成部１３は、レイアウトデータベースＤＢ１、クリップ情報データベースＤＢ２、素材情報データベースＤＢ３に格納された属性情報を基に同期マルチメディア言語ファイルを生成する。同期マルチメディア言語ファイル格納部１４は、同期マルチメディア言語ファイル生成部１３の指示に応じて、同期マルチメディア言語ファイル生成部１３により生成された同期マルチメディア言語ファイルを格納する。通信部１５は、端末２との間のデータの送受信を行う。なお、この通信部１５は、ｈｔｔｐデーモンともいう。
【００３２】
また、通信部１５は、端末２の表示画面に表示された図形に対して入力されるクリップの属性情報を編集する指示である編集指示を受信する編集指示受信部１５ａと、端末２から送信される属性情報を検索するキーとなる検索キーと検索対象の領域を指定する検索領域指定情報とを受信する検索情報受信部１５ｂと、後述する属性情報検索部１８の検索結果を端末２に送信する検索結果送信部１５ｃと、端末２から送信される、クリップを表示する大きさの変更指示を受信する変更指示受信部１５ｄと、を有する。
【００３３】
属性情報表示部１６は、クリップ情報データベースＤＢ２に記憶されたクリップ情報として記憶された挿入点および消去点を経過時間に対応させて端末２の表示画面に図形（以下、タイムラインと称す）によって表示させるための情報を生成し、通信部１５によって送信する。具体的には、属性情報表示部１６は、クリップ情報データベースに記憶された属性情報のうち、挿入点と消去点の項目に設定されている時間の情報をクリップ毎に読み出し、読み出したクリップ毎の挿入点と消去点を経過時間の経過に対応させる処理を行い、タイムラインを表示させるための情報を生成する。
さらに、属性情報表示部１６は、クリップ毎に設定されている属性情報を挿入点と消去点に対応付けて表示させるための情報を生成する。
また、属性情報表示部１６は、領域が複数ある場合に、領域毎のタイムラインを表示させるための情報を生成する。
【００３４】
ここで、タイムラインについてさらに説明する。すなわち、タイムラインは、図６（ａ）、図６（ｂ）に示すように、クリップを再生する再生時間情報に基づいて、再生時間の経過を示す経過時間に対応させて、クリップの属性情報をグラフによって表示される。この図６（ａ）、図６（ｂ）は、属性情報のうち、テキストの項目に記憶された情報が経過時間に応じて表示されている。タイムラインに表示される属性情報は、属性情報に含まれる項目の情報であればテキストに限られるものではなく、例えば、動画像を表示する場合には動画像のファイル名を属性情報から抽出して表示したり、テキストを表示する場合には、背景色、文字色、文字サイズを属性情報から抽出して表示したり、追加内容として記憶されたコメントを属性情報から抽出して表示することが可能である。また、ここでは、再生時間情報が図６（ａ）の符号（ｃ）、符号（ｄ）、符号（ｅ）に示すように分割され、異なる配色によって表示される。この配色は、属性情報に設定された背景色に従って表示されてもよい。また、テキストを表示する場合、属性情報に設定された文字サイズ、文字色、フォントなどの情報をテキストの他に表示させてもよい。
【００３５】
また、タイムラインによって動画像の編集内容を表示する場合には、図７（ａ）、（ｂ）に示すように、動画像のファイル名が表示される。
【００３６】
なお、タイムラインを表示するための図形は、この実施形態においては、棒グラフによって表示する場合について説明するが、再生時間の経過に対応させて属性情報を表示することができる図形であれば、棒グラフに限られるものではない。例えば、円グラフなどを用いてもよい。
【００３７】
図２に戻り、属性情報変更部１７は、通信部１５の編集指示受信部１５ａによって受信し、受信した編集指示に基づいて、編集が指示された図形に対応する領域の領域ＩＤを検出し、検出した領域ＩＤに対応する属性情報を編集指示に応じてクリップ情報データベースＤＢ２に記憶された属性情報を更新する。この更新は、上書きによって行われる。
【００３８】
属性情報検索部１８は、検索情報受信部１５ｂが受信する検索領域指定情報によって指定される領域ＩＤに対応する属性情報から、検索キーに対応する属性情報を検索する。また、属性情報検索部１８は、検索対象の領域が複数指定された場合に、検索対象の領域の領域ＩＤに対応する属性情報に共通に検索キーが含まれているか否かを検出する。この検索キーは、属性情報、素材属性に含まれる情報に対して指定することが可能である。
レイアウト情報変更部１９は、変更指示受信部１５ｄが受信する変更指示に応じて、クリップを表示する大きさを変更する。
【００３９】
次に、上述した動画像編集装置１の動作について図面を用いて説明する。以下、ネットワークを介して端末２から送信される編集の要求に応じて動画像編集装置１が行うタイムライン表示処理、情報変更処理、検索処理、レイアウト情報変更処理、について順に説明する。
【００４０】
１．タイムライン表示処理
タイムライン表示処理について、図６および図７、図８のフローチャートを用いて説明する。まず、動画像編集装置１は、端末２から送信されるレイアウト情報の登録要求とクリップ情報の登録要求とを受信し、この登録要求に基づいて、受信したレイアウト情報をレイアウト情報データベースＤＢ１に記憶し、クリップ情報をクリップ情報データベースＤＢ２に登録する。これにより、図３、図４に示すような情報が記憶される。
レイアウト情報とクリップ情報とが記憶されると、属性情報表示部１６は、登録されたレイアウト情報データベースＤＢ１から、領域ＩＤに基づいて、表示させる領域数を検出し、検出結果に応じて、タイムラインの数を決定する（ステップＳ１）。次いで、属性情報表示部１６は、レイアウト情報データベースＤＢ１から領域ＩＤを読み出し（ステップＳ２）、読み出した領域ＩＤに対応する再生時間情報と属性情報とをクリップ情報データベースＤＢ２から読み出し（ステップＳ３）、読み出したタイムラインを再生時間情報と属性情報とに基づいて、タイムライン表示のソースを生成し、通信部１５よってネットワークを介して端末２に送信する（ステップＳ４）。ここでは、動画像および静止画を表示する場合の属性情報はファイル名、テキストの場合は、内容の項目に記憶されたテキストそのものがタイムラインに表示されるための属性情報として抽出される。なお、この抽出する対象の属性情報の項目は、端末２からの指示に応じて変更可能である。
【００４１】
端末２は、動画像編集装置１から送信されたタイムライン表示のソースを受信すると、受信したタイムライン表示のソースから、領域ＩＤごとに別々のタイムラインを生成して画面上に表示する（ステップＳ５）。この画面上に表示される情報の一例を図９に示す。この図においては、編集対象の領域（サブ画面、メイン画面）が２つあるので、符号（ａ）に示すタイムラインの表示欄には、２つのタイムラインが表示される。ここでは、符号（ｂ）に示すサブ画面についてのタイムラインでは、０秒から２８秒まで「イタリアサッカー」のテキストが表示され、２８秒から１１０秒までファイル名「セリエＡ−１」の動画像が表示され、１１０秒から１３５秒まで「結果…」テキストが表示されることを示すタイムラインが表示される。
また、符号（ｃ）に示すメイン画面についてのタイムラインでは、０秒から４０秒までファイル名「セリエＡ−ロゴ」の静止画の画像が表示され、４０秒から９８秒まで「後半２０分…」のテキストが表示され、９８秒から１３５秒まで「ユーべロゴ」のテキストが表示されることを示すタイムラインが表示される。
【００４２】
なお、符号（ｄ）に示す編集作業欄には、サブ画面とメイン画面の表示がされるとともに、いずれかの領域を指定し、再生や停止、挿入点、消去点などの編集作業を行うための機能を有するクリックボタン等が表示される。この表示は、編集プログラム生成部１１が、レイアウト情報を得るためのレイアウト作成画面のＨＴＭＬソースコード（レイアウト画面ソースと略す、また同様のソースコードを、その末尾を「画面ソース」として略す）を生成し、通信部１５が、このレイアウト作成画面ソースを端末２に送信することにより行われる。
【００４３】
このように、動画像や静止画、テキストが再生される再生時間を経過時間に対応させて端末２に表示させるようにしたので、ユーザは、編集されたストリーミングの編集内容を簡単に把握することが可能である。
【００４４】
２．情報変更処理
次に、情報の変更処理について図１０のフローチャート、図１１、図１２を用いて説明する。ユーザによって、端末２のキーボードやマウスなどの入力装置を用いてタイムラインの挿入点や消去点、ファイル名、テキストなどがクリックされ、編集指示が入力されると（ステップＳ１１）、端末２は、編集指示が入力されたタイムラインの領域ＩＤが含まれる、編集内容に応じた編集指示を動画像編集装置１に送信する（ステップＳ１２）。
【００４５】
動画像編集装置１の編集指示受信部１５ａは、端末２から送信される編集指示を受信し（ステップＳ１３）、情報変更部１７に出力する。情報変更部１７は、この編集指示から領域ＩＤを検出し、編集指示の編集内容に応じて、検出した領域ＩＤに対応する属性情報に上書きすることによってしてクリップ情報データベースＤＢ２に記憶して更新する（ステップＳ１４）。
【００４６】
属性情報が更新されると、同期マルチメディア言語ファイル作成部１３は、マルチメディア統合言語ファイルを作成し（ステップＳ１５）、同期マルチメディア言語ファイル格納部１４に記憶する。
【００４７】
ここで、テキストについて編集指示が行われた場合のタイムラインについて図１１を用いて説明する。図１１（ａ）に示す領域Ｉのタイムラインの「こんにちは」のテキストに対し、端末２の入力装置によって「ＨＥＬＬＯ」に書き換えられると、この書き換えに応じた編集指示が生成されて動画像編集装置１に送信され、クリップ情報データベースＤＢ２に反映される。これにより、テキストの書き換えが行われると、領域内には、図１１（ｃ）から図１１（ｄ）のように変更されたテキストが表示される。
【００４８】
また、図１２（ａ）から図１２（ｂ）に示すように、再生時間情報を変更する編集指示が入力されると、この編集指示に応じて、クリップ情報データベースＤＢ２のテキスト「おはよう」の消去点およびテキスト「こんにちは」の挿入点が更新される。これにより、領域Ｉにおいては、４５秒目に表示されるテキスト「こんにちは」が６０秒目に表示されるよう更新される。
【００４９】
上述したように。ユーザは、表示されたタイムラインに対して編集指示を入力することにより、編集作業を行うことができ、これにより、編集作業を行うために編集するタイミングが到達するまでストリーミングを再生して待機する手間を省くことができる。
【００５０】
３．検索処理
次に、検索処理について図１３を用いて説明する。まず、図１３のフローチャートにおいて、ユーザは、入力装置を介して検索する対象となる領域ＩＤと、検索する検索キーを入力し（ステップＳ２１）、動画像編集装置１に送信する（ステップＳ２２）。動画像編集装置１の検索情報受信部１５ｂは、領域ＩＤと検索キーを受信すると、属性情報検索部１８に出力する。属性情報検索部１８は、レイアウト情報データベースＤＢ１とクリップ情報データベースＤＢ２とにアクセスし、検索対象となる領域ＩＤの属性情報に検索キーに一致する情報があるか否かを検出する（ステップＳ２３）。そして、属性情報検索部１８は、検索結果を検索結果送信部１５ｃによって端末２に送信する（ステップＳ２４）。これにより、端末２の画面上に、検索結果が表示される（ステップＳ２５）。
【００５１】
ここで、検索処理について、図１４から図１９を用いてさらに説明する。
ａ）領域とキーワードを指定して検索（標準検索モード）
図１４に示すように、３つに分割されている領域のうち、領域１と領域２が検索領域として指定され、検索キーとして「おはよう」が指定されると、属性情報検索部１８は、上述した検索処理を行い、検索結果を端末２に送信する。このとき、例えば、符号（ａ）に示すように、領域１において２つ、領域２において１つ、検索キーが検出される。ここで、属性情報検索部１８は、検索結果において、検索キーに検索キーが含まれるクリップを再生させるためのトリガを動画像編集装置１に送信させるための情報を設定しておく（符号（ｂ））。これにより、端末２において、検索結果をクリックすることにより、検索キーが含まれる動画像や静止画像、テキストが再生される（符号（ｃ））。
これにより、ユーザは、検索対象を素早く探し出し、編集を行ったり、再生し足りすることができる。
【００５２】
ｂ）複数の領域に共通に含まれる検索キーを検索（共通キーワード検索モード）属性情報検索部１８は、端末２から共通キーワード検索モードが指示されると、指定された各領域に共通に検索キーが含まれているか否かを検索する。この場合の検索結果は、例えば、図１５に示すように、領域１および領域２にテキスト「おはよう」の属性情報が共通に設定されている場合に、符号（ａ）に示すような検索結果を端末２に送信する。
【００５３】
また、この共通キーワード検索モードにおいては、検索キーを複数指定するようにしてもよい。例えば、図１６に示すように領域１および領域２を指定し、検索キーとしてテキストと存在時間とが指定されると、属性情報検索部１８は、領域１および領域２に、これら２つの検索キーに基づいて、検索する。ここでは、１０秒から３０秒目までの間に「おはよう」のテキストが含まれているか否かについての検索結果が、符号（ａ）のように出力される。また、存在時間が１０秒から３０秒目であり、テキスト「ありがとう」を検索した結果は、符号（ｂ）のように表示される。
【００５４】
ｄ）素材属性を利用して検索（素材属性検索モード）
属性情報検索部１８は、端末２からの指示に応じて、属性情報以外に、素材情報データベースＤＢ３に記憶される素材属性を検索キーとして検索する。図１７は、検索キーが素材情報の作者名の他に、さらに存在時間が指示され、検索を行った場合を示す図面である。この場合、属性情報検索部１８は、検索キーとして指定された作者名が設定された素材属性があるか否かを素材情報データベースＤＢ３の中から検索する。そして、検索キーに対応する作者名の素材属性が存在する場合、その検索された素材属性に対応する素材ＩＤを読み出し、読み出した素材ＩＤが設定された属性情報をクリップ情報データベースＤＢ２から読み出す。さらに、属性情報検索部１８は、読み出した属性情報の中の挿入点と消去点が検索キーによって指定された存在時間に含まれているか否かを検出し、存在時間に含まれている場合に、この属性情報が設定された領域を検出する。そして、この検出されて領域にサムネイル画像を設定し、検出結果として端末２に送信して表示させる。ここでいうサムネイル画像とは、静止画、テキストの場合は、そのものの画像であり、動画像の場合は、動画像を検索するために使用される静止画である。この検索結果は、例えば図１７（ａ）、（ｂ）、（ｃ）が画面上に並べられて表示される。なお、このサムネイル画像が動画像のものである場合、端末２の入力装置によってクリックされると、動画像が再生される。
【００５５】
ｅ）検索結果をタイムラインを利用して表示
上述した検索結果を表示する方法以外に、タイムラインを利用するようにしてもよい。この場合の検索結果は、例えば、図１８に示すように、検索キーに対応するテキストとその背景部分のタイムラインの配色が強調されて表示される。
【００５６】
検索結果をタイムラインとサムネイル画像とを利用して表示
上述したｅ）の表示方法に、さらに、サムネイル画像について表示するようにしてもよい。例えば、図１９に示すように、領域１について検索キーとしてファイル名を指定して検索を行った場合、検索結果において、タイムラインに符号（ａ）に示すようなサムネイル画像が付加され、出力される。また、領域２においても同様に、検索キーとして指定されたファイル名のサムネイル画像がタイムラインに付加され、表示される。
【００５７】
４．レイアウト情報変更処理
次に、レイアウト情報変更処理について図２０を用いて説明する。まず、ユーザは、入力装置を介して検索する対象となる領域ＩＤと、領域の幅や高さを変更する変更指示を入力し、動画像編集装置１に送信する。動画像編集装置１の変更指示受信部１５ｄは、変更指示を受信してレイアウト情報変更部１９に出力する。レイアウト情報変更部１９は、変更指示に基づいて、編集対象の領域ＩＤに対応する幅や高さのデータを編集指示に基づいてレイアウト情報データベースＤＢ１に上書きして更新する。
このように、レイアウトを変更する場合においても、レイアウト情報データベースＤＢ１の幅や高さの情報を上書きするようにした。これにより、図２０に示すように、図２０（ａ）から図２０（ｂ）に示すように、領域１のサイズを小さくし、領域２のサイズを大きくする編集を行った場合においても、検索結果は、符号（ｃ）と符号（ｄ）に示すように、レイアウト変更前と変更後において、同じである。
【００５８】
なお、レイアウトを変更する場合において、検索結果をタイムラインとサムネイル画像とを表示する場合においても、図２１に示すように、レイアウトの変更前と後においても、同じ検索結果が得られ、従って、検索結果も同じ結果が表示される。
【００５９】
以上説明した実施形態において、検索処理は、主にテキストを検索キーとした場合について説明したが、属性情報と素材属性に含まれる項目であれば、テキスト以外を検索キーに設定して検索するようにしてもよい。例えば、テキストの背景色、文字色、文字サイズ、追加内容、等が検索キーとして利用してもよく、これらを複数組み合わせて検索するようにしてもよい。
【００６０】
また、図１における編集指示受信部１５ａ、検索情報受信部１５ｂ、検索結果送信部１５ｃ、変更指示受信部１５ｄ、属性情報表示部１６、情報変更部１７、属性情報検索部１８、レイアウト情報変更部１９の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより編集作業処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
【００６１】
また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
【００６２】
以上、この発明の実施形態を図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。
【００６３】
【発明の効果】
以上説明したように、この発明によれば、動画編集を編集する場合に、再生時間情報として記憶された挿入点および消去点に基づいて、同一領域内の各クリップを経過時間に対応させた図形によって端末の表示画面に表示させるようにしたので、ユーザは、編集されたストリーミングの編集内容を、視覚によって簡単に把握することができる効果が得られる。
【００６４】
また、本発明は、クリップ情報データベースに記憶された属性情報を読み出し、読み出した属性情報を図形の挿入点および消去点に対応付けて表示させるようにしたので、視覚的にストリーミングを構成するクリップの属性を簡単に把握できる効果が得られる。
【００６５】
また、本発明は、属性情報として、クリップのファイル名またはテキストを表示させるようにしたので、視覚的に時間を把握しつつ、どのようなファイルやテキストを簡単に把握することができる効果が得られる。
【００６６】
また、本発明は、編集指示受信部が受信した編集指示に基づいて、編集が指示された図形に対応する領域の領域識別情報を検出し、検出した領域識別子に対応するクリップ情報を前記編集指示の編集内容に応じて更新してクリップ情報データベースに記憶するようにしたので、ユーザは、表示された図形に対して編集指示を入力することにより、編集作業を行うことができ、これにより、編集作業を行うために編集するタイミングが到達するまでストリーミングを再生して待機する手間を省き、編集作業を効率的に行うことができる効果が得られる。
【００６７】
また、本発明は、端末から送信される再生時間または属性情報を検索するキーとなる検索キーと検索対象の領域を指定する検索領域指定情報とを受信し、受信した検索領域指定情報によって指定される領域識別情報に対応する属性情報から、検索キーに対応する属性情報を検索するようにしたので、編集されたファイルを検索することができる効果が得られる。
【００６８】
また、本発明は、端末から送信される、クリップを表示する大きさの変更指示を受信し、受信した変更指示に応じて、クリップを表示する大きさの情報を領域ＩＤに基づいてクリップ情報データベースに記憶して更新するようにしたので、領域の大きさを変更した場合においても、編集されたファイルを検索することができる効果が得られる。
【図面の簡単な説明】
【図１】この発明の一実施形態による動画像編集装置を適用した動画像編集システムの構成を示す概略ブロック図である。
【図２】動画像編集装置１の構成について説明するための概略ブロック図である。
【図３】レイアウトデータベースＤＢ１に記憶されるレイアウト情報の一例を示す図である。
【図４】クリップ情報データベースＤＢ２に記憶されるクリップ情報の一例を示す図面である。
【図５】素材情報データベースＤＢ３に記憶される情報について説明するための図面である。
【図６】タイムラインについて説明するための図面である。
【図７】タイムラインについて説明するための図面である。
【図８】タイムライン表示処理について説明するためのフローチャートである。
【図９】端末２の画面上に表示される情報の一例を示す図面である。
【図１０】情報の変更処理について説明するためのフローチャートである。
【図１１】テキストについて編集指示が行われた場合について説明するための図面である。
【図１２】再生時間情報を変更する場合について説明するための図面である。
【図１３】検索処理について説明するためのフローチャートである。
【図１４】検索処理について説明するための図面である。
【図１５】検索処理について説明するための図面である。
【図１６】検索処理について説明するための図面である。
【図１７】検索処理について説明するための図面である。
【図１８】検索処理について説明するための図面である。
【図１９】検索処理について説明するための図面である。
【図２０】レイアウト情報変更処理がなされた場合における検索結果について説明するための図面である。
【図２１】レイアウト情報変更処理がなされた場合における検索結果について説明するための図面である。
【図２２】同期マルチメディアプレゼンテーションを例示する図である。
【符号の説明】
１　動画像編集装置　　　　　　　　　　　　２　端末
１１　編集プログラム生成部　　　　　　　　１２　属性情報格納処理部
１３　同期マルチメディア言語ファイル生成部
１４　同期マルチメディア言語ファイル格納部
１５　通信部　　　　　　　　　　　　　　　１５ａ　編集指示受信部
１５ｂ　検索情報受信部　　　　　　　　　　１５ｃ　検索結果受信部
１５ｄ　変更指示受信部　　　　　　　　　　１６　属性情報表示部
１７　情報変更部　　　　　　　　　　　　　１８　属性情報検索部
１９　レイアウト情報変更部
ＤＢ１　レイアウト情報データベース
ＤＢ２　クリップ情報データベース　　　　　ＤＢ３　素材情報データベース
【図１】
2004015748.tif 000003
【図２】
2004015748.tif 000004
【図３】
2004015748.tif 000005
【図４】
2004015748.tif 000006
【図５】
2004015748.tif 000007
【図６】
2004015748.tif 000008
【図７】
2004015748.tif 000009
【図８】
2004015748.tif 000010
【図９】
2004015748.tif 000011
【図１０】
2004015748.tif 000012
【図１１】
2004015748.tif 000013
【図１２】
2004015748.tif 000014
【図１３】
2004015748.tif 000015
【図１４】
2004015748.tif 000016
【図１５】
2004015748.tif 000017
【図１６】
2004015748.tif 000018
【図１７】
2004015748.tif 000019
【図１８】
2004015748.tif 000020
【図１９】
2004015748.tif 000021
【図２０】
2004015748.tif 000022
【図２１】
2004015748.tif 000023
【図２２】
2004015748.tif 000024
【手続補正書】
【提出日】平成14年7月10日(2002.7.10)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００５３
【補正方法】変更
【補正の内容】
【００５３】
ｃ）検索キーを複数指定して検索
また、この共通キーワード検索モードにおいては、検索キーを複数指定するようにしてもよい。例えば、図１６に示すように領域１および領域２を指定し、検索キーとしてテキストと存在時間とが指定されると、属性情報検索部１８は、領域１および領域２に、これら２つの検索キーに基づいて、検索する。ここでは、１０秒から３０秒目までの間に「おはよう」のテキストが含まれているか否かについての検索結果が、符号（ａ）のように出力される。また、存在時間が１０秒から３０秒目であり、テキスト「ありがとう」を検索した結果は、符号（ｂ）のように表示される。


【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００５６
【補正方法】変更
【補正の内容】
【００５６】
ｆ）検索結果をタイムラインとサムネイル画像とを利用して表示
上述したｅ）の表示方法に、さらに、サムネイル画像について表示するようにしてもよい。例えば、図１９に示すように、領域１について検索キーとしてファイル名を指定して検索を行った場合、検索結果において、タイムラインに符号（ａ）に示すようなサムネイル画像が付加され、出力される。また、領域２においても同様に、検索キーとして指定されたファイル名のサムネイル画像がタイムラインに付加され、表示される。