【手続補正書】
【提出日】平成18年9月15日(2006.9.15)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】  マルチメディア情報から記述記録を生成するためのシステムであって、
（a）  前記マルチメディア情報を受信する少なくとも１つのマルチメディア情報入力インターフェースと、
（b）  前記少なくとも１つのマルチメディア情報入力インターフェースと接続しており、そこから前記マルチメディア情報を受信し、前記マルチメディア情報からマルチメディアオブジェクト記述を生成するためにオブジェクト抽出処理を実行することにより前記マルチメディア情報を処理し、前記マルチメディアオブジェクト記述の編成を表すマルチメディアオブジェクト階層記述を生成するためのオブジェクト階層処理により、前記生成したマルチメディアオブジェクト記述を処理するコンピュータプロセッサであって、前記マルチメディアオブジェクト記述と前記マルチメディアオブジェクト階層記述を含んだ少なくとも１つの記述記録が、前記マルチメディア情報に組込まれたコンテンツについて生成されるように構成されたコンピュータプロセッサと、
（c）  前記少なくとも１つの記述記録を記憶するための、前記プロセッサと動作的に接続されたデータ記憶システムと、
を有することを特徴とするシステム。
【請求項２】  前記マルチメディア情報が画像情報を有し、前記マルチメディアオブジェクト記述が画像オブジェクト記述を有し、前記マルチメディアオブジェクト階層記述が画像オブジェクト階層記述を有することを特徴とする請求項１に記載のシステム。
【請求項３】  前記オブジェクト抽出処理が、
（a）  前記画像情報内の各画像を前記画像内の複数の領域に区分するための画像区分処理と、
（b）  前記領域の１つまたはそれ以上について、１つまたはそれ以上の特徴記述を生成するための特徴抽出処理とを有し、
これにより、前記生成されたオブジェクト記述が、前記領域の１つまたはそれ以上について前記１つまたはそれ以上の特徴記述を有することを特徴とする請求項２に記載のシステム。
【請求項４】  前記１つまたはそれ以上の特徴記述が、テキストアノテーション、色、テクスチャ、形状、サイズ、位置から成るグループから選択されることを特徴とする請求項３に記載のシステム。
【請求項５】  前記画像オブジェクト階層記述が物理記述を有するようにするために、前記オブジェクト階層処理が、前記オブジェクトの空間特徴に基づいた前記画像オブジェクト記述の物理オブジェクト階層記述を生成するための物理オブジェクト階層編成を有することを特徴とする請求項２に記載のシステム。
【請求項６】  前記画像オブジェクト階層記述が物理記述と論理記述の両方を有するようにするために、前記オブジェクト階層処理がさらに、前記オブジェクトのセマンティック特徴に基づいた前記画像オブジェクト記述の論理オブジェクト階層記述を生成するための論理オブジェクト階層編成を有することを特徴とする請求項５に記載のシステム。
【請求項７】  前記オブジェクト抽出処理が、
（a）  前記画像情報内の各画像を前記画像内の複数の領域に区分するための画像区分処理と、
（b）  前記領域の１つまたはそれ以上について、オブジェクト記述を生成するための特徴抽出処理とを有し、
前記物理階層編成と前記論理階層編成が、前記領域の１つまたはそれ以上について前記オブジェクト記述の階層記述を生成することを特徴とする請求項６に記載のシステム。
【請求項８】  エンコーダをさらに有し、前記エンコーダが、前記画像オブジェクト階層記述と前記画像オブジェクト記述を受信し、前記画像オブジェクト階層記述と前記画像オブジェクト記述を符号化された記述情報に符号化し、前記データ記憶システムが、前記符号化した記述情報を、前記少なくとも１つの記述記録として記憶するべく動作することを特徴とする請求項７に記載のシステム。
【請求項９】  前記マルチメディア情報がビデオ情報を有し、前記マルチメディアオブジェクト記述が、イベント記述とオブジェクト記述の両方を含んだビデオオブジェクト記述を有し、前記マルチメディア階層記述が、イベント階層記述とオブジェクト階層記述の両方を含んだビデオオブジェクト階層記述を有することを特徴とする請求項１に記載のシステム。
【請求項１０】  前記オブジェクト抽出処理が、
（a）  前記ビデオ情報を１つまたはそれ以上のビデオイベントまたはビデオイベントのグループに時間的に区分し、前記ビデオイベントについてイベント記述を生成するための時間的なビデオ区分処理と、
（b）  前記１つまたはそれ以上のビデオイベントまたはビデオイベントのグループを１つまたはそれ以上の領域に区分し、前記領域にオブジェクト記述を生成するためのビデオオブジェクト抽出処理と、
（c）  前記１つまたはそれ以上のビデオイベントまたはビデオイベントのグループに、１つまたはそれ以上のイベント特徴記述を生成し、前記１つまたはそれ以上の領域に１つまたはそれ以上のオブジェクト特徴記述をするための特徴抽出処理とを有し、
前記生成されたビデオオブジェクト記述が、前記イベント特徴記述と前記オブジェクト記述を有することを特徴とする請求項９に記載のシステム。
【請求項１１】  前記１つまたはそれ以上のイベント特徴記述が、テキストアノテーション、ショット推移、カメラモーション、時間、キーフレームで構成されたグループから選択され、前記１つまたはそれ以上のオブジェクト特徴記述が、色、テクスチャ、形状、サイズ、位置、動作、時間で構成されたグループから選択されることを特徴とする請求項１０に記載のシステム。
【請求項１２】  前記ビデオ階層記述が時間的記述を有するようにするために、前記オブジェクト階層処理が、前記ビデオオブジェクトの時間的特徴に基づいた前記ビデオオブジェクト記述の物理イベント階層記述を生成するための物理イベント階層編成を有することを特徴とする請求項９に記載のシステム。
【請求項１３】  前記ビデオ階層記述が時間的記述と論理的記述の両方を有するようにするために、前記オブジェクト階層処理がさらに、前記ビデオオブジェクトのセマンティック特徴に基づいた前記ビデオオブジェクト記述の論理イベント階層記述を生成するための論理イベント階層編成を有することを特徴とする請求項１２に記載のシステム。
【請求項１４】  前記ビデオ階層記述が時間的および論理的イベントおよびオブジェクト記述を有するようにするために、前記オブジェクト階層処理がさらに、前記時間および論理記述を受信し、前記ビデオ情報内に組込まれたビデオオブジェクトにオブジェクト階層記述を生成する物理および論理オブジェクト階層抽出処理を有することを特徴とする請求項１３に記載のシステム。
【請求項１５】  前記オブジェクト抽出処理が、
（a）  前記ビデオ情報を１つまたはそれ以上のビデオイベントまたはビデオイベントのグループに時間的に区分し、前記ビデオイベントにイベント記述を生成するための時間的なビデオ区分処理と、
（b）  前記１つまたはそれ以上のビデオイベントまたはビデオイベントのグループを１つまたはそれ以上の領域に区分し、前記領域にオブジェクト記述を生成するためのビデオオブジェクト抽出処理と、
（c）  前記１つまたはそれ以上のビデオイベントまたはビデオイベントのグループに、１つまたはそれ以上のイベント特徴記述を生成し、前記１つまたはそれ以上の領域に１つまたはそれ以上のオブジェクト特徴記述をするための特徴抽出処理とを有し、
前記生成されたビデオオブジェクト記述が、前記イベント特徴記述と前記オブジェクト記述を有し、前記物理イベント階層編成と前記論理イベント階層編成が、前記イベント特徴記述から階層記述を生成し、前記物理オブジェクト階層編成と前記論理オブジェクト階層編成が、前記オブジェクト特徴記述から階層記述を生成することを特徴とする請求項１４に記載のシステム。
【請求項１６】  エンコーダをさらに有し、前記エンコーダが、前記ビデオオブジェクト階層記述と前記ビデオオブジェクト記述を受信し、前記ビデオオブジェクト階層記述と前記ビデオオブジェクト記述を符号化された記述情報に符号化し、前記データ記憶システムが、前記符号化した記述情報を、前記少なくとも１つの記述記録として記憶するべく動作することを特徴とする請求１５に記載のシステム。
【請求項１７】  マルチメディア情報から記述記録を生成する方法であり、
（a）  前記マルチメディア情報を受信する段階と、
（b）  前記マルチメディア情報からマルチメディアオブジェクト記述を生成するために、オブジェクト抽出処理を実行することで、前記マルチメディア情報を処理する段階と、
（c）  前記マルチメディアオブジェクト記述の編成を表すマルチメディアオブジェクト階層記述を生成するために、オブジェクト階層処理により、前記生成されたマルチメディアオブジェクト記述を処理する段階とを有し、前記マルチメディア情報内に組込まれたコンテンツについて、前記マルチメディアオブジェクト記述と前記マルチメディアオブジェクト階層記述を含んだ少なくとも１つの記述記録が生成され、
（d）  前記少なくとも１つの記述記録を記憶する段階をさらに有することを特徴とする方法。
【請求項１８】  前記マルチメディア情報が画像情報を有し、前記マルチメディアオブジェクト記述が画像オブジェクト記述を有し、前記マルチメディアオブジェクト階層記述が画像オブジェクト階層記述を有することを特徴とする請求項１７に記載の方法。
【請求項１９】  前記オブジェクト抽出処理段階が、
（a）  前記画像情報内の各画像を前記画像内の領域に区分するための画像区分処理の副段階と、
（b）  前記領域の１つまたはそれ以上に、１つまたはそれ以上の特徴記述を生成するための特徴抽出処理の副段階とを有し、
それにより、前記生成された画像オブジェクト記述が、前記領域の１つまたはそれ以上について前記１つまたはそれ以上の特徴記述を有することを特徴とする請求項１８に記載の方法。
【請求項２０】  前記１つまたはそれ以上の特徴記述が、テキストアノテーション、色、テクスチャ、形状、サイズ、位置で構成されたグループから選択されることを特徴とする請求項１９に記載の方法。
【請求項２１】  前記画像階層記述が物理記述を有するようにするために、前記オブジェクト階層処理の段階が、前記オブジェクトの空間特徴に基づいた前記画像オブジェクト記述の物理オブジェクト階層記述を生成するための物理オブジェクト階層編成の副段階を有することを特徴とする請求項１８に記載の方法。
【請求項２２】  前記画像オブジェクト階層記述が物理記述と論理記述の両方を有するようにするために、前記オブジェクト階層処理の段階がさらに、前記オブジェクトのセマンティック特徴に基づいた前記画像オブジェクト記述の論理オブジェクト階層記述を生成するための論理オブジェクト階層編成の副段階を有することを特徴とする請求項２１に記載の方法。
【請求項２３】  前記オブジェクト抽出処理の段階がさらに、
（a）  前記画像情報内の各画像を前記画像内の複数の領域に区分するための画像区分処理の副段階と、
（b）  前記領域の１つまたはそれ以上について、オブジェクト記述を生成するための特徴抽出処理との副段階を有し、
前記物理オブジェクト階層編成副段階と前記論理オブジェクト階層編成副段階が、前記領域の１つまたはそれ以上について前記オブジェクト記述の階層記述を生成することを特徴とする請求項２２に記載の方法。
【請求項２４】  前記データ記憶段階以前に、前記画像オブジェクト記述と前記画像オブジェクト階層記述を、符号化された記述情報に符号化する段階を有することを特徴とする請求項２４に記載の方法。
【請求項２５】  前記マルチメディア情報がビデオ情報を有し、前記マルチメディアオブジェクト記述が、イベント記述とオブジェクト記述の両方を含んだビデオオブジェクト記述を有し、前記マルティメディア階層記述が、イベント階層記述とオブジェクト階層記述の両方を含んだビデオオブジェクト階層記述を有することを特徴とする請求項１７に記載の方法。
【請求項２６】  前記オブジェクト抽出処理の段階が、
（a）  前記ビデオ情報を１つまたはそれ以上のビデオイベントまたはビデオイベントのグループに時間的に区分し、前記ビデオイベントにイベント記述を生成するための時間的なビデオ区分処理の副段階と、
（b）  前記１つまたはそれ以上のビデオイベントまたはビデオイベントのグループを１つまたはそれ以上の領域に区分し、前記領域にオブジェクト記述を生成するためのビデオオブジェクト抽出処理の副段階と、
（c）  前記１つまたはそれ以上のビデオイベントまたはビデオイベントのグループに、１つまたはそれ以上のイベント特徴記述を生成し、前記１つまたはそれ以上の領域に１つまたはそれ以上のオブジェクト特徴記述を生成するための特徴抽出処理の副段階とを有し、
前記生成されたビデオオブジェクト記述が、前記イベント特徴記述と前記オブジェクト記述を有することを特徴とする請求項２５に記載の方法。
【請求項２７】  前記１つまたはそれ以上のイベント特徴記述が、テキストアノテーション、ショット推移、カメラモーション、時間、キーフレームで構成されたグループから選択され、前記１つまたはそれ以上のオブジェクト特徴記述が、色、テクスチャ、形状、サイズ、位置、動作、時間で構成されたグループから選択されることを特徴とする請求項２６に記載の方法。
【請求項２８】  前記ビデオ階層記述が時間的記述を有するようにするために、前記オブジェクト階層処理の段階が、前記ビデオオブジェクトの時間的特徴に基づいた前記ビデオオブジェクト記述の物理イベント階層記述を生成するための物理イベント階層編成の副段階を有することを特徴とする請求項２５に記載の方法。
【請求項２９】  前記ビデオ階層記述が時間的記述と論理的記述の両方を有するようにするために、前記オブジェクト階層処理の段階がさらに、前記ビデオオブジェクトのセマンティック特徴に基づいた前記ビデオオブジェクト記述の論理イベント階層記述を生成するための論理イベント階層編成の副段階を有することを特徴とする請求項２８に記載の方法。
【請求項３０】  前記ビデオ階層記述が時間的および論理的イベントおよびオブジェクト記述を有するようにするために、前記オブジェクト階層処理の段階がさらに、前記時間および論理記述を受信し、前記ビデオ情報内に組込まれたビデオオブジェクトにオブジェクト階層記述を生成する物理および論理オブジェクト階層抽出処理の副段階を有することを特徴とする請求項２９に記載の方法。
【請求項３１】  前記オブジェクト抽出処理の段階が、
（a）  前記ビデオ情報を１つまたはそれ以上のビデオイベントまたはビデオイベントのグループに時間的に区分し、前記ビデオイベントにイベント記述を生成するための時間的なビデオ区分処理の副段階と、
（b）  前記１つまたはそれ以上のビデオイベントまたはビデオイベントのグループを１つまたはそれ以上の領域に区分し、前記領域にオブジェクト記述を生成するためのビデオオブジェクト抽出処理の副段階と、
（c）  前記１つまたはそれ以上のビデオイベントまたはビデオイベントのグループに、１つまたはそれ以上のイベント特徴記述を生成し、前記１つまたはそれ以上の領域に１つまたはそれ以上のオブジェクト特徴記述を生成するための特徴抽出処理の副段階とを有し、
前記生成されたビデオオブジェクト記述が、前記イベント特徴記述と前記オブジェクト記述を有し、前記物理イベント階層編成と前記論理イベント階層編成が、前記イベント特徴記述から階層記述を生成し、前記物理オブジェクト階層編成と前記論理オブジェクト階層編成が、前記オブジェクト特徴記述から階層記述を生成することを特徴とする請求項３０に記載の方法。
【請求項３２】  前記データ記憶段階以前に、前記ビデオオブジェクト記述と前記ビデオオブジェクト階層記述を、符号化された記述情報に符号化する段階をさらに有することを特徴とする請求項３１に記載の方法。
【請求項３３】  関連するマルチメディア情報についてマルチメディアコンテンツを記述する少なくとも１つのマルチメディア記述記録を備えたデジタル情報を含んだコンピュータ読み取り可能な記録媒体であって、前記記述記録が、
（a）  関連するマルチメディアオブジェクトを記述する１つまたはそれ以上のマルチメディアオブジェクト記述と、
（b）  前記マルチメディアオブジェクト記述の各々を特長付ける１つまたはそれ以上の特徴と、
（c）  もしあれば、１つまたはそれ以上の特徴に従って前記１つまたはそれ以上のマルチメディアオブジェクトの少なくとも１部分に関連する、１つまたはそれ以上の前記マルチメディアオブジェクト記述の編成を表すマルチメディアオブジェクト階層記述とを有することを特徴とするコンピュータ読み取り可能な記録媒体。
【請求項３４】  前記マルチメディア情報が画像情報を有し、前記マルチメディアオブジェクトが画像オブジェクトを有し、前記マルチメディアオブジェクト記述が画像オブジェクト記述を有し、前記マルチメディアオブジェクト階層記述が画像オブジェクト階層記述を有することを特徴とする請求項３３に記載のコンピュータ読み取り可能な記録媒体。
【請求項３５】  前記１つまたはそれ以上の特徴が、テキストアノテーション、色、テクスチャ、形状、サイズ、位置で構成されたグループから選択されることを特徴とすることを特徴とする請求項３４に記載のコンピュータ読み取り可能な記録媒体。
【請求項３６】  前記画像オブジェクト階層記述が、前記画像オブジェクトの空間的特徴に基づいた前記画像オブジェクト記述の物理オブジェクト階層記述を有することを特徴とする請求項３４に記載のコンピュータ読み取り可能な記録媒体。
【請求項３７】  前記画像オブジェクト階層記述がさらに、前記画像オブジェクトのセマンティック特徴に基づいた前記画像オブジェクト記述の論理オブジェクト階層記述を有することを特徴とする請求項３６に記載のコンピュータ読み取り可能な記録媒体。
【請求項３８】  前記マルチメディア情報がビデオ情報を有し、前記マルチメディアオブジェクトがイベントおよびビデオオブジェクトを有し、前記マルチメディアオブジェクト記述が、イベント記述とオブジェクト記述の両方を含んだビデオオブジェクト記述を有し、前記特徴がビデオイベント特徴とビデオオブジェクト特徴を有し、前記マルチメディア階層記述が、イベント階層記述とオブジェクト階層記述の両方を含んだビデオオブジェクト階層記述を有することを特徴とする請求項３３に記載のコンピュータ読み取り可能な記録媒体。
【請求項３９】  前記１つまたはそれ以上のイベント特徴記述が、テキストアノテーション、ショット推移、カメラモーション、時間、キーフレームで構成されたグループから選択され、前記１つまたはそれ以上のオブジェクト特徴記述が、色、テクスチャ、形状、サイズ、位置、動作、時間で構成されたグループから選択されることを特徴とする請求項３８に記載のコンピュータ読み取り可能な記録媒体。
【請求項４０】  前記イベント階層記述が、時間的特徴に基づいた前記イベントの１つまたはそれ以上の物理階層記述を有することを特徴とする請求項３８に記載のコンピュータ読み取り可能な記録媒体。
【請求項４１】  前記イベント階層記述が、セマンティック特徴に基づいた前記イベントの１つまたはそれ以上の論理階層記述をさらに有することを特徴とする請求項４０に記載のコンピュータ読み取り可能な記録媒体。
【請求項４２】  前記オブジェクト階層記述が、時間的特徴に基づいた前記オブジェクトの１つまたはそれ以上の物理階層記述を有することを特徴とする請求項３８に記載のコンピュータ読み取り可能な記録媒体。
【請求項４３】  前記オブジェクト階層記述が、セマンティック特徴に基づいた前記オブジェクトの１つまたはそれ以上の論理階層記述をさらに有することを特徴とする請求項３９に記載のコンピュータ読み取り可能な記録媒体。