(57)【特許請求の範囲】
【請求項１】
客体基盤の対話形マルチメディアコンテンツ著作装置であって、
ユーザ入力が可能な操作機能を有する入出力手段と、
前記入出力手段によって入力された前記ユーザ入力に基づいた情報であって、メディア客体としての客体別マルチメディアコンテンツの属性に関する所定の編集情報を、出力するインターフェースを提供するユーザインターフェーシング手段と、
前記ユーザインターフェーシング手段から出力される前記客体別マルチメディアコンテンツの編集情報を、編集が行えるようにするための高水準及び／又は低水準の編集が行える言語形式の内部資料構造に合うように変換する手段と、該変換された編集情報に基づいて編集を行うことによって生成された編集結果物としての対話形マルチメディアコンテンツ情報を、該高水準及び／又は低水準の編集が行える言語形式の内部資料構造として格納する手段と、該対話形マルチメディアコンテンツ情報を、ファイル入出力するためのテキスト形式又はバイナリ形式からなるファイル形式に変換する手段とを有する編集情報処理手段と、
前記編集情報処理手段から出力される前記テキスト形式又はバイナリ形式からなるファイル形式に変換された対話形マルチメディアコンテンツ情報を符号化および復号化する手段と、外部から入力される前記客体別マルチメディアコンテンツのデータ形式を、所定の編集可能な形式に変換する手段と、該客体別マルチメディアコンテンツおよび該コンテンツ内の個々の独立したデータ内に存在する各物体を分割する手段とを有するメディア符号化／復号化手段と
を具えたことを特徴とする客体基盤の対話形マルチメディアコンテンツ著作装置。
【請求項２】
前記ユーザインターフェーシング手段は、
前記メディア客体の挿入、削除および各メディア客体を特定付ける属性編集のためのインターフェースと、
前記メディア客体の論理的な関係を編集するためのインターフェースと、
前記メディア客体に対する空間配置を編集するためのインターフェースと、
前記メディア客体に対する時間配置を編集するためのインターフェースと、
前記メディア客体に対するユーザ対話性を編集するためのインターフェースと、
編集中のメディア客体の情報を表示するためのインターフェースと
を含むことを特徴とする請求項１記載の客体基盤の対話形マルチメディアコンテンツ著作装置。
【請求項３】
前記ユーザ対話性は、
前記編集された対話形マルチメディアコンテンツ情報を再生している間に前記メディア客体の位置、該メディア客体の再生開始および該メディア客体の再生終了を含む処理を、前記ユーザインターフェーシング手段に接続された前記入出力手段から操作できることを特徴とする請求項２記載の客体基盤の対話形マルチメディアコンテンツ著作装置。
【請求項４】
前記編集情報処理手段は、
前記ユーザインターフェーシング手段との情報交換を行なうためのデータ接近応用プログラムインターフェースと、
前記入出力手段から入力される前記客体別マルチメディアコンテンツの編集情報を検査し、該コンテンツに対する所定の内部資料構造を生成、削除、変更する手段と、該所定の内部資料構造で格納されている情報を前記前記入出力手段を介して参照できるように変換する手段とを有する客体編集情報処理器と、
格納装置に格納された編集結果物としての前記対話形マルチメディアコンテンツ情報を再編集するために内部資料として格納、および、該対話形マルチメディアコンテンツ情報を編集するために前記入出力手段から入力される編集情報を内部資料として格納する客体基盤内部資料構造からなる格納手段と、
前記対話形マルチメディアコンテンツ情報に対する前記格納装置への入出力と、前記内部資料および入出力ファイルのファイル形式の変換を行うファイル入／出力処理器と
を含むことを特徴とする請求項１記載の客体基盤の対話形マルチメディアコンテンツ著作装置。
【請求項５】
前記客体編集情報処理器は、
各メディア客体の時間的配置に対する編集情報を処理するための時間配置編集情報処理モジュールと、
各メディア客体の空間的配置に対する編集情報を処理するための空間配置編集情報処理モジュールと、
ユーザ対話性に対する編集情報を処理するためのユーザ対話性編集情報処理モジュールと、
各メディア客体の形状などの各客体を特徴付けることができる属性に対する編集情報を処理するための客体別属性および論理構造編集情報処理モジュールと
を含むことを特徴とする請求項４記載の客体基盤の対話形マルチメディアコンテンツ著作装置。
【請求項６】
前記客体編集情報処理器は、
前記メディア客体の管理及び検索するための情報が適切であるかを検査し、該検査結果を内部資料として格納および前記内部資料構造として格納された客体技術情報を外部で参照できるように変換するための客体技術情報処理モジュールをさらに含むことを特徴とする請求項４又は５記載の客体基盤の対話形マルチメディアコンテンツ著作装置。
【請求項７】
前記客体編集情報処理器は、
高水準の言語形式での著作を行うための編集情報の処理、低水準の言語形式での著作を行うための編集情報の処理、および高水準の言語形式での著作と低水準の言語形式での著作との両方を行うための編集情報の処理を行なうことを特徴とする請求項４又は５記載の客体基盤の対話形マルチメディアコンテンツ著作装置。
【請求項８】
前記内部資料構造として格納される内部資料は、
高水準の言語形式での著作を支援する内部資料、低水準の言語形式での著作を支援する内部資料、および高水準の言語形式での著作を支援する内部資料と低水準の言語形式での著作を支援する内部資料とを含むことを特徴とする請求項４又は５記載の客体基盤の対話形マルチメディアコンテンツ著作装置。
【請求項９】
前記ファイル入／出力処理器は、
前記格納されている対話形マルチメディアコンテンツ情報を読み出して、前記客体基盤内部資料構造からなる格納手段に格納し、該対話形マルチメディアコンテンツ情報を解析してエラーを検査するためのファイル解析モジュールと、
前記客体基盤内部資料構造からなる格納手段に格納されている前記対話形マルチメディアコンテンツ情報の編集／著作結果を前記格納装置に格納するファイル生成モジュールと
を含むことを特徴とする請求項４又は５記載の客体基盤の対話形マルチメディアコンテンツ著作装置。
【請求項１０】
前記ファイル入／出力処理器は、
前記客体基盤内部資料構造からなる格納手段、および、ファイル入／出力形式を変換するための形式変換モジュールをさらに含むことを特徴とする請求項９記載の客体基盤の対話形マルチメディアコンテンツ著作装置。
【請求項１１】
前記形式変換モジュールは、
当該装置が高水準および低水準の両方の言語形式での編集を提供する場合には、高水準の言語形式での編集結果を低水準の言語形式での編集結果に変換し、編集されたコンテンツを当該装置で支援しない高水準のファイル形式に変換することを特徴とする請求項１０記載の客体基盤の対話形マルチメディアコンテンツ著作装置。
【請求項１２】
前記メディア符号化／復号化手段は、
符号化／復号化のために必要な前処理及び後処理を行なうための前／後処理器と、
メディアデータをメディアストリームに符号化するためのメディア符号化器と、
メディアストリームをメディアデータに復号化するためのメディア復号化器と
を含むことを特徴とする請求項１記載の客体基盤の対話形マルチメディアコンテンツ著作装置。
【請求項１３】
前記メディア符号化器および前記メディア復号化器は、
リアルタイムおよびリアルタイム以上の高速に、符号化、および、復号化を行うための専用のハードウェアであるメディア処理加速器をさらに含むことを特徴とする請求項１２記載の客体基盤の対話形マルチメディアコンテンツ著作装置。
【請求項１４】
客体基盤の対話形マルチメディアコンテンツ著作方法であって、
ユーザ入力が可能な操作機能を提供する入出力工程と、
前記入出力工程によって入力された前記ユーザ入力に基づいた情報であって、メディア客体としての客体別マルチメディアコンテンツの属性に関する所定の編集情報を、出力するインターフェースを提供する工程と、
前記出力される前記客体別マルチメディアコンテンツの編集情報を、編集が行えるようにするための高水準及び／又は低水準の編集が行える言語形式の内部資料構造に合うように変換する工程と、該変換された編集情報に基づいて編集を行うことによって生成された編集結果物としての対話形マルチメディアコンテンツ情報を、該高水準及び／又は低水準の編集が行える言語形式の内部資料構造として格納する工程と、該対話形マルチメディアコンテンツ情報を、ファイル入出力するためのテキスト形式又はバイナリ形式からなるファイル形式に変換する工程とを有する工程と、
前記出力される前記テキスト形式又はバイナリ形式からなるファイル形式に変換された対話形マルチメディアコンテンツ情報を符号化および復号化する工程と、外部から入力される前記客体別マルチメディアコンテンツのデータ形式を、所定の編集可能な形式に変換する工程と、該客体別マルチメディアコンテンツおよび該コンテンツ内の個々の独立したデータ内に存在する各物体を分割する工程とを有する工程と
を具えたことを特徴とする客体基盤の対話形マルチメディアコンテンツ著作方法。
【請求項１５】
コンピュータに、請求項１４記載の客体基盤の対話形マルチメディアコンテンツ著作方法を実行させるためのプログラムを記録したコンピュータ読取り可能な記録媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、客体基盤の対話形マルチメディアコンテンツ著作装置、および、その方法に関する。さらに詳細には、本発明は、ビデオ、オーディオ、停止画像、グラフィック、アニメーション、文字情報などのメディア客体及び客体単位のユーザ対話性を含む客体基盤対話形マルチメディアコンテンツを客体単位に著作し、客体単位の再編集が可能となるようにするための客体基盤の対話形マルチメディアコンテンツ著作装置、および、その方法と、それを実現させるためのプログラムを記録したコンピュータで読み出すことのできる記録媒体に関する。
【０００２】
【従来の技術】
通常、ビデオ、オーディオ及び停止画像編集／著作道具は、ビデオ、オーディオ及び停止画像を各々一つの独立的な客体とみなして、これに対して任意の位置での切り取り、貼り付けなどの非線型編集機能及びフェイドイン／アウト（ＦＡＤＥ  ＩＮ／ＯＵＴ）などの特殊効果機能を提供している。
【０００３】
しかし、これらが提供する編集／著作方法を利用する場合には、ビデオ、オーディオ及び停止画像は、各々一つの独立的な客体と見なされるために、ビデオ、オーディオ及び停止画像内に存在する物体の各々に対する編集が不可能であり、コンテンツがプレーされている間にユーザの要求に応じて多様な内容を見せることができるユーザ対話性の編集が不可能である。
【０００４】
また、ビデオを編集する間には、ビデオ、停止画像、グラフィック客体を使用して一つのコンテンツが著作できるが、その編集／著作された結果物は、一つのビデオに製作されることになるので、編集／著作された結果物に対する再編集がほぼ不可能である。
【０００５】
すなわち、従来の動画像や静止画像の編集装置においては、ビデオ（ｖｉｄｅｏ）、静止画像やオーディオ（ａｕｄｉｏ）を個々の独立した１個の客体として区分して編集/著作する方法だけを提供しているため、ビデオ（ｖｉｄｅｏ）画面全体に対する切り取り、貼り付けなどは行えても、ビデオや静止画像内に存在する個々の物体、すなわち、動画像画面内に存在する人や机などのような物体を１個の客体として取り扱い編集することはできない。したがって、従来の動画像や静止画像編集装置は、客体基盤のマルチメディア（ｍｕｌｔｉｍｅｄｉａ）コンテンツ（ｃｏｎｔｅｎｔｓ）を編集できる方法を提供することができないだけでなく、ビデオ画面の全体を１つの客体として取り扱うため、画面内に存在する客体、すなわち、動画像内に存在する人や机のような物体に対してユーザ対話性を編集することができる方法を提供できないという問題点があった。
【０００６】
【発明が解決しようとする課題】
そこで、本発明の目的は、上記従来の技術の問題点に鑑みてなされたものであって、ビデオ、オーディオ、及び停止画像内に存在する各々の物体を一つの客体と見なして客体基盤対話形マルチメディアコンテンツに対する多様な編集／著作機能を提供することができ、編集／著作結果に対する再編集が簡単であり、多様なユーザの要求に反応できる形態のユーザ対話性を編集することのできる客体単位の対話的な操作が可能な客体基盤の対話形マルチメディアコンテンツ著作装置、および、その方法、さらには、それを実現させるためのプログラムを記録したコンピュータで読み出すことができる記録媒体を提供することにある。
【０００７】
【課題を解決するための手段】
本発明は、客体基盤の対話形マルチメディアコンテンツ著作装置であって、ユーザ入力が可能な操作機能を有する入出力手段と、前記入出力手段によって入力された前記ユーザ入力に基づいた情報であって、メディア客体としての客体別マルチメディアコンテンツの属性に関する所定の編集情報を、出力するインターフェースを提供するユーザインターフェーシング手段と、前記ユーザインターフェーシング手段から出力される前記客体別マルチメディアコンテンツの編集情報を、編集が行えるようにするための所定の内部資料構造に合うように変換する手段と、該変換された編集情報に基づいて編集を行うことによって生成された編集結果物としての対話形マルチメディアコンテンツ情報を、該所定の内部資料構造として格納する手段と、該対話形マルチメディアコンテンツ情報を、ファイル入出力するための所定のファイル形式に変換する手段とを有する編集情報処理手段と、前記編集情報処理手段から出力される前記所定のファイル形式に変換された対話形マルチメディアコンテンツ情報を符号化および復号化する手段と、外部から入力される前記客体別マルチメディアコンテンツのデータ形式を、所定の編集可能な形式に変換する手段と、該客体別マルチメディアコンテンツおよび該コンテンツ内の個々の独立したデータ内に存在する各物体を分割する手段とを有するメディア符号化／復号化手段とを具えたことを特徴とする。
【０００８】
本発明は、客体基盤の対話形マルチメディアコンテンツ著作方法であって、ユーザ入力が可能な操作機能を提供する入出力工程と、前記入出力工程によって入力された前記ユーザ入力に基づいた情報であって、メディア客体としての客体別マルチメディアコンテンツの属性に関する所定の編集情報を、出力するインターフェースを提供する工程と、前記出力される前記客体別マルチメディアコンテンツの編集情報を、編集が行えるようにするための所定の内部資料構造に合うように変換する工程と、該変換された編集情報に基づいて編集を行うことによって生成された編集結果物としての対話形マルチメディアコンテンツ情報を、該所定の内部資料構造として格納する工程と、該対話形マルチメディアコンテンツ情報を、ファイル入出力するための所定のファイル形式に変換する工程とを有する工程と、前記出力される前記所定のファイル形式に変換された対話形マルチメディアコンテンツ情報を符号化および復号化する工程と、外部から入力される前記客体別マルチメディアコンテンツのデータ形式を、所定の編集可能な形式に変換する工程と、該客体別マルチメディアコンテンツおよび該コンテンツ内の個々の独立したデータ内に存在する各物体を分割する工程とを有する工程とを具えたことを特徴とする。
【０００９】
本発明は、コンピュータに、上記客体基盤の対話形マルチメディアコンテンツ著作方法を実行させるためのプログラムを記録したコンピュータ読取り可能な記録媒体を提供する。
【００１０】
【発明の実施の形態】
以下、図面を参照して、本発明の実施の形態を詳細に説明する。
【００１１】
図１は、本発明に係る客体基盤の対話形マルチメディアコンテンツ著作装置の１例を示す構成図である。
【００１２】
（対話形マルチメディアコンテンツ著作装置）
図１に示すように、本発明の対話形マルチメディアコンテンツ著作装置は、ユーザが編集／著作道具を容易に使用することができるインターフェースを提供するユーザインタフェース部１０３、ユーザの入力とコンテンツを編集処理する編集情報処理部１０４及び編集／著作されたマルチメディアコンテンツを符号化及び復号化するメディア符号化／復号化部１０５を含む。
【００１３】
前記ユーザインタフェース部１０３は、入力装置１０１から入力されるユーザ入力を解析及び処理して編集情報処理部１０４に編集情報を提供し、編集／著作結果を出力装置１０２を介して再生する。
【００１４】
ここで、ユーザインタフェース部１０３は、各客体の挿入、削除及び各客体を特定付ける属性編集のためのインターフェース、メディア客体間の論理的な関係を編集するためのインターフェース、メディア客体の開始時間、終了時間などの時間的配置を編集できるインターフェース、メディア客体のコンテンツ内における位置を決定する空間的な配置を編集できるインターフェース、ユーザ対話性を編集するためのインターフェース及びコンテンツに対する情報を表示するためのインターフェースを含む。
【００１５】
前記各々のインターフェースは、マウスを利用して簡単に属性を編集できるＧＵＩ形式のインターフェース及びキーボードを介して正確な値を編集できるインターフェースから構成される。ここで、各客体を特定付ける属性には、各客体の形状などの各メディア客体に対する特徴的な属性を意味し、各客体間の論理的関係は、各メディア間の従属関係、グループ化情報などを表す属性を意味する。
【００１６】
前記ユーザ対話性は、編集／著作された対話形マルチメディアコンテンツを再生している間にメディア客体の位置、メディア客体の再生開始及びメディア客体の再生終了などをユーザが自由に操作できるということを意味する。この場合、ユーザは所望するコンテンツのみを選択して見るか、聞くことができ、ユーザの要求に応じて場面全体または一部が新しい場面に変わる（ＳＣＥＮＥ  ＣＨＡＮＧＥ、ＳＣＥＮＥ  ＵＰＤＡＴＥ）か、現在の場面の一部に他の場面が追加される（ＩＮＳＥＲＴ  ＳＣＥＮＥ）か、現在の場面の一部が除去される（ＲＥＭＯＶＥ  ＳＣＥＮＥ）。
【００１７】
前記編集情報処理部１０４は、ユーザインタフェース部１０３から提供されるユーザの入力とコンテンツの編集／著作に用いられたメディア客体に対する情報を内部資料構造に格納し、格納されているコンテンツに対する編集／著作情報をテキスト形式のファイル及びバイナリ形式のファイルで格納する機能とテキスト形式のファイル及びバイナリ形式のファイルで格納されているコンテンツの編集／著作情報を読み出して内部資料構造に格納して再編集が可能となるようにする機能を行う。
【００１８】
前記メディア符号化／復号化部１０５は、コンテンツの編集／著作に任意の形状を有するビデオ客体を含んで多様な種類のメディア客体を使用することができるようにするために、国際標準に従うメディア符号化／復号化技術または標準化されてないメディア符号化／復号化技術を利用してメディアを符号化／復号化する機能を行う。
【００１９】
ここで、前記メディア符号化／復号化部１０５は、メディア符号化／復号化機能をリアルタイムまたはリアルタイム以上の高速で行なうことができるようにするメディア処理のための専用のハードウェアを含むことが好ましい。
【００２０】
（編集情報処理部）
図２は、図１に示す編集情報処理部の詳細な構成例を示す。
【００２１】
図２に示すように、前記編集情報処理部の詳細構成は、ユーザインタフェース１０３との情報交換を担当するデータ接近ＡＰＩ（ＡＰＰＬＩＣＡＴＩＯＮ  ＰＲＯＧＲＡＭ  ＩＮＴＥＲＦＡＣＥ）２０１、コンテンツ編集／著作のために外部から伝えられる編集情報を内部資料構造に合うように変換して内部資料で格納する客体編集情報処理器２０２、客体基盤対話形マルチメディアコンテンツの編集／著作情報を格納する客体基盤内部資料構造２０３及び編集／著作結果に対する格納装置への入／出力１０６、１０７と内部資料構造及び入／出力ファイルの形式変換を行なうファイル入／出力処理器２０４を含む。
【００２２】
ここで、前記データ接近ＡＰＩ２０１は、外部から内部資料構造への接近をデータ接近ＡＰＩを介してのみ可能となるように制限し、前記客体基盤内部資料構造２０３は、格納装置に格納されたコンテンツを読み出して内部資料構造で格納し、現在のコンテンツを編集／著作するために外部から入力される編集／著作情報を内部資料構造に格納する。この場合、コンテンツの編集／著作を行なうことにおいてユーザに応じて自分が意図するところを高水準で著作し、低水準の処理は編集／著作道具が行なうことを所望し得る。それに対し、自分が意図するところを高水準で著作することを所望するユーザが、またはコンテンツの詳細な部分まで、例えば、ビデオ編集においてフレーム単位まで編集しようとするなどの専門家水準の処理までユーザが直接編集することを所望するユーザがあり得る。
【００２３】
したがって、前記客体基盤内部資料構造２０３は、使用目的に応じて客体基盤対話形マルチメディアコンテンツ著作に対する専門的な知識のない一般人のための低水準の著作を支援する内部資料構造を有するか、または専門家のための高水準の著作を支援する内部資料構造を有するか、または高水準の著作を支援する内部資料構造及び低水準の著作を支援する内部資料構造の全部を有し得る。
【００２４】
ここで、高水準の著作を支援する内部資料構造は、ＭＰＥＧ−４システムのＸＭＴ（ＥＸＴＥＮＳＩＢＬＥ  ＭＰＥＧ−４  ＴＥＸＴＵＡＬ  ＦＯＲＭＡＴ；ＩＳＯ／ＩＥＣ  １４４９６−１  ＡＭＤ３）のＯ−プロファイル（ＰＲＯＦＩＬＥ）を支援する内部資料構造を一つの例として、低水準の著作を支援する内部資料構造は、ＭＰＥＧ−４システムＸＭＴのＡ−プロファイル（ＰＲＯＦＩＬＥ）を支援する内部資料構造を一つの例とする。
【００２５】
前記ファイル入／出力処理器２０４は、格納装置に格納されている客体基盤対話形マルチメディアコンテンツを読み出して客体基盤内部資料構造２０３に格納するファイル解析モジュール２０５と客体基盤内部資料構造２０３に格納されている客体基盤対話形マルチメディアコンテンツの編集／著作結果を格納装置に格納するファイル生成モジュール２０６を含む。
【００２６】
そして、前記ファイル入／出力処理器２０４は、内部資料構造及び入／出力形式を変換するための形式変換モジュールをさらに含む。
【００２７】
ここで、編集／著作された結果物である対話形マルチメディアコンテンツは、格納装置に格納される時、著作者の意図がよく表れることができ、再編集が容易となるようにするために、人が分かりやすくテキスト形式に格納されることもできる。また、格納されるデータ量を減らし、コンテンツの最終ユーザに配布が容易であり、ストリーミングが可能となるようにするために、バイナリ形式で格納されることもできる。したがって、前記ファイル入／出力処理器２０４は、テキストファイル形式とバイナリファイル形式を全部支援するものが好ましい。
【００２８】
前記ファイル解析モジュール２０５は、格納装置にテキスト形式で格納されているコンテンツを読み出して客体基盤内部資料構造２０３に格納する機能、または格納装置にバイナリ形式で格納されているコンテンツを読み出して内部資料構造２０３に格納する機能、またはテキスト形式に格納されているコンテンツ及びバイナリ形式に格納されているコンテンツ全部を読み出して客体基盤内部資料構造２０３に格納する機能を行い、必要に応じて格納装置に格納されているコンテンツを読み出した後、これを解析し、論理的エラー及び意味的エラーを検査する機能を有することができる。
【００２９】
そして、前記ファイル生成モジュール２０６は、客体基盤内部資料構造２０３に格納されているコンテンツを格納装置にテキスト形式に格納するか、格納装置にバイナリ形式に格納する機能、またはテキスト形式及びバイナリ形式に格納する機能を行う。前記形式変換モジュールは、編集／著作道具が高水準及び低水準の編集を全部提供する場合には、高水準の著作結果を低水準の著作結果に変換し、編集／著作されたコンテンツを編集／著作道具で支援しない高水準のファイル形式に変換する。
【００３０】
（客体編集情報処理器）
図３は、図２に示す客体編集情報処理器の詳細な構成例を示す。
【００３１】
すなわち、客体編集情報処理器２０２は、外部から伝えられる編集情報が適切であるかを検査する機能と、編集情報を内部資料構造に格納するために、各メディア客体に対する内部資料構造を生成、削除、変更する機能及び内部資料構造に格納されている情報を外部で参照できるように変換する機能を行う。
【００３２】
図３に示すように、その構成は各メディア客体の時間的配置に対する編集情報を処理するための時間配置編集情報処理モジュール３０１、各メディア客体の空間的配置に対する編集情報を処理するための空間配置編集情報処理モジュール３０２、ユーザ対話性に対する編集情報を処理するためのユーザ対話性編集情報処理モジュール３０３及び各メディア客体の形状などの各客体を特徴付けることができる属性に対する編集情報を処理するための客体別属性及び論理構造編集情報処理モジュール３０４を含む。
【００３３】
そして、前記客体編集情報処理器２０２は、メディア客体の管理及び検索するための情報が適切であるかを検査し、これを内部資料構造に格納及び前記内部資料構造に格納された客体技術情報を外部で参照できるように変換するための客体技術情報処理モジュールをさらに含んで、前記客体技術情報処理モジュールは、ＭＰＥＧ−７基盤の客体技術を使用する。
【００３４】
前記時間配置編集情報処理モジュール３０１は、編集／著作結果物である客体基盤対話形マルチメディアコンテンツがディスプレーされる時、コンテンツ内部に存在するメディア客体の各々がディスプレーを開始する時間と終了する時間などの時間配置情報を編集するために、外部から入る時間配置編集情報が適切であるかを検査し、これを内部資料で格納及び内部資料構造に格納されている時間配置編集情報を外部で参照できるように変換する。
【００３５】
前記空間配置編集情報処理モジュール３０２は、コンテンツ内部に存在するメディア客体の各々の空間的な位置を決定するために外部から入る空間配置編集情報が適切であるかを検査し、これを内部資料構造に格納及び内部資料構造に格納されている空間配置編集情報を外部で参照できるように変換する機能を行う。
【００３６】
前記ユーザ対話性編集情報処理モジュール３０３は、編集／著作結果物である客体基盤対話形マルチメディアコンテンツがディスプレーされる時、各メディア客体に対してユーザのマウスクリック、マウスタッチ、キーボード入力などの形態で伝達されるユーザの要求に対する入力に応じてユーザが所望する情報を提供するためのユーザ対話性を編集するために、外部から入るユーザ対話性編集情報が適切であるかを検査し、これを内部資料に格納及び内部資料構造に格納されているユーザ対話性情報を外部で参照できるように変換する機能を行う。
【００３７】
前記客体別属性及び論理構造編集情報処理モジュール３０４は、各メディア客体の形状を決定する属性及び各メディア客体間の従属関係、グループ化情報などの論理的な構造を編集するために、外部から伝達される編集情報が適切であるかを検査し、これを内部資料構造に格納及び内部資料構造に格納されている情報を外部で参照できるように変換する機能を行う。
【００３８】
（メディア符号化／復号化部）
図４は、図１に示すメディア符号化／復号化部の詳細な構成例を示す。
【００３９】
図４に示すように、前／後処理器４０１は、多様なオーディオ／ビデオデータの形式を編集可能な形式に変換する機能と、ビデオ及び停止画像内に存在する各物体を自動または半自動に分割する機能を行う。
【００４０】
前記メディア符号化器４０２は、ビデオ、オーディオ及び停止画像などのメディアデータをＭＰＥＧ、ＪＰＥＧなどのような標準化された符号化技術または標準化されてない符号化技術を利用してメディアストリームに符号化する機能を行う。
【００４１】
前記メディア復号化器４０３は、標準化されたメディア符号化技術または標準化されてないメディア符号化技術で符号化されたメディアストリームをメディアデータに復号化する機能を行う。この場合、メディア符号化器４０２及びメディア復号化器４０３は、任意の形状を有するビデオ及び停止画像客体を符号化及び復号化できるべきであり、システムにメディア処理のための専用ハードウェアがある場合には、メディア符号化／復号化機能をハードウェア加速器上でリアルタイムまたはリアルタイム以上の高速に行なう機能を担当するメディア処理加速器を含むことができる。
【００４２】
また、前記メディア符号化器４０２は、ビデオデータをビデオ符号化標準技術に従うビデオストリームまたは標準化されてないビデオストリームに符号化するビデオ符号化器及びオーディオデータをオーディオ符号化標準技術に従うオーディオストリームまたは標準化されてないオーディオストリームに符号化するオーディオ符号化器などを各々一つ以上ずつ含んでいる。そして、前記メディア復号化器４０３は、ビデオ符号化標準技術に従うビデオストリームまたは標準化されてないビデオストリームをビデオデータに復号化するビデオ復号化器及びオーディオ符号化標準技術に従うオーディオストリームまたは標準化されてないオーディオストリームをオーディオデータに復号化するオーディオ復号化器などを各々一つ以上ずつ含む。
【００４３】
ここで、前記ビデオ符号化器及び復号化器は、任意の形状を有するビデオ客体の符号化及び復号化が可能なＭＰＥＧ−４ビデオ標準（ＩＳＯ／ＩＥＣ  １４４９６−２）を満足するビデオ符号化／復号化を一つの例とし、前記オーディオ符号化器及び復号化器は、ＭＰＥＧ−４オーディオ標準（ＩＳＯ／ＩＥＣ  １４４９６−３）を満足するオーディオ符号化／復号化を一つの例とする。
【００４４】
（対話形マルチメディアコンテンツ著作処理）
図５は、本発明に係る客体基盤の対話形マルチメディアコンテンツ著作方法の１例を示すフローチャートである。
【００４５】
図５に示すように、まずユーザが新しいコンテンツを著作するのか、既存に著作されているコンテンツを著作するのか、すなわち、現在のコンテンツが新しいコンテンツであるのかの如何を判断する（ステップ５０１）。
【００４６】
前記過程５０１での判断結果、新しいコンテンツである場合には、新しいコンテンツを著作するための著作空間、すなわち、新しい内部資料構造とユーザインタフェース上での新しい著作空間を確保した後（ステップ５０２）、著作空間に対する初期化、すなわち著作空間の確保のために必要な種々のパラメーターをユーザから入力されるか、予め設定されたデフォルト（ＤＥＦＡＵＬＴ）値に設定し（ステップ５０３）、コンテンツ著作及び編集に必要なメディア客体を挿入して必要のないコンテンツを削除する過程（ステップ５０５）に進行する。
【００４７】
前記ステップ５０１での判断結果、新しいコンテンツではない場合、すなわち、既に著作されているコンテンツを開く場合には、バイナリファイル形態またはテキストファイル形態に格納されているコンテンツを読み出し（ステップ５０４）、コンテンツ著作及び編集に必要なメディア客体を挿入し必要のないコンテンツを削除する（ステップ５０５）に進行する。
【００４８】
したがって、前記過程５０５でコンテンツに必要な客体の挿入及び削除を行なった後に、コンテンツに存在する各客体に対する空間配置情報、時間配置情報及び各メディア客体を特定する属性などを編集し（ステップ５０６）、客体単位のユーザ対話性を編集する（ステップ５０７）。
【００４９】
ここで、前記（ステップ５０５、ステップ５０６、ステップ５０７）は、ユーザの選択により編集手順の順位は変更可能であり、前記過程はユーザにより繰り返し行なうことが可能である。
【００５０】
したがって、前記のような編集過程を行なう途中に編集されたコンテンツの格納であるかを判断するが（ステップ５０８）、前記ステップ５０８で判断した結果、コンテンツの格納ではない場合には、編集過程を続けて行なうのかを判断するステップ５１２に進行し、コンテンツの格納である場合には、この時のコンテンツを初めて格納するかを判断する（ステップ５０９）。
【００５１】
前記ステップ５０９での判断結果、コンテンツの初めての格納である場合には、コンテンツの格納種類、すなわち、バイナリまたはテキストに選択した後（ステップ５１０）、コンテンツを格納し、コンテンツの初めての格納ではない場合には、既に格納された形態に格納する（ステップ５１１）。
【００５２】
ここで、前記ステップ５０５からステップ５１１までの編集過程は、前記編集の続き如何を判断するステップ５１２からコンテンツ編集が終了する時まで繰り返し進行され、前記のような過程による編集及び著作が完了すれば、編集システムは終了される。
【００５３】
上述したような本発明の方法は、プログラムで具現されてコンピュータで読み出すことができる記録媒体（ＣＤローム、ラム、ロム、フロッピー（登録商標）ディスク、ハードディスク、光磁気ディスク等）に格納されることができる。
【００５４】
なお、本発明は、本例に限られるものではない。本発明の趣旨から逸脱しない範囲内で多様に変更実施することが可能である。
【００５５】
【発明の効果】
以上説明したように、本発明によれば、統合データ放送、対話形放送及びインターネット放送等で必要な客体基盤の対話形マルチメディアコンテンツの著作に必要な客体単位の対話的な操作が可能なＡＶコンテンツ著作装置及びその方法を提供することによって、以下のような効果が得られる。
【００５６】
第１に、各メディア客体単位でユーザの要求に応じて所望する情報を提供できるようにするユーザ対話性編集が可能となる。
【００５７】
第２に、客体基盤対話形マルチメディアコンテンツを著作することにおいて既存の編集／著作道具が支援しないビデオ、オーディオ及び停止画像内に存在する物体を一つの客体と見なして編集／著作することが可能となる。
【００５８】
第３に、任意の形状を有するビデオ及び停止画像客体をコンテンツ編集／著作に使用することが可能であり、第４に、客体基盤のマルチメディアコンテンツ編集／著作技術の発展を誘導し、多様な形態のディジタル放送サービスの拡散を誘導できる。
【図面の簡単な説明】
【図１】  本発明の第１の実施の形態である、客体基盤の対話形マルチメディアコンテンツ著作装置の１例を示すブロック図である。
【図２】  図１に示す編集情報処理部の詳細な構成例を示すブロック図である。
【図３】図２に示す客体編集情報処理器の詳細な構成例を示すブロック図である。
【図４】図１に示すメディア符号化／復号化部の詳細な構成例を示すブロック図である。
【図５】本発明に係る客体基盤の対話形マルチメディアコンテンツ著作方法の１例を示すフローチャートである。
【符号の説明】
１０１      入力装置
１０２      出力装置
１０３      ユーザインタフェース部
１０４      編集情報処理部
１０５      メディア符号化／復号化部
【図１】
0003895974.tif 000002
【図２】
0003895974.tif 000003
【図３】
0003895974.tif 000004
【図４】
0003895974.tif 000005
【図５】
0003895974.tif 000006