(57)【特許請求の範囲】
【請求項１】
マルチメディア・データを記録する方法において、
メディアデータから同種情報を含んでいる場面をそれぞれ検索するための少なくとも１つの検索対象項目が入力される段階と、
前記メディアデータを保存媒体に記録すると同時に、前記検索対象項目と現在場面とを対応させるために前記検索対象項目の各映像アイコンを含むグラフィックユーザインターフェースを介して所定の映像アイコンを選択するユーザ要請に基づき、前記選択された映像アイコンが指す検索対象項目に対応する少なくとも１つの場面を選択する段階と、
前記メディアデータを前記保存媒体に記録すると同時に、前記検索対象項目を含むメタデータを生成する段階と、
前記メディアデータを前記保存媒体に記録すると同時に、前記メタデータが、前記選択された場面のインデックスまたは再生時点のうち、少なくとも１つの場面情報及び前記検索対象項目と前記場面情報との間の連繋情報を含むように、前記メタデータを更新する段階と、
前記メタデータ及び前記メディアデータを含む前記マルチメディア・データを生成する段階とを含み、
前記ユーザインターフェースに表示される前記選択された映像アイコンは、前記選択された少なくとも一つの場面を用いて更新されることを特徴とするマルチメディア・データの記録方法。
【請求項２】
前記検索対象項目が入力される段階は、前記検索対象項目がデータベースまたは既生成のメタデータのうち、少なくともいずれか一つから入力されることを特徴とする請求項１に記載のマルチメディア・データの記録方法。
【請求項３】
前記メタデータを生成する段階は、前記場面情報が記録されたメタデータを、前記マルチメディア・データに合うフォーマットに変換する段階をさらに含むことを特徴とする請求項１に記載のマルチメディア・データの記録方法。
【請求項４】
前記記録する段階は、前記メディアデータを記録すると同時に、前記メタデータを記録することを特徴とする請求項１に記載のマルチメディア・データの記録方法。
【請求項５】
前記マルチメディア・データを生成する段階は、前記メディアデータをいずれも記録した後、前記メタデータを記録することを特徴とする請求項１に記載のマルチメディア・データの記録方法。
【請求項６】
前記検索対象項目が入力される段階は、前記それぞれの検索対象項目を表現できる少なくとも１つの代表特徴情報が入力される段階をさらに含み、
前記場面を選択する段階は、
前記入力されるメディアデータの現在場面を分析し、前記代表特徴情報と比較される対比情報を抽出する段階と、
前記抽出された対比情報及び前記代表特徴情報との類似度を測定する段階と、
前記類似度が大きければ、前記現在場面を前記検索対象項目に対応する場面として決定する段階とを含むことを特徴とする請求項１に記載のマルチメディア・データの記録方法。
【請求項７】
前記マルチメディア・データの記録方法は、
前記メタデータから抽出された前記場面情報及び連繋情報を利用し、前記マルチメディア・データの中から前記選択された検索対象項目に対応する場面を検索して再生する段階をさらに含むことを特徴とする請求項１に記載のマルチメディア・データの記録方法。
【請求項８】
前記再生する段階は、
前記メタデータまたはデータベースのうち、少なくともいずれか一つから、前記検索対象項目の細部情報または代表特徴情報を抽出して再生する段階をさらに含むことを特徴とする請求項７に記載のマルチメディア・データの記録方法。
【請求項９】
マルチメディア・データを記録する装置において、
メディアデータから同種情報を含んでいる場面をそれぞれ検索するための少なくとも１つの検索対象項目が入力される検索対象項目入力部と、
前記メディアデータを保存媒体に記録すると同時に、前記検索対象項目と現在場面とを対応させるために前記検索対象項目の各映像アイコンを含むグラフィックユーザインターフェースを介して所定の映像アイコンを選択するユーザ要請に基づき、前記選択された映像アイコンが指す検索対象項目に対応する少なくとも１つの場面を選択する場面選択部と、
前記メディアデータを前記保存媒体に記録すると同時に、前記検索対象項目を含むメタデータを生成し、前記メタデータが、前記選択された場面のインデックスまたは再生時点のうち、少なくとも１つの場面情報及び前記検索対象項目と前記場面情報との間の連繋情報をさらに含むように前記メタデータを更新するメタデータ生成部と、
記メタデータ及び前記メディアデータを含む前記マルチメディア・データを生成する記録部とを含み、
前記ユーザインターフェースに表示される前記選択された映像アイコンは、前記選択された少なくとも一つの場面を用いて更新されることを特徴とするマルチメディア・データ記録装置。
【請求項１０】
前記検索対象項目入力部は、前記検索対象項目がデータベースまたは既生成のメタデータのうち、少なくともいずれか一つから入力されることを特徴とする請求項９に記載のマルチメディア・データ記録装置。
【請求項１１】
前記メタデータ生成部は、前記場面情報が記録されたメタデータを、前記マルチメディア・データに合うフォーマットに変換するフォーマット変換部をさらに含むことを特徴とする請求項９に記載のマルチメディア・データ記録装置。
【請求項１２】
前記記録部は、前記メディアデータを記録すると同時に、前記メタデータを記録することを特徴とする請求項９に記載のマルチメディア・データ記録装置。
【請求項１３】
前記記録部は、前記メディアデータをいずれも記録した後、前記メタデータを記録することを特徴とする請求項９に記載のマルチメディア・データ記録装置。
【請求項１４】
前記検索対象項目入力部は、前記それぞれの検索対象項目を表現できる少なくとも１つの代表特徴情報がさらに入力され、
前記場面選択部は、
前記入力されるメディアデータの現在場面を分析し、前記代表特徴情報と比較される対比情報を抽出する対比情報抽出部と、
前記抽出された対比情報及び前記代表特徴情報との類似度を測定する類似度測定部と、
前記類似度が大きければ、前記現在場面を前記検索対象項目に対応する場面として決定する場面決定部とをさらに含むことを特徴とする請求項９に記載のマルチメディア・データ記録装置。
【請求項１５】
前記マルチメディア・データ記録装置は、
前記メタデータから抽出された前記場面情報及び連繋情報を利用し、前記マルチメディア・データの中から前記選択された検索対象項目に対応する場面を検索して再生する場面再生部をさらに含むことを特徴とする請求項９に記載のマルチメディア・データ記録装置。
【請求項１６】
前記マルチメディア・データ記録装置は、
前記メタデータまたはデータベースのうち、少なくともいずれか一つから、前記検索対象項目の細部情報または代表特徴情報を抽出して再生する情報再生部をさらに含むことを特徴とする請求項１５に記載のマルチメディア・データ記録装置。
【請求項１７】
請求項１ないし８のうちいずれか一項に記載の方法をコンピュータに実行させるプログラムが記録されたコンピュータで読み取り可能な記録媒体。
【請求項１８】
請求項１ないし８のうちいずれか一項に記載の方法をコンピュータに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、マルチメディア・データの記録方法及び装置に係り、さらに詳細には、多様な再生機能を具現できるマルチメディア・データを記録する方法及び装置に関する。
【背景技術】
【０００２】
最近、商業的なコンテンツ提供者（contents  provider）だけではなく、一般的な個人ユーザも、デジタル・カムコーダまたはデジタルカメラのようなデジタル映像撮像装置を利用して、多様なマルチメディア・コンテンツを制作する。特に、ＵＣＣ（user  created  content）が個人用ブログだけではなく、商業的にも利用されており、日々表現する情報の範囲が広くなっている。
【０００３】
ＵＣＣのユーザ層が広くなって、制作レベルが高まるにつれ、ＵＣＣを撮影するためのマルチメディア撮影装置及びマルチメディア・データ記録装置は、さらに多くの機能を具現できることを期待されている。
【０００４】
ＤＶＤ（digital  versatile  disc）のように、コンテンツ提供者から提供される保存型メディア（packaged  media）は、マルチメディア再生機を介して多様な方法で再生され、メディアファイル内にメタデータを有している。既存のメディアファイルは、単純に再生できるデータだけが記録されており、付加的な機能のための細部検索対象項目のためのメタデータが記録されていない。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明のマルチメディア・データの記録方法は、メタデータを新たに生成したり、既存のメタデータを更新することによって、多様な再生機能を具現できるマルチメディア・データを記録する方法を提案する。
【０００６】
また、多様な再生機能を具現するために、あらかじめ登録された検索対象項目を介して、自動的に検索対象項目と関連した場面についての情報を収集してメタデータに記録する方法を提案する。
【０００７】
また、ユーザの決定によって、検索対象項目と関連した場面情報を収集してメタデータに記録する方法を提案する。
【課題を解決するための手段】
【０００８】
前記解決しようとする課題を達成するために、本発明の一実施形態によるマルチメディア・データの記録方法は、メディアデータから同種情報を含んでいる場面をそれぞれ検索するための少なくとも１つの検索対象項目を入力される段階、メディアデータの入力途中で、それぞれの検索対象項目に対応する少なくとも１つの場面を選択する段階、選択された場面のインデックスまたは再生時点のうち、少なくとも１つの場面情報を含むメタデータを生成する段階、及びメタデータをヘッダ領域に記録してメディアデータをペイロード領域に記録する段階を含む。
【０００９】
一実施形態の検索対象項目の入力段階は、検索対象項目がデータベースまたは既生成のメタデータから入力される。
【００１０】
一実施形態のメタデータ生成段階は、場面情報が記録されたメタデータをマルチメディア・データに合うフォーマットに変換する段階をさらに含む。
【００１１】
一実施形態のメタデータ生成段階は、検索対象項目を含むメタデータを生成する段階、及び検索対象項目が含まれたメタデータが場面情報を含むように更新する段階を含む。
【００１２】
一実施形態のメタデータ生成段階は、選択された場面の場面情報、及び検索対象項目との連繋情報を含むメタデータを生成する。
【００１３】
一実施形態の記録段階は、メディアデータをペイロード領域に記録する同時に、メタデータをヘッダ領域に記録する。
【００１４】
他の実施形態の記録段階は、メディアデータをペイロード領域にいずれも記録した後、メタデータをヘッダ領域に記録する。
【００１５】
一実施形態の検索対象項目の入力段階は、それぞれの検索対象項目を表現できる少なくとも１つの代表特徴情報を入力される段階をさらに含み、場面選択段階は、入力されるメディアデータの現在場面を分析し、代表特徴情報と比較される対比情報を抽出する段階、抽出された対比情報と代表特徴情報との類似度を測定する段階、及び類似度が大きければ、現在場面を検索対象項目に対応する場面として決定する段階をさらに含む。
【００１６】
一実施形態の場面選択段階は、検索対象項目及び現在場面を対応させるためのユーザインターフェースを介して入力されたユーザ要請によって、入力されている現在場面を、検索対象項目のうち、いずれか一つに対応させることによって、メディアデータの場面を選択する。
【００１７】
一実施形態のユーザインターフェースは、検索対象項目が選択されるためにそれぞれの検索対象項目を示す映像アイコンを含み、映像アイコンは、現在場面を利用して新しい映像アイコンに更新される。
【００１８】
前記解決しようとする課題を達成するために、本発明の一実施形態によるマルチメディア・データ再生方法は、検索する場面の検索対象項目が選択される段階、検索対象項目に係わるメタデータを決定する段階、及び決定されたメタデータから抽出された場面情報を利用し、マルチメディア・データを再生する段階を含む。
【００１９】
一実施形態は、メタデータまたはデータベースのうち、少なくともいずれか一つから、検索対象項目の細部情報及び代表特徴情報を抽出して再生する段階をさらに含む。
【００２０】
前記解決しようとする課題を達成するために、本発明の一実施形態によるマルチメディア・データ記録装置は、メディアデータから同種情報を含んでいる場面をそれぞれ検索するための少なくとも１つの検索対象項目を入力される検索対象項目入力部、メディアデータの入力途中で、それぞれの検索対象項目に対応する少なくとも１つの場面を選択する場面選択部、選択された場面のインデックスまたは再生時点のうち、少なくとも１つの場面情報を含むメタデータを生成するメタデータ生成部、及びメタデータをヘッダ領域に記録し、メディアデータをペイロードに領域に記録する記録部を含む。
【００２１】
本発明は、本発明の一実施形態によるマルチメディア・データの記録方法を具現するためのプログラムが記録されたコンピュータで読み取り可能な記録媒体を含む。
【００２２】
また本発明は、本発明の一実施形態によるマルチメディア・データ再生方法を具現するためのプログラムが記録されたコンピュータで読み取り可能な記録媒体を含む。
【発明の効果】
【００２３】
従って、本発明のマルチメディア・データの記録方法及び装置は、検索対象項目に関連した場面情報を記録したメタデータを新たに生成したり、既存のメタデータを更新することによって、ユーザが所望の検索対象項目を再生したり、検索対象項目に関する場面を再生する効果がある。
【００２４】
また、本発明を介して記録されたマルチメディア・データによって、マルチメディア再生機が、マルチメディア・コンテンツの再生及び検索のような多様な機能を容易に具現できる。
【００２５】
一般ユーザが作ったマルチメディア・コンテンツにも、自動的に新しいメタデータの挿入及び既存のメタデータの更新が可能なので、ユーザが容易にマルチメディア・コンテンツを制作できる。
【００２６】
本発明についてその望ましい実施形態を中心に述べるが、本発明が属する技術分野で当業者は、本発明が本発明の本質的な特性から外れない範囲で変形された形態で具現されうることを理解することができるであろう。従って、開示された実施形態は、限定的な観点ではなくして、説明的な観点から考慮されねばならない。本発明の範囲は、前述の説明ではなくして特許請求の範囲に示されており、それと同等な範囲内にあるあらゆる差異点は、本発明に含まれたものであると解釈されねばならない。
【図面の簡単な説明】
【００２７】
【図１Ａ】本発明の一実施形態によるマルチメディア・データ記録装置のブロック図である。
【図１Ｂ】本発明の一実施形態によるマルチメディア・データ記録装置の場面選択部のブロック図である。
【図２】本発明の一実施形態によるマルチメディア・データ記録装置の概要を図示する図である。
【図３】本発明の一実施形態によるマルチメディア・データ記録装置のメタデータ及びマルチメディア・データの生成または記録方法について説明する図である。
【図４Ａ】本発明の一実施形態によって更新されるメタデータを図示する図である。
【図４Ｂ】本発明の他の実施形態によって生成されるメタデータを図示する図である。
【図５】本発明の一実施形態によってマルチメディア・データが生成される方法に係わるフローチャートである。
【図６】本発明の他の実施形態によってマルチメディア・データが生成される方法に係わるフローチャートである。
【図７】本発明の一実施形態によって人物情報を検索する方法を図示する図である。
【図８】本発明の一実施形態によるマルチメディア・データ記録装置のユーザインターフェースによる場合について説明する図である。
【図９】本発明の一実施形態によるマルチメディア・データの記録方法のフローチャートである。
【図１０】本発明の一実施形態によるマルチメディア・データ再生装置のブロック図である。
【図１１】本発明の一実施形態によるマルチメディア・データ再生方法のフローチャートである。
【発明を実施するための形態】
【００２８】
以下、本発明の一実施形態によるマルチメディア・データの記録方法及び装置について説明する。
【００２９】
図１Ａは、本発明の一実施形態によるマルチメディア・データ記録装置のブロック図を図示している。
【００３０】
本発明の一実施形態によるマルチメディア・データ記録装置１００は、検索対象項目入力部１１０、場面選択部１２０、メタデータ生成部１３０及び記録部１４０を含む。
【００３１】
検索対象項目入力部１１０は、ユーザの入力によって、検索対象になるメディアデータの場面を分類するための少なくとも１つの検索対象項目を入力され、検索対象項目を場面選択部１２０に出力する。
【００３２】
検索対象項目入力部１１０は、検索対象項目を、データベースまたは既生成のメタデータのうち、少なくともいずれか一つから入力されうる。また、検索対象項目入力部１１０は、ユーザの入力によって、それぞれの検索対象項目を表現できる少なくとも１つの代表特徴情報をさらに入力されうる。
【００３３】
検索対象項目入力部１１０は、以下の図２を参照して詳述する。
【００３４】
場面選択部１２０は、メディアデータと、検索対象項目入力部１１０からの検索対象項目とを入力され、メディアデータの入力途中で、メディアデータの場面のうち、登録されたそれぞれの検索対象項目に対応する少なくとも１つの場面を選択し、メタデータ生成部１３０に出力する。
【００３５】
本発明の一実施形態で、メディアデータは、撮影または録画されることによって入力されうる。
【００３６】
図１Ｂによれば、場面選択部１２０は、入力されるメディアデータの現在場面を分析し、代表特徴情報と比較される対比情報を抽出する対比情報抽出部１２１、抽出された対比情報と代表特徴情報との類似度を測定する類似度測定部１２２、及び類似度が大きければ、現在場面を検索対象項目に対応する場面として選択する場面決定部１２３を含む。
【００３７】
メタデータ生成部１３０は、場面選択部１２０から入力された選択された場面のインデックスまたは再生時点のうち、少なくとも１つである場面情報を含むメタデータを生成し、記録部１４０に出力する。
【００３８】
メタデータ生成部１３０の一実施形態は、図面には図示されていないが、場面情報が記録されたメタデータをマルチメディア・データに合うフォーマットに変換するフォーマット変換部をさらに含む。
【００３９】
メタデータ生成部１３０の一実施形態は、検索対象項目を含むメタデータに生成し、検索対象項目が含まれたメタデータが場面情報を含むように更新する。
【００４０】
また、メタデータ生成部１３０の他の実施形態は、選択された場面の場面情報、及び検索対象項目との連繋情報を含むメタデータを生成する。
【００４１】
場面選択部１２０、メタデータ生成部１３０は、以下の図３を参照しつつ詳述する。
【００４２】
記録部１４０は、メタデータ生成部１３０からメタデータを入力されてメディアデータを入力され、メタデータをヘッダ領域に記録して、メディアデータをペイロード領域に記録することによって、マルチメディア・データを生成する。
【００４３】
記録部１４０の一実施形態は、メディアデータをペイロード領域に記録する同時に、メタデータをヘッダ領域に記録する。
【００４４】
記録部１４０の他の実施形態は、メディアデータをペイロード領域にいずれも記録した後、メタデータをヘッダ領域に記録する。
【００４５】
記録部１４０は以下の図３、図４Ａ、図４Ｂ及び図６を参照しつつ詳述する。
【００４６】
図面には図示されていないが、マルチメディア・データ記録装置１００は、ユーザ要請によって、前記検索対象項目及び前記現在場面を対応させるためのユーザインターフェースをさらに含む。マルチメディア・データ記録装置１００が、ユーザインターフェースを有する場合、場面選択部１２０の一実施形態は、入力されている現在場面を、ユーザがユーザインターフェースを利用して検索対象項目のうち、いずれか一つに対応させることによって、メディアデータの場面を選択する。
【００４７】
また、本発明の一実施形態は、現在記録されているコンテンツが、リアルタイムで再生されたり、所望のマルチメディア・データから検索対象項目を検索して再生できる再生部を含むことができる。
【００４８】
図２は、本発明の一実施形態によるマルチメディア・データ記録装置１００の概要を図示している。図２では、マルチメディア・データ記録装置１００の一実施形態として、デジタル・カムコーダ２００を利用し、検索対象項目入力部１１０を中心に、マルチメディア・データ記録装置１００の機能について詳述する。
【００４９】
デジタル・カムコーダ２００は、獲得された画像及び音響情報を含むメディアデータを、マルチメディア・データに記録することによって、マルチメディア・データを生成する。
【００５０】
検索対象項目入力部１１０の一実施形態は、メディアデータが入力される前、ユーザがあらかじめ検索対象項目をマルチメディア・データ記録装置１００の臨時データベースに保存しておく。一実施形態は、メディアデータを登場人物によって処理するために、ユーザが、人物情報２１０を設定してあらかじめ入力され、デジタル・カムコーダ２００のデータベースに保存しておく。人物情報２１０は、登場人物「父」、「母」、「末っ子」、「長女」を含み、それぞれの人物は、氏名、生年月日、結婚記念日、兄弟関係、職業のような基本細部情報が設定される。
【００５１】
検索対象項目入力部１１０の一実施形態で、基本細部情報は更新が可能であり、細部情報のヒストリ（history）情報が保存されうる。また、基本細部情報は、ＸＭＬ（extensible  markup  language）形態で保存されうる。
【００５２】
検索対象項目入力部１１０の一実施形態は、それぞれの検索対象項目を表現できる少なくとも１つの代表特徴情報をさらに入力される。例えば、人物情報においては、当該人物の声、写真などが代表特徴情報として登録され、類似度測定時に使われる。
【００５３】
デジタル・カムコーダ２００が利用する検索対象項目がすでに保存されているデータベースに保存されていたり、現在メタデータにすでに保存されている場合には、データベースまたはメタデータから、検索対象項目を入力されうる。
【００５４】
デジタル・カムコーダ２００は、人物情報２１０を利用して生成された場面情報をメタデータ２２０に記録し、獲得されたメディアデータ及びメタデータ２２０を、マルチメディア・データ２３０に記録する。
【００５５】
再生機器２４０は、マルチメディア・データ２３０を再生する。再生機器２４０は、マルチメディア・データ記録装置２００それ自体でもあり、他の再生機器２４０が、マルチメディア・データ記録装置２００によって生成されたマルチメディア・データ２３０を再生することもできる。
【００５６】
図３は、本発明の一実施形態によるマルチメディア・データ記録装置のメタデータ及びマルチメディア・データの生成または記録方法について説明している。図３を参考にして、場面選択部１２０、メタデータ生成部１３０及び記録部１４０について詳述する。場面選択部１２０の対比情報抽出部１２１、類似度測定部１２２及び場面決定部１２３の機能も共に説明する。
【００５７】
あらかじめ検索対象項目入力部１１０が、ユーザによって入力された人物情報を入力され（段階３１０）、マルチメディア・データ記録装置は１００は、臨時保存部またはデータベースに人物情報を保存しておくことができる。
【００５８】
マルチメディア・データ記録装置１００にメディアデータが入力されれば（段階３１０）、メタデータ生成部１３０は、臨時保存部またはデータベースから人物情報を入力され、メディアデータから人物情報に対応する場面情報を抽出し、検索対象項目に対する場面情報を含むメタデータを生成する（段階３３０）。
【００５９】
場面情報を含むメタデータを生成する過程（段階３３０）について順に述べれば、検索対象になる人物が当該場面に含まれているか否かを分析し（段階３３２）、メタデータ・フォーマットを変換し（段階３３４）、メタデータを生成したり更新する（段階３３６）。
【００６０】
さらに詳細に述べれば、場面分析過程（段階３３２）で、場面選択部１２０の場面情報抽出部１２１は、入力されるメディアデータの現在場面を分析し、前記検索対象項目の関連情報を抽出する。また、場面選択部１２０の類似度測定部１２２は、抽出された関連情報及び前記メタデータの検索対象項目の代表特徴情報との類似度を測定する。場面選択部１２０の場面決定部１２３は、類似度が大きければ、現在場面を検索対象項目に対応する場面として選択する。
【００６１】
場面選択部１２０の一実施形態は、検索対象項目についての登録された代表特徴情報として人物の写真を具備し、入力されたメディアデータが圧縮された映像である場合、顔認識技法などを介して、メディアデータのＩフレーム（in frame）の登場人物と、登録された写真との類似度を測定することによって、分析及び比較する。
【００６２】
また他の実施形態は、入力されるメディアデータの特定シーケンスを指定し、当該シーケンス内の映像での人物だけを分析して類似度を測定する。
【００６３】
入力されるメディアデータが音響である場合、登録された特徴情報である人物の音声と入力された音響との類似度が測定されて判読されうる。
【００６４】
また、人物が頻繁に使用する単語が、人物情報の代表特徴情報として登録された場合、入力されたメディアデータの音響のうち、当該単語が言及されているか否か音響分析を介して分析されうる。
【００６５】
フォーマット変換段階（段階３３４）で、メタデータ生成部１３０のフォーマット変換部は、場面情報が記録されたメタデータを、マルチメディア・データに合うフォーマットに変換する。また、メタデータ生成部１３０の一実施形態は、検索対象項目に対応する場面情報を記録するためのメタデータを、マルチメディア・データフォーマットに合うように新たに生成する。メタデータ生成部１３０の一実施形態は、メタデータに当該人物が登場した場面の時点を場面情報として記録する。
【００６６】
メタデータ生成または更新過程（段階３３６）で、メタデータ生成部１３０の一実施形態は、メタデータの既存情報に場面情報を追加して記録する。メタデータ生成部１３０の他の実施形態は、既存のメタデータと別個に、場面情報を記録した新しいメタデータを生成する。
【００６７】
記録部１４０は、メタデータをヘッダ領域に記録し、かつメディアデータをペイロード領域に記録してマルチメディア・データを生成する（段階３４０）。ペイロード領域にメディアデータが記録され（段階３４２）、ヘッダ領域にメタデータ領域が記録される（段階３４４）。
【００６８】
記録部１４０の一実施形態は、メディアデータ記録（段階３４２）及びメタデータ記録（段階３４４）を同時に遂行する。すなわち、メディアデータがペイロード領域に記録されると同時に、メタデータがヘッダ領域に記録される。記録部１４０の他の実施形態は、メディアデータを記録（段階３４２）した後に、メタデータを記録（段階３４４）する。すなわち、メディアデータが、ペイロード領域にいずれも記録された後、メタデータがヘッダ領域に記録される。
【００６９】
以下、図４Ａ及び図４Ｂを参考にして、マルチメディア・データ記録装置１００によって生成されるマルチメディア・データの実施形態について説明する。
【００７０】
図４Ａは、本発明の一実施形態によって更新されるメタデータを図示する。
【００７１】
メタデータ生成部１３０は、場面選択部１２０で選択された場面の場面情報をメタデータに記録する。
【００７２】
一実施形態は、更新される前のメタデータ４０２は、検索対象項目（図面での人物情報４１２及び４１４）だけ記録されている。一実施形態は、検索対象項目４１２及び４１４だけではなく、それぞれの検索対象項目についての細部情報４２２及び４２４を含むこともできる。
【００７３】
メタデータ生成部１３０は、場面選択部１２０でそれぞれの検索対象項目４１２及び４１４について選択された場面情報４３２及び４３４を、メタデータ４０２にさらに記録し、メタデータ４０４を生成する。従って、本実施形態は、既存のメタデータを更新させる。
【００７４】
図４Ｂは、本発明の他の実施形態によって生成されるメタデータを図示する。
【００７５】
メタデータ生成部１３０の一実施形態は、既存検索対象項目（図面での人物情報）が記録されているメタデータ４５２とは別個に、それぞれの検索対象項目４６２及び４６４について選択された場面情報４８２及び４８４を記録したメタデータ４５４を新たに生成する。
【００７６】
従って、検索対象項目４６２及び４６４、及びそれぞれの検索対象項目についての細部情報４７２及び４７４を含むメタデータ４５２と別個に、それぞれの検索対象項目についての場面情報４８２及び４８４だけを検索対象項目別に分類しておいたメタデータ４５４が新たに生成されもする。この場合には、新たに生成されたメタデータ４５４が、既存のメタデータ４５２の検索対象項目４６２及び４６４との連繋情報を含むことができる。
【００７７】
図５は、本発明の一実施形態によってマルチメディア・データが生成される方法に係わるフローチャートを図示している。
【００７８】
段階５１０で、検索対象項目入力部１１０は、マルチメディア・データ記録装置１００に検索対象項目を入力する。段階５２０で、マルチメディア・データ記録装置１００は、メディアデータを入力される。
【００７９】
段階５３０で、場面分析部１２０の対比情報抽出部１２１は、段階５２０で入力されたメディアデータを分析し、検索対象項目と比較される対比情報を抽出し、類似度測定部１２２は、段階５１０で入力された検索対象項目と抽出された対比情報とを比較する。
【００８０】
段階５４０で、場面分析部１２０の場面決定部１２３は、現在場面の場面情報が新たにメタデータとして追加されるか否かを判断する。
【００８１】
段階５５０で、メタデータ生成部１３０の一実施形態は、場面情報を記録するメタデータを新たに生成する。または、メタデータ生成部１３０の変換部は、場面情報を保存するメタデータをマルチメディア・データフォーマットに変換する。
【００８２】
段階５６０で、メタデータ生成部１３０は、既存のメタデータ情報と、新たに追加されたメタデータ情報とを合成する。一実施形態は、検索対象項目についての場面情報が既存の検索対象項目が記録されたメタデータに追加する。他の実施形態は、検索対象項目についての場面情報が記録されたメタデータと別個に、場面情報だけ記録されたメタデータを生成できる。
【００８３】
段階５７０で、記録部１４０は、ペイロード領域にメディアデータを記録し、ヘッダ領域にメタデータを記録し、マルチメディア・データを生成する。
【００８４】
段階５８０で、再生部の一実施形態は、登録された検索対象項目の細部情報を再生する。再生部の他の実施形態は、メタデータに記録された検索対象項目による場面情報を検索し、所望の検索対象項目についての場面だけを再生する。
【００８５】
図６は、本発明の他の実施形態によってマルチメディア・データが生成される方法に係わるフローチャートを図示している。
【００８６】
図６を参照して、記録部１４０の動作過程について詳述する。図６で、メディアデータは、入力されつつマルチメディア・データに続けて記録されるので、メタデータがメディアデータの記録と同時に記録されるか否かが判断される。
【００８７】
段階６１０は、段階５１０と遂行動作が同一である。
【００８８】
段階６２０は、段階５４０と遂行動作は同一であり、現在場面情報をメタデータに新たに追加するならば、段階６３０に進む。現在場面情報がメタデータに追加されないならば、段階６２５が進められる。
【００８９】
段階６２５で、現在場面情報をメタデータに追加しないものであるので、メディアデータだけ保存される。
【００９０】
段階６３０で、メタデータとメディアデータとがマルチメディア・データに同時に記録されるか否かが判断される。もし２つのデータが同時に記録されるならば、段階６４０に進み、同時に記録されるものではなければ、段階６５０に進む。
【００９１】
段階６４０で、マルチメディア・データにメディアデータ及びメタデータが同時に記録される。
【００９２】
段階６６０で、メディアデータの入力が完了したか否かを判断する。すなわち、メディアデータの記録が完了したか否かを判断する。もしメディアデータの入力が完了したとすれば、段階６９０に進み、マルチメディア・データの記録が完了する。
【００９３】
メディアデータの入力が完了していないならば、段階６４０に戻って進められる。
【００９４】
段階６５０で、メディアデータは、マルチメディア・データに記録され、メタデータは、バッファに臨時保存される。
【００９５】
段階６７０で、メディアデータの入力が完了、すなわち、メディアデータの記録が完了しているか否かを判断する。
【００９６】
もしメディアデータの入力が完了したとすれば、段階６８０に進み、メディアデータの入力が完了していないならば、段階６６０に戻って進められる。
【００９７】
段階６８０で、バッファに臨時保存されていたメタデータがマルチメディア・データに別途に一度に記録された後、段階６９０に進み、マルチメディア・データの記録が完了する。
【００９８】
図７は、本発明の一実施形態によって人物情報を検索する方法を図示する。図７を参考にして、再生部の一実施形態の検索対象項目及び基本細部情報の再生機能及び検索機能について説明する。図７は、検索対象項目として、ブックマーク、人物、チャプタを有する場合を例にとる。
【００９９】
アイコン７１２，７１４及び７１６は、検索単位になる検索対象項目を図示している。
【０１００】
アイコン７２２，７２４及び７２６は、人物情報として登録されたそれぞれの人物を示す映像を図示している。
【０１０１】
情報７３４は、選択された人物の基本細部情報であり、映像７４２，７４４及び７４６は、選択された人物の出演場面を図示する。
【０１０２】
再生部の一実施形態は、ユーザが特定人物の出演場面を検索したい場合、検索メニュー７１０の人物アイコン７１４を選択すれば、下位フレーム７２０で登録された人物７２２，７２４及び７２６を確認することができる。
【０１０３】
ユーザがどの人物７２６かを選択すれば、再生部は、選択された人物７２６についての細部情報及び場面情報を表示する情報メニュー７３０を再生する。選択された人物７２６についての情報メニュー７３０は、マルチメディア・データ記録装置１００に入力された基本細部情報７３４を画面に表示し、メタデータに記録された場面時点の場面を表示する映像７４２，７４４及び７４６を画面に表示する。従って、ユーザが出演場面のうち一つを選択すれば、再生部は、その出演時点の場面を検索して再生できる。
【０１０４】
図８は、本発明の一実施形態によるマルチメディア・データ記録装置のユーザインターフェースによる場合について説明している。
【０１０５】
マルチメディア・データ記録装置１００の一実施形態であるデジタル・カムコーダ８１０は、自主的にマルチメディア・データを再生させることができる再生画面８２０を有することができる。再生画面８２０は、検索対象項目のアイコンが羅列された検索メニュー８３０、及び現在のマルチメディア・データが再生される再生窓８４０を具備する。
【０１０６】
マルチメディア・データ記録装置１００の一実施形態は、ユーザ要請によって、検索対象項目及び現在場面を対応させるためのユーザインターフェースを含む。場面選択部１２０の一実施形態は、入力されている現在場面を、ユーザがユーザインターフェースを利用して、検索対象項目のうち、いずれか一つに対応させることによって、メディアデータの場面を選択する。ユーザインターフェースは、ｈｔｍｌ形態でありうる。
【０１０７】
すなわち、説明の便宜のために、デジタル・カムコーダ８１０を例にとれば、ユーザが現在撮影している映像を再生窓８２０の１フレーム８４０を介して確認することができ、再生窓８２０には、ユーザがあらかじめ登録しておいたそれぞれの検索対象項目が配列されているフレーム８３０が配されたユーザインターフェースが備わっている。検索対象項目は、人物情報、チャプタ情報などを含む。
【０１０８】
ユーザがフレーム８４０を介して現在撮影されている場面を見ていて、現在場面を特定検索対象項目に対応させたいとき、フレーム８３０の当該検索対象項目のアイコンを選択すれば、現在場面の場面情報が、当該検索対象項目の場面情報として決定されうる。
【０１０９】
ユーザインターフェースの一実施形態は、検索対象項目が選択されるために、それぞれの検索対象項目を示す映像アイコンを含む。映像アイコンは、現在場面を利用して、新しい映像アイコンに更新されうる。
【０１１０】
図９は、本発明の一実施形態によるマルチメディア・データの記録方法のフローチャートを図示している。
【０１１１】
段階９１０で、検索対象になるメディアデータの場面を分類するための少なくとも１つの分類基準項目が入力される。
【０１１２】
段階９２０で、メディアデータの入力途中で、それぞれの分類基準項目に対応する少なくとも１つの場面が選択される。
【０１１３】
段階９３０で、選択された場面のインデックスまたは再生時点のうち、少なくとも１つである場面情報がメタデータに記録される。
【０１１４】
段階９４０で、メタデータがヘッダ領域に記録され、メディアデータがペイロード領域に記録され、マルチメディア・データが生成される。
【０１１５】
図１０は、本発明の一実施形態によるマルチメディア・データ再生装置のブロック図を示している。
【０１１６】
一実施形態によるマルチメディア・データ再生装置１５０は、検索対象項目選択部１６０、メタデータ決定部１７０、情報再生部１８０及び場面再生部１９０を含む。
【０１１７】
図１１は、本発明の一実施形態によるマルチメディア・データ再生方法のフローチャートを図示している。
【０１１８】
段階１０１０で、検索対象項目選択部１６０は、検索する場面の検索対象項目を選択する。
【０１１９】
段階１０２０で、メタデータ決定部１７０は、検索対象項目に係わるメタデータを決定する。
【０１２０】
段階１０３０で、情報再生部１８０は、メタデータまたはデータベースのうち、少なくともいずれか一つから、検索対象項目の細部情報または代表特徴情報を抽出して再生する。
【０１２１】
段階１０４０で、場面再生部１９０は、決定されたメタデータから抽出された場面情報を利用し、マルチメディア・データが再生される。
【０１２２】
一方、前述の本発明の実施形態は、コンピュータで実行されうるプログラムとして作成可能であり、コンピュータで読み取り可能な記録媒体を利用し、前記プログラムを動作させる汎用デジタル・コンピュータで具現されうる。前記コンピュータで読み取り可能な記録媒体は、マグネチック記録媒体（例えば、ＲＯＭ（read-only  memory）、フロッピー（登録商標）ディスク、ハードディスクなど）、光学的判読媒体（例えば、ＣＤ−ＲＯＭ、ＤＶＤなど）を含む。
【図１Ａ】
0005524842.tif 000002
【図１Ｂ】
0005524842.tif 000003
【図２】
0005524842.tif 000004
【図３】
0005524842.tif 000005
【図４Ａ】
0005524842.tif 000006
【図４Ｂ】
0005524842.tif 000007
【図５】
0005524842.tif 000008
【図６】
0005524842.tif 000009
【図８】
0005524842.tif 000010
【図９】
0005524842.tif 000011
【図１０】
0005524842.tif 000012
【図１１】
0005524842.tif 000013
【図７】
0005524842.tif 000014