(57)【要約】【課題】一般に光ディスクやＨＤＤなどランダムアクセス可能な記録媒体中のＡＶ信号は、階層化された論理的な構成単位毎に管理されているが、ＡＶ信号から抽出された特徴量に基づく特定位置の時間情報には論理的な構成単位に関する情報がないため、論理的な構成単位でこれらを利用した特殊再生、特定位置表示を行うには再生機においてその都度時間軸上での対応付け処理を行う必要がある。【解決手段】特定位置の時間情報と論理的な構成単位の時間情報とを照合する特定時間情報照合部を設け、時間軸上で一致する特定の構成単位の属性情報として他の管理情報とともに記録する。これにより、コンテンツの論理的な構成単位に従った再生制御を行いながら、特徴量などから抽出された特定時間情報を利用した特殊再生や特定位置表示を、再生機において容易に行うことを可能になる。【選択図】図１
2005223794.tif 000002
【特許請求の範囲】
【請求項１】
映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する装置であって、
前記映像及び音響信号を入力するＡＶ信号入力部と、
前記ＡＶ信号入力部の出力信号を符号化するＡＶ信号符号化部と、
前記管理情報を作成するために、前記ＡＶ信号符号化部における符号化処理の属性情報を作成する符号化属性情報作成部と、
同じく前記管理情報を作成するために、前記映像及び音響信号の記録内容の意味的な構成情報を作成するコンテンツ構成情報作成部と、
前記ＡＶ信号入力部の出力信号から映像または音響信号の特徴量を分析する特徴量分析部と、
前記特徴量分析部の分析結果を基づいて、ある判定基準により特定位置の時間情報を作成する特定時間情報作成部と、
前記特定時間情報作成部で作成された特定位置の時間情報が、前記コンテンツ構成情報作成部で作成された任意の構成情報のいずれに相当する時間位置であるかを照合する特定時間情報照合部と、
前記符号化属性情報作成部と前記コンテンツ構成情報作成部と前記特定時間情報照合部の出力データに基づいて、前記管理情報を作成するコンテンツ管理情報作成部と、
前記ＡＶ信号符号化部と前記コンテンツ管理情報作成部の出力データを、記録媒体に記録できるフォーマットに変換して記録するデータ記録部とを備えることを特徴とする映像音響コンテンツ記録装置。
【請求項２】
前記特徴量分析部において分析する分析内容は、映像信号の信号レベル、映像内容の動き量変化、テロップ等特定内容の検出、さらに音声信号の信号レベル、音楽または音声区間の検出、音声認識による特定内容の検出の少なくとも１つを含むものであることを特徴とする請求項１記載の映像音響コンテンツ記録装置。
【請求項３】
前記コンテンツ構成情報作成部は、記録機器の操作や動作に関する情報及び、前記ＡＶ信号符号化部の出力データ構造に関する情報の双方またはいずれか一方の情報に従ってコンテンツ構成情報を作成することを特徴とする請求項１記載の映像音響コンテンツ記録装置。
【請求項４】
前記コンテンツ構成情報作成部は、記録動作の開始と終了動作に応じて始端と終端を決めるプログラム情報とそのプログラム全体を構成する１つ以上のセル情報からなる論理的かつ階層的な構成情報を少なくとも作成することを特徴とする請求項３記載の映像音響コンテンツ記録装置。
【請求項５】
前記特定時間情報照合部は、前記特定位置の時間情報が前記セル情報のいずれのセルの区間に含まれるかを照合し、
前記コンテンツ管理情報作成部は、照合したセル情報の属性情報として前記特定位置の時間情報を追加することを特徴とする請求項４記載の映像音響コンテンツ記録装置。
【請求項６】
前記特定時間情報照合部は、前記特定位置の時間情報が前記セル情報のいずれのセルの区間に含まれるかを照合し、
前記コンテンツ管理情報作成部は、照合するセル情報を参照して前記特定位置の時間情報から新たな区間のセル情報を作成することを特徴とする請求項４記載の映像音響コンテンツ記録装置。
【請求項７】
映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する方法であって、
少なくとも前記管理情報として、前記映像及び音響信号の符号化処理動作に従って記録内容の意味的な構成情報を作成し、
また一方で前記映像または音響信号の特徴量の分析結果に基づいて、ある判定基準により特定位置の時間情報を作成し、
前記特定位置の時間情報が、前記構成情報のいずれに相当する時間位置であるかを照合し、
前記特定位置の時間情報を、時間位置が照合する前記構成情報の属性情報として他の管理情報や映像及び音響信号とともに、記録媒体に記録できるフォーマットに変換して記録することを特徴とする映像音響コンテンツ記録方法。
【請求項８】
映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する方法であって、
少なくとも前記管理情報として、前記映像及び音響信号の符号化処理動作に従って記録内容の意味的な構成情報を作成し、
また一方で前記映像または音響信号の特徴量の分析結果に基づいて、ある判定基準により特定位置の時間情報を作成し、
前記特定位置の時間情報が、前記構成情報のいずれに相当する時間位置であるかを照合し、
前記特定位置の時間情報を、時間位置が照合する前記構成情報を参照して新たな構成情報として他の管理情報や映像及び音響信号とともに、記録媒体に記録できるフォーマットに変換して記録することを特徴とする映像音響コンテンツ記録方法。
【請求項９】
映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する装置であって、
前記映像及び音響信号を入力するＡＶ信号入力部と、
前記ＡＶ信号入力部の出力信号を符号化するＡＶ信号符号化部と、
前記管理情報を作成するために、前記ＡＶ信号符号化部における符号化処理の属性情報を作成する符号化属性情報作成部と、
同じく前記管理情報を作成するために、前記映像及び音響信号の記録内容の意味的な構成情報を作成するコンテンツ構成情報作成部と、
前記ＡＶ信号入力部の出力信号から映像または音響信号の特徴量を分析する特徴量分析部と、
前記特徴量分析部の分析結果を基づいて、ある判定基準により特定位置の時間情報を作成する特定時間情報作成部と、
前記特定時間情報作成部で作成された特定位置の時間情報が、前記コンテンツ構成情報作成部で作成された任意の構成情報のいずれに相当する時間位置であるかを照合する特定時間情報照合部と、
前記映像及び音響信号がコンテンツとして有するジャンル情報や制作情報、及びコンテンツ内容に関連するキーワード情報などを入力し、その入力データの内容に従って前記特徴量分析部や特定時間情報照合部の動作を制御するコンテンツ属性情報入力部と、
前記符号化属性情報作成部と前記コンテンツ構成情報作成部と前記特定時間情報照合部の出力データに基づいて、前記管理情報を作成するコンテンツ管理情報作成部と、
前記ＡＶ信号符号化部と前記コンテンツ管理情報作成部の出力データを、記録媒体に記録できるフォーマットに変換して記録するデータ記録部とを備えることを特徴とする映像音響コンテンツ記録装置。
【請求項１０】
前記特徴量分析部において分析する分析内容は、映像信号の信号レベル、映像内容の動き量変化、テロップ等特定内容の検出、さらに音声信号の信号レベル、音楽または音声区間の検出、音声認識による特定内容の検出の少なくとも１つを含むものであることを特徴とする請求項９記載の映像音響コンテンツ記録装置。
【請求項１１】
前記コンテンツ構成情報作成部は、記録機器の操作や動作に関する情報及び、前記ＡＶ信号符号化部の出力データ構造に関する情報の双方またはいずれか一方の情報に従ってコンテンツ構成情報を作成することを特徴とする請求項９記載の映像音響コンテンツ記録装置。
【請求項１２】
前記コンテンツ構成情報作成部は、記録動作の開始と終了動作に応じて始端と終端を決めるプログラム情報とそのプログラム全体を構成する１つ以上のセル情報からなる論理的かつ階層的な構成情報を少なくとも作成することを特徴とする請求項１１記載の映像音響コンテンツ記録装置。
【請求項１３】
前記特定時間情報照合部は、前記特定位置の時間情報が前記セル情報のいずれのセルの区間に含まれるかを照合し、
前記コンテンツ管理情報作成部は、照合したセル情報の属性情報として前記特定位置の時間情報を追加することを特徴とする請求項１２記載の映像音響コンテンツ記録装置。
【請求項１４】
前記特定時間情報照合部は、前記特定位置の時間情報が前記セル情報のいずれのセルの区間に含まれるかを照合し、
前記コンテンツ管理情報作成部は、照合するセル情報を参照して前記特定位置の時間情報から新たな区間のセル情報を作成することを特徴とする請求項１２記載の映像音響コンテンツ記録装置。
【請求項１５】
映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する方法であって、
少なくとも前記管理情報として、前記映像及び音響信号の符号化処理動作に従って記録内容の意味的な構成情報を作成し、
また一方で前記映像または音響信号の特徴量の分析結果に基づいて、ある判定基準により特定位置の時間情報を作成し、
前記特定位置の時間情報が、前記構成情報のいずれに相当する時間位置であるかを照合し、
さらに前記特徴量の分析や特定時間情報の照合の動作内容は、別途入力される前記映像及び音響信号がコンテンツとして有するジャンル情報や制作情報、及びコンテンツ内容に関連するキーワード情報などの内容に従って制御されるものとし、
前記特定位置の時間情報を、時間位置が照合する前記構成情報の属性情報として他の管理情報や映像及び音響信号とともに、記録媒体に記録できるフォーマットに変換して記録することを特徴とする映像音響コンテンツ記録方法。
【請求項１６】
映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する方法であって、
少なくとも前記管理情報として、前記映像及び音響信号の符号化処理動作に従って記録内容の意味的な構成情報を作成し、
また一方で前記映像または音響信号の特徴量の分析結果に基づいて、ある判定基準により特定位置の時間情報を作成し、
前記特定位置の時間情報が、前記構成情報のいずれに相当する時間位置であるかを照合し、
さらに前記特徴量の分析や特定時間情報の照合の動作内容は、別途入力される前記映像及び音響信号がコンテンツとして有するジャンル情報や制作情報、及びコンテンツ内容に関連するキーワード情報などの内容に従って制御されるものとし、
前記特定位置の時間情報を、時間位置が照合する前記構成情報を参照して新たな構成情報として他の管理情報や映像及び音響信号とともに、記録媒体に記録できるフォーマットに変換して記録することを特徴とする映像音響コンテンツ記録方法。
【請求項１７】
映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する装置であって、
前記映像及び音響信号を入力するＡＶ信号入力部と、
前記ＡＶ信号入力部の出力信号を符号化するＡＶ信号符号化部と、
前記管理情報を作成するために、前記ＡＶ信号符号化部における符号化処理の属性情報を作成する符号化属性情報作成部と、
同じく前記管理情報を作成するために、前記映像及び音響信号の記録内容の意味的な構成情報を作成するコンテンツ構成情報作成部と、
前記ＡＶ信号のある特定位置の時間情報を少なくとも含むデータを入力する特定時間情報入力部と、
前記特定時間情報入力部で入力された特定位置の時間情報が、前記コンテンツ構成情報作成部で作成された任意の構成情報のいずれに相当する時間位置であるかを照合する特定時間情報照合部と、
前記符号化属性情報作成部と前記コンテンツ構成情報作成部と前記特定時間情報照合部の出力データに基づいて、前記管理情報を作成するコンテンツ管理情報作成部と、
前記ＡＶ信号符号化部と前記コンテンツ管理情報作成部の出力データを、記録媒体に記録できるフォーマットに変換して記録するデータ記録部とを備えることを特徴とする映像音響コンテンツ記録装置。
【請求項１８】
前記コンテンツ構成情報作成部は、記録機器の操作や動作に関する情報及び、前記ＡＶ信号符号化部の出力データ構造に関する情報の双方またはいずれか一方の情報に従ってコンテンツ構成情報を作成することを特徴とする請求項１７記載の映像音響コンテンツ記録装置。
【請求項１９】
前記コンテンツ構成情報作成部は、記録動作の開始と終了動作に応じて始端と終端を決めるプログラム情報とそのプログラム全体を構成する１つ以上のセル情報からなる論理的かつ階層的な構成情報を少なくとも作成することを特徴とする請求項１８記載の映像音響コンテンツ記録装置。
【請求項２０】
前記特定時間情報照合部は、前記特定位置の時間情報が前記セル情報のいずれのセルの区間に含まれるかを照合し、
前記コンテンツ管理情報作成部は、照合したセル情報の属性情報として前記特定位置の時間情報を追加することを特徴とする請求項１９記載の映像音響コンテンツ記録装置。
【請求項２１】
前記特定時間情報照合部は、前記特定位置の時間情報が前記セル情報のいずれのセルの区間に含まれるかを照合し、
前記コンテンツ管理情報作成部は、照合するセル情報を参照して前記特定位置の時間情報から新たな区間のセル情報を作成することを特徴とする請求項１９記載の映像音響コンテンツ記録装置。
【請求項２２】
映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する方法であって、
少なくとも前記管理情報として、前記映像及び音響信号の符号化処理動作に従って記録内容の意味的な構成情報を作成し、
前記ＡＶ信号のある特定位置の時間情報を少なくとも含むデータを入力し、
前記特定位置の時間情報が、前記構成情報のいずれに相当する時間位置であるかを照合し、
前記特定位置の時間情報を、時間位置が照合する前記構成情報の属性情報として他の管理情報や映像及び音響信号とともに、記録媒体に記録できるフォーマットに変換して記録することを特徴とする映像音響コンテンツ記録方法。
【請求項２３】
映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する方法であって、
少なくとも前記管理情報として、前記映像及び音響信号の符号化処理動作に従って記録内容の意味的な構成情報を作成し、
前記ＡＶ信号のある特定位置の時間情報を少なくとも含むデータを入力し、
前記特定位置の時間情報が、前記構成情報のいずれに相当する時間位置であるかを照合し、
前記特定位置の時間情報を、時間位置が照合する前記構成情報を参照して新たな構成情報として他の管理情報や映像及び音響信号とともに、記録媒体に記録できるフォーマットに変換して記録することを特徴とする映像音響コンテンツ記録方法。
【請求項２４】
前記請求項１の構成で作成された映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を再生する装置であって、
前記映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を記録するデータ記録部と、
前記データ記録部より任意の時間位置の映像及び音響データを読み出すＡＶデータ読み出し部と、
前記ＡＶデータ読み出し部より読み出された映像及び音響データを再生可能なアナログＡＶ信号に変換するＡＶデータ再生処理部と、
前記ＡＶデータ再生処理部の出力信号を提示するＡＶ信号提示部と、
前記データ記録部より前記管理情報を読み出す管理情報読み出し部と、
前記管理情報読み出し部より読み出された管理情報の内容を分析する管理情報分析処理部と、
前記管理情報分析処理部で分析された管理情報の内容を提示する管理情報提示部と、
前記ＡＶデータ読み出し部と前記ＡＶデータ再生処理部の動作を制御するＡＶデータ再生制御部と、
前記ＡＶデータ再生制御部の制御内容を指示する機器操作者の操作入力処理を行う機器操作処理部とを備えることを特徴とする映像音響コンテンツ再生装置。
【請求項２５】
前記管理情報分析処理部で分析され、前期管理情報提示部で提示される管理情報の内容は、少なくともセル情報の属性情報に記録された１つまたは複数の前記特定位置の時間情報を含むことを特徴とする請求項２４記載の映像音響コンテンツ再生装置。
【請求項２６】
前記管理情報分析処理部で分析され、前期管理情報提示部で提示される管理情報の内容は、少なくともセルの区間を定義している１つまたは複数の前記特定位置の時間情報を含むことを特徴とする請求項２４記載の映像音響コンテンツ再生装置。
【請求項２７】
前記ＡＶデータ再生制御部で制御される再生動作は、セルの属性情報または前記セルの区間情報で示される特定の時間位置に対する再生の開始または終了の動作であることを特徴とする請求項２４記載の映像音響コンテンツ再生装置。
【請求項２８】
前記ＡＶデータ再生制御部で制御される再生動作は、セルの属性情報または前記セルの区間情報で示される特定の時間位置に対する再生速度の切り替え動作であることを特徴とする請求項２４記載の映像音響コンテンツ再生装置。
【請求項２９】
前記請求項１の構成で作成された映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を再生する方法であって、
前記映像及び音響データと前記管理情報が記録された記録媒体より前記管理情報を読み出して、少なくとも前記特定位置の時間情報に関する内容を分析して機器操作者に提示し、
機器操作者の操作に応じて前記映像及び音響データを前記記録媒体より読み出す時間位置や再生処理内容を前記特定位置の時間情報を用いて制御して再生することを特徴とする映像音響コンテンツ再生方法。
【請求項３０】
前記請求項１の構成で作成された映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を編集及び再生する装置であって、
前記映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を記録するデータ記録部と、
前記データ記録部より任意の時間位置の映像及び音響データを読み出すＡＶデータ読み出し部と、
前記ＡＶデータ読み出し部より読み出された映像及び音響データを再生可能なアナログＡＶ信号に変換するＡＶデータ再生処理部と、
前記ＡＶデータ再生処理部の出力信号を提示するＡＶ信号提示部と、
前記データ記録部より前記管理情報を読み出す管理情報読み出し部と、
前記管理情報読み出し部より読み出された管理情報の内容を分析する管理情報分析処理部と、
前記管理情報分析処理部で分析された管理情報の内容を提示する管理情報提示部と、
前記ＡＶデータ読み出し部と前記ＡＶデータ再生処理部の動作を制御するＡＶデータ再生制御部と、
前記管理情報提示部で提示された管理情報の内容を修正する管理情報修正部と、
前記ＡＶデータ再生制御部の制御内容及び、前記管理情報修正部の修正内容を指示する機器操作者の操作入力処理を行う機器操作処理部とを備えることを特徴とする映像音響コンテンツ編集再生装置。
【請求項３１】
前記管理情報分析処理部で分析され、前期管理情報提示部で提示される管理情報の内容は、少なくとも前記セル情報の属性情報に記録された１つまたは複数の前記特定位置の時間情報を含むことを特徴とする請求項３０記載の映像音響コンテンツ編集再生装置。
【請求項３２】
前記管理情報分析処理部で分析され、前期管理情報提示部で提示される管理情報の内容は、少なくともセルの区間を定義している１つまたは複数の前記特定位置の時間情報を含むことを特徴とする請求項３０記載の映像音響コンテンツ編集再生装置。
【請求項３３】
前記ＡＶデータ再生制御部で制御される再生動作は、前記セルの属性情報または前記セルの区間で示される特定の時間位置に対する再生の開始または終了の動作であることを特徴とする請求項３０記載の映像音響コンテンツ編集再生装置。
【請求項３４】
前記ＡＶデータ再生制御部で制御される再生動作は、前記セルの属性情報または前記セルの区間で示される特定の時間位置に対する再生速度の切り替え動作であることを特徴とする請求項３０記載の映像音響コンテンツ編集再生装置。
【請求項３５】
前記請求項１の構成で作成された映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を編集及び再生する方法であって、
前記映像及び音響データと前記管理情報が記録された記録媒体より前記管理情報を読み出して、少なくとも前記特定位置の時間情報に関する内容を分析して機器操作者に提示し、
機器操作者の操作に応じて前記特定位置の時間情報に関する内容を修正し、
その内容に従って、前記管理情報を修正して前記記録媒体に記録し、
また同時に、修正した内容に従って前記映像及び音響データを前記記録媒体より読み出す時間位置や再生処理内容を制御して再生することを特徴とする映像音響コンテンツ編集再生方法。
【請求項３６】
前記請求項１の構成で作成された映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を編集及び再生する装置であって、
前記映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を記録するデータ記録部と、
前記データ記録部より任意の時間位置の映像及び音響データを読み出すＡＶデータ読み出し部と、
前記ＡＶデータ読み出し部より読み出された映像及び音響データを再生可能なアナログＡＶ信号に変換するＡＶデータ再生処理部と、
前記ＡＶデータ再生処理部の出力信号を提示するＡＶ信号提示部と、
前記データ記録部より前記管理情報を読み出す管理情報読み出し部と、
前記管理情報読み出し部より読み出された管理情報の内容を分析する管理情報分析処理部と、
前記管理情報分析処理部で分析された管理情報の内容を提示する管理情報提示部と、
前記ＡＶデータ読み出し部と前記ＡＶデータ再生処理部の動作を制御するＡＶデータ再生制御部と、
前記管理情報提示部で提示された管理情報の内容を修正する管理情報修正部と、
前記ＡＶデータ再生制御部の制御内容及び、前記管理情報修正部の修正内容を指示する機器操作者の操作入力処理を行う機器操作処理部と、
前記ＡＶ信号のある特定位置の時間情報を少なくとも含むデータを入力または出力する特定時間情報入出力部と、を備えることを特徴とする映像音響コンテンツ編集再生装置。
【請求項３７】
前記管理情報分析処理部で分析され、前期管理情報提示部で提示される管理情報の内容は、少なくとも前記セル情報の属性情報に記録された１つまたは複数の前記特定位置の時間情報を含むことを特徴とする請求項３６記載の映像音響コンテンツ編集再生装置。
【請求項３８】
前記管理情報分析処理部で分析され、前期管理情報提示部で提示される管理情報の内容は、少なくとも前記セルの区間を定義している１つまたは複数の前記特定位置の時間情報を含むことを特徴とする請求項３６記載の映像音響コンテンツ編集再生装置。
【請求項３９】
前記ＡＶデータ再生制御部で制御される再生動作は、セルの属性情報または前記セルの区間で示される特定の時間位置に対する再生の開始または終了の動作であることを特徴とする請求項３６記載の映像音響コンテンツ編集再生装置。
【請求項４０】
前記ＡＶデータ再生制御部で制御される再生動作は、セルの属性情報または前記セルの区間で示される特定の時間位置に対する再生速度の切り替え動作であることを特徴とする請求項３６記載の映像音響コンテンツ編集再生装置。
【請求項４１】
前記請求項１の構成で作成された映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を編集及び再生する方法であって、
前記映像及び音響データと前記管理情報が記録され記録媒体より前記管理情報を読み出して、少なくとも前記特定位置の時間情報に関する内容を分析するか、
または前記特定位置の時間情報を少なくとも含むデータを外部より入力するか、
いずれか一方または両方の時間情報に基づく内容を機器操作者に提示し、
機器操作者の操作に応じて前記特定位置の時間情報に関連する内容を修正し、
その内容に従って、少なくとも前記管理情報を修正して前記記録媒体に記録し、
また同時に、修正した内容に従って前記映像及び音響データを前記記録媒体より読み出す時間位置や再生処理内容を制御して再生し、
さらに必要に応じて、前記特定位置の時間情報を少なくとも含むデータを外部に出力することを特徴とする映像音響コンテンツ編集再生方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は映像音響コンテンツの記録や再生、編集等を行う映像音響コンテンツ記録再生装置において、効率的な視聴を支援するための映像音響コンテンツの記録内容に関する管理情報の作成、記録、利用を行う装置または方法に関するものである。
【背景技術】
【０００２】
近年の映像音響コンテンツの記録再生装置の記録容量は大容量となりつつあり、膨大な時間の映像音響コンテンツを蓄積することが可能となっている。そのため、必ずしも蓄積された映像音響コンテンツの全てを視聴できるとは限らず、例えば重要なシーンのみ選択して再生するような効率的に映像音響コンテンツを視聴するための手段が求められている。
【０００３】
既に光ディスクやハードディスクなど高速でランダムアクセス可能な記録デバイスが民生用ＡＶ機器にも一般化した現状においては、上記要求に対してハードウエア的には充分な環境が整いつつあると言え、今後はそのようなハードウエアを制御するデータとしての映像および音響データに付加される管理情報の作成、記録、利用に関する技術の提供が迫られているといえる。
【０００４】
そのような目的の従来例として、音響信号から抽出した特徴量などを付加情報としてＡＶ信号と伴に記録媒体に記録し、再生時に効率的な再生を行うために利用するものがあった（例えば、特許文献１参照）。図２は、前記特許文献１に記載された従来例を示すものである。
【０００５】
図２に示す従来例おいては、ＡＶ信号入力部１０１に入力された映像および音響信号のうち音響信号の特徴量を特徴量分析部１０５で分析し、その分析結果に基づき本従来例の説明においてサブコードと呼んでいるコンテンツの管理情報をコンテンツ管理情報作成部１０８で作成している。
【０００６】
また本従来例においてサブコードの記録方法は、２例示されている。
【０００７】
第１の例は、サブコード情報をＡＶ信号符号化部１０２において、符号化された映像および音響データと一緒にマルチプレックスして記録する方法である。
【０００８】
第２の例は、サブコード情報を映像および音響データとは別の領域に一括して記録する方法である。
【０００９】
いずれの場合においても本従来例においては、上記の方法で記録されたサブコード情報を再生時に利用して、効率的なＡＶコンテンツの再生を実現している。
【特許文献１】特開平１０−１７２２４５号公報（第１頁、図１）
【発明の開示】
【発明が解決しようとする課題】
【００１０】
しかしながら、前記従来技術の第１の例では、サブコード情報が映像および音響データと一緒にマルチプレックスして記録されているため、このような方法でサブコード情報を記録した場合、全てのサブコード情報を取得するためには、基本的に全ての映像音響データを含めてデマルチプレックスする必要がある。このことは、映像音響データの記録時間が長くなるに従って、必然的に処理時間も長くなって機器操作に対するレスポンスが悪くなることを意味するものである。
【００１１】
従来例においては、ＡＶコンテンツの音響信号の信号レベルに関する情報をサブコード情報として記録し、映像音響データの再生時に信号レベルの低い部分をスキップするという例が示されている。
【００１２】
この従来例の場合、例えば記録媒体中に存在する全ての信号レベルの低いまたは高い部分をユーザーに提示し、提示された任意の部分からユーザーが選択して再生を開始しようとする場合など、記録デバイスのランダムアクセス性を十分に活用した再生方式を実現する用途に対しては、上記の処理時間の問題が生じることになる。
【００１３】
一方、第２の従来例におけるサブコード情報の記録方法は、全てのサブコード情報をＵ−ＴＯＣ領域などに一括して記録するものであり、この方法によれば、最初の実施例の持つ問題は解消されるように見える。
【００１４】
しかしながらこの方法では、サブコード情報が音響信号の物理的な時系列の時間情報として記録されている点において問題を含んでいる。
【００１５】
一般にランダムアクセス性が高い記録デバイスを有する記録システムの多くは、記録されるＡＶコンテンツに意味的な論理構造が与えられ、再生時においてはその論理構造に基づいて効率的な再生制御方式が提供されている。
【００１６】
ここで述べる意味的な論理構造とは、記録操作の開始終了で決められる記録区間や特定イベントの発生位置やハイライト場面など重要度が高い区間などによって構成される特定の時間情報に基づくものである。
【００１７】
また一般にこの意味的な論理構造は、例えばコンテンツ全体の内容が複数のプログラムと呼ばれる論理構造から構成され、さらに個々のプログラムが複数のシーンと呼ばれる論理構造から構成されるというように、上位の構造から下位の構造まで階層的な構造とすることが記録コンテンツの管理において効果的であり、ランダムアクセス性が高い記録デバイスを有する記録システムの多くが、このような階層的な論理構造を有してＡＶコンテンツの再生において活用している。
【００１８】
ここで今一度第２の従来例の記録方法を検討する。ここでのサブコード情報は、記録されている映像音響データの全ての区間について１秒毎に音響データの物理的な特徴量を分析してその時間位置のデータが無音区間であるか、音楽区間であるか、音声区間であるかのようなコンテンツの種別情報を与えているものである。これにより、映像音響データの開始から任意の時間が経過した時点でのコンテンツの種別が一括して記録されたサブコード情報から判別できることになる。
【００１９】
ただしいうまでもなく、上記の意味的な構成情報は一定の時間周期で構成されるものではなく、記録データの意味的な内容に従って、任意の時間で定義され構成されるものである。例えば、ある記録媒体に複数のＴＶ番組がプログラムという論理単位として記録されていて、ユーザーが特定のプログラムを選択してさらにそのプログラムの音楽区間を再生したい場合には、プログラムという論理的構成情報は、各ＴＶ番組の記録時間に従って定義されるので、再生すべき時間情報を取得するためには、サブコード情報が有する映像音響データの物理的な時系列の時間情報と指定された特定のプログラムの時間情報との対応付けを行う必要が発生する。
【００２０】
つまり第２の従来例の記録方法は、サブコード情報が記録媒体のＵ−ＴＯＣ領域に一括して１秒周期で保持されているものの、先の論理的な構成情報との対応関係がないため、映像音響データの物理的な時系列の時間情報と先の論理構造に基づく時間情報との関連付けを行うために、その都度両者の対応関係を計算する必要がある。
【００２１】
このように意味的な論理構造に従った任意の時間位置からの再生は、記録媒体のランダムアクセス性を活かした効率的な再生方法であるものの、特徴量分析に基づく時系列のサブコード情報が、上記の論理構造とのリンク情報を持たないことは、コンテンツの意味的な論理構造に従った再生制御を行うためには情報が不十分であると考える。
【００２２】
本発明は、前記従来の課題を解決するもので、コンテンツの意味的な論理構造に従った再生制御を行いながら、特徴量などから抽出された特定時間情報を利用した特殊再生や特定位置表示を、再生機において容易に行うことを可能とし、さらに特定時間情報を管理情報の一部として保存できる記録再生装置または方法を提供することを目的とする。
【課題を解決するための手段】
【００２３】
前記従来の課題を解決するために、本発明の映像音響コンテンツ記録装置は、映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する装置であって、前記映像及び音響信号を入力するＡＶ信号入力部と、前記ＡＶ信号入力部の出力信号を符号化するＡＶ信号符号化部と、前記管理情報を作成するために、前記ＡＶ信号符号化部における符号化処理の属性情報を作成する符号化属性情報作成部と、同じく前記管理情報を作成するために、前記映像及び音響信号の記録内容の意味的な構成情報を作成するコンテンツ構成情報作成部と、前記ＡＶ信号入力部の出力信号から映像または音響信号の特徴量を分析する特徴量分析部と、前記特徴量分析部の分析結果を基づいて、ある判定基準により特定位置の時間情報を作成する特定時間情報作成部と、前記特定時間情報作成部で作成された特定位置の時間情報が、前記コンテンツ構成情報作成部で作成された任意の構成情報のいずれに相当する時間位置であるかを照合する特定時間情報照合部と、前記符号化属性情報作成部と前記コンテンツ構成情報作成部と前記特定時間情報照合部の出力データに基づいて、前記管理情報を作成するコンテンツ管理情報作成部と、前記ＡＶ信号符号化部と前記コンテンツ管理情報作成部の出力データを、記録媒体に記録できるフォーマットに変換して記録するデータ記録部とを備えることを特徴とする。
【００２４】
また、本発明の映像音響コンテンツ記録装置は、前記特徴量分析部において分析する分析内容は、映像信号の信号レベル、映像内容の動き量変化、テロップ等特定内容の検出、さらに音声信号の信号レベル、音楽または音声区間の検出、音声認識による特定内容の検出の少なくとも１つを含むものであることを特徴とする。
【００２５】
また、本発明の映像音響コンテンツ記録装置は、前記コンテンツ構成情報作成部は、記録機器の操作や動作に関する情報及び、前記ＡＶ信号符号化部の出力データ構造に関する情報の双方またはいずれか一方の情報に従ってコンテンツ構成情報を作成することを特徴とする。
【００２６】
また、本発明の映像音響コンテンツ記録装置は、前記コンテンツ構成情報作成部は、記録動作の開始と終了動作に応じて始端と終端を決めるプログラム情報とそのプログラム全体を構成する１つ以上のセル情報からなる論理的かつ階層的な構成情報を少なくとも作成することを特徴とする。
【００２７】
また、本発明の映像音響コンテンツ記録装置は、前記特定時間情報照合部は、前記特定位置の時間情報が前記セル情報のいずれのセルの区間に含まれるかを照合し、前記コンテンツ管理情報作成部は、照合したセル情報の属性情報として前記特定位置の時間情報を追加することを特徴とする。
【００２８】
また、本発明の映像音響コンテンツ記録装置は、前記特定時間情報照合部は、前記特定位置の時間情報が前記セル情報のいずれのセルの区間に含まれるかを照合し、前記コンテンツ管理情報作成部は、照合するセル情報を参照して前記特定位置の時間情報から新たな区間のセル情報を作成することを特徴とする。
【００２９】
また、本発明の映像音響コンテンツ記録方法は、映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する方法であって、少なくとも前記管理情報として、前記映像及び音響信号の符号化処理動作に従って記録内容の意味的な構成情報を作成し、また一方で前記映像または音響信号の特徴量の分析結果に基づいて、ある判定基準により特定位置の時間情報を作成し、前記特定位置の時間情報が、前記構成情報のいずれに相当する時間位置であるかを照合し、前記特定位置の時間情報を、時間位置が照合する前記構成情報の属性情報として他の管理情報や映像及び音響信号とともに、記録媒体に記録できるフォーマットに変換して記録することを特徴とする。
【００３０】
また、本発明の映像音響コンテンツ記録方法は、映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する方法であって、少なくとも前記管理情報として、前記映像及び音響信号の符号化処理動作に従って記録内容の意味的な構成情報を作成し、また一方で前記映像または音響信号の特徴量の分析結果に基づいて、ある判定基準により特定位置の時間情報を作成し、前記特定位置の時間情報が、前記構成情報のいずれに相当する時間位置であるかを照合し、前記特定位置の時間情報を、時間位置が照合する前記構成情報を参照して新たな構成情報として他の管理情報や映像及び音響信号とともに、記録媒体に記録できるフォーマットに変換して記録することを特徴とする。
【００３１】
また、本発明の映像音響コンテンツ記録装置は、映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する装置であって、前記映像及び音響信号を入力するＡＶ信号入力部と、前記ＡＶ信号入力部の出力信号を符号化するＡＶ信号符号化部と、前記管理情報を作成するために、前記ＡＶ信号符号化部における符号化処理の属性情報を作成する符号化属性情報作成部と、同じく前記管理情報を作成するために、前記映像及び音響信号の記録内容の意味的な構成情報を作成するコンテンツ構成情報作成部と、前記ＡＶ信号入力部の出力信号から映像または音響信号の特徴量を分析する特徴量分析部と、前記特徴量分析部の分析結果を基づいて、ある判定基準により特定位置の時間情報を作成する特定時間情報作成部と、前記特定時間情報作成部で作成された特定位置の時間情報が、前記コンテンツ構成情報作成部で作成された任意の構成情報のいずれに相当する時間位置であるかを照合する特定時間情報照合部と、前記映像及び音響信号がコンテンツとして有するジャンル情報や制作情報、及びコンテンツ内容に関連するキーワード情報などを入力し、その入力データの内容に従って前記特徴量分析部や特定時間情報照合部の動作を制御するコンテンツ属性情報入力部と、前記符号化属性情報作成部と前記コンテンツ構成情報作成部と前記特定時間情報照合部の出力データに基づいて、前記管理情報を作成するコンテンツ管理情報作成部と、前記ＡＶ信号符号化部と前記コンテンツ管理情報作成部の出力データを、記録媒体に記録できるフォーマットに変換して記録するデータ記録部とを備えることを特徴とする。
【００３２】
また、本発明の映像音響コンテンツ記録装置は、前記特徴量分析部において分析する分析内容は、映像信号の信号レベル、映像内容の動き量変化、テロップ等特定内容の検出、さらに音声信号の信号レベル、音楽または音声区間の検出、音声認識による特定内容の検出の少なくとも１つを含むものであることを特徴とする。
【００３３】
また、本発明の映像音響コンテンツ記録装置は、前記コンテンツ構成情報作成部は、記録機器の操作や動作に関する情報及び、前記ＡＶ信号符号化部の出力データ構造に関する情報の双方またはいずれか一方の情報に従ってコンテンツ構成情報を作成することを特徴とする。
【００３４】
また、本発明の映像音響コンテンツ記録装置は、前記コンテンツ構成情報作成部は、記録動作の開始と終了動作に応じて始端と終端を決めるプログラム情報とそのプログラム全体を構成する１つ以上のセル情報からなる論理的かつ階層的な構成情報を少なくとも作成することを特徴とする。
【００３５】
また、本発明の映像音響コンテンツ記録装置は、前記特定時間情報照合部は、前記特定位置の時間情報が前記セル情報のいずれのセルの区間に含まれるかを照合し、前記コンテンツ管理情報作成部は、照合したセル情報の属性情報として前記特定位置の時間情報を追加することを特徴とする。
【００３６】
また、本発明の映像音響コンテンツ記録装置は、前記特定時間情報照合部は、前記特定位置の時間情報が前記セル情報のいずれのセルの区間に含まれるかを照合し、前記コンテンツ管理情報作成部は、照合するセル情報を参照して前記特定位置の時間情報から新たな区間のセル情報を作成することを特徴とする。
【００３７】
また、本発明の映像音響コンテンツ記録方法は、映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する方法であって、少なくとも前記管理情報として、前記映像及び音響信号の符号化処理動作に従って記録内容の意味的な構成情報を作成し、また一方で前記映像または音響信号の特徴量の分析結果に基づいて、ある判定基準により特定位置の時間情報を作成し、前記特定位置の時間情報が、前記構成情報のいずれに相当する時間位置であるかを照合し、さらに前記特徴量の分析や特定時間情報の照合の動作内容は、別途入力される前記映像及び音響信号がコンテンツとして有するジャンル情報や制作情報、及びコンテンツ内容に関連するキーワード情報などの内容に従って制御されるものとし、前記特定位置の時間情報を、時間位置が照合する前記構成情報の属性情報として他の管理情報や映像及び音響信号とともに、記録媒体に記録できるフォーマットに変換して記録することを特徴とする。
【００３８】
また、本発明の映像音響コンテンツ記録方法は、映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する方法であって、少なくとも前記管理情報として、前記映像及び音響信号の符号化処理動作に従って記録内容の意味的な構成情報を作成し、また一方で前記映像または音響信号の特徴量の分析結果に基づいて、ある判定基準により特定位置の時間情報を作成し、前記特定位置の時間情報が、前記構成情報のいずれに相当する時間位置であるかを照合し、さらに前記特徴量の分析や特定時間情報の照合の動作内容は、別途入力される前記映像及び音響信号がコンテンツとして有するジャンル情報や制作情報、及びコンテンツ内容に関連するキーワード情報などの内容に従って制御されるものとし、前記特定位置の時間情報を、時間位置が照合する前記構成情報を参照して新たな構成情報として他の管理情報や映像及び音響信号とともに、記録媒体に記録できるフォーマットに変換して記録することを特徴とする。
【００３９】
また、本発明の映像音響コンテンツ記録装置は、映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する装置であって、前記映像及び音響信号を入力するＡＶ信号入力部と、前記ＡＶ信号入力部の出力信号を符号化するＡＶ信号符号化部と、前記管理情報を作成するために、前記ＡＶ信号符号化部における符号化処理の属性情報を作成する符号化属性情報作成部と、同じく前記管理情報を作成するために、前記映像及び音響信号の記録内容の意味的な構成情報を作成するコンテンツ構成情報作成部と、前記ＡＶ信号のある特定位置の時間情報を少なくとも含むデータを入力する特定時間情報入力部と、前記特定時間情報入力部で入力された特定位置の時間情報が、前記コンテンツ構成情報作成部で作成された任意の構成情報のいずれに相当する時間位置であるかを照合する特定時間情報照合部と、前記符号化属性情報作成部と前記コンテンツ構成情報作成部と前記特定時間情報照合部の出力データに基づいて、前記管理情報を作成するコンテンツ管理情報作成部と、前記ＡＶ信号符号化部と前記コンテンツ管理情報作成部の出力データを、記録媒体に記録できるフォーマットに変換して記録するデータ記録部とを備えることを特徴とする。
【００４０】
また、本発明の映像音響コンテンツ記録装置は、前記コンテンツ構成情報作成部は、記録機器の操作や動作に関する情報及び、前記ＡＶ信号符号化部の出力データ構造に関する情報の双方またはいずれか一方の情報に従ってコンテンツ構成情報を作成することを特徴とする。
【００４１】
また、本発明の映像音響コンテンツ記録装置は、前記コンテンツ構成情報作成部は、記録動作の開始と終了動作に応じて始端と終端を決めるプログラム情報とそのプログラム全体を構成する１つ以上のセル情報からなる論理的かつ階層的な構成情報を少なくとも作成することを特徴とする。
【００４２】
また、本発明の映像音響コンテンツ記録装置は、前記特定時間情報照合部は、前記特定位置の時間情報が前記セル情報のいずれのセルの区間に含まれるかを照合し、前記コンテンツ管理情報作成部は、照合したセル情報の属性情報として前記特定位置の時間情報を追加することを特徴とする。
【００４３】
また、本発明の映像音響コンテンツ記録装置は、前記特定時間情報照合部は、前記特定位置の時間情報が前記セル情報のいずれのセルの区間に含まれるかを照合し、前記コンテンツ管理情報作成部は、照合するセル情報を参照して前記特定位置の時間情報から新たな区間のセル情報を作成することを特徴とする。
【００４４】
また、本発明の映像音響コンテンツ記録方法は、映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する方法であって、少なくとも前記管理情報として、前記映像及び音響信号の符号化処理動作に従って記録内容の意味的な構成情報を作成し、前記ＡＶ信号のある特定位置の時間情報を少なくとも含むデータを入力し、前記特定位置の時間情報が、前記構成情報のいずれに相当する時間位置であるかを照合し、前記特定位置の時間情報を、時間位置が照合する前記構成情報の属性情報として他の管理情報や映像及び音響信号とともに、記録媒体に記録できるフォーマットに変換して記録することを特徴とする。
【００４５】
また、本発明の映像音響コンテンツ記録方法は、映像及び音響信号と前記映像及び音響信号の記録内容に関する管理情報を記録する方法であって、少なくとも前記管理情報として、前記映像及び音響信号の符号化処理動作に従って記録内容の意味的な構成情報を作成し、前記ＡＶ信号のある特定位置の時間情報を少なくとも含むデータを入力し、前記特定位置の時間情報が、前記構成情報のいずれに相当する時間位置であるかを照合し、前記特定位置の時間情報を、時間位置が照合する前記構成情報を参照して新たな構成情報として他の管理情報や映像及び音響信号とともに、記録媒体に記録できるフォーマットに変換して記録することを特徴とする。
【００４６】
また、本発明の映像音響コンテンツ再生装置は、作成された映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を再生する装置であって、前記映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を記録するデータ記録部と、前記データ記録部より任意の時間位置の映像及び音響データを読み出すＡＶデータ読み出し部と、前記ＡＶデータ読み出し部より読み出された映像及び音響データを再生可能なアナログＡＶ信号に変換するＡＶデータ再生処理部と、前記ＡＶデータ再生処理部の出力信号を提示するＡＶ信号提示部と、前記データ記録部より前記管理情報を読み出す管理情報読み出し部と、前記管理情報読み出し部より読み出された管理情報の内容を分析する管理情報分析処理部と、前記管理情報分析処理部で分析された管理情報の内容を提示する管理情報提示部と、前記ＡＶデータ読み出し部と前記ＡＶデータ再生処理部の動作を制御するＡＶデータ再生制御部と、前記ＡＶデータ再生制御部の制御内容を指示する機器操作者の操作入力処理を行う機器操作処理部とを備えることを特徴とする。
【００４７】
また、本発明の映像音響コンテンツ再生装置は、前記管理情報分析処理部で分析され、前期管理情報提示部で提示される管理情報の内容は、少なくともセル情報の属性情報に記録された１つまたは複数の前記特定位置の時間情報を含むことを特徴とする。
【００４８】
また、本発明の映像音響コンテンツ再生装置は、前記管理情報分析処理部で分析され、前期管理情報提示部で提示される管理情報の内容は、少なくともセルの区間を定義している１つまたは複数の前記特定位置の時間情報を含むことを特徴とする。
【００４９】
また、本発明の映像音響コンテンツ再生装置は、前記ＡＶデータ再生制御部で制御される再生動作は、セルの属性情報または前記セルの区間情報で示される特定の時間位置に対する再生の開始または終了の動作であることを特徴とする。
【００５０】
また、本発明の映像音響コンテンツ再生装置は、前記ＡＶデータ再生制御部で制御される再生動作は、セルの属性情報または前記セルの区間情報で示される特定の時間位置に対する再生速度の切り替え動作であることを特徴とする。
【００５１】
また、本発明の映像音響コンテンツ再生方法は、作成された映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を再生する方法であって、前記映像及び音響データと前記管理情報が記録された記録媒体より前記管理情報を読み出して、少なくとも前記特定位置の時間情報に関する内容を分析して機器操作者に提示し、機器操作者の操作に応じて前記映像及び音響データを前記記録媒体より読み出す時間位置や再生処理内容を前記特定位置の時間情報を用いて制御して再生することを特徴とする。
【００５２】
また、本発明の映像音響コンテンツ編集再生装置は、作成された映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を編集及び再生する装置であって、前記映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を記録するデータ記録部と、前記データ記録部より任意の時間位置の映像及び音響データを読み出すＡＶデータ読み出し部と、前記ＡＶデータ読み出し部より読み出された映像及び音響データを再生可能なアナログＡＶ信号に変換するＡＶデータ再生処理部と、前記ＡＶデータ再生処理部の出力信号を提示するＡＶ信号提示部と、前記データ記録部より前記管理情報を読み出す管理情報読み出し部と、前記管理情報読み出し部より読み出された管理情報の内容を分析する管理情報分析処理部と、前記管理情報分析処理部で分析された管理情報の内容を提示する管理情報提示部と、前記ＡＶデータ読み出し部と前記ＡＶデータ再生処理部の動作を制御するＡＶデータ再生制御部と、前記管理情報提示部で提示された管理情報の内容を修正する管理情報修正部と、前記ＡＶデータ再生制御部の制御内容及び、前記管理情報修正部の修正内容を指示する機器操作者の操作入力処理を行う機器操作処理部とを備えることを特徴とする。
【００５３】
また、本発明の映像音響コンテンツ編集再生装置は、前記管理情報分析処理部で分析され、前期管理情報提示部で提示される管理情報の内容は、少なくとも前記セル情報の属性情報に記録された１つまたは複数の前記特定位置の時間情報を含むことを特徴とする。
【００５４】
また、本発明の映像音響コンテンツ編集再生装置は、前記管理情報分析処理部で分析され、前期管理情報提示部で提示される管理情報の内容は、少なくともセルの区間を定義している１つまたは複数の前記特定位置の時間情報を含むことを特徴とする。
【００５５】
また、本発明の映像音響コンテンツ編集再生装置は、前記ＡＶデータ再生制御部で制御される再生動作は、前記セルの属性情報または前記セルの区間で示される特定の時間位置に対する再生の開始または終了の動作であることを特徴とする。
【００５６】
また、本発明の映像音響コンテンツ編集再生装置は、前記ＡＶデータ再生制御部で制御される再生動作は、前記セルの属性情報または前記セルの区間で示される特定の時間位置に対する再生速度の切り替え動作であることを特徴とする。
【００５７】
また、本発明の映像音響コンテンツ編集再生方法は、作成された映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を編集及び再生する方法であって、前記映像及び音響データと前記管理情報が記録された記録媒体より前記管理情報を読み出して、少なくとも前記特定位置の時間情報に関する内容を分析して機器操作者に提示し、機器操作者の操作に応じて前記特定位置の時間情報に関する内容を修正し、その内容に従って、前記管理情報を修正して前記記録媒体に記録し、また同時に、修正した内容に従って前記映像及び音響データを前記記録媒体より読み出す時間位置や再生処理内容を制御して再生することを特徴とする。
【００５８】
また、本発明の映像音響コンテンツ編集再生装置は、作成された映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を編集及び再生する装置であって、前記映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を記録するデータ記録部と、前記データ記録部より任意の時間位置の映像及び音響データを読み出すＡＶデータ読み出し部と、前記ＡＶデータ読み出し部より読み出された映像及び音響データを再生可能なアナログＡＶ信号に変換するＡＶデータ再生処理部と、前記ＡＶデータ再生処理部の出力信号を提示するＡＶ信号提示部と、前記データ記録部より前記管理情報を読み出す管理情報読み出し部と、前記管理情報読み出し部より読み出された管理情報の内容を分析する管理情報分析処理部と、前記管理情報分析処理部で分析された管理情報の内容を提示する管理情報提示部と、前記ＡＶデータ読み出し部と前記ＡＶデータ再生処理部の動作を制御するＡＶデータ再生制御部と、前記管理情報提示部で提示された管理情報の内容を修正する管理情報修正部と、前記ＡＶデータ再生制御部の制御内容及び、前記管理情報修正部の修正内容を指示する機器操作者の操作入力処理を行う機器操作処理部と、前記ＡＶ信号のある特定位置の時間情報を少なくとも含むデータを入力または出力する特定時間情報入出力部と、を備えることを特徴とする。
【００５９】
また、本発明の映像音響コンテンツ編集再生装置は、前記管理情報分析処理部で分析され、前期管理情報提示部で提示される管理情報の内容は、少なくとも前記セル情報の属性情報に記録された１つまたは複数の前記特定位置の時間情報を含むことを特徴とする。
【００６０】
また、本発明の映像音響コンテンツ編集再生装置は、前記管理情報分析処理部で分析され、前期管理情報提示部で提示される管理情報の内容は、少なくとも前記セルの区間を定義している１つまたは複数の前記特定位置の時間情報を含むことを特徴とする。
【００６１】
また、本発明の映像音響コンテンツ編集再生装置は、前記ＡＶデータ再生制御部で制御される再生動作は、セルの属性情報または前記セルの区間で示される特定の時間位置に対する再生の開始または終了の動作であることを特徴とする。
【００６２】
また、本発明の映像音響コンテンツ編集再生装置は、前記ＡＶデータ再生制御部で制御される再生動作は、セルの属性情報または前記セルの区間で示される特定の時間位置に対する再生速度の切り替え動作であることを特徴とする。
【００６３】
また、本発明の映像音響コンテンツ編集再生方法は、作成された映像及び音響データと前記映像及び音響データの記録内容に関する管理情報を編集及び再生する方法であって、前記映像及び音響データと前記管理情報が記録され記録媒体より前記管理情報を読み出して、少なくとも前記特定位置の時間情報に関する内容を分析するか、または前記特定位置の時間情報を少なくとも含むデータを外部より入力するか、いずれか一方または両方の時間情報を機器操作者に提示し、機器操作者の操作に応じて前記特定位置の時間情報に関する内容を修正し、その内容に従って、少なくとも前記管理情報を修正して前記記録媒体に記録し、また同時に、修正した内容に従って前記映像及び音響データを前記記録媒体より読み出す時間位置や再生処理内容を制御して再生し、さらに必要に応じて、前記特定位置の時間情報を少なくとも含むデータを外部に出力することを特徴とする。
【発明の効果】
【００６４】
本発明の映像音響コンテンツの記録再生装置によれば、コンテンツの論理的な構成単位に従った再生制御を行いながら、特徴量などから抽出された特定位置の時間情報を利用した特殊再生や特定位置表示を、再生機において容易に行うことを可能とし、さらに特定位置の時間情報を管理情報の一部として保存することが可能となる。
【発明を実施するための最良の形態】
【００６５】
以下本発明の実施の形態について、図面を参照しながら説明する。
【００６６】
（実施の形態１）
図１は、本発明の実施の形態１における映像音響コンテンツの記録装置のブロック図である。また図１４は、本発明の実施の形態１における映像音響コンテンツの記録装置の記録動作のフローチャートである。
【００６７】
以下に図１及び図１４に従って、本発明の実施の形態１における映像音響コンテンツの記録装置の記録動作について説明する。
【００６８】
図１において、映像及び音響信号はＡＶ信号入力部１０１に入力され、ＡＶ信号符号化部１０２において、ＭＰＥＧ（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）方式などによって符号化される（Ｓ１）。
【００６９】
一方ＡＶ信号符号化部１０２での符号化処理における符号化方式名や符号化パラメータなどの符号化処理の属性情報は、符号化属性情報作成部１０３において作成され、また映像及び音響信号の記録内容の意味的な構成情報は、コンテンツ構成情報作成部１０４で作成され、これらの情報はＡＶコンテンツの管理情報を作成するのに必要となる管理情報作成データとして一時的にメモリに保存される（Ｓ２）。
【００７０】
本実施の形態における意味的な構成情報は、プログラムと呼ぶ構成情報とそのプログラムを構成するセルと呼ぶ構成情報からなる階層的な構造を持つものとする。またプログラムは記録動作の開始と終了動作に応じて始端と終端を決められるものとし、セルはその再生時に参照するＡＶ信号符号化部１０２での出力データ構造であるＭＰＥＧ規格のＧＯＰ単位の集合であるＶＯＢ（ビデオオブジェクト）に対応して決められるものとする。
【００７１】
ＡＶ信号符号化部１０２において符号化されたＡＶデータは、データ記録部１０９において記録媒体に記録できるフォーマットに変換して適宜記録される（Ｓ３）。
【００７２】
一方、ＡＶ信号入力部１０１の出力信号は特徴量分析部１０５に入力され、ここにおいて映像及び音響信号の物理的な特徴量が分析される（Ｓ５）。本実施例において分析される物理的な特徴量は、音楽区間を特定するための特徴量であり具体的には、パワー包絡線の近似直線の傾きや数秒後のパワー値の比など音量変化に関する特徴量と、周波数重心や特定周波数の変化度合いを算出したり、エネルギー分布の比較を行ったりするスペクトルに関する特徴量と、自己相関等を用いて時間軸や周波数軸の波形とのマッチング具合を算出した特徴量などを算出するものである。
【００７３】
さらにこれら特徴量分析部１０５において算出された特徴量は、特定時間情報作成部１０６において、ある判定基準により特定位置の時間情報が作成される（Ｓ６）。具体的には、音の持続性を示す特徴量、ベース音を示す低域でのエネルギー分布を示す特徴量、周期的な繰り返し音つまりビートがあるかどうかを示す特徴量の値などがあらかじめ決められた閾値より大きいときに音楽区間であると判定する。
【００７４】
また音楽のみならず、音声、歓声、無音といった音響イベント毎に音響イベントを判定する基準を持つことによって、複数種類の音響イベントが特定時間情報作成部１０６において判定されてもよいものとする。
【００７５】
また特徴量分析部１０５及び特定時間情報作成部１０６における別の分析内容として、映像信号レベルや映像内容の動き量変化やテロップ等の検出といった映像信号の特徴量を分析することによって、場面の切り変わりや特定場面の検出といった映像イベントが特定時間情報作成部１０６において判定されてもよいものとする。
【００７６】
またこれらの特定時間情報についても一時的にメモリに保存される（Ｓ７）。
【００７７】
次に記録が終了すると、一時的にメモリに保存された管理情報作成データと特定時間情報が特定時間情報照合部１０７に読み込まれ（Ｓ８）、特定時間情報作成部１０６で作成された特定位置の時間情報が、コンテンツ構成情報作成部１０４で作成された任意の構成情報のいずれに相当する時間位置であるかを照合する（Ｓ９）。なお具体的な照合の方法については別の図を用いて後述する。
【００７８】
最後に、符号化属性情報作成部１０３とコンテンツ構成情報作成部１０４と特定時間情報照合部１０７の出力データに基づいて、記録されるＡＶコンテンツの記録内容に関する管理情報がコンテンツ管理情報作成部１０８において作成され（Ｓ１０）、データ記録部１０９において記録媒体に記録できるフォーマットに変換して記録される（Ｓ１１）。
【００７９】
特に特定時間情報照合部１０７の出力データである時間軸上で照合したセルに対する音楽区間の開始位置情報は、コンテンツ管理情報作成部１０８において当該セルの属性情報であるエントリーポイントとして記録される。なおこの特定位置の時間情報に関する具体的な記録フォーマットに関しても別の図を用いて後述する。
【００８０】
以上が本実施例における映像音響コンテンツの記録装置の一連の記録動作の説明である。
【００８１】
次に図５を用いて特定時間情報照合部１０７における具体的な照合の方法について説明する。図５においては、記録されているＡＶコンテンツの論理的な階層構造と本実施の形態においては音楽区間の開始位置情報である特定位置の時間情報との関係を示している。
【００８２】
まず論理的な階層構造としては、全体の記録内容は、３つのプログラムＰＲＧ１、ＰＲＧ２、ＰＲＧ３で構成され、さらにそれぞれのプログラムは、ＰＲＧ１を構成する１つのセルＣＥＬＬ１、ＰＲＧ２を構成する３つのセルＣＥＬＬ２、ＣＥＬＬ３、ＣＥＬＬ４、ＰＲＧ３を構成する１つのセルＣＥＬＬ５から構成されている。これらの構成情報は前述した通り、コンテンツ構成情報作成部１０４で作成されるもので、それぞれのプログラムの始端と終端は記録動作の開始と終了によって決定され、またそれぞれのセルの始端と終端は上位のプログラムの始終端とプログラム記録動作中の一時停止など符号化動作の開始と停止によって決定されている。
【００８３】
このような論理的な階層構造をもつＡＶコンテンツの音響信号に対して、音楽区間の開始位置を検出する特徴量分析及び判定を特徴量分析部１０５と特定時間情報作成部１０６において行った結果、Ｔ１からＴ５の時間位置が算出されている。そこで特定時間情報照合部１０７においては、上記のＴ１からＴ５の時間位置がどのＣＥＬＬのどの時間位置に相当するかが照合される。その結果、Ｔ１はＣＥＬＬ１に、Ｔ２はＣＥＬＬ３に、Ｔ３はＣＥＬＬ４に、Ｔ４とＴ５はＣＥＬＬ５に含まれると判定され、それぞれのＣＥＬＬ番号と当該ＣＥＬＬ先頭からの時間位置情報であるＥＰ１からＥＰ５がコンテンツ管理情報作成部１０８に出力される。コンテンツ管理情報作成部１０８においては、各当該ＣＥＬＬのエントリーポイント情報としてＴ１からＴ５の時間位置が管理情報に記録されることになる。
【００８４】
次に、上記の特定位置の時間情報に関する具体的な記録フォーマットについて説明する。
【００８５】
図１２は、コンテンツ管理情報作成部１０８で作成される管理情報のフォーマットの中で本実施の形態における特定位置の時間情報に関する部分のデータフォーマットについて示すものである。
【００８６】
図１２においてオリジナルＰＧＣ情報２０１は、本実施の形態における特定位置の時間情報が記録される部分である。オリジナルＰＧＣ情報２０１のデータフォーマットの概要は、まず最初にＰＧＣ一般情報２０２があって、全プログラム数であるＰＧ数２１０と全セル数であるセルサーチポインタ数２１１が記録されている。次にプログラム１に関する情報を含むＰＧ１情報２０３があってそのプログラムを構成するセルの数であるセル数２１３などが記録されている。このプログラム１に関する情報と同等の情報は、プログラムの数だけ繰り返してＰＧ２情報２０４とＰＧ３情報２０５に記録されている。次にセル１に関する情報が記録されている領域へのアドレス情報であるセル１情報サーチポインタ２０６があり、同様にセル５に対応するセル５情報サーチポインタ２０７まで続く。その次がセル１に関する情報が記録されているムービーセル１情報２０６である。この情報領域にはムービーセル一般情報２１９があって、セル１を再生する場合に参照する管理情報中の別領域に存在するＶＯＢ情報（図示せず）へのリンク情報であるＭ＿ＶＯＢＩサーチポインタ番号２２４やセル１に含まれるエントリーポイント数であるセルエントリーポイント数２２５やセル１の区間を定義するセル１開始時間２２６及びセル１終了時間２２７が記録されている。
【００８７】
さらに、特定時間情報照合部１０７においてセル１の区間中に特定時間Ｔ１が存在すると判定されたので、ムービーセル１情報２０８にはムービーセルＥＰ１情報２２０が存在し、ＥＰ１に相当する時間情報がセル１先頭からの時間としてエントリーポイント時間２２９に記録されている。
【００８８】
以降、セル５までのセル情報がムービーセル１情報２０８と同様の内容で順次存在し、各セルに上記特定位置の時間情報が含まれていれば、含まれる特定時間の数だけムービーセルＥＰ情報が存在する。
【００８９】
以上が本実施例における特定位置の時間情報に関する具体的な記録フォーマットであるが、特定位置の時間情報がセル情報に含まれる時間情報として記録されていれば図１２に示す全ての内容が記録されていなくても、また図１２に示す以外の情報が含まれていてもよいものとする。
【００９０】
次に図６を用いて特定時間情報照合部１０７における具体的な照合の第２の方法について説明する。図６においては、特定位置時間情報によって作成するＡＶコンテンツの論理構造と本実施例においては音楽区間の開始位置情報である特定位置時間情報との関係を示している。
【００９１】
先述した第１の方法においては、特定位置の時間情報をコンテンツ構成情報作成部１０４で作成される論理的な階層構造の１階層であるセル情報に含まれる時間情報として記録したが、第２の方法においては、特定位置の時間情報によって、コンテンツ構成情報作成部１０４で作成される論理構造とは別に、新たな論理構造すなわちセル情報を作成するものである。
【００９２】
ＡＶコンテンツの音響信号に対して、音楽区間を検出する特徴量分析及び判定を特徴量分析部１０５と特定時間情報作成部１０６において行った結果、Ｔ１、Ｔ３、Ｔ５が音楽区間の開始時間、Ｔ２、Ｔ４、Ｔ６が音楽区間の終了時間として算出されている。そこで特定時間情報照合部１０７においては、新たなセル情報を作成するのに必要な情報として、上記のＴ１からＴ６の時間位置がどのＶＯＢの時間位置に相当するかが照合される。その結果、Ｔ１とＴ２の区間はＶＯＢ１に、Ｔ３とＴ４の区間はＶＯＢ４に、Ｔ５とＴ６の区間はＶＯＢ５に含まれると判定され、それぞれの区間毎に照合したＶＯＢ番号と当該ＶＯＢにおける時間情報情がコンテンツ管理情報作成部１０８に出力される。コンテンツ管理情報作成部１０８においては、Ｔ１からＴ６の時間位置が新たなＣＥＬＬ区間として管理情報に記録されることになる。
【００９３】
次に、上記第２の方法における管理情報の具体的な記録フォーマットについて説明する。
【００９４】
図１３は、コンテンツ管理情報作成部１０８で作成される管理情報のフォーマットの中で新たなＣＥＬＬ区間情報に関する部分のデータフォーマットについて示すものである。
【００９５】
図１３においてＵＤ（Ｕｓｅｒ  Ｄｅｆｉｎｅｄ）＿ＰＧＣ情報３０１は、本実施例における特定位置の時間情報が記録される部分である。ＵＤ＿ＰＧＣ情報３０１のデータフォーマットは、前述のオリジナルＰＧＣ情報２０１と類似している部分もあるので、上記第２の方法においてＴ１からＴ６の時間位置が新たなＣＥＬＬ区間として記録される部分についてのみ説明する。
【００９６】
ＵＤ＿ＰＧＣ情報３０１はオリジナルＰＧＣ情報２０１とは別の領域に引き続いて記録される。オリジナルＰＧＣ情報２０１のデータフォーマットと比較して、プログラム情報に相当する部分は存在しないが、セル情報に相当する部分は同じデータ構造である。
【００９７】
上記第２の方法においては、Ｔ１からＴ６の時間情報で３つのセル区間が定義されるので、ムービーセル１情報３０３からムービーセル３情報３０４が存在する。ムービーセル１情報３０３中にはムービーセル一般情報３０５があって、さらにその中には前述の特定時間情報照合部１０７におけるＶＯＢとの照合結果が反映されるＭ＿ＶＯＢＩサーチポインタ番号３０８や当該ＶＯＢにおいてＴ１の時間位置に相当するセル１開始時間３１０やＴ２の時間位置に相当するセル１終了時間３１１が記録されている。
【００９８】
以降、セル３までのセル情報がムービーセル１情報３０３と同様の内容で順次存在している。また第２の方法においても特定位置の時間情報によって、オリジナルＰＧＣ情報２０１とは別の領域に新たなセル情報が定義され記録されていれば図１３に示す全ての内容が記録されていなくても、また図１３に示す以外の情報が含まれていてもよいものとする。
【００９９】
上記第２の方法においては、特定位置の時間情報によって、オリジナルＰＧＣ情報２０１とは別の領域に新たなセル情報を定義したが、さらにこれとは別の第３の方法として、特定位置の時間情報によって、オリジナルＰＧＣ情報２０１内に新たなセル情報を定義することも考えられる。
【０１００】
図７に示す論理構造は、図５で示す各セル情報に加えて、Ｔ１からＴ６までの特定区間情報によってオリジナルＰＧＣ情報２０１内のセル情報に新たなセル情報を追加するものである。
【０１０１】
図７において（ＣＥＬＬ１）から（ＣＥＬＬ５）は、コンテンツ構成情報作成部１０４で作成されたセル情報であり、図５で示すセル情報と同様にして作成されるものである。これらのセル情報に、前述の第２の方法と同様に音楽区間を検出する特徴量分析及び判定を特徴量分析部１０５と特定時間情報作成部１０６において行った結果得られるＴ１からＴ６で構成される３つの音楽区間情報により、ＣＥＬＬ２、ＣＥＬＬ６、ＣＥＬＬ９の新たなセル情報を追加して定義する。
【０１０２】
その結果、オリジナルＰＧＣ情報２０１内のセル情報は合計１０個となり、そのデータフォーマットは、図１２で示すデータフォーマットでセル情報の数が１０個であるものになる。ただしこの場合、どのセル情報が音楽区間を示すものか判らなくなるので、音楽区間を示すセルについては図１２におけるムービーセルＥＰ１情報２２０内のＰＲＩテキスト情報２３０に音楽区間を示す識別情報を記録するものとする。
【０１０３】
さらに図６で示す前述第２の方法の拡張方法として、オリジナルＰＧＣ情報２０１とは別の領域に作成される各セルにも第１の方法と同様にエントリーポイントを追加する第４の方法が考えられる。これは各セルが第２の方法と同様に音楽区間であるとして、さらにそのなかでボーカル等の音声区間の開始位置を各セルの属性情報であるエントリーポイントとして記録する場合を想定している。図８において、ＣＥＬＬ１、ＣＥＬＬ２、ＣＥＬＬ３が音楽区間であるセルであり、各セル区間中に存在するＥＰ１、ＥＰ２、ＥＰ３が各セルの属性情報であってボーカル等の音声区間の開始位置を示すエントリーポイントである。
【０１０４】
このような論理構造を構成するためには、特徴量分析部１０５と特定時間情報作成部１０６において音楽区間の検出と同時に音楽区間に含まれる音声区間を検出すれば良い。また第４の方法による特定区間情報を記録するデータフォーマットは図１３に示すムービーセル情報内に、図１２のムービーセル情報と同様に定義できるエントリーポイントの数だけムービーセルＥＰ情報を追加すれば良い。
【０１０５】
以上が本発明の実施の形態１における映像音響コンテンツの記録装置の説明である。
【０１０６】
（実施の形態２）
図３は、本発明の実施の形態２における映像音響コンテンツの記録装置のブロック図である。図１と同一部分には同一符号を付しその動作に関する説明を割愛する。
【０１０７】
実施の形態２は実施の形態１と比較して、記録されるＡＶコンテンツが有するジャンル情報や制作情報、及びコンテンツ内容に関連するキーワード情報などを入力し、その入力データの内容に従って特徴量分析部１０５や特定時間情報作成部１０６や特定時間情報照合部１０７の動作を制御するコンテンツ属性情報入力部１１０が追加されている点において異なる。
【０１０８】
本実施の形態においても、特徴量分析部１０５では映像または音響信号のさまざまな物理的特徴量が分析できるものとし、その算出された特徴量に基づいて特定時間情報作成部１０６において音楽のみならず、音声、歓声、無音といった複数種類の音響イベントが判定される。さらに、特定時間情報照合部１０７において照合される論理構造も前述の通り既存のセル情報にエントリーポイントを定義したり、新たなセル情報を作成するなど複数の方法が考えられる。本実施の形態においては、これら複数の選択肢のうちどの動作を選択するかを決定するためにコンテンツ属性情報入力部１１０に入力される情報を使用する。
【０１０９】
コンテンツ属性情報入力部１１０に入力される上記の各情報は、コンピュータネットワークや放送電波受信部など図示しない外部とのインターフェイス機能を通じて番組情報を取得するか機器のユーザーがマニュアルで入力するかいずれか一方または双方を組み合わせて入力しても良いものとする。
【０１１０】
例えばＴＶ番組を記録するとして、その番組のジャンル情報をコンテンツ属性情報入力部１１０に入力し、入力されたジャンル情報が音楽番組であれば特徴量分析部１０５と特定時間情報作成部１０６において音楽区間を特定時間情報として検出し、さらに、特定時間情報照合部１０７において図６に示すＵＤ＿ＰＧＣ情報３０１に新たなセル区間を作成するための動作を行う。あるいは、入力されたジャンル情報がスポーツ番組であれば特徴量分析部１０５と特定時間情報作成部１０６において歓声区間を重要場面とみなした特定時間情報として検出し、さらに、特定時間情報照合部１０７において図５に示すオリジナルＰＧＣ情報２０１のセル情報にエントリーポイントを作成するための動作を行う。また入力されたジャンル情報がニュース番組であれば特徴量分析部１０５と特定時間情報作成部１０６において音声区間を特定時間情報として検出し、さらに、特定時間情報照合部１０７において図７に示すオリジナルＰＧＣ情報２０１のセル情報に新たなセル情報を作成するための動作を行う。
【０１１１】
以上のような動作を行うコンテンツ属性情報入力部１１０を設けることによって、記録されるＡＶコンテンツの内容に従って最適な特定時間の算出と効率的な再生制御を可能とする最適な論理構造の作成が可能となる。
【０１１２】
（実施の形態３）
図４は、本発明の実施の形態３における映像音響コンテンツの記録装置のブロック図である。図１と同一部分には同一符号を付しその動作に関する説明を割愛する。
【０１１３】
実施の形態３は実施の形態１と比較して、特徴量分析部１０５と特定時間情報作成部１０６が存在せず、特定位置の時間情報を少なくとも含むデータを入力する特定時間情報入力部１１１が存在する点において異なっている。
【０１１４】
本実施の形態においては、音楽、音声、歓声、無音といった音響イベントが発生する特定時間情報を記録装置内部で算出するのではなく、外部で作成された少なくとも特定時間情報を含むデータを特定時間情報入力部１１１に入力するものである。尚外部からのデータを受け入れるために、特定時間情報入力部１１１においては特定時間情報の時間単位の変換等必要なデータフォーマットの変換は行われるものとする。
【０１１５】
特定時間情報入力部１１１に入力される上記の各情報は、コンピュータネットワークや放送電波受信部など図示しない外部とのインターフェイス機能を通じて取得するか機器のユーザーがマニュアルで入力するかいずれか一方または双方を組み合わせて入力しても良いものとする。
【０１１６】
以上のような動作を行う特定時間情報入力部１１１を設けることによって、特徴量抽出のために記録装置に必要となるハードウエアリソースが不要となって、記録装置の制作コストが低減でき、またＡＶコンテンツの制作者によって作成されるような精度の高い特定時間情報を受け入れることも可能となるので、低コストの装置でより高度な効率的な再生制御を可能とする論理構造の作成が可能となる。
【０１１７】
（実施の形態４）
図９は、本発明の実施の形態４における映像音響コンテンツの再生装置のブロック図である。また図１５は本発明の実施の形態４における映像音響コンテンツの再生装置において特定位置の時間情報を利用した特定位置表示を行う動作のフローチャートである。
【０１１８】
また本実施の形態において図９に示すデータ記録部１０９には、本発明の実施の形態１の構成による映像音響コンテンツ記録装置で記録されたＡＶデータ及び管理情報が記録されている。
【０１１９】
本実施の形態において特定位置の時間情報を利用した特定位置表示を行うためには、まず特定位置の時間情報を含む管理情報をデータ記録部１０９より管理情報読出し部１１２によって読出し（Ｓ２０）、読出した管理情報の中から特定時間情報を含むに論理構造であるセル情報を抽出して（Ｓ２１）その内容を分析する処理を管理情報分析処理部１１３で行う。
【０１２０】
ここで本実施の形態における映像音響コンテンツの再生装置の動作を具体的に説明するために、本実施の形態において特定時間情報によって作成された論理構造は図７に示すものであるとする。実施の形態１での説明の通り、図７に示す論理構造では、オリジナルＰＧＣ情報２０１内に合計１０個のセル情報が存在し、そのうちＣＥＬＬ２とＣＥＬＬ６とＣＥＬＬ９が音楽区間を示すセル情報である。
【０１２１】
まず管理情報分析処理部１１３は、オリジナルＰＧＣ情報２０１内に存在するセル情報のうち音楽区間を示すセル情報をＰＲＩテキスト情報中に記録された音楽区間を示す識別情報より判断し（Ｓ２２）、音楽区間と判断されたセル番号を取得する（Ｓ２３）。次にその当該セル番号のムービーセル一般情報２１９内のＭ＿ＶＯＢＩサーチポイント番号２２４を取得して（Ｓ２４）、管理情報内のＶＯＢ情報にアクセスして当該セルの先頭画像が存在する画像データへのアドレス情報を取得してＡＶデータ再生制御部１１６に出力する（Ｓ２５）。ＡＶデータ再生制御部１１６は、入力されたアドレス情報によって音楽区間のセルの先頭画像データを読み出すようにＡＶデータ読出し部１１７を制御し（Ｓ２６）、データ記録部１０９から読み出されたＡＶデータはＡＶデータ再生処理部１１８において復号化されて（Ｓ２７）、ディスプレイ装置を備えるＡＶ信号提示部１１９においてユーザーに提示される（Ｓ２８）。
【０１２２】
以上の動作を全ての音楽区間セルに対して繰り返して行うことにより、特定時間情報を利用した特定位置表示として、ＡＶ信号提示部１１９には全ての音楽区間の先頭画像が表示されることになる。
【０１２３】
また上記説明では、管理情報分析処理部１１３で音楽区間のセルの先頭画像へのアドレスを取得する動作を説明したが、この他にも音楽区間のセル番号や、音楽区間のセルの開始終了時間や再生時間などの情報を管理情報分析処理部１１３で取得し、管理情報提示部１１４においてユーザーに提示してもよいものとする。
【０１２４】
次に、音楽区間のセルに関する情報をユーザーに提示した以降の動作について説明する。まずユーザーは、ＡＶ信号提示部１１９に提示された音楽区間の先頭画像または管理情報提示部１１４に提示された音楽区間のセル番号から再生を開始したいセル情報を選択する。そしてその選択操作は機器操作処理部１１５で処理され、選択されたセル区間を再生すべくＡＶデータ再生制御部１１６がＡＶデータ読出し部１１７を制御し、データ記録部１０９から読み出された映像音響データがＡＶデータ再生処理部１１８で映像音響データが復号化されてＡＶ信号提示部１１９から映像及び音響信号が再生される。
【０１２５】
また別の再生動作として、音楽区間であるセルとそれ以外のセルを連続して再生する場合に、ＡＶデータ再生制御部１１６が管理情報分析処理部１１３からの特定時間情報に基づいて音楽区間であるセルとそれ以外のセルを識別してＡＶデータ再生処理部１１８を制御し、音楽区間以外のセルに対して再生速度を速めるなどの特殊再生を行うものであってもよいとする。
【０１２６】
（実施の形態５）
図１０は、本発明の実施の形態５における映像音響コンテンツの編集再生装置のブロック図である。図９と同一部分には同一符号を付しその動作に関する説明を割愛する。
【０１２７】
実施の形態５は実施の形態４と比較して、データ記録部１０９から読み出され管理情報分析処理部１１３で分析処理された管理情報の内容を修正してデータ記録部１０９に書き戻す管理情報修正部１２０が存在する点において異なっている。
【０１２８】
この管理情報修正部１２０を設けることによって、実施の形態４と同様の動作で、ＡＶ信号提示部１１９もしくは管理情報提示部１１４に提示された内容をユーザーが判断して、さらにユーザーが先頭画像位置や再生開始時間及び終了時間の値の修正操作を行えば、その修正操作を機器操作処理部１１５で受けて管理情報修正部１２０に出力し、管理情報修正部１２０によって修正内容が反映された管理情報をデータ記録部１０９に書き戻すことが可能になる。
【０１２９】
本実施の形態での構成は、特徴量分析部１０５と特定時間情報作成部１０６によって作成された特定時間情報をユーザーが修正したい場合に有益な機能を有するものとなる。
【０１３０】
（実施の形態６）
図１１は、本発明の実施の形態６における映像音響コンテンツの編集再生装置のブロック図である。図１０と同一部分には同一符号を付しその動作に関する説明を割愛する。
【０１３１】
実施の形態６は実施の形態５と比較して、特定位置の時間情報を含むデータを装置の外部に対して入出力することができる特定時間情報入出力部１２１が存在する点において異なっている。
【０１３２】
特定時間情報入出力部１２１において入出力される特定位置の時間情報を含むデータは、コンピュータネットワークや放送電波受信部など図示しない外部とのインターフェイス機能を通じて取得するか機器のユーザーがマニュアルで入力するかいずれか一方または双方を組み合わせて入力しても良いものとする。
【０１３３】
また特定時間情報入出力部１２１は、機器外部とのデータ交換を行うために管理情報分析処理部１１３でデータ処理できるデータフォーマットへの変換機能を有するものとし、さらに、入出力する特定時間情報の対象となるＡＶコンテンツデータを特定できるＵＲＬ情報など特定時間情報以外の情報を含むデータを入出力できる機能を有するものであってよい。
【０１３４】
本実施の形態での構成では、ＡＶコンテンツの制作者によって作成されるような精度の高い特定時間情報を受け入れることも可能となり、また特定区間情報に関する情報を他の機器に出力することも可能となるので、特定位置の時間情報を複数のシステムや機器で交換したり共有する場合に有益な機能を有するものとなる。
【産業上の利用可能性】
【０１３５】
本発明にかかる映像音響コンテンツの記録再生装置は、映像音響信号の特徴量などから抽出された特定位置の時間情報と記録される映像音響信号の論理的な構成単位での時間情報とを照合して他の管理情報とともに記録する機能を有し、特定時間情報を利用した特殊再生や特定位置表示を、再生機において容易に行えるものとして有用である。
【図面の簡単な説明】
【０１３６】
【図１】本発明の実施の形態１における映像音響コンテンツ記録装置のブロック図
【図２】従来の映像音響コンテンツ記録装置のブロック図
【図３】本発明の実施の形態２における映像音響コンテンツ記録装置のブロック図
【図４】本発明の実施の形態３における映像音響コンテンツ記録装置のブロック図
【図５】本発明の実施の形態１における特定位置時間情報とＡＶコンテンツの論理的構成情報との第１の例の関係図
【図６】本発明の実施の形態１における特定位置時間情報とＡＶコンテンツの論理的構成情報との第２の例の関係図
【図７】本発明の実施の形態１における特定位置時間情報とＡＶコンテンツの論理的構成情報との第３の例の関係図
【図８】本発明の実施の形態１における特定位置時間情報とＡＶコンテンツの論理的構成情報との第４の例の関係図
【図９】本発明の実施の形態４における映像音響コンテンツ再生装置のブロック図
【図１０】本発明の実施の形態５における映像音響コンテンツ編集再生装置のブロック図
【図１１】本発明の実施の形態６における映像音響コンテンツ編集再生装置のブロック図
【図１２】本発明の実施の形態１における特定位置時間情報を記録する部分の管理情報フォーマットの第１の例を示す図
【図１３】本発明の実施の形態１における特定位置時間情報を記録する部分の管理情報フォーマットの第２の例を示す図
【図１４】本発明の実施の形態１における映像音響コンテンツの記録装置の記録動作のフローチャート
【図１５】本発明の実施の形態４における映像音響コンテンツの再生装置において特定位置の時間情報を利用した特定位置表示を行う動作のフローチャート
【符号の説明】
【０１３７】
１０１    ＡＶ信号入力部
１０２    ＡＶ信号符号化部
１０３    符号化属性情報作成部
１０４    コンテンツ構成情報作成部
１０５    特徴量分析部
１０６    特定時間情報作成部
１０７    特定時間情報照合部
１０８    コンテンツ管理情報作成部
１０９    データ記録部
１１０    コンテンツ属性情報入力部
１１１    特定時間情報入力部
１１２    管理情報読出し部
１１３    管理情報分析処理部
１１４    管理情報提示部
１１５    機器操作処理部
１１６    ＡＶデータ再生制御部
１１７    ＡＶデータ読出し部
１１８    ＡＶデータ再生処理部
１１９    ＡＶ信号提示部
１２０    管理情報修正部
１２１    特定時間情報入出力部
【図１】
2005223794.tif 000003
【図２】
2005223794.tif 000004
【図３】
2005223794.tif 000005
【図４】
2005223794.tif 000006
【図５】
2005223794.tif 000007
【図６】
2005223794.tif 000008
【図７】
2005223794.tif 000009
【図８】
2005223794.tif 000010
【図９】
2005223794.tif 000011
【図１０】
2005223794.tif 000012
【図１１】
2005223794.tif 000013
【図１２】
2005223794.tif 000014
【図１３】
2005223794.tif 000015
【図１４】
2005223794.tif 000016
【図１５】
2005223794.tif 000017