(57)【特許請求の範囲】
【請求項１】
入力されるデジタル音声信号およびデジタル映像信号のそれぞれを順次符号化する符号化手段と、
少なくとも前記符号化手段により符号化された音声の符号化データおよび映像の符号化データと検索用データとを一定単位毎に順次多重化する多重化手段と、
前記多重化手段により多重化された一定単位のデータを当該一定単位毎に順次記録する記録手段と、
前記多重化手段にて検索用データを多重化する際に未確定である検索用データにダミーデータを仮検索用データとして順次供給するダミーデータ供給手段と、
前記一定単位の多重化データが生成される毎に、それまで未確定であった仮検索用データのうち確定した仮検索用データを抽出し、この仮検索用データを、当該確定した検索用データに順次置換する置換手段と、を備えたデジタル音声映像情報の記録装置。
【請求項２】
前記置換手段により処理された多重化データを音声信号と映像信号とのそれぞれに復号化する復号化手段と、
前記復号化手段により復号化された音声信号および映像信号を再生する再生手段と、をさらに備えた請求項１記載のデジタル音声映像情報の記録装置。
【請求項３】
前記多重化手段により多重化されたデータをチャプタ毎に順次分割して前記記録手段に記録するチャプタ分割手段と、
前記記録手段に記録された多重化データから各チャプタの先頭の静止画像を抽出して復号化し、所定の大きさに調整してチャプタインデックス画面に合成して前記記録手段に記録するインデックス画面編集手段と、を備えた請求項１又は２記載のデジタル音声映像情報の記録装置。
【請求項４】
前記多重化手段により多重化されたデータをチャプタ毎に順次分割して前記記録手段に記録するチャプタ分割手段と、
前記チャプタ分割手段により分割され、前記記録手段に記録された直後の多重化データから当該チャプタの先頭の所望範囲の動画像を抽出して復号化し、所定の大きさに調整してチャプタインデックス画面に合成して記録する第１のインデックス画面編集手段と、
前記第１のインデックス画面編集手段によりチャプタの先頭動画像が記録されたら、前記記録された復号化データを符号化して前記記録手段に記録する第２のインデックス画面編集手段と、を備えた請求項１又は２記載のデジタル音声映像情報の記録装置。
【請求項５】
前記インデックス画面編集手段は、前記チャプタ分割手段により分割されたチャプタの数量が、前記１つのチャプタインデックス画面に表示できる数量を超えたとき、自動的に次のチャプタインデックス画面を作成する請求項３又は４記載のデジタル音声映像情報の記録装置。
【請求項６】
前記インデックス画面編集手段は、前記チャプタインデックス画面が複数画面となる場合、各チャプタインデックス画面に画面送り／戻り用アイコンを各チャプタインデックス画面に合成するとともに、各チャプタインデックス画面の関連付け用ナビゲーションデータを編集する請求項５記載のデジタル音声映像情報の記録装置。
【請求項７】
全てのチャプタにつきインデックス画像が前記記録手段に記録されたら当該チャプタインデックス画面データを自動的に符号化して前記記録手段に記録するインデックス画面符号化手段と、
前記記録手段に記録されたインデックス画面の符号化データを音声信号と映像信号とのそれぞれに復号化する復号化手段と、
前記復号化手段により復号化された音声信号および映像信号を再生する再生手段と、をさらに備えた請求項３〜６の何れかに記載のデジタル音声映像情報の記録装置。
【請求項８】
前記記録手段がハードディスクドライブである請求項１〜７の何れかに記載のデジタル音声映像情報の記録装置。
【請求項９】
前記記録手段に記録された多重化データを他の媒体記録装置に出力するための端子を備える請求項１〜８の何れかに記載のデジタル音声映像情報の記録装置。
【請求項１０】
アナログ音声信号をデジタル音声信号に変換する音声Ａ／Ｄ変換手段およびアナログ映像信号をデジタル映像信号に変換する映像Ａ／Ｄ変換手段の少なくとも一方を備え、これら少なくとも一方のＡ／Ｄ変換手段により変換されたデジタル信号が前記符号化手段に送出される請求項１〜９の何れかに記載のデジタル音声映像情報の記録装置。
【請求項１１】
デジタル音声信号をアナログ音声信号に変換する音声Ｄ／Ａ変換手段およびデジタル映像信号をアナログ映像信号に変換する映像Ｄ／Ａ変換手段の少なくとも一方を備え、これら少なくとも一方のＤ／Ａ変換手段により変換されたアナログ信号が前記再生手段に送出される請求項２又は７記載のデジタル音声映像情報の記録装置。
【請求項１２】
入力されるデジタル音声信号およびデジタル映像信号のそれぞれを順次符号化し、
少なくとも、符号化された音声の符号化データおよび映像の符号化データと検索用データとを一定単位毎に順次多重化するに際し、未確定である検索用データに仮検索用データとしてダミーデータを供給して多重化し、
この多重化された一定単位のデータを当該一定単位毎に順次記録し、
前記一定単位の多重化データが生成される毎に、それまで未確定であった仮検索用データのうち確定した仮検索用データを抽出し、この仮検索用データを、当該確定した検索用データに順次置換するデジタル音声映像情報の記録方法。
【請求項１３】
前記多重化されたデータをチャプタ毎に順次分割し、
この分割された多重化データを順次記録し、
この記録された多重化データから各チャプタの先頭の静止画像を抽出して復号化し、所定の大きさに調整してチャプタインデックス画面に合成して記録するステップをさらに有する請求項１２記載のデジタル音声映像情報の記録方法。
【請求項１４】
前記多重化されたデータをチャプタ毎に順次分割し、
この分割された多重化データを順次記録し、
この分割され記録された直後の多重化データから当該チャプタの先頭の所望範囲の動画像を抽出して復号化し、所定の大きさに調整してチャプタインデックス画面に合成して記録し、
記録された復号化データを符号化して記録するステップをさらに有する請求項１２記載のデジタル音声映像情報の記録方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、映像信号や音声信号をデジタルビデオ媒体に記録する記録装置に関し、特にオーサリング処理を自動的に実行できる音声映像情報の記録装置に関する。
【０００２】
【従来の技術】
映画などの家庭用ビデオソフトに使用されるＤＶＤでは、複数の言語の中から所望の言語を選択できるマルチ言語機能、複数の異なるカメラアングルの中から所望のカメラアングルの映像を選択できるマルチアングル機能、複数のストーリーの中から所望のストーリーの映像および音声を選択できるマルチストーリー機能、幼児や未成年者などの視聴者に応じて過激なシーンをカットできるパレンタルロック機能、オリジナルのワイド映像をモニターのタイプに応じて選択できるマルチアスペクト機能などが用意されている。
【０００３】
【発明が解決しようとする課題】
（１）こうしたＤＶＤは、記録する信号をディスク原盤に記録するオーサリング工程と、原盤を量産するレプリケーション工程とを経てユーザーに提供されるが、オーサリング工程では、上述した種々の機能を編集するための熟練技能が必要とされる。このため、たとえばテレビ放送で提供された音声及び映像信号を、上述した各種の機能を付加して自動的に記録する、簡易なＤＶＤ記録装置の開発が望まれていた。
【０００４】
（２）ＤＶＤに記録されるデータフォーマットを図１４に示す。オーサリング工程では、音声デジタル信号をたとえばドルビーデジタル方式（ＡＣ−３）で符号化し、映像デジタル信号をＭＰＥＧ２により可変レートにて符号化するとともに、これら符号化された音声データと映像データとを、一定期間ごと、たとえばＭＰＥＧ２規格にて定義された単独で再生可能な画像の最小単位（ＧＯＰ：Ｇｒｏｕｐ  ｏｆ  ｐｉｃｔｕｒｅｓ）で多重化する。なお、ＤＶＤビデオ規格にて定義された、ナビゲーションパック（ＮＶＰＣＫ）で始まり整数個のＧＯＰを含むユニットをＶＯＢＵ（Ｖｉｄｅｏ  Ｏｂｊｅｃｔ  Ｕｎｉｔ）と称するが、以下では１ＧＯＰ＝１ＶＯＢＵとして説明する。また同図に示すように、複数のＶＯＢＵが集合して一つのチャプタ（たとえば一まとまりのシーン）を構成し、複数のチャプタが集合して一つのタイトル（たとえば一本の映画）を構成する。
【０００５】
一つのＶＯＢＵには、ナビゲーションデータ（すなわちＤＶＤビデオ規格にて再生される音声および映像のデータ属性と制御に関するデータ）のみを含むナビゲーションパックが含まれ、この制御データの中には再生制御情報（ＰＣＩ：Ｐｒｅｓｅｎｔａｔｉｏｎ  Ｃｏｎｔｒｏｌ  Ｉｎｆｏｒｍａｔｉｏｎ）とデータサーチ制御情報（ＤＳＩ：Ｄａｔａ  Ｓｅａｒｃｈ  Ｉｎｆｏｒｍａｔｉｏｎ）とが含まれ、ＤＳＩには順早送り及び逆早戻し再生のためのデータ（ＶＯＢＵ・ＳＲＩ：ＶＯＢＵ  Ｓｅａｒｃｈ  Ｉｎｆｏｒｍａｔｉｏｎ）が含まれる。
【０００６】
ＶＯＢＵ・ＳＲＩは、そのＤＳＩが含まれるＶＯＢＵの再生開始時刻の前後の所定時間ｔに再生されるＶＯＢＵの先頭アドレスが記録されたテーブルである。したがって、符号化した一つのＶＯＢＵに格納するＶＯＢＵ・ＳＲＩが確定するのは、そのＶＯＢＵを符号化してから所定時間ｔが経過した後のＶＯＢＵ符号化終了時点となる。
【０００７】
このため、従来のオーサリング工程では、図１５の第１処理に示すように、音声信号と映像信号を可変レートにてそれぞれ符号化し、たとえば１ＧＯＰごとに多重化したのち、１タイトルごとに記憶装置に記録する。この多重化時に、ＤＶＤビデオ規格に準拠したナビゲーションパックデータの生成も行い、これを記憶装置に記録する。そして、次の第２処理において、記憶装置に記録された多重化された符号化データと、記憶装置に記録されたナビゲーションパックデータとを多重化し、ＤＶＤビデオストリームとして記憶装置に記録する。
【０００８】
しかしながら、従来のオーサリング工程では、符号化及び多重化されたデータとナビゲーションパックデータとをタイトルごとに一旦記憶装置に記録したのち、これら符号化及び多重化されたデータとナビゲーションパックデータとを多重化して記録するといった順次処理を行っていたので、リアルタイムでＤＶＤビデオを記録することはできなかった。
【０００９】
（３）また、ＤＶＤでは、タイトル内の各チャプタの先頭の静止画像や動画をインデックスとして一覧表示させ、何れかの静止画又は動画を選択することでユーザーの所望のチャプタから再生ができるものも知られている。こうした静止画インデックスや動画インデックスのオーサリング処理は、図１６に示す第１処理及び第２処理を行ったのち、第３処理にて、記録済みのタイトル毎に、チャプタ分割→チャプタインデックス画面の生成→チャプタインデックス画面の編集といった処理を順次行い、これを符号化して記憶装置に記録する。
【００１０】
しかしながら、上述した従来の静止画インデックス又は動画インデックスのオーサリング処理では、タイトル毎に符号化及び多重化されたデータを一旦記憶装置に記録し、その後、チャプタ分割→チャプタインデックス画面の生成→チャプタインデックス画面の編集といった処理を順次行い、これを符号化して記憶装置に記録するので、ＤＶＤビデオ規格を熟知した熟練者しかオーサリング処理を行うことができず、一般ユーザが取り扱えるものではなかった。
【００１１】
【発明の概要】
本発明は、テレビ放送その他の情報提供源から提供された音声及び映像信号を、デジタルビデオ媒体に、各種機能を自動的かつ簡易に付加しながら記録するデジタル音声映像情報の記録装置を提供することを目的とする。
【００１２】
（１）サーチ情報のリアルタイムオーサリング処理（図１）
上記目的を達成するために、本発明の第１の観点によれば、入力されるデジタル音声信号およびデジタル映像信号のそれぞれを順次符号化する符号化手段と、少なくとも前記符号化手段により符号化された音声の符号化データおよび映像の符号化データと検索用データとを一定単位毎に順次多重化する多重化手段と、前記多重化手段により多重化された一定単位のデータを当該一定単位毎に順次記録する記録手段と、前記多重化手段にて検索用データを多重化する際に未確定である検索用データにダミーデータを仮検索用データとして順次供給するダミーデータ供給手段と、前記一定単位の多重化データが生成される毎に、それまで未確定であった仮検索用データのうち確定した仮検索用データを抽出し、この仮検索用データを、当該確定した検索用データに順次置換する置換手段と、を備えたデジタル音声映像情報の記録装置が提供される。
【００１３】
また、入力されるデジタル音声信号およびデジタル映像信号のそれぞれを順次符号化し、少なくとも、符号化された音声の符号化データおよび映像の符号化データと検索用データとを一定単位毎に順次多重化するに際し、未確定である検索用データに仮検索用データとしてダミーデータを供給して多重化し、この多重化された一定単位のデータを当該一定単位毎に順次記録し、前記一定単位の多重化データが生成される毎に、それまで未確定であった仮検索用データのうち確定した仮検索用データを抽出し、この仮検索用データを、当該確定した検索用データに順次置換するデジタル音声映像情報の記録方法が提供される。
【００１４】
この第１の観点による本発明のデジタル音声映像情報の記録装置及び記録方法では、入力された音声及び映像信号をＤＶＤビデオストリームとして記録する際に、検索用データに暫定的にダミーデータを記録し、検索用データの内容が確定したら順次置換するように構成したので、ほぼリアルタイムでＤＶＤビデオデータを自動的に生成することができる。
【００１５】
（２）静止画インデックスのリアルタイムオーサリング処理（図２）
上記目的を達成するために、本発明の第２の観点によれば、上記第１の観点による本発明において、前記多重化手段により多重化されたデータをチャプタ毎に順次分割して前記記録手段に記録するチャプタ分割手段と、  前記記録手段に記録された多重化データから各チャプタの先頭の静止画像を抽出して復号化し、所定の大きさに調整してチャプタインデックス画面に合成して前記記録手段に記録するインデックス画面編集手段と、を備えたデジタル音声映像情報の記録装置が提供される。
【００１６】
また、上記第１の観点による本発明において、前記多重化されたデータをチャプタ毎に順次分割し、この分割された多重化データを順次記録し、この記録された多重化データから各チャプタの先頭の静止画像を抽出して復号化し、所定の大きさに調整してチャプタインデックス画面に合成して記録するステップをさらに有するデジタル音声映像情報の記録方法が提供される。
【００１７】
この第２の観点による本発明のデジタル音声映像情報の記録装置及び記録方法では、多重化データから各チャプタの先頭の静止画像を抽出して復号化し、所定の大きさに調整してチャプタインデックス画面に合成して記録するといった一連の処理を自動的に実行するので、静止画インデックスを有するＤＶＤビデオ情報を簡単に得ることができる。
【００１８】
（３）動画インデックスのリアルタイムオーサリング処理（図３）
上記目的を達成するために、本発明の第３の観点によれば、上記第１の観点による本発明において、前記多重化手段により多重化されたデータをチャプタ毎に順次分割して前記記録手段に記録するチャプタ分割手段と、  前記チャプタ分割手段により分割され、前記記録手段に記録された直後の多重化データから当該チャプタの先頭の所望範囲の動画像を抽出して復号化し、所定の大きさに調整してチャプタインデックス画面に合成して記録する第１のインデックス画面編集手段と、前記第１のインデックス画面編集手段によりチャプタの先頭動画像が記録されたら、前記記録された復号化データを符号化して前記記録手段に記録する第２のインデックス画面編集手段と、を備えたデジタル音声映像情報の記録装置が提供される。
【００１９】
また、上記第１の観点による本発明において、前記多重化されたデータをチャプタ毎に順次分割し、この分割された多重化データを順次記録し、  この分割され記録された直後の多重化データから当該チャプタの先頭の所望範囲の動画像を抽出して復号化し、所定の大きさに調整してチャプタインデックス画面に合成して記録し、記録された復号化データを符号化して記録するステップをさらに有するデジタル音声映像情報の記録方法が提供される。
【００２０】
この第３の観点による本発明のデジタル音声映像情報の記録装置及び記録方法では、多重化データから各チャプタの先頭の動画像を抽出して復号化し、所定の大きさに調整してチャプタインデックス画面に合成して記録するといった一連の処理を自動的に実行するので、動画インデックスを有するＤＶＤビデオ情報を簡単に得ることができる。
【００２１】
【発明の実施の形態】
以下、本発明の実施形態を図面に基づいて説明する。
装置構成
図４は本発明のデジタル音声映像情報の記録装置を音声映像サーバ（以下、ＡＶサーバともいう。）に適用した実施形態を示すブロック図である。本実施形態のＡＶサーバ１００は、テレビ放送などで提供される音声信号および映像信号をリアルタイムで符号化および多重化しながらハードディスクに記録し、再生するものであり、ハードディスクに記録する際に、サーチ情報および静止画又は動画インデックス画面を自動的に付加するものである。ただし、音声情報および映像信号の供給源となるものは、テレビ放送にのみ限定されるものではなく、デジタル放送や電話回線による情報交信など、あらゆる供給源からの情報を取り込むことができる。
【００２２】
同図に示すように、外部入力端子から入力されたアナログ音声信号およびアナログ映像信号は、アナログ／デジタル変換器１０１，１０２によりデジタル音声信号およびデジタル映像信号にそれぞれ変換され、データセレクタ１０３に送出される。
【００２３】
なお、このデータセレクタ１０３には、この外部入力端子以外にも、地上波信号を受信するアンテナの入力端子、インターネットからの信号を取り込む公衆回線の入出力端子やイーサーネットＥｔｈｅｒｎｅｔの入出力端子、デジタルビデオカメラなどからの信号を取り込むＵＳＢインターフェースの入力端子、オーディオ機器からの信号を取り込むＳＰＤＩＦの入力端子、ＭＰＥＧ２の入力端子、デジタルビデオカメラなどの信号を取り込む高速インターフェースであるＩＥＥＥ１３９４インターフェースの入出力端子等々からの情報入出力が可能となっている。
【００２４】
データセレクタ１０３にて選択されたデジタル音声信号およびデジタル映像信号はＭＰＥＧ２エンコーダプロセッサ１０４（本発明の符号化手段に相当する。以下、単にＭＰＥＧ２エンコーダという。）に送出され、ここで音声信号と映像信号をそれぞれ符号化し、たとえば１ＧＯＰごとに多重化したのち、１タイトルごとに記憶装置に記録する。この多重化時に、ＤＶＤビデオ規格に準拠したナビゲーションパックデータの生成も行い、これらをＤＶＤビデオストリームとして記憶装置に記録する。このとき本実施形態のＡＶサーバ１００では、サーチ情報のリアルタイムオーサリング処理と、静止画インデックス又は動画インデックスのリアルタイムオーサリング処理を実行する。これについては、後述する。
【００２５】
ＭＰＥＧ２エンコーダ１０４にて生成されたＤＶＤストリームデータは、ストレージインターフェース１０５を介して本発明の記録手段であるハードディスクドライブ１０６に記録される。ストレージインターフェース１０５は、ハードディスクドライブ１０６にデータを記録するとともに、当該ハードディスク１０６に記録されたデータを読み出し、アドレス／データバス１１３や再生用ＦＩＦＯメモリ１０７に送出する。
【００２６】
なお、本例のＡＶサーバ１００では、ストレージインターフェース１０５に、外部装置（フロントエンドドライブユニット）としてのＤＶＤ−ＲＡＭ，ＤＶＤ−ＲＷ，ＤＶＤ−Ｒ１０８やＣＤ−Ｒ，ＣＤ−ＲＷ１０９などが接続可能とされ、ハードディスクドライブ１０６に記録されたデータをＤＶＤやＣＤなどの媒体に記録できるようになっている。
【００２７】
再生用ＦＩＦＯメモリ１０７に記録されたデータは、ＭＰＥＧ２デコーダプロセッサ１１０（本発明の復号化手段に相当する。以下、単にＭＰＥＧ２デコーダという。）に送出されるか、あるいはセレクタ１１１の切り替えによりグラフィックアクセラレータ１１２に送出される。
【００２８】
ＭＰＥＧ２デコーダ１１０では、ＤＶＤストリームデータをデジタル音声信号とデジタル映像信号とに復号化し、データセレクタ１０３に送出する。そして、これらデジタル音声信号とデジタル映像信号は、デジタル／アナログ変換器１１４，１１５によってアナログ音声信号とアナログ映像信号とに復号され、ＴＶモニタ１１６に送出され、ここで再生される。
【００２９】
アドレス／データバス１１３は、ＭＰＥＧ２エンコーダ１０４、ストレージインターフェース１０５、システムコントローラ１１７、フラッシュメモリ１１８、メモリ１１９および上述したグラフィックアクセラレータ１１２、ＭＰＥＧ２デコーダ１１０を接続し、データの受け渡しを行う。
【００３０】
このうち、システムコントローラ１１７は、フラッシュメモリ１１８に格納されたプログラムにしたがって以下のオーサリング処理を自動的に実行する。
【００３１】
サーチ情報のリアルタイムオーサリング処理
本例のＡＶサーバ１００は、ＤＶＤビデオ規格に準拠して音声および映像を可変レートにて符号化、多重化してハードディスクドライブ１０６に記録する際に、特殊再生に使用されるサーチ情報をリアルタイムで自動的にオーサリングする。すなわち、既述した順早送り及び逆早戻し再生のためのデータ（ＶＯＢＵ・ＳＲＩ）を記録時にリアルタイムで埋め込む。
【００３２】
図６の上図に図４のブロック図から抽出した主要ハードウェア構成を示し、図５にこのオーサリング処理の概念を模式的に示す。
【００３３】
このサーチ情報ＶＯＢＵ・ＳＲＩを自動的に埋め込む処理で機能する構成は、図６の上図に示すように、符号化および多重化処理を実行するＭＰＥＧ２エンコーダ１０４、ＤＶＤビデオストリームデータのバッファー用ＳＤＲＡＭ１０４ｍ、データサーチ制御情報ＤＳＩとダミーデータとを関連付けたナビゲーションパックマップのバッファー用メモリ１１９、ハードディスクドライブ１０６、当該ハードディスクドライブ１０６への書き込み及び読み出し時のバッファー用ＦＩＦＯメモリ１０５ｍ、ハードディスクドライブ１０６に記録された置換済みＤＶＤストリームデータを読み出して再生する際の再生用ＦＩＦＯメモリ１０７及び復号化処理を実行するＭＰＥＧ２デコーダ１１０である。
【００３４】
具体的な処理について図５及び図６を参照しながら説明する。
まず、ＭＰＥＧ２エンコーダ１０４に入力された音声デジタル信号および映像デジタル信号のそれぞれは、ＭＰＥＧ２エンコードモジュールによって可変レートにて符号化されるとともに符号化された音声データと映像データは、一定期間ごと（本例では、ＭＰＥＧ２規格にて定義された単独で再生可能な画像の最小単位ＧＯＰ）に多重化される。これを図５に５０１で示す。またこの多重化時に、ＤＶＤビデオ規格に準拠したナビゲーションパックデータＮの生成を行うが、本例では１つのＧＯＰの符号化が完了したと同時に確定しているナビゲーションパック情報は埋め込むが、未確定の、たとえばＶＯＢＵ・ＳＲＩ情報はダミーデータｎ．ｎ＋１，ｎ＋２，…を埋め込んで、ＤＶＤビデオストリームデータを生成する。このＤＶＤビデオストリームデータを図５に５０２で示すが、これをハードディスクドライブ１０６に記録する。
【００３５】
これと併行して１つのＧＯＰを符号化する毎にＶＯＢＵ・ＳＲＩ情報を生成する（図６のタイミングチャートの１つのＧＯＰの完了直前Ｔ２）が、このＶＯＢＵ・ＳＲＩ情報が確定する毎に、メモリ１１９のマップを介してハードディスクドライブ１０６に暫定的に埋め込まれたＶＯＢＵ・ＳＲＩ情報を順次上書きする（図６のタイミングチャートのＴ５）。
【００３６】
こうして上書きされ、確定したＶＯＢＵ・ＳＲＩ情報が埋め込まれたＧＯＰは、記録中においても再生、順早送り及び逆早戻し操作することが可能となる。暫定的に埋め込まれたダミーデータを、確定したＶＯＢＵ・ＳＲＩに置換したデータフォーマットの例を図５に５０３で示す。このデータはＭＰＥＧ２デコーダ１１０によって復号化されてＴＶモニタ１１６で、記録中においても見ることができる。
【００３７】
静止画インデックスのリアルタイムオーサリング処理
本例のＡＶサーバ１００は、ＤＶＤビデオ規格に準拠して音声および映像を可変レートにて符号化、多重化してハードディスクドライブ１０６に記録する際に、タイトル内の各チャプタの先頭の静止画をチャプタインデックス画面に一覧表示し、このチャプタインデックス画面において所望の静止画を選択することで直接的にチャプターをサーチできる機能をリアルタイムで自動的にオーサリングする。すなわち、ユーザは何らの操作を行うことなく静止画のチャプタインデックス画面を有する音声映像情報を得ることができる。
【００３８】
図７にこのオーサリング処理の概念を模式的に示し、図８の上図に図４のブロック図から抽出した主要ハードウェア構成を示す。
【００３９】
この静止画インデックス画面を自動的に生成する処理で機能する構成は、図８の上図に示すように、符号化および多重化処理を実行するＭＰＥＧ２エンコーダ１０４、ＤＶＤビデオストリームデータのバッファー用ＳＤＲＡＭ１０４ｍ、ハードディスクドライブ１０６、当該ハードディスクドライブ１０６への書き込み及び読み出し時のバッファー用ＦＩＦＯメモリ１０５ｍ、ハードディスクドライブ１０６に記録された各チャプタの先頭静止画を適当な大きさに調整するグラフィックアクセラレータ１１２、ハードディスクドライブ１０６に記録されたＤＶＤストリームデータを読み出して再生する際の再生用ＦＩＦＯメモリ１０７及び復号化処理を実行するＭＰＥＧ２デコーダ１１０である。
【００４０】
具体的な処理について図７〜図９を参照しながら説明する。なお、サーチ情報の埋め込み処理も同時に行われるが、この処理は既述したので静止画インデックスの生成処理を中心に説明する。
【００４１】
まず、ＭＰＥＧ２エンコーダ１０４に入力された音声デジタル信号および映像デジタル信号のそれぞれは、ＭＰＥＧ２エンコードモジュールによって可変レートにて符号化されるとともに符号化された音声データと映像データは、一定期間ごと（本例では、ＭＰＥＧ２規格にて定義された単独で再生可能な画像の最小単位ＧＯＰ）に多重化される。またこの多重化時に、ＤＶＤビデオ規格に準拠したナビゲーションパックデータＮの生成を行う（上述したように１つのＧＯＰの符号化が完了したと同時に確定しているナビゲーションパック情報は埋め込むが、未確定の、たとえばＶＯＢＵ・ＳＲＩ情報はダミーデータｎ．ｎ＋１，ｎ＋２，…を埋め込んで、ＤＶＤビデオストリームデータを生成する）。これをハードディスクドライブ１０６に記録する。これと併行して１つのＧＯＰを符号化する毎にＶＯＢＵ・ＳＲＩ情報を生成するが、このＶＯＢＵ・ＳＲＩ情報が確定する毎に、メモリ１１９のマップを介してハードディスクドライブ１０６に暫定的に埋め込まれたＶＯＢＵ・ＳＲＩ情報を順次上書きする。また、上書きされてＶＯＢＵ・ＳＲＩが確定した複数のＧＯＰを一定期間毎に自動的にチャプターに分割し、ハードディスクドライブ１０６に記録する。
【００４２】
１つのタイトルが終了したら、その直後に、ハードディスクドライブ１０６に記録されているＤＶＤビデオストリームデータの中から各チャプターの先頭の静止画をＦＩＦＯメモリ１０５ｍへ読み出し、これを再生用ＦＩＦＯメモリ１０７を介してグラフィックアクセラレータ１１２へ転送する。チャプタインデックス画面は、図９に示すように、ＴＶモニタに複数のチャプタの先頭静止画が組み込まれるので、転送された静止画データが一つのチャプタインデックス画面に相当する大きさになるようにグラフィックアクセラレータ１１２にて縮小し、インデックス画面に合成する。また、インデックス画面が複数画面にわたる場合には、一つのインデックス画面（図９の例では１２チャプタ）のナビゲーションパックデータに、画面遷移用ナビゲーションコマンドを埋め込み、同時に先のインデックス画面に画面遷移用アイコンを合成する。
【００４３】
そして、この縮小されたインデックス画面データをＭＰＥＧ２エンコーダ１０４に送出し、ここで符号化したのちハードディスクドライブ１０６に記録する。
【００４４】
こうしてオーサリング処理されたチャプタインデックス画面は、ハードディスクドライブ１０６に記録されたインデックス画面のＤＶＤビデオストリームデータを読み出すことで実現される。
【００４５】
動画インデックスのリアルタイムオーサリング処理
上述した例では、静止画をインデックス画面に自動的に埋め込んだが、各チャプタの先頭の動画をインデックス画面に埋め込むこともできる。本例のＡＶサーバ１００は、ＤＶＤビデオ規格に準拠して音声および映像を可変レートにて符号化、多重化してハードディスクドライブ１０６に記録する際に、タイトル内の各チャプタの先頭の動画をチャプタインデックス画面に一覧表示し、このチャプタインデックス画面において所望の動画を選択することで直接的にチャプターをサーチできる機能をリアルタイムで自動的にオーサリングする。すなわち、ユーザは何らの操作を行うことなく動画のチャプタインデックス画面を有する音声映像情報を得ることができる。
【００４６】
図１０及び図１１にこのオーサリング処理の概念を模式的に示し、図１２及び図１３の各上図に図４のブロック図から抽出した主要ハードウェア構成を示す。
【００４７】
この動画インデックス画面を自動的に生成する処理で機能する構成は、図１２及び図１３の各上図に示すように、符号化および多重化処理を実行するＭＰＥＧ２エンコーダ１０４、ＤＶＤビデオストリームデータのバッファー用ＳＤＲＡＭ１０４ｍ、ハードディスクドライブ１０６、当該ハードディスクドライブ１０６への書き込み及び読み出し時のバッファー用ＦＩＦＯメモリ１０５ｍ、ハードディスクドライブ１０６に記録された各チャプタの先頭動画を適当な大きさに調整するグラフィックアクセラレータ１１２、ハードディスクドライブ１０６に記録されたＤＶＤストリームデータを読み出して再生する際の再生用ＦＩＦＯメモリ１０７及び復号化処理を実行するＭＰＥＧ２デコーダ１１０である。
【００４８】
具体的な処理について図１０〜図１３を参照しながら説明する。なお、サーチ情報の埋め込み処理も同時に行われるが、この処理は既述したので動画インデックスの生成処理を中心に説明する。
【００４９】
まず、ＭＰＥＧ２エンコーダ１０４に入力された音声デジタル信号および映像デジタル信号のそれぞれは、ＭＰＥＧ２エンコードモジュールによって可変レートにて符号化されるとともに符号化された音声データと映像データは、一定期間ごと（本例では、ＭＰＥＧ２規格にて定義された単独で再生可能な画像の最小単位ＧＯＰ）に多重化される。またこの多重化時に、ＤＶＤビデオ規格に準拠したナビゲーションパックデータＮの生成を行う（上述したように１つのＧＯＰの符号化が完了したと同時に確定しているナビゲーションパック情報は埋め込むが、未確定の、たとえばＶＯＢＵ・ＳＲＩ情報はダミーデータｎ．ｎ＋１，ｎ＋２，…を埋め込んで、ＤＶＤビデオストリームデータを生成する）。これをハードディスクドライブ１０６に記録する。これと併行して１つのＧＯＰを符号化する毎にＶＯＢＵ・ＳＲＩ情報を生成するが、このＶＯＢＵ・ＳＲＩ情報が確定する毎に、メモリ１１９のマップを介してハードディスクドライブ１０６に暫定的に埋め込まれたＶＯＢＵ・ＳＲＩ情報を順次上書きする。また、上書きされてＶＯＢＵ・ＳＲＩが確定した複数のＧＯＰを一定期間毎に自動的にチャプターに分割し、ハードディスクドライブ１０６に記録する。
【００５０】
１つのチャプタの記録が終了したら、その直後に、ハードディスクドライブ１０６に記録されているＤＶＤビデオストリームデータの中から各チャプターの先頭の所望範囲（たとえば３０秒間）の動画をＦＩＦＯメモリ１０５ｍへ読み出し、これを再生用ＦＩＦＯメモリ１０７を介してＭＰＥＧ２デコーダ１１０へ転送し、ここで通常再生する。この通常再生毎にインデックス用動画を１フレームずつ再生して、これをグラフィックアクセラレータ１１２へ送出する。なお、動画インデックスとしての先頭画像は、上記例に示したように時間により抽出するほか、シーンの区切りまでを検出し、その範囲を抽出しても良い。また、これらの抽出範囲を可変とすることもできる。
【００５１】
チャプタインデックス画面は、図９に示すように、ＴＶモニタに複数のチャプタの先頭動画が組み込まれるので、転送された動画データが一つのチャプタインデックス画面に相当する大きさになるようにグラフィックアクセラレータ１１２にて縮小し、インデックス画面に合成する。また、インデックス画面が複数画面にわたる場合には、一つのインデックス画面（図９の例では１２チャプタ）のナビゲーションパックデータに、画面遷移用ナビゲーションコマンドを埋め込み、同時に先のインデックス画面に画面遷移用アイコンを合成する。
【００５２】
そして、この合成されたインデックス画面データを１フレーム毎にハードディスクドライブ１０６に記録する。ここで記録されるデータはデジタルビデオフォーマットである。
【００５３】
全てのチャプタの処理が終了、すなわち１つのタイトルが終了したら、その直後に、ハードディスクドライブ１０６に記録されているデジタルビデオデータによる各チャプターの先頭の動画をＦＩＦＯメモリ１０５ｍへ読み出し、これを再生用ＦＩＦＯメモリ１０７を介してグラフィックアクセラレータ１１２へ転送する。またこのとき、インデックス画面が複数画面にわたる場合には、一つのインデックス画面のナビゲーションパックデータに、画面遷移用ナビゲーションコマンドを埋め込み、同時に先のインデックス画面に画面遷移用アイコンを合成する。
【００５４】
そして、このインデックス画面データをＭＰＥＧ２エンコーダ１０４に送出し、ここでＤＶＤビデオフォーマットで符号化したのちハードディスクドライブ１０６に記録する。
【００５５】
こうしてオーサリング処理されたチャプタインデックス画面は、ハードディスクドライブ１０６に記録されたインデックス画面のＤＶＤビデオストリームデータを読み出すことで実現される。
【００５６】
ちなみに、上述した例では、合成されたインデックス画面データをデジタルビデオフォーマットにて一旦ハードディスクドライブ１０６に記録し、全てのチャプタの処理が終了したら、このデジタルビデオフォーマットのデータをＤＶＤビデオフォーマットに変換するが、これは全てのチャプタが終了するまではＭＰＥＧ２エンコーダ１０４が作動中であるためであり、したがって他にＭＰＥＧ２エンコーダを追加すれば、デジタルビデオフォーマットにて記録することなくこれを直接ＤＶＤビデオフォーマットにリアルタイムで変換処理することができる。これも本発明の範囲内である。
【００５７】
なお、以上説明した実施形態は、本発明の理解を容易にするために記載されたものであって、本発明を限定するために記載されたものではない。したがって、上記の実施形態に開示された各要素は、本発明の技術的範囲に属する全ての設計変更や均等物をも含む趣旨である。
【図面の簡単な説明】
【図１】本発明の第１の観点によるデジタル音声映像情報の記録装置を示すブロック図である。
【図２】本発明の第２の観点によるデジタル音声映像情報の記録装置を示すブロック図である。
【図３】本発明の第３の観点によるデジタル音声映像情報の記録装置を示すブロック図である。
【図４】本発明のデジタル音声映像情報の記録装置の実施形態を示すブロック図である。
【図５】本発明に係るサーチ情報のリアルタイムオーサリング処理を説明するための概念図である。
【図６】本発明に係るサーチ情報のリアルタイムオーサリング処理を説明するためのブロック図およびタイミングチャートである。
【図７】本発明に係る静止画インデックスのリアルタイムオーサリング処理を説明するための概念図である。
【図８】本発明に係る静止画インデックスのリアルタイムオーサリング処理を説明するためのブロック図およびタイミングチャートである。
【図９】本発明に係るチャプタインデックス画面の一例を示す図である。
【図１０】本発明に係る動画インデックスのリアルタイムオーサリング処理を説明するための概念図である。
【図１１】本発明に係る動画インデックスのリアルタイムオーサリング処理を説明するための概念図である。
【図１２】本発明に係る動画インデックスのリアルタイムオーサリング処理を説明するためのブロック図およびタイミングチャートである。
【図１３】本発明に係る動画インデックスのリアルタイムオーサリング処理を説明するためのブロック図およびタイミングチャートである。
【図１４】ＤＶＤに記録されるデータフォーマットを示す図である。
【図１５】従来のサーチ情報のオーサリング処理を示す概念図である。
【図１６】従来の静止画／動画インデックスのオーサリング処理を示す概念図である。
【符号の説明】
１１…符号化手段
１２…多重化手段
１３…記録手段
１４…ダミーデータ供給手段
１５…置換手段
【図１】
0003566216.tif 000002
【図２】
0003566216.tif 000003
【図３】
0003566216.tif 000004
【図４】
0003566216.tif 000005
【図５】
0003566216.tif 000006
【図６】
0003566216.tif 000007
【図７】
0003566216.tif 000008
【図８】
0003566216.tif 000009
【図９】
0003566216.tif 000010
【図１０】
0003566216.tif 000011
【図１１】
0003566216.tif 000012
【図１２】
0003566216.tif 000013
【図１３】
0003566216.tif 000014
【図１４】
0003566216.tif 000015
【図１５】
0003566216.tif 000016
【図１６】
0003566216.tif 000017