(57)【要約】【課題】  記録された映像、音声を再生する際に、ＤＶＤプレーヤー等の通常の再生機で、音声の再生はそのままで、視聴者が見たい映像を選択し、再生することができるような映像音声記録再生装置、及びデジタルビデオカメラを提供する。【解決手段】  映像、音声を取り込む撮像部１０１を有する映像音声記録再生装置において、撮像部１０１で入力されたデータからストリームを生成する圧縮部１０３と、ストリームを多重化するストリーム多重化部１０４と、ストリームを記録する記録媒体１０６を有し、１つの撮像部１０１で入力された信号から複数のストリームを生成し、その複数のストリームの多重化を行い、記録することで、その記録されたストリームを通常の再生機で再生させる際、音声の再生はそのままで、視聴者が見たい映像を選択し、再生することができるようにした。【選択図】  図１
2005312022.tif 000002
【特許請求の範囲】
【請求項１】
映像音声信号を取り込む入力手段を有する映像音声記録再生装置において、
前記入力手段により入力された１つの映像音声信号を用いて複数のストリームを生成するストリーム生成手段と、
前記複数のストリームのうちの少なくとも２つのストリームを多重化し、多重化ストリームを生成する多重化手段と、
前記多重化ストリームを記録する記録手段とを備えた、
ことを特徴とする映像音声記録再生装置。
【請求項２】
映像音声信号を取り込む入力手段を有する映像音声記録再生装置において、
前記入力手段により入力された１つの映像音声信号を用いて複数のストリームを生成するストリーム生成手段と、
前記複数のストリームを多重化し、多重化ストリームを生成する多重化手段と、
前記多重化ストリームを記録する記録手段とを有し、
前記ストリーム生成手段は、
前記複数のストリームを、それぞれ同じ音声を使用するものとして生成する、
ことを特徴とする映像音声記録再生装置。
【請求項３】
請求項１または２に記載の映像音声記録再生装置において、
前記ストリーム生成手段は、
前記複数のストリームのうちの１つとして、前記入力手段により入力された映像音声信号の通常動画像を用いて第１のストリームを生成し、
他の１つとして、前記入力手段より入力された映像音声信号の静止画像を用いて第２のストリームを生成し、
前記多重化手段は、該ストリーム生成手段により生成された前記第１のストリーム及び前記第２のストリームを多重化する、
ことを特徴とする映像音声記録再生装置。
【請求項４】
請求項１または２に記載の映像音声記録再生装置において、
前記ストリーム生成手段は、
前記複数のストリームのうちの１つとして、前記入力手段により入力された映像音声信号の通常動画像を用いて第１のストリームを生成し、
他の１つとして、前記第１のストリームから静止画像の候補を生成し、該静止画像の候補から選択された静止画像を用いて第２のストリームを生成し、
前記多重化手段は、該ストリーム生成手段により生成された前記第１のストリーム及び前記第２のストリームを多重化する、
ことを特徴とする映像音声記録再生装置。
【請求項５】
請求項４記載の映像音声記録再生装置において、
前記静止画像の候補は、前記映像音声信号の通常動画像を用いて生成されたストリームから所定時間間隔ごとに抜き出された静止画像である、
ことを特徴とする映像音声記録再生装置。
【請求項６】
請求項４記載の映像音声記録再生装置において、
前記静止画像の候補は、前記映像音声信号の通常動画像を用いて生成されたストリームのシーンが変わった時点の静止画像である、
ことを特徴とする映像音声記録再生装置。
【請求項７】
請求項４記載の映像音声記録再生装置において、
前記静止画像の候補は、前記映像音声信号の通常動画像を用いて生成されたストリームの無音区間の所定時間前、もしくは前記無音区間中、もしくは無音区間の所定時間後における静止画像である、
ことを特徴とする映像音声記録再生装置。
【請求項８】
請求項４記載の映像音声記録再生装置において、
ズームインもしくはズームアウトのズーム操作を行うためのズーム手段を有し、
前記静止画像の候補は、前記ズーム操作の開始の所定時間前、もしくはズーム中、もしくは前記ズーム操作の終了の所定時間後の静止画像である、
ことを特徴とする映像音声記録再生装置。
【請求項９】
請求項１または２に記載の映像音声記録再生装置において、
外部から直接、静止画像を取り込む静止画像取り込み手段を有し、
前記ストリーム生成手段は、
前記複数のストリームのうちの１つとして、前記入力手段により入力された映像音声信号の通常動画像を用いて第１のストリームを生成し、
他の１つとして、前記静止画像取り込み手段により取り込んだ静止画像を用いて第３のストリームを生成し、
前記多重化手段は、該ストリーム生成手段により生成された前記第１のストリーム及び前記第３のストリームを多重化する、
ことを特徴とする映像音声記録再生装置。
【請求項１０】
請求項１または２に記載の映像音声記録再生装置において、
外部から直接、静止画像を取り込む静止画像取り込み手段を有し、
前記ストリーム生成手段は、
前記複数のストリームのうちの１つとして、前記入力手段により入力された映像音声信号の通常動画像を用いて第１のストリームを生成し、
他の１つとして、前記静止画像取り込み手段により取り込んだ静止画像から静止画像の候補を生成し、該静止画像の候補から選択された静止画像を用いて第３のストリームを生成し、
前記多重化手段は、該ストリーム生成手段により生成された前記第１のストリーム及び前記第３のストリームを多重化する、
ことを特徴とする映像音声記録再生装置。
【請求項１１】
請求項３記載の映像音声記録再生装置において、
前記多重化手段は、
前記入力手段により入力された前記映像音声信号から前記静止画像が生成された時間から前記第１のストリームと前記第２のストリームを多重化する、
ことを特徴とする映像音声記録再生装置。
【請求項１２】
請求項９記載の映像音声記録再生装置において、
前記多重化手段は、
前記入力手段により入力された前記映像音声信号から前記静止画像が生成された時間から前記第１のストリームと前記第３のストリームを多重化する、
ことを特徴とする映像音声記録再生装置。
【請求項１３】
請求項４記載の映像音声記録再生装置において、
前記多重化手段は、
前記静止画像の候補から静止画像を選択した時点から前記第１のストリームと前記第２のストリームを多重化する、
ことを特徴とする映像音声記録再生装置。
【請求項１４】
請求項１０記載の映像音声記録再生装置において、
前記多重化手段は、
前記静止画像の候補から静止画像を選択した時点から前記第１のストリームと前記第３のストリームを多重化する、
ことを特徴とする映像音声記録再生装置。
【請求項１５】
請求項４記載の映像音声記録再生装置において、
前記記録手段は、
前記静止画像の候補から選択した静止画像と、前記静止画像から生成されたストリームとを記録できる、
ことを特徴とする映像音声記録再生装置。
【請求項１６】
請求項１０記載の映像音声記録再生装置において、
前記記録手段は、
前記静止画像取り込み手段により取り込んだ静止画像と、前記静止画像から生成されたストリームとを記録できる、
ことを特徴とする映像音声記録再生装置。
【請求項１７】
映像音声信号を取り込む入力手段を有するデジタルビデオカメラにおいて、
前記入力手段により入力された１つの映像音声信号を用いて複数のストリームを生成するストリーム生成手段と、
前記複数のストリームを多重化し、多重化ストリームを生成する多重化手段と、
前記多重化ストリームを記録する記録手段と、を有し、
前記ストリーム生成手段は、
前記複数のストリームを、それぞれ同じ音声を使用するものとして生成する、
ことを特徴とするデジタルビデオカメラ。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ＤＶＤ記録再生ディスクを用いた映像音声記録再生装置、及びデジタルビデオカメラに関し、特にディスクムービーにおけるカメラ部の１つの入力映像から複数のストリームを生成し、マルチプレクスを行い記録媒体に記録する映像音声記録再生装置、及びデジタルビデオカメラに関するものである。
【背景技術】
【０００２】
近年、映像や音声などをデジタル圧縮して記録を行うＤＶＤが普及しており、例えばＴＶ放送の記録を行うＤＶＤレコーダやＤＶＤを記録メディアとするディスクムービー等に幅広く利用されている。これにより、従来のＶＴＲでは記録されたものを頭から順に再生することぐらいしかできなかったものが、ＤＶＤにより見たいシーンから瞬時に再生できる機能や、簡単に編集を行うことができる編集機能などを提供できるようになっている。
【０００３】
これら映像や音声を効率的に蓄積・伝送するための情報圧縮技術としてＭＰＥＧ（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）がある。ＭＰＥＧでは、映像や音声などのデジタルコンテンツを構成する要素となる複数のデジタル信号を、一つのビットストリームに多重化するときの信号の構成をシステムの規格として定めている。また、動画を記録するためにファイル名称やディレクトリ構造、データ形式などのアプリケーションフォーマットであるＤＶＤビデオ規格が定められており、ＤＶＤ−Ｒなどの記録メディアへの記録が可能となっている。このＤＶＤビデオ規格では早送り、巻き戻しなどの特殊再生をサポートするための情報データを持つことにより、スムーズに特殊再生を行えるようにしている。さらに、ＤＶＤビデオ規格では複数のアングル映像を切り替えられるマルチアングル機能が定められており、音声をそのまま再生させながら、ユーザーが好むアングルに切り替えて視聴することを可能としている。
【０００４】
従来の技術では、上記マルチアングル機能を利用して、ディスクに記録する際、複数の入力から映像、音声を入力し、同期をとりながら圧縮を行い、リアルタイムにマルチアングルストリームとして記録媒体に記録する方法がある（例えば特許文献１参照。）。
【特許文献１】特開平１１−１０３４４４号公報（第２−５頁、第１図）
【発明の開示】
【発明が解決しようとする課題】
【０００５】
従来では、ビデオカメラとしてテープ媒体を用いたデジタルビデオカメラが普及しているが、このデジタルビデオカメラにおいては、テープ媒体に記録されたデータを再生する際、見たいシーンを瞬時に再生することは困難であり、また、記録されたデータの編集を行うことも困難である。そこで、それらを解決するために近年、ＤＶＤ−Ｒ、ＤＶＤ−ＲＡＭ等の記録メディアを用いたディスクムービーが普及しつつあり、編集等を簡単に行えるようになった。
【０００６】
しかしながら、ディスクムービーで撮影された映像を再生する際に見たいシーンを瞬時に再生することはできるが、音声をそのまま続けて再生をさせながら視聴者の見たい映像を再生することはできなかった。
【０００７】
例えば、液晶プロジェクターやＯＨＰを利用して資料をスクリーンに投影し、講師がプレゼンテーションを行う講演会の状況を、ムービーを使って撮影したとする。その録画映像に、講師の姿とプレゼンテーションの資料が交互に撮影されていた場合、その録画映像を再生して視聴する視聴者は、講師の説明が流れる音声をそのまま続けて再生させながら、講師の姿が撮影されている場面の録画映像ではなく、これとは別のプレゼンテーションの資料を見たい場合がある。
【０００８】
そこで、ディスクムービーで撮影する際にＤＶＤビデオ規格のマルチアングル機能を利用して、ディスクにマルチアングル記録を行い、その録画映像を再生する際に視聴者の好むシーンやカメラアングルで視聴するということが考えられる。ここで、特開平１１−１０３４４４号公報においては、リアルタイムにマルチアングル記録を行う記録装置が提供されているが、多チャンネルの入力が必要となり、ディスクムービーのような一つの入力の装置に対しては適用することができないという問題があった。
【０００９】
本発明は上記のような従来の問題点を解決するためになされたもので、１つの入力映像から複数のストリームを生成し、マルチプレクスを行い記録媒体に記録することができる映像音声記録再生装置、及びデジタルビデオカメラを得ることを目的とする。
【課題を解決するための手段】
【００１０】
前記従来の課題を解決するために、本発明の請求項１にかかる映像音声記録再生装置は、映像音声信号を取り込む入力手段を有する映像音声記録再生装置において、前記入力手段により入力された１つの映像音声信号を用いて複数のストリームを生成するストリーム生成手段と、前記複数のストリームのうちの少なくとも２つのストリームを多重化し、多重化ストリームを生成する多重化手段と、前記多重化ストリームを記録する記録手段とを備えた、ことを特徴とするものである。
【００１１】
本発明の請求項２にかかる映像音声記録再生装置は、映像音声信号を取り込む入力手段を有する映像音声記録再生装置において、前記入力手段により入力された１つの映像音声信号を用いて複数のストリームを生成するストリーム生成手段と、前記複数のストリームを多重化し、多重化ストリームを生成する多重化手段と、前記多重化ストリームを記録する記録手段とを有し、前記ストリーム生成手段は、前記複数のストリームを、それぞれ同じ音声を使用するものとして生成する、ことを特徴とするものである。
【００１２】
本発明の請求項３にかかる映像音声記録再生装置は、請求項１または２に記載の映像音声記録再生装置において、前記ストリーム生成手段は、前記複数のストリームのうちの１つとして、前記入力手段により入力された映像音声信号の通常動画像を用いて第１のストリームを生成し、他の１つとして、前記入力手段より入力された映像音声信号の静止画像を用いて第２のストリームを生成し、前記多重化手段は、該ストリーム生成手段により生成された前記第１のストリーム及び前記第２のストリームを多重化する、ことを特徴とするものである。
【００１３】
本発明の請求項４にかかる映像音声記録再生装置は、請求項１または２に記載の映像音声記録再生装置において、前記ストリーム生成手段は、前記複数のストリームのうちの１つとして、前記入力手段により入力された映像音声信号の通常動画像を用いて第１のストリームを生成し、他の１つとして、前記第１のストリームから静止画像の候補を生成し、該静止画像の候補から選択された静止画像を用いて第２のストリームを生成し、前記多重化手段は、該ストリーム生成手段により生成された前記第１のストリーム及び前記第２のストリームを多重化する、ことを特徴とするものである。
【００１４】
本発明の請求項５にかかる映像音声記録再生装置は、請求項４記載の映像音声記録再生装置において、前記静止画像の候補は、前記映像音声信号の通常動画像を用いて生成されたストリームから所定時間間隔ごとに抜き出された静止画像である、ことを特徴とするものである。
【００１５】
本発明の請求項６にかかる映像音声記録再生装置は、請求項４記載の映像音声記録再生装置において、前記静止画像の候補は、前記映像音声信号の通常動画像を用いて生成されたストリームのシーンが変わった時点の静止画像である、ことを特徴とするものである。
【００１６】
本発明の請求項７にかかる映像音声記録再生装置は、請求項４記載の映像音声記録再生装置において、前記静止画像の候補は、前記映像音声信号の通常動画像を用いて生成されたストリームの無音区間の所定時間前、もしくは前記無音区間中、もしくは無音区間の所定時間後における静止画像である、ことを特徴とするものである。
【００１７】
本発明の請求項８にかかる映像音声記録再生装置は、請求項４記載の映像音声記録再生装置において、ズームインもしくはズームアウトのズーム操作を行うためのズーム手段を有し、前記静止画像の候補は、前記ズーム操作の開始の所定時間前、もしくはズーム中、もしくは前記ズーム操作の終了の所定時間後の静止画像である、ことを特徴とするものである。
【００１８】
本発明の請求項９にかかる映像音声記録再生装置は、請求項１または２に記載の映像音声記録再生装置において、外部から直接、静止画像を取り込む静止画像取り込み手段を有し、前記ストリーム生成手段は、前記複数のストリームのうちの１つとして、前記入力手段により入力された映像音声信号の通常動画像を用いて第１のストリームを生成し、他の１つとして、前記静止画像取り込み手段により取り込んだ静止画像を用いて第３のストリームを生成し、前記多重化手段は、該ストリーム生成手段により生成された前記第１のストリーム及び前記第３のストリームを多重化する、ことを特徴とするものである。
【００１９】
本発明の請求項１０にかかる映像音声記録再生装置は、請求項１または２に記載の映像音声記録再生装置において、外部から直接、静止画像を取り込む静止画像取り込み手段を有し、前記ストリーム生成手段は、前記複数のストリームのうちの１つとして、前記入力手段により入力された映像音声信号の通常動画像を用いて第１のストリームを生成し、他の１つとして、前記静止画像取り込み手段により取り込んだ静止画像から静止画像の候補を生成し、該静止画像の候補から選択された静止画像を用いて第３のストリームを生成し、前記多重化手段は、該ストリーム生成手段により生成された前記第１のストリーム及び前記第３のストリームを多重化する、ことを特徴とするものである。
【００２０】
本発明の請求項１１にかかる映像音声記録再生装置は、請求項３記載の映像音声記録再生装置において、前記多重化手段は、前記入力手段により入力された映像音声信号から前記静止画像が生成された時間から前記第１のストリームと前記第２のストリームを多重化する、ことを特徴とするものである。
【００２１】
本発明の請求項１２にかかる映像音声記録再生装置は、請求項９記載の映像音声記録再生装置において、前記多重化手段は、前記静止画像取り込み手段により前記静止画像が取り込まれた時間から前記第１のストリームと前記第３のストリームを多重化する、ことを特徴とするものである。
【００２２】
本発明の請求項１３にかかる映像音声記録再生装置は、請求項４記載の映像音声記録再生装置において、前記多重化手段は、前記静止画像の候補から静止画像を選択した時点から前記第１のストリームと前記第２のストリームを多重化する、ことを特徴とするものである。
【００２３】
本発明の請求項１４にかかる映像音声記録再生装置は、請求項１０記載の映像音声記録再生装置において、前記多重化手段は、前記静止画像の候補から静止画像を選択した時点から前記第１のストリームと前記第３のストリームを多重化する、ことを特徴とするものである。
【００２４】
本発明の請求項１５にかかる映像音声記録再生装置は、請求項４記載の映像音声記録再生装置において、前記記録手段は、前記静止画像の候補から選択した静止画像と、前記静止画像から生成されたストリームとを記録できる、ことを特徴とするものである。
【００２５】
本発明の請求項１６にかかる映像音声記録再生装置は、請求項１０記載の映像音声記録再生装置において、前記記録手段は、前記静止画像取り込み手段により取り込んだ静止画像と、前記静止画像から生成されたストリームとを記録できる、ことを特徴とするものである。
【００２６】
本発明の請求項１７にかかるデジタルビデオカメラは、映像音声信号を取り込む入力手段を有するデジタルビデオカメラにおいて、前記入力手段により入力された１つの映像音声信号を用いて複数のストリームを生成するストリーム生成手段と、前記複数のストリームを多重化し、多重化ストリームを生成する多重化手段と、前記多重化ストリームを記録する記録手段を有し、前記ストリーム生成手段は、前記複数のストリームを、それぞれ同じ音声を使用するものとして生成するデジタルビデオカメラである、ことを特徴とするものである。
【発明の効果】
【００２７】
本発明にかかる映像音声記録再生装置、及びデジタルビデオカメラによれば、一つの入力で複数のストリームを生成し、マルチアングル記録を行うことにより、記録された映像、音声を再生する際に、ＤＶＤプレーヤー等の通常の再生機で、音声の再生はそのままで、視聴者が見たい映像を選択し、再生することができるという効果がある。
【発明を実施するための最良の形態】
【００２８】
以下に、本発明の映像音声記録再生装置について図面を用いて詳細に説明する。
（実施の形態１）
図１は、本発明の実施の形態１における映像音声記録再生装置の構成を示すブロック図である。
図１において、撮像部１０１は、公知のＣＣＤ方式等のカメラであり、任意の場所を撮像し、撮像対象領域の撮像画像を継続的に取得する。
【００２９】
Ａ／Ｄ変換部１０２は、撮像部１０１で取得したアナログ映像音声信号のＡ／Ｄ変換を行い、デジタル映像音声信号に変換する。
圧縮部１０３は、Ａ／Ｄ変換部１０２で生成されたデジタル映像音声信号をＭＰＥＧストリームに変換する。
【００３０】
ストリーム多重化部１０４は、圧縮部１０３で生成されたＭＰＥＧストリームとそのＭＰＥＧストリームから抜き出されたＩピクチャのみで構成された静止画のＭＰＥＧストリームをＤＶＤビデオ規格に準じたマルチアングル方式に多重化を行う。
伸張部１０５は、ＭＰＥＧストリームの伸張を行うとともに、ＯＳＤ（ＯＮ  ＳＣＲＥＥＮ  ＤＩＳＰＬＡＹ）のようなグラフィックス表示を行う機能をも備えている。
【００３１】
記録媒体１０６は、例えばＣＤやＤＶＤ、ＨＤＤ、ＳＤカードなど映像音声ストリームを蓄積しておくためのランダムアクセス可能な記録媒体である。
記録再生コントローラ１０７は、記録媒体１０６にＭＰＥＧストリームを記録する際に記録アドレスを指定したり、記録媒体１０６からＭＰＥＧストリームを読み出す場合に読み出しアドレスを指定したりして、ＭＰＥＧストリームの記録再生を可能とする。
【００３２】
バッファ１０８は、撮像部１０１で撮像されたアナログ映像音声信号がＡ／Ｄ変換部１０２でデジタル映像音声信号に変換され、圧縮部１０３で圧縮されたＭＰＥＧストリーム（以後、通常動画像ストリームと呼ぶ）から、ユーザーがマルチアングルに使用する静止画像の候補となるＩピクチャを抜き出すために、圧縮部１０３で生成された通常動画像ストリームを一時蓄積するためのものである。ここで、バッファ１０８は一時蓄積するＳＤＲＡＭなどのようなメモリであってもよいし、記録媒体１０６として使用されるＣＤやＤＶＤ、ＨＤＤ、ＳＤカードなどでもよい。
【００３３】
システムコントローラ１０９は、映像音声ストリームの記録制御を管理するものであり、圧縮部１０３、ストリーム多重化部１０４、伸張部１０５、記録再生コントローラ１０７、液晶表示部１１１に制御コードを指示したり、圧縮部１０３、ストリーム多重化部１０４、伸張部１０５、記録再生コントローラ１０７、液晶表示部１１１が有する状態を管理したりする。
【００３４】
ユーザーＩ／Ｆ１１０は、ユーザーにおける映像音声記録再生装置の操作に準じたコードをシステムコントローラ１０９に通知するものであり、映像音声記録再生装置のタッチパネルをユーザーが操作し、その操作コードをシステムコントローラ１０９に通知したり、映像音声記録再生装置をユーザーがリモコン操作し、その操作コードをシステムコントローラ１０９に通知したり、映像音声記録再生装置についているボタンをユーザーが直接押し、その操作コードをシステムコントローラ１０９に通知したりする。
【００３５】
液晶表示部１１１は、記録媒体１０６に現在記録されている映像を表示したり、記録媒体１０６にすでに記録されている映像信号を再生して表示したり、ユーザーが映像音声記録再生装置を操作するためのＯＳＤを表示するものであり、さらにタッチパネルにも対応することが可能である。
Ｄ／Ａ変換部１１２は、伸張部１０５で伸張されたデジタル映像音声信号をアナログ映像音声信号に変換し出力する。
【００３６】
以上のように構成された映像音声記録再生装置について、以下その動作、作用を説明する。
まず、撮像部１０１にて任意の場所、任意の人物等が撮影された映像音声信号がＡ／Ｄ変換部１０２に入力される。Ａ／Ｄ変換部１０２に入力された映像音声信号はデジタル映像音声データに変換された後、圧縮部１０３でＭＰＥＧストリームに圧縮されることにより、通常動画像ストリームが生成され、バッファ１０８に一時格納される。ここで、バッファ１０８はリングバッファとなっており、順次通常動画像ストリームが格納される。それと同時に通常動画像ストリームが伸張部１０５で伸張され、液晶表示部１１１で表示される。また、バッファ１０８に格納された通常動画像ストリームから所定時間間隔で複数枚のＩピクチャを抜き出し、それら複数枚のＩピクチャを伸張部１０５でそれぞれ伸張することにより、通常動画像ストリームと、ストリーム多重化部１０４で多重化するための静止画像の候補を生成する。そこで、図４に示すように通常動画像ストリームが伸張部１０５で伸張された動画像４０４と小画面４０１〜４０３の静止画像の候補を液晶表示部１１１にて同時に表示する。
【００３７】
ここで、図５のように通常動画像ストリームが伸張部１０５で伸張された動画像５０４に、静止画像の候補５０１〜５０３をＯＳＤ等で重ね合わせて、液晶表示部１１１にて同時に表示を行ってもよい。
【００３８】
また、静止画像の候補を生成する際、シーンが変わった時点のＩピクチャを複数枚抜き出し、伸張部１０５で伸張することにより静止画像の候補を生成するようにしてもよい。または、無音区間を検出し、無音区間の所定時間前、もしくは無音区間中、もしくは無音区間の所定時間後、におけるＩピクチャを伸張部１０５で伸張することにより静止画像の候補を生成するようにしてもよい。または、ズームインもしくはズームアウトのズーム操作を行うためのズーム手段を用いて、ユーザーがズーム操作を行う際の、ズーム操作開始の所定時間前、もしくはズーム中、もしくはズーム操作終了の所定時間後、のＩピクチャを伸張部１０５で伸張することにより静止画像の候補を生成するようにしてもよい。
【００３９】
なお、以上では、通常動画像ストリームを伸張部１０５で伸張した動画像を、液晶表示部１１１で表示する際に、その動画像が、一旦、圧縮部１０３でＭＰＥＧストリームに圧縮され、伸張部１０５で伸張されたものにＯＳＤを加え、液晶表示部１１１で表示する構成を説明したが、Ａ／Ｄ変換部１０２から出力されるデジタル映像音声データが圧縮伸張されず、直接デジタル映像音声データにＯＳＤを加え、液晶表示部１１１に表示するようにしてもよい。
【００４０】
次に、ユーザーにより、その液晶表示部１１１に表示された複数枚の静止画像の候補から１枚の静止画像の選択を行い、その選択された静止画像を通常動画像ストリームに多重化するための静止画像とする。ユーザーが静止画像を選択する方法としては、タッチパネルに対応した液晶画面から選択してもよいし、リモコン、もしくは映像音声記録装置に設けられたボタンで選択してもよい。また、映像音声記録装置にシャッターのような外部から直接静止画像を取り込むための機能がある場合、ユーザーがシャッターを押すことで、直接静止画像を取り込み、その取り込まれた静止画像を、通常動画像ストリームに多重化するための静止画像としてもよい。また、ＳＤカードなどのメモリカード等で外部から直接静止画像を取り込むような機能がある場合、そのメモリカードから直接取り込まれた静止画像を、通常動画像ストリームに多重化するための静止画像としてもよい。また、ＵＳＢ接続もしくはライン入力機能がある場合、そのＵＳＢもしくはライン入力等で外部から直接静止画像を取り込み、その取り込まれた静止画像を、通常動画像ストリームに多重化するための静止画像としてもよい。
【００４１】
次にユーザーＩ／Ｆ１１０は、ユーザーにより選択された静止画像の情報をシステムコントローラ１０９に通知を行う。その選択された静止画像のＩピクチャから静止画像のＭＰＥＧストリーム（以後、静止画ストリームと呼ぶ）を生成し、その静止画ストリームとバッファ１０８に格納された通常動画像ストリームをストリーム多重化部１０４で多重化を行い、記録再生コントローラ１０７を介して記録媒体１０６に記録を行う。この多重化を開始する通常動画像ストリームの時刻は、ユーザーが選択した静止画像に対応するＩピクチャの時刻である。もしくは、静止画ストリームと通常動画像ストリームの多重化を行う際、多重化を開始する通常動画像ストリームの時刻はユーザーが静止画像を選択した時刻であってもよい。また、多重化を行う静止画ストリームに挿入される音声は、通常動画像ストリームに使用されている音声をそのまま使用し、静止画ストリームを生成して多重化を行う。
【００４２】
ここでは、１枚の静止画ストリームを多重化することを例として説明したが、多重化する際にＤＶＤビデオ規格であるマルチアングル機能を利用するため、通常動画像ストリームと静止画ストリームを合わせて最大９個のストリームまで同時に多重化することができる。
【００４３】
ここで、静止画ストリームの生成について図２を用いて説明する。
図２に示すビデオ・オブジェクト（ＶＯＢ）はビデオ・オブジェクト・ユニット（ＶＯＢＵ）の集合で構成される。ＶＯＢＵはナビパック（ＮＶ＿ＰＣＫ）、ビデオパック（Ｖ＿ＰＣＫ）、オーディオパック（Ａ＿ＰＣＫ）の集合で構成される。ここで、ＮＶ＿ＰＣＫはナビゲーションデータ、Ｖ＿ＰＣＫはビデオデータ、Ａ＿ＰＣＫはオーディオデータが含まれている。ビデオデータはＭＰＥＧで圧縮されたビデオエレメンタリストリームであり、通常Ｉピクチャ、Ｐピクチャ、Ｂピクチャで構成される。オーディオデータは音声の圧縮形式により圧縮されたオーディオエレメンタリストリームである。Ｉピクチャから静止画ストリームを生成する際、Ｖ＿ＰＣＫ内のビデオデータにはＩピクチャのみのデータを挿入し、また、Ａ＿ＰＣＫ内のオーディオデータには、通常動画像ストリームに使用されているオーディオデータと同じものを使用し、静止画ストリームを生成する。
以上のように、１つの入力から静止画ストリームと通常動画像ストリームを生成し、多重化を行い、記録媒体１０６に記録することができる。
【００４４】
次に、図１におけるストリーム多重化部１０４にて多重化されるストリームの構成について図３を用いて説明する。本実施の形態１による映像音声記録再生装置は、ＤＶＤビデオ規格において、音声をそのまま再生させながらユーザーが好むアングルの映像に切り替えて視聴することができるマルチアングル再生が可能となるようＭＰＥＧストリームの多重化を行う。
【００４５】
図３は、本発明の実施の形態１による映像音声記録再生装置におけるストリームの多重化フォーマットであり、実際にマルチアングル再生を行う際のデータ構成を示している。ここで、マルチアングル再生を行う際のデータ構成に関して簡単に説明するが、詳細についてはＤＶＤビデオ規格に記載されている。
マルチアングルを実現するためには、ＶＯＢがイリーブド・ユニット（ＩＬＶＵ）の集合で構成される必要がある。ＩＬＶＵは上述したＶＯＢＵの集合で構成される。
【００４６】
ここで、実際にアングルの異なる複数のＶＯＢを多重化したときのデータ構成について説明する。例えば、２つのＶＯＢ、つまりアングル１とアングル２のシーンのそれぞれのＶＯＢが、それぞれ複数のインターリーブド・ユニット（ＩＬＶＵ）に分割される。次に、アングル１とアングル２をＩＬＶＵ毎に多重化を行うことにより、マルチアングルのデータが構成される。
【００４７】
次に、本発明の映像音声記録再生装置における上述した液晶表示部１１１の表示方法について図１、図４を用いて説明する。
図４は、本発明の実施の形態１による映像音声記録再生装置における液晶表示部の詳細例を示す図であり、通常動画像ストリームが伸張部１０５で伸張された動画像と、静止画像の候補を、それぞれ別の画面で同時に液晶表示部１１１に表示する際の例を示している。
【００４８】
図４において、小画面４０１、４０２、４０３の静止画像の候補はバッファ１０８に格納された通常動画像ストリームから所定時間間隔でＩピクチャを複数枚抜き出し、伸張を行った画像をそれぞれ表示している。例として、図４は３枚表示しているが、何枚でも表示することができる。ノーマル画面４０４は現在、撮像部１０１で撮影中の映像を圧縮、伸張し表示している。ユーザーは小画面４０１、４０２、４０３の静止画像の候補の中からマルチアングル記録を行いたい画像を選択する。例えば、ユーザーが小画面４０１の静止画像を選択した場合、小画面４０１の静止画像が撮影された時刻から小画面４０１の静止画像の静止画ストリームと通常動画像ストリームを多重化しマルチアングル記録を行う。ここで、マルチアングル記録とは多重化を行い現在撮影されている映像及びその音声と、通常動画像ストリームから所定時間間隔で抜き出されたＩピクチャの中から選択された静止画像もしくは外部から直接取り込まれた静止画像とその音声を圧縮し記録媒体１０６に記録することをいう。
【００４９】
図５は、本発明の実施の形態１による映像音声記録再生装置における液晶表示部の詳細例を示す図であり、液晶表示部１１１の表示方法において、静止画像の候補５０１〜５０３を、通常動画像ストリームが伸張部１０５で伸張された動画像５０４にＯＳＤ等で重ね合わせて表示する際の例を示している。この動作としては、図４の動作と同じであるため説明を省略する。
【００５０】
次に、本実施の形態１におけるデータの構成について図１、図３、図４を用いて説明する。
例えば、ユーザーが図４における小画面４０１を選択したとする。その場合、図３におけるアングル１（ＶＯＢ１）は、ノーマル画面４０４に表示された動画像に対応する通常動画像ストリームで構成される。アングル２（ＶＯＢ２）はユーザーの選択した小画面４０１に表示された静止画像に対応した静止画ストリームで構成され、音声ストリームはアングル１と同じ音声ストリームで構成される。ここで、アングル２のデータは、正常に静止画像の再生を行えるようにするためにアングル２のＩＬＶＵ毎にＩピクチャのビデオデータが挿入されるよう構成する。これらのアングル１とアングル２を多重化することにより、マルチアングルストリームを構成する。
【００５１】
図６は、本発明の実施の形態１による映像音声記録再生装置で、マルチアングル記録を行う際、ユーザーが静止画像を選択した時刻以前からマルチアングル記録を開始するときの時間の流れを示した概念図である。
【００５２】
図１、図４、図６を用いて本発明におけるマルチアングル記録の開始点について説明する。
図６における斜線部は、バッファ１０８に格納されている通常動画像ストリームを表しており、また静止画像１は小画面４０１に表示され、静止画像２は小画面４０２に表示され、静止画像３は小画面４０３に表示される。例えば、ユーザーが静止画像１を選択した場合、静止画像１の静止画ストリームとバッファ１０８に一時蓄積された通常動画像ストリームを静止画像１が撮影された時刻から多重化しマルチアングル記録を行う。  また、図７は、本発明の実施の形態１による映像音声記録再生装置で、マルチアングル記録を行う際、ユーザーが静止画像を選択した時刻からマルチアングル記録を開始するときの時間の流れを示した概念図である。
【００５３】
図１、図４、図７を用いて本発明におけるマルチアングル記録の開始点について説明する。
図７における斜線部は、バッファ１０８に格納されている通常動画像ストリームを表しており、また静止画像１は小画面４０１に表示され、静止画像２は小画面に４０２に表示され、静止画像３は小画面４０３に表示される。例えば、ユーザーが静止画像１を選択した場合、静止画像１の静止画ストリームと、バッファ１０８に一時蓄積された通常動画像ストリームを、ユーザーが静止画像１を選択した時刻から多重化しマルチアングル記録を行う。
【００５４】
ここでは、上述のようにマルチアングル記録の開始点として二通りの例を挙げたが、マルチアングル記録を開始する時刻は、バッファ１０８に一時蓄積された通常動画像ストリームのどの時刻から開始してもよい。
【００５５】
図８は、本発明の実施の形態１による映像音声記録再生装置にてマルチアングル記録を行う際のフローチャートを表している。
本発明の実施の形態１による映像音声記録再生装置は、マルチアングルモードを有し、マルチアングルモードに切り替えることにより、マルチアングル記録が可能となる。
【００５６】
図８において、まず、ＳＴＥＰ８０１でユーザーにより、マルチアングルモードに切り替えられた場合、ＳＴＥＰ８０２でユーザーが選択するための静止画像の候補が液晶表示部１１１に表示される。次に、ＳＴＥＰ８０３で液晶表示された静止画像の候補の中からユーザーがマルチアングルを行うための静止画像を選択する（ＳＴＥＰ８０３でＹＥＳ）。次に、ＳＴＥＰ８０４でユーザーにより選択された静止画像の静止画ストリームと、通常動画像ストリームを多重化し、マルチアングル記録を行う。ＳＴＥＰ８０３でユーザーが静止画像の候補から静止画像を選択しない場合（ＳＴＥＰ８０３でＮＯ）は、再度、ＳＴＥＰ８０２の選択用の静止画像表示が行われる。次に、ＳＴＥＰ８０５でユーザーが、マルチアングル記録を終了させることにより、マルチアングル記録が終了し、このようにして、マルチアングル記録が行われる。
【００５７】
ここで、ユーザーが静止画像を選択していない場合でも通常記録は行われている。通常記録とは、多重化を行わず現在撮影されている映像及び音声のみを圧縮し、記録媒体１０６に記録することを示している。
【００５８】
なお、本実施の形態１においては、撮像部１０１を持つ映像音声記録再生装置を例として説明してきたが、ＤＶＤレコーダのような撮像部を持たない映像音声記録再生装置、またはデジタルビデオカメラについても、本発明を適用することが可能である。
【００５９】
以上のように本実施の形態１による映像音声記録再生装置においては、一つの入力によって複数のストリームを生成し、マルチアングル記録を行うことにより、記録された映像、音声を再生する際に、ＤＶＤプレーヤー等の通常の再生機で、音声の再生はそのままで、視聴者が見たい映像を選択し、再生することができるという効果がある。
【産業上の利用可能性】
【００６０】
本発明にかかる映像音声記録再生装置、及びデジタルビデオカメラは、一つの入力で複数のストリームを生成し、マルチアングル記録を行うことができ、ランダムアクセス可能な記録媒体に記録を行う映像音声記録再生装置において有用である。
【図面の簡単な説明】
【００６１】
【図１】本発明の実施の形態１による映像音声記録再生装置のブロック図である。
【図２】本発明の実施の形態１による映像音声記録再生装置における圧縮ストリームの構成図である。
【図３】本発明の実施の形態１による映像音声記録再生装置におけるストリームの多重化フォーマットである。
【図４】本発明の実施の形態１による映像音声記録再生装置における液晶表示部の詳細例である。
【図５】本発明の実施の形態１による映像音声記録再生装置における液晶表示部の詳細例である。
【図６】本発明の実施の形態１による映像音声記録再生装置におけるユーザーが静止画像を選択した時刻以前からマルチアングル記録を開始するときの時間の流れを示した概念図である。
【図７】本発明の実施の形態１による映像音声記録再生装置におけるユーザーが静止画像を選択した時刻からマルチアングル記録を開始するときの時間の流れを示した概念図である。
【図８】本発明の実施の形態１による映像音声記録再生装置におけるマルチアングル記録を行う際のフローチャートである。
【符号の説明】
【００６２】
１０１  撮像部
１０２  Ａ／Ｄ変換部
１０３  圧縮部
１０４  ストリーム多重化部
１０５  伸張部
１０６  記録媒体
１０７  記録再生コントローラ
１０８  バッファ
１０９  システムコントローラ
１１０  ユーザーＩ／Ｆ
１１１  液晶表示部
１１２  Ｄ／Ａ変換部
【図１】
2005312022.tif 000003
【図２】
2005312022.tif 000004
【図３】
2005312022.tif 000005
【図４】
2005312022.tif 000006
【図５】
2005312022.tif 000007
【図６】
2005312022.tif 000008
【図７】
2005312022.tif 000009
【図８】
2005312022.tif 000010