(57)【要約】【課題】データサイズが低減できると共に、構成を複雑化することなくデータの間引きの度合いを柔軟に設定できる汎用性の高い間引き処理装置、記録装置、及び再生装置をそれぞれ提供する。【解決手段】本発明の間引き処理装置は、生データから等時間間隔でデータを抽出し、抽出したデータ間の間隔を生データ間の間隔に等しくして出力する間引き部１０７と、上記の間引き部１０７からの出力を符号化する符号化部１０９とを備えている。【選択図】  図１
2004328616.tif 000002
【特許請求の範囲】
【請求項１】
生データから等時間間隔でデータを抽出し、抽出したデータ間の間隔を生データ間の間隔に等しくして出力する間引き処理手段と、
上記の間引き処理手段からの出力を符号化する符号化手段とを備えた間引き処理装置。
【請求項２】
上記の間引き処理手段は、間引きの度合いを決定する間引き情報を生成する手段を備え、上記の間引き処理手段は、上記間引き情報に応じて上記データの抽出を行うことを特徴とする請求項１に記載の間引き処理装置。
【請求項３】
請求項１又は２に記載の間引き処理装置を備え、
上記符号化手段により符号化されたデータを記録媒体に記録する記録手段を備えた記録装置。
【請求項４】
請求項３に記載の記録装置により記録されたデータを再生する再生装置であって、
符号化された上記データを上記記録媒体から読み出す再生手段と、
符号化された上記データを復号化する復号化手段と、
復号化された上記データを再生信号として出力する出力手段とを備えたことを特徴とする再生装置。
【請求項５】
上記記録媒体に記録されたデータが上記の間引き情報を有している場合、この間引き情報を記憶する間引き情報記憶手段を更に備え、
上記再生手段は、上記の間引き情報に応じて、上記出力手段から上記再生信号を出力することを特徴とする請求項４に記載の再生装置。
【請求項６】
請求項２に記載の間引き処理装置と、
上記符号化手段により符号化されたデータを記録媒体に記録する記録手段とを備え、
間引き情報を生成する上記手段は、上記記録媒体の残り容量が、記録するデータのサイズより小さい場合、上記データのサイズが上記の残り容量以内になるように上記間引き情報を生成することを特徴とする記録装置。
【請求項７】
上記の間引き情報を設定するインターフェース部を更に備えたことを特徴とする請求項６に記載の記録装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、映像・音声等のデジタルデータをハードディスクや光ディスク等のさまざまな記録媒体に記録するための間引き処理装置、記録装置、及び再生装置に関するものである。
【０００２】
【従来の技術】
近年、ＣＳ（ｃｏｍｍｕｎｉｃａｔｉｏｎ  ｓａｔｅｌｌｉｔｅ）放送やＢＳ（ｂｒｏａｄｃａｓｔｉｎｇ  ｓａｔｅｌｌｉｔｅ）デジタル放送のように、テレビジョン放送のデジタル化が進んでいる。
【０００３】
「平成１４年版情報通信白書（総務省）」によると、２００３年１２月には関東・近畿・中京の３大広域圏で地上デジタル放送が開始される予定であり、２００６年末までには全国で地上デジタル放送が開始される予定である。そして、２０１１年にはアナログ放送が停止される予定である。
【０００４】
また、地上デジタル音声放送については、当面、東京・大阪において、需要の把握、放送サービスの開発を目的とした実用化試験局による試験放送の実施が予定されている。
【０００５】
デジタル放送において、映像・音声等の情報源は、デジタル信号に符号化される。そして、符号化された情報源は多重化された後、ＴＳ（Ｔｒａｎｓｐｏｒｔ  Ｓｔｒｅａｍ）と呼ばれる符号化データ列として視聴者向けに送信される。
【０００６】
また、上記のように送信された符号化データ列は、視聴者によって受信装置で受信され、記録あるいは再生される。テレビ番組などの映像・音声コンテンツ等の符号化データを受信し、記録・再生するための装置としては、ＶＴＲ（ビデオテープレコーダ）が広く知られている。さらに、近年ではＤＶＤ（ｄｉｇｉｔａｌ  ｖｅｒｓａｔｉｌｅ  ｄｉｓｃ）のような光ディスクや、ハードディスクなどの磁気ディスク、半導体メモリなどを記録媒体として用いた、多様な記録再生装置が出現している。これらの記録媒体は大容量化が進んでおり、これらを記録媒体として用いた映像・音声コンテンツ等の記録・再生装置の普及も進んでいる。
【０００７】
一方、撮影した映像・音声データをデジタル信号化して記録するデジタルビデオカメラにおいては、ＣＣＤ撮影素子の高画素数化（メガピクセルのレベルまで普及している）に伴い、より高品位な動画・静止画の保存・編集が求められている。このため、近年ではＤＶＤやハードディスクを記録媒体とするデジタルビデオカメラが提案されている。
【０００８】
光ディスクや磁気ディスク、半導体メモリなどの記録媒体、およびこれらの記録媒体を用いた記録再生装置では、記録媒体の任意の領域に情報を記録させることが可能である。このため、記録された情報の中に不要な情報が含まれる場合、その不要な情報の記録領域のみを削除することができる。また、記録情報を削除した記憶領域（空き領域）は、他の情報を記録する為の記憶領域として再利用することができる。
【０００９】
図６に、デジタル放送などの符号化データを記録・再生する、従来の記録再生装置６００の構成例の概要を示す。記録再生装置６００は、受信部６０１、復号化部６０２、一時記憶部６０３、記録再生部６０４、及び出力部６０５を備えた構成であり、記録媒体６０６にデータを記録する、あるいは記録媒体６０６からデータを読み出して再生するためのものである。
【００１０】
受信部６０１は、デジタル放送などで符号化されて送信された映像・音声信号等を受信するために設けられている。復号化部６０２は、符号化データを復号化するために設けられている。一時記憶部６０３は、復号化されたデータを一時的に記憶するために設けられている。記録再生部６０４は、記録媒体６０６へのデータの書き込みおよび記録媒体６０６からのデータの読み出しを行うために設けられている。出力部６０５は、映像・音声データ等を出力するために設けられている。
【００１１】
記録時には、符号化済のデータが、受信部６０１によって受信された後、記録再生部６０４へ送られ、記録媒体６０６に記録される。
【００１２】
一方、再生時には、記録再生部６０４によって記録媒体６０６から符号化済のデータが読み出されて復号化部６０２へ送られ、ここで復号化が行われた後、一時記憶部６０３へ送られて記憶される。そして、一時記憶部６０３に記憶された復号化済のデータは、順次、出力部６０５から出力される。
【００１３】
次に、図７を用いて、従来のビデオカメラについて説明する。図７は、撮影した映像・音声データを符号化して記録・再生する従来のビデオカメラ（ビデオカメラ７００）の構成例の概要を示す。
【００１４】
ビデオカメラ７００は、符号化部７０１、一時記憶部７０２、復号化部７０３、記録再生部７０４、及び出力部７０５を備えた構成であり、撮影した映像・音声を、記録媒体７０６に記録する、あるいは記録媒体７０６からデータを読み出して再生するためのものである。
【００１５】
符号化部７０１は、情報取得部で取得した映像・音声データを符号化するために設けられている。一時記憶部７０２は、符号化された映像・音声データ（符号化データ）を一時記憶しておくために設けられている。復号化部７０３は、符号化された映像・音声データを復号化するために設けられている。
【００１６】
記録再生部７０４は、符号化された映像・音声データを記録媒体７０６に書き込む、あるいは記録媒体７０６に記録されている符号化された映像・音声データを読み出すために設けられている。出力部７０５は、映像・音声データを出力するものである。
【００１７】
従来のビデオカメラ７００において、映像・音声データを記録媒体へ記録する時、および記録媒体から映像・音声データを読み込んで再生する時のデータの流れを説明する。
【００１８】
まず映像・音声データを記録する場合は、撮影されたデータは、符号化部７０１で符号化された後、一時記憶部７０２に一旦記憶される。そして、記憶されたデータは、記録再生部７０４に順次送られ、記録媒体７０６に記録される。
【００１９】
記録媒体７０６に記録されているの映像・音声データを再生する場合は、図６に示した記録再生装置６００と同様である。すなわち、記録再生部７０４で読み込まれた符号化データは、復号化部７０３で復号化され、一時記憶部７０７に一旦記憶される。そして、一時記憶部７０７に記憶されたデータは、出力部７０５に順次送られて出力される。
【００２０】
上記のような従来の装置を用いて記録媒体にデータを記録する際、記録媒体の記憶容量は有限であるので、残りの記録領域（空き領域）が、これから記録しようとするデータに対して不足する場合がある。
【００２１】
このような場合の対処法として、記録済みのデータを消去して空き領域を確保する方法、あるいはこれから記録するデータの品質を落として、記録するデータのサイズを低減する方法がある。
【００２２】
また、データサイズを低減する方法は、記録媒体の残り記録容量が十分であっても、例えば、記録媒体にできるだけ多くのコンテンツを記録したい場合にも有効な方法である。すなわち、高品質を必要としないコンテンツ、あるいはユーザにとって重要度の低いコンテンツなどを記録する場合にデータサイズを低減させて記録することにより、記録媒体により多くのコンテンツを記録することができる。
【００２３】
例えば、特許文献１〜３には、符号化されたデータを記録媒体に記録する際、特定のフレームを間引くことによってデータ量を削減することにより、長時間記録を実現する方法が開示されている。
【００２４】
【特許文献１】
特開２０００−１６５８１５号公報（公開日２０００年６月１６日）
【００２５】
【特許文献２】
特開平１１−１８５４５４号公報（公開日１９９９年７月９日）
【００２６】
【特許文献３】
特開平５−２４４５５６号公報（公開日１９９３年９月２１日）
【００２７】
【発明が解決しようとする課題】
しかしながら、上述のような従来技術は、次のような問題点を有している。
【００２８】
まず、記録済みのデータを削除する場合には、削除がコンテンツ単位で行われるために、一度削除したコンテンツは再び視聴することが出来なくなるという問題がある。さらに、削除が自動的に行われる装置の場合、ユーザの意図しないコンテンツが削除されてしまう恐れがある。また、削除処理を行う間は、記録あるいは撮影（情報取得）が中断してしまうという欠点がある。
【００２９】
したがって、上記の問題を回避するためには、記録するデータのサイズを低減する方法が好ましい。
【００３０】
しかしながら、上述のような従来のデータサイズの低減方法では、汎用性が低い、あるいはデータサイズ低減の程度が制限されるなどの問題がある。
【００３１】
例えば、記録レートを下げることによって映像・音楽データ等を低品質化させてデータサイズを低減させる場合、これらの映像・音楽データ等を再生するためには、再生装置が通常のレートと低減したレートの両方に対応している必要がある。すなわち、ある記録装置でレートを低減して記録した映像・音声データは、他の機器を用いて再生できない場合があり、装置の汎用性が低い。
【００３２】
また、特許文献１〜３に開示の技術は、符号化データを間引く方法であるが、符号化データはフレーム間の関連性が強いため、どのフレームも間引けるわけではないので、間引きの仕方が制限される。すなわち、間引きの度合いを任意に設定するのに不向きである。このため、必要とするデータサイズの削減量が得られない場合や、逆にユーザの許容範囲以上にデータを削減してしまう場合がある。
【００３３】
さらに、低減したデータは元の符号化方式に則していないので、再生時にはこの間引き方法に対応した再生装置が必要となり、記録レートを下げる方法と同様、装置の汎用性が低い。
【００３４】
本発明は、上記の問題点に鑑みなされたものであり、データサイズが低減できると共に、構成を複雑化することなくデータの間引きの度合いを柔軟に設定できる汎用性の高い間引き処理装置、記録装置、及び再生装置をそれぞれ提供することにある。
【００３５】
【課題を解決するための手段】
本発明の間引き処理装置は、上記の課題を解決するために、生データから等時間間隔でデータを抽出し、抽出したデータ間の間隔を生データ間の間隔に等しくして出力する間引き処理手段と、上記の間引き処理手段からの出力を符号化する符号化手段とを備えている。なお、上記生データとは、受信したものが符号化データの場合には復号されたデータを意味し、受信したものが符号化されていない場合には受信したデータそのものを意味する。
【００３６】
上記の発明によれば、間引き処理手段によって、生データに対して間引き処理が行われ、等時間間隔でデータが抽出される。これにより、全体としてデータ量（データサイズ）を減少させることが可能となる。なお、ここで、生データとは、受信した符号化データが復号されたものをいう。
【００３７】
また、上記のように、データ間の関連性の小さい生データに対して間引き処理が行われるので、データ間の関連性が大きい符号化データに対して間引き処理を行う場合と比較して、間引く度合いの設定を柔軟に行える。
【００３８】
間引き処理手段は、また、抽出したデータ列のデータ間の間隔を上記生データ間の間隔に等しくして符号化手段へ出力する。このように間引き処理の施されたデータ列に対して符号化が符号化手段によって行われる。
【００３９】
このようにして符号化されたデータは、生データ間の間隔と等しいデータ間隔を有しているので、生データの符号化方式に準ずる（則った）ものとなる。したがって、間引き処理後のデータであるにもかかわらず、当該間引き処理に対応した特殊な構成を別途設ける必要がなく、非常に汎用性の高い間引き処理装置を実現できる。
【００４０】
上記の間引き処理手段は、間引きの度合いを決定する間引き情報を生成する手段を備え、上記間引き情報に応じて上記データの抽出を行うことが好ましい。この場合、間引く度合いの設定を更に柔軟に行うことが可能となる。また、従来の再生機器の多くがスロー再生機能を有しているので、このスロー再生機能の再生速度に対応した間引きの度合いに基づいて間引き処理を行えば、従来機器でも再生が可能となる。
【００４１】
本発明の記録装置は、上記の課題を解決するために、上記の間引き処理装置を備え、上記符号化手段により符号化されたデータを記録媒体に記録する記録手段を備えていることが好ましい。
【００４２】
上記の記録装置によれば、間引き処理装置によって、符号化されたデータが、生データ間の間隔と等しいデータ間隔を有しているので、間引き処理後のデータであるにもかかわらず、当該間引き処理に対応した特殊な構成を記録装置が別途備える必要がなく、構成の複雑化を確実に回避できる。
【００４３】
本発明に係る再生装置は、上記課題を解決するために、上記記載の記録装置により記録されたデータを再生するものであって、符号化された上記データを上記記録媒体から読み出す再生手段と、符号化された上記データを復号化する復号化手段と、復号化された上記データを再生信号として出力する出力手段とを備えたことを特徴としている。
【００４４】
上記の再生装置によれば、符号化された上記データが再生手段によって上記記録媒体から読み出される。読み出された上記符号化されたデータは、復号化手段によって復号化される。このようにして復号化された上記データは、出力手段によって再生信号として出力される。これにより、構成を複雑化することなく、間引き処理されて記録された符号化済データを確実に再生できる。
【００４５】
上記の再生装置は、上記記録媒体に記録されたデータが上記の間引き情報を有している場合、この間引き情報を記憶する間引き情報記憶手段を更に備え、上記再生手段は、上記の間引き情報に応じて、上記出力手段から上記再生信号を出力することが好ましい。
【００４６】
この場合、間引きの度合いに係る間引き情報に応じて、出力手段から再生信号が出力されるので、生データと同様の再生速度で再生信号を出力することができる。
【００４７】
本発明に係る記録装置は、上記課題を解決するために、上記記載の間引き処理装置と、上記符号化手段により符号化されたデータを記録媒体に記録する記録手段とを備え、間引き情報を生成する上記手段は、上記記録媒体の残り容量が、記録するデータのサイズより小さい場合、上記データのサイズが上記の残り容量以内になるように上記間引き情報を生成することが好ましい。この場合、記録するデータを途切れることなく最後まで記録媒体に確実に記録することが可能となる。
【００４８】
上記記録装置において、上記の間引き情報を設定するインターフェース部を更に備えていることが好ましい。この場合、適宜、インターフェース部を介して間引き処理を行う間隔を任意に設定できるので、間引き情報に基づいて間引き処理がきめ細かく行え、汎用性が著しく向上する。
【００４９】
【発明の実施の形態】
本発明の記録装置に係る実施の一形態について図１〜図３、および図８に基づいて説明すれば以下のとおりである。
【００５０】
上記の記録装置は、テレビ番組などの映像・音声等を受信し、記録するための記録装置である。また、本記録装置は、たとえば、再生装置、アンプ（増幅器）、表示装置、スピーカー等の他の外部機器とともに、映像・音響システムを構築する際に採用されてもよい。
【００５１】
図１は、本記録装置の構成例の概要を示す説明図である。図１に示すように、本記録装置は、主として、受信部１０１、復号化部１０２、一時記憶部１０３、記録部１０４（記録手段）、間引き部１０７（間引き処理手段）、間引き情報生成部１０８（間引き情報生成手段）、及び符号化部１０９（符号化手段）から構成されており、記録媒体１０６にデータを符号化して記録するものである。
【００５２】
上記間引き部１０７（間引き処理手段）、間引き情報生成部１０８（間引き情報生成手段）、及び符号化部１０９（符号化手段）は、本発明に係る間引き処理装置を形成する。
【００５３】
そして、本記録装置は、通常の記録（記録時に受信した符号化データをそのまま記録する）に加えて、間引き記録が可能なように構成されている。ここで、間引き記録とは、記録時にデータの一部を等時間間隔で間引くことによってデータサイズを低減して記録することを意味する。すなわち、間引き記録では、記録対象のデータの一部のみを抽出して記録し、残りの部分を記録しない。
【００５４】
上記の受信部１０１は、デジタル放送などで送信された映像・音声情報等の符号化データを受信するために設けられている。上記の復号化部１０２は、符号化データを復号化するために設けられている。上記の一時記憶部１０３は、復号化されたデータを一時的に記憶するために設けられている。上記の記録部１０４は、上記の記録媒体１０６に対してデータの書き込みを行うために設けられている。ここで、上記の記録媒体１０６には、たとえば、映像・音楽等が記録されるが、記録内容はこれらに限定されるものではない。
【００５５】
上記の間引き部１０７は、映像および音声等のデータの間引き処理を行うために設けられている。上記の間引き処理には、生データから等時間間隔でデータを抽出すること、及び抽出したデータ間の間隔を生データ間の間隔に等しくして出力することが含まれる。なお、間引き部１０７の構成および処理動作については、後に詳しく述べる。
【００５６】
上記の間引き情報生成部１０８は、どのような時間間隔でデータを間引くかを示す間引き情報を生成するために設けられている。上記の符号化部１０９は、間引き処理されたデータを符号化するために設けられている。
【００５７】
ここで、本記録装置の間引き記録について説明する。上記したように、間引き記録とは、記録時にデータの一部のみを抽出して記録し、残りのデータを間引くことによってデータサイズを低減して記録することである。
【００５８】
まず、記録媒体１０６に対して映像・音声情報を記録する場合のデータの流れを説明する。テレビ放送等からの映像・音声データが符号化された符号化済のデータは、受信部１０１によって受信される。符号化済の上記データは、復号化部１０２に送られ、ここで、受信した映像・音声データが復号される。
【００５９】
ここで、受信した符号化データを復号化したものを生データと称す。生データのうち、間引き処理を行っておらず、符号化されていないものは、上記の復号化部１０２を介する必要はない。
【００６０】
次に、上記の生データは、上記の一時記憶部１０３に送られ、ここで、一時記憶されて蓄積される。一時記憶部１０３に蓄積された生データは、順次、上記の間引き部１０７へ送られ、ここで、間引き情報生成部１０８が生成する間引き情報に応じて、間引き処理が行われる。これにより、生データのサイズを小さくすることが可能となる。なお、間引き処理の詳細に関しては、後で述べる。
【００６１】
このようにして間引き処理が施された生データは、上記の符号化部１０９へ送られ、ここで符号化された後、記録部１０４を介して上記の記録媒体１０６に書き込まれる（記録される）。
【００６２】
ここで、図８を用いて、間引き部１０７内の処理について説明する。図８は間引き部１０７内の処理ブロック図である。図８に示すように、間引き部１０７は、間引きエンジン８０１と時間情報変換部８０２とによって構成されている。
【００６３】
まず、間引きエンジン８０１には間引き情報生成部１０８が生成した間引き情報が入力され、間引きの度合いが決定される。次に一時記憶部１０３に蓄えられたフレームデータの中から、最も時間情報の古いデータが複数個、間引きエンジン８０１に入力される。この時、入力されるフレームデータの個数は、間引きの度合いに応じて決定される。すなわち間引きの度合いが大きい場合には、より多くのフレームデータが入力される。
【００６４】
次に、間引きエンジン８０１は、入力された複数のフレームデータを、間引き情報を元に間引き処理する。ここで間引き処理とは、複数のフレームデータの中から、間引き情報を元に決定された間隔でフレームを選択し、選択されたフレーム以外のフレームデータを削除する処理である。
【００６５】
それから、等間隔で間引かれたフレームデータと、間引き情報とが、時間情報変換部８０２に送られる。時間情報変換部８０２は、間引かれたフレームデータの時間間隔を、間引く前の時間間隔に修正するために設けられている。フレームデータには、ＭＰＥＧ圧縮におけるタイムスタンプのように、いつ復号再生すべきかを示す時間情報が付加されている。
【００６６】
間引きエンジンで間引かれたフレームデータの、隣接するフレーム間の時間情報間隔は、間引く前の時間情報間隔に比べ、間引きの度合いに応じ長くなっている。この間引きの度合いは間引き情報を元に決定されており、時間情報変換部８０２では、この間引き情報を用いて、フレームデータの時間情報間隔を、間引く前の時間情報間隔に修正する。
【００６７】
すなわち、最初に入力されたフレームデータの時間情報を基準に、以降のフレームデータの時間情報を、間引く前の時間情報間隔になるように修正する。修正されたデータは順に符号化部１０９に送られる。この処理は、間引き処理が終了するまで続けられる。
【００６８】
なお、上記の間引き処理を図で示したものが図２である。
【００６９】
図２は、間引き処理による映像データのサイズ低減化の様子を示す説明図である。間引きする対象のデータは、生データである。
【００７０】
図２において参照符号Ｉは、間引き処理が施される前の生データ（元データ）を表し、生データが含むフレーム画像が時系列に並べられている。本記録装置の間引き処理には、このフレーム列から等時間間隔で所定のフレームを抽出する処理が含まれる。このときの時間間隔は間引き情報生成部１０８が出力する間引き情報をもとに決定される。
【００７１】
間引き情報生成部１０８は、たとえば、記録媒体の残り容量に応じた間引き情報を生成する。この場合、記録媒体の残り容量よりも記録する映像・音声データのデータサイズが大きい場合、このデータサイズを記録媒体の残り容量以内に低減するように間引き情報が生成される。
【００７２】
以下の説明では、間引き処理において、３フレーム毎に１フレームを抽出する場合を例示しているが、本発明はこれに限定されるものではなく、等時間間隔で生データの一部が抽出されさえすればよい。
【００７３】
具体的には、図２中の上記Ｉにおいて、フレーム２０１を抽出の対象とすると、次のフレーム２０２と、その次のフレーム２０３とは抽出されない。同様に、フレーム２０４が抽出され、フレーム２０５及び２０６は抽出されない。そして、２０７が抽出される。以降も同様に３フレーム毎に１フレームが抽出される。
【００７４】
ここで、フレーム２０１からフレーム２０４までの時間間隔（抽出間隔）２１４と、フレーム２０４からフレーム２０７までの時間間隔（抽出間隔）２１５とは等時間間隔である。また、以後の抽出処理についても同様に、等時間間隔で抽出が行われ、図２中において、上記抽出間隔２１４及び２１５は、抽出間隔２１８と同じである。
【００７５】
図２中の参照符号ＩＩは、抽出したフレームのみを時系列に並べたイメージ図である。上記ＩＩにおいて２０８、２０９、２１０は、上記Ｉにおける２０１、２０４、２０７をそれぞれ抽出したものである。
【００７６】
本記録装置では、生データ（図２中の元データ）から抽出したこれらのフレームのみが記録媒体１０６に記録され、間引いたフレーム（フレーム２０２、２０３、２０５、２０６等）は記録されない。
【００７７】
なお、上記ＩＩで抽出されたフレームを記録媒体１０６に記録するためには、記録前に符号化されることが必要である。本記録装置では、間引き部１０７において、抽出されたフレームは、抽出前（生データ時）のフレーム間隔に再構成された後、符号化部１０９に出力され、ここで、符号化部１０９によって符号化される（図２中の参照符号ＩＩＩ参照）。
【００７８】
図２中の参照符号ＩＩＩにおいて、フレーム２１１、２１２、２１３は、間引き処理によって生データから抽出したフレーム２０８、２０９、２１０とそれぞれ同じものである。また、上記ＩＩＩ中のフレームの時間間隔２１６は、上記Ｉ中の生データのフレームの時間間隔２１７と同じである。
【００７９】
ここで、音声データの間引き処理について、図３を用いて説明する。図３は、間引き処理による音声データのサイズ低減化の様子を示している。
【００８０】
音声データの間引き処理において、間引きする対象のデータは、映像データの間引き処理の場合と同様に生データである。
【００８１】
音声データの間引き処理には、元データ（生データ）から、等時間間隔で音声データを抽出する処理が含まれている。このときの抽出間隔は、映像データの場合と同様に、間引き情報生成部１０８で決定される。
【００８２】
以下の説明では、音声データの間引き処理を説明するために、上記の映像データの間引き処理の場合と同様に、３つの音声データ毎に１つの音声データを抽出する場合を例示するが、本発明はこれに限定されるものではなく、等時間間隔で音声データが抽出されさえすればよい。
【００８３】
図３において、参照符号Ｉは間引き処理を行う前の元データ（生データ）を時系列表示したものである。参照番号３０１に示す黒点は、音声データの１つを表しており、音声波形３０３をサンプリング時間間隔３０２でサンプリングすることにより得られる。
【００８４】
上記Ｉにおいて３つの音声データ３０４に間引き処理を適用し、音声データ３０５が抽出の対象として選択される場合、３０４内に含まれる他の２つの音声データは抽出されない。このような抽出処理を上記Ｉに示した元データに含まれる全ての音声データに適用し、抽出された音声データのみを示したのが、図３中の参照符号ＩＩで示すものである。
【００８５】
上記ＩＩにおいて音声データ３０６は、上記Ｉにおける音声データ３０５と同じものである。この場合、間引き処理後の音声データ間の時間間隔３０７は元データのサンプリング時間間隔３０２の３倍にあたる。このように、抽出された音声データの数は、元データに含まれる音声データの数の１／３であり、音声データ全体のサイズが１／３に低減されたことになる。
【００８６】
さらに、本記録装置では、ＩＩに示した間引き処理後の音声データが記録媒体１０６に記録される際、音声データ間の時間間隔は、元データのサンプリング時間間隔３０２と同じ時間間隔に再構成される。
【００８７】
図３の参照符号ＩＩＩは、再構成後の音声データを示している。このＩＩＩにおける音声データ間の時間間隔３０８は、間引き処理前の元データのサンプリング時間間隔３０２と等しい。
【００８８】
以上のように、本記録装置では、フレームの間引き処理が行われた映像・音声データが符号化された後、記録媒体１０６に記録される。これにより、データサイズを低減することが可能となっている。
【００８９】
ここで、本記録装置では、間引き後のデータを符号化する際の符号化方式は、受信時の符号化方式に準じている。したがって、汎用性の高い記録形式（符号化方式）で記録することが可能である。すなわち、特殊な記録装置を必要としない記録形式で記録することができる。
【００９０】
また、本記録装置では、生データに対して間引き処理を行っている。生データは、フレーム間の関連性が大きい符号化データとは異なり、フレーム間の関連性が小さい。このため、間引く度合い（間引き情報）を柔軟に設定することが可能である。
【００９１】
また、映像・音声データの間引きに用いる間引き情報は、例えば、記録媒体の残り容量に応じて生成することが可能である。例えば、記録媒体の残り容量よりも記録する映像・音声データのデータサイズが大きい場合、データサイズを記録媒体の残り容量以内に低減するように間引き情報が生成される。これにより、記録媒体の残り容量に応じて、データを最後まで記録することが可能となる。
【００９２】
一方、本記録装置で上記の間引き処理を行って記録された映像・音声データを、従来の再生装置で通常の再生方法により再生した場合、間引きの度合いに応じて、間引き処理前の映像・音声よりも早いスピードで再生される。例えば、３フレームごとに１フレームが抽出される映像データの場合、３倍速で再生されることになる。３つのデータごとに１つのデータが抽出される音声データについても同様である。
【００９３】
ところで、従来の再生装置の多くが、スロー再生機能を有している。それゆえ、従来の再生装置のスロー再生速度に応じて、上記間引き情報生成部１０８の間引き度合いを設定すれば、従来の再生装置でスロー再生することにより、受信時と同様の速度で再生することができる。例えば、従来の再生装置が１／３の速度でスロー再生する機能を有している場合、本記録装置で間引き処理を行って記録した映像・画像データを、従来の再生装置でスロー再生させることにより、受信時と同様の速さで再生することができる。
【００９４】
本記録装置は、従来の記録装置に対して、間引き部１０７、間引き情報生成部１０８、及び符号化部１０９を追加するだけでよい。すなわち、追加する部材が少なく、機器構成の簡素化を図ることが可能となる。
【００９５】
本記録装置において、間引き情報生成部１０８は必ずしも必要ではない。すなわち、予め決められた一定の（固定の）間引き度合いで間引き処理を行う場合は、間引き情報生成部１０８を設けない構成とすることができる。
【００９６】
また、本記録装置は、インターフェース部を介して間引き情報の設定を行う構成としてもよい。あるいは、間引き情報の設定プログラムを別途設けたＲＯＭ等の記憶装置に予め記憶させておき、生データに応じて間引き情報を設定する構成としてもよい。
【００９７】
本記録装置では、間引き処理を実現するために、間引き部１０７、間引き情報生成部１０８および符号化部１０９が設けられている。この符号化部１０９に関しては、従来の装置が備えている場合がある。例えば、生データを受信して記録媒体に記録する記録装置において、記録前に生データの符号化を行うものがある。このような従来装置において本発明の間引き処理を実現する場合は、間引き処理部１０７と間引き情報生成部１０８とを更に設けるだけでよい。間引き処理後のデータの符号化処理は、当該従来装置がもともと備えている符号化部を用いて行うことが可能である。
【００９８】
本記録装置における記録媒体１０６は、ビデオテープ等の磁気テープ、ＤＶＤ等の光ディスク、半導体メモリ等の記録装置に固定されない媒体としてもよく、ハードディスク（磁気ディスク）等の記録装置に固定された媒体としてもよい。
【００９９】
本記録装置は、再生装置、アンプ（増幅器）、表示装置、スピーカー等の他の外部機器とともに、映像・音響システムを構築する際に採用され得るものであるが、これらの外部機器を内蔵するものであってもよい。すなわち、本記録装置は、再生装置、アンプ、表示装置、スピーカー等と一体化された映像・音響システムとすることもできる。
【０１００】
また、上記記録媒体としては、ビデオテープやカセットテープ等の磁気テープ、フロッピー（登録商標）ディスクやハードディスク等の磁気ディスク、ＣＤ−ＲＯＭ，ＭＯ，ＭＤ，ＤＶＤ，ＣＤ−Ｒ等の光ディスク（光磁気ディスク）、ＩＣカード，光カード等のメモリカード、マスクＲＯＭ，ＥＰＲＯＭ，ＥＥＰＲＯＭ，フラッシュＲＯＭ等の半導体メモリなどを適用できる。ネットワーク（イントラネット・インターネット等）を介して情報処理装置と接続されている記録媒体を用いてもよい。
【０１０１】
ここで、本発明の記録装置に関する他の実施形態について、図４に基づいて説明すれば、以下のとおりである。
【０１０２】
本実施形態のかかるビデオカメラ（記録装置；以下、本ビデオカメラと称す。）は、自身に搭載されたカメラおよびマイクロフォンによって映像・音声データを取得し、記録媒体にそれを記録するものである。
【０１０３】
そして、本記録装置は、通常の記録に加えて、間引き処理により記録する映像・音声データ等のデータサイズを低減させて記録することが可能である。
【０１０４】
図４は、ここで例示するビデオカメラの構成例の概要を示す。図４に示すように、上記ビデオカメラは、主として、一時記憶部４０１、記録部４０２（記録手段）、間引き部４０４（間引き処理手段）、間引き情報生成部４０５、及び符号化部４０６で構成されており、撮影した映像・音声データを記録媒体４０３に記録するものである。
【０１０５】
上記の一時記憶部４０１は、映像・音声データ（生データ）を一時記憶しておくために設けられている。上記の記録部４０２は、記録媒体４０３に対するデータの書き込み（記録）を行うために設けられている。なお、上記の記録媒体４０３には、映像・音楽等が記録される。
【０１０６】
上記の間引き部４０４は、映像および音声データの間引き処理を行うために設けられている。上記の間引き処理には、生データから等時間間隔でデータを抽出すること、及び抽出したデータ間の間隔を生データ間の間隔に等しくして出力することが含まれる。上記の間引き情報生成部４０５は、フレームの間引き間隔（間引き情報）を生成するために設けられている。上記の符号化部４０６は、データを符号化するために設けられている。
【０１０７】
ここで、本ビデオカメラの間引き記録について説明する。
【０１０８】
まず、取得した映像・音声データは、一時記憶部４０１に送られ、記憶・蓄積される。一時記憶部４０１に蓄積される映像・音声データは、符号化が行われていない生データである。
【０１０９】
次に、一時記憶部４０１に蓄積された生データが、間引き部４０４に順次送られる。間引き部４０４において、間引き情報生成部４０５で生成された間引き情報をもとに入力された映像・音声データに対して間引き処理が行われる。これにより、映像・音声データのサイズが低減される。なお、データの間引き処理、及び間引き情報の生成については、前述の記録装置（図１〜図３参照）と同様であるので、ここでは説明を省略する。
【０１１０】
それから、間引き部４０４によってサイズが低減され、再構成された生データが、符号化部４０６に送られ、ここで符号化が行われる。さらに、符号化されたデータは、記録部４０２に送られ、記録媒体４０３に書き込まれる（記録される）。
【０１１１】
以上のように、本ビデオカメラによれば、撮影した映像・音声データに対して間引き部４０４によって間引き処理が行われ、データサイズが低減されて再構成された後、記録媒体４０３に記録される。したがって、本ビデオカメラは、映像・音声データの記録に関して、前述の記録装置と同様の作用・効果を奏する。
【０１１２】
なお、本ビデオカメラにおいても、間引き情報生成部４０５は必ずしも必要ではない。予め決められた一定の間引き度合いで間引き処理を行う場合は、間引き情報生成部４０５を設けない構成とすることができる。
【０１１３】
本記録装置では間引き処理を実現するために、間引き部４０４、間引き情報生成部４０５および符号化部４０６が設けられている。符号化部４０６に関しては従来の装置が備えている場合がある。例えば、図７中に示すように、撮影した映像・音声データを符号化する符号化部７０１を一般的に備えている。
【０１１４】
これら従来のビデオカメラにおいて本発明の間引き処理を実現する場合は、間引き部４０４と間引き情報生成部４０５のみを付加するだけでよい。この場合、間引き後のデータの符号化処理は、装置がもともと備えている符号化部を用いて行うことが可能である。
【０１１５】
また、本記録装置における記録媒体４０３は、ビデオテープ等の磁気テープ、ＤＶＤ等の光ディスク、半導体メモリ等のビデオカメラに固定されない媒体としてもよく、ハードディスク（磁気ディスク）等のビデオカメラに固定された媒体としてもよい。
【０１１６】
また、本ビデオカメラは、再生装置、アンプ（増幅器）、表示装置、スピーカー等の他の外部機器とともに、映像・音響システムを構築するものに採用され得るが、これらの外部機器を内蔵するものであってもよい。すなわち、本ビデオカメラは、再生装置、アンプ、表示装置、スピーカー等と一体化された映像・音響システムとすることもできる。
【０１１７】
ここで、本発明の再生装置について、図５を参照しながら以下に説明する。
【０１１８】
ここで例示する再生装置は、アンプ（増幅器）、表示装置、スピーカー等の他の外部機器とともに、映像・音響システムを構築する際に採用され得るものである。
【０１１９】
本再生装置は、従来の再生機能に加えて、前述の記録装置（図１参照）やビデオカメラ（図４参照）によって記録された映像・音声データを、間引き処理前の映像・音声と同様の速度で再生する機能を持っている。
【０１２０】
図５は、本再生装置の構成の概要を示す説明図であり、図１や図４に示した記録装置によって記録されたデータを再生するための構成を示している。
【０１２１】
本再生装置は、図５に示すように、主として、間引き情報記憶部５０１、復号化部５０２、一時記憶部５０３、再生部５０４（再生手段）、及び出力部５０５（出力手段）から構成されており、記録媒体５０６に記録されているデータ（符号化済のデータ）を読み取り、再生するためのものである。
【０１２２】
間引き情報記憶部５０１は、間引きの度合いを決定する間引き情報を記憶しておくために設けられている。復号化部５０２は、符号化データ（符号化されて記録媒体５０６に記録されているデータ）を復号化するために設けられている。一時記憶部５０３は、復号化されたデータを一時的に記憶・蓄積しておくために設けられている。再生部５０４は、記録媒体５０６に記録されているデータを読み取りとるために設けられている。記録媒体５０６には、図１や図４に示す前述の記録装置によって映像・音楽データ等が既に記録されている。出力部５０５は、復号化されたデータを映像・音声出力として外部機器へ出力するために設けられている。
【０１２３】
ここで、記録媒体５０６に記録済の映像・音声データを再生する際のデータの流れを説明する。
【０１２４】
まず、再生部５０４によって記録媒体５０６から再生する映像・音声データに用いられた間引き情報が読み出される。読み出された間引き情報は、間引き情報記憶部５０１に送られ、ここで、記憶される。
【０１２５】
再生する映像・音声等の符号化データに対しては、従来の装置と同様の処理が進められる。すなわち、再生部５０４によって記録媒体５０６から記録済の符号化データが読み出された後、復号化部５０２へ送られる。復号化部５０２において、符号化データの復号化が行われた後、一時記憶部５０３に送られる。一時記憶部５０３において、復号化されたデータが記憶される。
【０１２６】
一時記憶部５０３に記憶される映像・音声データは、記録時に間引き処理が行われた映像・音声データである。したがって、この映像・音声データが通常の再生速度で再生されると、間引き処理が行われる前の映像・音声データの速度に対して、数倍速で再生されることになる。
【０１２７】
この際の再生速度は、間引きの度合いによって決まる。例えば、図１の記録装置の場合と同様、映像データが３フレームごとに１フレームを抽出して記録し、音声データは３つの音声データごとに１つを抽出して記録する場合を考える。この場合、間引き処理後の映像・音声データを通常の再生速度で再生すると、間引き処理前の映像・音声データの３倍速で再生されることになる。
【０１２８】
そこで、本再生装置では、間引き情報記憶部５０１に記憶された間引き情報に基づいて再生速度が制御される。すなわち、間引き処理後の映像・音声データを、間引き処理前の映像・音声データと同じ再生速度で再生するために、映像・音声データを一時記憶部５０３から出力部５０５に送るタイミングが上記間引き情報に基づいて制御される。
【０１２９】
例えば、図１に示す記録装置で間引き処理を行って記録された映像・音声データを再生する場合には、一時記憶部５０３から出力部５０５に映像・音声データが送られるタイミングは、通常の再生時の１／３に制御される。これにより、再生時に、映像・音声データが受信時の映像・音声と同様の再生速度で再生されることになる。
【０１３０】
以上のように、本再生装置では、フレームの間引き処理が間引き情報に基づいて制御されるので、符号化された映像・音声データを、間引き処理前の映像・音声と同様の再生速度で再生することが可能となる。
【０１３１】
また、本再生装置では、従来の再生装置に対して追加する装置が少なく、機器構成を簡素化できる。すなわち、上記のように、従来の再生装置に間引き情報記憶部５０１を追加し、間引き情報記憶部５０１に記憶された間引き情報に基づいて一時記憶部５０３から出力部５０５へのデータを出力するタイミングを制御するだけよい。
【０１３２】
なお、本再生装置において、間引き情報記憶部５０１は必ずしも必要ではない。記録装置における間引き度合いが一定の場合、間引き情報記憶部５０１を必要としない。また、一時記憶部５０３から出力部５０５へのデータの出力タイミングを設定するインターフェース部を備え、適宜変更できる構成でも良い。
【０１３３】
また、本実施の形態における記録媒体５０６は、ビデオテープ等の磁気テープ、ＤＶＤ等の光ディスク、半導体メモリ等の再生装置に固定されない媒体であってもよく、ハードディスク（磁気ディスク）等の再生装置に固定された媒体としてもよい。
【０１３４】
また、本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
【０１３５】
【発明の効果】
本発明の間引き処理装置は、以上のように、生データから等時間間隔でデータを抽出し、抽出したデータ間の間隔を生データ間の間隔に等しくして出力する間引き処理手段と、上記の間引き処理手段からの出力を符号化する符号化手段とを備えている。
【０１３６】
上記の発明によれば、間引き処理手段によって、生データに対して間引き処理が行われ、等時間間隔でデータが抽出される。これにより、全体としてデータ量（データサイズ）を減少させることが可能となる。
【０１３７】
また、上記のように、データ間の関連性の小さい生データに対して間引き処理が行われるので、データ間の関連性が大きい符号化データに対して間引き処理を行う場合と比較して、間引く度合いの設定を柔軟に行える。
【０１３８】
間引き処理手段は、また、抽出したデータ列のデータ間の間隔を上記生データ間の間隔に等しくして符号化手段へ出力する。このように間引き処理の施されたデータ列に対して符号化が符号化手段によって行われる。
【０１３９】
このようにして符号化されたデータは、生データ間の間隔と等しいデータ間隔を有しているので、生データの符号化方式に準ずる（則った）ものとなる。したがって、間引き処理後のデータであるにもかかわらず、当該間引き処理に対応した特殊な構成を別途設ける必要がなく、非常に汎用性の高い間引き処理装置を実現できる。という効果を併せて奏する。
【０１４０】
上記の間引き処理手段は、間引きの度合いを決定する間引き情報を生成する手段を備え、上記間引き情報に応じて上記データの抽出を行うことが好ましい。この場合、間引く度合いの設定を更に柔軟に行うことが可能となる。また、従来の再生機器の多くがスロー再生機能を有しているので、このスロー再生機能の再生速度に対応した間引きの度合いに基づいて間引き処理を行えば、従来機器でも再生が可能となるという効果を併せて奏する。
【０１４１】
本発明の記録装置は、以上のように、上記の間引き処理装置を備え、上記符号化手段により符号化されたデータを記録媒体に記録する記録手段を備えていることが好ましい。
【０１４２】
上記記録装置によれば、間引き処理装置によって、符号化されたデータが、生データ間の間隔と等しいデータ間隔を有しているので、間引き処理後のデータであるにもかかわらず、当該間引き処理に対応した特殊な構成を記録装置が別途備える必要がなく、構成の複雑化を確実に回避できるという効果を併せて奏する。
【０１４３】
本発明に係る再生装置は、以上のように、上記記載の記録装置により記録されたデータを再生するものであって、符号化された上記データを上記記録媒体から読み出す再生手段と、符号化された上記データを復号化する復号化手段と、復号化された上記データを再生信号として出力する出力手段とを備えたことを特徴としている。これにより、構成を複雑化することなく、間引き処理されて記録された符号化済データを確実に再生できるという効果を併せて奏する。
【０１４４】
上記の再生装置によれば、符号化された上記データが再生手段によって上記記録媒体から読み出される。読み出された上記符号化されたデータは、復号化手段によって復号化される。このようにして復号化された上記データは、出力手段によって再生信号として出力される。これにより、
上記の再生装置は、上記記録媒体に記録されたデータが上記の間引き情報を有している場合、この間引き情報を記憶する間引き情報記憶手段を更に備え、上記再生手段は、上記の間引き情報に応じて、上記出力手段から上記再生信号を出力することが好ましい。
【０１４５】
この場合、間引きの度合いに係る間引き情報に応じて、出力手段から再生信号が出力されるので、生データと同様の再生速度で再生信号を出力することができるという効果を併せて奏する。
【０１４６】
本発明に係る他の記録装置は、以上のように、上記記載の間引き処理装置と、上記符号化手段により符号化されたデータを記録媒体に記録する記録手段とを備え、間引き情報を生成する上記手段は、上記記録媒体の残り容量が、記録するデータのサイズより小さい場合、上記データのサイズが上記の残り容量以内になるように上記間引き情報を生成することが好ましい。この場合、記録するデータを途切れることなく最後まで記録媒体に確実に記録することが可能となるという効果を併せて奏する。
【０１４７】
上記記録装置において、上記の間引き情報を設定するインターフェース部を更に備えていることが好ましい。この場合、適宜、インターフェース部を介して間引き処理を行う間隔を任意に設定できるので、間引き情報に基づいて間引き処理がきめ細かく行え、汎用性が著しく向上するという効果を併せて奏する。
【図面の簡単な説明】
【図１】本発明に係る記録装置の構成例の概要を示す説明図である。
【図２】本発明の間引き処理による映像データのサイズ低減化の様子を示す説明図である。
【図３】上記間引き処理による音声データのサイズ低減化の様子を示した説明図である。
【図４】本発明に係る記録装置の他の例であるビデオカメラの構成例の概要を示す説明図である。
【図５】本発明に係る再生装置の構成例の概要を示す説明図である。
【図６】従来の記録再生装置の構成例の概要を示す説明図である。
【図７】従来のビデオカメラの構成例の概要を示す説明図である。
【図８】本発明に係る間引き処理を行う、間引き処理部の概要を示す説明図である。
【符号の説明】
１０１                  受信部
１０２、５０２          復号化部
１０３、４０１、５０３  一時記憶部
１０４、４０２          記録部
１０６、４０３、５０６  記録媒体
１０８、４０５          間引き情報生成部
１０９、４０６、        符号化部
２０１〜２１１          フレーム
２１４〜２１７          時間間隔
３０２                  サンプリング時間間隔
３０３                  音声波形
３０４〜３０６          音声データ
３０７、３０８          時間間隔
５０１                  間引き情報記憶部
５０４                  再生部
５０５                  出力部
８０１                  間引きエンジン
８０２                  時間情報変換部
【図１】
2004328616.tif 000003
【図２】
2004328616.tif 000004
【図３】
2004328616.tif 000005
【図４】
2004328616.tif 000006
【図５】
2004328616.tif 000007
【図６】
2004328616.tif 000008
【図７】
2004328616.tif 000009
【図８】
2004328616.tif 000010