(57)【要約】【課題】  音声情報を判別の基準として音声情報の記録方法を切り替える従来手法では、雑音の多い状況において、重要な音データの録音が十分とは思えない場合があった。【解決手段】  上記課題を解決するために本発明の情報処理装置は以下の構成からなる。  すなわち、映像データから映像の変化を抽出する変化抽出手段と、前記変化に基づいて、前記映像データに応じた音データを変化させる制御手段とを有することを特徴とする。【選択図】  図１
2008035156.tif 000002
【特許請求の範囲】
【請求項１】
映像データから映像の変化を抽出する変化抽出手段と、
前記変化に基づいて、前記映像データに応じた音データを変化させる制御手段と
を有することを特徴とする情報処理装置。
【請求項２】
前記制御手段は前記変化に基づいて、前記映像データに応じた前記音データの符号化を処理制御することを特徴とする請求項１記載の情報処理装置。
【請求項３】
前記変化は映像中に人物が現れることを特徴とする請求項２記載の情報処理装置。
【請求項４】
前記処理制御は前記音データを前記音データが表す音の持つ情報量に近づけることを特徴とする請求項２乃至３記載の情報処理装置。
【請求項５】
前記処理制御は前記音データの低圧縮符号化であることを特徴とする請求項４記載の情報処理装置。
【請求項６】
前記低圧縮符号化は前記音データの圧縮率が変更可能であることを特徴とする請求項５記載の情報処理装置。
【請求項７】
前記低圧縮符号化は前記音データの圧縮方式を変更可能であることを特徴とする請求項５記載の情報処理装置。
【請求項８】
前記低圧縮符号化はサンプリングレートを高めた符号化であることを特徴とする請求項６記載の情報処理装置。
【請求項９】
前記低圧縮符号化はビットレートを高めた符号化であることを特徴とする請求項７記載の情報処理装置。
【請求項１０】
前記処理制御は前記音データに含まれる特定の音を除くことを特徴とする請求項１乃至３記載の情報処理装置。
【請求項１１】
更に、前記映像データおよび前記音データを再生する再生手段とを有する請求項１乃至１０記載の情報処理装置。
【請求項１２】
更に、前記映像データおよび前記音データを記録する記録手段とを有する請求項１１記載の情報処理装置。
【請求項１３】
映像データを得る撮像手段と、
前記映像データに応じた音データを入力する入力手段と、
前記撮像手段から入力される前記映像データから変化を抽出する変化抽出手段と、
前記変化に基づいて、前記映像データに応じた音データを変化させる制御手段と
を有する情報処理装置と、
前記映像データおよび前記音データとを記録する記録手段と、
前記映像データおよび前記音データとを再生する再生手段と
を有する記録再生装置と
を特徴とする情報処理システム。
【請求項１４】
撮像手段から得られる映像データにおける変化を抽出し、
前記映像データに音データを同期させて入力し、
前記映像データに応じた前記音データを前記変化に基づき変化させて制御することを特徴とする撮影方法。
【請求項１５】
情報処理装置を、
映像データを得る撮影ステップと、
前記映像データと音データとを合わせて入力する入力ステップと、
前記撮影ステップから入力される前記映像データから変化を抽出する変化抽出ステップと、
前記変化に基づいて、前記映像データに応じた前記音データを変化させる制御ステップと
を特徴として機能させるプログラム。
【請求項１６】
請求項１５記載のプログラムを記録した情報処理装置読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影する映像データおよび音データの音質の向上に関する処理制御を行う情報処理装置、システム、方法、プログラムを記録した情報処理装置に読み取り可能な記録媒体およびプログラムに関する。
【背景技術】
【０００２】
建物のセキュリティシステムなどでは、監視カメラが用いられることが多い。この監視カメラは銀行やビル、ホテルのロビーなどに設置され、警備等の必要な所定の範囲を撮影する。撮影により得られた映像データおよび音声データは、記録あるいは伝送されて再生される。その際、映像データおよび音声データは、重要な映像や音を漏らさず、高い情報量で記録されること、あるいは伝送されて表示されることが要求される。
【０００３】
このような状況に係る技術として以下に示すものが提案されている。
【０００４】
音声記憶器においてあらかじめ記憶しておいた音声情報と外部から入力された音声情報とを比較し、両者が違う音声であれば非常事態であると判別し、入力された音声情報に対して間欠記録から、連続記録に移行する技術が知られている（特許文献１参照）。
【特許文献１】特開平０５−０７５９６４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、音声情報の記録方法を切り替えるための判別基準として音声情報を用いる従来手法では、重要な音データを確実に録音しようとした場合に十分ではないことがある。
【０００６】
そこで本発明では、このような状況に鑑み、映像を識別して重要な映像の音データの品質を向上させる処理制御することを目的とする。
【課題を解決するための手段】
【０００７】
上記課題を解決するために、本発明の情報処理装置は、映像データから映像の変化を抽出する変化抽出手段と、前記変化に基づいて、前記映像データに応じた音データを変化させる制御手段とを有することを特徴とする。
【０００８】
また、本発明の撮影システムは、映像データを得る撮像手段と、前記映像データに応じた音データを入力する入力手段と、前記撮像手段から入力される前記映像データから変化を抽出する変化抽出手段と、前記変化に基づいて、前記映像データに応じた音データを変化させる制御手段とを有する情報処理装置と、前記映像データおよび前記音データとを記録する記録手段と、前記映像データおよび前記音データとを再生する再生手段とを有する記録再生装置とを特徴とする。
【０００９】
また、本発明の撮影方法は、撮影装置から得られる映像データにおける変化を抽出し、前記映像データに音データを同期させて入力し、前記映像データに応じた前記音データを前記変化に基づき変化させて制御することを特徴とする。
【００１０】
また、本発明のプログラムは、情報処理装置を、映像データを得る撮影ステップと、前記映像データと音データとを合わせて入力する入力ステップと、前記撮影ステップから入力される前記映像データから変化を抽出する変化抽出ステップと、前記変化に基づいて、前記映像データに応じた前記音データを変化させる制御ステップとを特徴として機能させる。
【発明の効果】
【００１１】
本発明によれば、重要な映像の音データを高音質に処理制御することが可能となる。
【発明を実施するための最良の形態】
【００１２】
以下、添付図面を参照して、本発明に係る実施の形態を詳細に説明する。
【００１３】
（第１の実施形態）
本実施の形態における撮影システムの構成図を図１に示す。撮影システムは、撮影部１００と記録再生部２００により構成される。撮影部１００は、撮影した映像中に人物を検出した場合に、高音質の音データを生成し、生成した音データを映像データとともに、伝送路を介した受信先に送信するものである。記録再生部２００は、撮影部１００から受信した映像データと音データを記録・再生するものである。
【００１４】
撮影部１００が行う処理は、映像データ、音データそれぞれの処理制御および両データの通信に関わる３つに大別できる。
【００１５】
映像データの処理制御に関わるのは、映像データを入力する映像入力部１０１、映像データ中の人物の検出を行う映像認識部１０３、および映像を符号化する映像符号化部１０６である。映像入力部１０１は、例えばＣＣＤやＣＭＯＳセンサなどの撮像素子と、映像認識部１０３が処理制御可能な状態で映像データを送るための映像処理制御部から構成される。
【００１６】
音データの処理制御に関わるのは、音データを入力する音入力部１０２、音入力部から受け取った音データのアナログ・デジタル変換を行うＡＤ変換部１０５、およびＡＤ変換部によってアナログ・デジタル変換された音データのバッファリングを行うバッファ１０７である。ここで、バッファリングされた音データを符号化する音符号化部１０８では、音データの高音質処理制御を行う。高音質処理制御手段として、高音質処理制御部１０４の処理制御信号を入力する。ここで、音データの映像データへの符号化は音符号化部１０８で符号化され、符号化データは符号化データバッファ１０９に記憶される。なお音質を変えるために、例えば、ビットレートを変えることを行う。
【００１７】
撮影部１００の通信に関わるのは通信部１１０である。通信部１１０は、無線ＬＡＮあるいは、有線ＬＡＮあるいは公衆回線用の通信モジュールであり、記録再生部２００側の通信部２０１との接続、ネゴシエーション、データの送受信を行う。ここで、通信部１１０は映像符号化部１０６および符号化データバッファ１０９から入力された映像データおよび音データを、記録再生部２００へ送るため伝送路へ送信する。
【００１８】
記録再生部２００は、撮影部１００との通信を行う通信部２０１によって符号化された映像データおよび音データを受け取る。符号化された映像データは映像復号部２０２によって復号する。映像を表示する前に映像データをバッファリングするフレームバッファ２０３、バッファリングされた映像データを表示部２０４で表示する。音データは音復号部２０６で復号され、音出力部２０７によって出力することで再生される。
【００１９】
本実施形態における撮影システムの動作を図２および図３を用いて説明する。まず、映像データに対する撮影部１００の動作について図２を用いて説明する。
【００２０】
映像入力部１０１は、撮影した映像データを映像認識部１０３に送る（Ｓ１２１０）。映像認識部１０３では、受け取った映像データ中に人物が含まれているかの検出を行う（Ｓ１２２０）。ここで、人物が検出された場合には、重要な映像であると考えられるので、映像データを映像符号化部１０６に送るとともに（Ｓ１２３０）、高音質処理制御部１０４に高音質処理制御信号として人物検出信号を送る（Ｓ１２４０）。なお、人物検出を行う方法としては特開平７−７３２９８号公報などに開示されている、動体認識を用いて人物検出を行う技術を用いて実現することができる。映像符号化部１０６では、受け取った映像データをある特定のフォーマット、例えばＭｏｔｈｉｏｎＪＰＥＧなどで映像データに符号化する（Ｓ１２５０）。さらに、符号化した映像データには音データとの同期をとるためにタイムスタンプを付して（Ｓ１２６０）、通信部１１０へ送る。
次に、音データに対する撮影部１００の動作について図３を用いて説明する。
【００２１】
映像データと音データとの同期をとるために、音入力部１０２は映像入力部１０１での映像入力と並列で音の入力を行う（Ｓ１３００）。入力した音データはＡＤ変換部１０５に送る。音データを受け取ったＡＤ変換部１０５は、音データのＡＤ変換を行うことでディジタルデータとなった音データをバッファ１０７へ送る（Ｓ１３１０）。バッファ１０７ではＡＤ変換部１０５から受け取った音データのバッファリングを行う。これは、圧縮率、例えばビットレートを変更することで複数の圧縮率に対応できるように音データを音符号化部１０８で複数回処理して符号化を行うためである。ここで、音符号化部１０８は、バッファから受け取る音データのうち、ビットレートの高い方をある特定の圧縮方式、例えばＭＰ３などで符号化する（Ｓ１３３０）。
【００２２】
ここで、高音質処理制御部１０４は映像認識部１０３から人物検出信号を受け取っていると、音符号化部１０８に対して音データを高音質で処理制御するための高音質処理制御信号を送る（Ｓ１３２０）。高音質制御信号を受け取った音符号化部１０８は、それまでのビットレートでの音データの符号化を継続して行うと同時に、高音質処理制御のための別ストリームを生成して（Ｓ１３４０）、ビットレートをより高く設定することで高音質なデータの符号化を行う（Ｓ１３５０）。その際、内部にタイマを備え、一度人物映像を検出すると人物映像が検出されなくなっても所定時間は高音質符号化を行うものとする（Ｓ１３６０）。以上のように符号化した音データは、さらに映像データとの同期のためにタイムスタンプをつけて（Ｓ１３７０）符号化データバッファ１０９を介して通信部１１０へ送る。なお、生成された別ストリーム以外の音データは例えば、破棄、削除、または上書きして消す。
【００２３】
記録再生部２００の動作を図４および図５を用いて説明する。まず、映像データに対する記憶再生部２００の動作について図４を用いて説明する。
【００２４】
通信部２０１は、通信部１１０と通信を行う記録再生部２００側の通信部である。伝送路を通じて通信部１１０から符号化された映像データを受信する（Ｓ１４０１）。次に、受信した映像データを記録部２０５に記憶する（Ｓ１４０２）とともに受信し、映像データを映像復号部２０２に送る。映像復号部２０２では、映像符号化部１０６で符号化されたフォーマットのデータを復号する（Ｓ１４０３）。復号した映像データは、タイムスタンプを参照することで（Ｓ１４０４）、音データと同期をとりながらフレームバッファ２０３を介して（Ｓ１４０５）表示部２０４で表示する（Ｓ１４０６）。
次に、音データに対する記憶再生部２００の動作について図５を用いて説明する。
【００２５】
通信部２０１は、伝送路を通じて通信部１１０から符号化された音データを受信する（Ｓ１５０１）。次に、受信した音データを記録部２０５に記憶する（Ｓ１５０２）とともに、受信した音データを音復号部２０６に送る。音符号化部１０８で符号化されたデータを復号する（Ｓ１５０３）。復号した音データも映像データの出力の場合と同様にタイムスタンプを参照して（Ｓ１５０４）映像データと同期をとりながら音出力部２０７から出力することで再生する（Ｓ１５０５）。
【００２６】
以上説明した処理制御を行うことで、撮影した映像中に人物を検出した場合、入力した音データを高音質に処理制御することが可能となる。
【００２７】
本実施形態では、映像認識により撮影した映像中の人物を検出するとしたが、人物を検出する方法としては、熱検出素子、赤外センサなどを用いて実現しても同様の効果を得ることができる。
【００２８】
（第２の実施形態）
第１の実施形態では、撮影した映像中に人物を検出した場合に、高音質の音データを新たに同時生成し、別ストリームで送信する方法について説明した。本実施形態においては、伝送路の伝送帯域が狭い場合に、新たに生成した高音質の音データをいったん撮影部で記憶し、後から記録再生部に送信する態様について説明する。
本実施形態の撮影システムの構成を図６に示す。
【００２９】
図１に示した第１の実施形態と同一の要素には同じ番号を付す。本実施形態では、さらに一時記憶部６１１を構成に持つ。一時記憶部６１１は、音符号化部１０８で符号化された、ビットレートを高くした高音質のデータを、符号化データバッファ６０９を介して一時記憶する。また映像認識部からの検出信号により映像符号化部６０６は映像データのヘッダ情報に高音質な音データを一時記憶したことを示すマーキング情報を付加して記憶する。
【００３０】
一方、記録再生部２００の映像復号部６０２は映像データの中からマーキング情報を読み取ると、通信部６１０に対して高音質データの要求を行う。通信部６１０は、高音質処理制御部６０４に高音質音データの要求を伝えて一時記憶部６１１よりデータの読み出しを行い、通信部６０１に高音質データの伝送を行う。
以下、図７および図８を用いて本実施形態の処理の流れについて説明する。
【００３１】
まず、前述の実施形態と同様に映像および音の入力から符号化までを行う。その際、映像認識部１０３で人物映像を検出した場合には、映像符号化部６０６で映像データのヘッダ情報に高音質な音データを一時記憶したことを示すマーキングを付加して映像データを符号化する。その後の、通信部６１０による映像データおよび低ビットレート音データの伝送は前述の実施形態と同様に行う。記録再生部２００における映像データの記録、再生および音データの出力についても前述の実施形態と同様に行う。
【００３２】
一方、例えばビットレートを高くして符号化した、高音質の音データは音符号化部１０８から符号化データバッファ６０９を介して一時記憶部６１１へ送り、記憶する。
【００３３】
映像データの表示再生時に映像復号部６０２でマーキングを読み取ると（Ｓ９０２）、通信部６０１は撮影部１００の通信部６１０に対して高音質データを要求する（Ｓ９０３）。撮影部１００の通信部６１０は、この要求を受け取ると（Ｓ８０２）、高音質処理制御部６０４に高音質音データの要求を伝えて一時記憶部６１１よりデータの読み出しを行い（Ｓ８０３）、通信部６１０から高音質データの伝送を行う（Ｓ８０５）。通信部６０１は伝送されるデータを受信し（Ｓ９０５）、受信が完了すると伝送を終了する。
【００３４】
以上により、人物を検出した映像にマーキングして、いったん撮影部で記憶した新たに生成した高音質の音データを後から送信する方法においても本発明の効果を得ることができる。
【００３５】
（第３の実施形態）
本実施形態では、撮影した映像中に人物を検出したとき、音データを高音質のデータに切り替えて記録再生する態様について説明する。
【００３６】
本実施形態の本発明の構成については、図４に示した第２の実施形態と同様であるので、同一の要素には同じ番号を付し、説明は省略する。
【００３７】
以下で本実施形態の処理の流れについて図４を用いて説明する。
【００３８】
映像および音の入力から人物映像を検出し、人物検出信号を高音質処理制御部６０４へ送るまでの処理、ならびに符号化したデータの伝送に関しては前述の実施形態と同様に行う。高音質処理制御部６０４は人物検出信号を受け取ると、高音質音データへの切替えを通信部１１０へ伝える。通信部６１０は映像データの受信側の通信部６０１と音データの切替えに関するネゴシエーションを行う。ネゴシエーションを行っている期間は低ビットレート、高ビットレート両者の音データを生成して、低ビットレートの音データを伝送する。高ビットレートの音データは一時記憶部６１１へ記憶しておく。
【００３９】
音データの切替えに関するネゴシエーションの完了が通信部１１０から高音質処理制御部６０４へ伝えられると、高音質処理制御部６０４からの音データ切替え信号に応じて高ビットレートの音データの処理のみに切り替える。一時記憶部６１１に一時記憶したデータについては、音データの切替えのネゴシエーションが完了した後に送信する。また、前述の実施形態と同様に別ストリームでの送信あるいは再生要求があった際に送信しても良い。逆の切替えである、低ビットレートへの切替えも同様の処理制御を行う。
【００４０】
以上により、人物を検出すると音データの処理を切り替えることで、本発明の効果を得ることができる。
【００４１】
（第４の実施形態）
本実施形態では、前述した実施形態の機能をソフトウェアによって実現する場合について説明する。この場合、ソフトウェアのプログラムコードを記録した記憶媒体（または記録媒体）をシステムあるいは装置に供給する。そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）は、記憶媒体に格納されたプログラムコードを読み出し実行する。本発明を上記記憶媒体に適用する場合、その記憶媒体には、先に説明した図２、図３のフローチャートに対応するプログラムコードが格納されることになる。
【００４２】
本実施形態における撮影システムの構成を、図９を用いて説明する。
【００４３】
撮影システム全体は、撮影部７００と記録再生部７２０に分かれ、それぞれコンピュータを備え、コンピュータ同士はネットワークを介して接続される。各コンピュータについても、撮影部７００と記録再生部７２０とは同様にネットワークを介して接続される。撮影部７００では、映像入力部７０１において映像データを入力し、音入力部７０２において音データを入力する。主制御部７０６では、記憶部（ＲＯＭ）７０８に格納された前述のプログラムを、記憶部（ＲＡＭ）７０７を用いて処理制御する。通信部７０３は、撮影部７００と記録再生部７２０を、ネットワークを介して接続する。通信部７０３によって伝送された映像データおよび音データは、記録再生部７２０側の通信部７１０によって受信する。受信した映像データおよび音データは、主制御部７１１によって記憶部（ＲＯＭ）７１２に格納された復号プログラムによって記憶部（ＲＡＭ）７１３を用いることで復号される。復号された映像データおよび音データは、前述の実施例と同様に、それぞれ表示部７０４および音出力部７０５によって出力される。
【００４４】
本実施形態における撮影システムの撮影部の動作を、図９を用いて説明する。
【００４５】
図２のステップＳ１２１０に示す映像認識およびステップＳ１２２０に示す人物映像の検出処理は、映像入力部７０１で入力した映像データに対して、映像認識プログラムを主制御部７０６が処理制御することで行う。ここで、人物が検出された場合には、重要な映像であると考えられるので、図２のステップＳ１２３０、Ｓ１２４０、Ｓ１２５０に示す、音データの高音質処理制御を、高音質処理制御プログラムによって行う。なお、図２のステップＳ１２１０に示す映像データに対する音データの同期は、音入力部７０２において入力された音データに対して、音入力プログラムを用いることで行う。入力された音データはＡＤ変換プログラムを用いて、図３のステップＳ１３１０に示すディジタルデータへの変換を行う。高音質処理制御された音データは、符号化プログラムによってある特定のフォーマット、例えばＭｏｔｈｉｏｎＪＰＥＧなどで、図３のステップＳ１３３０に示す映像データへの符号化を行う。さらに、符号化した映像データには音データとの同期をとるために、図３のステップＳ１３７０に示すタイムスタンプを付して通信部７０３へ送ることで通信を行う。
【００４６】
通信部７０３・７１０は、無線ＬＡＮあるいは、前述の実施形態と同様、有線ＬＡＮあるいは公衆回線用の通信モジュールであり、通信プログラムを用いて他のコンピュータとの接続、ネゴシエーション、データの送受信を行う。
【００４７】
本実施形態における撮影システムの記録再生部の記録・再生の動作を、図１０を用いて説明する。通信部７１０は、通信部７０３と通信を行う記録再生部７２０側の通信部である。主制御部７１１は、伝送路を通じて通信部７１０から符号化された映像データおよび音データを受信し（Ｓ４６０１）、記録手段として、例えば記録部７１２へ受信したデータを送る（Ｓ４６０２）とともに映像データを映像復号し表示部７０４へ、音データを音復号し音出力部７０５へ送る（Ｓ４６０３）。映像復号処理では、主制御部７１１により映像符号化処理で符号化されたフォーマットのデータを復号する（Ｓ４６０４）。復号した映像データは、主制御部７１１によりタイムスタンプを参照することで（Ｓ４６０５）、音データと同期をとりながらフレームバッファを介して（Ｓ４６０６）表示部７０４で表示する（Ｓ４６０７）。また主制御部７１１は、音符号化部で符号化されたデータを復号（Ｓ４６０９）する。復号した音データも映像データの出力の場合と同様にタイムスタンプを参照（Ｓ４６１０）して映像データと同期をとりながら音出力部７０５から出力することで再生する（Ｓ４６０８）。
【００４８】
なお、映像データは表示部７０４において、表示プログラムを用いて表示してもよく、同様に、高音質処理制御された音データは音出力部７０５において音出力プログラムを用いて出力してもよい。
【００４９】
また、本実施例では記憶媒体に格納されたプログラムコードが読み出され、前述の実施例が実施されるが、コンピュータ上で稼働しているオペレーティングシステム（ＯＳ）などが実際の処理の一部または全部を行う場合も含まれることは言うまでもない。
【００５０】
さらに、プログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれていてもよい。このプログラムコードの指示に基づき、機能拡張カードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【００５１】
以上により、ＲＯＭに格納されたプログラムを、記憶部を用いて主制御部が処理制御することでも、本発明の効果を得ることができるとともに、カメラから離れた位置における映像データおよび音データの表示・再生を可能とすることができる。
【００５２】
（その他の実施形態）
前述した実施形態では、音劣化が少なくなるように音データの処理制御を行うことによって高音質な音データとする説明をしたが、本実施形態では、音データから雑音を取り除くことを目的とした実施形態を説明する。
【００５３】
前述した実施形態では、例えば図１の高音質処理制御部１０４によって、音符号化部１０８に対して高音質処理制御信号が与えられた。本実施形態では、音入力部から入力される音データに対して、本来の音が持つ情報量に近い音データを得るために、特定の周波数成分を除去するノイズフィルタを設けることで目的を達成する。具体的には、ＡＤ変換部にローパスフィルタなどを組み込んでおくことで実現する。
【００５４】
本実施形態によって、本来の音に含まれる不必要な音を除いたうえで、本来の音が持つ情報量に近い音データを得ることができる。
【００５５】
さらに、前述の実施形態の構成にダウンサンプリングを行うリサンプリング部を設けて、音データのサンプリングレートを制御することによって実現しても同様の効果を得ることができる。この実施形態における本発明の概略を示す構成図を図１１に示す。図１では音符号化部１０８が入力していたデータを、本実施例ではリサンプリング部２０８が入力し、バッファ１０７からの音データに対してリサンプリングを行う。リサンプリングが施されたデータは音符号化部へ送る。図１１では、ＡＤ変換したデータをリサンプリングするとしたが、ＡＤ変換部１０５においてＡＤ変換する音データの、サンプリングするクロックを切り替えてもよい。また、ＡＤ変換部を複数持つことでサンプリングするクロックを切り替えても実現可能である。
【００５６】
前述の実施形態では別ストリームで高音質の音データを送信するとしたが、別ストリームで送信する音データはそれまでの音データとの差分データとしても良い。
【００５７】
また、音データの低圧縮符号化として、例えば圧縮時のビットレートをあげることによって高音質な音データとする説明をしたが、同一の構成で音符号化部が複数の圧縮率に対応した音符号化器を用いても同様の効果を得ることができる。つまり、複数の圧縮率に対応した音符号化器を用いて、音データを音劣化の少ない、あるいは音劣化のない圧縮率で符号化すればよい。なお、複数の圧縮率を複数の圧縮方式に置き換えても良いことは言うまでもない。
【００５８】
ＡＤ変換部および音符号化部を複数持ち、音データの入力をモノラルからステレオあるいはマルチステレオにすることによっても同様の効果を得ることができる。その実施形態における本発明の概略を示す構成図を図１２に示す。図１では音入力部からの音データを一つのＡＤ変換部で入力しているが、図１２ではＡＤ変換部１および２の二つで入力することでステレオあるいはマルチステレオを実現している。ここで、高音質処理制御信号は、入力された音データのモノラル、ステレオあるいはマルチステレオの入力方法を制御する音入力部５０１で入力する。
【００５９】
前述の実施形態において、ネットワークを介して映像データを伝送する撮影システムを例にとって説明を行ったが、再生手段および記録手段を有する情報処理装置によって実現することも可能である。
また、上記の全ての方法を複数組み合わせて高音質な音データを生成しても良い。
【図面の簡単な説明】
【００６０】
【図１】第１の実施形態における撮影システムの概略を示す構成図
【図２】第１の実施形態における撮影部の映像処理を示すフローチャート
【図３】第１の実施形態における撮影部の音処理を示すフローチャート
【図４】第１の実施形態における記録再生部の映像データの処理を示すフローチャート
【図５】第１の実施形態における記録再生部の音データの処理を示すフローチャート
【図６】第２の実施形態における撮影システムの概略を示す構成図
【図７】第２の実施形態における撮影システムの送信処理の動作を示すフローチャート
【図８】第２の実施形態における撮影システムの受信処理の動作を示すフローチャート
【図９】第４の実施形態における本願発明を実現するコンピュータの構成図
【図１０】第４の実施形態における記録再生部の記録・再生の動作を示すフローチャート
【図１１】その他の実施形態におけるサンプリングレートを制御する撮影システムの概略を示す構成図
【図１２】その他の実施形態における音入力を制御する撮影システムの概略を示す構成図
【符号の説明】
【００６１】
１０３  映像認識部
１０４  高音質処理制御部
１０８  音符号化部
１０９  符号化データバッファ
２０４  表示部
２０５  記録部
２０８  リサンプリング部
３０１  ＡＤ変換部１
３０２  音復号部１
３０３  ＡＤ変換部２
３０４  音復号部２
６１１  一時記憶部
【図１】
2008035156.tif 000003
【図２】
2008035156.tif 000004
【図３】
2008035156.tif 000005
【図４】
2008035156.tif 000006
【図５】
2008035156.tif 000007
【図６】
2008035156.tif 000008
【図７】
2008035156.tif 000009
【図８】
2008035156.tif 000010
【図９】
2008035156.tif 000011
【図１０】
2008035156.tif 000012
【図１１】
2008035156.tif 000013
【図１２】
2008035156.tif 000014