(57)【要約】【課題】映像信号の遅延による映像と音声のずれを軽減し、撮像映像と音声のミックス記録が可能な動画記録装置を提供する。【解決手段】記録装置は、撮像手段（カメラ３０５）からの出力タイミングとチューナー手段（チューナー３０３）からの出力タイミングが合致するように遅延時間を設定する遅延手段（遅延部３０８）と、出力タイミングが合致した撮像手段からの出力とチューナー手段からの出力を合成する合成手段（合成部３０７）を備える。また、合成手段によって合成した映像や音声を記録する記録手段（記録再生部３１３）を備える。【選択図】図３
2008042630.tif 000002
【特許請求の範囲】
【請求項１】
放送波を受信して映像信号と音声信号を出力するチューナー手段と、
撮像手段と、
マイクロフォンと、
前記撮像手段からの映像信号を遅延させる遅延手段と、
前記マイクロフォンからの特定の音声信号の出力タイミングと前記チューナー手段からの特定の音声信号の出力タイミングに基づいて前記遅延手段の遅延時間を設定する設定手段と、
前記遅延手段から出力された映像信号と前記チューナー手段からの音声信号とを合成する合成手段と、
前記合成手段によって合成された映像信号と音声信号とを記録する記録手段と、
を備えることを特徴とする記録装置。
【請求項２】
前記遅延手段は、前記遅延時間を複数持ち、いずれかの前記遅延時間を選択することを特徴とする請求項１記載の記録装置。
【請求項３】
前記遅延手段の前記遅延時間は前記チューナー手段のチャンネルごとにプリセットされていることを特徴とする請求項１記載の記録装置。
【請求項４】
前記遅延手段は、動画または音声の符号化／復号化機能を有することを特徴とする請求項１乃至請求項３のいずれかに記載の記録装置。
【請求項５】
前記遅延手段の符号化／復号化のビットレートは、前記チューナー手段へ入力された信号のビットレートと同等のレートであることを特徴とする請求項４記載の記録装置。
【請求項６】
前記設定手段は、前記チューナー手段から出力される特定の音声信号の出力タイミングと前記マイクロフォンから出力された特定の音声信号の出力タイミングとを比較して前記遅延時間を算出することを特徴とする請求項１乃至請求項５のいずれかに記載の記録装置。
【請求項７】
前記遅延量算出手段は、入力された２つの音声の周波数分析結果に基づき遅延量を算出することを特徴とする請求項６記載の記録装置。
【請求項８】
前記遅延量算出手段は、入力された２つの音声または映像信号のタイムコードから遅延量を算出することを特徴とする請求項６記載の記録装置。
【請求項９】
前記チューナー手段の出力からＣＭを検出するＣＭ検出手段を備え、検出されたＣＭ期間中は前記合成手段への入力をチューナー出力から切り替えることを特徴とする請求項１乃至請求項８のいずかに記載の記録装置。
【請求項１０】
電波から映像や音声またはデータを取り出すチューナー手段と、撮像手段を備える記録装置において、
前記撮像手段からの出力を遅延させる遅延手段と、
前記チューナー手段からの出力の音声と前記遅延手段からの出力の音声とを比較してずれ時間を判定する比較手段と、
前記比較手段の出力に基づいて前記チューナー手段からの出力と前記遅延手段からの出力を合成する合成手段と、
前記合成手段によって合成した映像や音声を記録する記録手段と、
を備えることを特徴とする記録装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、記録装置に関し、特に、デジタルビデオカメラや携帯電話の中で、テレビ／ラジオチューナー付きモバイル型記録装置に用いて好適な記録装置に関する。 
【背景技術】
【０００２】
近年、アナログテレビ／ラジオ放送に加えて、デジタルテレビ／ラジオ放送が開始され、重要な情報インフラとして位置付けられて、対応製品やシステム開発が一層進められている。携帯電話などのモバイル機器に対しても、テレビ／ラジオチューナーが搭載されるようになり、モバイル機器向けの放送も始まろうとしている。
【０００３】
ところで、このデジタル放送技術においては、送信機側の映像入力から受信機での映像出力に至るまでの間の、符号化や多重化などの各処理時間のために、遅延が起きることが知られている。
【０００４】
従来のアナログ放送と比べると、大容量のデジタル映像信号の各処理にかかるトータル時間分の遅延がおきて、実際に伝送されてくる時間が大きくずれることになる。実際に現状のデジタル放送と、同時刻に放送されているアナログ放送とを比較すると、デジタル放送には約２〜３秒の遅れがあることがわかる。
【０００５】
また、デジタル放送よりも映像信号処理速度が速いとされるアナログ放送自体も、本来、各種の処理を行った後に放送するため、ある時刻における現象とは若干ずれが生じている。なお、この遅延量は、衛星中継、放送局中継、放送車中継など、中継経路によっても変わることになる。 デジタル放送技術に関連して、以下の特許文献１記載の技術がある。
【特許文献１】特開平５−１５３４４９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
テレビチューナー付きのカムコーダによって、例えば、放送中のサッカーの試合を、現地サッカースタジアムで撮影するシーンにおいて、ＴＶ（またはラジオ）放送による実況解説を記録したい場合に、従来は以下のような不具合があった。
【０００７】
例えば、ゴール放送中の様子を撮影するシーンにおいて、撮影映像と放送時の音声をミックスした記録を行うと、映像信号の遅延によって、音声と映像が相当時間ずれた違和感のある映像となっていた。
【０００８】
本発明の目的は、映像信号の遅延による映像と音声のずれを軽減し、撮像映像と音声のミックス記録が可能な記録装置を提供することにある。
【課題を解決するための手段】
【０００９】
上記目的を達成するために、請求項１記載の記録装置は、放送波を受信して映像信号と音声信号を出力するチューナー手段と、撮像手段と、マイクロフォンと、前記撮像手段からの映像信号を遅延させる遅延手段と、前記マイクロフォンからの特定の音声信号の出力タイミングと前記チューナー手段からの特定の音声信号の出力タイミングに基づいて前記遅延手段の遅延時間を設定する設定手段と、前記遅延手段から出力された映像信号と前記チューナー手段からの音声信号とを合成する合成手段と、前記合成手段によって合成された映像信号と音声信号とを記録する記録手段と、を備えることを特徴とする。
【００１０】
請求項１０記載の記録装置は、電波から映像や音声またはデータを取り出すチューナー手段と、撮像手段を備える記録装置において、前記撮像手段からの出力を遅延させる遅延手段と、前記チューナー手段からの出力の音声と前記遅延手段からの出力の音声とを比較してずれ時間を判定する比較手段と、前記比較手段の出力に基づいて前記チューナー手段からの出力と前記遅延手段からの出力を合成する合成手段と、前記合成手段によって合成した映像や音声を記録する記録手段と、を備えることを特徴とする。
【発明の効果】
【００１１】
本発明によれば、出力タイミングが合致した撮像手段からの出力とチューナー手段からの出力を合成し、その合成した映像や音声を記録する。あるいは、音声のずれ量を考慮して映像や音声を合成し、記録する。従って、映像信号の遅延による映像と音声のずれを軽減し、撮像映像と音声のミックス記録が可能となる。
【発明を実施するための最良の形態】
【００１２】
以下、本発明の実施の形態を図面を参照しながら詳細に説明する。
【００１３】
図１は、本発明の実施の形態に係る記録装置のシステム構成を概略的に示す図である。
【００１４】
図１において、カメラ一体型の記録装置は、レンズ群１０１、撮像素子１０２、カメラ信号処理部１０３、画像メモリ１０４、操作スイッチ１０５、ディスプレイ１０６、音声比較回路１０７、動画符号化／復号化回路１０８、記録メディア１０９を備える。
【００１５】
また、記録装置は、インターフェース１１０、ＣＰＵ１１１、プログラムメモリ１１２、プログラムフラッシュメモリ１１３、読み出し制御回路１１４、ＣＭ検出回路１１５、動画合成回路１１６、ＴＶ／ラジオチューナー回路１１７を備える。上記各モジュールは、バス１１８で接続される。また、音声比較回路１０７には、マイクロフォン１１９が接続される。
【００１６】
起動時には、プログラムフラッシュメモリ１１３内に圧縮されたプログラムは、プログラムメモリ１１２に解凍／展開され、ＣＰＵ１１１は、プログラムメモリ１１２内のプログラムに従って動作し、以後説明する各種の制御動作を行う。
【００１７】
被写体からの光は、レンズ群１０１を通して撮像素子１０２に結像される。撮像素子１０２に結像された被写体象は、光電変換されて電気信号となる。撮像素子１０２からの光電変換画像は、所定の周期で読み出され、カメラ信号処理部１０３にて、標準的なデジタル動画像信号になるように信号処理され、標準的なデジタル動画像として、画像メモリ１０４に一時的に蓄積される。
【００１８】
それと同時に、このデジタル動画像はディスプレイ１０６に送られ、現在撮像中の動画像が表示される（撮影待機状態）。撮影待機状態で、操作スイッチ１０５に含まれる撮影ボタン（未表示）を押すことで撮影が開始される。
【００１９】
撮影が開始されると、画像メモリ１０４に一時的に蓄積された原動画像は、動画符号化／復号化回路１０８にて動画像としての圧縮符号化がなされ（圧縮本動画像）、符号化が行われた後に、画像メモリ１０４をバッファとして一旦蓄積される。
【００２０】
そしてその後に、圧縮本動画像は、インターフェース１１０を通して記録メディア１０９に記録されていく。操作スイッチ１０５に含まれる撮影ボタンが再度押されると、記録終了として、１カットの動画クリップの記録が終了する。
【００２１】
一方、アナログ放送波、デジタル放送波は、ＴＶ／ラジオチューナー回路１１７を通して動画像信号になると、再生時には、そのままディスプレイ１０６へ送られて視聴が可能となる。
【００２２】
また、記録時には、ＴＶ／ラジオチューナー回路１１７を通した動画像信号は、動画符号化／復号化回路１０８で圧縮符号化がなされた後に、ショックプルーフメモリを介して順次記録メディア１０９に記録される。
【００２３】
ここで、音声比較回路１０７は、２つの音声を比較して同じ音であることを検出する。読み出し制御回路１１４は各種読み出しを行う。ＣＭ検出回路１１５は、テレビ／ラジオチューナー回路１１７の出力からＣＭを検出する。動画合成回路１１６は２つの動画を合成する。これらは、バス１１８を通してＣＰＵ１１１の制御により適宜起動する。
【００２４】
これらの機能は、図１上ではハード的に記載されているが、ソフトウェアでの実現も容易であり、プログラムメモリ１１２に入れられることはいうまでもない。
【００２５】
図２は、図１の記録装置における動画記録再生の概念を示す図である。
【００２６】
図２において、カメラ本体とテレビからの２つの対象があり、それぞれカメラ映像（ＣＶ）カメラマイク音声（ＣＳ）、テレビ映像（ＦＶ）、テレビ音声（ＦＳ）としている。テレビチューナーからの入力とカメラからの入力は合成回路２０３にて合成している。
【００２７】
そのときに、カメラからの音声や映像は、バッファ２０１にてテレビ放送経路の遅延時間分の遅れを持たせることで同期化する。また、テレビチューナーからの入力とカメラからの入力は、遅延制御部２０２で遅延制御される。
【００２８】
合成回路２０３からの出力は、スイッチ２０４で選択的に切り替えることができ、ユーザーの使用方法によって、各種の合成記録が行えるようにしたものである。合成回路２０３からの出力は、エンコード部２０５でエンコードされ、記録、再生される。
【００２９】
カメラ側の映像とＴＶ放送の映像という２つの対象があるときに、ユーザーが記録または再生する対象は、映像はカメラ、ＴＶ、ＴＶ＋カメラの３種類、音声も同様に３種類であり、それぞれの各組み合わせである。
【００３０】
ここではまず、カメラとＴＶ側が混在して記録する場合、特に記録する対象が、テレビチューナーによる出力音声と、カメラの映像である場合についての記録動作を、図３を用いて説明する。なお、説明の簡易化のため、アナログ放送を前提としている。
【００３１】
図３は、本発明の実施の形態に係る記録装置の機能ブロックを概略的に示す図である。
【００３２】
図３において、被写体Ａをテレビ放送用カメラ３０１と、本発明の記録装置（撮像記録装置）３００（点線枠）内のカメラ３０５の双方で撮影する。テレビ放送用カメラ３０１で撮影した映像はＭＰＥＧ映像への符号化や、エラー訂正符号、多重化、変調などが行われつつ、放送局の放送経路を通り、放送局３０２から電波にのせて放送される。
【００３３】
一方で、ユーザーが記録装置３００中の操作部３１２を操作して放送チャンネルを選択すると、チューナー３０３からは、上記の放送用にエンコード（または変調）された信号がデコード（または復調）される。そして、選択した放送の映像信号、音声信号が出力される。
【００３４】
その出力の１つの映像信号と音声信号はともに、ＣＭ検出回路１１５を用いたＣＭカット部３０６へ送られる。ＣＭカット部３０６からは音声信号のみの出力となるが、ＣＭが検出されると、検出された時間は無音として、合成部３０７へテレビ音声信号が入力される。
【００３５】
また、一方で、放送チャンネル選択部３１１での放送チャンネル選択時に、放送局ごとに遅延設定メモリ３１０にあらかじめ設定されている所定の遅延時間量が抽出され、その遅延時間量が遅延制御部３０９に送られて遅延部３０８における遅延の制御に用いられる。
【００３６】
一方のカメラ３０５からの映像信号と音声信号は、遅延部３０８の遅延のためのバッファに順次送られる。遅延制御部３０９から読み出すタイミングにより、カメラ３０５の映像信号は順次合成部３０７へ送られ、音声信号は順次、遅延時間算出部３０４へ送られる。合成部３０７からの音声／映像は、記録再生部３１３で記録再生される。
【００３７】
遅延時間算出部３０４には、チューナー３０３の出力のうちテレビ音声信号が送られて、このテレビの音声信号と、上述の遅延されたカメラの音声信号を用いて遅延時間の算出が行われる。この遅延時間算出部３０４では、図１における音声比較回路１０７を用いて、カメラ音声とテレビ音声を比較して同一音声が発生している個所を検出し、ずれている時間を算出する。
【００３８】
太鼓の音やその他の様様な音には、音声の周波数や音圧により特徴的な音が含まれることが多い。これを一定の時間間隔で検出して、算出された時間を遅延設定メモリ３１０に送り、遅延制御に用いる時間を再設定する。カメラ音声とテレビ音声の２つの音声信号が、タイムコードが記された信号であれば、このタイムコードを元に計算した遅延時間を算出すればよい。
【００３９】
再設定された遅延時間での遅延制御に入ると、同様なループをたどって遅延時間を算出していく。これが規定の遅延量以下になるとこのループは抜けて、最終的な遅延時間にて記録が進むことになる。
【００４０】
但し、この音声比較はＣＭ検出時には行われることがないようにプログラムされている。なお、カメラの映像を遅延させるためのバッファメモリが少ない場合には、カメラ映像を一度エンコード（圧縮）してバッファし、読み出し前にデコード（解凍）するようにしてもよい。なお、このときのエンコードは、最大ビットレートのエンコードにするか、または、デジタルテレビ放送と同等のビットレートになっている。
【００４１】
本実施の形態は、テレビの音声と、カメラの映像を合成して記録する例を用いて説明してきた。テレビの映像とカメラの音声を合成するときには、チューナー３０３からの出力をテレビ音声信号に切り替えて、遅延部３０８から合成部３０７への出力をカメラ音声信号に切り替えることで、その他の構成は変更することなく容易に実現できる。
【００４２】
また、テレビの音声と、カメラの音声を合成するときには、非圧縮の音声信号を合成部３０７で合成できるように構成するのみで、他の構成は同じで差し支えない。
【００４３】
また、デジタルテレビ放送の場合には、チューナー３０３からの出力をデコードする時間を要するため、さらに遅延部３０８の容量や遅延時間が多くなる。一方で、カメラ映像の信号処理に多大な処理を要するシステムが組み込まれている場合には、テレビまたはラジオ放送信号を遅延させることもありうる。
【図面の簡単な説明】
【００４４】
【図１】本発明の実施の形態に係る記録装置のシステム構成を概略的に示す図である。
【図２】図１の記録装置における動画記録再生の概念を示す図である。
【図３】本発明の実施の形態に係る記録装置の機能ブロックを概略的に示す図である。
【符号の説明】
【００４５】
１０１  レンズ群
１０２  撮像素子
１０３  カメラ信号処理部
１０４  画像メモリ
１０５  操作スイッチ
１０６  ディスプレイ
１０７  音声比較回路（比較手段）
１０８  動画符号化／復号化回路
１０９  記録メディア
１１０  インターフェース
１１１  ＣＰＵ
１１２  プログラムメモリ
１１３  プログラムフラッシュメモリ
１１４  読み出し制御回路
１１５  ＣＭ検出回路
１１６  動画合成回路
１１７  ＴＶ／ラジオチューナー
１１８  バス
３０３  チューナー（チューナー手段）
３０４  遅延時間算出部（遅延量算出手段）
３０５  カメラ（撮像手段）
３０７  合成部（合成手段）
３０８  遅延部（遅延手段構成要素）
３０９  遅延制御部（遅延手段構成要素）
３１３  記録再生部（記録）手段
【図１】
2008042630.tif 000003
【図２】
2008042630.tif 000004
【図３】
2008042630.tif 000005