(57)【要約】【目的】録画番組の所望の場面を簡単に検索することができる映像記録再生装置を提供する。【構成】システムコントローラ１３はＶＣＲ部１６に対して動画映像の録画及び再生の制御を行う。映像処理回路５は動画／静止画判定を行い、音声処理回路６は音声レベル判定を行う。システムコントローラ１３は前記判定結果に基づいて場面切り替わり推定を行い、この推定を行ったときのテープ走行カウント値を場面番号に対応付けてメモリ１４に格納する。ユーザによって場面番号が指定されると、テープを早送り或いは巻き戻し走行させ、前記テープ走行カウント値になると、再生を開始させる。【選択図】                図１
2005020317.tif 000002
【特許請求の範囲】
【請求項１】
内蔵記録媒体又は外部記録媒体に対して動画映像の録画及び再生を行う記録再生制御手段と、前記動画映像における場面切り替わりを推定する推定手段と、場面切り替わりと推定された時点の映像を再生するための場面映像抽出情報及び場面切り替わりと推定されるごとに生成した場面番号を対応付けて記録する手段と、ユーザ入力された場面番号に基づいて場面映像抽出情報を取得し、この場面映像抽出情報により特定される映像以降から動画再生を実行する手段と、を備えたことを特徴とする映像記録再生装置。
【請求項２】
内蔵記録媒体又は外部記録媒体に対して動画映像の録画及び再生を行う記録再生制御手段と、前記動画映像における場面切り替わりを推定する推定手段と、場面切り替わりと推定された時点の映像を再生するための場面映像抽出情報を記録する手段と、前記場面映像抽出情報により特定される場面映像を縮小表示する映像信号を生成する手段と、前記縮小表示された場面映像のなかでユーザにより指定された映像以降から動画再生を実行する手段と、を備えたことを特徴とする映像記録再生装置。
【請求項３】
内蔵記録媒体又は外部記録媒体に対して動画映像の録画及び再生を行う記録再生制御手段と、前記動画映像における場面切り替わりを推定する推定手段と、場面切り替わりと推定された時点の映像を再生するための場面映像抽出情報及び当該場面映像の縮小映像を対応付けて記録する手段と、前記縮小映像を表示する映像信号を生成する手段と、前記縮小表示された場面映像のなかでユーザにより指定された映像以降から動画再生を実行する手段と、を備えたことを特徴とする映像記録再生装置。
【請求項４】
請求項１乃至請求項３のいずれかに記載の映像記録再生装置において、前記推定手段は、動画／静止画変化判定により場面切り替わりを推定するように構成されたことを特徴とする映像記録再生装置。
【請求項５】
請求項１乃至請求項３のいずれかに記載の映像記録再生装置において、前記推定手段は、動画／静止画変化判定により場面切り替わりが推定され、且つ、音声レベル変化判定にて場面切り替わりが推定できた場合に、場面切り替わり推定を行うように構成されたことを特徴とする映像記録再生装置。
【請求項６】
請求項１乃至請求項５のいずれかに記載の映像記録再生装置において、場面切り替わり推定に伴う上記処理後に時間計測を実行し、一定時間経過前には新たに場面切り替わり推定がなされてもこの推定に対しては上記処理は実行しないように構成されたことを特徴とする映像記録再生装置。
【発明の詳細な説明】
【０００１】
【産業上の利用分野】
この発明は、ハードディスクレコーダなどの映像記録再生装置に関する。
【０００２】
【従来の技術】
記録内容を再生するときには、どのようなコンテンツが録画されているのかを検索できるようにするのが便利であり、このため、各録画コンテンツから任意の静止画像を抽出し、これをサムネイル画像として録画コンテンツのリスト表示を行うものがある。更には、このリスト表示上で望みの番組を指定して再生することも可能になっている。そして、前記サムネイル画像を録画開始時の画像を元にして自動作成したり、一番組について複数枚のサムネイルを生成するものも知られている（特許文献１参照）。
【０００３】
【特許文献１】
特開２００１−１８４８４４号公報
【０００４】
【発明が解決しようとする課題】
しかしながら、上記従来の技術では、目的の録画番組を容易に探し出すことができるものの、その録画番組内の所望の場面を素早く検索してそこから再生したいといった要求に応えることはできない。
【０００５】
この発明は、上記の事情に鑑み、録画番組内の所望の場面を素早く検索することができる映像記録再生装置を提供することを目的とする。
【０００６】
【課題を解決するための手段】
この発明の映像記録再生装置は、上記の課題を解決するために、内蔵記録媒体又は外部記録媒体に対して動画映像の録画及び再生を行う記録再生制御手段と、前記動画映像における場面切り替わりを推定する推定手段と、場面切り替わりと推定された時点の映像を再生するための場面映像抽出情報及び場面切り替わりと推定されるごとに生成した場面番号を対応付けて記録する手段と、ユーザ入力された場面番号に基づいて場面映像抽出情報を取得し、この場面映像抽出情報により特定される映像以降から動画再生を実行する手段と、を備えたことを特徴とする。
【０００７】
上記構成であれば、場面切り替わりが推定されることで場面番号が生成され、各場面番号に場面映像抽出情報が対応付けられる。ユーザは番組内の所望の場面が何番の場面番号に対応するかは分からないものの、例えば、所望の場面が番組の中程であると記憶しているのであれば、中間当たりの場面番号を選択すればよいことになる。この場面番号の選択によって或る場面から再生が行われることになるが、これを見たユーザは所望の場面が当該再生場面よりも後或いは前であることを判断し易くなり、その後は手動の早送りや巻き戻し操作にて所望の場面を素早く検索できることになる。
【０００８】
また、この発明の映像記録再生装置は、内蔵記録媒体又は外部記録媒体に対して動画映像の録画及び再生を行う記録再生制御手段と、前記動画映像における場面切り替わりを推定する推定手段と、場面切り替わりと推定された時点の映像を再生するための場面映像抽出情報を記録する手段と、前記場面映像抽出情報により特定される場面映像を縮小表示する映像信号を生成する手段と、前記縮小表示された場面映像のなかでユーザにより指定された映像以降から動画再生を実行する手段と、を備えたことを特徴とする。
【０００９】
上記の構成であれば、場面切り替わりと推定された時点の映像を再生するための場面映像抽出情報が記録され、本来の再生に先立って各場面映像が画面に縮小表示され、ユーザは縮小表示された場面映像のなかから所望の場面映像或いはそれに時間的に近い場面映像を選択してそこから再生開始させることができる。
【００１０】
また、この発明の映像記録再生装置は、内蔵記録媒体又は外部記録媒体に対して動画映像の録画及び再生を行う記録再生制御手段と、前記動画映像における場面切り替わりを推定する推定手段と、場面切り替わりと推定された時点の映像を再生するための場面映像抽出情報及び当該場面映像の縮小映像を対応付けて記録する手段と、前記縮小映像を表示する映像信号を生成する手段と、前記縮小表示された場面映像のなかでユーザにより指定された映像以降から動画再生を実行する手段と、を備えたことを特徴とする。
【００１１】
かかる構成においては、予め縮小映像作成して記録するため、その記憶のための容量が必要になるが、上述の構成と同様に縮小画像にて場面選択が行えるため、ユーザは容易に場面検索できることになる。
【００１２】
前記推定手段は、動画／静止画変化判定により場面切り替わりを推定するようになっていてもよい。また、前記推定手段は、動画／静止画変化判定により場面切り替わりが推定され、且つ、音声レベル変化判定にて場面切り替わりが推定できた場合に、場面切り替わり推定を行うように構成されていてもよい。また、場面切り替わり推定に伴う上記処理後に時間計測を実行し、一定時間経過前には新たに場面切り替わり推定がなされてもこの推定に対しては上記処理は実行しないように構成されていてもよいものである。
【００１３】
【発明の実施の形態】
以下、この発明の実施形態を図１乃至図４に基づいて説明するが、ここではＢＳ（Ｂｒｏａｄｃａｓｔｉｎｇ  Ｓａｔｅｌｌｉｔｅ）ディジタル放送を受信して記録する放送受信記録再生装置を例示している。また、録画テープに記録する構成を先に例示し、後にハードディスクに記録する例を示す。
【００１４】
図１において、アンテナ１は、屋外において所定の方向に向けて配置されており、ＢＳから送られてくるディジタル放送波を受信する。このアンテナ１は、一般に周波数変換器を備え、受信／周波数変換した信号をチューナ２に与える。
【００１５】
チューナ２は、受信した高周波ディジタル変調信号のうちから特定周波数の信号を取り出す。すなわち、ディジタル放送の複数のトランスポンダのなかから一つを選択する処理を行う。また、チューナ２は、復調回路、逆インタリーブ回路、誤り訂正回路などを備えることにより、選択したディジタル変調信号を復調してトランスポート・ストリームを出力する。
【００１６】
デマルチプレクサ（ＤＥＭＵＸ）３は、前記トランスポート・ストリームを、ＭＰＥＧ２（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ２）のビデオストリーム、オーディオストリーム、及びＰＳＩ／ＳＩ（Ｐｒｏｇｒａｍ  Ｓｐｅｃｉｆｉｃ  Ｉｎｆｏｒｍａｔｉｏｎ／Ｓｅｒｖｉｃｅ  Ｉｎｆｏｒｍａｔｉｏｎ）などに分離する。デマルチプレクサ３は、ビデオストリームとオーディオストリームをＡＶデコーダ４に供給し、ＰＳＩ／ＳＩ等をシステムコントローラ１３に供給する。
【００１７】
映像処理回路５はＡＶデコーダ４から映像データを受け取り、Ｄ／Ａ変換を行い、例えばＮＴＳＣフォーマットのコンポジット信号に変換する。音声信号処理回路６はＡＶデコーダ４から出力された音声データを受け取り、Ｄ／Ａ変換を行い、右（Ｒ）音のアナログ信号および左（Ｌ）音のアナログ信号を生成する。なお、後述するように、映像処理回路５によって動画画素割合を生成し、音声処理回路６によって音声レベルを出力するようにしている。
【００１８】
映像出力回路７及び音声出力回路８は出力抵抗、増幅器、及びスイッチ等を備える。前記スイッチはシステムコントローラ１３によって制御され、映像出力回路７及び音声出力回路８からは、受信映像・音声と再生映像・音声が切り替えられて出力される。
【００１９】
ＯＳＤ（オンスクリーンディスプレイ）表示回路１２は、システムコントローラ１３から出力指示された文字情報に基づく映像信号を加算器２０に出力する。加算器２０は前記映像信号を映像処理回路５から出力される映像信号に組み込む処理を行う。上記ＯＳＤ表示回路１２により、前述のＰＳＩに含まれるサービス情報に基づくＥＰＧ（Ｅｌｅｃｔｒｏｎｉｃ  Ｐｒｏｇｒａｍ  Ｇｕｉｄｅ）画面表示が実現されるほか、後述する場面番号表示などの各種表示が行えることになる。
【００２０】
メモリ（例えば、ＲＡＭ、ＲＯＭ、ＥＥＰＲＯＭ、フラッシュメモリ等）１４には、番組情報、ユーザ入力情報、システムコントローラ１３により実行されるプログラム、番組予約情報（開始時間、終了時間、受信チャンネル等）などが格納される、また、メモリ１４には、受信番組を記録テープに録画する際に、番組における各場面の場面番号及び後述する場面映像抽出情報がカセット番号に対応付けられて格納される。
【００２１】
リモコン送信機１０は、当該放送受信装置３０に指令を送出するための送信機である。このリモコン送信機１０に設けられた図示しないキーを操作すると、そのキーに対応した指令を意味する信号光（リモコン信号）が図示しない発光部から送出される。リモコン受光器１１は、前記信号光を受光し、これを電気信号に変換してシステムコンローラ１３に与える。
【００２２】
システムコントローラ１３は、前記リモコン送信機１０などによるユーザ指示に対応した各種処理を行う。更に、システムコントローラ１３は、記録テープに映像信号の記録／再生を行うＶＣＲ（ビデオカセットレコーダ）部１６に対する制御も行う。そして、この発明にかかわる処理として、カセット番号をカセットテープから取得する処理、カセットテープに番組を録画する際に録画番組上の場面切り替わりを推定する処理、場面切り替わりを推定するごとにカウントアップした値を場面番号とする処理、ＶＣＲ部１６からテープ走行カウンタ値を取得する処理、及び場面切り替わり推定した時点のテープ走行カウンタ値（場面映像抽出情報）と前記場面番号とを対応付けた場面リストを生成し、この場面リストを前記カセット番号の場面リストとしてメモリ１４に格納する処理を実行する。
【００２３】
ＶＣＲ部１６のテープ装填部にカセットテープがセットされると、カセット番号読取部にてカセット番号が読み取られ、このカセット番号がシステムコントローラ１３に通知される。カセット番号の取得は、例えば、カセットテープ筐体にバーコードを貼り付けておき、前記カセット番号読取部としてバーコードリーダーを設けておくことで実現できる。
【００２４】
システムコントローラ１３は、上述のごとく、番組の録画に際して、上記カセット番号に対応させて場面リストを作成して記憶する。そして、後日、前記カセットテープがセットされたときには、そのカセット番号をキーにしてメモリ１４から場面リストを読み出し、この場面リストにおける場面番号をオンスクリーン表示する。そして、ユーザによりリモコン送信機１０の数値キーが押下されると、これを認識して数字列情報を生成し、更に、ユーザによりリモコン送信機１０の決定キーが操作されると、これを認識して前記数字列を確定し、この数字列を場面番号とし、これに対応付けられているテープ走行カウンタ値をメモリ１４から取得すると共にＶＣＲ部１６から現在テープ走行カウンタ値を取得し、両カウンタ値の比較によって巻き戻しと早送りのいずれかを判定し、現在テープ走行カウンタ値が前記テープ走行カウンタ値に一致するまでＶＣＲ部１６にテープ走行指令を与え、一致した後には再生指令を与える。なお、現在テープ走行カウンタ値が前記テープ走行カウンタ値より幾分少ない値となる時点（指定場面よりも時間にして数秒程度前）に再生指令を与えるようにしてもよい。
【００２５】
（場面切り替わり推定処理）
場面が切り替わるときには、前フレーム映像と現在フレーム映像との対応位置画素データが相違するものとなる。また、動画／静止画判定法として、１フレーム映像の所定位置の複数対象画素について、前フレーム画素データと現在フレーム画素データとの比較を行い、所定値以上の差異が生じた画素の全対象画素に対する割合（動画画素割合）を算出し、前記割合が基準値以上のときに動画であると判定し、それ以外は静止画であるとする方法がある。この処理を利用し、動画と判定されたときには、場面の切り替わりであると推定し、静止画と判定されている間は、場面の切り替わりではないと推定するようにする。なお、場面切り替わりは通常の動画よりも動画画素割合は多いと考えられるので、前記基準値は通常の動画判定時の値よりも高い値としてもよいものである。
【００２６】
また、場面が切り替わるときには、音声レベルに変化が見られることが多い。そこで、数秒間程度の幅で音声レベルを検出・更新していく処理を行い、図２（ａ）に示すように、前述の動画判定により場面切り替わりと推定した時点を境としてその前側音声レベルの平均値と後側音声レベルの平均値とを比較し、所定量以上の差異がある場合に、場面切り替わりと推定するようにしてもよい。また、場面が切り替わるときには、音声が途切れる、或いは音声レベルが小さくなることも多い。そこで、図２（ｂ）に示すように、前記数秒間程度の幅で単に音声レベルの平均値が基準値以下となったときに場面切り替わりと推定するようにしてもよい。ただし、このような音声レベルによる場面切り替わり推定では、最後の音声レベル検出まで待つ必要があるから、動画判定された時点の場面映像抽出情報は暫定的なものとし、音声レベルによる場面切り替わり推定がなされた時点で前記暫定的な場面映像抽出情報を採用する一方、音声レベルによる場面切り替わり推定がなされなかったときには、暫定的な場面映像抽出情報を破棄する。
【００２７】
図３のフローチャートは、場面切り替わりの推定処理例を示している。システムコントローラ１３は、録画処理を開始すると（ステップＳ１）、録画終了命令の有無を監視する（ステップＳ２）。録画終了命令を受けた場合には（ステップＳ２でＮＯ）、録画を終了する（ステップＳ３）。録画終了命令がない場合には（ステップＳ２でＹＥＳ）、動画静止画判別情報を取得し（ステップＳ４）、動画画素の割合が基準値以上であるかどうかを判断する（ステップＳ５）。動画画素割合が基準値以上でない場合にはステップＳ２に戻り、基準値以上であるときには判別に音声レベルを使用するかどうかを判断する（ステップＳ６）。音声レベルを使用するかどうかはユーザが予め設定しておく。音声レベルを使用しない場合にはステップＳ８へ進む。一方、音声レベルを使用するときには（ステップＳ６でＹＥＳ）、システムコントローラ１３は音声レベルが基準値以下であるかどうかを判断し（ステップＳ７）、基準値以下でないときにはステップＳ２に戻る。音声レベルが基準値以下であるときには（ステップＳ７でＹＥＳ）、場面が切り替わったと推定し（ステップＳ８）、場面番号を書き込むことになる（ステップＳ９）。
【００２８】
ところで、コマーシャルや頻繁な場面切り替わりが存在する番組であると、場面数がかなり増えて目的場面の検索効率が低下することが予想される。そこで、場面取得後の一定時間内には次の場面取得は行わないとする設定を設けておき、ユーザが選択できるようにしておくのがよい。例えば、図４のフローチャートに示しているように、システムコントローラ１３は、録画処理を開始すると（ステップＳ１１）、場面の切り替わりを監視する（ステップＳ１２）。場面の切り替わりを推定したときには（ステップＳ１２でＹＥＳ）、前の場面からの経過時間を判定する（ステップＳ１３）。そして、システムコントローラ１３は、経過時間が規定時間以下であるかどうかを判断し（ステップＳ１４）、規定時間以下であるときにはそのままステップＳ１２に戻る。一方、規定時間以下でないときには（ステップＳ１４でＮＯ）、場面番号を付けて（ステップＳ１５）、ステップＳ１２に戻ることになる。
【００２９】
上述した図１の構成例では、アナログ信号化した番組映像をＶＣＲに録画させることとしたが、これに限るものではなく、ディジタル映像データやＭＰＥＧデータを内蔵の録画装置や外付けの録画装置に記録するようにしてもよいものである。外付けの録画装置はＩＥＥＥ１３９４インターフェイスなどを用いて接続・制御することができる。録画装置としては、テープレコーダの他、ハードディスクなどのディスク型記録媒体を用いる装置を採用することができる。ハードディスクなどを用いる場合には、テープ走行カウンタ値ではなく、場面番号と画像格納場所を示す記録アドレスデータ（ハードディスクであれば、シリンダ番号、ヘッド番号、セクタ番号等の物理アドレス、或いは論理アドレス）とを対応付けた場面リストを録画番組毎に記憶しておけばよい。そして、これらの情報はメモリ１４ではなくハードディスク自体に格納すればよい。また、このようにハードディスクを用いる場合には、場面番号の表示に代えて、サムネイル画像（場面縮小画像）の表示を行うことが容易になる。
【００３０】
例えば、場面切り替わり推定された時点でシステムコントローラ１３の側から内蔵ハードディスクにその時点の記録アドレスを問い合わせ、内蔵ハードディスクから返された記録アドレスをメモリ１４に記録したり、或いは、場面切り替わり推定された時点でシステムコントローラ１３の側から内蔵ハードディスクにその時点の記録アドレスをサムネイル画像用の記録アドレスとして保持するよう指令を与え、内蔵ハードディスク側で記録中の動画映像のファイルの情報として前記記録アドレスを保持する処理を行うようにしてもよい。また、場面映像抽出情報を録画開始時からの各場面切り替わり推定時の時間情報とし、場面リスト表示に際し、録画ＭＰＥＧデータのタイムコードを検索し、前記各場面切り替わり推定時の時間情報に合致するタイムコード値を持つ映像をそれぞれ再生し、メモリに展開してサムネイル表示処理を行うようにしてもよい。サムネイル画像を表示する場合、システムコントローラ１３は、前記記録アドレス等に基づいて静止画を再生し、例えば図示しないＶＲＡＭ（フレームメモリ）上に９画面分の静止映像表示エリアを設定して書き込む。或る番組について１〜１７の取得場面が存在すれば、ハードディスクから１〜９番に対応する静止映像データ（場面映像）を読み出し、縮小処理（画素間引き処理）を行ってサムネイル化し、前記ＶＲＡＭの９つのエリアに対して描画処理を行い、当該ＶＲＡＭに読み出しアドレスを与え、読み出された１フレーム分の映像データを映像処理回路５に与える。また、次ページを示すキーが操作されたときには、１０〜１７番の静止映像データを読み出し、前記ＶＲＡＭのうちの８つのエリアに対して描画処理を行うことになる。リモコン送信機１０の方向キーの操作や数値キーの操作を検出してサムネイル画像を選択し、特定されたサムネイル画像（決定キーが操作された時点で選択されているサムネイル画像）に対応する映像から（記録アドレスから）再生を開始することになる。
【００３１】
また、サムネイル画像を予め作成しておいて、録画番組映像データとは別個に内蔵ハードディスクの専用のエリアやメモリ１４に格納するようにしてもよいものである。なお、録画番組のサムネイル化表示自体は既存技術であり、既存のどのような技術を用いても構わないものである。また、サムネイルの対象となる映像データはＭＰＥＧデータ中のＩピクチャとするのがよい。また、アナログ放送を受信する構成においてディジタル録画を行うのであれば、Ａ／Ｄ変換器やＭＰＥＧエンコーダなどを備えればよい。
【００３２】
【発明の効果】
以上説明したように、この発明によれば、録画番組の所望の場面を簡単に検索することができるという効果を奏する。
【図面の簡単な説明】
【図１】この発明の実施形態のディジタル放送受信装置（映像記録再生装置）を示したブロック図である。
【図２】同図（ａ）（ｂ）は音声レベルによる場面切り替わり推定を説明する説明図である。
【図３】処理内容を示したフローチャートである。
【図４】処理内容を示したフローチャートである。
【符号の説明】
１    アンテナ
２    チューナ
３    デマルチプレクサ（ＤＥＭＵＸ）
４    ＡＶデコーダ
１２  ＯＳＤ回路
１３  システムコントローラ
１４  メモリ
【図１】
2005020317.tif 000003
【図２】
2005020317.tif 000004
【図３】
2005020317.tif 000005
【図４】
2005020317.tif 000006