(57)【要約】【課題】映像を良好に通常再生およびスロー再生できる記録再生システムを提供する。【解決手段】符号化ストリームを、クローズドＧＯＰが複数設けられた構成としている。記録再生装置４００に、ＭＰＥＧビデオ復号化機４１１を並列的に１６個設けている。記録再生装置４００は、符号化ストリームから１６個のクローズドＧＯＰを抽出して、１６個のＭＰＥＧビデオ復号化機４１１に割り振り復号させ、フレーム画像データをビデオメモリ４２０に蓄積する。記録再生装置４００は、表示順序に従ってフレーム画像データを４個に１個の割合で表示装置２００に表示させることにより、通常再生の映像を表示させる制御、または、表示順序通りにフレーム画像データを表示させることにより、スロー再生の映像を表示させる制御をする。【選択図】図１
2007221563.tif 000002
【特許請求の範囲】
【請求項１】
所定のフレーム画像を表示させるための映像データに基づいて、所定のフレームレートで前記フレーム画像を表示可能な表示装置で所定の映像を再生する制御をする再生制御装置であって、
前記映像データは、前記フレーム画像を表示させるためのフレーム画像データを符号化した符号化画像データが、表示順序で関連付けられた一連のデータ列構造を有するフレーム画像グループを複数備え、
前記符号化画像データは、この符号化画像データを有していない前記フレーム画像グループの前記符号化画像データを参照せずに復号可能に符号化され、
前記映像データを取得して、前記フレーム画像グループを複数抽出する抽出手段と、
並列的に設けられ、前記フレーム画像グループの前記符号化画像データを復号して、前記フレーム画像データを出力する複数の復号手段と、
前記抽出手段で抽出された前記複数のフレーム画像グループを、前記複数の復号手段に割り振る割り振り手段と、
前記復号手段から出力された前記フレーム画像データをフレーム画像記憶手段に記憶させるフレーム画像記憶処理手段と、
入力操作に基づいて、前記表示順序が所定間隔毎の前記フレーム画像データを前記フレーム画像記憶手段から順次取得して、前記表示装置に前記フレームレートで表示させて第１の再生速度の映像を再生する制御、または、前記表示順序通りに前記フレーム画像データを順次取得して、前記フレームレートで表示させて前記第１の再生速度よりも遅い第２の再生速度の映像を再生する制御をする再生制御手段と、
を具備したことを特徴とした再生制御装置。
【請求項２】
請求項１に記載の再生制御装置であって、
前記複数のフレーム画像グループは、互いに等しい数の前記フレーム画像データを有する
ことを特徴とした再生制御装置。
【請求項３】
請求項１または請求項２に記載の再生制御装置であって、
前記符号化画像データは、ＭＰＥＧ（Motion Picture Experts Group）規格に基づき符号化された
ことを特徴とした再生制御装置。
【請求項４】
請求項１ないし請求項３のいずれかに記載の再生制御装置であって、
前記フレーム画像データは、前記フレームレートよりも速い撮影速度で撮影可能な撮影装置で撮影されたフレーム画像を表示させるためのものであり、
前記再生制御手段は、前記撮影装置で撮影された所定の物体が実際の移動速度と略等しい速度で移動する映像を、前記第１の再生速度の映像として再生し、前記所定の物体が実際の移動速度に前記撮影速度に対する前記フレームレートの倍率を乗じた速度で移動する映像を、前記第２の再生速度の映像として再生し、入力操作に基づいて、前記表示順序が前記第１の再生速度での再生時よりも大きい間隔毎の前記フレーム画像データを順次取得して、前記フレームレートで表示させて前記第１の再生速度よりも速い第３の再生速度で前記映像を再生する旨を認識すると、前記第３の再生速度での映像の再生を開始し、
前記フレームレートに対する前記撮影装置の撮影速度の倍率をＮ、
前記第１の再生速度に対する前記第３の再生速度の倍率をＶ、
前記フレームレートに対する前記復号手段の復号速度の倍率をＰ、
として、
以下の式（１）で求められる数Ｗの前記復号手段を備えた
Ｗ≧Ｎ×Ｖ／Ｐ…（１）
ことを特徴とした再生制御装置。
【請求項５】
請求項４に記載の再生制御装置であって、
前記フレーム画像グループが備えた前記符号化画像データの数をＨ、
として、
前記フレーム画像データ記憶手段に記憶され、前記表示順序の順方向および逆方向のうちいずれか一方の方向への前記第３の再生速度での再生時に表示中のフレーム画像よりも、前記表示順序が前記いずれか一方の方向側のフレーム画像の前記フレーム画像データの数Ｕが、以下の式（２）を満たすか否かを判断する残存数判断手段を具備し、
Ｕ／Ｎ＜Ｈ×Ｖ／Ｐ…（２）
前記フレーム画像記憶処理手段は、前記第３の再生速度での再生が開始されると、前記第３の再生速度での再生時に表示中のフレーム画像の前記フレーム画像データが、前記フレーム画像記憶手段の前記フレーム画像データのうち前記表示順序が略中間となる状態に、前記フレーム画像データを削除するとともに、新たな前記フレーム画像データを記憶させ、
前記再生制御手段は、前記残存数判断手段で前記式（２）を満たさないと判断された場合、前記第３の再生速度での再生を終了する
ことを特徴とした再生制御装置。
【請求項６】
請求項５に記載の再生制御装置であって、
前記第１の再生速度に対する倍率が、以下の式（３）で求められる倍率Ｘとなる第４の再生速度を設定する再生速度再設定手段を具備し、
Ｘ≦Ｕ×Ｐ／（Ｈ×Ｎ）…（３）
前記再生制御手段は、前記第３の再生速度での再生を終了すると、前記再生速度再設定手段で設定された前記第４の再生速度での前記いずれか一方の方向への再生を開始する
ことを特徴とした再生制御装置。
【請求項７】
請求項１ないし請求項６のいずれかに記載の再生制御装置と、
前記フレーム画像データを取得して、前記映像データを生成する映像データ生成手段と、
この映像データ生成手段で生成された前記映像データを映像データ記憶手段に記憶させる映像記憶処理手段と、
を具備し、
前記抽出手段は、前記映像データ記憶手段から前記映像データを取得する
ことを特徴としたデータ処理装置。
【請求項８】
請求項４ないし請求項６のいずれかに記載の再生制御装置と、
前記フレームレートよりも速い撮影速度で撮影可能な撮影装置と接続可能に設けられ、前記撮影装置で撮影されたフレーム画像の前記フレーム画像データを取得して、前記映像データを生成する映像データ生成手段と、
この映像データ生成手段で生成された前記映像データを映像データ記憶手段に記憶させる映像記憶処理手段と、
を具備し、
前記抽出手段は、前記映像データ記憶手段から前記映像データを取得する
ことを特徴としたデータ処理装置。
【請求項９】
演算手段により、所定のフレーム画像を表示させるための映像データに基づいて、所定のフレームレートで前記フレーム画像を表示可能な表示装置で所定の映像を再生する制御をする再生制御方法であって、
前記映像データは、前記フレーム画像を表示させるためのフレーム画像データを符号化した符号化画像データが、表示順序で関連付けられた一連のデータ列構造を有するフレーム画像グループを複数備え、
前記符号化画像データは、この符号化画像データを有していない前記フレーム画像グループの前記符号化画像データを参照せずに復号可能に符号化され、
前記フレーム画像グループの前記符号化画像データを復号して、前記フレーム画像データを出力する復号手段を並列的に複数設け、
前記映像データを取得して、前記フレーム画像グループを複数抽出し、
この抽出された前記複数のフレーム画像グループを、前記複数の復号手段に割り振り、
前記復号手段から出力された前記フレーム画像データをフレーム画像記憶手段に記憶させ、
入力操作に基づいて、前記表示順序が所定間隔毎の前記フレーム画像データを前記フレーム画像記憶手段から順次取得して、前記表示装置に前記フレームレートで表示させて第１の再生速度の映像を再生する制御、または、前記表示順序通りに前記フレーム画像データを順次取得して、前記フレームレートで表示させて前記第１の再生速度よりも遅い第２の再生速度の映像を再生する制御をする
ことを特徴とする再生制御方法。
【請求項１０】
演算手段を、請求項１ないし請求項６のいずれかに記載の再生制御装置として機能させる
ことを特徴とした再生制御プログラム。
【請求項１１】
請求項９に記載の再生制御方法を演算手段に実行させる
ことを特徴とした再生制御プログラム。
【請求項１２】
請求項１０または請求項１１に記載の再生制御プログラムが演算手段にて読取可能に記録された
ことを特徴とする再生制御プログラムを記録した記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、所定のフレーム画像を表示させるためのフレーム画像データを複数有する映像データを再生して、所定の映像を表示装置で表示させる制御をする再生制御装置、データ処理装置、再生制御方法、そのプログラム、および、そのプログラムを記録した記録媒体に関する。
【背景技術】
【０００２】
従来、記録媒体に記録された映像を利用者が所望する速度で再生する際に、音声を映像に対して違和感なく再生する構成が知られている（例えば、特許文献１参照）。
また、例えばＮＴＳＣ（National Television System Committee）方式でのフレームレートよりも速いフレームレート、すなわち高速で撮影された映像を記録媒体に記録する方法が知られている（例えば、特許文献２参照）。
【０００３】
特許文献１に記載のものは、複数のビデオデコーダ部を備えている。
そして、映像の再生には、これらのビデオデコーダ部に、いわゆるオープンＧＯＰ（Group Of Pictures）を入力してデコードし、ビデオ出力制御部へ出力する構成が採られている。すなわち、１つのビデオデコーダ部に、異なるＧＯＰにまたがって参照されるピクチャを含む連続した２つのＧＯＰを続けて入力する。そして、この連続するＧＯＰのうち時間的に前のＧＯＰを参照することにより、時間的に後ろのＧＯＰをデコードして、ビデオ出力制御部へ出力する構成が採られている。
【０００４】
特許文献２に記載のものは、通常の速度で再生する場合に読み出す画像情報を、基本情報として光ディスクの内周に設けられた記録領域に連続的に記録する。さらに、低速再生時にしか読み出さない画像情報を、補間情報として光ディスクの外周に設けられた記録領域にまとめて記録する。
そして、低速再生の場合、補間情報と基本情報とを読み出すことで低速再生が行われる構成が採られている。
【０００５】
【特許文献１】特開２００１−２０２６９８号公報（第１１頁左欄−第１２頁左欄）
【特許文献２】特許第３６０４１８６号公報（第５頁−第９頁）
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、上述した特許文献１のような構成では、ビデオデコーダ部で所定の場面のＧＯＰをデコードするために、このＧＯＰよりも時間的に前のＧＯＰをデコードする必要があり、所定場面のＧＯＰをデコードする際の効率が低下してしまうおそれがあるという問題点が一例として挙げられる。
また、上述した特許文献２に記載のような構成では、通常速度で再生中に直前に再生した場面を低速で再生する場合、通常速度再生中には基本情報のみを読み出しているため、低速再生するための補間情報を新たに読み出す必要があり、迅速に低速再生を開始できないおそれがあるという問題点が一例として挙げられる。
【０００７】
本発明の目的は、このような実情などに鑑みて、映像を複数の再生速度で良好に再生可能な再生制御装置、データ処理装置、再生制御方法、そのプログラム、および、そのプログラムを記録した記録媒体を提供することである。
【課題を解決するための手段】
【０００８】
請求項１に記載の発明は、所定のフレーム画像を表示させるための映像データに基づいて、所定のフレームレートで前記フレーム画像を表示可能な表示装置で所定の映像を再生する制御をする再生制御装置であって、前記映像データは、前記フレーム画像を表示させるためのフレーム画像データを符号化した符号化画像データが、表示順序で関連付けられた一連のデータ列構造を有するフレーム画像グループを複数備え、前記符号化画像データは、この符号化画像データを有していない前記フレーム画像グループの前記符号化画像データを参照せずに復号可能に符号化され、前記映像データを取得して、前記フレーム画像グループを複数抽出する抽出手段と、並列的に設けられ、前記フレーム画像グループの前記符号化画像データを復号して、前記フレーム画像データを出力する複数の復号手段と、前記抽出手段で抽出された前記複数のフレーム画像グループを、前記複数の復号手段に割り振る割り振り手段と、前記復号手段から出力された前記フレーム画像データをフレーム画像記憶手段に記憶させるフレーム画像記憶処理手段と、入力操作に基づいて、前記表示順序が所定間隔毎の前記フレーム画像データを前記フレーム画像記憶手段から順次取得して、前記表示装置に前記フレームレートで表示させて第１の再生速度の映像を再生する制御、または、前記表示順序通りに前記フレーム画像データを順次取得して、前記フレームレートで表示させて前記第１の再生速度よりも遅い第２の再生速度の映像を再生する制御をする再生制御手段と、を具備したことを特徴とした再生制御装置である。
【０００９】
請求項７に記載の発明は、請求項１ないし請求項６のいずれかに記載の再生制御装置と、前記フレーム画像データを取得して、前記映像データを生成する映像データ生成手段と、この映像データ生成手段で生成された前記映像データを映像データ記憶手段に記憶させる映像記憶処理手段と、を具備し、前記抽出手段は、前記映像データ記憶手段から前記映像データを取得することを特徴としたデータ処理装置である。
【００１０】
請求項８に記載の発明は、請求項４ないし請求項６のいずれかに記載の再生制御装置と、前記フレームレートよりも速い撮影速度で撮影可能な撮影装置と接続可能に設けられ、前記撮影装置で撮影されたフレーム画像の前記フレーム画像データを取得して、前記映像データを生成する映像データ生成手段と、この映像データ生成手段で生成された前記映像データを映像データ記憶手段に記憶させる映像記憶処理手段と、を具備し、前記抽出手段は、前記映像データ記憶手段から前記映像データを取得することを特徴としたデータ処理装置である。
【００１１】
請求項９に記載の発明は、演算手段により、所定のフレーム画像を表示させるための映像データに基づいて、所定のフレームレートで前記フレーム画像を表示可能な表示装置で所定の映像を再生する制御をする再生制御方法であって、前記映像データは、前記フレーム画像を表示させるためのフレーム画像データを符号化した符号化画像データが、表示順序で関連付けられた一連のデータ列構造を有するフレーム画像グループを複数備え、前記符号化画像データは、この符号化画像データを有していない前記フレーム画像グループの前記符号化画像データを参照せずに復号可能に符号化され、前記フレーム画像グループの前記符号化画像データを復号して、前記フレーム画像データを出力する復号手段を並列的に複数設け、前記映像データを取得して、前記フレーム画像グループを複数抽出し、この抽出された前記複数のフレーム画像グループを、前記複数の復号手段に割り振り、前記復号手段から出力された前記フレーム画像データをフレーム画像記憶手段に記憶させ、入力操作に基づいて、前記表示順序が所定間隔毎の前記フレーム画像データを前記フレーム画像記憶手段から順次取得して、前記表示装置に前記フレームレートで表示させて第１の再生速度の映像を再生する制御、または、前記表示順序通りに前記フレーム画像データを順次取得して、前記フレームレートで表示させて前記第１の再生速度よりも遅い第２の再生速度の映像を再生する制御をすることを特徴とする再生制御方法である。
【００１２】
請求項１０に記載の発明は、演算手段を、請求項１ないし請求項６のいずれかに記載の再生制御装置として機能させることを特徴とした再生制御プログラムである。
【００１３】
請求項１１に記載の発明は、請求項９に記載の再生制御方法を演算手段に実行させることを特徴とした再生制御プログラムである。
【００１４】
請求項１２に記載の発明は、請求項１０または請求項１１に記載の再生制御プログラムが演算手段にて読取可能に記録されたことを特徴とする再生制御プログラムを記録した記録媒体である。
【発明を実施するための最良の形態】
【００１５】
以下に、本発明の一実施の形態を図面に基づいて説明する。この一実施の形態では、映像を撮影して記録しつつ、この記録した映像を複数の再生速度で再生表示可能な記録再生システムを例示して説明する。
なお、以下において、撮影された所定の物体、例えばボールが実際の移動速度と略等しい速度で移動する映像を、通常再生の映像と称する。また、ボールが実際の移動速度の１／４の速度で移動する映像を、スロー再生の映像と称する。
ここで、通常再生時の再生速度が本発明の第１の再生速度に対応し、スロー再生時の再生速度が本発明の第２の再生速度に対応する。
図１は、本発明の一実施の形態に係る記録再生システムの概略構成を示すブロック図である。図２は、符号化ストリームの概略構成を示す模式図である。図３は、クローズドＧＯＰの割り振り状態を示す概念図である。図４は、ＣＰＵの概略構成を示すブロック図である。図５は、サーチ再生時にビデオメモリに蓄積されたフレーム画像データの概略構成を示す概念図である。図６は、サーチ再生速度再設定時にビデオメモリに蓄積されたフレーム画像データの概略構成を示す概念図である。
【００１６】
〔記録再生システムの構成〕
図１において、１００は記録再生システムである。そして、この記録再生システム１００は、表示装置２００と、撮影装置としてのハイスピードカメラ３００と、データ処理装置としての記録再生装置４００と、を備えている。
【００１７】
表示装置２００は、記録再生装置４００に接続され、この記録再生装置４００からのビデオ信号に基づいて、所定の再生速度の映像を表示させる。この表示装置２００は、ＮＴＳＣ（National Television System Committee）方式のフレームレート、すなわち１秒あたり３０フレームの割合で、ビデオ信号の後述するフレーム画像データ６５０（図５参照）に基づくフレーム画像を切り替え表示して、所定の再生速度の映像を再生表示させる。
この表示装置２００としては、例えば液晶パネルや有機ＥＬ（Electro Luminescence）パネル、ＰＤＰ（Plasma Display Panel）、ＣＲＴ（Cathode-Ray Tube）、ＦＥＤ（Field Emission Display）、電気泳動ディスプレイパネルなどが例示できる。
なお、表示装置２００としては、ＮＴＳＣ方式に限らず、ＰＡＬ（Phase-Alternation Line system）方式や、ＳＥＣＡＭ方式のものを適用してもよい。
【００１８】
ハイスピードカメラ３００は、記録再生装置４００に着脱可能な構成を有している。このハイスピードカメラ３００は、例えばボールなどの物体を１秒あたり１２０フレームの撮影速度、すなわち表示装置２００のフレームレートの４倍の撮影速度で撮影する。そして、１／１２０秒分のフレーム画像、すなわち１／１２０秒の撮影時間で撮影されたフレーム画像を表示させるためのフレーム画像データを適宜生成し、アナログのビデオ信号に変換して記録再生装置４００へ出力する。
なお、ハイスピードカメラ３００としては、表示装置２００のフレームレートの４倍の撮影速度のものに限らない。
【００１９】
記録再生装置４００は、ハイスピードカメラ３００で撮影された映像を、通常再生、スロー再生の映像として、表示装置２００で表示させる。また、いわゆる早送りまたは巻き戻しつつ、所定の物体が実際の移動速度の４倍の速度で移動する映像を、サーチ再生の映像として表示させる。さらに、サーチ再生時の再生速度（以下、サーチ再生速度と称す）を、適宜再設定して、映像を表示させる。
ここで、サーチ再生速度が、本発明の第３の再生速度に対応する。また、早送りのサーチ再生が、本発明の表示順序の順方向への第３の再生速度での再生に対応し、巻き戻しのサーチ再生が、本発明の表示順序の逆方向への第３の再生速度での再生に対応する。
そして、記録再生装置４００は、復号部４１０と、フレーム画像記憶手段としてのビデオメモリ４２０と、ビデオＡ（Analog）／Ｄ（Digital）変換機４３０と、映像データ生成手段としてのＭＰＥＧ（Motion Picture Experts Group）ビデオ符号化機４４０と、ストレージ装置４５０と、抽出手段としても機能する割り振り手段４６０と、フレーム画像記憶処理手段としても機能するビデオメモリ制御機４７０と、ビデオ信号生成機４８０と、ジョグスイッチ４９０と、再生速度設定スイッチ５００と、ユーザインターフェース制御部５１０と、ＣＰＵ（Central Processing Unit）５２０と、を備えている。
【００２０】
復号部４１０は、並列的に設けられた１６個の復号手段としてのＭＰＥＧビデオ復号化機４１１を備えている。
これらＭＰＥＧビデオ復号化機４１１は、割り振り手段４６０と、ビデオメモリ制御機４７０と、ＣＰＵ５２０と、にそれぞれ接続されている。
ＭＰＥＧビデオ復号化機４１１は、ＣＰＵ５２０により制御され、割り振り手段４６０から出力される後述するクローズドＧＯＰ（Group Of Pictures）６１０を取得する。さらに、このクローズドＧＯＰ６１０の符号化画像データ６２０を、１秒あたり３０フレームの復号速度、すなわち表示装置２００のフレームレートと等しい復号速度（以下、１倍の復号速度と称す）で復号する。そして、復号により得られた８個のフレーム画像データ６５０を、ビデオメモリ制御機４７０へ出力する。
【００２１】
ここで、復号部４１０に設けられるＭＰＥＧビデオ復号化機４１１の数は、以下の式（１）に基づいて、設定されている。
【００２２】
Ｗ≧Ｎ×Ｖ／Ｐ…（１）
Ｗ：ＭＰＥＧビデオ復号化機４１１の数
Ｎ：表示装置２００のフレームレートに対するハイスピードカメラ３００の撮影速度の倍率
Ｖ：通常再生速度に対するサーチ再生速度の倍率
Ｐ：表示装置２００のフレームレートに対するＭＰＥＧビデオ復号化機４１１の復号速度の倍率
【００２３】
すなわち、上述したように、式（１）中のＮ、Ｖ、Ｐの値がそれぞれ４、４、１であるので、Ｗの値は、１６になる。
このため、復号部４１０が有するＭＰＥＧビデオ復号化機４１１の数は、式（１）を満たす１６個に設定されている。
【００２４】
ビデオメモリ４２０は、ビデオメモリ制御機４７０に接続されている。
ビデオメモリ４２０は、ビデオメモリ制御機４７０から出力されるフレーム画像データ６５０を適宜読み出し可能に蓄積する。このビデオメモリ４２０は、最大で４８０個のフレーム画像データ６５０を蓄積可能な容量を有している。すなわち、１個のフレーム画像データ６５０が上述したように１／１２０秒分のフレーム画像を表示させるためのものなので、最大で４秒分のフレーム画像データ６５０を蓄積可能な容量を有している。
【００２５】
ビデオＡ／Ｄ変換機４３０は、ＭＰＥＧビデオ符号化機４４０に接続されている。また、ビデオＡ／Ｄ変換機４３０は、ハイスピードカメラ３００に適宜接続される。
そして、ビデオＡ／Ｄ変換機４３０は、ハイスピードカメラ３００から出力されるアナログのビデオ信号を取得し、デジタルのビデオ信号に変換してＭＰＥＧビデオ符号化機４４０へ出力する。
【００２６】
ＭＰＥＧビデオ符号化機４４０は、ストレージ装置４５０と、ＣＰＵ５２０と、に接続されている。
ＭＰＥＧビデオ符号化機４４０は、ＣＰＵ５２０により制御され、ビデオＡ／Ｄ変換機４３０から出力されるビデオ信号のフレーム画像データ６５０を取得する。そして、ハイスピードカメラ３００の撮影速度以上の速度でＭＰＥＧ規格に基づき符号化して、図２に示すような映像データとしての符号化ストリーム６００を生成する。
【００２７】
具体的には、ＭＰＥＧビデオ符号化機４４０は、ビデオＡ／Ｄ変換機４３０からのビデオ信号のフレーム画像データ６５０を符号化して、いわゆるＩピクチャ、Ｐピクチャ、または、Ｂピクチャを符号化画像データ６２０として生成する。ここで、図２において、「Ｉ」、「Ｐ」、「Ｂ」と示された符号化画像データ６２０は、それぞれＩピクチャ、Ｐピクチャ、Ｂピクチャを表す。
さらに、ＭＰＥＧビデオ符号化機４４０は、例えば１個のＩピクチャと、１個のＰピクチャと、６個のＢピクチャと、に対応する８個の符号化画像データ６２０が、表示順序で関連付けられた一連のデータ列構造のフレームグループとしてのクローズドＧＯＰ６１０を複数生成する。
このクローズドＧＯＰ６１０の符号化画像データ６２０は、別のクローズドＧＯＰ６１０を参照せずに復号可能に符号化されている。すなわち、クローズドＧＯＰ６１０のＢピクチャは、別のクローズドＧＯＰ６１０のＩピクチャやＰピクチャを参照せずに、同じクローズドＧＯＰ６１０のＩピクチャやＰピクチャを参照して復号可能に符号化されている。
そして、ＭＰＥＧビデオ符号化機４４０は、クローズドＧＯＰ６１０が再生される順序で関連付けられた一連のデータ列構造の符号化ストリーム６００を生成して、ストレージ装置４５０へ出力する。
【００２８】
ストレージ装置４５０は、割り振り手段４６０と、ＣＰＵ５２０と、に接続されている。このストレージ装置４５０は、映像データ記憶手段としてのＨＤ（Hard Disk）４５１と、映像記憶処理手段としてのストリーム保存処理手段４５２と、ストリーム読出手段４５３と、を備えている。
ストリーム保存処理手段４５２は、ＣＰＵ５２０により制御され、ＭＰＥＧビデオ符号化機４４０から出力される符号化ストリーム６００を取得して、ＨＤ４５１に適宜読み出し可能に記憶させる処理、すなわち保存する処理をする。
ストリーム読出手段４５３は、ＣＰＵ５２０により制御され、ＨＤ４５１に保存された符号化ストリーム６００を適宜読み出して、割り振り手段４６０へ出力する。
なお、本発明の映像データ記憶手段としては、ＨＤ４５１に限らず、ＤＶＤ（Digital Versatile Disc）、光ディスク、メモリカードなどとしてもよい。
【００２９】
割り振り手段４６０は、１６個のＭＰＥＧビデオ復号化機４１１と、ＣＰＵ５２０と、に接続されている。
割り振り手段４６０は、ＣＰＵ５２０により制御され、ストレージ装置４５０からの符号化ストリーム６００を取得して、表示順序が連続する１６個のクローズドＧＯＰ６１０を抽出する。そして、図３に示すように、１個のＭＰＥＧビデオ復号化機４１１に対して、１個のクローズドＧＯＰ６１０を割り振る状態で出力する。
【００３０】
ビデオメモリ制御機４７０は、ビデオ信号生成機４８０と、ＣＰＵ５２０と、に接続されている。
ビデオメモリ制御機４７０は、ＣＰＵ５２０により制御され、ＭＰＥＧビデオ復号化機４１１でのクローズドＧＯＰ６１０の復号により出力されるフレーム画像データ６５０を取得して、ビデオメモリ４２０に蓄積する。
また、ビデオメモリ制御機４７０は、ＣＰＵ５２０の制御により、フレーム画像データ６５０を適宜選択的に取得して、再生する順序でビデオ信号生成機４８０へ出力する。
【００３１】
ビデオ信号生成機４８０は、表示装置２００に適宜接続される。
ビデオ信号生成機４８０は、ビデオメモリ制御機４７０から出力されるフレーム画像データ６５０を取得する。そして、表示装置２００に対応するビデオ信号に変換して、表示装置２００へ出力する。
【００３２】
ジョグスイッチ４９０は、ユーザインターフェース制御部５１０に接続されている。そして、ジョグスイッチ４９０は、略円板状のジョグダイヤル４９１と、図示しない、タッチセンサと、回転センサと、を備えている。
ジョグダイヤル４９１は、記録再生装置４００の図示しないケース体の例えば正面に望んで、略円板状の中心を軸に円周方向に回転可能に配設されている。
タッチセンサは、例えばジョグダイヤル４９１の背面側に配設されている。このタッチセンサは、ジョグダイヤル４９１に利用者が接触したことを検知して、その旨の接触検知信号をユーザインターフェース制御部５１０へ出力する。
回転センサは、例えばジョグダイヤル４９１の回転中心近傍に配設されている。この回転センサは、ジョグダイヤル４９１の回転角度および回転速度を検出して、これらに関する回転検知信号をユーザインターフェース制御部５１０へ出力する。
【００３３】
再生速度設定スイッチ５００は、ユーザインターフェース制御部５１０に接続されている。そして、再生速度設定スイッチ５００は、再生速度設定ボタン５０１と、図示しない設定検出部と、を備えている。
再生速度設定ボタン５０１は、記録再生装置４００の図示しないケース体の例えば正面に臨んで配設され、入力操作可能に設けられている。
設定検出部は、例えば再生速度設定ボタン５０１の背面側に配設されている。この設定検出部は、再生速度設定ボタン５０１の入力操作に基づいて、通常再生する旨またはスロー再生する旨の再生速度信号をユーザインターフェース制御部５１０へ出力する。
【００３４】
ユーザインターフェース制御部５１０は、ＣＰＵ５２０に接続されている。
このユーザインターフェース制御部５１０は、ジョグスイッチ４９０および再生速度設定スイッチ５００から接触検知信号、回転検知信号、および、再生速度信号を適宜取得する。そして、これらに基づいて、利用者がジョグダイヤル４９１に接触して回転させていると認識すると、ジョグダイヤル４９１の回転角度および回転速度に対応させて、映像を現在の場面から早送りまたは巻き戻しのサーチ再生をする旨の再生制御信号を生成して、ＣＰＵ５２０へ出力する。
また、利用者がジョグダイヤル４９１から手を離したことを認識すると、再生速度信号に基づいて、この手を離した時点で再生している場面から通常再生またはスロー再生を開始する旨の再生制御信号を生成して、ＣＰＵ５２０へ出力する。
【００３５】
ＣＰＵ５２０は、図示しないメモリに記憶された各種プログラムとして、図４に示すように、ストリーム保存制御手段５２１と、フレーム画像蓄積制御手段５２２と、残存数判断手段５２３と、再生速度再設定手段としてのサーチ速度再設定手段５２４と、再生制御手段５２５と、を備えている。
ここで、ＭＰＥＧビデオ復号化機４１１と、割り振り手段４６０と、ビデオメモリ制御機４７０と、残存数判断手段５２３と、サーチ速度再設定手段５２４と、再生制御手段５２５と、にて、本発明の再生制御装置が構成されている。
【００３６】
ストリーム保存制御手段５２１は、ハイスピードカメラ３００で撮影された映像の符号化ストリーム６００を、ストレージ装置４５０に保存させる制御をする。
具体的には、ストリーム保存制御手段５２１は、ＭＰＥＧビデオ符号化機４４０を制御して、ビデオＡ／Ｄ変換機４３０を介して入力されるハイスピードカメラ３００からのフレーム画像データ６５０を取得させる。そして、このフレーム画像データ６５０に基づいて、符号化ストリーム６００を生成させる。さらに、ストレージ装置４５０を制御して、符号化ストリーム６００をＨＤ４５１に保存させる。
【００３７】
フレーム画像蓄積制御手段５２２は、再生制御手段５２５により制御され、ストレージ装置４５０に保存された符号化ストリーム６００に基づいて、フレーム画像データ６５０をビデオメモリ４２０に蓄積させる制御をする。
具体的には、フレーム画像蓄積制御手段５２２は、ストレージ装置４５０および割り振り手段４６０を制御して、所定の符号化ストリーム６００から時系列的に連続する１６個のクローズドＧＯＰ６１０を抽出させる。そして、この抽出させたクローズドＧＯＰ６１０を、各ＭＰＥＧビデオ復号化機４１１に割り振らせる。また、ＭＰＥＧビデオ復号化機４１１を制御して、クローズドＧＯＰ６１０を復号させ、フレーム画像データ６５０をビデオメモリ制御機４７０へ出力させる。
【００３８】
ここで、上述したように、ＭＰＥＧビデオ復号化機４１１は、１倍の復号速度で符号化画像データ６２０を復号可能な能力を有している。また、クローズドＧＯＰ６１０は、８個の符号化画像データ６２０を有している。このため、フレーム画像蓄積制御手段５２２は、復号部４１０に、１６個のＭＰＥＧビデオ復号化機４１１により、一度に１２８個の符号化画像データ６２０を復号して、フレーム画像データ６５０を出力させる。
そして、ビデオメモリ制御機４７０を制御して、各ＭＰＥＧビデオ復号化機４１１からのフレーム画像データ６５０を、ビデオメモリ４２０に蓄積させる。
【００３９】
残存数判断手段５２３は、サーチ再生中に、ビデオメモリ４２０に蓄積されたフレーム画像データ６５０のうち、表示中のフレーム画像データよりも表示順序がサーチ再生方向側のフレーム画像データ（以下、サーチ再生用のフレーム画像データと称す）６５０の数が、以下の式（２）を満たすか否かを判断する。ここで、サーチ再生方向とは、サーチ再生が巻き戻しの場合、巻き戻し方向側を意味し、早送りの場合、早送りの方向を意味する。
【００４０】
Ｕ／Ｎ＜Ｈ×Ｖ／Ｐ…（２）
Ｕ：ビデオメモリ４２０に蓄積されたフレーム画像データ６５０のうちサーチ再生用のフレーム画像データ６５０の数
Ｈ：クローズドＧＯＰ６１０が有する符号化画像データ６２０の数
【００４１】
Ｈの値を仮に８とすると、式（２）中のＶ、Ｐの値がそれぞれ４、１であるので、Ｕの値は、１２８となる。
ここで、Ｈの値は、符号化上の常識的な値であるが、ビデオメモリ４２０に蓄積可能なフレーム画像データ６５０の最大数Ｑとの相対的要素もある。この記録再生システム１００では、ビデオメモリ４２０に（Ｈ×Ｗ）個のフレーム画像データ６５０を単位に補充されるため、この値がＱに比して大きいとバッファ制御が困難となる。このため、Ｈの値を仮に８とした。
このため、残存数判断手段５２３は、ビデオメモリ４２０に蓄積されたフレーム画像データ６５０のうちサーチ再生用のフレーム画像データ６５０の数が、１２８個未満か否かを判断する。
そして、残存数判断手段５２３は、式（２）を満たすか否かに関する残存数判断情報を再生制御手段５２５へ出力する。
【００４２】
サーチ速度再設定手段５２４は、サーチ再生速度の再設定処理を実施する。
具体的には、サーチ速度再設定手段５２４は、通常再生速度に対する倍率が、以下の式（３）で求められる倍率となるサーチ再生速度を設定する。
【００４３】
Ｘ≦Ｕ×Ｐ／（Ｈ×Ｎ）…（３）
Ｘ：通常再生速度に対する再設定するサーチ再生速度の倍率
【００４４】
すなわち、上述したように、式（３）中のＰ、Ｈ、Ｎは、それぞれ１、８、４であるので、Ｘの値は、（Ｕ／３２）となる。
このため、サーチ速度再設定手段５２４は、通常再生速度に対する倍率が（Ｕ／３２）倍以下となるサーチ再生速度を設定する。例えば、サーチ再生用のフレーム画像データ６５０の数Ｕが、式（２）を満たす例えば８０の場合、サーチ再生速度を４倍から２．５倍以下に再設定する。
ここで、式（３）に基づいて再設定されたサーチ再生速度が、本発明の第４の再生速度に対応する。
そして、サーチ速度再設定手段５２４は、再設定したサーチ再生速度に関するサーチ速度再設定情報を再生制御手段５２５へ出力する。
【００４５】
再生制御手段５２５は、通常再生、スロー再生、サーチ再生の映像を表示装置２００で表示させる制御をする。
具体的には、再生制御手段５２５は、ユーザインターフェース制御部５１０から、ジョグスイッチ４９０や再生速度設定スイッチ５００の入力操作に基づく再生制御信号を取得する。そして、この再生制御信号に基づいて、例えばハイスピードカメラ３００で現在撮影中の映像を記録しつつ、通常再生する旨を認識すると、フレーム画像蓄積制御手段５２２を制御して、フレーム画像データ６５０をビデオメモリ４２０に蓄積させる。
また、再生制御手段５２５は、ビデオメモリ制御機４７０を制御して、表示順序に従ってフレーム画像データ６５０を４個に１個の割合で取得させ、ビデオ信号生成機４８０を介して表示装置２００へ出力させる。すなわち、表示装置２００のフレームレートに対応して、１／３０秒毎のフレーム画像データ６５０を１秒あたり３０枚の割合で表示装置２００に表示させることにより、通常再生の映像を表示させる制御をする。さらに、再生制御手段５２５は、通常再生に利用したフレーム画像データ６５０をビデオメモリ４２０から適宜削除させ、新たなフレーム画像データ６５０をビデオメモリ４２０に適宜蓄積させる。
【００４６】
また、再生制御手段５２５は、例えば通常再生中に、巻き戻しのサーチ再生をする旨を認識すると、現在再生中のフレーム画像データ６５０からサーチ再生を開始する。さらに、このフレーム画像データ６５０を基準として、表示順序に従ってフレーム画像データ６５０を１６個に１個の割合で取得させ、サーチ再生の映像を表示させる。すなわち、４／３０秒毎のフレーム画像データ６５０を１秒あたり３０枚の割合で表示装置２００に表示させることにより、通常再生の４倍のサーチ再生の映像を表示させる制御をする。そして、再生制御手段５２５は、蓄積されたフレーム画像データ６５０の中で、サーチ再生により表示されるフレーム画像データ６５０の表示順序が、徐々に略中間となる状態に、フレーム画像データ６５０の削除および蓄積処理をさせる。
例えば、再生制御手段５２５は、図５に示すように、ビデオメモリ４２０に表示順序が１番から４８０番までのフレーム画像データ６５０が蓄積されている状態において、２４０番目や２４１番目などの略中間のフレーム画像データ６５０が表示されるように、削除および蓄積処理をさせる。ここで、図５，６において、「１」、「２」、「２４０」などと数字が示されたフレーム画像データ６５０は、それぞれ表示順序が１、２、２４０番目である旨を表す。
なお、再生制御手段５２５は、早送りのサーチ再生を認識した場合、早送り方向のフレーム画像データ６５０がビデオメモリ４２０に蓄積されていないため、サーチ再生を実施しない。
【００４７】
さらに、再生制御手段５２５は、サーチ再生中に、残存数判断手段５２３から式（２）を満たす旨、すなわちサーチ再生用のフレーム画像データ６５０が数Ｕよりも少ない旨の残存数判断情報を取得すると、このサーチ再生速度でサーチ再生を継続すると、サーチ再生が途切れてしまうと認識する。
すなわち、例えば、図６に示すように、巻き戻しのサーチ再生中に、表示順序が８１番目のフレーム画像データ６５０を表示させている状態では、サーチ再生用のフレーム画像データ６５０は、式（２）を満たす、１番目〜８０番目の８０個のフレーム画像データ６５０となる。そして、サーチ再生用のフレーム画像データ６５０の数がＵのとき、Ｖ倍のサーチ再生速度でサーチ再生してサーチ再生用のフレーム画像データ６５０がなくなるまでの時間は、式（４）で求められる。
【００４８】
Ｙ＝Ｕ×Ｔ／Ｖ…（４）
Ｙ：サーチ再生用のフレーム画像データ６５０がなくなるまでの時間［秒］
Ｔ：１個あたりのフレーム画像の撮影時間
【００４９】
すなわち、上述したように、式（４）中のＵ、Ｔ、Ｖは、それぞれ８０、１／１２０、４であるので、Ｙの値は、約１６０ミリ秒となる。
また、新たなフレーム画像データ６５０を蓄積するまでの時間は、式（５）で求められる。
【００５０】
Ｚ＝Ｈ／（３０×Ｐ）…（５）
Ｚ：新たなフレーム画像データ６５０を蓄積するまでの時間［秒］
【００５１】
すなわち、上述したように、式（５）中のＨ、Ｐは、それぞれ８、１であるので、Ｚの値は、約２６０ミリ秒となる。
このため、サーチ再生用のフレーム画像データ６５０がなくなるまでの時間Ｙが、新たなフレーム画像データ６５０を蓄積するまでの時間Ｚよりも短くなるので、４倍のサーチ再生速度でサーチ再生を継続すると、サーチ再生が途切れてしまうと認識する。
【００５２】
そして、再生制御手段５２５は、サーチ速度再設定手段５２４に、サーチ再生速度の再設定処理を実施させて、サーチ速度再設定情報を取得する。そして、例えば、２．５倍以下にする旨のサーチ速度再設定情報を取得すると、４倍のサーチ再生速度でのサーチ再生を終了して、２．５倍以下のサーチ再生速度でのサーチ再生を開始する。例えば、表示順序に従ってフレーム画像データ６５０を８個に１個の割合で取得させ、２倍のサーチ再生速度でのサーチ再生の映像を表示させる。
【００５３】
また、再生制御手段５２５は、例えば巻き戻しのサーチ再生中にスロー再生する旨を認識すると、ビデオメモリ制御機４７０に、この認識時に表示中のフレーム画像データ６５０からスロー再生を開始すると認識する。すなわち、例えば、利用者が従前に再生された場面を再度スロー映像で視聴したいため、巻き戻しサーチ再生をした後にスロー再生する旨の操作をすると、この操作時の場面からスロー再生を開始すると認識する。
そして、再生制御手段５２５は、表示順序通りにフレーム画像データ６５０を表示装置２００へ出力させることにより、スロー再生の映像を再生させる。すなわち、１／１２０秒毎のフレーム画像データ６５０を１秒あたり３０枚の割合で表示装置２００に表示させることにより、通常再生の１／４倍のスロー再生の映像を表示させる制御をする。
【００５４】
〔記録再生システムの動作〕
次に、記録再生システム１００の動作を、図面を参照して説明する。
図７は、通常再生処理を示すフローチャートである。図８は、フレーム画像データの蓄積処理を示すフローチャートである。図９は、サーチ再生処理およびスロー再生処理を示すフローチャートである。
【００５５】
（通常再生処理）
まず、記録再生システム１００の動作として、通常再生処理について説明する。
【００５６】
記録再生装置４００のＣＰＵ５２０は、例えばスピードカメラ３００での撮影映像のストレージ装置４５０への保存処理中に、図７に示すように、利用者の入力操作に基づいて、この保存した映像を通常再生するか否かを判断する（ステップＳ１０１）。このステップＳ１０１において、通常再生しないと判断した場合、例えば所定時間経過後にステップＳ１０１の処理を実施する。
一方、ステップＳ１０１において、通常再生すると判断した場合、フレーム画像データ６５０のビデオメモリ４２０への蓄積処理を実施する（ステップＳ１０２）。
このステップＳ１０２における蓄積処理を実施した後、ビデオメモリ４２０に蓄積されたフレーム画像データ６５０に基づいて、表示装置２００で通常再生の映像を表示させる処理をする（ステップＳ１０３）。
【００５７】
この後、ＣＰＵ５２０は、通常再生を継続するために、フレーム画像データ６５０の蓄積が必要か否かを判断する（ステップＳ１０４）。このステップＳ１０４において、蓄積が必要であると判断した場合、ステップＳ１０２の処理を実施する。
また、ステップＳ１０４において、蓄積が不要であると判断した場合、通常再生を終了するか否かを判断する（ステップＳ１０５）。そして、ステップＳ１０５において、終了しないと判断した場合、ステップＳ１０３の処理を実施する。
一方、ステップＳ１０５において、終了すると判断した場合、通常再生処理を終了する。
【００５８】
また、ステップＳ１０２におけるフレーム画像データ６５０の蓄積処理では、図８に示すように、割り振り手段４６０にて、表示順序が連続する１６個のクローズドＧＯＰ６１０を抽出する（ステップＳ２０１）。さらに、この抽出したクローズドＧＯＰ６１０を、１６個のＭＰＥＧビデオ復号化機４１１にそれぞれ割り振る処理を実施する（ステップＳ２０２）。
この後、ＭＰＥＧビデオ復号化機４１１は、クローズドＧＯＰ６１０の符号化画像データ６２０を復号して（ステップＳ２０３）、フレーム画像データ６５０をビデオメモリ制御機４７０へ出力する。そして、ビデオメモリ制御機４７０は、１６個のＭＰＥＧビデオ復号化機４１１からの１２８個のフレーム画像データ６５０をビデオメモリ４２０に蓄積する（ステップＳ２０４）。
【００５９】
（サーチ再生処理およびスロー再生処理）
次に、記録再生システム１００の動作として、サーチ再生処理およびスロー再生処理について説明する。
【００６０】
記録再生装置４００のＣＰＵ５２０は、例えばハイスピードカメラ３００での撮影映像の通常再生中に、図９に示すように、サーチ再生を開始するか否かを判断する（ステップＳ３０１）。このステップＳ３０１において、サーチ再生しないと判断した場合、例えば所定時間経過後にステップＳ３０１の処理を実施する。
一方、ステップＳ３０１において、サーチ再生すると判断した場合、早送りまたは巻き戻しである旨を認識する処理、すなわちサーチ再生方向を取得する処理をする（ステップＳ３０２）。この後、操作部、つまりジョグスイッチ４９０により指示された速度を取得して（ステップＳ３０３）、サーチ再生用のフレーム画像データ６５０が、式（２）で求められる数Ｕ未満か否かを判断する（ステップＳ３０４）。
【００６１】
このステップＳ３０４において、ＣＰＵ５２０は、数Ｕ未満であると判断した場合、０か否かを判断する（ステップＳ３０５）。そして、０であると判断した場合、ステップＳ３０１に戻る。ここで、このステップＳ３０５において、サーチ再生用のフレーム画像データ６５０が０と判断されるのは、例えば通常再生中であり、早送り方向のフレーム画像データ６５０がビデオメモリ４２０に蓄積されていない場合である。
一方、ステップＳ３０５において、０でないと判断した場合、式（３）に基づいて、サーチ再生速度を再設定する（ステップＳ３０６）。この後、この再設定したサーチ再生速度に変更して（ステップＳ３０７）、サーチ再生を実施する（ステップＳ３０８）。
また、ステップＳ３０４において、数Ｕ以上であると判断した場合も、ステップＳ３０８の処理を実施する。
【００６２】
そして、ＣＰＵ５２０は、ステップＳ３０８の後、ステップＳ１０２の処理を実施する。このステップＳ３０８の後に実施するステップＳ１０２の処理では、サーチ再生により表示されるフレーム画像データ６５０の表示順序が、徐々に略中間となる状態に蓄積する処理をする。
この後、サーチ再生を終了するか否かを判断する（ステップＳ３０９）。このステップＳ３０９において、終了しないと判断した場合、ステップＳ３０２の処理を実施する。
一方、ステップＳ３０９において、終了すると判断した場合、サーチ再生を終了して、スロー再生を開始するか否かを判断する（ステップＳ３１０）。
このステップＳ３１０において、スロー再生しないと判断した場合、例えば所定時間経過後にステップＳ３１０の処理を実施する。
一方、ステップＳ３１０において、スロー再生すると判断した場合、ビデオメモリ４２０に蓄積されたフレーム画像データ６５０に基づいて、スロー再生を開始する（ステップＳ３１１）。
【００６３】
この後、ＣＰＵ５２０は、フレーム画像データ６５０の蓄積が必要か否かを判断する（ステップＳ３１２）。このステップＳ３１２において、蓄積が必要であると判断した場合、ステップＳ１０２の処理を実施する。そして、このステップＳ１０２の処理の後、または、ステップＳ３１２で蓄積が不要であると判断した場合、スロー再生を終了するか否かを判断する（ステップＳ３１３）。
このステップＳ３１３において、終了しないと判断した場合、ステップＳ３１２の処理を実施する。
一方、ステップＳ３１３において、終了すると判断した場合、処理を終了する。
【００６４】
〔記録再生システムの作用効果〕
上述したように、上記実施の形態では、表示装置２００で所定の映像を表示させるための符号化ストリーム６００を、符号化画像データ６２０が表示順序で関連付けられたクローズドＧＯＰ６１０を複数有する構成としている。さらに、符号化画像データ６２０を、別のクローズドＧＯＰ６１０の符号化画像データ６２０を参照せずに復号可能に符号化している。また、記録再生装置４００に、符号化画像データ６２０を復号して、フレーム画像データ６５０を出力するＭＰＥＧビデオ復号化機４１１を、並列的に１６個設けている。
そして、記録再生装置４００は、符号化ストリーム６００から１６個のクローズドＧＯＰ６１０を抽出して、１６個のＭＰＥＧビデオ復号化機４１１に割り振り復号させる。この後、この復号して出力されるフレーム画像データ６５０を、ビデオメモリ４２０に蓄積する。さらに、利用者の入力操作に基づいて、表示順序に従ってフレーム画像データ６５０を４個に１個の割合で取得して、表示装置２００のフレームレートで表示させることにより、通常再生の映像を表示させる。また、表示順序通りにフレーム画像データ６５０を取得して、表示装置２００のフレームレートで表示させることにより、スロー再生の映像を表示させる。
【００６５】
このため、１６個のＭＰＥＧビデオ復号化機４１１で所定の場面のクローズドＧＯＰ６１０を復号するために、隣接するクローズドＧＯＰ６１０を復号する必要がなく、所定場面のクローズドＧＯＰ６１０を復号する際の効率の低下を抑制できる。
ところで、復号部４１０を１倍速の１個のＭＰＥＧビデオ復号化機４１１だけで構成し、符号化ストリーム６００のＭ値（本実施の形態では４）と等しくし、ＩピクチャおよびＰピクチャのみを再生することで、通常再生の撮影映像をリアルタイムに再生することが可能である。しかし、このような場合、ビデオメモリ４２０には、全てのフレーム画像データ６５０が蓄積されていないため、スロー再生開始時には再復号化が必要になり、その際には画像表示が止まってしまい、迅速な再生開始ができない。また、サーチ再生時の精度に関しても、実際の撮影映像のＮ枚に１枚しか表示できないため、サーチ精度が粗くなる。したがって、通常再生中に直前に再生した場面をスロー再生する場合、ＭＰＥＧビデオ復号化機４１１が１個の構成よりも、多くのビデオメモリ４２０に蓄積されたフレーム画像データ６５０を利用してスロー再生することができ、スロー再生に利用するフレーム画像データ６５０を新たに復号して蓄積する必要がなく、迅速にスロー再生を開始できる。
さらに、広く普及している１倍の復号速度のＭＰＥＧビデオ復号化機４１１を複数設けることで、所定時間での復号可能な符号化画像データ６２０の数を多くしているので、例えば１６倍の復号速度のＭＰＥＧビデオ復号化機４１１を新たに設計して製造する必要がない。
したがって、記録再生装置４００は、映像を良好に通常再生およびスロー再生できる。
【００６６】
そして、複数のクローズドＧＯＰ６１０を、互いに等しい数の符号化画像データ６２０が設けられた構成としている。
このため、１６個のＭＰＥＧビデオ復号化機４１１におけるクローズドＧＯＰ６１０を復号完了するタイミングを等しくでき、次に復号するクローズドＧＯＰ６１０を入力するためのタイミング設計を簡易化できる。
【００６７】
また、符号化ストリーム６００を、ＭＰＥＧ規格に基づき符号化されたクローズドＧＯＰ６１０が複数設けられた構成としている。
このため、広く普及しているＭＰＥＧ規格に準じたデータを処理することが可能なため、利用の拡大を容易に図ることができる。
【００６８】
また、フレーム画像データ６５０を、４倍速で撮影可能なハイスピードカメラ３００でのフレーム画像を表示させるためのものとしている。そして、復号部４１０に設けるＭＰＥＧビデオ復号化機４１１の数を、式（１）に基づいて設定している。
ここで、４倍速でのフレーム画像データ６５０を４倍のサーチ再生速度でサーチ再生する場合、１６個に１個の割合で表示させるため、スムーズにサーチ再生する際には、一度に１６個のフレーム画像データ６５０を蓄積する必要がある。
このため、１倍の復号速度のＭＰＥＧビデオ復号化機４１１を、式（１）に基づいて１６個設けているので、一度に１６個のフレーム画像データ６５０を蓄積することができ、スムーズにサーチ再生できる。
【００６９】
さらに、記録再生装置４００は、蓄積されたフレーム画像データ６５０の中で、サーチ再生により表示されるフレーム画像データ６５０の表示順序が、徐々に略中間となる状態に、フレーム画像データ６５０を蓄積している。そして、サーチ再生中に、サーチ再生用のフレーム画像データ６５０の数が、式（２）を満たさないと判断した場合、このサーチ再生速度でのサーチ再生を終了する。
このため、式（２）を満たすか否かを判断することにより、サーチ再生速度を変更せずに継続した場合にサーチ再生が途切れてしまう旨を認識でき、サーチ再生をより適切にできる。また、サーチ再生用のフレーム画像データ６５０がなくなることを事前に認識でき、誤動作などを防止できる。
【００７０】
さらに、記録再生装置４００は、式（２）を満たさないと判断した場合、式（３）に基づいて、サーチ再生速度を再設定して、サーチ再生を継続する。
このため、サーチ再生用のフレーム画像データ６５０がなくなるおそれがある場合でも、サーチ再生速度を自動的に変更することにより、サーチ再生を継続できる。したがって、サーチ再生をさらに適切にできる。
【００７１】
そして、フレーム画像データ６５０を、ハイスピードカメラ３００で撮影されたフレーム画像を表示させるためのものとしている。
このため、利用者の嗜好に応じてハイスピードカメラ３００で撮影された映像、例えばスポーツの映像を良好に通常再生およびスロー再生でき、利用の拡大をより容易に図ることができる。
【００７２】
また、記録再生装置４００は、フレーム画像データを取得して、このフレーム画像データに基づいて符号化ストリーム６００を生成してストレージ装置４５０に保存する。そして、ストレージ装置４５０に保存した符号化ストリーム６００からクローズドＧＯＰ６１０を抽出して、ＭＰＥＧビデオ復号化機４１１に割り振る。
このため、記録再生装置４００に、映像を良好に通常再生およびスロー再生する機能に加え、この通常再生およびスロー再生するための符号化ストリーム６００を生成する機能を設けることができ、記録再生装置４００の利便性を向上できる。
【００７３】
さらに、記録再生装置４００は、ハイスピードカメラ３００と接続可能に構成されている。そして、記録再生装置４００は、ハイスピードカメラ３００からのフレーム画像データに基づいて符号化ストリーム６００を生成して保存する。
このため、ハイスピードカメラ３００で撮影した映像を再生するための符号化ストリーム６００を保存しつつ、同時に映像を通常再生またはスロー再生でき、記録再生装置４００の利便性をさらに向上できる。
【００７４】
〔実施の形態の変形〕
なお、本発明は、上述した実施の形態に限定されるものではなく、本発明の目的を達成できる範囲で以下に示される変形をも含むものである。
【００７５】
すなわち、クローズドＧＯＰ６１０に設ける符号化画像データ６２０の数を、等しくしない構成、あるいは、式（２）を満たさない構成としてもよい。
また、符号化画像データ６２０として、ＭＰＥＧ規格に準拠して符号化したものではなく、他の手法で符号化したものを適用してもよい。
【００７６】
そして、サーチ再生を、表示順序が略中間のフレーム画像データ６５０から開始する制御を実施しない構成としてもよい。
このような構成にすれば、ＣＰＵ５２０の処理負荷を低減できる。
【００７７】
また、ＭＰＥＧビデオ復号化機４１１の数を、式（１）を満たさない数だけ設ける構成としてもよい。
このような構成にすれば、上記実施の形態の構成と比べて、ＭＰＥＧビデオ復号化機４１１の数を減らすことができ、構成を簡略にできる。
なお、例えば２倍の復号速度のＭＰＥＧビデオ復号化機４１１を用いれば、式（１）より、８個配置するだけでよく、上記実施の形態と同一の復号能力を有する状態で、構成を簡略にできる。
【００７８】
さらに、サーチ再生中に、式（２）を満たすか否かを判断する処理、すなわちサーチ再生用のフレーム画像データ６５０がなくなることを事前に認識する処理を実施しない構成としてもよい。
また、式（３）に基づいて、サーチ再生速度を再設定せずに、式（２）を満たさないと判断した場合に、サーチ再生を中断する構成としてもよい。
これらのような構成にすれば、ＣＰＵ５２０の処理負荷をより低減できるとともに、構成を簡略にできる。
【００７９】
そして、符号化ストリーム６００としては、ハイスピードカメラ３００での映像に基づいて生成されたものに限らず、コンピュータグラフィックスで生成されたものを適用してもよい。
さらに、記録再生装置４００に、ビデオＡ／Ｄ変換機４３０およびＭＰＥＧビデオ符号化機４４０を設けない構成としてもよい。
また、ハイスピードカメラ３００に、ビデオＡ／Ｄ変換機４３０およびＭＰＥＧビデオ符号化機４４０を設けてもよい。
【００８０】
上述した各機能をプログラムとして構築したが、例えば回路基板などのハードウェアあるいは１つのＩＣ（Integrated Circuit）などの素子にて構成するなどしてもよく、いずれの形態としても利用できる。なお、プログラムや別途記録媒体から読み取らせる構成とすることにより、取扱が容易で、利用の拡大が容易に図れる。
【００８１】
その他、本発明の実施の際の具体的な構造および手順は、本発明の目的を達成できる範囲で他の構造などに適宜変更できる。
【００８２】
〔実施形態の作用効果〕
上述したように、上記実施の形態では、符号化ストリーム６００を、クローズドＧＯＰ６１０が複数設けられた構成としている。また、記録再生装置４００に、ＭＰＥＧビデオ復号化機４１１を並列的に１６個設けている。
そして、記録再生装置４００は、符号化ストリーム６００から１６個のクローズドＧＯＰ６１０を抽出して、１６個のＭＰＥＧビデオ復号化機４１１に割り振り復号させ、フレーム画像データ６５０をビデオメモリ４２０に蓄積する。さらに、表示順序に従ってフレーム画像データ６５０を４個に１個の割合で表示装置２００に表示させることにより、通常再生の映像を表示させる。また、表示順序通りにフレーム画像データ６５０を表示させることにより、スロー再生の映像を表示させる。
【００８３】
このため、１６個のＭＰＥＧビデオ復号化機４１１で所定の場面のクローズドＧＯＰ６１０を復号するために、別のクローズドＧＯＰ６１０を復号する必要がなく、所定場面のクローズドＧＯＰ６１０を復号する際の効率の低下を抑制できる。
ところで、復号部４１０を１倍速の１個のＭＰＥＧビデオ復号化機４１１だけで構成し、符号化ストリーム６００のＭ値（本実施の形態では４）と等しくし、ＩピクチャおよびＰピクチャのみを再生することで、通常再生の撮影映像をリアルタイムに再生することが可能である。しかし、このような場合、ビデオメモリ４２０には、全てのフレーム画像データ６５０が蓄積されていないため、スロー再生開始時には再復号化が必要になり、その際には画像表示が止まってしまい、迅速な再生開始ができない。また、サーチ再生時の精度に関しても、実際の撮影映像のＮ枚に１枚しか表示できないため、サーチ精度が粗くなる。したがって、通常再生中に直前に再生した場面をスロー再生する場合、ＭＰＥＧビデオ復号化機４１１が１個の構成よりも、多くのビデオメモリ４２０に蓄積されたフレーム画像データ６５０を利用してスロー再生することができ、スロー再生に利用するフレーム画像データ６５０を新たに復号して蓄積する必要がなく、迅速にスロー再生を開始できる。
さらに、広く普及している１倍の復号速度のＭＰＥＧビデオ復号化機４１１を複数設けることで、所定時間での復号可能な符号化画像データ６２０の数を多くしているので、例えば１６倍の復号速度のＭＰＥＧビデオ復号化機４１１を新たに設計して製造する必要がない。
したがって、記録再生装置４００は、映像を良好に通常再生およびスロー再生できる。
【００８４】
また、記録再生装置４００は、フレーム画像データを取得して、このフレーム画像データに基づいて符号化ストリーム６００を生成してストレージ装置４５０に保存する。そして、ストレージ装置４５０に保存した符号化ストリーム６００からクローズドＧＯＰ６１０を抽出して、ＭＰＥＧビデオ復号化機４１１に割り振る。
このため、記録再生装置４００に、映像を良好に通常再生およびスロー再生する機能に加え、この通常再生およびスロー再生するための符号化ストリーム６００を生成する機能を設けることができ、記録再生装置４００の利便性を向上できる。
【００８５】
さらに、記録再生装置４００は、ハイスピードカメラ３００と接続可能に構成されている。そして、記録再生装置４００は、ハイスピードカメラ３００からのフレーム画像データに基づいて符号化ストリーム６００を生成して保存する。
このため、ハイスピードカメラ３００で撮影した映像を再生するための符号化ストリーム６００を保存しつつ、同時に映像を通常再生またはスロー再生でき、記録再生装置４００の利便性をさらに向上できる。
【図面の簡単な説明】
【００８６】
【図１】本発明の一実施の形態に係る記録再生システムの概略構成を示すブロック図である。
【図２】前記一実施の形態における符号化ストリームの概略構成を示す模式図である。
【図３】前記一実施の形態におけるクローズドＧＯＰの割り振り状態を示す概念図である。
【図４】前記一実施の形態におけるＣＰＵの概略構成を示すブロック図である。
【図５】前記一実施の形態におけるサーチ再生時にビデオメモリに蓄積されたフレーム画像データの概略構成を示す概念図である。
【図６】前記一実施の形態におけるサーチ再生速度再設定時にビデオメモリに蓄積されたフレーム画像データの概略構成を示す概念図である。
【図７】前記一実施の形態における通常再生処理を示すフローチャートである。
【図８】前記一実施の形態におけるフレーム画像データの蓄積処理を示すフローチャートである。
【図９】前記一実施の形態におけるサーチ再生処理およびスロー再生処理を示すフローチャートである。
【符号の説明】
【００８７】
２００…表示装置
３００…撮影装置としてのハイスピードカメラ
４００…データ処理装置としての記録再生装置
４１１…再生制御装置を構成する復号手段としてのＭＰＥＧビデオ復号化機
４２０…フレーム画像記憶手段としてのビデオメモリ
４４０…映像データ生成手段としてのＭＰＥＧビデオ符号化機
４５１…映像データ記憶手段としてのＨＤ
４５２…映像記憶処理手段としてのストリーム保存処理手段
４６０…再生制御装置を構成する抽出手段としても機能する割り振り手段
４７０…再生制御装置を構成するフレーム画像記憶処理手段としても機能するビデオメモリ制御機
５２３…再生制御装置を構成する残存数判断手段
５２４…再生制御装置を構成する再生速度再設定手段としてのサーチ速度再設定手段
５２５…再生制御装置を構成する再生制御手段
６００…映像データとしての符号化ストリーム
６１０…フレームグループとしてのクローズドＧＯＰ
６２０…符号化画像データ
６５０…フレーム画像データ
【図１】
2007221563.tif 000003
【図２】
2007221563.tif 000004
【図３】
2007221563.tif 000005
【図４】
2007221563.tif 000006
【図５】
2007221563.tif 000007
【図６】
2007221563.tif 000008
【図７】
2007221563.tif 000009
【図８】
2007221563.tif 000010
【図９】
2007221563.tif 000011