(57)【特許請求の範囲】
【請求項１】
動画像を記録媒体に記録し、前記記録媒体から前記動画像を再生する記録再生装置において、
第１の動画像から動きに関する動きパラメータを取得する第１の取得手段と、
前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換する変換手段と、
前記第２の動画像から動きパラメータを取得する第２の取得手段と、
前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出する予測手段と、
加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得する差分情報取得手段と、
前記差分情報と前記第２の動画像とを前記記録媒体に記録する記録制御手段と、
前記記録媒体から、前記差分情報と前記第２の動画像とを読み出す読み出し制御手段と、
前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元する復元手段と、
前記復元手段により復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行う画像処理手段と
を備える記録再生装置。
【請求項２】
前記第１の取得手段で取得される動きパラメータは、動きベクトル、輝度若しくは色信号の変化の程度を表すレベル変化、拡大若しくは縮小の程度を表すズーム率、回転の程度を表す回転率、周波数帯域の変化の程度を表す周波数帯域変化、またはフォーカスの変化の程度を表すフォーカス変化のうちの１以上のパラメータを含む
請求項１に記載の記録再生装置。
【請求項３】
前記復元手段は、
前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータから、前記第１の動画像における複数の動きパラメータのうち、前記第１の動きパラメータを除外した残りの動きパラメータの予測値を算出し、算出した前記予測値と、前記記録媒体から読み出される前記差分情報とに基づいて、前記第１の動画像における複数の動きパラメータのうち、前記第１の動きパラメータを除外した残りの動きパラメータを復元するとともに、
前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記第２の動画像の動きパラメータから、前記第１の動画像における複数の動きパラメータのうち、前記第１の動きパラメータを除外した残りの動きパラメータを減算することにより、前記第１の動きパラメータを復元する
請求項１に記載の記録再生装置。
【請求項４】
前記画像処理手段は、前記画像処理として、フレーム補間、アップコンバート、Y/C分離、ノイズリダクション、オブジェクト抽出、またはI/P（Interlace/Progressive）変換のうちの１以上を行う
請求項１に記載の記録再生装置。
【請求項５】
前記予測手段は、前記第２の動画像の動きパラメータと、所定の値とを乗算することにより、前記第１の動画像の動きパラメータの予測値を算出する
請求項１に記載の記録再生装置。
【請求項６】
前記差分情報取得手段は、さらに、前記第１の動画像の動きパラメータのうち、前記画像処理手段の画像処理で用いられる動きパラメータのみについて、前記差分情報を取得する
請求項１に記載の記録再生装置。
【請求項７】
前記第２の取得手段により取得した動きパラメータを用いて前記第２の動画像を圧縮データに圧縮する圧縮手段と、
前記圧縮データを、前記第２の動画像に解凍する解凍手段と
をさらに備え、
前記記録制御手段は、前記第２の動画像の前記圧縮データと前記差分情報とを前記記録媒体に記録し、
前記読み出し制御手段は、前記記録媒体から前記圧縮データと前記差分情報とを読み出す
請求項１に記載の記録再生装置。
【請求項８】
動画像を記録媒体に記録し、前記記録媒体から前記動画像を再生する記録再生装置の記録再生方法において、
第１の動画像から動きに関する動きパラメータを取得し、
前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換し、
前記第２の動画像から動きパラメータを取得し、
前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出し、
加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得し、
前記差分情報と前記第２の動画像とを前記記録媒体に記録し、
前記記録媒体から、前記差分情報と前記第２の動画像とを読み出し、
前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元し、
復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行う
ステップを含む記録再生方法。
【請求項９】
動画像を記録媒体に記録し、前記記録媒体から前記動画像を再生する記録再生処理をコンピュータに実行させるプログラムにおいて、
第１の動画像から動きに関する動きパラメータを取得し、
前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換し、
前記第２の動画像から動きパラメータを取得し、
前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出し、
加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得し、
前記差分情報と前記第２の動画像とを前記記録媒体に記録し、
前記記録媒体から、前記差分情報と前記第２の動画像とを読み出し、
前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することをに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元し、
復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行う
ステップを含む記録再生処理をコンピュータに実行させるプログラム。
【請求項１０】
動画像を記録媒体に記録する記録装置において、
第１の動画像から動きに関する動きパラメータを取得する第１の取得手段と、
前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換する変換手段と、
前記第２の動画像から動きパラメータを取得する第２の取得手段と、
前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出する予測手段と、
加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得する差分情報取得手段と、
前記差分情報と前記第２の動画像とを前記記録媒体に記録する記録制御手段と
を備える記録装置。
【請求項１１】
前記記録媒体に記録された前記差分情報と前記第２の動画像とを、画像を再生する他の装置に送信する送信制御手段をさらに備える
請求項１０に記載の記録装置。
【請求項１２】
前記第１の取得手段で取得される動きパラメータは、動きベクトル、輝度若しくは色信号の変化の程度を表すレベル変化、拡大若しくは縮小の程度を表すズーム率、回転の程度を表す回転率、周波数帯域の変化の程度を表す周波数帯域変化、またはフォーカスの変化の程度を表すフォーカス変化のうちの１以上のパラメータを含む
請求項１０に記載の記録装置。
【請求項１３】
前記予測手段は、前記第２の動画像の動きパラメータと、所定の値とを乗算することにより、前記第１の動画像の動きパラメータの予測値を算出する
請求項１０に記載の記録装置。
【請求項１４】
画像を再生する再生装置において、画像処理を行う画像処理手段が、前記記録媒体から読み出された前記第２の動画像の画像処理を行う場合に、
前記差分情報取得手段は、前記第１の動画像の動きパラメータのうち、前記画像処理手段の画像処理で用いられる動きパラメータのみについて、前記差分情報を取得する
請求項１０に記載の記録装置。
【請求項１５】
前記第２の取得手段により取得した動きパラメータを用いて前記第２の動画像を圧縮データに圧縮する圧縮手段をさらに備え、
前記記録制御手段は、前記第２の動画像の前記圧縮データと前記差分情報とを前記記録媒体に記録する
請求項１０に記載の記録装置。
【請求項１６】
動画像を記録媒体に記録する記録装置の記録方法において、
第１の動画像から動きに関する動きパラメータを取得し、
前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換し、
前記第２の動画像から動きパラメータを取得し、
前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出し、
加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得し、
前記差分情報と前記第２の動画像とを前記記録媒体に記録する
ステップを含む記録方法。
【請求項１７】
動画像を記録媒体に記録する記録処理をコンピュータに実行させるプログラムおいて、
第１の動画像から動きに関する動きパラメータを取得し、
前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換し、
前記第２の動画像から動きパラメータを取得し、
前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出し、
加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得し、
前記差分情報と前記第２の動画像とを前記記録媒体に記録する
ステップを含む記録処理をコンピュータに実行させるプログラム。
【請求項１８】
動画像を再生する再生装置において、
第１の動画像のフレームを間引くことにより前記第１の動画像のデータ量を少なくして得られた第２の動画像と、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと前記第１の動画像の動きパラメータの予測値との差分に関する差分情報とが記録されている記録媒体から、前記差分情報と前記第２の動画像とを読み出す読み出し制御手段と、
前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元する復元手段と、
前記復元手段により復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行う画像処理手段と
を備える再生装置。
【請求項１９】
前記復元手段は、
前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータから、前記第１の動画像における複数の動きパラメータのうち、前記第１の動きパラメータを除外した残りの動きパラメータの予測値を算出し、算出した前記予測値と、前記記録媒体から読み出される前記差分情報とに基づいて、前記第１の動画像における複数の動きパラメータのうち、前記第１の動きパラメータを除外した残りの動きパラメータを復元するとともに、
前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記第２の動画像の動きパラメータから、前記第１の動画像における複数の動きパラメータのうち、前記第１の動きパラメータを除外した残りの動きパラメータを減算することにより、前記第１の動きパラメータを復元する
請求項１８に記載の再生装置。
【請求項２０】
他の装置から送信されてくる前記差分情報と前記第２の動画像とを受信する受信制御手段をさらに備え、
前記記録媒体には、前記受信制御手段で受信された前記差分情報と前記第２の動画像とが記録される
請求項１８に記載の再生装置。
【請求項２１】
前記画像処理手段は、前記画像処理として、フレーム補間、アップコンバート、Y/C分離、ノイズリダクション、オブジェクト抽出、またはI/P(Interlace/Progressive)変換のうちの１以上を行う
請求項１８に記載の再生装置。
【請求項２２】
前記記録媒体には、前記第２の動画像の動きパラメータを用いて前記第２の動画像を圧縮することにより得られた前記第２の動画像の圧縮データが記録されており、
前記圧縮データを前記第２の動画像に解凍する解凍手段をさらに備える
請求項１８に記載の再生装置。
【請求項２３】
動画像を再生する再生装置の再生方法において、
第１の動画像のフレームを間引くことにより前記第１の動画像のデータ量を少なくして得られた第２の動画像と、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと前記第１の動画像の動きパラメータの予測値との差分に関する差分情報とが記録されている記録媒体から、前記差分情報と前記第２の動画像とを読み出し、
前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元し、
復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行う
ステップを含む再生方法。
【請求項２４】
動画像を再生する再生処理をコンピュータに実行させるプログラムおいて、
第１の動画像のフレームを間引くことにより前記第１の動画像のデータ量を少なくして得られた第２の動画像と、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと前記第１の動画像の動きパラメータの予測値との差分に関する差分情報とが記録されている記録媒体から、前記差分情報と前記第２の動画像とを読み出し、
前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元し、
復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行う
ステップを含む再生処理をコンピュータに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、記録再生装置および記録再生方法、記録装置および記録方法、再生装置および再生方法、並びにプログラムに関し、特に、例えば、あらかじめ高精度の動きパラメータを取得し、様々な画像処理で用いることができるようにした記録再生装置および記録再生方法、記録装置および記録方法、再生装置および再生方法、並びにプログラムに関する。
【背景技術】
【０００２】
例えば、画像を記録し、記録した画像を再生するハードディスクレコーダ等の記録再生装置によれば、記録する画像に対して、ハードディスクの記録容量を節約するための処理が行われることがある。
【０００３】
即ち、例えば、記録する画像のフレームを間引いたり、各フレームの画素を間引くことにより、画像のデータ量を少なくする処理が行われることがある。そして、その画像を再生する際には、データ量の少ない画像から、動きベクトル等の画像の動きに関する動きパラメータが取得され、ノイズリダクション等の画像処理に用いられる。
【０００４】
なお、画像の動きパラメータの１つである動きベクトルを取得する方法については、例えば、特許文献１に記載されている。
【特許文献１】特開平８−１４９４８０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところで、データ量の少ない画像から動きパラメータを取得すると、データ量の多い画像から動きパラメータを取得する場合に比べて、動きパラメータの精度は低くなり、その後の画像処理で、適切な処理が行われなくなることが生じ得る。
【０００６】
本発明は、このような状況に鑑みてなされたものであり、高精度の動きパラメータを画像処理に用いることができるようにするものである。
【課題を解決するための手段】
【０００７】
本発明の第１の側面の記録再生装置は、動画像を記録媒体に記録し、前記記録媒体から前記動画像を再生する記録再生装置において、第１の動画像から動きに関する動きパラメータを取得する第１の取得手段と、前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換する変換手段と、前記第２の動画像から動きパラメータを取得する第２の取得手段と、前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出する予測手段と、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得する差分情報取得手段と、前記差分情報と前記第２の動画像とを前記記録媒体に記録する記録制御手段と、前記記録媒体から、前記差分情報と前記第２の動画像とを読み出す読み出し制御手段と、前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元する復元手段と、前記復元手段により復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行う画像処理手段とを備える記録再生装置である。
【０００８】
前記第１の取得手段で取得される動きパラメータには、動きベクトル、輝度若しくは色信号の変化の程度を表すレベル変化、拡大若しくは縮小の程度を表すズーム率、回転の程度を表す回転率、周波数帯域の変化の程度を表す周波数帯域変化、またはフォーカスの変化の程度を表すフォーカス変化のうちの１以上のパラメータを含めることができる。
【０００９】
前記復元手段は、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータから、前記第１の動画像における複数の動きパラメータのうち、前記第１の動きパラメータを除外した残りの動きパラメータの予測値を算出し、算出した前記予測値と、前記記録媒体から読み出される前記差分情報とに基づいて、前記第１の動画像における複数の動きパラメータのうち、前記第１の動きパラメータを除外した残りの動きパラメータを復元するとともに、前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記第２の動画像の動きパラメータから、前記第１の動画像における複数の動きパラメータのうち、前記第１の動きパラメータを除外した残りの動きパラメータを減算することにより、前記第１の動きパラメータを復元することができる。
【００１０】
前記画像処理手段は、前記画像処理として、フレーム補間、アップコンバート、Y/C分離、ノイズリダクション、オブジェクト抽出、またはI/P(Interlace/Progressive)変換のうちの１以上を行うことができる。
【００１１】
前記予測手段は、前記第２の動画像の動きパラメータと、所定の値とを乗算することにより、前記第１の動画像の動きパラメータの予測値を算出することができる。
【００１２】
前記差分情報取得手段は、さらに、前記第１の動画像の動きパラメータのうち、前記画像処理手段の画像処理で用いられる動きパラメータのみについて、前記差分情報を取得することができる。
【００１３】
第１の側面の記録再生装置は、前記第２の取得手段により取得した動きパラメータを用いて前記第２の動画像を圧縮データに圧縮する圧縮手段と、前記圧縮データを、前記第２の動画像に解凍する解凍手段とをさらに設けることができ、前記記録制御手段には、前記第２の動画像の前記圧縮データと前記差分情報とを前記記録媒体に記録させ、前記読み出し制御手段には、前記記録媒体から前記圧縮データと前記差分情報とを読み出させることができる。
【００１５】
本発明の第１の側面の記録再生方法、またはプログラムは、動画像を記録媒体に記録し、前記記録媒体から前記動画像を再生する記録再生装置の記録再生方法、または動画像を記録媒体に記録し、前記記録媒体から前記動画像を再生する記録再生処理をコンピュータに実行させるプログラムであって、第１の動画像から動きに関する動きパラメータを取得し、前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換し、前記第２の動画像から動きパラメータを取得し、前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出し、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得し、前記差分情報と前記第２の動画像とを前記記録媒体に記録し、前記記録媒体から、前記差分情報と前記第２の動画像とを読み出し、前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元し、復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行うステップを含む記録再生方法、または記録再生処理をコンピュータに実行させるプログラムである。
【００１６】
以上のような第１の側面の記録再生装置、記録再生方法、またはプログラムにおいては、前記第１の動画像から動きに関する動きパラメータを取得し、前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換し、前記第２の動画像から動きパラメータを取得し、前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出し、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得し、前記差分情報と前記第２の動画像とを前記記録媒体に記録する。そして、前記記録媒体から、前記差分情報と前記第２の動画像とを読み出し、前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元し、復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行う。
【００１７】
本発明の第２の側面の記録装置は、動画像を記録媒体に記録する記録装置であって、第１の動画像から動きに関する動きパラメータを取得する第１の取得手段と、前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換する変換手段と、前記第２の動画像から動きパラメータを取得する第２の取得手段と、前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出する予測手段と、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得する差分情報取得手段と、前記差分情報と前記第２の動画像とを前記記録媒体に記録する記録制御手段とを備える記録装置である。
【００１８】
第２の側面の記録装置には、前記記録媒体に記録された前記差分情報と前記第２の動画像とを、画像を再生する他の装置に送信する送信制御手段をさらに設けることができる。
【００１９】
前記第１の取得手段で取得される動きパラメータには、動きベクトル、輝度若しくは色信号の変化の程度を表すレベル変化、拡大若しくは縮小の程度を表すズーム率、回転の程度を表す回転率、周波数帯域の変化の程度を表す周波数帯域変化、またはフォーカスの変化の程度を表すフォーカス変化のうちの１以上のパラメータを含めることができる。
【００２０】
前記予測手段は、前記第２の動画像の動きパラメータと、所定の値とを乗算することにより、前記第１の動画像の動きパラメータの予測値を算出することができる。
【００２２】
画像を再生する再生装置において、画像処理を行う画像処理手段が、前記記録媒体から読み出された前記第２の動画像の画像処理を行う場合に、前記差分情報取得手段は、前記第１の動画像の動きパラメータのうち、前記画像処理手段の画像処理で用いられる動きパラメータのみについて、前記差分情報を取得することができる。
【００２３】
第２の側面の記録装置には、前記第２の取得手段により取得した動きパラメータを用いて前記第２の動画像を圧縮データに圧縮する圧縮手段をさらに設けることができ、前記記録制御手段には、前記第２の動画像の前記圧縮データと前記差分情報とを前記記録媒体に記録させることができる。
【００２５】
本発明の第２の側面の記録方法、またはプログラムは、動画像を記録媒体に記録する記録装置の記録方法、または動画像を記録媒体に記録する記録処理をコンピュータに実行させるプログラムであって、第１の動画像から動きに関する動きパラメータを取得し、前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換し、前記第２の動画像から動きパラメータを取得し、前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出し、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得し、前記差分情報と前記第２の動画像とを前記記録媒体に記録するステップを含む記録方法、または記録処理をコンピュータに実行させるプログラムである。
【００２６】
以上のような第２の側面の記録装置、記録方法、またはプログラムにおいては、前記第１の動画像から動きに関する動きパラメータを取得し、前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換する。また、前記第２の動画像から動きパラメータを取得し、前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出し、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得する。そして、前記差分情報と前記第２の動画像とを前記記録媒体に記録する。
【００２７】
本発明の第３の側面の再生装置は、動画像を再生する再生装置であって、第１の動画像のフレームを間引くことにより前記第１の動画像のデータ量を少なくして得られた第２の動画像と、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと前記第１の動画像の動きパラメータの予測値との差分に関する差分情報とが記録されている記録媒体から、前記差分情報と前記第２の動画像とを読み出す読み出し制御手段と、前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元する復元手段と、前記復元手段により復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行う画像処理手段とを備える再生装置である。
【００２８】
前記復元手段は、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータから、前記第１の動画像における複数の動きパラメータのうち、前記第１の動きパラメータを除外した残りの動きパラメータの予測値を算出し、算出した前記予測値と、前記記録媒体から読み出される前記差分情報とに基づいて、前記第１の動画像における複数の動きパラメータのうち、前記第１の動きパラメータを除外した残りの動きパラメータを復元するとともに、前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記第２の動画像の動きパラメータから、前記第１の動画像における複数の動きパラメータのうち、前記第１の動きパラメータを除外した残りの動きパラメータを減算することにより、前記第１の動きパラメータを復元することができる。
第３の側面の再生装置には、他の装置から送信されてくる前記差分情報と前記第２の動画像とを受信する受信制御手段をさらに設けることができ、前記記録媒体には、前記受信制御手段で受信された前記差分情報と前記第２の動画像とを記録させることができる。
【００２９】
前記画像処理手段は、前記画像処理として、フレーム補間、アップコンバート、Y/C分離、ノイズリダクション、オブジェクト抽出、またはI/P(Interlace/Progressive)変換のうちの１以上を行うことができる。
【００３１】
前記記録媒体に、前記第２の動画像の動きパラメータを用いて前記第２の動画像を圧縮することにより得られた前記第２の動画像の圧縮データが記録されている場合、前記圧縮データを前記第２の動画像に解凍する解凍手段がさらに設けられる。
【００３３】
本発明の第３の側面の再生方法、またはプログラムは、動画像を再生する再生装置の再生方法、または動画像を再生する再生処理をコンピュータに実行させるプログラムであって、第１の動画像のフレームを間引くことにより前記第１の動画像のデータ量を少なくして得られた第２の動画像と、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと前記第１の動画像の動きパラメータの予測値との差分に関する差分情報とが記録されている記録媒体から、前記差分情報と前記第２の動画像とを読み出し、前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元し、復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行うステップを含む再生方法、または再生処理をコンピュータに実行させるプログラムである。
【００３４】
以上のような第３の側面の再生装置、再生方法、またはプログラムにおいては、第１の動画像のフレームを間引くことにより前記第１の動画像のデータ量を少なくして得られた第２の動画像と、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと前記第１の動画像の動きパラメータの予測値との差分に関する差分情報とが記録されている記録媒体から、前記差分情報と前記第２の動画像とを読み出す。そして、前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元し、復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行う。
【発明の効果】
【００３５】
本発明によれば、精度の高い動きパラメータを画像処理に用いることができる。
【発明を実施するための最良の形態】
【００３６】
以下に本発明の実施の形態を説明するが、本発明の構成要件と、明細書又は図面に記載の実施の形態との対応関係を例示すると、次のようになる。この記載は、本発明をサポートする実施の形態が、明細書又は図面に記載されていることを確認するためのものである。従って、明細書又は図面中には記載されているが、本発明の構成要件に対応する実施の形態として、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その構成要件に対応するものではないことを意味するものではない。逆に、実施の形態が構成要件に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その構成要件以外の構成要件には対応しないものであることを意味するものでもない。
【００３７】
本発明の第１の側面の記録再生装置(例えば、図１の記録再生装置１１)は、動画像を記録媒体(例えば、図１のHDD１４)に記録し、前記記録媒体から前記動画像を再生する記録再生装置において、第１の動画像から動きに関する動きパラメータを取得する第１の取得手段(例えば、図６のMP１取得部２２)と、前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換する変換手段（例えば、図６のフレーム間引き部５２）と、前記第２の動画像から動きパラメータを取得する第２の取得手段と、前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出する予測手段（例えば、図６のMPd差分情報取得部５４）と、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得する差分情報取得手段（例えば、図６のMPd差分情報取得部５４）と、前記差分情報と前記第２の動画像とを前記記録媒体に記録する記録制御手段(例えば、図６の入出力インタフェース２１)と、前記記録媒体から、前記差分情報と前記第２の動画像とを読み出す読み出し制御手段(例えば、図１１の入出力インタフェース４１)と、前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元する復元手段（例えば、図１１のMP1復元部８４）と、前記復元手段により復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行う画像処理手段(例えば、図１１の画像処理部４３)とを備える記録再生装置である。
【００３９】
本発明の第１の側面の記録再生装置は、前記第２の取得手段により取得した動きパラメータを用いて前記第２の動画像を圧縮データに圧縮する圧縮手段(例えば、図６の圧縮部５５)と、前記圧縮データを、前記第２の動画像に解凍する解凍手段(例えば、図１１の解凍部８３)とをさらに備え、前記記録制御手段は、前記第２の動画像の前記圧縮データと前記差分情報とを前記記録媒体に記録し、前記読み出し制御手段は、前記記録媒体から前記圧縮データと前記差分情報とを読み出すことができる。
【００４１】
本発明の第１の側面の記録再生方法、またはプログラムは、動画像を記録媒体に記録し、前記記録媒体から前記動画像を再生する記録再生装置の記録再生方法、または動画像を記録媒体に記録し、前記記録媒体から前記動画像を再生する記録再生処理をコンピュータに実行させるプログラムにおいて、第１の動画像から動きに関する動きパラメータを取得し(例えば、図１０のステップS３１)、前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換し(例えば、図１０のステップS３２)、前記第２の動画像から動きパラメータを取得し（例えば、図１０のステップS３３）、前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出し（例えば、図１０のステップS３４）、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得し（例えば、図１０のステップS３４）、前記差分情報と前記第２の動画像とを前記記録媒体に記録し(例えば、図１０のステップS３７)、前記記録媒体から、前記差分情報と前記第２の動画像とを読み出し(例えば、図１２のステップS４１)、前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元し（例えば、図１２のステップS４４）、復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行う(例えば、図１２のステップS４５)ステップを含む記録再生方法、または記録再生処理をコンピュータに実行させるプログラムである。
【００４２】
本発明の第２の側面の記録装置(例えば、図１８の記録装置１４１)は、動画像を記録媒体(例えば、図１８のHDD１４４)に記録する記録装置であって、第１の動画像から動きに関する動きパラメータを取得する第１の取得手段(例えば、図６のMP１取得部２２)と、前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換する変換手段(例えば、図６のフレーム間引き部５２)と、前記第２の動画像から動きパラメータを取得する第２の取得手段（例えば、図６のMP2取得部５３）と、前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出する予測手段（例えば、図６のMPd差分情報取得部５４）と、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得する差分情報取得手段（例えば、図６のMPd差分情報取得部５４）と、前記差分情報と前記第２の動画像とを前記記録媒体に記録する記録制御手段(例えば、図６の入出力インタフェース２１)とを備える記録装置である。
【００４３】
本発明の第２の側面の記録装置は、前記記録媒体に記録された前記差分情報と前記第２の動画像とを、画像を再生する他の装置(例えば、図１８の再生装置１５１)に送信する送信制御手段(例えば、図１８の送信制御部１４５)をさらに備えることができる。
【００４５】
本発明の第２の側面の記録装置は、前記第２の取得手段により取得した動きパラメータを用いて前記第２の動画像を圧縮データに圧縮する圧縮手段(例えば、図６の圧縮部５５)をさらに備え、前記記録制御手段は、前記第２の動画像の前記圧縮データと前記差分情報とを前記記録媒体に記録することができる。
【００４７】
本発明の第２の側面の記録方法、またはプログラムは、動画像を記録媒体に記録する記録装置の記録方法、または動画像を記録媒体に記録する記録処理をコンピュータに実行させるプログラムであって、第１の動画像から動きに関する動きパラメータを取得し(例えば、図１０のステップS３１)、前記第１の動画像のフレームを間引くことにより、前記第１の動画像を、前記第１の動画像よりデータ量の少ない第２の動画像に変換し(例えば、図１０のステップS３２)、前記第２の動画像から動きパラメータを取得し（例えば、図１０のステップS３３）、前記第２の動画像の動きパラメータから、前記第１の動画像の動きパラメータの予測値を算出し（例えば、図１０のステップS３４）、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと、前記第１の動画像の動きパラメータの予測値との差分に関する差分情報を取得し（例えば、図１０のステップS３４）、前記差分情報と前記第２の動画像とを前記記録媒体に記録する(例えば、図１０のステップS３７)ステップを含む記録方法、または記録処理をコンピュータに実行させるプログラムである。
【００４８】
本発明の第３の側面の再生装置(例えば、図１８の再生装置１５１)は、動画像を再生する再生装置であって、第１の動画像のフレームを間引くことにより前記第１の動画像のデータ量を少なくして得られた第２の動画像と、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと前記第１の動画像の動きパラメータの予測値との差分に関する差分情報とが記録されている記録媒体(例えば、図１８のHDD１５３)から、前記差分情報と前記第２の動画像とを読み出す読み出し制御手段(例えば、図１１の入出力インタフェース４１)と、前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元する復元手段（例えば、図１１のMP1復元部８４）と、前記復元手段により復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行う画像処理手段(例えば、図１１の画像処理部４３)とを備える再生装置である。
【００４９】
本発明の第３の側面の再生装置は、他の装置(例えば、図１８の記録装置１４１)から送信されてくる前記差分情報と前記第２の動画像とを受信する受信制御手段(例えば、図１８の受信制御部１５２)をさらに備え、前記記録媒体には、前記受信制御手段で受信された前記差分情報と前記第２の動画像とを記録させることができる。
【００５１】
前記記録媒体には、前記第２の動画像の動きパラメータを用いて前記第２の動画像を圧縮することにより得られた前記第２の動画像の圧縮データが記録されており、前記圧縮データを前記第２の動画像に解凍する解凍手段(例えば、図１１の解凍部８３)をさらに備えることができる。
【００５３】
本発明の第３の側面の再生方法、またはプログラムは、動画像を再生する再生装置の再生方法、または動画像を再生する再生処理をコンピュータに実行させるプログラムであって、第１の動画像のフレームを間引くことにより前記第１の動画像のデータ量を少なくして得られた第２の動画像と、加算結果が前記第２の動画像の動きパラメータと一致する、前記第１の動画像における複数の動きパラメータのうち、いずれか１つを第１の動きパラメータに決定し、決定した前記第１の動きパラメータを除外した残りの動きパラメータのみについて、前記第１の動画像の動きパラメータと前記第１の動画像の動きパラメータの予測値との差分に関する差分情報とが記録されている記録媒体から、前記差分情報と前記第２の動画像とを読み出し(例えば、図１２のステップS４１)、前記第１の動画像における複数の動きパラメータそれぞれを加算した加算結果が、前記第２の動画像の動きパラメータに一致することに基づき、前記記録媒体から読み出される前記差分情報と、前記記録媒体から読み出される前記第２の動画像から得られる前記第２の動画像の動きパラメータとから、前記第１の動画像における複数の動きパラメータを復元し（例えば、図１２のステップS４４）、復元された前記第１の動画像の動きパラメータを用いて、前記記録媒体から読み出された前記第２の動画像の画像処理を行う(例えば、図１２のステップS４５)ステップを含む再生方法、または再生処理をコンピュータに実行させるプログラムである。
【００５４】
次に、図面を参照して、本発明の実施の形態について説明する。
【００５５】
図１は、本発明を適用した記録再生システムの一実施の形態の構成例を示すブロック図である。
【００５６】
記録再生システムは、記録再生装置１１、HDTV(High Definition TeleVision)カメラ１２、およびモニタ１６から構成され、記録再生装置１１は、記録制御部１３、HDD(Hard Disk Drive)１４、および再生制御部１５により構成される。なお、記録再生装置１１は、ハードディスクレコーダや、いわゆるホームネットワークに接続されるファイルサーバ等に適用することができる。
【００５７】
HDTVカメラ１２は、HDTV信号によるHD(高解像度)画像を撮像し、記録制御部１３に供給する。
【００５８】
記録制御部１３は、HDTVカメラ１２から供給されるHD画像を、HDD１４に供給して記録させる。また、記録制御部１３は、HDD１４に記録されたHD画像を読み出して、HD画像の動きに関する動きパラメータを取得する処理をし、さらに、HD画像を、HD画像よりデータ量の少ない画像に変換する。そして、記録制御部１３は、データ量の少ない画像と動きパラメータに関する動きパラメータ情報とをHDD１４に供給して記録させる。
【００５９】
ここで、動きパラメータとしては、例えば、動きベクトル、輝度若しくは色信号の変化の程度を表すレベル変化、拡大若しくは縮小の程度を表すズーム率、回転の程度を表す回転率、周波数帯域の変化の程度を表す周波数帯域変化、またはフォーカスの変化の程度を表すフォーカス変化のうちの１以上のパラメータを採用することができる。
【００６０】
なお、記録制御部１３は、HDTVカメラ１２から供給されるHD画像を一旦HDD１４に記録せずに、HDTVカメラ１２から供給されるHD画像から、直接、動きパラメータ情報を取得する処理をし、その後、HDTVカメラ１２からのＨＤ画像を、そのＨＤ画像よりデータ量の少ない画像に変換して、データ量の少ない画像と動きパラメータ情報とをHDD１４に記録してもよい。
【００６１】
HDD１４は、内蔵するハードディスクに、記録制御部１３から供給されるデータ量の少ない画像と動きパラメータ情報とを記録する。なお、データ量の少ない画像と動きパラメータ情報とを記録する記録媒体としては、ハードディスク以外のディスク状記録媒体や、半導体メモリ等を採用することができる。
【００６２】
再生制御部１５は、HDD１４からデータ量の少ない画像と動きパラメータ情報とを読み出し、動きパラメータ情報から得られる動きパラメータを用いて、データ量の少ない画像に画像処理を施す。さらに、再生制御部１５は、画像処理を行うことによって得られた画像をモニタ１６に供給する。
【００６３】
ここで、動きパラメータ情報から得られる１つ、または複数の動きパラメータは、１の画像処理のみで用いることもできるし、複数の画像処理で共用することもできる。例えば、動きパラメータ情報から得られる動きパラメータである動きベクトルや輝度の変化の程度を表す輝度変化等は、ノイズリダクションやアップコンバート等の画像処理に共用することができる。
【００６４】
また、動きパラメータを用いて行う画像処理としては、例えば、フレーム補間、アップコンバート、Y/C分離、ノイズリダクション、オブジェクト抽出、I/P(Interlace/Progressive)変換等がある。
【００６５】
モニタ１６は、再生制御部１５から供給される画像を表示する。
【００６６】
図２は、図１の記録制御部１３の構成例を示すブロック図である。
【００６７】
入出力インタフェース２１は、HDTVカメラ１２から供給されるHD画像を受信し、MP(Moving Parameter)１取得部２２またはHDD１４に供給する。さらに、入出力インタフェース２１は、HDD１４からHD画像を読み出し、MP１取得部２２に供給する。また、入出力インタフェース２１は、マルチプレックス部２４から供給される画像や動きパラメータ情報を受信し、HDD１４に供給することで記録させる。
【００６８】
MP１取得部２２は、高精度な動きパラメータを取得する為、入出力インタフェース２１を介してHDD１４から供給される高フレームレートで、高解像度のＨＤ画像から動きベクトル等の動きパラメータMP１を検出(算出)することにより取得し、マルチプレックス部２４に供給する。ここで、MP１取得部２２は、HDD１４に既に記録されているHD画像を対象に動きパラメータMP１の検出を行うので、例えば、多くのフレームを用いて、高精度の動きパラメータMP１を取得することができる。
【００６９】
即ち、例えば、動きパラメータMP１のうちの動きベクトルに注目した場合、MPEG(Moving Picture Expert Group)では、２フレームまたは３フレームを対象として処理を行うことにより、動きベクトルの検出が行われる。一方、MP１取得部２２は、HDD１４に既に記録されたHD画像から、動きベクトルを検出するので、リアルタイムで動きベクトルを検出する場合と比較して、時間的に十分な余裕がある。そのため、４以上のフレームを用いて、動きベクトルの検出を行うことができ、これにより、動きの傾向をより精度良く予測し、高精度の動きベクトルを取得することができる。
【００７０】
MP１取得部２２は、上述のように、入出力インタフェース２１を介して、HDD１４から供給されるHD画像から動きパラメータMP１を取得するほか、そのHD画像を、間引き部２３に供給する。
【００７１】
間引き部２３は、MP１取得部２２から供給されたHD画像のフレームを間引くことにより、または各フレームの画素を間引くことにより、HD画像をデータ量の少ない間引き画像に変換し、その間引き画像をマルチプレックス部２４に供給する。
【００７２】
即ち、間引き部２３は、例えば、HD画像の連続する２フレーム以上のNフレーム毎にN−1フレームを間引くことにより、HD画像を、そのHD画像よりも低フレームレートの間引き画像に変換する。あるいは、間引き部２３は、例えば、HD画像の連続する各フレームの隣接する２画素以上のM画素を１画素に間引くことにより、HD画像を、そのHD画像よりも低解像度の間引き画像に変換する。
【００７３】
なお、間引き部２３は、その他、HD画像のフレームを間引くとともに、各フレームの画素を間引いて、HD画像を、データ量の少ない間引き画像に変換することができる。
【００７４】
マルチプレックス部２４は、MP１取得部２２から供給された、動きパラメータ情報としての動きパラメータMP１と、間引き部２３から供給された間引き画像とをマルチプレックス(多重化)し、その結果得られる多重化データを、入出力インタフェース２１に供給する。
【００７５】
ここで、入出力インタフェース２１は、上述したようにしてマルチプレックス部２４で動きパラメータ情報と間引き画像とがマルチプレックスされることにより得られる多重化データを、HDD１４に供給し記録させる。
【００７６】
なお、MP１取得部２２は、HDTVカメラ１２から、入出力インタフェース２１を介して供給されるHD画像から、直接(HDD１４に記録されたHD画像からではなく)、動きパラメータMP１を取得する処理をしてもよい。
【００７７】
また、マルチプレックス部２４は、MP１取得部２２から供給された、動きパラメータ情報としての動きパラメータMP１と、間引き部２３から供給された間引き画像とを、そのまま、入出力インタフェース２１に供給してもよい。
【００７８】
この場合、入出力インタフェース２１は、マルチプレックス部２４から供給された、多重化されていない動きパラメータ情報と間引き画像とを、例えば、別々のファイルとして、HDD１４に記録する。
【００７９】
次に、図３のフローチャートを参照して、図２の記録制御部１３における処理について説明する。
【００８０】
記録制御部１３は、HDTVカメラ１２から、HD画像が供給されると、そのHD画像を受信し、HDD１４に供給して記録させる。そして、記録制御部１３は、例えば、ユーザが図示せぬ操作部を操作した場合に、あるいは、特に行うべき処理が(ほとんど)ない場合に、図３のフローチャートにしたがった処理を行う。
【００８１】
即ち、入出力インタフェース２１は、HDD１４からHD画像を読み出し、MP１取得部２２に供給する。ステップS１１において、MP１取得部２２は、入出力インタフェース２１から供給されたHD画像から動きパラメータMP１を取得し、マルチプレックス部２４に供給する。また、MP１取得部２２は、入出力インタフェース２１から供給されたHD画像を、間引き部２３に供給し、ステップS１２に進む。
【００８２】
ステップS１２において、間引き部２３は、MP１取得部２２から供給されたHD画像のフレームを間引くことにより、または各フレームの画素を間引くことにより、HD画像を、データ量の少ない間引き画像に変換して、マルチプレックス部２４に供給し、ステップS１３に進む。
【００８３】
ステップS１３において、マルチプレックス部２４は、MP１取得部２２からの、動きパラメータ情報としての動きパラメータMP１と、間引き部２３から供給された間引き画像とをマルチプレックスし、その結果得られる多重化データを入出力インタフェース２１に供給して、ステップS１４に進む。
【００８４】
ステップS１４において、入出力インタフェース２１は、マルチプレックス部２４からの多重化データをＨＤＤ１４に供給して記録させ、処理を終了する。
【００８５】
図４は、図１の再生制御部１５の構成例を示すブロック図である。
【００８６】
入出力インタフェース４１は、例えば、ユーザが図示せぬ操作部を操作することにより与えられる再生の指令に応じて、HDD１４から多重化データを読み出し、デマルチプレックス部４２に供給する。
【００８７】
デマルチプレックス部４２は、入出力インタフェース４１からの多重化データを、間引き画像と動きパラメータ情報とにデマルチプレックス(分離)し、画像処理部４３に供給する。
【００８８】
画像処理部４３は、デマルチプレックス部４２から供給された動きパラメータ情報である、HD画像の動きパラメータＭＰ１を用いて、デマルチプレックス部４２から供給された間引き画像の画像処理をし、その画像処理によって得られた画像を、モニタ１６に供給する。画像処理部４３は、高品質(高フレームレートで、高解像度)のHD画像から得られた高精度な動きパラメータＭＰ１を画像処理に用いることで、間引き画像に対して、適切な画像処理を施すことができる。
【００８９】
具体的には、例えば、画像処理部４３は、ノイズリダクション部４４と補間部４５とを有している。ノイズリダクション部４４は、高精度な動きパラメータＭＰ１を用いて、間引き画像の各フレームについて、そのフレーム画像が、ある程度以上の動きがある動き画像であるか、または動きが(ほとんど)ない静画像であるかを判断する。また、ノイズリダクション部４４は、動き画像と判断されたフレームの画像には、そのフレーム内の画像だけを用いてノイズ低減(ノイズリダクション)処理をし、静画像と判断されたフレームの画像には、そのフレームを含む前後の複数のフレームの画像を用いてノイズ低減処理をする。さらに、ノイズリダクション部４４は、ノイズ低減処理を施した間引き画像を、補間部４５に供給する。なお、ノイズリダクション部４４は、動きパラメータＭＰ１のうちの、例えば、動きベクトル、あるいは輝度値の変化を表す輝度変化を用いて、動き画像であるか静画像であるかを判断する。
【００９０】
補間部４５は、ノイズリダクション部４４から供給された間引き画像に対して、デマルチプレックス部４２から供給された高精度な動きパラメータＭＰ１のうちの、例えば、動きベクトル等を用いて、例えば、フレームを補間する補間処理、または、各フレームの画素を補間する補間処理を施すことにより、間引き画像を、高品質のHD画像に変換して、モニタ１６に供給する。
【００９１】
次に、図５のフローチャートを参照して、図４の再生制御部１５における処理について説明する。
【００９２】
例えば、ユーザが図示せぬ操作部を操作することにより、画像の再生が、入出力インタフェース４１に指令されると、ステップS２１において、入出力インタフェース４１は、HDD１４から多重化データを読み出させ、デマルチプレックス部４２に供給し、ステップS２２に進む。
【００９３】
ステップS２２において、デマルチプレックス部４２は、入出力インタフェース４１からの多重化データを、間引き画像と動きパラメータＭＰ１とにデマルチプレックスし、画像処理部４３に供給して、ステップS２３に進む。
【００９４】
ステップS２３において、画像処理部４３は、デマルチプレックス部４２からの動きパラメータである高精度なＭＰ１を用いて、同じくデマルチプレックス部４２からの間引き画像に画像処理を施し、モニタ１６に供給して、処理を終了する。
【００９５】
即ち、画像処理部４３において、ノイズリダクション部４４は、動きパラメータMP１を用いて、間引き画像に対して、ノイズ低減処理を施し、その結果得られる間引き画像を、補間部４５に供給する。補間部４５は、動きパラメータMP１を用いて、ノイズリダクション部４４からの間引き画像に対して補間処理を施すことにより、間引き画像をHD画像に変換し、モニタ１６に供給する。モニタ１６では、補間部４５(画像処理部４３)からのHD画像が表示される。
【００９６】
図６は、図１の記録制御部１３の他の構成例を示すブロック図である。
【００９７】
なお、図中、図２の場合に対応する部分については同一の符号を付してあり、以下、その説明は、適宜省略する。
【００９８】
即ち、図６の記録制御部１３は、間引き部２３に代えて、フレーム間引き部５２が設けられており、さらに、MP２取得部５３、MPd差分情報取得部５４、および圧縮部５５が新たに設けられているほかは、図２の場合と同様に構成されている。
【００９９】
フレーム間引き部５２には、MP１取得部２２から、HD画像が供給される。フレーム間引き部５２は、MP１取得部２２からのHD画像のフレームを間引くことにより、HD画像をデータ量の少ない間引き画像に変換し、MP２取得部５３に供給する。
【０１００】
MP２取得部５３は、フレーム間引き部５２から供給された間引き画像から、間引き画像の動きベクトル等の、間引き画像の動きに関する動きパラメータMP２を検出(算出)することにより取得し、MPd差分情報取得部５４に供給する。さらに、MP２取得部５３は、間引き画像と動きパラメータＭＰ２とを、圧縮部５５に供給する。
【０１０１】
MPd差分情報取得部５４には、MP１取得部２２から動きパラメータMP１が供給されるほか、MP２取得部５３から動きパラメータMP２が供給される。MPd差分情報取得部５４は、MP１取得部２２から供給された動きパラメータMP１と、MP２取得部５３から供給された動きパラメータMP２との差分に関する差分情報MPdを検出(算出)することで取得し、マルチプレックス部２４に供給する。
【０１０２】
なお、動きパラメータMP１と動きパラメータMP２とに同一種類のパラメータが存在する場合には、そのパラメータについては、そのパラメータ同士の差分値を計算することができるのであれば、動きパラメータ情報に関する差分情報MPdとして、そのパラメータ同士の差分値を採用することができる。また、動きパラメータMP１には存在するが、動きパラメータMP２には存在しないパラメータについては、動きパラメータMP１に存在するパラメータそのものを、動きパラメータ情報に関する差分情報MPdとして採用することができる。即ち、動きパラメータ情報に関する差分情報MPdは、その動きパラメータ情報に関する差分情報MPdと動きパラメータMP２とを用いて、動きパラメータMP１を復元することができれば、どのような情報であっても良い。
【０１０３】
上述したように、動きパラメータ情報としての差分情報MPdとしては、動きパラメータMP１と動きパラメータMP２とのパラメータ同士の差分値を採用することもできるし、動きパラメータMP１そのものを採用することもできる。一般的に、動きパラメータMP１と動きパラメータMP２との差分値は、動きパラメータMP１そのものよりもデータ量が少なくなるため、動きパラメータMP１と動きパラメータMP２との差分値を、動きパラメータ情報としてHDD１４に記録する場合には、動きパラメータそのものを、動きパラメータ情報としてHDD１４に記録する場合と比較して、HDD１４の記憶容量の節約になり、さらに、動きパラメータ情報を伝送するにあたり、その伝送に要する時間の短縮化を図ることができる。
【０１０４】
さらに、動きパラメータMP１のうちの、図１１の画像処理部４３で用いられる動きパラメータMP１のみについて、動きパラメータMP２との差分値を動きパラメータ情報として採用した場合には、より動きパラメータ情報の伝送に要する時間の短縮化を図り、また、HDD１４の記憶容量を節約することができる。
【０１０５】
圧縮部５５は、MP２取得部５３から供給された間引き画像を、同じくMP２取得部５３から供給された動きパラメータMP２を用いて、例えば、MPEG方式で圧縮する等して得られた圧縮データを、マルチプレックス部２４に供給する。
【０１０６】
なお、図６では、マルチプレックス部２４は、MPd差分情報取得部５４から供給された差分情報MPdを動きパラメータ情報として、その動きパラメータ情報としての差分情報MPdと、圧縮部５５から供給された間引き画像の圧縮データとをマルチプレックスし、その結果得られる多重化データを入出力インタフェース２１に供給する。
【０１０７】
次に、図７を参照して、図６のＭＰd差分情報取得部５４における処理について説明する。
【０１０８】
例えば、フレーム間引き部５２において、HD画像の連続する２フレームを１フレームに間引く１/２間引きによって、HD画像が、間引き画像に変換されることとすると共に、動きパラメータMP１およびMP２として、動きベクトルを考えることとする。
【０１０９】
また、HD画像の先頭からnフレーム目のフレームを、第nフレームということとし、さらに、第nフレームから第n'(>n)フレームへの動きベクトルを、動きベクトルmv(n,n')と表すこととする。
【０１１０】
いま、図７に示すように、HD画像について、第nフレーム、第n＋１フレーム、第n＋２フレームの連続する３フレームに注目し、HD画像が間引き画像に変換されるときに間引かれるフレームが、第n＋１フレームであるとすると、HD画像については、動きベクトルmv(n,n+1)およびmv(n+1,n+2)が検出され、間引き画像については、動きベクトルmv(n,n+2)が検出される。
【０１１１】
MPd差分情報取得部５４は、間引き画像の動きベクトルmv(n,n+2)に基づき、例えば、その1/2のベクトル1/2×mv(n,n+2)を、HD画像の動きベクトルmv(n,n+1)の予測値mv'(n,n+1)として求めると共に、動きベクトルmv(n+1,n+2)の予測値mv'(n+1,n+2)として求める。さらに、MPd差分情報取得部５４は、動きベクトルmv(n,n+1)とその予測値mv'(n,n+1)との差分値mv(n,n+1)−mv'(n,n+1)を求め、その差分値mv(n,n+1)−mv'(n,n+1)を、動きベクトルmv(n,n+1)の差分情報MPd(n,n+1)とすると共に、動きベクトルmv(n+1,n+2)とその予測値mv'(n+1,n+2)との差分値mv (n+1,n+2)−mv'(n+1,n+2)を求め、その差分値mv(n+1,n+2)−mv'(n+1,n+2)を、動きベクトルmv(n+1,n+2)の差分情報MPd(n+1,n+2)とする。
【０１１２】
なお、HD画像の動きベクトルmv(n,n+1)の予測値mv'(n,n+1)は、間引き画像の動きベクトルmv(n,n+2)から求めることができ、HD画像の動きベクトルmv(n,n+1)は、その予測値mv'(n,n+1)と、差分情報MPd(n,n+1)としての差分値mv(n,n+1)−mv'(n,n+1)とから求めることができる。即ち、HD画像の動きベクトルmv(n,n+1)は、間引き画像の動きベクトルmv(n,n+2)と、差分情報MPd(n,n+1)としての差分値mv(n,n+1)−mv'(n,n+1)とを加算することにより復元する(求める)ことができる。
【０１１３】
HD画像の動きベクトルmv(n+1,n+2)も、同様に、間引き画像の動きベクトルmv(n,n+2)と、差分情報MPd(n+1,n+2)としての差分値mv(n+1,n+2)−mv'(n+1,n+2)とを用いて復元することができる。
【０１１４】
後述する図１１のMP１復元部８４では、以上のようにして、HD画像の動きベクトルmv(n,n+1)やmv(n+1,n+2)を復元する。
【０１１５】
ここで、図７において、理想的には、式mv(n,n+1)+mv(n+1,n+2)=mv(n,n+2)が成り立つ。この場合、間引き画像の動きベクトルmv(n,n+2)の他に、HD画像の２つの動きベクトルmv(n,n+1)またはmv(n+1,n+2)のうちのいずれか一方の動きベクトルがあれば、他方の動きベクトルを求めることができる。
【０１１６】
従って、差分情報MPd(n,n+1)と差分情報MPd(n+1,n+2)との両方がなくても、いずれか一方の差分情報があれば、その差分情報と、間引き画像の動きベクトルmv(n,n+2)とを用いて、その一方の差分情報に対応するHD画像の動きベクトルを復元し、さらに、その一方の差分情報に対応するHD画像の動きベクトルと、間引き画像の動きベクトルmv(n,n+2)とを用いて、他方の差分情報に対応するHD画像の動きベクトルを復元することができる。
【０１１７】
以上から、MPd差分情報取得部５４では、必ずしも、動きベクトルmv(n,n+1)の差分情報MPd(n,n+1)と、動きベクトルmv(n+1,n+2)の差分情報MPd(n+1,n+2)との両方を、動きパラメータ情報とする必要はなく、いずれか一方の差分情報だけを動きパラメータ情報とすればよい。
【０１１８】
この場合、差分情報MPd(n,n+1)と差分情報MPd(n+1,n+2)との両方を、動きパラメータ情報とする場合と比較して、動きパラメータ情報のデータ量が少なくなるため、動きパラメータ情報を伝送するのに要する時間をより短縮し、また、HDD１４の記憶容量をより節約することができる。
【０１１９】
次に、図８と図９とを参照して、図６のMPd差分情報取得部５４における処理について、さらに説明する。
【０１２０】
なお、図８および図９においても、図７と同様に、動きパラメータＭＰ１と動きパラメータＭＰ２とは、動きベクトルだけを考えることとする。また、HD画像は、１１フレームで構成されていることとし、フレーム間引き部５２は、HD画像の偶数番目のフレーム(以下、偶数フレームという)を間引くことにより、HD画像を間引き画像に変換することとする。さらに、動きベクトルは、HD画像の第１フレームから第６フレームにかけて、１フレームあたりに１画素だけ上方向に等速で移動し、その後、第６フレームから第１１フレームにかけて、１フレームあたり２画素だけ下方向に等速で移動する移動物体を対象に検出されることとする。
【０１２１】
図８は、HD画像の第１フレームの移動物体の位置を基準とする各フレームにおける移動物体の位置(以下、ＨＤ画像位置という)、HD画像の奇数番目のフレーム(以下、奇数フレームという)から、その次の奇数フレームへの動きベクトル、つまり、間引き画像の動きベクトルから、その２つの奇数フレームの間の偶数フレームにおける移動物体の位置を予測した位置(以下、間引き画像予測内挿位置という)、および、ＨＤ画像位置と間引き画像予測内挿位置との誤差を表す内挿誤差を示している。
【０１２２】
即ち、図８において、HD画像位置は●印で、間引き画像予測内挿位置は■印で、内挿誤差は▲印で、それぞれ示してある。なお、間引き画像予測内挿位置は、偶数フレームについてしか存在しないが、図８では、便宜上、奇数フレームについても、間引き画像予測内挿位置を示してある。
【０１２３】
また、偶数フレームについての間引き画像予測内挿位置としては、その偶数フレームの前後の奇数フレームにおける移動物体の位置の平均値が採用されており、奇数フレームについての間引き画像予測内挿位置としては、その奇数フレームのHD画像位置がそのまま採用されている。
【０１２４】
図９は、HD画像の何番目のフレームであるかを表すフレーム番号、HD画像位置、HD画像の各フレームにおける移動物体の動きを表す動きベクトル、HD画像の各フレームの動きベクトルにより予測される次のフレームにおける移動物体の位置を表す予測位置、間引き画像の各フレームにおける移動物体の動きを表す動きベクトル、間引き画像の各フレームの動きベクトルから予測される次のフレームにおける移動物体の位置を表す間引き画像予測位置、間引き画像予測内挿位置、および、内挿誤差を示している。
【０１２５】
即ち、図９において、左から１番目の欄(列)は、HD画像のフレームのフレーム番号を表し、左から２番目の欄は、HD画像の各フレームにおける移動物体の位置を表している。また、左から３番目の欄は、HD画像の各フレームに対して検出される移動物体の動きベクトルを表し、左から４番目の欄は、HD画像の各フレームの移動物体の動きベクトルから予測される、HD画像の次のフレームにおける移動物体の予測位置を表している。
【０１２６】
さらに、左から５番目の欄は、間引き画像の各フレームに対して検出される移動物体の動きベクトルを表し、左から６番目の欄は、間引き画像の各フレームの移動物体の動きベクトルから予測される、間引き画像の次のフレームにおける移動物体の間引き画像予測位置を表している。また、左から７番目の欄は、間引き画像予測内挿位置を表し、左から８番目の欄(右から１番目の欄)は、内挿誤差を表している。
【０１２７】
図８および図９において、偶数フレームの間引き画像予測内挿位置は、上述したように、その偶数フレームの前後の奇数フレームにおける移動物体の位置の平均値であるため、移動物体の速度が変化すると、その変化に起因して、０でない内挿誤差が生じる。
【０１２８】
即ち、図８および図９では、HD画像の第６フレーム(フレーム番号が６のフレーム)において、移動物体の速度が変化しており、その変化に起因して、−1.5の内挿誤差が生じている。
【０１２９】
図６のMPd差分情報取得部５４で求められる差分情報MPdは、この内挿誤差に相当し、この内挿誤差に相当する差分情報MPdと、間引き画像から得られる動きベクトル(から予測される間引き画像予測内挿位置)とを用いることにより、HD画像の正確な動きベクトルを復元する(求める)ことができる。
【０１３０】
次に、図１０のフローチャートを参照して、図６の記録制御部１３における処理について説明する。
【０１３１】
記録制御部１３は、HDTVカメラ１２から、HD画像が供給されると、そのHD画像を受信し、HDD１４に供給して記録させる。そして、記録制御部１３は、例えば、ユーザが、図示せぬ操作部を操作した場合に、あるいは、特に行うべき処理が(ほとんど)ない場合に、図１０のフローチャートに従った処理を行う。
【０１３２】
即ち、入出力インタフェース２１は、HDD１４からHD画像を読み出し、MP１取得部２２に供給する。ステップS３１において、MP１取得部２２は、入出力インタフェース２１から供給されるHD画像から動きパラメータMP１を取得し、MPd差分情報取得部５４に供給する。また、MP１取得部２２は、HD画像をフレーム間引き部５２に供給し、ステップS３２に進む。
【０１３３】
ステップS３２において、フレーム間引き部５２は、MP１取得部２２から供給されるHD画像の偶数フレーム(または奇数フレーム)を間引き、その結果得られた間引き画像をMP２取得部５３に供給し、ステップS３３に進む。
【０１３４】
ステップS３３において、MP２取得部５３は、フレーム間引き部５２から供給される間引き画像から、その間引き画像の動きパラメータMP２を取得し、MPd差分情報取得部５４に供給する。また、MP２取得部５３は、間引き画像と動きパラメータMP２とを圧縮部５５に供給し、ステップS３４に進む。
【０１３５】
ステップS３４において、MPd差分情報取得部５４は、MP１取得部２２から供給される動きパラメータMP１と、MP２取得部５３から供給される動きパラメータMP２との差分に関する差分情報MPdを求めることにより取得し、マルチプレックス部２４に供給して、ステップS３５に進む。
【０１３６】
ステップS３５において、圧縮部５５は、MP２取得部５３から供給される動きパラメータMP２を用いて、同じく、MP２取得部５３から供給される間引き画像をMPEG方式等により圧縮し、その結果得られた間引き画像の圧縮データを、マルチプレックス部２４に供給して、ステップS３６に進む。
【０１３７】
ステップS３６において、マルチプレックス部２４は、MPd差分情報取得部５４から供給される差分情報MPdと、圧縮部５５から供給される間引き画像の圧縮データとをマルチプレックスし、その結果得られた多重化データを、入出力インタフェース２１に供給し、ステップS３７に進む。
【０１３８】
ステップS３７において、入出力インタフェース２１は、マルチプレックス部２４から供給される多重化データを、HDD１４に供給して記録させ、処理を終了する。
【０１３９】
図１１は、記録制御部１３が図６に示したように構成される場合の、図１の再生制御部１５の構成例を示すブロック図である。
【０１４０】
なお、図中、図４の場合と対応する部分については同一の符号を付してあり、以下、その説明は、適宜省略する。
【０１４１】
即ち、図１１の再生制御部１５は、図４の補間部４５に代えて、フレーム補間部８５が設けられ、さらに、解凍部８３、およびMP１復元部８４が新たに設けられている他は、図４の場合と同様に構成される。
【０１４２】
解凍部８３は、図６の圧縮部５５による圧縮方式に対応した解凍方式に従って、デマルチプレックス部４２から供給される間引き画像の圧縮データを解凍し、その結果得られる間引き画像を画像処理部４３に供給する。
【０１４３】
即ち、図１１では、HDD１４には、図６の圧縮部５５で得られた間引き画像の圧縮データと、MPd差分情報取得部５４で得られた動きパラメータ情報としての差分情報MPdとがマルチプレックスされた多重化データが記録されている。そして、デマルチプレックス部４２は、その多重化データを、圧縮データと差分情報MPdとにデマルチプレックスし、圧縮データを解凍部８３に供給するとともに、差分情報MPdをMP１復元部８４に供給するようになっており、解凍部８３は、以上のようにして、デマルチプレックス部４２から供給される圧縮データを、間引き画像に解凍して、画像処理部４３に供給する。
【０１４４】
ここで、図６の圧縮部５５は、上述したように、間引き画像から取得された動きパラメータMP２を用いて、間引き画像をMPEG方式等で圧縮するので、間引き画像の圧縮データには、その圧縮に用いられた動きパラメータMP２が含まれており、解凍部８３は、その動きパラメータMP２を用いて、圧縮データを解凍する。そして、解凍部８３は、圧縮データの解凍に用いた動きパラメータMP２を、MP１復元部８４に供給する。
【０１４５】
MP１復元部８４は、デマルチプレックス部４２から供給される差分情報MPdと、解凍部８３から供給される動きパラメータＭＰ２とから、高精度な動きパラメータMP１を復元し、画像処理部４３に供給する。
【０１４６】
フレーム補間部８５は、解凍部８３から(ノイズリダクション部４４を介して)供給された間引き画像に対して、MP１復元部８４から供給された高精度な動きパラメータＭＰ１のうちの、例えば、動きベクトル等を用いて、フレームを補間する補間処理を施すことにより、間引き画像を、高品質のHD画像に変換して、モニタ１６に供給する。
【０１４７】
次に、図１２のフローチャートを参照して、図１１の再生制御部１５における処理について説明する。
【０１４８】
例えば、ユーザが、図示せぬ操作部を操作することにより、画像の再生が入出力インタフェース４１に指令されると、ステップS４１において、入出力インタフェース４１は、HDD１４から多重化データを読み出し、デマルチプレックス部４２に供給して、ステップS４２に進む。
【０１４９】
ステップS４２において、デマルチプレックス部４２は、入出力インタフェース４１からの多重化データを、間引き画像の圧縮データと差分情報MPdとにデマルチプレックスする。また、デマルチプレックス部４２は、間引き画像を解凍部８３に供給し、差分情報MPdをMP１復元部８４に供給して、ステップS４３に進む。
【０１５０】
ステップS４３において、解凍部８３は、デマルチプレックス部４２からの間引き画像の圧縮データを、図６の圧縮部５５による圧縮方式に対応した解凍方式を用いて解凍し、その結果得られた間引き画像を、画像処理部４３に供給する。また、解凍部８３は、間引き画像の圧縮データを解凍するのに用いた動きパラメータMP２を、MP１復元部８４に供給し、ステップS４４に進む。
【０１５１】
ステップS４４において、MP１復元部８４は、例えば、図７で説明したように、デマルチプレックス部４２からの差分情報MPdと、解凍部８３からの動きパラメータMP２とを用いて、高精度の動きパラメータMP１を復元し(求めて)、画像処理部４３に供給して、ステップS４５に進む。
【０１５２】
ステップS４５において、画像処理部４３は、MP１復元部８４からの動きパラメータMP１を用いて、解凍部８３からの間引き画像に画像処理を施し、その結果得られた画像を、モニタ１６に供給して、処理は終了する。
【０１５３】
図１３は、図１の記録制御部１３のさらに他の構成例を示すブロック図である。
【０１５４】
なお、図中、図２または図６の場合と対応する部分については同一の符号を付してあり、以下、その説明は、適宜省略する。
【０１５５】
即ち、図１３の記録制御部１３は、図６のフレーム間引き部５２、MP２取得部５３、MPd差分情報取得部５４、または圧縮部５５に代えて、それぞれダウンコンバート部１０２、MP２取得部１０３、MPd差分情報取得部１０４、または圧縮部１０５が設けられているほかは、図６の場合と同様に構成されている。
【０１５６】
ダウンコンバート部１０２には、MP１取得部２２から、HD画像が供給されるようになっている。ダウンコンバート部１０２は、MP１取得部２２からのHD画像の各フレームの画素を間引くことにより、HD画像をデータ量の少ない間引き画像でもあるSD(標準解像度)画像に変換し、MP２取得部１０３と圧縮部１０５とに供給する。
【０１５７】
MP２取得部１０３は、ダウンコンバート部１０２から供給されるSD画像から動きパラメータMP２を検出(算出)することにより取得し、MPd差分情報取得部１０４に供給する。
【０１５８】
MPd差分情報取得部１０４には、MP２取得部１０３から、動きパラメータMP２が供給される他、MP１取得部２２から、動きパラメータMP１が供給されるようになっている。MPd差分情報取得部１０４は、さらに、図１６の画像処理部４３で用いられる動きパラメータMP１のみについて、図６のMPd差分情報取得部５４と同様に、動きパラメータMP１と動きパラメータMP２との差分に関する差分情報MPdを求め、動きパラメータ情報として、マルチプレックス部２４に供給する。
【０１５９】
圧縮部１０５には、ダウンコンバート部１０２からSD画像が供給される他、MP１取得部２２から動きパラメータMP１が供給されるようになっており、圧縮部１０５は、ダウンコンバート部１０２から供給されるSD画像を、MP１取得部２２から供給される動きパラメータMP１を用いて圧縮することで、SD画像圧縮データに圧縮し、マルチプレックス部２４に供給する。
【０１６０】
図１４は、図１３のＭＰd差分情報取得部１０４での差分情報ＭＰdの取得処理の一例を説明する図である。
【０１６１】
例えば、ダウンコンバート部１０２において、HD画像の各フレームの２×２画素の４画素を１画素にする１/４間引きによって、HD画像が、間引き画像であるSD画像に変換されることとすると共に、動きパラメータMP１、および動きパラメータMP２として、動きベクトルを考えることとする。また、動きベクトルは、例えば、８×８画素のブロックを対象に検出されることとする。
【０１６２】
いま、SD画像の大きさ(画素数)は、HD画像の大きさの１/４であるため、図１４に示すように、SD画像の８×８画素の１つのブロックは、HD画像の８×８画素の４つのブロックからなる１６×１６画素の大ブロックと対応することとなる。
【０１６３】
また、SD画像の８×８画素の１つのブロックにおける動きベクトルを、動きベクトルmv(Xn)と表すこととし、それに対応するHD画像の大ブロックにおける左上、右上、左下、右下の８×８画素の４つのブロックにおける動きベクトルを、それぞれ、動きベクトルmv(An)，mv(Bn)，mv(Cn)，mv(Dn)と表すこととする。
【０１６４】
MPd差分情報取得部１０４は、HD画像の動きベクトルmv(An)と、それに対応するSD画像の動きベクトルmv(Xn)との差分値mv(An)−mv(Xn)を求め、その差分値mv(An)−mv(Xn)を、動きベクトルmv(An)についての差分情報MPd(An)とする。MPd差分情報取得部１０４は、同様にして、HD画像の他の動きベクトルmv(Bn)，mv(Cn)、またはmv(Dn)それぞれと、SD画像の動きベクトルmv(Xn)との差分値mv(Bn)−mv(Xn)，mv(Cn)−mv(Xn)、またはmv(Dn)−mv(Xn)を、動きベクトルmv(Bn)についての差分情報MPd(Bn)、動きベクトルmv(Cn)についての差分情報MPd(Cn)、または動きベクトルmv(Dn)についての差分情報MPd(Dn)それぞれとして求める。
【０１６５】
なお、HD画像の大ブロックの左上の８×８画素のブロックの動きベクトルmv(An)は、それに対応するSD画像の８×８画素のブロックの動きベクトルmv(Xn)と、差分情報MPd(An)としての差分値mv(An)−mv(Xn)とを加算することにより復元する(求める)ことができる。
【０１６６】
HD画像の動きベクトルmv(Bn)，mv(Cn)、またはmv(Dn)も、同様に、SD画像の動きベクトルmv(Xn)と、差分情報MPdとしての差分値mv(Bn)−mv(Xn)，mv(Cn)−mv(Xn)、またはmv(Dn)−mv(Xn)それぞれを用いて復元することができる。
【０１６７】
後述する図１６のMP１復元部１２５は、以上のように、HD画像の動きベクトルmv(An)に対応するSD画像の動きベクトルmv(Xn)と、差分情報MPd(An)とを用いて、HD画像の動きベクトルmv(An)を復元する。また、MP１復元部１２５は、同様に、SD画像の動きベクトルmv(Xn)と、差分情報MPd(Bn) ，MPd(Cn)、または MPd(Dn)それぞれを用いて、HD画像の動きベクトルmv(Bn)、mv(Cn)、またはmv(Dn)を復元する。
【０１６８】
次に、図１５のフローチャートを参照して、図１３の記録制御部１３における処理について説明する。
【０１６９】
記録制御部１３は、HDTVカメラ１２から、HD画像が供給されると、そのHD画像を受信し、HDD１４に供給して記録させる。そして、記録制御部１３は、例えば、ユーザが図示せぬ操作部を操作した場合に、あるいは、特に行うべき処理が(ほとんど)ない場合に、図１５のフローチャートにしたがった処理を行う。
【０１７０】
即ち、入出力インタフェース２１は、HDD１４からHD画像を読み出し、MP１取得部２２に供給する。ステップS５１において、MP１取得部２２は、入出力インタフェース２１から供給されたHD画像から動きパラメータMP１を取得し、MPd差分情報取得部１０４と圧縮部１０５とに供給する。また、MP１取得部２２は、入出力インタフェース２１から供給されたHD画像を、ダウンコンバート部１０２に供給し、ステップS５２に進む。
【０１７１】
ステップS５２において、ダウンコンバート部１０２は、MP１取得部２２から供給されたHD画像の各フレームの画素を間引くことにより、HD画像を、データ量の少ない間引き画像でもあるSD画像に変換して、MP２取得部１０３と圧縮部１０５とに供給し、ステップS５３に進む。
【０１７２】
ステップS５３において、MP２取得部１０３は、ダウンコンバート部１０２から供給されるSD画像から動きパラメータMP２を取得し、MPd差分情報取得部１０４に供給し、ステップS５４に進む。
【０１７３】
ステップS５４において、MPd差分情報取得部１０４は、MP１取得部２２からの動きパラメータMP１と、MP２取得部１０３からの動きパラメータMP２との差分に関する差分情報MPdを取得し、マルチプレックス部２４に供給して、ステップS５５に進む。
【０１７４】
ステップS５５において、圧縮部１０５は、MP１取得部２２からの動きパラメータMP１を用いて、ダウンコンバート部１０２からのSD画像を圧縮し、その結果得られたSD画像圧縮データをマルチプレックス部２４に供給し、ステップS５６に進む。
【０１７５】
ここで、ダウンコンバート部１０２において、例えば、図１４で説明したように、SD画像が、HD画像の画素を１/４に間引いた画像であり、動きパラメータMP２としての１つの動きベクトルが、動きパラメータMP１としての４つの動きベクトルに対応する場合において、圧縮部１０５が、HD画像の動きベクトルを用いてMPEG方式等による圧縮をするときには、その圧縮には、動きパラメータMP２としての１つの動きベクトルに対応する、動きベクトルMP１としての４つの動きベクトルの平均値等が、HD画像の動きベクトルとして用いられる。
【０１７６】
ステップS５６において、マルチプレックス部２４は、MPd差分情報取得部１０４からの、動きパラメータ情報としての差分情報MPdと、圧縮部１０５から供給されたSD画像圧縮データとをマルチプレックスし、その結果得られる多重化データを入出力インタフェース２１に供給して、ステップS５７に進む。
【０１７７】
ステップS５７において、入出力インタフェース２１は、マルチプレックス部２４からの多重化データをＨＤＤ１４に供給して記録させ、処理を終了する。
【０１７８】
図１６は、記録制御部１３が図１３に示したように構成される場合の、図１の再生制御部１５の構成例を示すブロック図である。
【０１７９】
なお、図中、図１１の場合と対応する部分については同一の符号を付してあり、以下、その説明は、適宜省略する。
【０１８０】
即ち、図１６の再生制御部１５には、図１１の解凍部８３、MP１復元部８４、またはフレーム補間部８５に代えて、それぞれ解凍部１２３、MP１復元部１２５、またはアップコンバート部１２６が設けられ、さらに、MP２取得部１２４が新たに設けられている他は、図１１の場合と同様に構成されている。
【０１８１】
解凍部１２３には、デマルチプレックス部４２から、SD画像圧縮データが供給されるようになっている。解凍部１２３は、図１３の圧縮部１０５による圧縮方式に対応した解凍方式に従って、デマルチプレックス部４２から供給されるSD画像圧縮データを解凍し、その結果得られるSD画像を画像処理部４３とMP２取得部１２４とに供給する。
【０１８２】
MP２取得部１２４は、解凍部８３から供給されるSD画像から、動きパラメータMP２を検出(算出)することにより取得し、MP１復元部１２５に供給する。
【０１８３】
MP１復元部１２５は、デマルチプレックス部４２から供給される差分情報MPdと、MP２取得部１２４から供給される動きパラメータMP２とを用いて、高精度な動きパラメータMP１を算出することにより取得し、画像処理部４３に供給する。
【０１８４】
アップコンバート部１２６には、MP１復元部１２５から、動きパラメータMP１が供給されるとともに、解凍部１２３から(ノイズリダクション部４４を介して)SD画像が供給されるようになっている。アップコンバート部１２６は、ＭＰ１復元部１２５から供給される動きパラメータＭＰ１を用いて、解凍部１２３から供給されるＳＤ画像に画素数を増やす画像処理、即ち、画素の補間処理を施す。
【０１８５】
次に、図１７のフローチャートを参照して、図１６の再生制御部１５における処理について説明する。
【０１８６】
例えば、ユーザが、図示せぬ操作部を操作することにより、画像の再生が入出力インタフェース４１に指令されると、ステップS６１において、入出力インタフェース４１は、HDD１４から多重化データを読み出し、デマルチプレックス部４２に供給して、ステップS６２に進む。
【０１８７】
ステップS６２において、デマルチプレックス部４２は、入出力インタフェース４１からの多重化データを、SD画像圧縮データと差分情報MPdとにデマルチプレックスする。また、デマルチプレックス部４２は、SD画像の圧縮データを解凍部１２３に供給し、差分情報MPdをMP１復元部１２５に供給して、ステップS６３に進む。
【０１８８】
ステップS６３において、解凍部１２３は、デマルチプレックス部４２からのSD画像圧縮データを、図１３の圧縮部１０５による圧縮方式に対応した解凍方式を用いて解凍し、その結果得られたSD画像を、画像処理部４３とMP２取得部１２４とに供給して、ステップS６４に進む。
【０１８９】
ステップS６４において、MP２取得部１２４は、解凍部１２３から供給されるSD画像から動きパラメータMP２を検出(算出)することにより取得し、MP１復元部１２５に供給して、ステップS６５に進む。
【０１９０】
ステップS６５において、MP１復元部１２５は、デマルチプレックス部４２からの差分情報MPdと、MP２取得部１２４からの動きパラメータMP２とを用いて、高精度の動きパラメータMP１を復元し（求めて）、画像処理部４３に供給して、ステップS６６に進む。
【０１９１】
ステップS６６において、画像処理部４３は、MP１復元部１２５からの動きパラメータMP１を用いて、解凍部１２３からのSD画像に画像処理を施し、その結果得られた画像を、モニタ１６に供給し、処理は終了する。
【０１９２】
図１８は、本発明を適用した記録再生システムの他の一実施の形態の構成例を示すブロック図である。
【０１９３】
記録再生システムは、記録装置１４１、HDTVカメラ１４２、再生装置１５１、およびモニタ１５５により構成され、記録装置１４１は、記録制御部１４３、HDD１４４、および送信制御部１４５により構成される。また、再生装置１５１は、受信制御部１５２、HDD１５３、および再生制御部１５４により構成される。
【０１９４】
ＨＤＴＶカメラ１４２は、図１のＨＤＴＶカメラ１２と同様に構成されている。また、記録制御部１４３は、図１の記録制御部１３と同様に構成されている。
【０１９５】
ＨＤＤ１４４は、図１のHDD１４と同様に、記録制御部１４３から供給される多重化データを記録する。
【０１９６】
送信制御部１４５は、ＨＤＤ１４４から読み出した多重化データを、例えば、インターネットやLAN(Local Area Network)、IEEE(Institute of Electrical and Electronic Engineers)１３９４やUSB(Universal Serial Bus)の規格に準拠したネットワーク等を介して、再生装置１５１に送信することを制御する。
【０１９７】
受信制御部１５２は、例えば、記録装置１４１から送信されてくる多重化データを受信することを制御し、その多重化データを、ＨＤＤ１５３に供給し、記録させる。
【０１９８】
ＨＤＤ１５３は、図１のHDD１４と同様に、受信制御部１５２から供給される多重化データを記録する。
【０１９９】
再生制御部１５４は、ＨＤＤ１５３に記録されている多重化データを、ＨＤＤ１５３から読み出し、図１の再生制御部１５と同様の処理をして、その結果得られる画像を、モニタ１５５に供給する。モニタ１５５は、図１のモニタ１６と同様に構成される。
【０２００】
以上のように構成される図１８の記録再生システムでは、例えば、記録装置１４１の記録制御部１４３に、HDTVカメラ１４２からHD画像が供給される。記録制御部１４３は、HDTVカメラ１４２からのHD画像を対象に、図１の記録制御部１３と同様の処理を行い、その結果得られた多重化データをHDD１４４に供給し記録させる。送信制御部１４５は、HDD１４４に記録されている多重化データを読み出し、ネットワーク等を介して、再生装置１５１の受信制御部１５２に送信する。
【０２０１】
再生装置１５１の受信制御部１５２は、記録装置１４１からの多重化データを受信して、HDD１５３に供給し、記録させる。再生制御部１５４は、必要に応じて、HDD１５３に記録されている多重化データを読み出し、図１の再生制御部１５と同様の処理を行い、その結果得られる画像をモニタ１５５に出力する。
【０２０２】
図１９は、上述した一連の処理をプログラムにより実行するコンピュータの構成の例を示すブロック図である。
【０２０３】
CPU（Central Processing Unit）２０１は、ROM（Read Only Memory）２０２、または記憶部２０８に記憶されているプログラムに従って各種の処理を実行する。RAM（Random Access Memory）２０３には、CPU２０１が実行するプログラムやデータなどが適宜記憶される。これらのCPU２０１、ROM２０２、およびRAM２０３は、バス２０４により相互に接続されている。
【０２０４】
なお、CPU２０１として、”Ｃｅｌｌ誕生”、日経エレクトロニクス、日経BP社、２００５年２月２８日、８９頁乃至１１７頁に記載されているＣｅｌｌを採用することができる。
【０２０５】
CPU２０１にはまた、バス２０４を介して入出力インタフェース２０５が接続されている。入出力インタフェース２０５には、キーボード、マウス、マイクロホンなどよりなる入力部２０６、ディスプレイ、スピーカなどよりなる出力部２０７が接続されている。CPU２０１は、入力部２０６から入力される指令に対応して各種の処理を実行する。そして、CPU２０１は、処理の結果を出力部２０７に出力する。
【０２０６】
入出力インタフェース２０５に接続されている記憶部２０８は、例えばハードディスクからなり、CPU２０１が実行するプログラムや各種のデータを記憶する。通信部２０９は、インターネットやローカルエリアネットワークなどのネットワークを介して外部の装置と通信する。
【０２０７】
また、通信部２０９を介してプログラムを取得し、記憶部２０８に記憶してもよい。
【０２０８】
入出力インタフェース２０５に接続されているドライブ２１０は、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア２１１が装着されたとき、それらを駆動し、そこに記録されているプログラムやデータなどを取得する。取得されたプログラムやデータは、必要に応じて記憶部２０８に転送され、記憶される。
【０２０９】
上述した一連の処理は、ハードウエアにより実行させることもできるし、ソフトウエアにより実行させることもできる。一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
【０２１０】
コンピュータにインストールされ、コンピュータによって実行可能な状態とされるプログラムを格納するプログラム記録媒体は、図１９に示すように、磁気ディスク（フレキシブルディスクを含む）、光ディスク(CD‐ROM(Compact Disc‐Read Only Memory)、DVD(Digital Versatile Disc)、光磁気ディスクを含む）、もしくは半導体メモリなどよりなるパッケージメディアであるリムーバブルメディア２１１、または、プログラムが一時的もしくは永続的に格納されるROM２０２や、記憶部２０８を構成するハードディスクなどにより構成される。プログラム記録媒体へのプログラムの格納は、必要に応じてルータ、モデムなどのインタフェースである通信部２０９を介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を利用して行われる。
【０２１１】
なお、本明細書において、プログラム記録媒体に格納されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【０２１２】
また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。
【０２１３】
なお、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【図面の簡単な説明】
【０２１４】
【図１】本発明を適用した記録再生システムの一実施の形態の構成例を示すブロック図である。
【図２】図１の記録制御部１３の構成例を示すブロック図である
【図３】図２の記録制御部１３における処理を示すフローチャートである。
【図４】図１の再生制御部１５の構成例を示すブロック図である。
【図５】図４の再生制御部１５における処理を示すフローチャートである。
【図６】図１の記録制御部１３の他の構成例を示すブロック図である。
【図７】図６のＭＰd差分情報取得部５４における処理の一例について説明する第１の図である。
【図８】図６のＭＰd差分情報取得部５４における処理の一例について説明する第２の図である。
【図９】図６のＭＰd差分情報取得部５４における処理の一例について説明する第３の図である。
【図１０】図６の記録制御部１３における処理を示すフローチャートである。
【図１１】図１の再生制御部１５の他の構成例を示すブロック図である。
【図１２】図１１の再生制御部１５における処理を示すフローチャートである。
【図１３】図１の記録制御部１３のさらに他の構成例を示すブロック図である。
【図１４】図１３のＭＰd差分情報取得部１０４における処理の一例を説明する図である。
【図１５】図１３の記録制御部１３における処理を示すフローチャートである。
【図１６】図１の再生制御部１５のさらに他の構成例を示すブロック図である。
【図１７】図１６の再生制御部１５における処理を示すフローチャートである。
【図１８】本発明を適用した記録再生システムの他の一実施の形態の構成例を示すブロック図である。
【図１９】本発明を適用したコンピュータの構成例を示す図である。
【符号の説明】
【０２１５】
１１  記録再生装置，  １２  ＨＤＴＶカメラ，  １３  記録制御部，  １４  ＨＤＤ，  １５  再生制御部，  １６  モニタ，  ２１  入出力インタフェース，  ２２  ＭＰ１取得部，  ２３  間引き部，  ２４  マルチプレックス部，  ４１  入出力インタフェース，  ４２  デマルチプレックス部，  ４３  画像処理部，  ４４  ノイズリダクション部，  ４５  補間部，  ５２  フレーム間引き部，  ５３  ＭＰ２取得部，  ５４  ＭＰd差分情報取得部，  ５５  圧縮部，  ８３  解凍部，  ８４  ＭＰ１復元部，  ８５  フレーム補間部，  １０２  ダウンコンバート部，  １０３  MP２取得部，  １０４  MPd差分情報取得部，  １０５  圧縮部，  １２３  解凍部，  １２４  ＭＰ２取得部，  １２５  MP１復元部，  １２６  アップコンバート部，  １４１  記録装置，  １４２  ＨＤＴＶカメラ，  １４３  記録制御部，  １４４  ＨＤＤ，  １４５  送信制御部，  １５１  再生装置，  １５２  受信制御部，  １５３  ＨＤＤ，  １５４  再生制御部，  １５５  モニタ，  ２０１  CPU， ２０２  ROM，  ２０３  RAM，  ２０４  バス，  ２０５  入出力インタフェース，  ２０６  入力部，  ２０７  出力部，  ２０８  記憶部，  ２０９  通信部，  ２１０  ドライブ，  ２１１  リムーバブルメディア
【図１】
0004529874.tif 000002
【図２】
0004529874.tif 000003
【図３】
0004529874.tif 000004
【図４】
0004529874.tif 000005
【図５】
0004529874.tif 000006
【図６】
0004529874.tif 000007
【図７】
0004529874.tif 000008
【図８】
0004529874.tif 000009
【図９】
0004529874.tif 000010
【図１０】
0004529874.tif 000011
【図１１】
0004529874.tif 000012
【図１２】
0004529874.tif 000013
【図１３】
0004529874.tif 000014
【図１４】
0004529874.tif 000015
【図１５】
0004529874.tif 000016
【図１６】
0004529874.tif 000017
【図１７】
0004529874.tif 000018
【図１８】
0004529874.tif 000019
【図１９】
0004529874.tif 000020