(57)【要約】【課題】既に記録されている映像と同一な箇所を高精度に探して削除し、記録データ量を削減する映像記録装置を提供する。【解決手段】入力された映像を単位映像に分割する映像分割手段１０１と、単位映像中の比較が困難な領域ないしは時間帯からなる比較困難領域を検出し、比較難易度情報を出力する比較難易度判定手段１０２と、単位映像から比較困難領域を除外して特徴量を抽出する特徴量抽出手段１０３と、比較難易度情報および特徴量を記録するメタデータ記録手段１０４と、特徴量を用いて既に記録された映像の中から入力された単位映像と同一の同一単位映像を発見する同一映像発見手段１０５と、単位映像と同一単位映像の比較結果から単位映像の一部または全てを削除して圧縮した圧縮単位映像を出力すると共に、圧縮単位映像を復元するために必要なリンク情報を出力する映像圧縮手段１０６と、リンク情報を記録するリンク情報記録手段１０８と、を備える。【選択図】図１
2014022874.tif 000002
【特許請求の範囲】
【請求項１】
入力された映像ストリームを単位映像に分割する映像分割手段と、
前記単位映像中の比較が困難な領域ないしは時間帯からなる比較困難領域を検出し、比較難易度情報を出力する比較難易度判定手段と、
前記単位映像から前記比較困難領域を除外して特徴量を抽出する特徴量抽出手段と、
前記比較難易度情報および前記特徴量を記録するメタデータ記録手段と、
前記特徴量を用いて既に前記メタデータ記録手段に記録された映像の中から入力された前記単位映像と同一の同一単位映像を発見する同一映像発見手段と、
前記単位映像と前記同一単位映像との比較結果を用いて前記単位映像の一部または全てを削除して圧縮した圧縮単位映像を出力すると共に、該圧縮単位映像を復元するために必要なリンク情報を出力する映像圧縮手段と、
該リンク情報を記録するリンク情報記録手段と、
を備えることを特徴とする映像記録装置。
【請求項２】
映像圧縮手段は、同一映像発見手段に入力された単位映像と同一の同一単位映像が発見された場合に、該単位映像または該同一単位映像のいずれかの比較困難領域を切り出して記録し、該比較困難領域以外の部分を削除することを特徴とする請求項１記載の映像記録装置。
【請求項３】
比較難易度判定手段は、映像内の文字領域を比較困難領域として検出することを特徴とする請求項１記載の映像記録装置。
【請求項４】
比較難易度判定手段は、映像内のイラスト画像が描画された領域を比較困難領域として検出することを特徴とする請求項１記載の映像記録装置。
【請求項５】
入力された映像ストリームを単位映像に分割する映像分割手段と、
前記単位映像を空間上および時間軸上で分割して複数の映像ブロックを出力するブロック分割手段と、
それぞれの前記映像ブロック中の比較が困難な領域ないしは時間帯からなる比較困難領域を検出し、比較難易度情報を出力する比較難易度判定手段と、
それぞれの前記映像ブロックから前記比較困難領域を除外して特徴量を抽出する特徴量抽出手段と、
前記比較難易度情報および前記特徴量を記録するメタデータ記録手段と、
前記特徴量を用いて既に前記メタデータ記録手段に記録された映像の中から入力された前記単位映像と同一の同一単位映像を発見する同一映像発見手段と、
前記単位映像と前記同一単位映像との比較結果を用いて前記単位映像の一部または全てを削除して圧縮した圧縮単位映像を出力すると共に、該圧縮単位映像を復元するために必要なリンク情報を出力する映像圧縮手段と、
該リンク情報を記録するリンク情報記録手段と、
を備えることを特徴とする映像記録装置。
【請求項６】
同一映像発見手段は、映像ブロックの映像を一時的に蓄積する映像一時蓄積手段に蓄積された蓄積映像、およびメタデータ記録手段に記録されたメタデータ記録映像の中から記録データ量が最も小さくなる１つのマスター映像と該マスター映像を参照する複数の非マスター映像を選択するマスター映像選択手段によって構成され、
映像圧縮手段は、前記マスター映像はそのまま出力し、前記非マスター映像は前記マスター映像と比較して異なる部分のみを出力し、
該映像圧縮手段により得られた圧縮単位映像を復元するために必要なリンク情報を記録するリンク情報記録手段と、
を備えることを特徴とする請求項５記載の映像記録装置。
【請求項７】
マスター映像選択手段は、映像一時蓄積手段に蓄積した蓄積映像の付加情報を記録する付加情報記録手段からの該付加情報、映像ブロックの映像を一時的に蓄積する映像一時蓄積手段に蓄積された蓄積映像、およびメタデータ記録手段に記録されたメタデータ記録映像の中から映像データ量が最も小さくなる１つのマスター映像と該マスター映像を参照する複数の非マスター映像を選択するものであることを特徴とする請求項６記載の映像記録装置。
【請求項８】
入力された映像ストリームを単位映像に分割する映像分割手段と、
前記単位映像中の比較が困難な領域ないしは時間帯からなる比較困難領域を検出し、比較難易度情報を出力する比較難易度判定手段と、
前記単位映像から前記比較困難領域を除外して特徴量を抽出する特徴量抽出手段と、
前記比較難易度情報および前記特徴量を記録するメタデータ記録手段と、
前記特徴量を用いて既に前記メタデータ記録手段に記録された映像の中から入力された前記単位映像と同一の同一単位映像を発見する同一映像発見手段と、
前記単位映像と前記同一単位映像との比較結果を用いて前記単位映像の一部または全てを削除して圧縮した圧縮単位映像を出力すると共に、該圧縮単位映像を復元するために必要なリンク情報を出力する映像圧縮手段と、
前記圧縮単位映像を記録する映像記録手段と、
前記リンク情報を基に前記映像記録手段から再生対象映像を復元するために必要な全ての必要圧縮単位映像を発見し、該必要圧縮単位映像を用いて前記再生対象映像を復元して出力する映像重畳手段と、
を具備することを特徴とする映像再生装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像を記録、再生する映像記録装置および映像再生装置に関するものである。
【背景技術】
【０００２】
映像データは、音声データに比べてデータ量が非常に多く、映像データの記録には圧縮技術が不可欠となっている。例えば特許文献１には映像データの圧縮方法としてフレーム間の差分情報を用いて映像データを圧縮する技術が記載されている。
【０００３】
しかし映像の高画質化や映像を記録するレコーダの多チューナー化により、映像の記録データ量をより効果的に削減する方法が要求されている。このような方法として、例えば特許文献２には、映像を記録する際に既に記録されている映像と同一である箇所を探し、そのような箇所を削除することで記録データ量を効果的に削減する技術が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００２−２７１７４４号公報
【特許文献２】特開２００６−２６２３１１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
特許文献２の方法では、新たに記録する映像を複数のデータ単位に分割し、既に記録されているデータ単位と比較して同一である箇所を発見して削除する。しかし、データ単位の一部に比較が困難な領域（例えば文字領域やイラスト画像領域等）が含まれている場合は、比較の精度が低下し、ほぼ同一だが一部のみが異なる映像を発見できなかったり、逆に、異なる映像を同一と判断して誤って削除してしまうといった課題があった。
【０００６】
本発明は、上記のような課題を解決するためになされたもので、映像を記録する際に既に記録されている映像と同一である箇所をより高精度に探し出して削除することで、記録データ量を効果的に削減することが可能な映像記録装置、および、同一映像の箇所をより高精度に探し出して削除することにより記録データ量を効果的に削減した映像を、完全な映像と同様に容易に再生することが可能な映像再生装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するため、この発明の映像記録装置は、入力された映像ストリームを単位映像に分割する映像分割手段と、単位映像中の比較が困難な領域ないしは時間帯からなる比較困難領域を検出し、比較難易度情報を出力する比較難易度判定手段と、単位映像から比較困難領域を除外して特徴量を抽出する特徴量抽出手段と、比較難易度情報および特徴量を記録するメタデータ記録手段と、特徴量を用いて既にメタデータ記録手段に記録された映像の中から入力された単位映像と同一の同一単位映像を発見する同一映像発見手段と、単位映像と同一単位映像との比較結果を用いて単位映像の一部または全てを削除して圧縮した圧縮単位映像を出力すると共に、圧縮単位映像を復元するために必要なリンク情報を出力する映像圧縮手段と、リンク情報を記録するリンク情報記録手段と、を備えるものである。
【０００８】
また、この発明の映像記録装置は、入力された映像ストリームを単位映像に分割する映像分割手段と、単位映像を空間上および時間軸上で分割して複数の映像ブロックを出力するブロック分割手段と、それぞれの映像ブロック中の比較が困難な領域ないしは時間帯からなる比較困難領域を検出し、比較難易度情報を出力する比較難易度判定手段と、それぞれの映像ブロックから比較困難領域を除外して特徴量を抽出する特徴量抽出手段と、比較難易度情報および特徴量を記録するメタデータ記録手段と、特徴量を用いて既にメタデータ記録手段に記録された映像の中から入力された単位映像と同一の同一単位映像を発見する同一映像発見手段と、単位映像と同一単位映像との比較結果を用いて単位映像の一部または全てを削除して圧縮した圧縮単位映像を出力すると共に、圧縮単位映像を復元するために必要なリンク情報を出力する映像圧縮手段と、リンク情報を記録するリンク情報記録手段と、を備えるものである。
【０００９】
また、この発明の映像再生装置は、入力された映像ストリームを単位映像に分割する映像分割手段と、単位映像中の比較が困難な領域ないしは時間帯からなる比較困難領域を検出し、比較難易度情報を出力する比較難易度判定手段と、単位映像から比較困難領域を除外して特徴量を抽出する特徴量抽出手段と、比較難易度情報および特徴量を記録するメタデータ記録手段と、特徴量を用いて既にメタデータ記録手段に記録された映像の中から入力された単位映像と同一の同一単位映像を発見する同一映像発見手段と、単位映像と同一単位映像との比較結果を用いて単位映像の一部または全てを削除して圧縮した圧縮単位映像を出力すると共に、圧縮単位映像を復元するために必要なリンク情報を出力する映像圧縮手段と、圧縮単位映像を記録する映像記録手段と、リンク情報を基に映像記録手段から再生対象映像を復元するために必要な全ての必要圧縮単位映像を発見し、必要圧縮単位映像を用いて再生対象映像を復元して出力する映像重畳手段と、を具備するものである。
【発明の効果】
【００１０】
本発明の映像記録装置によれば、映像を記録する際に既に記録されている映像と同一である箇所をより高精度に探し出して削除することで、記録データ量を効果的に削減することができる。
【００１１】
また、本発明の映像再生装置によれば、既に記録されている映像と同一である箇所をより高精度に探し出して削除することにより、記録データ量を効果的に削減した映像を、完全な映像と同様に容易に再生することができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の実施の形態１に係る映像記録装置の全体構成の概略を示すブロック図である。
【図２】本発明の実施の形態１に係る映像記録装置による比較困難領域の検出の例を示す説明図である。
【図３】本発明の実施の形態１に係る映像記録装置の比較難易度情報のフォーマットの例を示す説明図である。
【図４】本発明の実施の形態１に係る映像記録装置の映像セグメント間の距離値を算出する例を示す説明図である。
【図５】本発明の実施の形態１に係る映像記録装置の映像セグメントの圧縮の仕方を示す説明図である。
【図６】本発明の実施の形態２に係る映像記録装置の全体構成の概略を示すブロック図である。
【図７】本発明の実施の形態２に係る映像記録装置における映像セグメントの分割の例を示す説明図である。
【図８】本発明の実施の形態２に係る映像記録装置における比較困難ブロックの例を示す説明図である。
【図９】本発明の実施の形態２に係る映像記録装置の映像ブロックへの番号の振り方の例を示す説明図である。
【図１０】本発明の実施の形態３に係る映像記録装置の全体構成の概略を示すブロック図である。
【図１１】本発明の実施の形態４に係る映像再生装置の要部の構成を示すブロック図である。
【発明を実施するための形態】
【００１３】
実施の形態１．
図１は本発明の実施の形態１に係る映像記録装置１０の全体構成の概略を示すブロック図である。
図１において、映像分割手段１０１は、入力された映像ストリームＶｓを復号し、単位映像を構成する映像セグメントＶｕに分割して、この映像セグメントＶｕを比較難易度判定手段１０２、特徴量抽出手段１０３および映像圧縮手段１０６に出力するようになっている。
比較難易度判定手段１０２は、映像分割手段１０１から出力された映像セグメントＶｕ中の比較が困難な領域ないしは時間帯からなる比較困難領域を検出して、比較難易度情報Ｃｕとして特徴量抽出手段１０３およびメタデータ記録手段１０４に出力するようになっている。
特徴量抽出手段１０３は、映像分割手段１０１から出力された映像セグメントＶｕから比較難易度判定手段１０２で検出された比較困難領域を除外して映像セグメントＶｕの同一性の判定に用いる特徴量Ｆｕを抽出し、この特徴量Ｆｕをメタデータ記録手段１０４および同一映像発見手段１０５に出力するようになっている。
【００１４】
メタデータ記録手段１０４は、既に記録されている映像セグメントＶｕ、および新しく入力された映像セグメントＶｕについて、比較難易度判定手段１０２から出力された比較難易度情報Ｃｕと特徴量抽出手段１０３から出力された特徴量Ｆｕを記録するようになっている。
【００１５】
また、映像分割手段１０１から出力された映像セグメントＶｕは、映像圧縮手段１０６を介して映像記録手段１０７に出力されるようになっている。
映像記録手段１０７に記録されている映像セグメントＶｕは同一映像発見手段１０５に出力され、同一映像発見手段１０５は、特徴量抽出手段１０３からの特徴量Ｆｕとメタデータ記録手段１０４に記録済みの比較難易度情報Ｃｏと記録済みの特徴量Ｆｏを用いて、入力された映像セグメントＶｕと同一の同一映像セグメントＳｕを発見して映像圧縮手段１０６に出力するようになっている。
【００１６】
映像圧縮手段１０６は、映像セグメントＶｕと同一映像セグメントＳｕとの比較結果を用いて映像セグメントＶｕの一部または全てを削除し、圧縮映像セグメントＰｕとして映像記録手段１０７に出力すると共に、圧縮映像セグメントＰｕを復元するために必要なリンク情報Ｌｕをリンク情報記録手段１０８に出力するようになっている。
映像記録手段１０７は、映像圧縮手段１０６から出力された圧縮映像セグメントＰｕを記録するようになっている。
リンク情報記録手段１０８は、映像圧縮手段１０６から出力された圧縮映像セグメントＰｕを復元するために必要なリンク情報Ｌｕを記録するようになっている。
【００１７】
次に、この映像記録装置１０による映像記録の動作について詳細に説明する。
まず、映像分割手段１０１は入力された映像ストリームＶｓを復号し、映像セグメントＶｕに分割する。この映像セグメントＶｕは、比較難易度判定手段１０２、特徴量抽出手段１０３および映像圧縮手段１０６に出力される。本実施の形態では映像ストリームＶｓをショット単位に分割し、ショット１つで１つの映像セグメントＶｕを構成するものとする。
ここでショットとは、切れ目なしに連続して撮影された映像の断片を指す。なお、映像セグメントＶｕは必ずしも上記の構成をとる必要はなく一定時間分のフレームや、関連のある複数のショットから構成されるものとしても良い。
【００１８】
次に、比較難易度判定手段１０２において、各ショットごとの映像セグメントＶｕから比較困難領域を検出する。本実施の形態においてはこの処理は次のように実行する。まず映像セグメントＶｕに含まれるフレームを一定間隔でサンプリングして、キーフレームとする。次に、各キーフレームについて文字領域の検出を行う。文字領域の検出には、例えば「堀修，“テロップ認識のための映像からの文字部抽出法”，情報処理学会研究報告．ＣＶＩＭ，［コンピュータビジョンとイメージメディア］９９（３），１２９−１３６，１９９９−０１−２１」で開示されている技術を用いる。
【００１９】
図２に示すように例えば、３０フレーム間隔Ａで抽出されたキーフレーム１２１において文字領域１２２が検出された場合、キーフレーム１２１が出現する時刻から次のキーフレームが出現する時刻までの文字領域１２２を比較困難領域（座標：（ｘ１，ｙ１）、サイズ：（ｗ１，ｈ１）、開始時間：ｓ１、終了時間：ｅ１）とする。
【００２０】
全てのキーフレームの処理を完了した後、全ての比較困難領域の情報を比較難易度情報Ｃｕとして特徴量抽出手段１０３およびメタデータ記録手段１０４に出力する。
図３に比較難易度情報Ｃｕのフォーマットの例を示す。比較難易度情報Ｃｕのフォーマットは、図３に示すフォーマット１２３に限る必要はなく、映像セグメントＶｕの各領域および各時間帯の比較難易度を表現できるフォーマットであればどのようなものでも良い。
【００２１】
また、文字領域１２２を検出する方法は、必ずしも上記の方法に限定する必要はなく、例えばキーフレーム１２１の抽出を行わずに、長時間に渡って動きが微小な領域を文字の出現する領域および時間帯として検出しても良い。
【００２２】
また比較困難領域１２３ａ，１２３ｂを検出する方法に関しても上記の方法に限定する必要はなく、例えばイラスト画像領域が存在する領域や時間帯を比較困難領域１２３ａ，１２３ｂとしても良い。文字領域やイラスト画像以外にもＰｉｃｔｕｒｅ  ｉｎ        Ｐｉｃｔｕｒｅとして画面に重畳されている領域を比較困難領域１２３ａ，１２３ｂとしても良い。
【００２３】
次に、特徴量抽出手段１０３において、映像セグメントＶｕから同一性の判定に用いる特徴量Ｆｕを抽出する。この特徴量Ｆｕをメタデータ記録手段１０４および同一映像発見手段１０５に出力する。
本実施の形態では、同一性の判定に用いる特徴量として、色ヒストグラムを用いる。まず、比較困難領域の検出を行った場合と同様に、映像セグメントＶｕに含まれるフレームを一定間隔でサンプリングしてキーフレーム１２１を得る。
【００２４】
次に、各キーフレームから色ヒストグラムを生成する。映像セグメントＶｕは入力映像ストリームＶｓを復号して得られるベースバンド画像であるので、ＹＵＶ色空間で表現されている。従って、色ヒストグラムもＹＵＶ平面のそれぞれについて生成する。なお、本実施の形態では色ヒストグラムのビン数は１つの色平面ごとに６４個とし、合計１９２個のビンからなる色ヒストグラムを生成する。
【００２５】
このとき前記キーフレーム１２１に比較困難領域１２３ａ，１２３ｂが含まれている場合、その領域を除外して特徴量Ｆｕの抽出を行う。本実施の形態においては、キーフレーム１２１に比較困難領域１２３ａ，１２３ｂが含まれていた場合に、比較困難領域１２３ａ，１２３ｂに含まれる画素を除いて色ヒストグラムを生成する。このようにして、特徴量Ｆｕを比較する際に比較困難領域の影響が現れないようにする。
【００２６】
なお、同一性の判定に用いる特徴量Ｆｕは、必ずしも上記のものである必要はなく、例えばＳＩＦＴ（Ｓｃａｌｅ−Ｉｎｖａｒｉａｎｔ  Ｆｅａｔｕｒｅ  Ｔｒａｎｓｆｏｒｍ）やＳＵＲＦ（Ｓｐｅｅｄｅｄ  Ｕｐ  Ｒｏｂｕｓｔ  Ｆｅａｔｕｒｅｓ）のような局所特徴量を使用しても良い。この場合には、比較困難領域１２３ａ，１２３ｂから検出された特徴点を使用しないようにすることで、比較困難領域１２３ａ，１２３ｂを除外して特徴量Ｆｕを抽出することができる。他にも、画像の周波数成分や符号化時の動きベクトルやブロックサイズ、ＭＰＥＧ−７（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔｓ    Ｇｒｏｕｐ）で規定されているＶｉｓｕａｌ  Ｓｉｇｎａｔｕｒｅなど、２つの映像セグメントＶｕの同一性を判定できる特徴量であればどのような特徴量を使用しても良い。
【００２７】
次に、メタデータ記録手段１０４において比較難易度情報Ｃｕおよび特徴量Ｆｕを映像セグメントＶｕとひもづけて記録する。メタデータ記録手段１０４に記録した情報は、次回以降の同一映像セグメントの検索で使用する。
【００２８】
次に同一映像発見手段１０５において、映像記録手段１０７に記録されている映像セグメントＶｕの中から、映像セグメントＶｕと同一の同一映像セグメントＳｕを発見する。
【００２９】
本実施の形態においては、同一映像セグメントＳｕの発見は次のように行う。まず、特徴量抽出手段１０３において抽出した特徴量Ｆｕと、メタデータ記録手段１０４に記録されている各映像セグメントの特徴量Ｆｏを比較し、映像セグメントＶｕと映像記録手段１０７に記録されている各映像セグメントＰｏとの距離値Ｄ1を求める。距離値Ｄ1は０から１の値を取るものとする。距離値Ｄ1の最小値が閾値ＴD1を上回る場合は、同一映像セグメントＳｎは発見できなかったものとする。そうでない場合は、距離値Ｄが最も小さい映像セグメントを選び、同一映像セグメントＳｕとする。
【００３０】
なお、同一映像セグメントＳｕの発見方法は上記の方法に限るものではない。例えばメタデータ記録手段１０４に記録されている特徴量Ｆｏを用いて、同一映像セグメントＳｕの候補となる映像セグメントを事前に絞りこみ、距離値を計算する回数を減らしても良い。
【００３１】
２つの映像セグメント間の距離値Ｄ1の算出は、本実施の形態においては次のように行う。まず、それぞれの映像セグメント内に含まれるキーフレームに関して時系列順に番号を振る。次に、番号が等しいキーフレームについて、それぞれフレーム間距離ＤFを計算する。なお、ＤFの計算には以下の式（１）を用いる。なお、ｉは色ヒストグラムのビンのインデックス、ｍi，ｎiは各キーフレームの色ヒストグラムのｉ番目のビンの値、ＮFは１フレームあたりの画素数である。
2014022874.tif 000003
【００３２】
上記のフレーム間距離ＤFの平均値を、２つの映像セグメント間の距離値Ｄ1とする。２つの映像セグメント１３０，１４０間の距離値Ｄ1の算出の例を図４に示す。Ｄ1は以下の式（２），（３）を用いて算出する。なお、Ｋ1，Ｋ2はそれぞれ、図４に示す映像セグメント１３０，１４０に含まれるキーフレーム数を示す。
2014022874.tif 000004
ＭF＝ｍｉｎ（Ｋ1，Ｋ2）          （３）
なお、距離値Ｄ1の算出方法は上記の方法に限るものではなく、小さいほど映像セグメントの同一性が高くなるような値を求められればどのような方法でも良い。例えば、特徴量ＦｕとしてＳＩＦＴを用いる場合であれば、マッチに失敗した特徴点の割合や、特徴点間の最小ユークリッド距離の合計などを距離値Ｄ1として用いることができる。
【００３３】
次に、映像圧縮手段１０６において映像セグメントＶｕの一部あるいは全てを削除し、圧縮映像セグメントＰｕとリンク情報Ｌｕを生成する。
【００３４】
まず、本実施の形態においては、同一映像セグメントＳｕが発見され、かつ映像セグメントＶｕに比較困難領域が含まれていない場合、同一映像セグメントＳｕと映像セグメントＶｕのうち、より含まれるキーフレーム数が多い映像セグメントＶｕをマスター映像とし、そうでない映像セグメントを非マスター映像とする。ここで非マスター映像は復元および再生を行う際にマスター映像を参照する映像セグメント、マスター映像は非マスター映像に参照される映像セグメントと定義する。
【００３５】
映像圧縮手段１０６は非マスター映像とされた映像セグメントを削除し、マスター映像とされた映像セグメントを圧縮映像セグメントＰｕとして出力する。また、非マスター映像とされた映像セグメントを復元・再生するにあたって、マスター映像とされた映像セグメントが必要なことをリンク情報Ｌｕとして出力する。
【００３６】
次に、同一映像セグメントＳｕが発見され、かつ映像セグメントＶｕに比較困難領域が含まれている場合、まず比較困難領域が含まれていない場合と同様に、図５に示す如く、マスター映像１５１と非マスター映像１５３を選択する。次に、非マスター映像１５３とされた映像セグメントについて、比較困難領域１５４および、マスター映像１５１とされた映像セグメントにおいて比較困難領域１５２となっている領域および時間帯を切り出す。その後、非マスター映像１５３を削除し、マスター映像１５１とされた映像セグメントと、切り出した比較困難領域１５２，１５４を圧縮映像セグメントＰｕとして出力する。
なお、図５の矢印Ｂは時間軸方向を示す。
【００３７】
また、非マスター映像とされた映像セグメントを復元・再生するにあたって、マスター映像とされた映像セグメントが必要なことをリンク情報Ｌｕとして出力する。
【００３８】
なお、上記の圧縮映像セグメントの生成方法は一例であって、別の方法を用いても良い。例えば、同一映像セグメントが発見され、かつ映像セグメントＶｕに比較困難領域が含まれている場合には、マスター映像とされた映像セグメントと、非マスター映像とされた映像セグメントの差分を圧縮映像セグメントＰｕとして出力しても良い。この方法は、比較困難領域においても映像セグメント同士の類似度が高い場合に効果がある。
【００３９】
最後に、同一映像セグメントＳｕが発見されなかった場合、映像セグメントＶｕをマスター映像とし、圧縮セグメントＰｕとして出力する。リンク情報Ｌｕとしては何も出力しない。
【００４０】
次に、映像記録手段１０７において、圧縮映像セグメントＰｕを記録する。記録において、圧縮映像セグメントＰｕに含まれるマスター映像を記録するにあたっては、元の入力ストリームＶｓからマスター映像にあたる箇所を復号せずに切り出し、それを記録する。一方、圧縮映像セグメントＰｕに含まれるそれ以外の映像を記録するにあたっては、この映像をＨ.２６４で符号化して記録する。
なお、符号化方法は必ずしもＨ.２６４である必要はなくＭＰＥＧ−２やＭＰＥＧ-４、各種可逆符号化等、他の符号化方法であっても良い。
最後に、リンク情報記録手段１０８において、リンク情報Ｌｕを記録する。
【００４１】
以上のように、上記に示した本発明の実施の形態１に係る映像記録装置１０によれば、入力された映像ストリームを単位映像に分割する映像分割手段１０１と、単位映像中の比較が困難な領域ないしは時間帯からなる比較困難領域を検出し、比較難易度情報を出力する比較難易度判定手段１０２と、単位映像から比較困難領域を除外して特徴量を抽出する特徴量抽出手段１０３と、比較難易度情報および特徴量を記録するメタデータ記録手段１０４と、特徴量を用いて既にメタデータ記録手段１０４に記録された映像の中から入力された単位映像と同一の同一単位映像を発見する同一映像発見手段１０５と、単位映像と同一単位映像との比較結果を用いて単位映像の一部または全てを削除して圧縮した圧縮単位映像を出力すると共に、圧縮単位映像を復元するために必要なリンク情報を出力する映像圧縮手段１０６と、リンク情報を記録するリンク情報記録手段１０８と、を備えるように構成したので、映像を記録する際に既に記録されている映像と同一である箇所をより高精度に探し出して削除することで、記録データ量を効果的に削減することができる。
【００４２】
実施の形態２．
本発明の実施の形態１では、入力ストリームを映像セグメントに分割し、すでに記録されている映像と同一の映像セグメントが発見された場合には、それらの映像セグメントの一部および全てを削除することで、より多くの映像を装置に記録できるようにする映像記録装置を示した。実施の形態１においては同一性の判定は映像セグメント全体で行っていたが、実施の形態２では映像セグメントをさらにブロックに分割し、ブロックごとに同一性を判定する映像記録装置について述べる。
【００４３】
図６は、本発明の実施の形態２に係る映像記録装置２０の全体構成の概略について示すブロック図であり、実施の形態１の図１に示された映像記録装置１０に対して、ブロック分割手段２０１を備える点で異なる。なお、実施の形態１と同様の構成については、同一の符号を付して説明を省略する。
【００４４】
図６に示す、映像分割手段１０１は実施の形態１に係る映像記録装置１０におけるものと同様である。
ブロック分割手段２０１は、映像分割手段１０１から出力された映像セグメントＶｕを空間上、時間軸上で分割し、映像ブロックＶｂとして比較難易度判定手段２０２、特徴量抽出手段２０３、映像圧縮手段２０６に出力するようになっている。
【００４５】
比較難易度判定手段２０２は、ブロック分割手段２０１から出力された映像セグメントＶｕに含まれるそれぞれの映像ブロックＶｂ中の比較が困難な領域ないしは時間帯からなる比較困難領域を検出し、比較難易度情報Ｃｂとして特徴量抽出手段２０３およびメタデータ記録手段１０４へ出力するようになっている。
特徴量抽出手段２０３はブロック分割手段２０１から出力された映像ブロックＶｂから比較難易度判定手段２０２で検出された比較困難領域を除外して同一性の判定に用いる特徴量Ｆｂを抽出する。この特徴量Ｆｂをメタデータ記録手段１０４および同一映像発見手段２０５に出力するようになっている。
【００４６】
また、ブロック分割手段２０１から出力された映像セグメントＶｕに含まれる各映像ブロックＶｂは、映像圧縮手段２０６を介して映像記録手段１０７に出力されるようになっている。
映像記録手段１０７に記録されている映像セグメントは、同一映像発見手段２０５に出力され、同一映像発見手段２０５は、特徴量抽出手段２０３からの特徴量Ｆｂとメタデータ記録手段１０４に記録済みの比較難易度情報Ｃｏと記録済みの特徴量Ｆｏを用いて、入力された映像セグメントＶｕと同一映像セグメントＳｕを発見して映像圧縮手段２０６に出力するようになっている。
【００４７】
映像圧縮手段２０６は、映像セグメントＶｕと同一映像セグメントＳｕとの比較結果を用いて、映像セグメントＶｕに含まれる一部または全ての映像ブロックを削除し、圧縮映像セグメントとして映像記録手段１０７に出力すると共に、圧縮映像セグメントＰｕを復元するために必要なリンク情報Ｌｕをリンク情報記録手段１０８に出力するようになっている。
映像記録手段１０７およびリンク情報記録手段１０８は、実施の形態１に係る映像記録装置１０におけるものと同様である。
【００４８】
次に、映像記録装置２０による映像記録の動作について詳細に説明する。
まず、実施の形態１に係る映像記録装置１０と同様に、映像分割手段１０１において入力された映像ストリームＶｓを復号し、映像セグメントＶｕに分割して、ブロック分割手段２０１へ出力する。
【００４９】
次に、ブロック分割手段２０１において、映像セグメントＶｕを映像ブロックＶｂに分割する。この映像ブロックＶｂは、比較難易度判定手段２０２、特徴量抽出手段２０３および映像圧縮手段２０６に出力される。
図７に示すように、映像セグメント２１０における空間上での映像ブロックＶｂのサイズは６４画素×６４画素とし、時間軸Ｂ上での映像ブロックの幅は３０フレーム分とする。なお、空間上での映像ブロックＶｂのサイズは６４画素×６４画素に限る必要はなく、特徴量の抽出が可能なサイズであればどのようなサイズでも良い。同様に、時間軸上での映像ブロックの幅も３０フレームに限る必要はなく、特徴量の抽出に必要なフレーム数を満たしていればどのような数値でも良い。
【００５０】
次に、比較難易度判定手段２０２において、映像セグメントＶｕに含まれる各映像ブロックＶｂの比較難易度を判定する。それぞれの映像ブロックＶｂ中の比較が困難な領域ないしは時間帯からなる比較困難領域が検出され、比較難易度情報Ｃｂとしてメタデータ記録手段１０４および特徴量抽出手段２０３に出力される。
本実施の形態においては、図８に示すように、まず比較難易度判定手段１０２と同様の方法で、比較困難領域２１４を検出する。次に、映像セグメントＶｕに含まれる映像ブロックＶｂごとに比較困難領域を含んでいるかどうかを判定する。比較困難領域２１４を含んでいる映像ブロックＶｂは比較困難ブロック２１５とする。
【００５１】
ここで、各映像ブロックＶｂの比較難易度の判定は、必ずしも上記の方法による必要はない。例えば、それぞれの映像ブロックＶｂごとに文字検出やイラスト画像検出を行い、比較難易度を判定しても良い。また、比較困難領域を含む映像ブロックＶｂを全て比較困難ブロック２１５とするのではなく、比較困難領域を一定割合以上含む映像ブロックＶｂを比較困難ブロック２１５としても良い。もしくは、比較難易度を２値で表現するのではなく、映像ブロックＶｂ内の比較困難領域の割合を、この映像ブロックＶｂの比較難易度としても良い。
【００５２】
次に、特徴量抽出手段２０３において、映像セグメントＶｕに含まれる各映像ブロックＶｂから特徴量の抽出を行う。本実施の形態では、映像記録装置１０と同様に特徴量として色ヒストグラムを用いる。特徴量は映像ブロックに含まれる全フレームから取得する。従って、映像ブロックの各フレームについてＹＵＶの色ヒストグラムを生成し、各フレームの色ヒストグラムの平均を取ることで特徴量とする。
また映像ブロックＶｂが比較困難ブロック２１５である場合には、特徴量の抽出を省略する。これにより、特徴量の抽出時間を短縮することができる。
【００５３】
次に、メタデータ記録手段１０４において比較難易度情報Ｃｂおよび特徴量Ｆｂを記録する。
次に、同一映像発見手段２０５において、映像記録手段１０７に記録されている映像セグメントの中から映像セグメントＶｕの同一映像セグメントＳｕを発見する。
【００５４】
本実施の形態においては、同一映像セグメントＳｕの発見は次のように行う。まず、特徴量Ｆｂを用いて、映像セグメントＶｕと、映像記録手段１０７に記録されているそれぞれの映像セグメントとの距離値Ｄ2を求める。距離値Ｄ2は０から１の値を取るものとする。距離値Ｄ2の最小値が閾値ＴD2を上回る場合、同一映像セグメントは発見できなかったものとする。そうでない場合、距離値Ｄ2が最も小さい映像セグメントを選び、同一映像セグメントＳｕとする。
【００５５】
距離値Ｄ2の算出は、本実施の形態については次のように行う。まず、比較対象とする２つの映像セグメントについて、含まれる映像ブロックＶｂに番号を振る。番号の振り方の例を図９に示す。
【００５６】
次に、番号が同じブロックについて、ブロック距離値ＤBを算出する。ただし、番号が同じ２つのブロックのうちいずれかが比較困難ブロック２１５の場合は、計算をスキップする。ブロック距離値ＤBは、以下の式（４）で算出する。なお、ｉは色ヒストグラムのビンのインデックス、ｍi、ｎiは、各映像ブロックの色ヒストグラムのｉ番目のビンの値、ＮBは１ブロックあたりの画素数である。
2014022874.tif 000005
【００５７】
ブロック距離値ＤBが閾値ＴDBを下回る場合、この映像ブロックを同一映像ブロックとする。そうでない場合、この映像ブロックを非同一映像ブロックとする。映像セグメントに含まれる全ての映像ブロックに関して同一ブロックか否かの判定を行った後に、以下の式（５）で距離値Ｄ2を算出する。なおＢAは映像セグメントに含まれる比較困難ブロック２１５でないブロックの個数、ＢSは映像セグメントに含まれる同一ブロックの個数である。
Ｄ2＝（ＢA−Ｂs）／ＢA          （５）
【００５８】
なお、ブロック距離値ＤBおよび距離値Ｄ2の算出方法は上記の方法に限るものではなく、小さいほど映像セグメントの同一性が高くなるような値を算出する方法であればどのような方法でも良い。
【００５９】
次に、映像圧縮手段２０６において、映像セグメントＶｕおよび同一映像セグメントＳｕの一部あるいは全てを削除し圧縮映像セグメントＰｕとリンク情報Ｌｕを生成する。
まず、本実施の形態においては、同一映像セグメントＳｕが発見された場合、同一映像セグメントＳｕと映像セグメントＶｕのうち、より含まれる映像ブロックＶｂが多い映像セグメントをマスター映像とし、そうでない映像セグメントを非マスター映像とする。
【００６０】
次に、非マスター映像とされた映像セグメントについて、マスター映像の番号の同じブロックと同一であると判定されたブロックを全て削除する。なお、ここでの番号は同一映像発見手段２０５と同様の順序で振るものとする。
【００６１】
その後、マスター映像とされた映像セグメントと、同一ブロックを削除した非マスター映像を圧縮映像セグメントＰｕとして出力する。また、非マスター映像とされた映像セグメントを復元・再生するにあたって、マスター映像とされた映像セグメントが必要なことをリンク情報Ｌｕとして出力する。
【００６２】
一方、同一映像セグメントＳｕが発見されなかった場合は、映像セグメントＶｕをマスター映像とし、圧縮映像セグメントＰｕとして出力する。リンク情報Ｌｕとしては何も出力しない。
【００６３】
最後に映像記録装置１０と同様に映像記録手段１０７およびリンク情報記録手段１０８によって、圧縮映像セグメントＰｕおよびリンク情報Ｌｕを記録する。
【００６４】
以上のように、上記に示した本発明の実施の形態２に係る映像記録装置２０によれば、入力された映像ストリームを単位映像に分割する映像分割手段１０１と、単位映像を空間上および時間軸上で分割して映像ブロックを出力するブロック分割手段２０１と、それぞれの映像ブロック中の比較が困難な領域ないしは時間帯からなる比較困難領域を検出し、比較難易度情報を出力する比較難易度判定手段２０２と、それぞれの映像ブロックから比較困難領域を除外して特徴量を抽出する特徴量抽出手段２０３と、比較難易度情報および特徴量を記録するメタデータ記録手段１０４と、特徴量を用いて既にメタデータ記録手段１０４に記録された映像の中から入力された単位映像と同一の同一単位映像を発見する同一映像発見手段２０５と、単位映像と同一単位映像との比較結果を用いて単位映像の一部または全てを削除して圧縮した圧縮単位映像を出力すると共に、圧縮単位映像を復元するために必要なリンク情報を出力する映像圧縮手段２０６と、リンク情報を記録するリンク情報記録手段１０８と、を備えるように構成したので、実施の形態１と同様の効果が得られると共に、入力されたストリームを映像セグメントに分割した後さらにブロック単位に分割することで、映像の同一性の判定および、同一と判定された領域の削除を部分的に行うことが可能となる。
【００６５】
実施の形態３．
本発明の実施の形態１および２では、新しく映像が入力された際に、入力ストリームを映像セグメントに分割し、既に記録された各映像セグメントと比較して同一な映像セグメントを発見することで、新しく記録する映像のデータ量を削減する映像記録装置を示した。
実施の形態３では、新しく映像が入力された際にはその映像を一定期間蓄積しておき、その後蓄積された映像の中で同一性の判定を行い、蓄積された映像を記録する際に、そのデータ量の合計が最も小さくなるようにする映像記録装置について述べる。
【００６６】
図１０は、本発明の実施の形態３に係る映像記録装置３０の全体構成の概略を示すブロック図であり、実施の形態２の図６に示された映像記録装置２０において、同一映像発見手段２０５を、映像ブロックＶｂの映像を一時的に蓄積する映像一時蓄積手段３０２に蓄積された蓄積映像、およびメタデータ記録手段１０４に記録済みの比較難易度情報Ｃｏと記録済みの特徴量Ｆｏからなるメタデータ記録映像の中から記録データ量が最も小さくなる１つのマスター映像とマスター映像を参照する複数の非マスター映像を選択するマスター映像選択手段３０３によって構成し、映像圧縮手段２０６を、マスター映像はそのまま出力し、非マスター映像はマスター映像と比較して異なる部分のみを出力するようにした映像圧縮手段３０４とした点で異なる。なお、実施の形態２と同様の構成については、同一の符号を付して説明を省略する。
【００６７】
図１０の映像分割手段１０１、ブロック分割手段２０１、比較難易度判定手段２０２、特徴量抽出手段２０３は実施の形態２に係る映像記録装置２０におけるものと同様である。
【００６８】
付加情報記録手段３０１は、映像分割手段１０１から出力される各映像セグメントＶｕの記録日時やシリーズ名等の付加情報Ｉｕを記録するようになっている。
映像一時蓄積手段３０２はブロック分割手段２０１から出力される映像セグメントＶｕに含まれる各映像ブロックＶｂを一時的に蓄積映像ブロックＴｎとして蓄積するようになっている。
【００６９】
マスター映像選択手段３０３は映像一時蓄積手段３０２に記録された複数の蓄積映像ブロックＴｎの中から、最もデータ量の合計を小さくするマスター映像と非マスター映像の組み合わせを発見し、マスター情報Ｍｎとして映像圧縮手段３０４に出力するようになっている。
【００７０】
映像圧縮手段３０４は、マスター映像選択手段３０３から出力されたマスター情報Ｍｎに基づいて、複数の映像セグメントにおいて一部または全ての映像ブロックを削除して、圧縮映像セグメントＰｎを映像記録手段１０７に出力すると共にリンク情報Ｌｎをリンク情報記録手段１０８に出力するようになっている。
【００７１】
次に、映像記録装置３０による映像記録の動作について詳細に説明する。
まず実施の形態２に係る映像記録装置２０と同様に、映像分割手段１０１およびブロック分割手段２０１によって入力された映像ストリームＶｓを復号し、映像セグメントＶｕに分割し、さらに映像セグメントＶｕを映像ブロックＶｂに分割して、比較難易度判定手段２０２、特徴量抽出手段２０３および映像一時蓄積手段３０２に出力される。
【００７２】
次に、実施の形態２に係る映像記録装置２０と同様に、比較難易度判定手段２０２および特徴量抽出手段２０３において、映像セグメントＶｕに含まれる各映像ブロックＶｂの比較難易度の判定、それぞれの映像ブロックＶｂから特徴量の抽出を行って、メタデータ記録手段１０４において、比較難易度情報Ｃｂおよび特徴量Ｆｂを記録する。
【００７３】
その後、付加情報記録手段３０１において、映像セグメントＶｕに関するさらなる付加情報Ｉｕを記録する。本実施の形態においては記録した日時とシリーズ名を付加情報Ｉｕとして記録する。シリーズ名とは、ドラマやアニメなど、複数回に分けて放映される一連の番組に共通する番組名を指す。例えば、複数回から構成されるドラマであれば、ドラマ名がシリーズ名にあたる。
【００７４】
付加情報Ｉｕとして記録する情報は日時とシリーズ名に限る必要はなく、マスター映像の選択時に参考にできる情報であればどのような情報でも良い。例えば入力ストリームＶｓ内における映像セグメントＶｕの開始時間を付加情報Ｉｕとしても良いし、映像セグメントＶｕがＣＭかどうか、映像セグメントＶｕが番組のオープニングやエンディングにあたるかどうか、といった情報を付加情報として記録しておいても良い。
【００７５】
次に映像一時蓄積手段３０２において、映像セグメントＶｕに含まれる各映像ブロックＶｂを記録する。
次に、マスター映像選択手段３０３において、映像一時蓄積手段３０２の状態が条件を満たすかどうかを判定する。本実施の形態では、映像一時蓄積手段３０２に一ヶ月以上前に記録された映像セグメントがある場合、条件を満たすとする。条件を満たさない場合、これ以降の動作は実行しない。
【００７６】
この判定において条件を満たすとされた場合、マスター映像選択手段３０３において、映像一時蓄積手段３０２に蓄積された映像の中から１つのマスター映像と１つ以上の非マスター映像の組み合わせを発見する。
【００７７】
本実施の形態３では、この組み合わせは次のように発見する。まず、映像一時蓄積手段３０２に最も前に記録された映像セグメントＢｕを選択する。次に、映像セグメントＢｕと同じシリーズ名を持つ全ての映像セグメントを選択する。選択した全ての映像を、マスター候補グループＳｇとする。
【００７８】
次に、マスター候補グループＳｇに含まれる各映像セグメントについて、この映像セグメントをマスターとし、マスター候補グループＳｇのそれ以外の映像を非マスターとした場合の記録データ量の大きさを評価する。
【００７９】
上記の記録データ量の大きさは、次のように評価する。まず、マスター候補グループＳｇから映像セグメント１つを選択する。この映像セグメントをＧｕとする。次に、マスター候補グループＳｇから、Ｇｕ以外の映像セグメント１つを選択する。この映像セグメントをＯｕとする。映像セグメントＧｕと映像セグメントＯｕに関して、同一映像セグメント発見装置２０５において同一映像セグメントを発見する場合と同じ方法で、映像セグメント同士の距離値Ｄｂを求める。
【００８０】
同様にして、マスター候補グループＳｇに含まれるＧｕ以外の映像セグメント全てについて、映像セグメントＧｕとの距離値Ｄｂを算出する。最後に、算出した距離値を全て合計し、映像セグメントＧｕをマスターとした場合の記録データ量の評価指標Ｅｕとする。Ｅｕが大きければ大きいほど、この映像セグメントをマスターとした場合の記録データ量は大きくなると評価する。
【００８１】
マスター候補グループＳｇにおいて、上記の評価指標Ｅｕが最も小さくなる映像セグメントをマスター映像とし、それ以外の映像セグメントを全て非マスター映像とする。
なお、マスター映像および非マスター映像の組み合わせの発見方法は上記の方法に限る必要はない。例えば、マスター候補グループＳｇを選択するにあたって、映像セグメントＢｕと同じシリーズを選択するのではなく、映像セグメントＢｕがＣＭかどうかを判定し、ＣＭであれば同じようにＣＭと判定された映像セグメントのみを選択し、そうでないならばそれ以外の映像セグメントのみを選択する、といった方法を用いても良い。
【００８２】
次に、映像圧縮手段３０４において、マスター情報Ｒｎを基に映像一時蓄積手段３０２からマスター映像および非マスター映像を取り出し、一部または全てを削除して、複数の圧縮映像セグメントＰｎと複数のリンク情報Ｌｎを生成する。
【００８３】
まず、映像一時蓄積手段３０２から取り出した映像セグメントのうち、マスター映像に関してはそのまま圧縮映像セグメントとして出力する。マスター映像に関しては、リンク情報を出力しない。次に、非マスター映像に関しては、マスター映像との比較において同一ブロックと判定された全てのブロックを削除し、圧縮映像セグメントとする。リンク情報としてはマスター映像へのリンクを出力する。
【００８４】
最後に、映像記録手段１０７は複数の圧縮映像セグメントＰｎを記録し、リンク情報記録手段１０８は複数のリンク情報Ｌｎを記録する。
【００８５】
以上のように、上記に示した本発明の実施の形態３に係る映像記録装置３０によれば、実施の形態２の映像記録装置２０において、同一映像発見手段２０５を、映像ブロックの映像を一時的に蓄積する映像一時蓄積手段３０２に蓄積された蓄積映像、およびメタデータ記録手段１０４に記録されたメタデータ記録映像の中から記録データ量が最も小さくなる１つのマスター映像とマスター映像を参照する複数の非マスター映像を選択するマスター映像選択手段３０３によって構成し、映像圧縮手段２０６を、マスター映像はそのまま出力し、非マスター映像はマスター映像と比較して異なる部分のみを出力するようにした映像圧縮手段３０４とすると共に、得られた圧縮単位映像を復元するために必要なリンク情報を記録するリンク情報記録手段１０８とを備えるように構成したので、実施の形態１および実施の形態２と同様の効果が得られると共に、入力されたストリームを映像セグメントに分割した後に蓄積しておき、同一性の高い映像セグメントが複数蓄積されてからどの映像をマスターとして用いるかを選択することで、より効率的に同一な領域を削除することが可能となる。
【００８６】
実施の形態４．
本発明の実施の形態１から３では、新しく入力された映像または既に蓄積された映像の中から、同一の箇所を発見および削除することで、より多くの映像を記録可能な映像記録装置を示した。
実施の形態４では、上記の映像記録装置に記録された映像を再生するための映像再生装置について述べる。
【００８７】
本発明の実施の形態４に係る映像再生装置の要部の構成を示すブロック図を図１１に示す。
図１１の映像再生装置４０において、映像記録手段１０７およびリンク情報記録手段１０８は、実施の形態１に係る映像記録装置１０におけるものと同様である。
映像重畳手段４０１は、リンク情報Ｌｕを元に映像記録手段１０７から再生対象の映像を構成するために必要な全ての映像セグメント（以下、「参照セグメント」と記述する）を発見し、参照セグメントＲｎを用いて再生対象の映像を構成して映像表示手段４０２に出力するようになっている。
映像表示手段４０２は、映像重畳手段４０１が出力した再生映像Ｄｕを表示するようになっている。
【００８８】
次に、映像再生装置４０による映像再生の動作について詳細に説明する。
ある映像セグメントを再生する場合、まず、リンク情報記録手段１０８において、映像セグメント（以下、再生映像）に関するリンク情報Ｌｕを取得する。
【００８９】
次に、映像重畳手段４０１において、リンク情報Ｌｕを元に、映像記録手段１０７から再生映像を構成するために必要な参照セグメントＲｎを全て発見する。本実施の形態においては、再生映像がマスター映像として記録されている場合、参照セグメントはこの再生映像のみである。一方、再生映像が非マスター映像として記録されている場合、参照セグメントはこの再生映像と再生映像に対応するマスター映像となる。
【００９０】
次に、映像重畳手段４０１では、発見した参照セグメントＲｎを用いて再生映像Ｄｕを構成する。再生映像Ｄｕの構成は次のように行う。まず参照セグメントＲｎが単一の映像セグメントのみである場合は、映像重畳手段４０１は参照セグメントをそのまま再生映像Ｄｕとして出力する。
【００９１】
一方、参照セグメントＲｎがマスター映像と非マスター映像のペアであった場合には、本実施の形態においては、映像重畳手段４０１はまずそれぞれの映像を復号する。次に、復号したマスター映像に復号した非マスター映像を重畳する。ここで、映像記録装置２０のように、非マスター映像がブロックの集合として記録されている場合、単純に復号画像を重畳するとブロック境界にノイズが発生してしまう可能性がある。従って、本実施の形態では、マスター映像に非マスター映像を重畳した後、非マスター映像の境界部分にデブロッキングフィルタを適用し、再生映像Ｄｕとする。
【００９２】
なお、マスター映像に非マスター映像を重畳する場合に必ずデブロッキングフィルタを適用する必要があるわけではなく、処理を高速化するためにフィルタなしで出力しても良い。また、適用するフィルタは必ずしもデブロッキングフィルタでなくても良く、他のフィルタでも構わない。
最後に映像表示手段４０２において、再生映像Ｄｕを表示する。
【００９３】
以上、上記に示した本発明の実施の形態４に係る映像再生装置４０によれば、入力された映像ストリームを単位映像に分割する映像分割手段１０１と、単位映像中の比較が困難な領域ないしは時間帯からなる比較困難領域を検出し、比較難易度情報を出力する比較難易度判定手段１０２と、単位映像から比較困難領域を除外して特徴量を抽出する特徴量抽出手段１０３と、比較難易度情報および特徴量を記録するメタデータ記録手段１０４と、特徴量を用いて既にメタデータ記録手段１０４に記録された映像の中から入力された単位映像と同一の同一単位映像を発見する同一映像発見手段１０５と、単位映像と同一単位映像との比較結果を用いて単位映像の一部または全てを削除して圧縮した圧縮単位映像を出力すると共に、圧縮単位映像を復元するために必要なリンク情報を出力する映像圧縮手段１０６と、圧縮単位映像を記録する映像記録手段１０７と、リンク情報を元に映像記録手段１０７から再生対象映像を復元するために必要な全ての必要圧縮単位映像を発見し、必要圧縮単位映像を用いて再生対象映像を復元して出力する映像重畳手段４０１と、を具備するように構成したので、既に記録されている映像と同一である箇所をより高精度に探し出して削除することにより、記録データ量を効果的に削減した映像を、完全な映像と同様に容易に再生することができる。
【００９４】
また、本願発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。
【符号の説明】
【００９５】
１０，２０，３０  映像記録装置、４０  映像再生装置、１０１  映像分割手段、１０２，２０２  比較難易度判定手段、１０３，２０３  特徴量抽出手段、１０４  メタデータ記録手段、１０５，２０５  同一映像発見手段、１０６，２０６，３０４  映像圧縮手段、１０７  映像記録手段、１０８  リンク情報記録手段、１２１  キーフレーム、１２２  文字領域、１２３  フォーマット、１２３ａ，１２３ｂ，１５２，１５４，２１４  比較困難領域、１３０，１４０，２１０  映像セグメント、１５１  マスター映像、１５３  非マスター映像、２０１  ブロック分割手段、２１５  比較困難ブロック、３０１  付加情報記録手段、３０２  映像一時蓄積手段、３０３  マスター映像選択手段、４０１  映像重畳手段、４０２  映像表示手段。
【図１】
2014022874.tif 000006
【図２】
2014022874.tif 000007
【図３】
2014022874.tif 000008
【図４】
2014022874.tif 000009
【図５】
2014022874.tif 000010
【図６】
2014022874.tif 000011
【図７】
2014022874.tif 000012
【図８】
2014022874.tif 000013
【図９】
2014022874.tif 000014
【図１０】
2014022874.tif 000015
【図１１】
2014022874.tif 000016