(57)【特許請求の範囲】
【請求項１】
画像データを記憶するメモリと、
前記メモリから読み出された再生倍速数に等しい所定のフレーム数の画像データを記憶する作業バッファと、
前記作業バッファから順次読み出された所定数のフレームの各々の画像データを合成して１フレーム分の画面データにデータ処理された合成画像データを記憶する復号器バッファと、
前記復号器バッファの合成画像データを画面表示すべく出力する復号器と、
装置全体を制御する制御手段とを備え、
前記制御手段は、前記作業バッファから読み出した所定数の各フレームのそれぞれの画像データに対して、これら画像データを構成する画素の各色成分の輝度を、各フレームの読み出し順に漸次高くなる割合で、且つ全フレームの合計輝度が前記作業バッファからの読み出し時の輝度となる範囲内の割合で異なるように重み付けする演算処理を行い、この画素の各色成分の輝度が互いに異なるようにデータ処理された各フレームのそれぞれの画像データを合成する加算処理を行って１フレーム分の画面データの合成画像データを生成して、この合成画像データを前記復号器バッファに記憶させたのちに出力させる制御処理を行うことを特徴とする画像情報再生装置。
【請求項２】
前記制御手段が、合成画像をＭｉｘ、再生倍速数をＮ、フレーム番号をｉ、ｉ番面のフレームの輝度をｌｕｍｉとしたときに、
0003587376.tif 000004
の式に基づく演算処理を行って合成画像データを生成することを特徴とする請求項１に記載の画像情報再生装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、光ディスク等に記録された情報を倍速再生させる画像情報再生装置に係り、特に、高速再生時の動画像が滑らかで自然に見える表示を実現し得る画像情報再生装置に関する。
【０００２】
【従来の技術】
原画像を分割して作られる符号化単位であるブロックから画像を生成してモニタ等の画面に表示するとき、動画像が可能な限り自然で滑らかに見えるようにするために各種の提案がなされている。
例えば、ブロック歪みを低減して滑らかな復号画像を得ることを目的とする領域拡大を用いた画像の反復変換符号化装置及び復号装置が知られている（特開平８−７０４５５号公報参照）。
このものは、符号化の単位である隣接したブロック同志の間をお互いに重なり合うように生成させる手段として、オーバーラップブロック生成回路を備えている。
このオーバーラップブロック生成回路を設けると、再生処理（復号化）時にブロックを周辺の画像を含むように拡大してお互いに重なり合うようにし、さらに複数のブロックが重なり合った領域については重みづけ加算を行うので、ブロック歪みがなく滑らかな復号画像を得ることができるというものである。
【０００３】
ところで、この種の装置を含み、ＪＰＥＧ圧縮データを高速再生する装置においては、通常速度に対する倍速再生（再生倍率数）をｎとした場合、これに対応するｎフレームに１フレームの割合で画像データを抜き出し再生していた。
例えば、２倍速再生の場合、隣接したブロックの画像データが順次抜き出され、再生倍率数ｎにおいては数ブロックで１つといった割合で取り出される。
すると、再生された画像データと次に再生された画像データとの連続性が失われ、再生画像がコマ送り表示状態となるために、動画像が不自然で滑らかに見えなくなるという問題が生じていた。
【０００４】
そこで、このような不具合を解消することを目的としたＪＰＥＧ圧縮データ高速再生装置が提案されている（特開平９−１３０７９６公報参照）。
この装置は、再生倍率数の連続するフレームの画面データ群のそれぞれから、他のフレームと重複しない部分の画面データを抜き出して合成することにより、１フレーム分の画面データを再構成する制御部と、この制御部によって再構成された画面データの復号を行う復号器とを備えている。
そして、２倍速再生等を行う場合、制御部が記憶装置から１フレーム分の画面データを作業バッファに転送した後、この作業バッファ側より復号器バッファに対してデータを転送させる。
【０００５】
このとき、作業バッファ内の画面データの一部（部分画面データ）を、走査線位置が他のフレームについての部分画面データの走査線位置と重複しないように転送する。
このようにすると、従来であれば全く表示されていなかった画面データからも部分画面データを取り出し、かつこの部分画面データの集合として１フレーム分の画面データを再構成し、さらに再構成後の画面データに基づく再生出力を行える。
これにより、圧縮前の画像を再生するときに、ＪＰＥＧ圧縮データ中の「場面」が短時間であっても欠落することなく、滑らかな動きの高速再生を実現できるというものである。
【０００６】
【発明が解決しようとする課題】
ところが、上記従来のＪＰＥＧ圧縮データ高速再生装置は、倍速再生時に記憶装置から１フレーム分の画面データを作業バッファに転送した後、他のフレームと重複しない部分の画面データを抜き出して合成するため、短時間の「場面」を欠落させないような表示は可能であるが、動きを示す物に軌跡が残るような表示はできず、やはり動画像が不自然に見えるという欠点があった。
【０００７】
本発明は、上記課題に鑑みて創案されたもので、光ディスク等の記録情報を倍速再生するとき、動きを示す物に軌跡が残るようにして動画像が滑らかに見える表示を行うことができる画像情報再生装置を提供することを目的としている。
【０００８】
【課題を解決するための手段】
上記目的を達成するため、本発明のうち請求項１に記載の発明は、画像データを記憶するメモリと、前記メモリから読み出された再生倍速数に等しい所定のフレーム数の画像データを記憶する作業バッファと、前記作業バッファから順次読  み出された所定数のフレームの各々の画像データを合成して１フレーム分の画面データにデータ処理された合成画像データを記憶する復号器バッファと、前記復号器バッファの合成画像データを画面表示すべく出力する復号器と、装置全体を制御する制御手段とを備え、前記制御手段は、前記作業バッファから読み出した所定数の各フレームのそれぞれの画像データに対して、これら画像データを構成する画素の各色成分の輝度を、各フレームの読み出し順に漸次高くなる割合で、且つ全フレームの合計輝度が前記作業バッファからの読み出し時の輝度となる範囲内の割合で異なるように重み付けする演算処理を行い、この画素の各色成分の輝度が互いに異なるようにデータ処理された各フレームのそれぞれの画像データを合成する加算処理を行って１フレーム分の画面データの合成画像データを生成して、この合成画像データを前記復号器バッファに記憶させたのちに出力させる制御処理を行うことを特徴としている。また、請求項２に記載の発明は、前記制御手段が、合成画像をＭｉｘ、再生倍速数をＮ、フレーム番号をｉ、ｉ番面のフレームの輝度をｌｕｍｉとしたときに、
0003587376.tif 000002
の式に基づく演算処理を行って合成画像データを生成することを特徴としている。
【０００９】
【発明の実施の形態】
以下、本発明の実施の形態について、図示例を参照しながら説明する。
図１は、本発明に係る画像情報再生装置の電気的構成を示すブロック線図である。
この画像情報再生装置は、ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｉｄｅｏ  Ｄｉｓｃ）等の光ディスクに記録された画像データを再生するもので、所定方式で圧縮後、解凍された画像データを記憶するメモリ１と、このメモリ１から読み出した画像データを処理して画像を再生するための作業バッファ２、復号器バッファ３、復号器４および制御部５を備えて構成されている。
【００１０】
作業バッファ２は、メモリ１から読み出される複数フレームに対応した画像データを一時的に保持する。復号器バッファ３は、作業バッファ２から取り出される画像データで画面表示用の画面データを再構成するための記憶領域である。復号器４は、復号器バッファ３内で再構成された画面データの復号（再生）処理を行うものである。
制御部５は、マイクロコンピュータやプロセッサが用いられ、前記作業バッファ２から複数フレームの画像データを取り出すとき、それぞれの画像データを構成する画素の各色成分の輝度が所要の割合で異なるように重みづけを行い、これらの画像データを合成した後、この合成画像データを１フレーム分の画面データとして復号器バッファ３より復号器側に出力させる構成となっている。
【００１１】
次に、上記画像情報再生装置の再生動作について、図を参照しつつ説明する。この画像情報再生装置は、再生動作を指令するリモコンの入力操作によって、再生倍率数ｎでの高速再生が可能であり、ユーザーがリモコンで所望の倍速再生を入力すると、この倍速指令信号に基づき制御部５が動作を開始する。
ユーザーが、例えば、４倍速の再生操作を行うと、制御部５はこれに応じて一連の読み取り動作を実行させた後、その画像データを順次メモリ１に記憶させる。
そして、このメモリ１から再生倍率数ｎ＝４に等しいフレーム数４に対応する画像データを読み出して作業バッファ２に記憶させる。
【００１２】
つぎに、制御部５は、これら４フレームの各画像データを構成する画素の各色成分（基準は、カラーの３原色Ｒ，Ｇ，Ｂであるが、その他の色成分も含む）の輝度が所要の割合で異なるように重みづけの演算処理を行った後、これら４フレーム分の画像データを加算処理（平均化）する。
制御部５が、この重みづけ処理を行うときは、画面上で動きを示す物が軌跡を残す表示となるように、全フレームの画像データの輝度を最大値とした範囲内で、各色成分の輝度が前記画像データの取り出し順に漸次高くなる割合にし、これらの合成画像を生成させる。
【００１３】
但し、この合成画像を生成するために、本例では、下式（１）に基づく演算を行う。
0003587376.tif 000003
ここで、「Ｍｉｘ」は合成画像、「N 」は再生倍速数、「ｉ」はフレーム番号である。「ｌｕｍｉ」（ルミナンス）は、フレームｉ番目の輝度であり、演算処理時に注目される画素（ピクセル）の輝度を示している。各色成分Ｒ，Ｇ，Ｂの輝度は、各フレームの画像データ毎に異なり、それぞれの数値データで演算処理が実行されることになる。
【００１４】
すなわち、この制御部５は、上記（１）式における再生倍速数「N 」に４を、フレーム番号「ｉ」に０〜３までの数字を、「ｌｕｍｉ」にＲ，Ｇ，Ｂの各色成分の輝度データをそれぞれ代入しつつ演算する。これによって、図２の模式図で示す如くフレームＦ１が輝度１／１５のフレームＦ１１に、フレームＦ２が輝度２／１５のフレームＦ１２に、フレームＦ３が輝度４／１５のフレームＦ１３に、フレームＦ４が輝度８／１５のフレームＦ１４となる。つまり、各フレームＦ１〜Ｆ４の画像データは、各々の画素の各色成分の輝度を時間経過に伴い大きな割合で重み付けした画像データにデータ処理した各フレームＦ１１〜Ｆ１４にそれぞれ変換される。そして、これら４フレームＦ１１〜Ｆ１４分のデータが加算されることにより、フレームＦで示すような合計輝度１の合成画像データが得られる。なお，この合計輝度１は、作業バッファ２からの取り出し時の輝度に等しいものである。
【００１５】
制御部５は、この合成画像データを１フレームＦの画面データとして復号器バッファ３より復号器４側に出力させる。
これにより、モニタの画面には、４フレームＦ１１〜Ｆ１４分が重ね合わされた状態に表示され、動画像が自然で滑らかに見える。
例えば、ボールの飛んでいる場面の画像データがメモリ１に記憶されたとき、従来のように１フレーム分のみが作業バッファ２に読み出されると、図３（ａ）に示す如く画面６にはボール７が実線の状態で表示される。
【００１６】
一方、この実施の形態では、図２に示したように、４フレームＦ１〜Ｆ４分を作業バッファ２に読み出し、その各フレームＦ１〜Ｆ４の画像データを、各々の画素の各色成分の輝度が時間経過に伴い大きな割合で重み付けされた画像データにデータ処理したフレームＦ１１〜Ｆ１４に変換して、この各フレームＦ１１〜Ｆ１４の各々の画像データを合成処理した場合、図３（ｂ）〜（ｅ）の各画面６に破線で示されるように、合成されたボールの各画像の輝度が時間的に後になる程大きな割合で重み付けているので、ボールが連続的な表示状態となり、且つ時間的に後になる程大きな輝度で表示されるから、動画像に欠落が生じないだけでなく、図３（ｅ）に示す画面６で明らかな如くボール７の飛跡が若干残るような表示となる。よって、ユーザーには、残像により動画像が自然で滑らかに見えるものである。なお、上記実施の形態においては、４倍速再生について説明したが、２倍速あるいは５倍速といった高速再生の場合も、上式（１）に基づいて演算処理を行うことにより、滑らかで自然な動画像の再生を実現できる。
【００１７】
【発明の効果】
以上説明したように、本発明のうち請求項１に記載の発明は、作業バッファから再生倍速数に等しいフレーム数の画像データを取り出すとき、それぞれの画像データにおける画素の各色成分の輝度を、時間経過が後になるフレームに従って順次大きくなる所定の割合で重み付けして互いに異ならせ、この輝度を異ならせた各フレームの画像データを合成し、１フレーム分の合成画像データとして出力させるから、従来のように欠落部分が生じることがなく、動きを示す物が画面上で軌跡の残るように表示され、動画像が滑らかに見える高速再生を実現できる効果がある。また、請求項２に記載の発明は、再生倍速数を任意に高く設定した再生においても、再生倍速数に対応したフレーム数の各画像データにおける画素の各色成分の輝度を、時間経過が後になるフレームに従って順次大きくなる好適な割合で重み付けする演算処理を行うことができる。
【図面の簡単な説明】
【図１】本発明に係る画像情報再生装置の電気的構成を示すブロック線図である。
【図２】制御部による画像データの処理過程を説明するための模式図である。
【図３】動画像が画面に表示される状態を説明するための例示図である。
【符号の説明】
１  メモリ
２  作業バッファ
５  制御手段
【図１】
0003587376.tif 000005
【図２】
0003587376.tif 000006
【図３】
0003587376.tif 000007