(57)【要約】【課題】  コマ落ちの場合、フレーム補間処理で適切な補間フレームを生成できない。【解決手段】  画像処理装置１００は、画像遅延手段１、映像特徴量検出手段２、コマ落ち画像補間モード設定手段３および画像補間部４を備える。画像遅延手段１は、入力画像データＦ０を遅延させ、１つもしくは複数の遅延画像データＦ１を出力する。映像特徴量検出手段２は、入力画像データＦ０と遅延画像データＦ１から特徴量を判定して、映像特徴量検出結果ｆｔｒとして出力する。コマ落ち画像補間モード設定手段３は、映像特徴量検出結果ｆｔｒに基づき、コマ落ち補間モードを設定し、コマ落ち画像補間モード信号ｍｄを出力する。画像補間部４は、補間モード信号ｍｄと遅延画像データＦ１もしくは遅延画像データＦ１と入力画像データＦ０から補間画像データを作成して出力画像データＤ０を出力する。【選択図】  図１
2013118438.tif 000002
【特許請求の範囲】
【請求項１】
入力映像信号の画像と画像の間に新たな補間画像を挿入または入力映像信号の画像を置換して出力する画像処理装置において、
前記入力画像を遅延させ、１つまたは複数の遅延画像を出力する画像遅延手段と、
前記入力画像と前記遅延画像からコマ落ち補間モードを決定するための特徴量を判定して、映像特徴量検出結果として出力する映像特徴量検出手段と、
前記映像特徴量検出結果に基づき、コマ落ちされた画像を補完するための参照画像および参照方法を決めるコマ落ち補間モードを設定し、前記コマ落ち画像補間モード信号を出力するコマ落ち画像補間モード設定手段と、
前記補間モード信号と前記遅延画像または前記遅延画像と前記入力画像から補間画像を作成して出力する画像補間部と
を備える画像処理装置。
【請求項２】
前記映像特徴検出手段は、前記入力画像と１フレーム前の画像との対応する画素同士の差をフレーム間の差分として求め、所定の範囲の画素から成るブロック毎にフレーム間の差分の平均を算出し、前記算出したフレーム差分ブロック平均を出力するフレーム間差分平均算出手段と、
前記ブロックを単位として画像信号の画面を複数の領域に分割し、前記領域内の各々のブロックについての前記フレーム差分ブロック平均により形成される差分情報信号を求め、前記領域ごとに前記差分情報信号を出力する領域分割手段と、
前記差分情報信号から、前記それぞれの領域について静止か動きかの判定を行い、特徴量を検出して特徴量検出結果として出力する特徴量検出手段と、
前記それぞれの領域についての特徴量検出結果から映像の特徴を判定し前記映像特徴検出結果を出力する映像特徴判定手段と
を備えたことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記特徴量検出手段は、第１から第Ｎまでの領域にそれぞれ対応する第１から第Ｎまでの領域特徴量検出手段を有し、
ｘを１からＮまでのいずれか１つの自然数とすると、第ｘの領域特徴量検出手段は、
第ｘの領域についての前記差分情報信号が入力され、前記第ｘの領域内のブロックについての前記フレーム差分ブロック平均の最大値を検出するフレーム差分最大値検出手段と、
前記第ｘの領域内のブロックの各々についての前記フレーム差分ブロック平均を所定の値と比較して、前記フレーム差分ブロック平均が所定の閾値より大きく、動きブロックと判断される当該領域内のブロックの数をフレーム間動きブロック数として求めるフレーム間動きブロック数算出手段と、
前記フレーム差分ブロック平均の最大値と前記フレーム間動きブロック数から、当該領域が静止画であるか否かを判定し、判定結果を示す静止画判定信号を出力する静止画判定手段と、
前記静止画判定信号が静止画でない場合、動画であるとして、動画の連続数を動画フレーム連続数として出力する動画連続数算出手段と、
前記静止画判定手段からの静止画判定信号と、前記動画連続数算出手段からの動画フレーム連続数を前記第ｘの領域についての前記特徴量検出結果として出力する
請求項２に記載の画像処理装置。
【請求項４】
前記画像補間手段は、フレーム選択手段、補間フレーム出力タイミング決定手段、動きベクトル検出手段、補間画像生成用参照フレーム選択手段、補間画像生成用動きベクトル選択手段、動きベクトル変換手段および補間フレーム生成手段を備え、
前記動きベクトル決定用参照フレーム選択手段は、動きベクトルを決定するための第１から第３までの動きベクトル決定用参照フレームを決定し、前記補間フレーム出力タイミング決定手段は、第１および第２の動きベクトル決定用参照フレームの間隔、第２および第３の動きベクトル決定用参照フレームの間隔、画像を補間する区間を設定する補間区間信号、第１の補間画像生成用参照フレームと補間フレームとの間隔および補間フレームと第２の補間画像生成用参照フレームとの間の間隔を出力し、
前記動きベクトル検出手段は、第１から第３までの動きベクトル決定用参照フレームを参照して、第１から第２の動きベクトル決定用参照フレームへの第１の区間の動きベクトルと、第２から第３の動きベクトル決定用参照フレームへの第２の区間の動きベクトルとを算出し、
前記補間画像生成用参照フレーム選択手段は、補間区間信号に基づき、第１から第３までの動きベクトル決定用参照フレームより補間フレームを生成する際に参照する第１および第２の補間画像生成用参照フレームを選択し
前記補間画像生成用動きベクトル選択手段は、補間区間信号に基づき、第１の区間の動きベクトルと第２の区間の動きベクトルのどちらかを選択し、第１の補間画像生成用動きベクトルとして出力し、
動きベクトル変換手段は、第１の補間画像生成用動きベクトルを第１の補間画像生成用参照フレームから補間フレームデータへの第２の補間画像生成用動きベクトルと、補間フレームデータから第２の補間画像生成用参照フレームへの第３の補間画像生成用動きベクトルに変換して出力し、
補間フレーム生成手段は、第１および第２の補間画像生成用参照フレーム、第２および第３の補間画像生成用動きベクトルから補間フレームデータを生成し、生成した補間フレームデータＩＦを第１の補間画像生成用参照フレームと第２の補間画像生成用参照フレーム２との間に挿入した画像データを出力する請求項１から請求項３のいずれか１項に記載の画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置及び方法に関する。本発明は特に、画像間に新たな補間画像を挿入する画像補間処理に関するものである。
【背景技術】
【０００２】
液晶ディスプレイなどのホールド型ディスプレイは、１フレーム期間に同じ画像を表示し続けている。画像中の物体が動いた場合に、動く物体に対する人間の目の追従は連続的に移動する。これに対し、物体の移動が１フレーム単位の不連続な移動を行っているため、画像のエッジ部分がぼやけて見える問題がある。この問題に対し、フレームを補間することで表示フレーム数を多くして物体の移動をスムーズにすることが考えられる。
【０００３】
また、映画などのフィルム映像がテレビ信号に変換された素材については、両者（フィルム映像とテレビ信号）のフレーム周波数が異なる。このため、２フレーム同じフレームを連続して表示した後に、３フレーム同じフレームを連続して表示する画像信号となっている。この表示方法は、２−３プルダウン変換と呼ばれている。この２−３プルダウン変換方式の画像を液晶ディスプレイなどのホールド型ディスプレイで表示すると、ジャダーが発生したりする問題がある。ジャダーとは、画像の早い動きに対して残像が発生し、画像がぼやけることであり、また、画像の動きが不自然になり、なめらかな動きとならないことである。
【０００４】
また、同様にコンピュータ処理された映像がテレビ信号に変換された素材についても、２フレーム同じフレームを連続して表示する画像信号となっている。この表示方法は、２−２プルダウン変換と呼ばれている。この２−２プルダウン変換方式の画像を液晶ディスプレイなどのホールド型ディスプレイで表示すると、ジャダーが発生する問題がある。
【０００５】
また、モバイル情報端末やパーソナルコンピューターなどの情報端末で映像を処理するとき、コマ落ちと呼ばれる現象が発生する。コマ落ちとは、動画を再生する際に、フレームの一部が何らかの理由で再生されず、音声や画像が一瞬とぎれる現象のことである。例えば、情報端末機器等で用いられている処理速度の遅い汎用的な演算装置で処理すると、他の操作に対する処理に追われて、映像の処理が映像の画像切り替えスピードに間に合わない。このとき、情報端末機器の出力用映像バッファには、１フレーム前の画像のデータしかない。このため、情報端末機器は、１フレーム前と同じ画像のデータを出力する。これにより、ジャダーが発生する。
【０００６】
この改善策として、フレーム間の差分が大きくなる周期を検出して、入力された映像信号から映像が３−２プルダウン変換もしくは２−２プルダウン変換されているか否かを判定し、入力された映像信号と１フレーム遅延させた映像信号とから動きベクトルを検出し、上記判定結果に基づいてプルダウンシーケンスを発生させ、プルダウンシーケンスと上記動きベクトル、入力された映像信号および遅延された映像信号から動き補償映像信号を生成する映像信号処理装置が開示されている（例えば、特許文献１）。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０１０−２８４７２号公報（第９−１０頁、第１図）
【発明の概要】
【発明が解決しようとする課題】
【０００８】
従来の映像信号処理装置は、フレーム間の差分が大きくなる周期を検出して、３−２プルダウン変換もしくは２−２プルダウン変換されているか否かを判定する構成を採っている。このため、周期的に発生しないコマ落ちに対しては対応できず、ジャダーの発生を防ぐことができないという問題があった。
【課題を解決するための手段】
【０００９】
本発明の画像処理装置は、入力映像信号の画像と画像の間に新たな補間画像を挿入もしくは入力映像信号の画像を置換して出力する画像処理装置において、前記入力画像を遅延させ、１つもしくは複数の遅延画像を出力する画像遅延手段と、前記入力画像と前記遅延画像からコマ落ち補間モードを決定するための特徴量を判定して、映像特徴量検出結果として出力する映像特徴量検出手段と、前記映像特徴量検出結果に基づき、コマ落ちされた画像を補完するための参照画像および参照方法を決めるコマ落ち補間モードを設定し、前記コマ落ち画像補間モード信号を出力するコマ落ち画像補間モード設定手段と、前記補間モード信号と前記遅延画像もしくは前記遅延画像と前記入力画像から補間画像を作成して出力する画像補間部とを備える。
【発明の効果】
【００１０】
周期的でない画像の欠けが発生して同じ画像が連続した場合でも画像を補間することにより、映像のジャダーを防止する。
【図面の簡単な説明】
【００１１】
【図１】画像処理装置の構成を示すブロック図である。
【図２】本発明の実施の形態１による映像信号処理装置における映像特徴量検出手段２でのブロック及び領域の分割の一例を説明するための説明図である。
【図３】映像特徴量検出手段２の構成を示すブロック図である。
【図４】領域内特徴量検出手段１３（ｘ）の構成を示すブロック図である。
【図５】映像特徴判定手段１４の構成を示すブロック図である。
【図６】コマ落ち補間モード設定手段３の構成を示すブロック図である。
【図７】コマ落ち判定手段４２の動作を示す説明図である。
【図８】画像補間手段４の構成を示すブロック図である。
【図９】動きベクトル検出手段５３の構成を示すブロック図である。
【図１０】動きベクトル検出手段５３の動作を説明するための説明図である。
【図１１】動きベクトル変換手段５６と補間フレーム生成手段５７の動作を説明するための説明図である。
【発明を実施するための形態】
【００１２】
以下、本発明の実施の形態を図面により説明する。本発明に係る画像処理装置１００は、現フレームＦ０を３フレーム遅延したフレームを補間フレームＩＦによって置換するもの、もしくは画像の現フレームＦ０を３フレーム遅延したフレームから現フレームを２フレーム遅延したフレームまでの間に新たな補間フレームＩＦのデータを挿入するものである。
【００１３】
実施の形態１．
図１は、本発明の実施の形態１にかかる画像処理装置１００の構成を示すブロック図である。実施の形態１にかかる画像処理装置１００は、画像遅延手段１、映像特徴量検出手段２、コマ落ち補間モード設定手段３および画像補間手段４を備える。
【００１４】
画像データＦ０は画像遅延手段１および映像特徴量検出手段２に入力される。画像遅延手段１は、画像を３フレーム以上保存する。１フレーム遅延画像データＦ１は、現在の画像データＦ０に対して１フレーム分遅延した画像である。遅延フレーム画像データＦＤは、画像データＦ０に対して１フレーム以上した遅延した画像である。画像遅延手段１は、画像データＦ０、１フレーム遅延画像データＦ１および遅延フレーム画像データＦＤの異なる３フレーム以上の画像を出力する。画像遅延手段１の出力画像が３枚の場合は、遅延フレーム画像データＦＤは２枚である。画像遅延手段１の出力画像が４枚以上の場合は、遅延フレーム画像データＦＤは３枚以上となる。
【００１５】
１フレーム遅延画像データＦ１は映像特徴量検出手段２と画像補間手段４に入力され、遅延フレーム画像データＦＤは画像補間手段４に入力される。
【００１６】
映像特徴量検出手段２は画像データＦ０の特徴量と１フレーム遅延画像データＦ１の特徴量とを検出し、映像特徴量検出結果ｆｔｒをコマ落ち補間モード設定手段３へ出力する。画像の特徴量とは、1フレームの画像がどのようなフレームであるかを表すデータである。例えば、そのフレームが動画の一連の流れの中の一枚であるか、シーンチェンジした後の一枚であるかを表すデータである。
【００１７】
コマ落ち補間モード設定手段３は、映像特徴量検出結果ｆｔｒから映像のコマ落ちを検出し、画像を補間するモードを設定する補間モード信号ｍｄを画像補間手段４へ出力する。画像を補間するモードとは、コマ落ちが発生しているか、どの遅延フレームデータによって画像を補間するかというモードである。
【００１８】
画像補間手段４は複数枚の遅延フレーム画像データＦＤと補間モード信号ｍｄに基づいて補間モードを切り替えて画像を補完して出力画像データＤ０として出力する。
【００１９】
以下、映像特徴量検出手段２の構成について図３を参照して説明する。図３は、映像特徴量検出手段２の構成を示すブロック図である。映像特徴量検出手段２は、タイミング信号発生手段１０、フレーム間差分平均算出手段１１、領域分割手段１２、領域内特徴量検出手段１３（ｘ）および映像特徴判定手段１４を備える。
【００２０】
タイミング信号発生手段１０は、入力された入力画像データＦ０から垂直及び水平同期信号を分離し、分離した同期信号に基づき、タイミング信号を発生する。ここでは、例えば、画像の特徴量の検出に必要となる各ブロック及び横帯状の領域を示すタイミング信号を発生する。
【００２１】
映像特徴量検出手段２は、入力映像信号の１フレームの画面に対し、例えば、図２（Ａ）から図２（Ｃ）までに示されるように、ブロック及び横帯状の領域に分割して処理を行う。例えば、１フレーム内の所定の領域を画像の特徴量の検出の範囲（テレシネ検出エリア）として設定し、まず、図２（Ａ）に示すように特徴量検出エリア内をｍ画素×ｎラインのブロックに分割する。このｍ画素×ｎラインのブロックは、１フレーム間の差分情報に対しその平均値を算出する処理する際の単位となる。例えば、８画素×８ラインのように、画素を単位とする画面の小領域とする。
【００２２】
さらに、このｍ画素×ｎラインのブロックを単位として、画像特徴量検出エリアを垂直方向に複数の（Ｎ個の）横帯状の領域に分割する。言い換えると、各領域が整数個のブロックにより構成されるように分割を行う。以下では、各領域内のブロックの数をＳで表す。なお、Ｎは例えば「５」である。
【００２３】
図２（Ｂ）は、画像の特徴量検出エリアを垂直方向にＮ個の横帯状の領域（第１の領域から第Ｎの領域）に分割した場合の例を示している。図２（Ｃ）はそのうちの各領域が整数個（Ｓ個）のブロックで構成され、各ブロックがｍ画素×ｎラインで構成されていることを示している。この横帯状の領域（第１から第Ｎまでの領域）ＳＡ（１）からＳＡ（Ｎ）までは、画像の特徴量を求める単位となり、ｍ画素×ｎラインのブロックで構成される領域となる。なお、以下では、「ｍ画素×ｎラインのブロック」を、「ｍ×ｎブロック」、或いは単に「ブロック」と言う。第１から第Ｎまでの領域内特徴量検出手段１３（１）から領域内特徴量検出手段１３（Ｎ）までは、それぞれ第１から第Ｎまでの領域ＳＡ（１）から領域ＳＡ（Ｎ）までに対応して設けられ、各々対応する領域について特徴量を検出する。
【００２４】
以上から、実施の形態１におけるタイミング信号発生手段１０は、ｍ×ｎブロック毎のタイミングを示すブロック・タイミング信号ｂｌｋｅｎと、横帯状の領域ＳＡ（１）から領域ＳＡ（Ｎ）までを示す領域信号（「エリア信号」とも言う）ｔａｒを発生することになる。
【００２５】
フレーム間差分平均算出手段１１は、現在の画像データＦ０、１フレーム遅延画像データＦ１およびタイミング信号発生手段１０からのブロック・タイミング信号ｂｌｋｅｎを入力する。ブロック・タイミング信号ｂｌｋｅｎは、ｍ×ｎブロック毎のタイミングを示すタイミング信号である。ｍは行数を示し、ｎは列数を示す。上記ブロックは、画像を行方向にｍ分割し、列方向にｎ分割して作成される。フレーム間差分平均算出手段１１は、１フレーム遅延画像データＦ１と現在の画像データＦ０との同位相にある画素間の差分値をフレーム間の差分情報（フレーム差分情報）として求める。つまり、フレーム差分情報は画素単位で求められる。フレーム間差分平均算出手段１１は、ブロック・タイミング信号ｂｌｋｅｎで示されるブロック単位で、画素単位で求められる差分値の平均値を算出する。そして、このブロック単位の差分値の平均値をフレーム差分ブロック平均ｆｒｂとして出力する。
【００２６】
画素ごとに求められるフレーム間の差分値が０の場合、画像は完全に静止しおり、ノイズ成分が含まれていない部分である。動きもしくはノイズ成分があると、差分値の絶対値は大きくなる。ｍ×ｎブロック単位で、差分値の平均を算出することで、ノイズ成分の影響を低減した平滑化されたフレーム間の差分値が得られる。平滑化処理によりノイズ成分の影響を低減したため、求められた差分値は動きを示している。つまり、ｍ×ｎブロック単位で、画素単位の差分値の平均値を算出することで、フレーム差分の値の精度を向上することができる。この画素単位の差分値の平均値をフレーム差分ブロック平均ｆｒｂと呼ぶ。
【００２７】
フレーム差分ブロック平均ｆｒｂは、フレーム間の差分情報に基づき、ｍ×ｎブロック毎での２つのフレーム間の相関の強さを示す値となる。または、フレーム差分ブロック平均ｆｒｂは、ｍ×ｎブロック毎での２つのフレーム間の非相関性の度合いを示す値となる。つまり、フレーム差分ブロック平均ｆｒｂは、ｍ×ｎブロック毎での２つのフレーム間の動きの有無を示す値となる。フレーム差分ブロック平均ｆｒｂにおいて、相関が強い場合は、フレーム差分ブロック平均ｆｒｂの値は小さくなる。相関が強い場合とは、静止画の場合である。一方、相関が弱い場合は、フレーム差分ブロック平均ｆｒｂの値が大きくなる。相関が弱い場合とは、動きがある動画の場合である。
【００２８】
領域分割手段１２は、フレーム間差分平均算出手段２１からのフレーム差分ブロック平均ｆｒｂを入力し、タイミング信号発生手段１０から領域を示す領域信号ｔａｒを入力する。
【００２９】
フレーム差分ブロック平均ｆｒｂは、ｍ×ｎブロック毎に得られた信号として領域分割手段１２に入力される。
【００３０】
領域分割手段１２は、領域信号ｔａｒに応じて、上記各ブロック単位で送られる信号を、ブロックを単位として垂直方向に分割する。例えば、領域分割手段１２は、Ｎ個の横帯状の領域ＳＡ（１）から領域ＳＡ（Ｎ）までに分割する。領域分割手段１２は、分割されたそれぞれの領域に対応した信号ｄｆ（１）から信号ｄｆ（Ｎ）まで（差分情報信号ｄｆ（１）から差分情報信号ｄｆ（Ｎ）までと記す）を形成する。領域ＳＡ（１）から領域ＳＡ（Ｎ）までは、ｍ×ｎブロックをブロック単位で含むように分割されている。Ｎ＜ｍの場合は、１つの領域ＳＡに複数のブロックが含まれることになる。これら領域ごとの差分情報信号ｄｆ（１）から差分情報信号ｄｆ（Ｎ）までは、対応した領域特徴量検出手段１３（１）から領域特徴量検出手段１３（Ｎ）までに出力される。
【００３１】
差分情報信号ｄｆ（１）から差分情報信号ｄｆ（Ｎ）までは、対応する領域特徴量検出手段１３（１）から領域特徴量検出手段１３（Ｎ）までに入力される。差分情報信号ｄｆ（１）から差分情報信号ｄｆ（Ｎ）までは、各領域ＳＡ内のブロックのフレーム差分ブロック平均ｆｒｂを含んでいる。
【００３２】
差分情報信号ｄｆ（１）は領域特徴量検出手段１３（１）に入力される。差分情報信号ｄｆ（２）は領域特徴量検出手段１３（２）に入力される。同様に、差分情報信号ｄｆ（Ｎ）は領域特徴量検出手段１３（Ｎ）に入力される。領域特徴量検出手段１３（１）から領域特徴量検出手段１３（Ｎ）までは、各々対応する差分情報信号ｄｆ（１）から差分情報信号ｄｆ（Ｎ）までが入力される点で異なるが、それ以外の点では同様である。領域特徴量検出手段１３（ｘ）（ｘ＝１からＮまでのいずれか１つ）については図４を参照して後述する。領域特徴量検出手段１３（ｘ）は、対応する領域ＳＡ（ｘ）に含まれるブロックのフレーム差分ブロック平均ｆｒｂから、領域ＳＡ（ｘ）の特徴量検出結果ｃｈａ（ｘ）を求めて出力する。特徴量検出結果ｃｈａ（ｘ）は、画像が静止しているか動いているかの判定を行うためのものである。
【００３３】
領域特徴量検出手段１３（１）から領域特徴量検出手段１３（Ｎ）までの動作は、対応する領域ごとに行われる。領域特徴量検出手段１３（ｘ）の出力信号である特徴量ｃｈａ（１）から特徴量ｃｈａ（Ｎ）までは、領域信号ｔａｒが領域ＳＡ（１）から領域ＳＡ（Ｎ）までのうち、対応した領域を示す期間で出力される。
【００３４】
領域特徴量検出手段１３（１）から領域特徴量検出手段１３（Ｎ）までは、図４に示す領域特徴量検出手段１３（ｘ）の構成をしている。
【００３５】
図４に示す領域特徴量検出手段１３（ｘ）は、対応する領域ＳＡ（ｘ）（ｘは１からＮまでのうちのいずれか１つ）に含まれるブロックのフレーム差分ブロック平均ｆｒｂから、静止画判定信号ｆｒｓｔｉｌおよびシーンチェンジ判定信号ｆｒｓｃｈを求めて出力する。静止画判定信号ｆｒｓｔｉｌおよびシーンチェンジ判定信号ｆｒｓｃｈは、領域ＳＡ（ｘ）が静止画であるか動画であるかの判定を行うための特徴量ｃｈａ（ｘ）である。
【００３６】
図４に示すように、領域ＳＡ（ｘ）のフレーム差分ブロック平均ｆｒｂは、対応する領域特徴量検出手段１３（ｘ）に入力される。
【００３７】
図４に示すように、領域特徴量検出手段１３（ｘ）は、フレーム差分最大値検出手段２１、フレーム間動きブロック数算出手段２２、静止画像判定手段２３およびシーンチェンジ判定手段２４を備えている。領域ＳＡ（ｘ）に含まれる各ブロックのフレーム差分ブロック平均ｆｒｂは、フレーム差分最大値検出手段２１およびフレーム間動きブロック数算出手段２２に入力される。
【００３８】
フレーム差分最大値検出手段２１は、領域ＳＡ（ｘ）に含まれる複数のブロックのフレーム差分ブロック平均ｆｒｂの中から最大値を検出し、フレーム差分ブロック平均の最大値ｆｒｍａｘとして出力する。
【００３９】
フレーム間動きブロック数算出手段２２は、領域ＳＡ（ｘ）に含まれる各ブロックのフレーム差分ブロック平均ｆｒｂを所定の値と比較する。フレーム差分ブロック平均ｆｒｂが所定の閾値より大きい場合、そのブロックの画像が動画である（動きブロック）と判断される。フレーム間動きブロック数算出手段２２は、この動きブロックの数を領域ＳＡ（ｘ）内で数えて、数えた結果をフレーム間動きブロック数ｆｒｂｌｋとして出力する。フレーム間動きブロック数ｆｒｂｌｋは、領域ＳＡ（１）から領域ＳＡ（Ｎ）までの各領域ＳＡで算出される。
【００４０】
動きブロック数は、領域ＳＡ（ｘ）内のフレーム差分ブロック平均ｆｒｂの総数であり、領域ＳＡ（ｘ）の２つのフレーム間の動きを示す。連続する２つのフレームの対応する領域ＳＡの相関が強い場合は、動きブロック数は小さくなる。相関が強い場合とは、静止画の場合である。一方、連続する２つのフレームの対応する領域ＳＡの相関が弱い場合は、動きブロック数は大きくなる。相関が弱い場合とは、２つの画像間での動きが大きい、動画の場合である。
【００４１】
以上から、各領域ＳＡ（ｘ）のフレーム差分ブロック平均ｆｒｂに基づいて、当該領域ＳＡ（ｘ）のフレーム差分ブロック平均ｆｒｂの最大値ｆｒｍａｘおよびフレーム間動きブロック数ｆｒｂｌｋが求められる。
【００４２】
図４に示すように、フレーム差分ブロック平均ｆｒｂの最大値ｆｒｍａｘおよびフレーム間動きブロック数ｆｒｂｌｋは、静止画判定手段２３に入力される。
【００４３】
静止画判定手段２３は、フレーム差分ブロック平均ｆｒｂの最大値ｆｒｍａｘおよびフレーム間動きブロック数ｆｒｂｌｋに基づいて、領域ＳＡ（ｘ）が静止画であるか否かを判定する。静止画判定手段２３は、静止画判定信号ｆｒｓｔｉｌを出力する。静止画判定信号ｆｒｓｔｉｌは、領域ＳＡ（ｘ）が静止画であるか否かの判定結果である。
【００４４】
以下の２つの条件が両方とも満たされる場合、静止画判定手段２３は、領域ＳＡ（ｘ）が、連続する２つのフレーム間で静止画であると判定し、静止画判定信号ｆｒｓｔｉｌを第１の値として出力する。第１の条件は、フレーム間動きブロック数ｆｒｂｌｋがゼロに等しいか、もしくは所定値より小さいことである。ただし、所定値はゼロに近い値である。第２の条件は、フレーム差分ブロック平均ｆｒｂの最大値ｆｒｍａｘが、５フレーム前のフレーム差分ブロック平均ｆｒｂの最大値ｆｒｍａｘに対して変化が小さいことである。つまり、現在のフレームのフレーム差分ブロック平均ｆｒｂの最大値ｆｒｍａｘと、５フレーム前のフレーム間差分ブロック平均ｆｒｂの最大値ｆｒｍａｘとの差が小さいということである。上記の２つの条件を両方とも満たさない場合、静止画判定手段２３は、領域ＳＡ（ｘ）が、フレーム間で静止画ではないと判定し、静止画判定信号ｆｒｓｔｉｌを第２の値として出力する。上記の２つの条件により静止画であるとの判定をすることで、容易に領域ＳＡ（ｘ）が、静止画であるか否かを判定できる。
【００４５】
シーンチェンジ判定手段２４は、フレーム間動きブロック数ｆｒｂｌｋを入力する。シーンチェンジ判定手段２４は、フレーム間動きブロック数ｆｒｂｌｋを所定の閾値ＳＴＨと比較する。フレーム間動きブロック数ｆｒｂｌｋと閾値ＳＴＨとの比較結果に基づいて、連続する２つのフレーム間で領域ＳＡ（ｘ）がシーンチェンジとなるか否かを検出する。シーンチェンジとは、連続する２つのフレーム間で画像が大きく変わる場合である。画像が大きく変わるとは、画像が大きく動くことである。
【００４６】
ここで、一般に映像信号の編集点のタイミング、字幕を挿入したタイミングおよび画像を消去したタイミングでは、シーンが切換わる可能性が高い。つまり、これらのタイミングではシーンチェンジとなる。これらのシーンチェンジとなる場合、領域ＳＡに含まれるほとんどのブロックで動画と判定される。よって、これらのタイミングでは、フレーム間動きブロック数ｆｒｂｌｋは、通常の値と比較して大きくなる。通常の値とは、シーンチェンジでない場合の値である。
【００４７】
シーンチェンジ判定手段２４は、フレーム間動きブロック数ｆｒｂｌｋが所定の閾値ＳＴＨより大きい場合、シーンチェンジ判定信号ｆｒｓｃｈを第１の値として出力する。フレーム間動きブロック数ｆｒｂｌｋが所定の閾値ＳＴＨより大きい場合とは、領域ＳＡに含まれるブロックの内、閾値ＳＴＨより多くのブロックが動画と判定される場合である。シーンチェンジ判定手段２４が、シーンチェンジ判定信号ｆｒｓｃｈを第１の値として出力する場合は、連続する２つのフレーム間でシーンチェンジがあったことを示している。なお、シーンチェンジには、字幕の挿入や画像の消去の場合も含まれる。第１の値としては、例えば値を「１」とすることができる。シーンチェンジと判定される以外の場合、シーンチェンジ判定手段２４は、シーンチェンジ判定信号ｆｒｓｃｈを第２の値として出力する。第２の値としては、例えば値を「０」とすることができる。
【００４８】
このように、シーンチェンジ判定手段２４は、領域ＳＡ（ｘ）ごとにフレーム間動きブロック数ｆｒｂｌｋを所定の閾値ＳＴＨと比較する。領域ＳＡ（ｘ）はフレーム内の横方向に帯状に分割された領域である。このため、領域のサイズを画面のサイズに関係なく一定としておくことにより、画面サイズに応じて閾値ＳＴＨを変更する必要はなく、画面の一部にある字幕についても対応でき、小さい面積の領域内での動きについても対応することができる。このことにより同じ設計の手段で複数の画面サイズの表示装置に実装することができる。
【００４９】
以上、図４に示される領域特徴量検出手段１３（ｘ）からは、領域ＳＡ（ｘ）の特徴量検出結果ｃｈａ（ｘ）が出力される。特徴量検出結果ｃｈａ（ｘ）は、静止画判定信号ｆｒｓｔｉｌおよびシーンチェンジ判定信号ｆｒｓｃｈである。静止画判定信号ｆｒｓｔｉｌは、静止画判定手段２３から出力される。シーンチェンジ判定信号ｆｒｓｃｈは、シーンチェンジ判定手段２４から出力される。
【００５０】
そして、図４の領域特徴量検出手段１３（ｘ）で構成される領域特徴量検出手段１３（１）から領域特徴量検出手段１３（Ｎ）までは、領域ＳＡごとに対応する特徴量検出結果ｃｈａ（１）から特徴量検出結果ｃｈａ（Ｎ）までが生成される。特徴量検出結果ｃｈａ（１）から特徴量検出結果ｃｈａ（Ｎ）までは、領域特徴量検出手段１３（１）から領域特徴量検出手段１３（Ｎ）までから映像特徴判定手段１４に出力される。
【００５１】
図３に示される映像特徴判定手段１４は、領域特徴量検出手段１３（１）から領域特徴量検出手段１３（Ｎ）までから特徴量ｃｈａ（１）から特徴量ｃｈａ（Ｎ）までを入力する。
【００５２】
映像特徴判定手段１４は、領域ＳＡ（１）から領域ＳＡ（Ｎ）までで検出された特徴量ｃｈａ（１）から特徴量ｃｈａ（Ｎ）までにより、映像信号の全領域での特徴を判定する。映像特徴判定手段１４は、映像信号の全領域での特徴の判定結果として動画特徴検出結果ｆｔｒを出力する。
【００５３】
図５は、実施の形態１における映像特徴判定手段１４の構成を示すブロック図である。映像特徴判定手段１４は、映像信号の全領域の特徴を判定する。
【００５４】
図５に示すように、映像特徴判定手段１４は、全領域静止画検出手段３１およびシーンチェンジ検出手段３２を備えている。
【００５５】
図５に示すように、領域ＳＡ（１）から領域ＳＡ（Ｎ）までの特徴量ｃｈａ（１）から特徴量ｃｈａ（Ｎ）までは、映像特徴判定手段１４に入力される。特徴量ｃｈａ（ｘ）は、静止画判定信号ｆｒｓｔｉｌ（ｘ）およびシーンチェンジ判定信号ｆｒｓｃｈ（ｘ）を含んでいる。静止画判定信号ｆｒｓｔｉｌ（１）から静止画判定信号ｆｒｓｔｉｌ（Ｎ）までは、全領域静止画検出手段３１に送られる。シーンチェンジ判定信号ｆｒｓｃｈ（１）からシーンチェンジ判定信号ｆｒｓｃｈ（Ｎ）まではシーンチェンジ検出手段３２に送られる。
【００５６】
全領域静止画検出手段３１は、Ｎ個の静止画判定信号ｆｒｓｔｉｌ（１）から静止画判定信号ｆｒｓｔｉｌ（Ｎ）までから、全領域において静止画であるか否かを判定する。全領域静止画検出手段３１は、判定結果として静止画検出結果ｓｔｉｌを出力する。静止画であるか否かの判定は、静止画判定信号ｆｒｓｔｉｌ（１）から静止画判定信号ｆｒｓｔｉｌ（Ｎ）までがすべて１であるか否かで判定する。全領域において静止画であると判定された場合、全領域静止画検出手段３１は、静止画検出結果ｓｔｉｌを第１の値とする。第１の値として、例えば「１」とすることができる。全領域において静止画であると判定された以外の場合、全領域静止画検出手段３１は、静止画検出結果ｓｔｉｌを第２の値とする。第２の値として、例えば「０」とすることができる。このような処理は、静止画判定信号ｆｒｓｔｉｌ（１）から静止画判定信号ｆｒｓｔｉｌ（Ｎ）までの論理積を取るＡＮＤゲートにより実現できる。
【００５７】
シーンチェンジ検出手段３２は、Ｎ個のシーンチェンジ判定信号ｆｒｓｃｈ（１）からシーンチェンジ判定信号ｆｒｓｃｈ（Ｎ）までを入力する。シーンチェンジ判定信号は、シーンチェンジを示す信号である。シーンチェンジ検出手段３２は、シーンチェンジ判定信号ｆｒｓｃｈ（１）からシーンチェンジ判定信号ｆｒｓｃｈ（Ｎ）までから、Ｎ個の領域ＳＡ（１）から領域ＳＡ（Ｎ）までのいずれかにおいてシーンチェンジとなる場合を検出する。即ち、いずれかの領域ＳＡ（ｘ）でシーンチェンジ判定信号ｆｒｓｃｈ（ｘ）が１となる場合である（ｆｒｓｃｈ（ｘ）＝１）。シーンチェンジ判定信号ｆｒｓｃｈ（ｘ）が１となる場合、シーンチェンジ検出手段３２は、シーンチェンジ検出結果ｓｃｈを第１の値として出力する。第１の値として、例えば「１」とすることができる。
【００５８】
このような処理は、シーンチェンジ判定信号ｆｒｓｃｈ（１）からシーンチェンジ判定信号ｆｒｓｃｈ（Ｎ）までの論理和を取るＯＲゲートによる合成で実現できる。
【００５９】
以上のように、図５に示される動画特徴検出手段１４は、動画特徴検出結果ｆｔｒが出力される。動画特徴検出結果ｆｔｒは、静止画検出結果ｓｔｉｌおよびシーンチェンジ検出結果ｓｃｈを含む。静止画検出結果ｓｔｉｌは、全領域静止画検出手段３１から出力される。シーンチェンジ検出結果ｓｃｈは、シーンチェンジ検出手段３２から出力される。
【００６０】
図６は、実施の形態１におけるコマ落ち補間モード設定手段３の構成を示すブロック図である。
【００６１】
図６に示すように、コマ落ち補間モード設定手段３は、信号遅延手段４１、コマ落ち判定手段４２、コマ落ちキャンセル判定手段４３およびコマ落ち補間モード決定手段４４を有している。
【００６２】
図６に示すように、入力された映像特徴量検出結果ｆｔｒは、信号遅延手段４１、コマ落ち判定手段４２およびコマ落ちキャンセル判定手段４３に入力される。
【００６３】
信号遅延手段４１は、入力された映像特徴量検出結果ｆｔｒを１フレーム以上遅延する。異なるフレーム数だけ遅延を行った映像特徴量検出結果ｆｔｒを遅延映像特徴検出結果ｆｔｒｄとしてコマ落ち判定手段４２およびコマ落ちキャンセル判定手段４３へ出力する。例えば、遅延映像特徴検出結果ｆｔｒｄは、１フレーム遅延から３フレーム遅延までの各遅延された映像特徴検出結果ｆｔｒを含んでいる。
【００６４】
図７は、実施の形態１におけるコマ落ち判定手段４２の処理について示した説明図である。コマ落ち判定手段４２は、１フレーム遅延したフレームから４フレーム遅延したフレームまでの静止画判定結果を考慮してコマ落ち判定結果ｄｒｐをコマ落ち補間モード決定手段４４に出力する。コマ落ち判定結果ｄｒｐの出力は、「００」、「０１」、「１０」および「１１」とする。出力「００」は、コマ落ちしていない場合である。出力「０１」は、２フレーム遅延した画像がコマ落ちしている場合である。出力「１０」は、３フレーム遅延した画像がコマ落ちしている場合である。出力「１１」は、これら以外の場合である。
【００６５】
図６を用いて、実施の形態１におけるコマ落ちキャンセル判定手段４３について説明する。
【００６６】
コマ落ち補間キャンセル判定手段４３は、映像特徴結果ｆｔｒおよび遅延映像特徴量検出結果ｆｔｒｄを入力する。コマ落ち補間キャンセル判定手段４３は、コマ落ちではない要因によって同じ画像が続いているか否かを判定する。コマ落ち補間キャンセル判定手段４３は、コマ落ち補間キャンセル判定結果ｃｎｃｌをコマ落ち補間モード決定手段４４へ出力する。コマ落ち補間キャンセル判定結果ｃｎｃｌは、コマ落ち補間処理をキャンセルする信号である。
【００６７】
コマ落ち補間キャンセル判定手段４３の判定は、次のような方法が考えられる。１フレーム前のフレームのシーンチェンジ判定結果と過去４フレームまでのシーンチェンジ判定結果が「１」である場合、シーンチェンジによって同じ画像のフレームが続いていると考えられる。このため、コマ落ち補間キャンセル判定手段４３はコマ落ち補間処理をキャンセルする。つまり、コマ落ち補間キャンセル判定手段４３は、コマ落ち補間キャンセル判定結果を「１」として出力する。過去４フレームとは、２フレーム前から４フレーム前までの４フレームのことである。現在のフレームのシーンチェンジ判定結果と過去４フレームまでのシーンチェンジ判定結果が「０」である場合、シーンチェンジによって同じ画像のフレームが続いていると考えられない。このため、コマ落ち補間キャンセル判定手段４３はコマ落ち補間処理をキャンセルしない。つまり、コマ落ち補間キャンセル判定手段４３は、コマ落ち補間キャンセル判定結果を「０」として出力する。
【００６８】
コマ落ち補間モード決定手段４４は、コマ落ち判定結果ｄｒｐおよびコマ落ち補間キャンセル判定結果ｃｎｃｌを入力する。コマ落ち補間モード決定手段４４は、補間モード信号ｍｄを出力する。補間モード信号ｍｄは、コマ落ちが発生しているかどうかの情報、どのフレームがコマ落ち画像であるかの情報および補間の際に参照画像として用いる遅延画像の情報を有している。
【００６９】
例えば現在のフレームからｍフレーム遅延したフレームのデータをｍ遅延フレーム画像データＦＤ（ｍ）とする。ｍは１以上の自然数である。１遅延フレーム画像データＦＤ（１）と２遅延フレーム画像データＦＤ（２）との間で画像を補間する場合を説明する。２遅延フレーム画像データＦＤ（２）が静止画として判定されたとする。そして、１遅延フレーム画像データＦＤ（１）および３遅延フレーム画像データＦＤ（３）から５遅延フレーム画像データＦＤ（５）までは静止画と判定されなかったとする。この場合、コマ落ち判定結果ｄｐｒが０１であるので、２遅延フレーム画像データＦＤ（２）はコマ落ち画像であると推定できる。そこで、コマ落ち補間モード決定手段４４は、補間モード信号ｍｄを出力する。補間モード信号ｍｄは、コマ落ちが発生しているという情報、２遅延フレーム画像データＦＤ（２）がコマ落ち画像であるという情報、４遅延フレーム画像データＦＤ（４）を画像補間時の第１の参照画像とする情報、３遅延フレーム画像データＦＤ（３）を画像補間時の第２の参照画像とする情報および１遅延フレーム画像データＦＤ（１）を第３の画像補間時の参照画像とするという情報を有する。
【００７０】
また、１遅延フレーム画像データＦＤ（１）から５遅延フレーム画像データＦＤ（５）までの間で３遅延フレーム画像データＦＤ（３）のみが静止画として判定された場合を説明する。この場合、この場合、コマ落ち判定結果ｄｒｐが１０であるので、３遅延フレーム画像データＦＤ（３）はコマ落ち画像であると推定できる。そこで、コマ落ち補間モード決定手段４４は、補間モード信号ｍｄを出力する。補間モード信号ｍｄは、コマ落ちが発生しているという情報、３遅延フレーム画像データＦＤ（３）がコマ落ち画像であるという情報、４遅延フレーム画像データＦＤ（４）を第１の参照画像とする情報、２遅延フレーム画像データＦＤ（２）を第２の参照画像とする情報および１遅延フレーム画像データＦＤ（１）を第３の参照画像とするという情報を有する
【００７１】
また、１遅延フレーム画像データＦＤ（１）から５遅延フレーム画像データＦＤ（５）までの間ですべてのフレームが動画として判定された場合を説明する。この場合、この場合、コマ落ち判定結果ｄｐｒが００であるので、コマ落ち画像であると推定できる。そこで、コマ落ち補間モード決定手段４４は、補間モード信号ｍｄを出力する。補間モード信号ｍｄは、コマ落ちが発生していないという情報、３遅延フレーム画像データＦＤ（４）を第１の参照画像とする情報、２遅延フレーム画像データＦＤ（２）を第２の参照画像とする情報および１遅延フレーム画像データＦＤ（１）を第３の参照画像とするという情報を有する。
【００７２】
図８は実施の形態１にかかる画像補間手段４の構成について説明したブロック図である。画像補間手段４は、動きベクトル決定用参照フレーム選択手段５１、補間フレーム出力タイミング決定手段５２、動きベクトル検出手段５３、補間画像生成用参照フレーム選択手段５４、補間画像生成用動きベクトル選択手段５５、動きベクトル変換手段５６および補間フレーム生成手段５７を備える。
【００７３】
複数枚の遅延フレーム画像データＦＤは、動きベクトル決定用参照フレーム選択手段５１に入力される。補間モード信号ｍｄは、動きベクトル決定用参照フレーム選択手段５１および補間フレーム出力タイミング決定手段５２に入力される。
【００７４】
動きベクトル決定用参照フレーム選択手段５１は、補間モード信号ｍｄが有する遅延画像の情報に基づき、第１の動きベクトル決定用参照フレームＲＶ１、第２の動きベクトル決定用参照フレームＲＶ２および第３の動きベクトル決定用参照フレームＲＶ３を決定する。遅延画像の情報は、補間の際に参照画像として用いられる。第１の動きベクトル決定用参照フレームＲＶ１、第２の動きベクトル決定用参照フレームＲＶ２および第３の動きベクトル決定用参照フレームＲＶ３は、動きベクトルを決定するための参照フレームである。動きベクトル決定用参照フレーム選択手段５１は、第１の動きベクトル決定用参照フレームＲＶ１、第２の動きベクトル決定用参照フレームＲＶ２および第３の動きベクトル決定用参照フレームＲＶ３を動きベクトル検出手段５３および補間画像生成用参照フレーム選択手段５４に出力する。
【００７５】
補間フレーム出力タイミング決定手段５２は、間隔ｔ１、間隔ｔ２、補間区間信号ｉｎｔｔｒｍ、間隔ｓ１および間隔ｓ２を出力する。
【００７６】
間隔ｔ１は、第１の動きベクトル決定用参照フレームＲＶ１と第２の動きベクトル決定用参照フレームＲＶ２との間隔である。間隔ｔ２は、第２の動きベクトル決定用参照フレームＲＶ２と第３の動きベクトル決定用参照フレームＲＶ３との間隔である。
【００７７】
補間区間信号ｉｎｔｔｒｍは、画像を補間する区間を選択して設定する信号である。画像を補間する区間は、第１の区間として第１の動きベクトル決定用参照フレームＲＶ１と第２の動きベクトル決定用参照フレームＲＶ２との間が考えられ、また、第２の区間として第２の動きベクトル決定用参照フレームＲＶ２と第３の動きベクトル決定用参照フレームＲＶ３との間が考えられる。補間区間信号ｉｎｔｔｒｍは例えば第１の区間で画像を補間する場合は「０」、第２の区間で画像を補間する場合は「１」としてあらわされる。
【００７８】
間隔ｓ１は、第１の補間画像生成用参照フレームＲＧ１と補間フレームとの間隔である。間隔ｓ２は、補間フレームと第２の補間画像生成用参照フレームＲＧ２との間の間隔である。
【００７９】
補間フレーム出力タイミング決定手段５２は、入力信号の垂直同期信号とクロックに同期した内部カウンタから入力信号の映像周期を求め、入力信号のフレームレートｉｎｆｒを判定する。また、補間フレーム出力タイミング決定手段５２は、出力フレームレートが６０ｈｚ、１２０ｈｚおよび２４０ｈｚのいずれかを示す出力フレームレート設定用パラメータの値ｏｕｔｆｒを保持している。式（１）に示すように、出力フレームレート設定用パレメータの値ｏｕｔｆｒと入力信号のフレームレートｉｎｆｒとの比から１を引いた値を補間画像の挿入枚数ｉｎｓｎとする。補間画像の挿入枚数ｉｎｓｎとは、１つのフレーム間に複数の補間フレームを挿入する際の補間フレームの枚数である。
【００８０】
ｉｎｓｎ＝ｏｕｔｆｒ／ｉｎｆｒ−１・・・（１）
【００８１】
また、クロックに同期した内部カウンタの値、フレームレートおよび補間画像の挿入枚数ｉｎｓｎから、補間フレーム出力タイミング決定手段５２は、挿入情報ｉｎｓｔを求める。挿入情報ｉｎｓｔは、入力された画像データＦ０のフレーム間に複数の補間画像を挿入する際、何番目のフレームを挿入するかを示すデータである。
【００８２】
コマ落ちが発生している場合、補間フレーム出力タイミング決定手段５２は、入力信号のフレームレートｉｎｆｒ、コマ落ちが発生しているかどうかの情報およびどのフレームがコマ落ち画像であるかの情報を用いて、コマ落ちしているフレームをはさむフレーム間隔を生成して出力する。コマ落ちしているフレームをはさむフレーム間隔は、コマ落ちしたフレームの前後のフレームのフレーム間隔を用いて求められる。コマ落ちしているフレームをはさむフレーム間隔は、前後のフレームのフレーム間隔のフレームレートｉｎｆｒの逆数を２倍した値である。ここで、補間モード信号ｍｄは、コマ落ちが発生しているかどうかの情報およびどのフレームがコマ落ち画像であるかの情報を有する。コマ落ちが発生せず、何もフレームをはさまない場合、補間フレーム出力タイミング決定手段５２は、フレーム間隔をフレームレートｉｎｆｒの逆数として生成し出力する。３フレーム遅延したフレームがコマ落ちしている場合、補間フレーム出力タイミング決定手段５２は、間隔ｔ１をコマ落ちしたフレームをはさむ間隔として出力する。間隔ｔ１は、第１の動きベクトル決定用参照フレームＲＶ１と第２の動きベクトル決定用参照フレームＲＶ２との間隔である。２フレーム遅延したフレームがコマ落ちしている場合、補間フレーム出力タイミング決定手段５２は、間隔ｔ２をコマ落ちしたフレームをはさむ間隔として出力する。間隔ｔ２は、第２の動きベクトル決定用参照フレームＲＶ２と第３の動きベクトル決定用参照フレームＲＶ３との間隔である。
【００８３】
また、補間フレーム出力タイミング決定手段５２は、どのフレームがコマ落ち画像であるかの情報を用いて、補間区間信号ｉｎｔｔｒｍを決定する。補間フレーム出力タイミング決定手段５２は、３フレーム遅延したフレームがコマ落ちしている場合には補間区間信号ｉｎｔｔｒｍを００として出力し、２フレーム遅延したフレームがコマ落ちしている場合には補間区間信号ｉｎｔｔｒｍを０１として出力し、コマ落ちが発生していない場合には補間区間信号ｉｎｔｔｒｍを１１として出力する。
【００８４】
また、補間フレーム出力タイミング決定手段５２は、どのフレームがコマ落ちであるかの情報、入力信号のフレームレートｉｎｆｒ、出力フレームレート設定用パレメータの値ｏｕｔｆｒおよび挿入情報ｉｎｓｔから間隔ｓ１，ｓ２を求める。挿入情報ｉｎｓｔは、入力された画像データＦ０のフレーム間に複数の補間画像を挿入する際、何番目のフレームを挿入するかを示すデータである。３フレーム遅延したフレームがコマ落ちしている場合には間隔ｓ１，ｓ２を式（２）および式（３）を用いて求める。２フレーム遅延したフレームがコマ落ちしている場合には間隔ｓ１，ｓ２を式（４）および式（５）を用いて求める。
【００８５】
ｓ１  ＝  １／ｉｎｆｒ＋１／ｏｕｔｆｒ×ｉｎｓｎ・・・（２）
ｓ２  ＝  １／ｉｎｆｒ―１／ｏｕｔｆｒ×ｉｎｓｎ・・・（３）
【００８６】
ｓ１  ＝  １／ｏｕｔｆｒ×ｉｎｓｎ・・・（４）
ｓ２  ＝  ２／ｉｎｆｒ―１／ｏｕｔｆｒ×ｉｎｓｎ・・・（５）
【００８７】
間隔ｔ１および間隔ｔ２は、動きベクトル検出手段５３に出力される。補間区間信号ｉｎｔｒｍは、動きベクトル検出手段５３、補間画像生成用参照フレーム選択手段５４および補間画像生成用動きベクトル選択手段５５に出力される。間隔ｓ１および間隔ｓ２は、動きベクトル変換手段５６に出力される。
【００８８】
動きベクトル検出手段５３は、第１の動きベクトル決定用参照フレームＲＶ１、第２の動きベクトル決定用参照フレームＲＶ２および第３の動きベクトル決定用参照フレームＲＶ３を参照する。動きベクトル検出手段５３は、動きベクトルＭＶＲ１および動きベクトルＭＶＲ２を算出する。動きベクトルＭＶＲ１は、第１の動きベクトル決定用参照フレームＲＶ１と第２の動きベクトル決定用参照フレームＲＶ２との間の第１の区間の動きベクトルである。動きベクトルＭＶＲ２は、第２の動きベクトル決定用参照フレームＲＶ２と第３の動きベクトル決定用参照フレームＲＶ３との間の第２の区間の動きベクトルである。動きベクトルＭＶＲ１および動きベクトルＭＶＲ２は、補間画像生成用動きベクトル選択手段５５に出力される。
【００８９】
補間画像生成用参照フレーム選択手段５４は、補間区間信号ｉｎｔｔｒｍに基づき、動きベクトル決定用参照フレームＲＶから補間フレームを生成する。補間フレームを生成する際に、補間画像生成用参照フレーム選択手段５４は、第１の補間画像生成用参照フレームＲＧ１または第２の補間画像生成用参照フレームＲＧ２を選択する。補間画像生成用参照フレーム選択手段５４は、第１の補間画像生成用参照フレームＲＧ１または第２の補間画像生成用参照フレームＲＧ２を補間フレーム生成手段５７に出力する。
【００９０】
第１の動きベクトル決定用参照フレームＲＶ１と第２の動きベクトル決定用参照フレームＲＶ２との間で画像を補間する場合、ｉｎｔｔｒｍは００となる。補間画像生成用参照フレーム選択手段５４は、第１の動きベクトル決定用参照フレームＲＶ１を第１の補間画像生成用参照フレームＲＧ１として出力する。補間画像生成用参照フレーム選択手段５４は、第２の動きベクトル決定用参照フレームＲＶ２を第２の補間画像生成用参照フレームＲＧ２として出力する。第２の動きベクトル決定用参照フレームＲＶ２と第３の動きベクトル決定用参照フレームＲＶ３との間で画像を補間する場合、ｉｎｔｔｒｍは０１となり、補間画像生成用参照フレーム選択手段５４は、第２の動きベクトル決定用参照フレームＲＶ２を第１の補間画像生成用参照フレームＲＧ１として出力する。補間画像生成用参照フレーム選択手段５４は、第３の動きベクトル決定用参照フレームＲＶ３を第２の補間画像生成用参照フレームＲＧ２として出力する。
【００９１】
補間画像生成用動きベクトル選択手段５５は、補間区間信号ｉｎｔｔｒｍに基づき、第１の区間の動きベクトルＭＶＲ１と第２の区間の動きベクトルＭＶＲ２のどちらかを選択する。選択された第１の区間の動きベクトルＭＶＲ１または第二２の区間の動きベクトルＭＶＲ２は、第１の補間画像生成用動きベクトルとして動きベクトル変換手段５６に出力される。
【００９２】
動きベクトル変換手段５６は、第１の補間画像生成用動きベクトルＭＶＧ１を、第２の補間画像生成用動きベクトルＭＶＧ２および第３の補間画像生成用動きベクトルＭＶＧ３に変換して補間フレーム生成手段５７に出力する。第２の補間画像生成用動きベクトルＭＶＧ２は、第１の補間画像生成用参照フレームＲＧ１から補間フレームデータＩＦへのベクトルである。第３の補間画像生成用動きベクトルＭＶＧ３は、第２の補間画像生成用参照フレームＲＧ２から補間フレームデータＩＦへのベクトルである。
【００９３】
補間フレーム生成手段５７は、第１の補間画像生成用参照フレームＲＧ１、第２の補間画像生成用参照フレームＲＧ２、第２の補間画像生成用動きベクトルＭＶＧ２および第３の補間画像生成用動きベクトルＭＶＧ３を用いて補間フレームデータＩＦを生成する。生成された補間フレームデータＩＦは、第１の補間画像生成用参照フレームＲＧ１と第２の補間画像生成用参照フレームＲＧ２との間の補間フレームとして挿入される。補間フレーム生成手段５７は、補間フレームデータＩＦが挿入された出力画像データＤ０を出力する。
【００９４】
次に、動きベクトル検出手段５３の詳細な構成について説明する。
【００９５】
動きベクトル検出手段５３は、テスト補間手段５８、補間データ評価手段５９および動きベクトル決定手段６０を備える。
【００９６】
テスト補間手段５８は、第１の動きベクトル決定用参照フレームＲＶ１、第３の動きベクトル決定用参照フレームＲＶ３、間隔ｔ１および間隔ｔ２を入力する。間隔ｔ１は、第１の動きベクトル決定用参照フレームＲＶ１と第２の動きベクトル決定用参照フレームＲＶ２との間隔である。間隔ｔ２は、第２の動きベクトル決定用参照フレームＲＶ２と第３の動きベクトル決定用参照フレームＲＶ３との間隔である。テスト補間手段５８は、第３の動きベクトル決定用参照フレームＲＶ３および第１の動きベクトル決定用参照フレームＲＶ１を入力する。テスト補間手段５８は、テスト補間データＴＤを生成する。テスト補間データＴＤは、第２の動きベクトル決定用参照フレームＲＶ２に対応する複数のテスト補間データを含んでいる。テスト補間手段５８は、テスト補間データＴＤを補間データ評価手段５９に出力する。
【００９７】
補間データ評価手段５９は、第２の動きベクトル決定用参照フレームＲＶ２と複数のテスト補間データを含むテスト補間データＴＤとを比較し、画像の類似性を評価する。補間データ評価手段５９は、評価データＥＤを動きベクトル決定手段６０に出力する。
【００９８】
動きベクトル決定手段６０は、評価データＥＤに基づいて、第１の区間の動きベクトルＭＶＲ１および第２の区間の動きベクトルＭＶＲ２を出力する。
【００９９】
動きベクトル検出手段５３のさらに詳細な構成について説明する。
【０１００】
図９は、動きベクトル検出手段５３の行う処理を詳細に示した説明図である。
【０１０１】
テスト補間手段５８は、第１の動きベクトル算出用参照フレームＲＶ１および第３の動きベクトル算出用参照フレームＲＶ３を入力する。テスト補間手段５８は、動きベクトル検出手段５３の構成要素である。テスト補間手段５８は、第１の動きベクトル算出用参照フレームＲＶ１および第３の動きベクトル算出用参照フレームＲＶ３を用いてテスト補間データＴＤを生成する。テスト補間データＴＤは、第２の動きベクトル算出用参照フレームＲＶ２と比較する複数のテスト補間データを含むデータである。テスト補間手段５８は、テスト補間データＴＤを補間データ評価手段５９に出力する。
【０１０２】
テスト補間手段５８は、複数のテスト補間データ生成手段５８（１）からテスト補間データ生成手段５８（ｍ）までを備える。補間データ評価手段５９は、複数の差分絶対値和算出手段５９（１）から差分絶対値和算出手段５９（ｍ）までを備える。
【０１０３】
テスト補間データ生成手段５８（１）は、第１のブロックデータＲＶ１Ｂ１および第１のブロックデータＲＶ３Ｂ１を入力する。第１のブロックデータＲＶ１Ｂ１は、第１の動きベクトル算出用参照フレームのブロックデータである。第１のブロックデータＲＶ３Ｂ１は、第３の動きベクトル算出用参照フレームのブロックデータである。テスト補間データ生成手段５８（１）は、第１のブロックデータＲＶ１Ｂ１の画素値の平均値および第１のブロックデータＲＶ３Ｂ１の画素値の平均値を第１のテスト補間データＴＤ１とする。第１のブロックデータＲＶ１Ｂ１は、第１の動きベクトル算出用参照フレームのブロックデータである。第１のブロックデータＲＶ３Ｂ１は、第３の動きベクトル算出用参照フレームのブロックデータである。テスト補間データ生成手段５８（１）は、第１のテスト補間データＴＤ１を差分絶対値和算出手段５９（１）に出力する。
【０１０４】
テスト補間データ生成手段５８（２）は、第２のブロックデータＲＶ１Ｂ２および第２のブロックデータＲＶ３Ｂ２を入力する。第２のブロックデータＲＶ１Ｂ２は、第１の動きベクトル算出用参照フレームのブロックデータである。第２のブロックデータＲＶ３Ｂ２は、第１の動きベクトル算出用参照フレームのブロックデータである。テスト補間データ生成手段５８（２）は、第２のブロックデータＲＶ１Ｂ２の画素値の平均値および第２のブロックデータＲＶ３Ｂ２の画素値の平均値を第２のテスト補間データＴＤ２とする。テスト補間データ生成手段５８（２）は、第２のテスト補間データＴＤ２を差分絶対値和算出手段５９（２）に出力する。
【０１０５】
ｘを３からｍまでの自然数とすると、テスト補間データ生成手段５８（ｘ）は、テスト補間データ生成手段５８（１）およびテスト補間データ生成手段５８（２）と同様の動作を行う。テスト補間データ生成手段５８（ｘ）は、第ｘのブロックデータＲＶ１Ｂｘおよび第ｘのブロックデータＲＶ３Ｂｘを用いテスト補間データＴＤ１と同様に第ｘのテスト補間データＴＤｘを生成する。第ｘのブロックデータＲＶ１Ｂｘは、第１の動きベクトル算出用参照フレームのブロックデータである。第ｘのブロックデータＲＶ３Ｂｘは、第３の動きベクトル算出用参照フレームのブロックデータである。テスト補間データ生成手段５８（ｘ）は、第ｘのテスト補間データＴＤｘを差分絶対値和算出手段５９（ｘ）に出力する。
【０１０６】
図９の説明で、テスト補間データＴＤは、複数の補間データを有することを示した。この複数の補間データがテスト補間データＴＤ１からテスト補間データＴＤｍまでである。
【０１０７】
ブロックデータＲＶ１Ｂ１および第１のブロックデータＲＶ３Ｂ１の対応関係については後述する。第１のブロックデータＲＶ１Ｂ１は、第１の動きベクトル算出用参照フレームのブロックデータである。第１のブロックデータＲＶ３Ｂ１は、第３の動きベクトル算出用参照フレームのブロックデータである。
【０１０８】
第１のブロックデータＲＶ２Ｂ１は、差分絶対値和算出手段５９（１）から差分絶対値和算出手段５９（ｍ）までに入力される。差分絶対値和算出手段５９（ｘ）は、補間データ評価手段５９の構成要素である。なお、ｘは１からｍまでの自然数である。第１のブロックデータＲＶ２Ｂ１は、第２の動きベクトル算出用参照フレームのブロックデータである。
【０１０９】
差分絶対値和算出手段５９（１）は、第１のテスト補間データＴＤ１と第１のブロックデータＲＶ２Ｂ１との差分値の絶対値和を算出する。差分絶対値和算出手段５９（１）は、算出した差分値の絶対値和を評価データＥＤ１とする。第１のブロックデータＲＶ２Ｂ１は、第２の動きベクトル算出用参照フレームのブロックデータである。差分絶対値和算出手段５９（１）は、評価データＥＤ１を動きベクトル決定手段６０に出力する。差分値の絶対値和は式（６）で表される。
【０１１０】
【数１】
2013118438.tif 000003
【０１１１】
ここで、ｎはブロック内の画素位置であり、Ｂはブロック内の全画素であり、ＢＫ１およびＢＫ２はブロックデータである。ブロックデータＢＫ１を第１のテスト補間データＴＤ１とする。また、ブロックデータＢＫ２を第１のブロックデータＲＶ２Ｂ１とする。これらの置き換えをすると、式（１）は第１のテスト補間データＴＤ１と第１のブロックデータＦ２Ｂ１との差分値の絶対値和となる。第１のブロックデータＦ２Ｂ１は、第２の遅延フレームデータのブロックデータである。差分値の絶対値和ｆＳＡＤは、評価データＥＤ１として差分絶対値和算出手段５９（１）から出力される。
【０１１２】
差分絶対値和算出手段５９（２）から差分絶対値和算出手段５９（ｍ）までについても差分絶対値和算出手段５９（１）と同様の処理が行われる。ｘを２からｍまでの自然数とする。差分絶対値和算出手段５９（ｘ）は、第ｘのテスト補間データＴＤｘと第１のブロックデータＦ２Ｂ１との差分値の絶対値和を算出する。第１のブロックデータＦ２Ｂ１は、第２の動きベクトル算出用参照フレームのブロックデータである。差分絶対値和算出手段５９（ｘ）は、差分値の絶対値和を評価データＥＤｘとして動きベクトル決定手段６０に出力する。
【０１１３】
動きベクトル決定手段６０は、第１の動きベクトル算出用フレームＲＶ１のブロックと第３の動きベクトル算出用フレームＲＶ３のブロックとの位置の差を動きベクトルＭＶとする。第１の動きベクトル算出用フレームＲＶ１のブロックおよび第３の動きベクトル算出用フレームＲＶ３のブロックは、評価データＥＤ１から評価データＥＤｍまでのうち最も評価の高い評価データに対応するブロック対である。最も評価の高い評価データとは、最も小さい差分絶対値和である。第１の動きベクトル算出用フレームＲＶ１のブロックと第３の動きベクトル算出用フレームＲＶ３のブロックとの位置の差とは、第１の動きベクトル算出用フレームＲＶ１内のブロックに対応する動きベクトル算出用フレームＲＶ３内のブロックの相対位置である。動きベクトルＭＶを以下の式（７）、式（８）によって分割して、動きベクトルＭＶＲ１および動きベクトルＭＶＲ２とする。動きベクトル決定手段６０は、動きベクトルＭＶＲ１および動きベクトルＭＶＲ２を出力する。
ＭＶＲ１  ＝  ＭＶ×ｔ１／（ｔ１＋ｔ２）・・・（７）
ＭＶＲ２  ＝  ＭＶ×ｔ２／（ｔ１＋ｔ２）・・・（８）
【０１１４】
図１０は、動きベクトル検出手段５３の動作を説明するための説明図である。ｍ＝２の場合について説明する。
【０１１５】
第１のブロックデータＲＶ２Ｂ１は、第２の動きベクトル算出用参照フレームＲＶ２の任意に選択された領域である。第１のブロックデータＲＶ１Ｂ１は、第１の動きベクトル算出用参照フレームＲＶ１の領域である。第１のブロックデータＲＶ２Ｂ１は、第１のブロックデータＲＶ１Ｂ１を、ベクトルＶ１＿１を用いて移動した位置のブロックに対応している。第１のブロックデータＲＶ３Ｂ１は、第３の動きベクトル算出用参照フレームＲＶ３の領域である。第１のブロックデータＲＶ３Ｂ１は、第１のブロックデータＲＶ２Ｂ１を、ベクトルＶ２＿１を用いて移動した位置のブロックに対応している。第２のブロックデータＲＶ１Ｂ２は、第１の動きベクトル算出用参照フレームＲＶ１の領域である。第２のブロックデータＲＶ２Ｂ１は、第２のブロックデータＲＶ１Ｂ２を、ベクトルＶ１＿２を用いて移動した位置のブロックに対応している。第１のブロックデータＲＶ３Ｂ２は、第３の動きベクトル算出用参照フレームＲＶ３の領域である。第１のブロックデータＲＶ３Ｂ２は、第１のブロックデータＲＶ２Ｂ１を、ベクトルＶ２＿２を用いて移動した位置のブロックに対応している。ここでＶ１＿ｘとＶ２＿ｘとは同じ向きのベクトルとする。また、Ｖ１＿ｘとＶ２＿ｘとの比は、間隔ｔ１と間隔ｔ２との比に等しくなる。
【０１１６】
テスト補間データ生成手段５８（１）は、第１のブロックデータＲＶ１Ｂ１の画素と第１のブロックデータＲＶ３Ｂ１の対応する画素とを平均してテスト補間データＴＤ１の対応する画素として生成する。第１のブロックデータＲＶ１Ｂ１は、第１の動きベクトル算出用参照フレームＲＶ１のブロックデータである。第１のブロックデータＲＶ３Ｂ１は、第３の動きベクトル算出用参照フレームＲＶ３のブロックデータである。テスト補間データ生成手段５８（１）と同様に、テスト補間データ生成手段５８（２）は、第２のブロックデータＲＶ１Ｂ２の画素と第２のブロックデータＲＶ３Ｂ２の画素とを平均してテスト補間データＴＤ２の対応する画素として生成する。第２のブロックデータＲＶ１Ｂ２は、第１の動きベクトル算出用参照フレームＲＶ１のブロックデータである。第２のブロックデータＲＶ３Ｂ２は、第３の動きベクトル算出用参照フレームＲＶ３のブロックデータである。
【０１１７】
差分絶対値和算出手段５９（１）は、テスト補間データＴＤ１と第１のブロックデータＦ２Ｂ１から式（１）を使って差分値の絶対値和を算出する。第１のブロックデータＦ２Ｂ１は、第２の動きベクトル算出用参照フレームＲＶ２のブロックデータである。差分絶対値和算出手段５９（１）は、差分値の絶対値和を評価データＥＤ１として出力する。差分絶対値和算出手段５９（１）と同様に、差分絶対値和算出手段５９（２）は、テスト補間データＴＤ２と第２のブロックデータＦ２Ｂ２から式（１）を使って差分値の絶対値和を算出する。第２のブロックデータＦ２Ｂ２は、第２の動きベクトル算出用参照フレームＲＶ２のブロックデータである。差分絶対値和算出手段５９（２）は、差分値の絶対値和を評価データＥＤ２として出力する。
【０１１８】
動きベクトル決定手段６０は、評価データＥＤ１と評価データＥＤ２とのうち値が小さいほうのベクトルの組を第１の区間の動きベクトルＭＶＲ１と第２の区間の動きベクトルＭＶＲ２として出力する。例えば、第２のテスト補間データＴＤ２より第１のテスト補間データＴＤ１の方が小さい場合、動きベクトル決定手段６０は、ベクトルＶ１＿１を第１の区間の動きベクトルＭＶＲ１として出力し、ベクトルＶ２＿１を第２の区間の動きベクトルＭＶＲ２として出力する。
【０１１９】
図１０では、２つのベクトルから第１の動きベクトルを決定する方法について説明したが、本発明に係る実施の形態の構成はｍ＝２に限定されない。ベクトルＶ１＿１およびベクトルＶ２＿１とベクトルＶ２＿３およびベクトルＶ２＿２と異なるベクトルを複数設定しても良い。
【０１２０】
補間データ評価手段５９は、差分値の絶対値和を用いて評価データを算出した。しかし、相関を求める関数は自乗誤差和など他にも多数あり、これに置き換えることも可能である。
【０１２１】
次に、動きベクトル変換手段５６と補間フレーム生成手段５７との詳細な動作について説明する。
【０１２２】
図１１は、動きベクトル変換手段５６と補間フレーム生成手段５７との動作を説明するための説明図である。
【０１２３】
動きベクトル変換手段５６は、第１の補間フレーム生成用動きベクトルＭＶＧ１を第２の補間フレーム生成用動きベクトルＭＶＧ２と第３の補間フレーム生成用動きベクトルＭＶＧ３とに変換する。第１の補間フレーム生成用動きベクトルＭＶＧ１は、第１の補間画像生成用参照フレームＲＧ１から第２の補間画像生成用参照フレームへのベクトルである。第２の補間フレーム生成用動きベクトルＭＶＧ２は、第１の補間画像生成用参照フレームＲＧ１から補間フレームデータＩＦへのベクトルである。第３の補間フレーム生成用動きベクトルＭＶＧ３は、第２の補間画像生成用参照フレームＲＧ２から補間フレームデータＩＦへのベクトルである。
【０１２４】
図１１に示すように、第１の補間画像生成用参照フレームＲＧ１から補間フレームＩＦまでの時間間隔を間隔ｓ１として、補間フレームＩＦと第二の補間画像生成用参照フレームＲＧ１との時間間隔を間隔ｓ２としたとき、式（９）により第２の補間フレーム生成用動きベクトルＭＶＧ２を求め、式（１０）により第３の補間フレーム生成用動きベクトルＭＶＧ３を算出する。
【０１２５】
ＭＶＧ２ ＝ ＭＶG１ × ｓ１／ （ｓ１＋ｓ２）  ・・・（９）
ＭＶＧ３ ＝ −ＭＶG１ × ｓ２ ／ （ｓ１＋ｓ２）  ・・・（１０）
【０１２６】
図１１に示すように、補間フレームデータＩＦ上の画素からベクトルＭＶＧ２の負方向の位置の第１の補間画像生成用参照フレームＲＧ１上の画素の値と補間フレームデータＩＦ上の画素からベクトルＭＶＧ３の負方向の位置の第２の補間画像生成用参照フレームＲＧ２上の画素の値との平均値を補間フレームデータＩＦ上の画素の値として算出する。生成した補間フレームデータＩＦを第１の補間画像生成用参照フレームＲＧ１と第２の補間画像生成用参照フレームＲＧ２との間に内挿して出力する。
【０１２７】
以上の実施の形態により、コマ落ちした画像を補間し、映像のジャダーを防止する。
【符号の説明】
【０１２８】
１  画像遅延手段、  １１  フレーム間差分平均算出手段、  １１  フレーム間差分平均算出手段、  １２  領域分割手段、  １３  領域内特徴量検出手段１３（ｘ）、  １４  映像特徴判定手段、  ２  映像特徴量検出手段、  ２１  フレーム差分最大値検出手段、  ２２  フレーム間動きブロック数算出手段、  ２３  静止画判定手段、  ２４  シーンチェンジ判定手段、  ３  コマ落ち補間モード設定手段、  ３１  全領域静止画検出手段、  ３２  シーンチェンジ検出手段、  ４  画像補間手段、  ４１  信号遅延手段、  ４２  コマ落ち判定手段、  ４３  コマ落ちキャンセル判定手段、  ４４  コマ落ち補間モード決定手段、  ５１  動きベクトル決定用参照フレーム選択手段、  ５２  補間フレーム出力タイミング決定手段、  ５３  動きベクトル検出手段、  ５４  補間画像生成用参照フレーム選択手段、  ５５  補間画像生成用動きベクトル選択手段、  ５６  動きベクトル変換手段、  ５７  補間フレーム生成手段、  ５８  テスト補間手段、  ５８（ｘ）  テスト補間データ生成手段、  ５９  補間データ評価手段、    ５９（ｘ）  差分絶対値和算出手段、  ６０  動きベクトル決定手段、  １００  画像処理装置、  ｂｌｋｅｎ  ブロック・タイミング信号、  ｃｈａ（ｘ）  特徴量、  ｃｎｃｌ  コマ落ち補間キャンセル判定結果、  ｄｆ（Ｎ）  差分情報信号、  ｄｒｐ  コマ落ち判定結果、  Ｄ０  出力画像データ、  ＥＤ  評価データ、  Ｆ０  画像データ、  Ｆ１  １フレーム遅延画像データ、  ＦＤ  遅延フレーム画像データ、  ｆｔｒ  映像特徴量検出結果、  ｆｒｂ  フレーム差分ブロック平均、  ｆｒｍａｘ  フレーム差分ブロック平均の最大値、  ｆｒｂｌｋ  フレーム間動きブロック数、  ｆｒｓｔｉｌ（ｘ）  静止画判定信号、  ｆｒｓｃｈ（ｘ）  シーンチェンジ判定信号、  ｆｒｓｔｉｌ  静止画判定信号、  ｆｒｓｃｈ  シーンチェンジ判定信号、  ｉｎｔｔｒｍ  補間区間信号、  ｉｎｆｒ  入力信号のフレームレート、  ｉｎｓｎ  補間画像の挿入枚数、  ｉｎｓｔ  挿入情報、  ＩＦ  補間フレームデータ、  ＭＶ  動きベクトル、  ｍｄ  補間モード信号、  ＭＶＲ１  第１の区間の動きベクトル、  ＭＶＲ２  第２の区間の動きベクトル、  ＭＶＧ１  第１の補間画像生成用動きベクトル、  ＭＶＧ２  第２の補間画像生成用動きベクトル、  ｏｕｔｆｒ  出力フレームレート設定用パラメータの値、  ＲＧ１  第１の補間画像生成用参照フレーム、  ＲＧ２  第２の補間画像生成用参照フレーム、  ＲＶ  動きベクトル決定用参照フレーム、  ＲＶ１  第１の動きベクトル決定用参照フレーム、  ＲＶ２  第２の動きベクトル決定用参照フレーム、  ＲＶ３  第３の動きベクトル決定用参照フレーム、  ＳＡ（ｘ）  領域、  ＳＴＨ  閾値、  ｓｔｉｌ  静止画検出結果、  ｓｃｈ  シーンチェンジ検出結果、  ｓ１，ｓ２  間隔、  ｔａｒ  領域信号、  ｔ１，ｔ２，ｔ３  間隔、  ＴＤ  テスト補間データ、  フレーム間の差分情報、  ｎ  ブロック内の画素位置、  Ｂ  ブロック内の全画素、  ＢＫ１，ＢＫ２  ブロックデータ、  ｆＳＡＤ  差分値の絶対値和。
【図１】
2013118438.tif 000004
【図２】
2013118438.tif 000005
【図３】
2013118438.tif 000006
【図４】
2013118438.tif 000007
【図５】
2013118438.tif 000008
【図６】
2013118438.tif 000009
【図７】
2013118438.tif 000010
【図８】
2013118438.tif 000011
【図９】
2013118438.tif 000012
【図１０】
2013118438.tif 000013
【図１１】
2013118438.tif 000014