(57)【特許請求の範囲】
【請求項１】
入力されるインタレース走査のビデオ映像信号における画面の特徴量を抽出する手段と、
前記画面の特徴量を抽出する手段により抽出される特徴量から画面単位にフィルムモードを検出する画面単位フィルムモード検出手段と、
局所領域毎にフレーム間差分に応じて動きの有無を判定し、動き有りと判定された局所領域を選択する局所領域選択手段と、
前記選択された局所領域毎にフィルムモードか否かを判定する局所領域フィルムモード判定手段と、
前記選択された局所領域であってフィルムモードとは判定されなかった局所領域については前記局所領域フィルムモード判定手段の判定結果を出力し、それ以外の局所領域については前記画面単位フィルムモード検出手段の検出結果を出力するフィルムモード補正手段とを有し、
前記局所領域選択手段は、
前記局所領域のフレーム間差分の閾値との比較により動き有無を判定し、動き有りである場合に、連続する３つのフィールドＦ（ｎ）、Ｆ（ｎ−１）、Ｆ（ｎ−２）について、フィールドＦ（ｎ）とＦ（ｎ−１）間の差分絶対値の局所領域分を加算した第１のフィールド間差分絶対値和と、フィールドＦ（ｎ−１）とＦ（ｎ−２）間の差分絶対値の局所領域分を加算した第２のフィールド間差分絶対値和を求め、更に、
前記局所領域フィルムモード判定手段は、
前記第１のフィールド間差分絶対値和と第２のフィールド間差分絶対値和との相関が高い場合に合成映像であると判定する、
ことを特徴とする合成映像検出装置。
【請求項２】
請求項１において、
前記フィルムモード検出手段は、２２又は、２３プルダウンシーケンスを検出することによりフィルムモードを検出することを特徴とする合成映像検出装置。
【請求項３】
請求項１において、
前記局所領域フィルムモード判定手段は、局所領域毎にフィルムモードか否かを判定する際に、前記第１のフィールド間差分絶対値和と第２のフィールド間差分絶対値和の商を求め、商が１に近いときに相関が高い場合と判定することを特徴とする合成映像検出装置。
【請求項４】
インタレース走査のビデオ映像信号を順次走査ディスプレイに表示するために最適なＩＰ（Interlace to Progressive）変換を行うための合成映像検出装置において実行されるプログラムであって、
前記プログラムの実行により、
前記合成映像検出装置に、
入力されるインタレース走査のビデオ映像信号における画面の特徴量を抽出する手段と、
前記画面の特徴量を抽出する手段により抽出される特徴量から画面単位にフィルムモードを検出する画面単位フィルムモード検出手段と、
局所領域毎にフレーム間差分に応じて動きの有無を判定し、動き有りと判定された局所領域を選択する局所領域選択手段と、
前記選択された局所領域毎にフィルムモードか否かを判定する局所領域フィルムモード判定手段と、
前記選択された局所領域であってフィルムモードとは判定されなかった局所領域については前記局所領域フィルムモード判定手段の判定結果を出力し、それ以外の局所領域については前記画面単位フィルムモード検出手段の検出結果を出力するフィルムモード補正手段として機能させ、
前記局所領域選択手段に、
前記局所領域のフレーム間差分の閾値との比較により動き有無を判定し、動き有りである場合に、連続する３つのフィールドＦ（ｎ）、Ｆ（ｎ−１）、Ｆ（ｎ−２）について、フィールドＦ（ｎ）とＦ（ｎ−１）間の差分絶対値の局所領域分を加算した第１のフィールド間差分絶対値和と、フィールドＦ（ｎ−１）とＦ（ｎ−２）間の差分絶対値の局所領域分を加算した第２のフィールド間差分絶対値和を求めさせ、更に
前記局所領域フィルムモード判定手段に、
前記第１のフィールド間差分絶対値和と第２のフィールド間差分絶対値和との相関が高い場合に合成映像であると判定させる、
ことを特徴とするプログラム。
【請求項５】
請求項４において、
前記フィルムモード検出手段は、２２又は、２３プルダウンシーケンスを検出することによりフィルムモードを検出することを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、インタレース走査のビデオ映像信号を順次走査ディスプレイに表示するために最適なＩＰ（Interlace to Progressive）変換を行うための合成映像検出装置に関する。
【背景技術】
【０００２】
これまで、表示素子としてブラウン管を使用した場合は、帯域を節約し、高速に描画するために奇数・偶数インタレース走査方式が用いられてきた。
【０００３】
一方、近年は、ディスプレイ素子として種類も多く、液晶・プラズマ・リアプロジェクション等のディスプレイ素子を問わず、プログレッシブ（順次）走査方式が広く採用されている。
【０００４】
プログレッシブ（順次）走査方式は、画面を偶数列、奇数列に２分割して交互に走査を行う奇数・偶数インタレース走査方式に対し、２分割せずに1回の走査で、画面を形成する方式である。コンピュータモニター用出力は基本的にプログレッシブ走査方式である。
【０００５】
したがって、奇数・偶数インタレース走査方式によるインタレース走査映像信号を液晶・プラズマ・リアプロジェクション等のディスプレイ素子にプログレッシブ走査方式で表示するためには、インタレース走査方式をプログレッシブ走査方式に変換するためのＩＰ（Interlace to Progressive）変換が不可欠である。
【０００６】
これに対応して、近時のデジタル方式テレビ受信装置は受信したインタレース走査映像信号をＩＰ変換によりプログレッシブ映像信号に変換して画像を表示する処理を行っている。
【０００７】
このＩＰ変換処理では、各フィールドにおいて情報の半分が欠落しているインタレース映像を補完することになるため、単純に補完処理を行うと、フレーム数が半分になってしまう。これを補うため、これまで様々な工夫が行われている。
【０００８】
かかるＩＰ変換処理の善し悪し、またこれと他の画像制御技術との調和方法の違いによって映像品質に差が生じることになる。
【０００９】
一方、映像編集技術の進歩に伴い、様々な合成映像が放送されるようになって来た。例えば、１画面内に、ＮＴＳＣ方式（あるいはＰＡＬ方式）の放送映像と共に日付、時間、文字などを表示し、あるいは映画の字幕、ＣＧ（コンピュータグラフィックス）、ビデオカメラ映像などを挿入した合成映像が放映されるようになってきた。
【００１０】
そのような合成映像を形成している各映像部分の元の映像データは、元々がＮＴＳＣ方式である６０Ｈｚの放送データであるか、２２プルダウンの手法で作成されたＣＧであるか、２３プルダウンの手法で作成された映像データであったりする。
【００１１】
すなわち、フレーム周波数６０Ｈｚのインタレースで撮影したビデオカメラ映像と、フレーム周波数３０Ｈｚのプログレッシブで生成されたＣＧ映像との合成映像やフレーム周波数３０ＨｚのプログレッシブのＣＭ（コマーシャルフィルム）映像にフレーム周波数６０Ｈｚのインタレースで生成された文字テロップを重畳した合成映像などがある。
【００１２】
このように、表示画面内の映像において、２２プルダウン手法による日付や時間、文字表示や映画の字幕、ＣＧ（コンピュータグラフィックス）、２３プルダウン手法によるビデオカメラ映像が局所的にウィンドウ表示されたフレーム周波数の異なる映像が合成・重畳されて作られたインタレース走査の合成映像が存在する場合がある。
【００１３】
かかるフレーム周波数の異なる映像が合成・重畳されて作られたインタレース映像をＩＰ変換処理する場合は、合成映像に対してフィルムモード検出が行われ、その検出結果に基づいて、順次走査方式の映像データに変換するＩＰ変換を行なっている。
【００１４】
ここで、フィルムモードとは、映画などのフィルムソースをインタレース映像とするために変換されている状態(テレシネ処理された状態)の映像データを意味する。そして、フィルムモード検出は、かかるテレシネ処理の際の変換方式、即ち、２２プルダウンシーケンスであるのか、２３プルダウンシーケンスであるか、又はそのいずれでもない放送データであるかを検出する処理を意味する。
【００１５】
ここで、２２プルダウン映像データと２３プルダウン映像データについて簡単に説明する。
【００１６】
図１Ａは、例えばデジタルビデオカメラで撮像された３０Ｈｚのプログレッシブ映像信号から６０Ｈｚのインタレース映像信号に変換された２２プルダウン映像データのデータ配列を模式的に示す図である。
【００１７】
図１Ｂは、映画データの２４Ｈｚのフィルムプログレッシブ映像信号から６０Ｈｚのインタレース映像信号に変換された２３プルダウン映像データのデータ配列を模式的に示す図である。
【００１８】
図１Ａに示すように、２２プルダウンシーケンスにおいては、プログレッシブ映像信号のそれぞれ１枚のフレームＦ１、Ｆ２・・・から、インタレース映像信号の２枚のフィールド(f1t,f1b), (f2t,f2b)・・・が生成され、この変換手順が順次繰り返される。
【００１９】
一方、図１Ｂに示すように、２３プルダウンシーケンス３においては、シネマ映像のフレームのプログレッシブ映像信号の第1のフレームＦ１から、インタレース映像信号の３枚のフィールド(f11,f12,f13)が生成される。次いで、第２のフレームＦ２から、インタレース映像信号の２枚のフィールド(f21,f22)が生成される。この３フィールド、２フィールドの変換手順が、フレームＦ３のプログレッシブ映像信号以降のフレームにも順次繰り返される。
【００２０】
ここで、図１Ｂに示す２３プルダウンシーケンスにおいて、３枚目に生成されたフィールド（f13)、８枚目に生成されたフィールド（f33)は、それぞれ１枚目に生成されたフィールド(f11), ６枚目に生成されたフィールドと同一の映像データ、すなわちリピートフィールドである。
【００２１】
このリピートフィールドであるフィールド(f13), （f33)は、それぞれ時間軸の離れた２枚のフィールド(f12)と(f21)、(f32)と(f41)の間に挿入されているから、１画面として見た場合、リピート部分とリピートでない部分とで映像にコーミングノイズ現象が発生する。また、合成映像では合成の境界部分の異なる周波数映像にコーミングノイズ現象が発生する。
【００２２】
かかる現象を補間等によって補正してからＩＰ変換して高画質の６０Ｈｚのプログレッシブ映像とするには、ＩＰ変換する前のインタレース映像信号が合成映像であるか否か、合成映像であれば合成された映像部分毎に、合成でなければ映像全体が、２２プルダウン映像データであるか、２３プルダウン映像であるかを確認する必要がある。この確認のために、上述したフィルムモード検出が行なわれる。
【００２３】
このように、元映像の変換方式が判明しさえすれば、その変換方式に応じてトランスフォームＩＰ変換、又は動き補償型ＩＰ変換により、それぞれの合成映像毎にＩＰ変換を行ない、高画質な映像として実現できると考えられてきた。
【００２４】
そして、かかる目的のために行なわれるフィルムモード検出の従来技術として種々提案されている。
【００２５】
図２Ａ、図２Ｂに、かかる従来技術としてフィルムモード検出機能を備えた合成画像検出装置の一般的な第１及び第２の構成例を説明する図である。
【００２６】
図２Ａに示される従来構成では、２つのフィールドメモリ１０、１１と、フィルムモード検出機能部１００と、トランスフォームＩＰ変換部１５、動き補償型ＩＰ変換部１６、及び合成部１４を有する。
【００２７】
フレーム間差分などによりフィルムモード検出（２２・２３プルダウンシーケンス検出）を行なうために、第１のフィールドメモリ１０及び第２のフィールドメモリ１１の２つのフィールドメモリを用いて、連続する３フィールド分のフィールド信号Ｆ（ｎ）、Ｆ（ｎ−１）、及びＦ（ｎ−２）を出力する。
【００２８】
これら３フィールド分のフィールド信号Ｆ（ｎ）、Ｆ（ｎ−２）、及びＦ（ｎ−３）が、フィルムモード検出機能部１００を構成する画面単位の特徴量抽出部１２に入力される。
【００２９】
一方、上記連続する３フィールド分のフィールド信号Ｆ（ｎ）、Ｆ（ｎ−１）及びＦ（ｎ−２）は、トランスフォームＩＰ変換部１５、及び動き補償型ＩＰ変換部１６にも入力される。
【００３０】
特徴量抽出部１２は上記連続する３フィールド分のフィールド信号Ｆ（ｎ）、Ｆ（ｎ−１）及びＦ（ｎ−２）を入力して、フィルムモード検出機能部１００を構成する画面単位の特徴量抽出部１２で一画面の特徴量を検知する。
【００３１】
画面のフィルムモード検出部１３は、特徴量抽出部１２から画面毎の検知される特徴量を入力する。そして、特徴量検出部１２で検出される画面の特徴量を過去の複数フィールドに渉って保持し、全体の動き結果から、フィルムモードの検出を行なう。
【００３２】
フィルムモードの検出結果に基づき、トランスフォームＩＰ変換部１５、及び動き補償型ＩＰ変換部１６のいずれか一方からのＩＰ変換後の信号を有効とする。
【００３３】
かかる図２Ａに示す従来技術に関連する発明が特許文献１に示される。すなわち、特許文献１に記載の発明は、画像全体に対し、特徴を抽出し、その結果による全体の動き結果に基づいて、フィルムモード判定を行なうものである。
【００３４】
一方、図２Ｂに示される従来構成は２つのフィールドメモリ１０、１１と、フィルムモード検出機能部１００のみを示し、図２Ａにおいて示したトランスフォームＩＰ変換部１５、動き補償型ＩＰ変換部１６及び、合成部１４については図示省略している。
【００３５】
二つのフィールドメモリ１０、１１からの現在フィールド、１フィールド前、及び２フィールド前の３フィールドの画像信号を順次入力して、画面の局所領域を順次に、局所領域選択部１４で選択する。ここでの局所領域は、画面をｍ×ｎ個の複数のブロック領域に区分したときのそれぞれの画素領域を意味する。
【００３６】
局所領域選択部１４で順次に選択された局所領域の信号が特徴量抽出部１５に入力される。
【００３７】
局所領域の特徴量抽出部１５で、該当の局所領域の特徴を抽出して、特徴量振り分け部１６に送る。特徴量抽出部１５で抽出された特徴量は、特徴量振り分け部１６により、複数の局所領域に対応するフィルムモード検出部１７ａ〜１７ｎの対応するフィルムモード検出部に送られ、そこで、局所領域毎にフィルムモードか否かの検出が行なわれかかる図２Ｂに示す従来技術に関連するものとして特許文献２に示される発明がある。かかる特許文献２に記載の発明は、画面内を合成映像領域とは無関係な複数の局所領域にあらかじめ分割し、当該分割された領域ごとにフィルムモード検出を行なう発明である。
【００３８】
さらに、特許文献３に記載された発明がある。この発明は、図２Ｂに示すようにフィールド画像を複数のブロックに分割する。そして、分割した各ブロックについて連続する同一属性(奇数又は偶数フィールド)の２つのフィールド画像間における信頼度が最も高い動きベクトルを検出して、動き補償を行なう。動きベクトルの検出の際に、検出された動きベクトルと信頼度の情報を用いて、映像信号に含まれる繰り返しフィールド画像を検出して、フィルムモードを判定するものである。
【特許文献１】特開２００５-３１８６２４号公報
【特許文献２】特開２００５-３１８６１１号公報
【特許文献３】特開２００６−３０３９１０号公報
【発明の開示】
【発明が解決しようとする課題】
【００３９】
ここで、上記の特許文献１に記載の発明による画面単位のフィルムモード決定を行なって、画面単位に編集された映像からのフィルムモードの検出は可能である。しかし、合成映像では、例えばＣＧやＣＭフィルムの領域が比較的大きい、あるいは特徴が強いような場合は、３０Hzのフィルム映像として検出され、フィルム用ＩＰ変換が行われる。
【００４０】
結果として、６０Hzのビデオカメラ映像や文字テロップに、櫛状に１ライン毎に画像がずれて生じる、ぎざぎざの残像のような画像となるコーミングノイズが発生するという問題がある。
【００４１】
また、上記の特許文献２、あるいは特許文献３に記載の発明による局所領域毎のフィルムモード判定では、局所領域毎にフィルムモードを判定する為に局所領域毎に最適なフィルムモード検出、及びＩＰ変換が可能となる。
【００４２】
しかし、局所領域毎に対応する複数のフィルムモード検出機能部が必要であり、回路規模が比較的大きくなるという問題がある。
【００４３】
したがって、本発明の目的は、かかる従来の技術である特許文献１、２に記載の発明における問題を解決する合成映像検出装置を提供することにある。
【課題を解決するための手段】
【００４４】
上記の課題を解決する本発明は、入力されるインタレース走査のビデオ映像信号における画面の特徴量を抽出し、前記画面の特徴量を抽出する手段により抽出される特徴量から画面単位にフィルムモードを検出する。
【００４５】
さらに、局所領域のデータからフィルムモードでない特徴量(インターレース画像らしさ)を検出した場合に、前記フィルムモードとして検出しないようにする。
【００４６】
前記合成映像であることの判定は、フレーム間差分との閾値判定による動き有無を判定し、動き有りである場合に、連続する３つのフィールドＦ（ｎ）、Ｆ（ｎ−１）、Ｆ（ｎ−２）について、フィールドＦ（ｎ）とＦ（ｎ−１）間の差絶対値のライン単位の局所領域分を加算した第１のフィールド間差分絶対値和と、フィールドＦ（ｎ−１）とＦ（ｎ−２）間の差絶対値のライン単位の局所領域分を加算した第２のフィールド間差分絶対値和を求める。
【００４７】
そして、前記第１のフィールド間差分絶対値和と第２のフィールド間差分絶対値和の相関が高い場合に合成映像であると判定する。相関が高い場合として、例えば、第１のフィールド間差分絶対値和と第２のフィールド間差分絶対値和の商を求め、前記求めた商が１に近いときである。
【００４８】
このように、本願発明は、フィルムモード検出における画面の特徴量に基づくフィルムモード検出結果に関わらず、局所領域特徴量抽出で局所領域のインタレースらしさの局所領域毎の検出結果（フィルムモードでない局所領域が存在する）を使い合成映像であると判定し、前記フィルムモードを解除する。
【００４９】
これにより、異なるフレーム周波数の映像が挿入された合成映像に対してコーミングノイズの発生を軽減し、高画質化が実現できる。
【発明を実施するための最良の形態】
【００５０】
以下に、本発明の実施の形態例を図面に従い説明する。
【００５１】
図３は、本発明に従う合成画像検出装置の構成例ブロック図である。
【００５２】
なお、構成例ブロック図で表される機能は、ハードウエアにより構成される場合の他、ファームウエアあるいは、プログラムの実行によってＣＰＵを各ブロック対応の機能手段として機能させるよう構成することも可能である。
【００５３】
図中、２つのフィールドメモリ１０、１１と、フィルムモード検出機能部１００と、トランスフォームＩＰ変換部１５、動き補償型ＩＰ変換部１６及び、合成部１４を有する。
【００５４】
フレーム間差分などによりフィルムモード検出（２２・２３プルダウンシーケンス検出）を行なうために、第１のフィールドメモリ１０及び第２のフィールドメモリ１１の２つのフィールドメモリを用いて、連続する３フィールド分のフィールド信号Ｆ（ｎ）、Ｆ（ｎ−１）、及びＦ（ｎ−２）を出力する。
【００５５】
これら３フィールド分のフィールド信号Ｆ（ｎ）、Ｆ（ｎ−２）、及びＦ（ｎ−３）が、フィルムモード検出機能部１００に入力される。
【００５６】
一方、上記連続する３フィールド分のフィールド信号Ｆ（ｎ）、Ｆ（ｎ−１）及びＦ（ｎ−２）は、他の配線を通してトランスフォームＩＰ変換部１５、及び動き補償型ＩＰ変換部１６にも入力される。
【００５７】
フィルムモード検出機能部１００は、実施例として、図２Ａに示した構成と同様の画面の特徴量抽出部１２と、画面フィールドモード検出部１３を有する。
【００５８】
画面の特徴量抽出部１２は上記連続する３フィールド分のフィールド信号Ｆ（ｎ）、Ｆ（ｎ−１）及びＦ（ｎ−２）を入力して、画面毎の特徴量を検知する。
【００５９】
画面のフィルムモード検出部１３は、画面の特徴量抽出部１２から画面毎の検知される特徴量を入力する。そして、画面の特徴量検出部１２で検出される画面の特徴量を過去の複数フィールドに渉って保持し、全体の動き結果から、フィルムモードの検出を行なう。かかる処理は、図１に示した従来構成と同様である。
【００６０】
画面の特徴量抽出部１２は、現在フィールドの画像と、フィールドメモリ１０,１１により遅延された隣接フィールドの画像との画像間の類似度を判定する。その判定される類似度は、画面特徴量としてフィルムモード検出部１３に送られる。
【００６１】
フィルムモード検出部１３で入力された隣接フィールド画像間の類似度に基づいて、入力された映像信号が、フィルム映像をインタレーステレビ映像に変換された映像信号であるか否か、即ち、フィルムモードであるか否かを判定する。
【００６２】
フィルムモードであると判定される場合は、従来構成では、合成部１４により、トランスフォームＩＰ変換部１５の出力が有効となるように切り替えて出力される。
【００６３】
これに対し、本発明では、フィルムモード検出機能部１００に、局所領域の選択部１８、局所領域のインタレースらしさを抽出する局所領域特徴量抽出部１９及びフィルムモード補正部２０を設けている。ここで、図３に示す本発明の実施例において、局所領域特徴量抽出部１９における局所領域とはライン単位を意味する。
【００６４】
図４は、局所領域の選択部１８、局所領域のインタレースらしさを抽出する局所領域特徴量抽出部１９において実行される処理機能部を表す図である。
【００６５】
すなわち、図４において、局所領域の選択部１８は、動き多寡判定部１９０において、３フィールド分のフィールド信号Ｆ（ｎ）、Ｆ（ｎ−１）及びＦ（ｎ−２）を入力して、局所領域としてライン単位にフレーム間の差分が閾値を越えることを検知する動き多寡を判定する。すなわち、該当の局所領域としてのライン単位において動き画素の有無を判定する。
【００６６】
動き画素有と判定される場合は、差分絶対値和算出機能部１９１において上記３フィールド内の差分絶対値和(ＳＡＤ)を求める。
【００６７】
すなわち、フィールド信号Ｆ（ｎ）とフィールド信号Ｆ（ｎ−１）間のライン上の対応する画素間の差分の絶対値を求め、該当ラインについて、累積値を求める。この累積値を第１のフィールド間差分絶対値和ＳＡＤ１とする。同様に、フィールド信号Ｆ（ｎ-１）とフィールド信号Ｆ（ｎ−２）間のライン上の対応する画素間の差分の絶対値を求め、該当ラインについて、累積値を求め、これを第２のフィールド間差分絶対値和ＳＡＤ２とする。
【００６８】
この様に局所領域毎（ライン毎）に求めたＳＡＤ１とＳＡＤ２を局所領域特徴量抽出部１９に送る。
【００６９】
局所領域特徴量抽出部１９では、前記ＳＡＤ１とＳＡＤ２との相関を求める。求めた相関が高いとき合成映像であると判定する。
【００７０】
実施例として、局所領域特徴量抽出部１９で局所領域毎（ライン毎）にＳＡＤ１とＳＡＤ２を対応させてテーブル化（１９２）する。ついで、除算機能部１９３で、ＳＡＤ１とＳＡＤ２の値の大小判定を行なって、大の値から小の値の除算を行なう。その求めた商がテーブル１９２に登録される。
【００７１】
ついで、求めた商が“１”となるとき、その局所領域毎（ライン単位）に合成映像候補となり、合成映像候補フラグＦを有効とする。
【００７２】
ここで、ＳＡＤ１とＳＡＤ２の除算により求められる商が“１”のときに合成映像候補とすることができる理由を図５Ａ，図５Ｂ及び図６により説明する。
【００７３】
図５Ａは、一例としてインタレース走査画面中にＣＧ映像Ａとビデオカメラ映像Ｂが合成された映像画面を示す図である。図５Ａにおいて、ＣＧ映像(２２プルダウン映像)Ａとビデオカメラ映像(６０Hzインタレース映像)Ｂの境界が存在する領域Ｘを考える。
【００７４】
かかる場合、インタレース走査画面において、図５Ｂに示すように、走査方向においてＣＧ映像(２２プルダウン映像)Ａの信号とビデオカメラ映像(６０Hzインタレース映像)Ｂの信号が切り替わる。
【００７５】
図６は、かかる図５Ｂの一走査方向において、ＣＧ映像(２２プルダウン映像)Ａの信号とビデオカメラ映像(６０Hzインタレース映像)Ｂの信号が切り替わる部分を含む一部範囲で、前記のＳＡＤ１とＳＡＤ２の値、及びＳＡＤ１とＳＡＤ２との商の値をプロットした図である。図６において、横軸に走査方向の画素数を表し、縦軸にＳＡＤの値を示している。
【００７６】
この図６において、動きのあるビデオカメラのインタレース映像Ｂでは、ＳＡＤ１とＳＡＤ２が似た値となる傾向があり、除算した結果として、“１”が算出される。
【００７７】
一方、ＣＧであるフィルム映像Ａでは、元の映像がプログレッシブ映像であり３フィールド内で２つを求めるので、あるＳＡＤでは値が極端に小さくなり、もう一方のＳＡＤでは、値が大きくなる傾向がある。この場合には、ＳＡＤ１とＳＡＤ２との商の値は、大きくなる。
【００７８】
なお、上記で、ＳＡＤ１とＳＡＤ２の商が“１”となるときとは、商が“１”に近いときを含む。すなわち、上記図４で商は、小数点以下を四捨五入している。その理由は図７を参照して次のように説明できる。
【００７９】
すなわち、図７（ａ）は、２２映像のＳＡＤ１とＳＡＤ２の商の分布を表し、図７（ｂ）は、合成映像(２２プルダウンシーケンス映像と６０Ｈｚインタレース映像の合成)のＳＡＤ１とＳＡＤ２の商の分布を表している。
【００８０】
さらに、図７（ｃ）に示すように、フィルム映像（２２、２３プルダウンシーケンス映像）では、入力がプログレッシブ映像（２４Ｐ、３０Ｐ）であることから、Ｔ２(現時刻映像）とＢ１（１フィールド前映像）のＳＡＤ１、Ｔ１（２フィールド前映像）とＢ１（１フィールド前映像）のＳＡＤ２の値の関係が、どんな動きに関しても大から小、小から大の関係となり、実際の商の値も２以上の値になる。
【００８１】
反対に、６０Hzインタレース映像では、フィールド単位で画素差分がばらつく傾向にあり、時間軸方向において、動きが多いほど、ＳＡＤ１、ＳＡＤ２の値がばらつき、実際の得られる商の値は“１”に近似してくる。このため、商の精度を１/２で四捨五入してみると、２２・２３プルダウンシーケンスで、誤検出とはならないで、商が“１”となる値が画素方向に連続性があることで、インタレースらしさの６０Ｈｚインタレース映像が存在しているといえる。
【００８２】
したがって、ＳＡＤ１とＳＡＤ２との商の値“１”を判断値とすることにより、異なるフレーム周波数の映像を切り分けることができる。
【００８３】
但し、局所領域(ライン単位)毎での動き多寡判定結果が動き有りであっても、動きの少ない場合には、ＳＡＤ1、ＳＡＤ２の差が大きくなる為、計算結果としての商の値が２〜１０の範囲で算出される場合もある。
【００８４】
図３に戻り、上記のように、局所領域特徴量抽出部１９により,ＳＡＤ1、ＳＡＤ２との商が“１”であるときビデオカメラ映像と判断してフラグＦを立て、フィルムモード補正部２０に入力する。
【００８５】
かかる場合、フィルムモード補正部２０は、フラグＦが連続した局所領域(ライン単位)が、例えば４ライン以上のときは、フィルムモード検出部１３の検出結果がフィルムモード候補であった場合であっても、局所領域（ライン単位）の局所領域特徴量抽出部１９の検出結果を優先して、合成映像と判断してフィルムモードの解除を行なう。これによって、合成部１４は、動き補償型ＩＰ変換の出力に切り替え出力する。
【産業上の利用可能性】
【００８６】
上記の構成により、従来のフィルムモード検出では、合成映像に対してフィルムモードとして検出されてフィルム用(トランスフォーム)ＩＰ変換が行なわれる為、コーミングノイズ現象が発生していた。
【００８７】
これに対し、本発明では、画面フィルムモード検出部における画面の特徴量に基づくフィルムモード検出結果に関わらず、局所領域特徴量抽出部１９で局所領域のインタレースらしさの局所領域毎の検出結果（フィルムモードでない局所領域が存在する）を使い合成映像であると判定し、前記フィルムモードを解除する。
【００８８】
これにより、異なるフレーム周波数の映像が挿入された合成映像に対してコーミングノイズの発生を軽減し、高画質化が実現できる。よって、本発明の産業上寄与するところ大である。
【図面の簡単な説明】
【００８９】
【図１Ａ】２２プルダウン映像データのデータ配列を模式的に示す図である。
【図１Ｂ】２３プルダウン映像データのデータ配列を模式的に示す図である。
【図２Ａ】従来技術としてフィルムモード検出機能を備えた合成画像検出装置の一般的な第1の構成を説明する図である。
【図２Ｂ】従来技術としてフィルムモード検出機能を備えた合成画像検出装置の一般的な第２の構成を説明する図である。
【図３】本発明に従う合成画像検出装置の構成例ブロック図である。
【図４】局所領域の選択部１８、局所領域のインタレースらしさを抽出する局所領域特徴量抽出部１９における構成を実行される処理機能として表す図である。
【図５Ａ】一例としてインタレース走査画面中にＣＧ映像Ａとビデオカメラ映像Ｂが合成された映像画面を示す図である。
【図５Ｂ】走査方向においてＣＧ映像(２２プルダウン映像)Ａの信号とビデオカメラ映像(６０Hzインタレース映像)Ｂの信号が切り替わる様子を示す図である。
【図６】ＳＡＤ１とＳＡＤ２の値、及びＳＡＤ１とＳＡＤ２との商の値をプロットした図である。
【図７】ＳＡＤ１とＳＡＤ２の商を小数点以下を四捨五入して、“１”とする理由を説明する図である。
【符号の説明】
【００９０】
１０、１１  フィールドメモリ
１２  画面の特徴量抽出部
１３  画面のフィルムモード抽出部
１４  合成部
１５  トランスフォームＩＰ変換部
１６  動き補償型ＩＰ変換部
１８  局所領域の選択部
１９  局所領域特徴抽出部
１００  フィルムモード検出機能部
【図１Ａ】
0004510874.tif 000002
【図１Ｂ】
0004510874.tif 000003
【図２Ａ】
0004510874.tif 000004
【図２Ｂ】
0004510874.tif 000005
【図３】
0004510874.tif 000006
【図４】
0004510874.tif 000007
【図５Ａ】
0004510874.tif 000008
【図５Ｂ】
0004510874.tif 000009
【図６】
0004510874.tif 000010
【図７】
0004510874.tif 000011