(57)【要約】【課題】超解像の処理に対して出力する映像の乱れを防止する超解像処理装置及び超解像処理システムを提供することを目的とする。【解決手段】映像受信手段３０２は、入力された動画コンテンツ３０１をデコードし、当該デコードする際に検出した超解像禁止領域から超解像制御情報を作成し、当該超解像禁止領域の情報を合成された映像フレーム情報に重畳し、当該映像フレーム情報を映像表示手段３０３に送信する処理を行い、映像表示手段３０３は、映像フレーム情報を受信し、重畳した超解像制御情報に基いて映像フレーム情報に対して超解像処理を実施するか通常のスケーリング処理をするかの制御を行い映像を表示させる処理を行うことにより上記課題を解決する。【選択図】図３
2009117886.tif 000002
【特許請求の範囲】
【請求項１】
映像受信手段と、映像表示手段とを有する超解像処理装置であって、
前記映像受信手段は、入力された動画コンテンツをデコードし、当該デコードする際に検出した超解像禁止領域から超解像制御情報を作成し、当該超解像制御情報を合成された映像フレーム情報に重畳し、当該映像フレーム情報を前記映像表示手段に送信する処理を行い、
前記映像表示手段は、前記映像フレーム情報を受信し、前記重畳した超解像制御情報に基いて前記映像フレーム情報に対して超解像処理を実施するか通常のスケーリング処理をするかの制御を行い映像を表示させる処理を行うことを特徴とする超解像処理装置。
【請求項２】
映像受信手段と、映像表示手段とを有する超解像処理装置であって、
前記映像受信手段は、入力された動画コンテンツをデコードし、当該デコードする際に検出した超解像禁止領域から超解像制御情報を作成し、デコードした映像フレーム情報を前記映像表示手段に送信し、作成した前記超解像制御情報は前記映像フレーム情報とは別経路で前記映像表示手段に送信する処理を行い、
前記映像表示手段は、前記映像フレーム情報及び前記超解像制御情報を受信し、受信した前記超解像制御情報に基いて前記映像フレーム情報に対する超解像処理を実施するか通常のスケーリング処理をするかの制御を行い映像を表示させる処理を行うことを特徴とする超解像処理装置。
【請求項３】
請求項１又は請求項２に記載の超解像処理装置において、前記超解像禁止領域は、文字領域、静止領域、既に超解像処理が行われた領域、映像の動きが大きすぎると判断される領域、又は、複数の物体の動きが交差するなど動きが複雑であると判断される領域の少なくともいずれか一つを含むことを特徴とする超解像処理装置。
【請求項４】
コンテンツ蓄積機能を具備する映像蓄積再配信装置と、映像表示装置とを有し、前記映像蓄積再配信装置と前記映像表示装置はネットワークで接続された超解像処理システムであって、
前記映像蓄積再配信装置は、入力された動画コンテンツをトランスコードし、当該トランスコードする際に検出した超解像禁止領域から超解像制御情報を作成し、当該超解像制御情報はトランスコードされた圧縮データに重畳し、当該圧縮データをコンテンツ蓄積機能に蓄積し、当該蓄積された圧縮データを前記映像表示装置からの要求に従い前記映像表示装置へ送信する処理を行い、
前記映像表示装置は、前記圧縮データを受信し、受信した当該圧縮データを映像フレーム情報に展開し、前記重畳された超解像制御情報に基いて前記映像フレーム情報に対して超解像処理を実施するか通常のスケーリング処理をするかの制御を行い映像を表示させる処理を行うことを特徴とする超解像処理システム。
【請求項５】
コンテンツ蓄積機能を具備する映像蓄積再配信装置と、映像表示装置とを有し、前記映像蓄積再配信装置と前記映像表示装置はネットワークで接続された超解像処理システムであって、
前記映像蓄積再配信装置は、入力された動画コンテンツをトランスコードし、当該トランスコードする際に検出した超解像禁止領域から超解像制御情報を作成し、当該トランスコードされた圧縮データ及び作成した前記超解像制御情報をコンテンツ蓄積機能に蓄積し、当該蓄積された圧縮データを前記映像表示装置からの要求に従い前記映像表示装置へ送信し、作成した前記超解像制御情報は前記圧縮データとは別経路で前記映像表示装置に送信する処理を行い、
前記映像表示装置は、前記圧縮データ及び前記超解像制御情報を受信し、受信した当該圧縮データを映像フレーム情報に展開し、前記超解像制御情報に基いて前記映像フレーム情報に対して超解像処理を実施するか通常のスケーリング処理をするかの制御を行い映像を表示させる処理を行うことを特徴とする超解像処理システム。
【請求項６】
映像送信装置と、映像表示装置とを有する超解像処理システムであって、
前記映像送信装置は、入力された動画をエンコードし、当該エンコードする際に検出した超解像禁止領域から超解像制御情報を作成し、当該超解像制御情報をエンコードされた圧縮データに重畳し、当該エンコードされた圧縮データを前記映像表示装置へ送信する処理を行い、
前記映像表示装置は、前記圧縮データを受信し、受信した当該圧縮データを映像フレーム情報に展開し、前記重畳した超解像制御情報に基いて前記映像フレーム情報に対して超解像処理を実施するか通常のスケーリング処理をするかの制御を行い映像を表示させる処理を行うことを特徴とする超解像処理システム。
【請求項７】
映像送信装置と、映像表示装置とを有する超解像処理システムであって、
前記映像送信装置は、入力された動画をエンコードし、当該エンコードする際に検出した超解像禁止領域から超解像制御情報を作成し、前記エンコードされた圧縮データを前記映像表示装置へ送信し、前記作成した超解像制御情報を前記圧縮データとは別経路で前記映像表示装置に送信する処理を行い、
前記映像表示装置は、前記圧縮データ及び前記超解像制御情報を受信し、受信した前記圧縮データを映像フレーム情報に展開し、前記超解像制御情報に基いて前記映像フレーム情報に対して超解像処理を実施するか通常のスケーリング処理をするかの制御を行い映像を表示させる処理を行うことを特徴とする超解像処理システム。
【請求項８】
請求項４から請求項７のいずれか一項に記載の超解像処理システムにおいて、前記超解像禁止領域は、文字領域、静止領域、既に超解像処理が行われた領域、映像の動きが大きすぎると判断される領域、又は、複数の物体の動きが交差するなど動きが複雑であると判断される領域の少なくともいずれか一つを含むことを特徴とする超解像処理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、超解像処理装置及び超解像処理システムに関し、特に、超解像の処理に対して出力する映像の乱れを防止する超解像処理装置及び超解像処理システムに関する。
【背景技術】
【０００２】
超解像表示技術は、複数の画像から、高解像度の画像を生成する技術である。一般的な動作原理は、（１）複数のフレーム（の被写体）を正確に位置合わせして１枚の画像に合成し（２）画素の微小な位置ずれ（位相差）を利用して、高精細化を実現するものである。
【０００３】
例えば、フレーム１からフレーム４まで時間的に連続した４つのフレームがあり、フレーム４に対して超解像を適用して高解像にする場合、超解像に必要なフレームが３の場合には、フレーム２，３，４の画像を使って処理を行う。
【０００４】
そして、超解像表示を行う前に、超解像表示に適した映像であるかを判定する、あるいは、全く判定することなく超解像表示を実施していた。
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかし、例えば字幕が含まれる映像の場合は、文字が静止しており、背景の映像が動作していると、これらが重なり合った部分で動きベクトルの検出がうまく行かず、超解像表示処理後の映像が破綻する場合があった。また、一度既に超解像表示処理が行われた画像に対し超解像表示処理を行うと、映像の乱れが増加し破綻をきたす場合があった。
【０００６】
これらの字幕の検出、超解像表示処理の既実施／未実施を検出するためには、相応の演算処理や記憶領域が必要になるため、実現コストが上がる他、完全に検出できなかった場合の映像破綻も発生する可能性があった。
【０００７】
上記課題に鑑みて、本発明は、超解像の処理に対して出力する映像の乱れを防止する超解像処理装置及び超解像処理システムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するため、本発明の超解像処理装置は、映像受信手段と、映像表示手段とを有する超解像処理装置であって、前記映像受信手段は、入力された動画コンテンツをデコードし、当該デコードする際に検出した超解像禁止領域から超解像制御情報を作成し、当該超解像制御情報を合成された映像フレーム情報に重畳し、当該映像フレーム情報を前記映像表示手段に送信する処理を行い、前記映像表示手段は、前記映像フレーム情報を受信し、前記重畳した超解像制御情報に基いて前記映像フレーム情報に対して超解像処理を実施するか通常のスケーリング処理をするかの制御を行い映像を表示させる処理を行うことを特徴とする。
【０００９】
また、本発明の超解像処理装置は、映像受信手段と、映像表示手段とを有する超解像処理装置であって、前記映像受信手段は、入力された動画コンテンツをデコードし、当該デコードする際に検出した超解像禁止領域から超解像制御情報を作成し、デコードした映像フレーム情報を前記映像表示手段に送信し、作成した前記超解像制御情報は前記映像フレーム情報とは別経路で前記映像表示手段に送信する処理を行い、前記映像表示手段は、前記映像フレーム情報及び前記超解像制御情報を受信し、受信した前記超解像制御情報に基いて前記映像フレーム情報に対する超解像処理を実施するか通常のスケーリング処理をするかの制御を行い映像を表示させる処理を行うことを特徴とする。
【００１０】
さらに本発明の超解像処理装置は、前記超解像禁止領域は、文字領域、静止領域、既に超解像処理が行われた領域、映像の動きが大きすぎると判断される領域、又は、複数の物体の動きが交差するなど動きが複雑であると判断される領域の少なくともいずれか一つを含むことを特徴とする。
【００１１】
一方、本発明の超解像処理システムは、コンテンツ蓄積機能を具備する映像蓄積再配信装置と、映像表示装置とを有し、前記映像蓄積再配信装置と前記映像表示装置はネットワークで接続された超解像処理システムであって、前記映像蓄積再配信装置は、入力された動画コンテンツをトランスコードし、当該トランスコードする際に検出した超解像禁止領域から超解像制御情報を作成し、当該超解像制御情報はトランスコードされた圧縮データに重畳し、当該圧縮データをコンテンツ蓄積機能に蓄積し、当該蓄積された圧縮データを前記映像表示装置からの要求に従い前記映像表示装置へ送信する処理を行い、前記映像表示装置は、前記圧縮データを受信し、受信した当該圧縮データを映像フレーム情報に展開し、前記重畳された超解像制御情報に基いて前記映像フレーム情報に対して超解像処理を実施するか通常のスケーリング処理をするかの制御を行い映像を表示させる処理を行うことを特徴とする。
【００１２】
また、本発明の超解像処理システムは、コンテンツ蓄積機能を具備する映像蓄積再配信装置と、映像表示装置とを有し、前記映像蓄積再配信装置と前記映像表示装置はネットワークで接続された超解像処理システムであって、前記映像蓄積再配信装置は、入力された動画コンテンツをトランスコードし、当該トランスコードする際に検出した超解像禁止領域から超解像制御情報を作成し、当該トランスコードされた圧縮データ及び作成した前記超解像制御情報をコンテンツ蓄積機能に蓄積し、当該蓄積された圧縮データを前記映像表示装置からの要求に従い前記映像表示装置へ送信し、作成した前記超解像制御情報は前記圧縮データとは別経路で前記映像表示装置に送信する処理を行い、前記映像表示装置は、前記圧縮データ及び前記超解像制御情報を受信し、受信した当該圧縮データを映像フレーム情報に展開し、前記超解像制御情報に基いて前記映像フレーム情報に対して超解像処理を実施するか通常のスケーリング処理をするかの制御を行い映像を表示させる処理を行うことを特徴とする。
【００１３】
また、本発明の超解像処理システムは、映像送信装置と、映像表示装置とを有する超解像処理システムであって、前記映像送信装置は、入力された動画をエンコードし、当該エンコードする際に検出した超解像禁止領域から超解像制御情報を作成し、当該超解像制御情報をエンコードされた圧縮データに重畳し、当該エンコードされた圧縮データを前記映像表示装置へ送信する処理を行い、前記映像表示装置は、前記圧縮データを受信し、受信した当該圧縮データを映像フレーム情報に展開し、前記重畳した超解像制御情報に基いて前記映像フレーム情報に対して超解像処理を実施するか通常のスケーリング処理をするかの制御を行い映像を表示させる処理を行うことを特徴とする。
【００１４】
また、本発明の超解像処理システムは、映像送信装置と、映像表示装置とを有する超解像処理システムであって、前記映像送信装置は、入力された動画をエンコードし、当該エンコードする際に検出した超解像禁止領域から超解像制御情報を作成し、前記エンコードされた圧縮データを前記映像表示装置へ送信し、前記作成した超解像制御情報を前記圧縮データとは別経路で前記映像表示装置に送信する処理を行い、前記映像表示装置は、前記圧縮データ及び前記超解像制御情報を受信し、受信した前記圧縮データを映像フレーム情報に展開し、前記超解像制御情報に基いて前記映像フレーム情報に対して超解像処理を実施するか通常のスケーリング処理をするかの制御を行い映像を表示させる処理を行うことを特徴とする。
【００１５】
さらに、本発明の超解像処理システムは、前記超解像禁止領域は、文字領域、静止領域、既に超解像処理が行われた領域、映像の動きが大きすぎると判断される領域、又は、複数の物体の動きが交差するなど動きが複雑であると判断される領域の少なくともいずれか一つを含むことを特徴とする。
【発明の効果】
【００１６】
本発明によれば、超解像処理装置及び超解像処理システムにおいて、超解像の処理に対して出力する映像の乱れを防止することができる。
【発明を実施するための最良の形態】
【００１７】
本発明を実施するための最良の形態を説明する。
【００１８】
エンコード、デコード、トランスコード等をする際において、ベクトル処理により、静止部分や、文字領域、既に超解像処理が行われた領域、映像の動きが大きすぎる部分、複雑な部分が含まれるか否かの検出が可能である。そして、その情報（超解像禁止領域の情報）から超解像制御情報を作成し、ストリームや映像フレーム情報に重畳することで超解像表示処理を制御し、破綻のない映像を提示することが可能となる。
【００１９】
図１は、本発明において、フレーム単位での超解像実施又は非実施指定を示す概略図である。図１の例では、字幕（静止部分）を含むフレームが存在した場合（１０２〜１０４）このフレームすべてにおいて、超解像表示処理を行わない（１０７〜１０９）方式を示している。
【００２０】
図２は、本発明において、領域を指定した超解像実施又は非実施指定を示す概略図である。図２の例では、フレーム２０１において、グラフィック領域２０７と字幕領域２０８が含まれる場合を考える。このとき、グラフィック領域２０７と字幕領域２０８は、通常のスケーリングを行い（２１０）、その他の領域２０２は、超解像表示処理を行う（２０３）。そして、これらの領域を合成する（２０６）。このことにより、静止領域以外の部分は超解像表示処理されたフレームが完成することとなる。
【実施例１】
【００２１】
図３は、実施例１の超解像処理装置の構成図である。図３に映像受信手段３０２と、映像表示手段３０３を有する超解像処理装置が示されている。映像受信手段３０２は、コンテンツ入力機能３０４、動画処理機能３０５、字幕処理機能３０６、グラフィックス描画機能３０７、映像合成機能３０８、超解像制御情報合成機能３０９、映像送信機能３１０を有する。また、映像表示手段３０３は、映像受信機能３１１、超解像制御機能３１２、超解像処理機能３１３、映像表示機能３１４を有する。
【００２２】
映像受信手段３０２において、コンテンツ入力機能３０４により入力した動画コンテンツは動画情報及び字幕情報に分解され、それぞれ動画処理機能３０５、字幕処理機能３０６に入力される。また、ユーザの操作をガイドするためのグラフィックス表示はグラフィックス描画機能３０７によって生成される。これらは映像合成機能３０８によって合成され１つの映像となる。超解像制御情報合成機能３０９では、動画処理機能３０５、字幕処理機能３０６、グラフィックス描画機能３０７から送られてくる、超解像禁止領域情報３１５、字幕領域情報３１６、グラフィックス領域情報３１７を超解像禁止領域として、合成された映像に重畳して映像送信機能３１０に供給する。このように、入力された動画コンテンツのデータをデコードした際に、超解像禁止領域の情報を、合成された映像データに重畳することとなる。
【００２３】
映像表示手段３０３では、映像受信機能３１１で受信した映像を超解像制御機能３１２に供給し、超解像制御機能３１２は映像に重畳された超解像制御情報を元に、その映像フレームに対し超解像を実施するあるいは実施しない、または一部実施しないあるいは一部実施するを決定し超解像処理機能３１３を制御する。こうして生成された映像フレームは最終的に映像表示機能３１４によってユーザに提示される。
【００２４】
図４は、本発明における、映像フレーム情報への超解像制御情報重畳方式の例を示す図である。図４では映像フレーム４０１中に字幕領域４０２が存在し、これを超解像禁止領域とする。この例では、この超解像禁止領域を示す超解像制御情報４１１は、映像フレーム情報の左上位置の輝度情報として重畳することを想定している。これは、表示されないエリアであるセーフエリアであることが望ましい。そして、当該機能を果たせば輝度情報には限られたものではない。情報の先頭はＭＡＧＩＣコード（４０３）により、これが超解像制御情報であることを示し、次にＬＥＮ（４０４）によりデータ長を示す。次のＣＴＲＬ（４０５）は以降に超解像禁止領域座業が続く事を示し、Ｘ０（４０６）、Ｙ０（４０７）、Ｘ１（４０８）、Ｙ１（４０９）でそれぞれ左上隅のＸ，Ｙ座標、右下隅のＸ，Ｙ座標を示す。複数の領域を示す場合は、この後に再度ＣＴＲＬ及び座標を格納する。最後のＣＲＣ１６（４１０）は超解像制御情報が誤り無く伝送されたかを確認するために使用する。
【００２５】
図５は、本発明における、超解像制御機能動作フローの一例を示す図である。この超解像制御情報が重畳された映像フレームを受信した映像表示手段中の超解像制御機能の動作について説明する。これらは、超解像制御機能３１２及び超解像処理機能３１３によって処理される。受信した映像フレームから超解像制御情報を抜き出し、まずはＭＡＧＩＣコードが正しい値であるかを確認する（５０１）。もし、誤りである場合は無条件にそのフレーム全体に超解像処理を実施する（５０９）。正しいＭＡＧＩＣコードの場合は、ＬＥＮからデータ長を得て、全体のデータのＣＲＣを計算（５０２）これをＣＲＣ１６の値と比較する（５０３）。一致しなかった場合は無条件でそのフレーム全体に超解像処理を実施する（５０９）。一致した場合は、最初のＣＴＲＬコードを取得する（５０４）。ＣＴＲＬコードが禁止フレーム指定を示す００ｈの場合は、そのフレーム全体に対し無条件に通常のスケーリング処理を行う（５０５、５１０）。もし、ＣＴＲＬが禁止領域指定を示す０１ｈの場合は、続く禁止領域を示す座標列を読み出し（５１１）、これを一次格納しておく。ＬＥＮから判断し、まだ制御情報が続く場合は、ＣＴＲＬコードの取得（５０４）に戻り、制御情報の取得を継続する。全ての制御情報を読み出し完了した場合は、読み出した禁止領域に対応する領域については、通常のスケーリング処理を、それ以外については超解像処理を実施（５０８）して処理を完了する。
【００２６】
実施例１では、映像フレーム情報に超解像制御情報を重畳して伝送しているが、当然重畳せずに、別途シリアル伝送などの別経路を使い伝送する方式も考えられる。
【実施例２】
【００２７】
図６は、実施例２の超解像処理システムのシステム構成図である。実施例２では、ネットワークで接続された映像蓄積再配信装置６０２と映像表示装置６０３とを有する超解像処理システムを示す。映像蓄積再配信装置６０２は、コンテンツ入力機能６０４、動画処理機能６０５、超解像処理機能６０６、動画圧縮機能６０７、コンテンツ蓄積機能６０８、コンテンツ送信機能６１１を有する。映像表示装置６０３は、コンテンツ受信機能６１３、動画処理機能６１４、超解像制御機能６１５、超解像処理機能６１６、映像表示機能６１７を有する。
【００２８】
映像蓄積再配信装置６０２では、コンテンツ入力機能６０４で入力した動画コンテンツを再配信に適した方式に再圧縮し送信する。この際、ネットワーク上に存在するであろう超解像表示機能を持たない映像表示装置の為に超解像処理をかけた状態で動画コンテンツを格納・保持することが考えられる。この場合は、動画処理機能６０５により、一旦映像フレーム情報に変換した後、超解像処理機能６０６によって超解像処理が行われ、動画圧縮機能６０７によって再度圧縮した後コンテンツ蓄積機能６０８に蓄積する。この際、超解像処理機能６０６からは、再度の超解像を禁止する為に超解像禁止情報６１８が送られる。これを受信した動画圧縮機能６０７では、この超解像禁止情報を超解像制御情報として動画コンテンツに重畳しながら圧縮処理を行う。このように、入力された動画コンテンツのデータをトランスコードした際に、超解像制御情報を、圧縮されたデータに重畳することとなる。
【００２９】
再圧縮され蓄積された動画コンテンツ６０９はネットワークに接続された映像表示装置６０３からの要求に従い、コンテンツ送信機能６１１によりネットワーク６１２を経由して配信される。映像表示装置６０３では、ネットワーク６１２からコンテンツ受信機能６１３により動画コンテンツを受信し、動画処理機能６１４で映像フレーム情報に展開した後、超解像制御機能６１５に供給する。この際、動画コンテンツに重畳されていた超解像制御情報６１９も抽出し、超解像制御機能６１５に供給する。超解像制御機能６１５は供給された超解像制御情報６１９に従い、映像フレームに対し超解像処理機能６１６を使い超解像処理を行い、映像表示機能６１７でユーザに提示する。
【００３０】
図７は、本発明において、ＭＰＥＧ−２ビデオストリームへの超解像制御情報重畳方式の一例を示す。超解像制御情報はシーケンスヘッダ（７０１）の直後あるいは、ピクチャヘッダ（７０５）の直後にユーザデータとして配置する。データの先頭はＵＳＥＲＤＡＴＡ  ＳＴＡＲＴ  ＣＯＤＥ（７０８）とする。それ以降については、図４の映像フレーム情報への超解像制御情報と同一である。そして、超解像制御機能６１５及び超解像処理機能６１６において、図５で示した超解像制御機能動作フローと同じ処理がなされる。
【００３１】
実施例２では、ＭＰＥＧ−２ビデオ情報に超解像制御情報を重畳しているが、当然重畳せずに、別途ネットワークで伝送する方式、あるいはＨ．２６４など他の圧縮方式で重畳する方式、または、上位のコンテナ規格ＭＰＥＧ−２  ＴＳやＰＳにて伝送する方式も考えられる。
【実施例３】
【００３２】
図８は、実施例３の超解像処理システムのシステム構成図である。実施例３は、映像送信装置８０２と映像表示装置８０３とを有する超解像処理システムである。映像送信装置８０２は、入力機能８０４、動画圧縮機能８０５、超解像禁止情報重畳機能８０６、コンテンツ送信機能８０７を有する。映像表示装置８０３は、コンテンツ受信機能８１０、動画処理機能６１４、超解像制御機能６１５、超解像処理機能６１６、映像表示機能６１７を有する。
【００３３】
映像送信装置８０２では、カメラ８０１等から直接、入力機能８０４で入力した動画を動画圧縮機能８０５によって圧縮し、超解像禁止情報重畳機能８０６によって超解像禁止情報が重畳された、コンテンツ送信機能６１１により放送波８０８等により、送信される。この際、動画圧縮機能８０５からは、超解像を禁止する為に超解像禁止情報８０９が送られる。これを受信した超解像禁止情報重畳機能８０６では、この超解像禁止情報を動画コンテンツに重畳する。このように、入力された動画コンテンツのデータをエンコードした際に、超解像制御情報を、圧縮されたデータに重畳することとなる。
【００３４】
映像表示装置８０３では、コンテンツ受信機能８１０において送信された放送波８０８等の通信波を受け取る。そして動画処理機能６１４で映像フレーム情報に展開した後、超解像制御機能６１５に供給する。この際、動画コンテンツに重畳されていた超解像制御情報６１９も抽出し、超解像制御機能６１５に供給する。超解像制御機能６１５は供給された超解像制御情報６１９に従い、映像フレームに対し超解像処理機能６１６を使い超解像処理を行い、映像表示機能６１７でユーザに提示する。
【００３５】
超解像制御情報を、圧縮されたデータに重畳する方法は、上記他の実施例で示した方法と同様の方法が適用できる。そして、超解像制御機能６１５及び超解像処理機能６１６において、図５で示した超解像制御機能動作フローと同じ処理がなされる。実施例３においても、超解像制御情報を重畳する方式のほか、重畳せずに、別途に伝送する方式考えられる。
【００３６】
以上、各実施例で示したように、エンコード、デコード、トランスコード等をする際において、静止部分の領域や文字領域、既に超解像処理が行われた領域、映像の動きが大きすぎる部分、動きが複雑な部分を検出し、映像フレームに対し超解像表示禁止又は実施あるいは、ある特定の領域の超解像表示を禁止又は実施指示する情報をストリーム等に重畳すること等で、超解像表示処理を制御し、破綻のない映像を提示することが可能となる。
【図面の簡単な説明】
【００３７】
【図１】本発明において、フレーム単位での超解像実施／非実施指定を示す概略図である。
【図２】本発明において、領域を指定した超解像実施／非実施指定を示す概略図である。
【図３】実施例１の超解像処理装置の構成図である。
【図４】本発明において、映像フレーム情報への超解像制御情報重畳方式の一例を示す図である。
【図５】本発明における、超解像制御機能動作フローの一例を示す図である。
【図６】実施例２の超解像処理システムのシステム構成図である。
【図７】本発明において、ＭＰＥＧ−２ビデオストリームへの超解像制御情報重畳方式の一例を示す図である。
【図８】実施例３のシステム構成図である。
【符号の説明】
【００３８】
２０７  グラフィック領域
２０８  字幕領域
３０２  映像受信手段
３０３  映像表示手段
３０４  コンテンツ入力機能
３０５  動画処理機能
３０６  字幕処理機能
３０７  グラフィックス描画機能
３０８  映像合成機能
３０９  超解像制御情報合成機能
３１０  映像送信機能
３１１  映像受信機能
３１２  超解像制御機能
３１３  超解像処理機能
３１４  映像表示機能
４０１  映像フレーム
４０２  字幕領域
４１１  超解像制御情報
６０２  映像蓄積再配信装置
６０３  映像表示装置
６０４  コンテンツ入力機能
６０５  動画処理機能
６０６  超解像処理機能
６０７  動画圧縮機能
６０８  コンテンツ蓄積機能
６１１  コンテンツ送信機能
６１３  コンテンツ受信機能
６１４  動画処理機能
６１５  超解像制御機能
６１６  超解像処理機能
６１７  映像表示機能
８０１  カメラ
８０２  映像送信装置
８０３  映像表示装置
８０４  入力機能
８０５  動画圧縮機能
８０６  超解像禁止情報重畳機能
８０７  コンテンツ送信機能
８１０  コンテンツ受信機能
【図１】
2009117886.tif 000003
【図２】
2009117886.tif 000004
【図３】
2009117886.tif 000005
【図４】
2009117886.tif 000006
【図５】
2009117886.tif 000007
【図６】
2009117886.tif 000008
【図７】
2009117886.tif 000009
【図８】
2009117886.tif 000010