(57)【要約】【課題】高画質化処理は、映像コンテンツの種類や状況により効果が異なることから、映像信号出力装置において、効果的な適用が課題となっていた。また、高画質化処理を行うことにより消費電力が増加することも知られており、映像出力装置の消費電力を低減することが課題となっていた。【解決手段】映像コンテンツに係る映像信号を受信し、前記映像コンテンツのシーンを検出するシーン検出手段を備える。また、検出されたシーンに応じ、前記検出されたシーンが第１のシーンの場合は、前記受信した映像コンテンツに係る映像信号に第１のフィルタリング処理を行い、前記第１のシーンより高い画質が要求される第２のシーンの場合は、前記第１のフィルタリング処理より処理量が多い第２のフィルタリング処理を行うフィルタリング手段を備える。また、前記フィルタリング処理された映像コンテンツに係る映像信号を出力する出力手段を備える。【選択図】  図２
2012004890.tif 000002
【特許請求の範囲】
【請求項１】
映像コンテンツに係る映像信号を受信し、前記映像コンテンツのシーンを検出するシーン検出手段と、
検出されたシーンに応じ、前記検出されたシーンが第１のシーンの場合は、前記受信した映像コンテンツに係る映像信号に第１のフィルタリング処理を行い、前記第１のシーンより高い画質が要求される第２のシーンの場合は、前記第１のフィルタリング処理より処理量が多い第２のフィルタリング処理を行うフィルタリング手段と、
前記フィルタリング処理された映像コンテンツに係る映像信号を出力する出力手段を備える映像信号出力装置。
【請求項２】
前記フィルタリング手段は、前記第１および第２のシーンより高い画質が要求される第３のシーンの場合は、さらに、前記第１および第２のフィルタリング処理より処理量が多い第３のフィルタリング処理を行う請求項１に記載の映像信号出力装置。
【請求項３】
映像コンテンツに係る映像信号が記録される記録手段をさらに備え、
前記記録手段に記録された映像コンテンツに係る映像信号を受信する請求項１または２に記載の映像信号出力装置。
【請求項４】
映像を表示する表示手段をさらに備え、
前記フィルタリング処理された映像コンテンツに係る映像信号を受信し、前記表示手段に表示する請求項１乃至３のいずれか１項に記載の映像信号出力装置。
【請求項５】
前記第３のフィルタリング処理は超解像処理を含む請求項１乃至４のいずれか１項に記載の映像信号出力装置。
【請求項６】
映像コンテンツに係る映像信号を受信し、前記映像コンテンツのシーンを検出するステップと、
検出されたシーンに応じ、前記検出されたシーンが第１のシーンの場合は、前記受信した映像コンテンツに係る映像信号に第１のフィルタリング処理を行い、前記第１のシーンより高い画質が要求される第２のシーンの場合は、前記第１のフィルタリング処理より処理量が多い第２のフィルタリング処理を行うステップと、
前記フィルタリング処理された映像コンテンツに係る映像信号を出力するステップを備える映像信号出力方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、録画された映像コンテンツに映像処理を行って出力する、映像信号出力装置に関する。
【背景技術】
【０００２】
近年、録画された映像コンテンツを再生する映像コンテンツ再生装置が普及している。
これら、映像コンテンツ再生装置においては、録画された映像コンテンツに係る映像信号に映像処理が行われ、再生画像が出力される。
上記映像処理の一例として、映像コンテンツ再生装置から出力される再生画像の画質を向上させる高画質化処理がある。
しかし、高画質化処理は、映像コンテンツの種類や状況により効果が異なることから、映像信号出力装置において、効果的な適用が望まれていた。
また、高画質化処理を行うことにより消費電力が増加することも知られており、映像出力装置の消費電力を低減することが望まれていた。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−２７９５６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
高画質化処理は、映像コンテンツの種類や状況により効果が異なることから、映像信号出力装置において、効果的な適用が課題となっていた。
また、高画質化処理を行うことにより消費電力が増加することも知られており、映像出力装置の消費電力を低減することが課題となっていた。
【課題を解決するための手段】
【０００５】
映像コンテンツに係る映像信号を受信し、前記映像コンテンツのシーンを検出するシーン検出手段を備える。
また、検出されたシーンに応じ、前記検出されたシーンが第１のシーンの場合は、前記受信した映像コンテンツに係る映像信号に第１のフィルタリング処理を行い、前記第１のシーンより高い画質が要求される第２のシーンの場合は、前記第１のフィルタリング処理より処理量が多い第２のフィルタリング処理を行うフィルタリング手段を備える。
【０００６】
また、前記フィルタリング処理された映像コンテンツに係る映像信号を出力する出力手段を備える。
【図面の簡単な説明】
【０００７】
【図１】実施形態に係わる映像信号出力装置の構成を示すブロック図。
【図２】実施形態に係わる映像信号出力装置における、映像処理部の構成を中心に示すブロック図。
【図３】実施形態に係わる映像信号出力装置の動作を説明するフローチャート。
【図４】実施形態に係わる映像信号出力装置における、フィルタリング処理の動作を説明するフローチャート。
【図５】実施形態に係わる映像信号出力装置における、シーンとフィルタの対応関係の一例を示す図。
【発明を実施するための形態】
【０００８】
以下、図面を参照し、実施の形態を説明する。
図１は、実施形態に係わる映像信号出力装置の構成を示すブロック図である。
符号１は映像出力装置（デジタル放送受信装置）、符号２はアンテナ、符号３はチューナ、符号４は信号処理部、符号５は映像処理部、符号６は音声処理部、符号７は表示装置、符号８は画面、符号９はスピーカである。
【０００９】
符号１０はバス、符号１１は制御部、符号１２はＭＰＵ、符号１３はＲＡＭ、符号１４はＲＯＭ、符号１５はフラッシュメモリ、符号１６ａは記憶部、符号１６ｂは設定値保持部である。
【００１０】
符号１７は内部記録装置である。例えば、内蔵ＨＤＤ（ハードディスク装置）や内蔵ＳＳＤ（Solid State Disk：  半導体記憶素子であるフラッシュメモリを使用した記録装置）等で構成される。
【００１１】
符号１８は外部インターフェース、符号１９は外部インターフェース１８を介して外部に接続される外部記録装置である。この外部記録装置１８も上記ＨＤＤやＳＳＤ等で構成される。
【００１２】
符号２０は操作受信部、符号２１は操作機器、符号２１は送受信部、符号２２は送受信部、符号２３は消費電力比較部、符号２４はＧＵＩ制御部、符号２５は放送局、符号２６はネットワーク、符号２７はサーバである。
【００１３】
この映像出力装置１は、内部記録装置１７および外部記録装置１８それぞれに、録画を行うことが可能である。
ここでは、例えば、外部記録装置１９に記録された映像コンテンツについて、フィルタリング処理が行われ、映像信号として出力される。
また、特に図示しないが、チューナ３は複数のチューナで構成され、複数のチャンネルを受信可能に構成される。
また、内部記録装置１７は、タイムシフト用と通常録画用のHDDを備え、タイムシフト用HDDには、例えば、過去約26時間分の番組を最大8チャンネル分一時保管、すなわち、26時間8チャンネルを“丸録り”することが可能である。
【００１４】
映像処理部５は、信号処理部４から出力された映像コンテンツに係る映像信号を受信し、後述するように、映像コンテンツのシーンを検出する。
また、後述する図５に示すように、検出されたシーンに応じ、検出されたシーンがシーン１の場合は、受信した映像コンテンツに係る映像信号に第１のフィルタリング処理を行い、シーン２の場合は、第２のフィルタリング処理を行う。
【００１５】
また、検出されたシーンがシーン３の場合は、受信した映像コンテンツに係る映像信号に第３のフィルタリング処理を行う。
そして、上記第１乃至第３等のフィルタリング処理された映像コンテンツに係る映像信号を出力する。
図２は、実施形態に係わる映像信号出力装置における、映像処理部の構成を中心に示すブロック図である。
ここでは、例えば、映像信号出力装置１は、放送局２５からMPEG2形式で送信された放送番組を受信し、H.264形式（MPEG-4 AVC形式）にトランスコード（高能率符号化処理）して、外部記録装置１９に録画する。
【００１６】
または、受信した放送番組を、放送局２５から送信された形式のまま録画することも可能である。
すなわち、外部記録装置１９には、映像信号（ビデオデータ）の形態で、映像コンテンツが記録されている。映像信号はMPEG2やH.264等の高能率符号化処理が施されている。
【００１７】
そして、外部記録装置１９に記録されている映像コンテンツが映像処理部５に対して出力され、映像処理部５で高画質化のフィルタリング処理が行われ、映像表示装置７に向け、映像信号として出力される。
【００１８】
符号５１はデコード処理部、符号５２はシーン検出部、符号５３は高画質フィルタ選択部、符号５４は高画質フィルタの組合せ、符号５５は画像高画質化部、符号５６は画像出力部である。
【００１９】
外部記録装置１９には、上記のように、映像コンテンツが記録されている。
外部記録装置１９から出力されたH.264形式の映像信号の形態の映像コンテンツは、デコード処理部５１で受信される。デコード処理部５１では、受信した映像コンテンツをH.264形式のデコード処理を行う。デコード処理された映像信号の形態の映像コンテンツは、シーン検出部５２に向けて出力される。
【００２０】
シーン検出部５２は、デコード処理された映像信号の形態の映像コンテンツを受信する。シーン検出部５２では、例えば、受信した映像コンテンツのシーンを、リアルタイムで検出し、この検出結果を高画質フィルタ選択部５３に向けて出力する。
【００２１】
高画質化フィルタ選択部５３は、図２に示すように、高画質フィルタの組合せ５４から、シーン検出部５２で検出されたシーンの検出結果に対応するフィルタリング処理を選択し、決定する。
【００２２】
ここで、デブロッキングフィルタは、整数変換のブロック境界を平滑化してブロックノイズの発生を抑制する技術である。デブロッキングフィルタは、圧縮率の向上が期待できるが、処理量が大きいことが課題になっている。
【００２３】
フレーム補間は、画面内にある物体の動きを推定し、動きに応じた中間の画像を作り出すことによって、単位時間に表示するコマ数を増やす。これにより、物体のボケや不自然な動きを改善する技術である。
【００２４】
超解像は、デジタル画像処理技術の一つで、動画や静止画等の入力信号の解像度を高めて出力信号を作る技術である。一般に、超解像処理は、画素値の少ない映像に対しては有効であるが、画素値が多くなると効果が少なくなるフィルタ処理である。
【００２５】
ここでは、フィルタ１は、映像コンテンツのシーンとしてシーン１、すなわちCMが検出された場合である。
そして、これに対応する第１のフィルタリング処理、すなわちデブロッキング（ノイズリダクション）フィルタ、フレーム補間、超解像の３つのフィルタリングをOFFとするフィルタリング処理である。
【００２６】
このフィルタ１では、コンテンツのシーンとしてCMが検出された場合は、デブロッキング（ノイズリダクション）フィルタ、フレーム補間、超解像の３つのフィルタリングをOFFとして、高画質化処理よりも電力消費量の低減を優先させる。
【００２７】
また、フィルタ２は、映像コンテンツのシーンとしてシーン２、すなわちハイライトのない普通の本編が検出された場合である。
そして、これに対応する第２のフィルタリング処理、すなわちデブロッキング（ノイズリダクション）フィルタとフレーム補間の２つのフィルタリングをONとし、超解像のフィルタリングをOFFとするフィルタリング処理である。
【００２８】
このフィルタ２では、コンテンツのシーンとしてハイライトのない普通の本編が検出された場合は、デブロッキング（ノイズリダクション）フィルタとフレーム補間の２つのフィルタリングをONとして、ある程度の高画質化処理を行いつつ、比較的電力消費量が高い超解像のフィルタリングをOFFとして、電力消費量もある程度低減させる。
【００２９】
また、フィルタ３は、映像コンテンツのシーンとしてシーン３、すなわちハイライトのある本編が検出された場合である。
そして、これに対応する第３のフィルタリング処理、すなわちデブロッキング（ノイズリダクション）フィルタ、フレーム補間、超解像の３つのフィルタリングを全てONとするフィルタリング処理である。
【００３０】
このフィルタ３では、コンテンツのシーンとしてハイライトのある本編が検出された場合は、デブロッキング（ノイズリダクション）フィルタ、フレーム補間、超解像の３つのフィルタリングを全てONとして、より高画質となる処理を行う。
【００３１】
画像高画質化部５５では、デコード処理された映像信号に対して、上記のようにフィルタ１乃至フィルタ３から選択された高画質化フィルタリング処理を行う。
画像出力部５６は、上記高画質化フィルタリング処理された映像信号（映像コンテンツ）を、映像出力装置７に向けて出力する。
図３は、実施形態に係わる映像信号出力装置の動作を説明するフローチャートである。
符号Ｓ１００は、ここでの開始ステップである。続いて符合Ｓ１０１を付したステップへ進む。
符号Ｓ１０１は、外部記録装置１９から出力された映像コンテンツ（映像信号）を受信するステップである。続いて符合Ｓ１０２を付したステップへ進む。
符号Ｓ１０２は、デコード処理部５１でデコードされた映像コンテンツのシーンを検出するステップである。
映像コンテンツのシーン検出は、例えば、映像コンテンツ（映像信号）の映像ストリーム中のビットレート情報や画像サイズ情報を用いて検出することが可能である。例えば、番組本編は１６：９の画像サイズで送信される場合に、ＣＭは画像サイズが４：３で送信される場合があることを利用して、この画像サイズの違いを検出し、ＣＭを検出することが可能である。
【００３２】
また、番組本編の普通のシーンに比べて、番組本編のハイライトシーンの方が、情報量が多い（すなわちビットレートが高い）ことが予想されることから、このビットレートの違いを検出し、番組本編の普通のシーンと番組本編のハイライトシーンを検出することが可能である。
【００３３】
さらに、上記画像サイズを用いる検出とビットレートを用いる検出を適宜組合せ、ＣＭと番組本編の普通のシーン、番組本編のハイライトシーンを検出することが可能である。
【００３４】
あるいは、シーン検出部５２に入力される映像信号の輝度分布の統計量を検出し、シーンの明るさの遷移方向を検出することでシーンを検出することが可能である。
あるいは放送局から送信される放送に、ＣＭ、番組本編の普通のシーン、番組本編のハイライトシーンを区別するフラグを付して送信し、これらのフラグを受信側で検出し、各シーンを検出することも可能である。
【００３５】
そして、後述するように、放送のシーンがそれぞれ検出されたら（すなわち、放送のシーンが変わったら）、検出されたシーンに応じてフィルタを切替え、フィルタリング処理を行う。
【００３６】
続いて符合Ｓ１０３を付したステップへ進む。
符号Ｓ１０３は、上記のように、フィルタリング処理（画像フィルタの組合せ）を選択するステップである。続いて符合Ｓ１０４を付したステップへ進む。
符号Ｓ１０４は、高画質化フィルタ処理を行うステップである。図３(b)に高画質化フィルタ処理の例を示す。上記のように選択されたフィルタリング処理が実行される。ここでは、フィルタリング処理１乃至ｎのいずれかの高画質化フィルタリング処理が実行される。続いて符合Ｓ１０５を付したステップへ進む。
【００３７】
符号Ｓ１０５は、上記高画質化フィルタリング処理された映像コンテンツを映像表示装置７に向けて出力するステップである。続いて符合Ｓ１０６を付したステップへ進む。
【００３８】
符号Ｓ１０６は、上記高画質化フィルタリング処理された映像コンテンツに係る映像信号を受信し、映像コンテンツを映像表示装置７に表示するステップである。続いて符合Ｓ１０７を付したステップへ進む。
【００３９】
符号Ｓ１０７は、終了ステップであり、ここで処理は終了する。
図４は、実施形態に係わる映像信号出力装置における、フィルタリング処理の動作を説明するフローチャートである。
符号Ｓ２００は、ここでの開始ステップである。続いて符合１０１を付したステップへ進む（Ｓ１０１は図３と同じ）。
符号Ｓ１０１は、上記のように映像コンテンツを受信するステップである。続いて符合Ｓ１０２を付したステップへ進む（Ｓ１０２は図３と同じ）。
符号Ｓ２０２は、映像コンテンツのシーンを検出するステップである。続いて符合Ｓ２０３を付したステップへ進む。
符号Ｓ２０３は、上記検出された映像コンテンツのシーンが第１のシーンであるかを判別するステップである。検出された映像コンテンツのシーンが第１のシーンであると判別される場合は符号Ｓ２０４を付したステップへ進む（Yes）。検出された映像コンテンツのシーンが第１のシーンであると判別されない場合は符号Ｓ２０５を付したステップへ進む（No）。
【００４０】
符号Ｓ２０４は、上記第１のフィルタリング処理を行うステップである。続いて符合Ｓ１０５を付したステップへ進む。
符号Ｓ２０５は、上記検出された映像コンテンツのシーンが第２のシーンであるかを判別するステップである。検出された映像コンテンツのシーンが第２のシーンであると判別される場合は符号Ｓ２０６を付したステップへ進む（Yes）。検出された映像コンテンツのシーンが第２のシーンであると判別されない場合は符号Ｓ２０７を付したステップへ進む（No）。
【００４１】
符号Ｓ２０６は、上記第２のフィルタリング処理を行うステップである。続いて符合Ｓ１０５を付したステップへ進む。
符号Ｓ２０７は、上記検出された映像コンテンツのシーンが第３のシーンであるかを判別するステップである。検出された映像コンテンツのシーンが第３のシーンであると判別される場合は符号Ｓ２０８を付したステップへ進む（Yes）。検出された映像コンテンツのシーンが第３のシーンであると判別されない場合は符号Ｓ２０２を付したステップへ進み、上記処理を繰り返す（No）。
【００４２】
符号Ｓ２０８は、上記第２のフィルタリング処理を行うステップである。続いて符合Ｓ１０５を付したステップへ進む。
符号Ｓ１０５は、上記のようにフィルタリング処理された映像コンテンツを出力するステップである（Ｓ１０５は図３と同じである）。続いて符合Ｓ１０６を付したステップへ進む。
【００４３】
符号Ｓ１０６は、映像表示装置７に上記出力された映像コンテンツを表示するステップである（Ｓ１０６は図３と同じ）。続いて符合Ｓ２１１を付したステップへ進む。
【００４４】
符号Ｓ２１１は、終了ステップであり、ここでの処理は終了する。
すなわち、この実施の形態においては、放送のシーンが検出されたら、検出されたシーンに応じてフィルタを切替え、その切替えられたフィルタリング処理を行う。
そして、例えば、検出されたシーンが第１のシーン（例えばＣＭ）の場合は、図５に示す第１のフィルタリング処理を行う。また、検出されたシーンが第２のシーン（例えば番組本編の普通シーン）の場合は、第２のフィルタリング処理を行う。また、検出されたシーンが第３のシーン（例えば番組本編のハイライトシーン）の場合は、第３のフィルタリング処理を行う。
【００４５】
図５は、実施形態に係わる映像信号出力装置における、シーンとフィルタの対応関係の一例を示す図である。
図に示すように、ここでは、映像コンテンツのシーンの種類として、シーン１はCM（コマーシャル）、シーン２はコンテンツ本編の普通のシーン、シーン３はコンテンツ本編のハイライトシーンを例示しているが、さらに、ここで例示されないシーンを定義し、上記と同様に適用することも可能である。
【００４６】
そして、映像コンテンツのシーンの種類としてシーン１（CM）が検出された場合、第１のフィルタリング処理（デブロッキング（ノイズリダクション）フィルタOFF、フレーム補間OFF、超解像OFF）が実行される。この時、第１のフィルタリング処理が行われると、画質は普通、処理量は普通である。
【００４７】
この場合は、高画質化処理よりも電力消費量の低減を優先させる。
また、映像コンテンツのシーンの種類としてシーン２（ハイライトのない普通の本編）が検出された場合、第２のフィルタリング処理（デブロッキング（ノイズリダクション）フィルタON、フレーム補間ON、超解像OFF）が実行される。この時、第２のフィルタリング処理が行われると、画質は高画質になるが、処理量は第１のフィルタリング処理より多くなる。そして、処理量が増加すると、電力消費量も増加する。
【００４８】
この場合は、ある程度の高画質化処理とある程度の電力消費量低減を両立させる。
また、映像コンテンツのシーンの種類として（ハイライトのある本編）が検出された場合、第３のフィルタリング処理（デブロッキング（ノイズリダクション）フィルタON、フレーム補間ON、超解像ON）が実行される。この時、第３のフィルタリング処理が行われると、画質は超高画質になるが、処理量は第１のフィルタリング処理および第２のフィルタリング処理より多くなる。そして、さらに処理量が増加すると、電力消費量もこれに伴って増加する。
【００４９】
この場合は、超高画質となる処理を行う。
上記のように構成することによって、この発明の実施の形態においては、映像信号出力装置において、高画質化処理を効果的に適用することが可能になる。
また、高画質化処理を行う映像出力装置の、消費電力を低減することが可能になる。
なお、上記実施形態は、記述そのものに限定されるものではなく、実施段階では、その趣旨を逸脱しない範囲で、構成要素を種々変形して具体化することが可能である。
【符号の説明】
【００５０】
１…映像出力装置（デジタル放送受信装置）、５…映像処理部、７…映像表示装置、１９…外部記録装置、５１…デコード処理部、５２…シーン検出部、５３…高画質フィルタ選択部、５４…複数のフィルタ、５５…画像高画質化部、５６…画像出力部。
【図１】
2012004890.tif 000003
【図２】
2012004890.tif 000004
【図３】
2012004890.tif 000005
【図４】
2012004890.tif 000006
【図５】
2012004890.tif 000007