(57)【要約】【課題】  テレビジョン装置により表示される画像内容からハイライトシーンを検出して、ハイライトシーンに応じた画質調整を行なう画質調整装置を提供する。【解決手段】    画像ディスプレイから出力される画像または音声の特徴量の変化に基づいて、番組のハイライトシーンを検出するハイライトシーン検出器と、前記ハイライトシーン検出器により検出された前記ハイライトシーンの表示様態を、第１の輝度の表示様態である省エネモードから前記第１の輝度より高い第２の輝度の表示様態である明表示モードへ切り替えるモード切替器と、前記モード切替器により切り替えられた前記明表示モードに従って、前記画像ディスプレイに表示する前記ハイライトシーンの画質を制御する画質制御器とを備える。【選択図】        図１
2011015129.tif 000002
【特許請求の範囲】
【請求項１】
画像ディスプレイから出力される画像または音声の特徴量の変化に基づいて、番組のハイライトシーンを検出するハイライトシーン検出器と、
前記ハイライトシーン検出器により検出された前記ハイライトシーンの表示様態を、第１の輝度の表示様態である省エネモードから前記第１の輝度より高い第２の輝度の表示様態である明表示モードへ切り替えるモード切替器と、
前記モード切替器により切り替えられた前記明表示モードに従って、前記画像ディスプレイに表示する前記ハイライトシーンの画質を制御する画質制御器と、
を備えた画質調整装置。
【請求項２】
前記ハイライトシーン検出器は、前記画像ディスプレイから出力される音声の音量の変化に基づいて前記ハイライトシーンを検出する音量型検出器を備えた請求項１記載の画質調整装置。
【請求項３】
前記ハイライトシーン検出器は、前記画像ディスプレイから出力される音声の周波数の変化に基づいて前記ハイライトシーンを検出する音声周波数型検出器を備えた請求項１記載の画質調整装置。
【請求項４】
前記ハイライトシーン検出器は、前記画像ディスプレイから出力される音声に含まれる特定音声を認識し、この認識結果に基づいて前記ハイライトシーンを検出する特定音声型検出器を備えた請求項１記載の画質調整装置。
【請求項５】
前記ハイライトシーン検出器は、前記画像ディスプレイから出力される音声に含まれる特定音声の時間的変化パタンを認識し、この認識結果に基づいて前記ハイライトシーンを検出する音声パタン型検出器を備えた請求項１記載の画質調整装置。
【請求項６】
前記ハイライトシーン検出器は、前記画像ディスプレイから出力される画像に含まれる特定画像パタンを認識し、この認識結果に基づいて前記ハイライトシーンを検出する画像パタン型検出器を備えた請求項１記載の画質調整装置。
【請求項７】
前記ハイライトシーン検出器は、前記画像ディスプレイから出力される画像に含まれる特定文字列と特定記号とを認識し、この認識結果に基づいて前記ハイライトシーンを検出する文字列・記号型検出器を備えた請求項１記載の画質調整装置。
【請求項８】
画像の輝度信号レベルの分布を類型化した輝度分布パタンに基づいて、前記画像ディスプレイから出力される画像の輝度信号レベルの分布が属する前記輝度分布パタンを判定し、この判定結果に基づいて前記ハイライトシーンを検出する輝度分析型検出器を備えた請求項１記載の画質調整装置。
【請求項９】
前記ハイライトシーン検出器は、前記音量型検出器と前記音声周波数型検出器と前記特定音声型検出器と前記音声パタン型検出器と前記画像パタン型検出器と前記文字列・記号型検出器と前記輝度分析型検出器とのいずれかを組み合わせて構成された統合型検出器を備え、この統合型検出器による検出結果に基づいて、前記ハイライトシーンを検出する請求項１記載の画質調整装置。
【請求項１０】
前記モード切替器は、前記ハイライトシーン検出器により前記ハイライトシーンが検出された場合に、前記画像ディスプレイに表示する画像の表示様態を前記省エネモードから解除する省エネモード解除器を備えた請求項１から９記載の画質調整装置。
【請求項１１】
前記モード切替器は、前記ハイライトシーン検出器により前記ハイライトシーンが検出された場合に、前記画像ディスプレイに表示する画像の画質を、前記ハイライトシーンに応じて演出された画質へ切り替える演出モード切替器を備えた請求項１から９記載の画質調整装置。
【請求項１２】
前記画質制御器は、前記画像ディスプレイに表示される画像の輝度の変化を制御する輝度制御器を備えた請求項１から１１記載の画質調整装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、テレビジョン装置により表示される画像内容からハイライトシーンを検出して、ハイライトシーンに応じた画質調整を行なう画質調整装置に関する。
【背景技術】
【０００２】
地球環境に配慮した省エネルギー化技術の開発が重要になってきており、一般家庭で使用する種々の家電についても、「省エネ家電」普及のため、産官一致した取り組みが進んでいる。このような背景の中で、家庭内のテレビジョン装置が表示する画面にも、徐々に、省エネモードが導入され始めている。現在、その省エネモードの実現方式に関する技術開発が加速されてきており、近い将来には、テレビジョン装置を視聴するユーザは、省エネモードで表示された画面を、通常、視聴するようになるものと考えられる。
【０００３】
従来、家庭内のテレビジョン装置が表示する画面の画質を制御することにより、省エネルギー化を図る技術として、特許文献１に記載された映像表示装置が開示されている。この映像表示装置は、図２に示すように、装置周囲の明るさ（照度）を測定する周囲照度センサ２０と、映像信号の平均輝度を算出する輝度信号平均値算出器２１と、装置周囲の明るさ及び映像信号の平均輝度に従って、バックライト輝度切替器23とガンマカーブ切替器２４とを最適に調整するように制御する条件判定器２２とによって構成されている。従来の技術は、以上のように構成されているので、放送番組の制作者側が規定した画像を、家庭内の周囲の明るさに適合する適切な明るさで表示することができるようにしたものである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−１７１２５８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
省エネモードで表示された画面は、概して、暗い画像となるため、普通のユーザは、この暗い画像を好まないという問題点が、従来の我々の研究から判明している。このため、ユーザが、どうしても見たいシーンや、大切なシーンは、元の明るい画面（明表示画面）で見たいという要求が出てくるものと考えられる。すなわち、これらのシーンのときだけは、省エネモードではない元の画面に、自動的に移行する機能が求められる。
【０００６】
このような自動移行機能は、ユーザが、どうしても見たいシーンや、大切なシーンを動的に自動検出するシーン検出処理と、ハイライトシーンが検出された場合に、省エネモードの画面から明るい明表示モードの画面へ実際に移行するモード移行処理とにより、実現することができる。このシーン検出処理では、番組コンテンツの画像情報や音声情報に基づいて、ユーザが特に「見たいシーン」であると考えられるハイライトシーンを検出する技術が必要となる。
【０００７】
特許文献１に記載された従来の技術は、昼、夜などの自然な周囲光の変化や、明るめの画像、暗めの画像などの一般的な画質の性質に合わせて、バックライト輝度やガンマカーブを変化させるものである。しかし、近年の省エネ実現のために暗めの画面に設定されている画像を前提とした場合、この暗めの画面を、特に見たいシーンだけは明るい画面にしたいという要望を満たすために、従来の技術を利用しようとすると、静的に周囲光の明るさに対応するだけであるために、その「見たいシーン」であるハイライトシーンが検出できず、ハイライトシーンのときに明るい画面に自動的に移行することができないという課題があった。
【課題を解決するための手段】
【０００８】
上記で述べた課題を解決するため、本発明に係る画質調整装置は、画像ディスプレイから出力される画像または音声の特徴量の変化に基づいて、番組のハイライトシーンを検出するハイライトシーン検出器と、前記ハイライトシーン検出器により検出された前記ハイライトシーンの表示様態を、第１の輝度の表示様態である省エネモードから前記第１の輝度より高い第２の輝度の表示様態である明表示モードへ切り替えるモード切替器と、前記モード切替器により切り替えられた前記明表示モードに従って、前記画像ディスプレイに表示する前記ハイライトシーンの画質を制御する画質制御器とを備えることとしたものである。
【発明の効果】
【０００９】
本発明によれば、省エネモードの暗い画面から、ハイライトシーンを自動的に検出して明るい画面に移行することにより、ユーザが、どうしても見たいシーンや、大切なシーンを、明るい画面で明瞭に視聴することができるようになるという顕著な効果がある。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施の形態１における画質調整装置の一例を示す構成図である。
【図２】従来技術の映像表示装置を示す構成図である。
【図３】実施の形態１に係る画質調整装置における画質調整処理のフローチャートを示す図である。
【図４】画像信号の輝度分布の例を示す図である。
【図５】バックライト輝度値の変化の過程を示す図である。
【符号の説明】
【００１１】
１  画質調整装置、２  画像ディスプレイ、３  ハイライトシーン検出器、４  音量型検出器、５  音声周波数型検出器、６  特定音声型検出器、７  音声パタン型検出器、８  画像パタン型検出器、９  文字列・記号型検出器、１０  輝度分析型検出器、１１  モード切替器、１２  省エネモード解除器、１３  演出モード切替器、１４  画質制御器、１５  輝度制御器。
【発明を実施するための形態】
【００１２】
実施の形態１．
図１は、本発明の実施の形態１における画質調整装置の一例を示す構成図である。
図１において、画質調整装置１は、画像ディスプレイ２に接続され、画像ディスプレイ２から出力される画像信号と音声信号とに基づいて、ハイライトシーンを検出し、そのハイライトシーンの画質を調整する。画質調整装置１は、ハイライトシーン検出器３、モード切替器１１、及び、画質制御器１４により構成される。
【００１３】
ハイライトシーン検出器３は、ハイライトシーンを検出するために、４から１０までの複数の検出器から構成された統合型検出器である。音量型検出器４は、音量の変化を検出する。音声周波数型検出器５は、音声の周波数の変化を検出する。特定音声型検出器６は、歓声のような特定の音声を検出する。音声パタン型検出器７は、応援歌のような特定の音声の時間変化パタンを検出する。画像パタン型検出器８は、画像に含まれる特定の画像パタンを検出する。文字列・記号型検出器９は、画像に含まれる特定の文字列や記号を検出する。輝度分析型検出器１０は、画像信号を分析して得られる輝度分布のパタンを検出する。
【００１４】
モード切替器１１は、画像ディスプレイ２に表示される画像の表示モードを切り替えるものであり、省エネモード解除器１２と、演出モード切替器１３とから構成される。省エネモード解除器１２は、ハイライトシーンが検出された場合に、省エネモードの画像表示設定を解除する。演出モード切替器１３は、検出されたハイライトシーンを演出する表示モードに切り替える。
【００１５】
画質制御器１４は、輝度制御器１５により構成される。輝度制御器１５は、モード切替器１１によって切り替えられた表示モードに応じて、画像の輝度を制御して調整する。
【００１６】
次に、実施の形態１における画質調整装置の動作について、図３〜図５を適宜参照しながら説明する。
図３は、実施の形態１に係る画質調整装置における画質調整処理のフローチャートを示す図である。
図４は、画像信号の輝度分布の例を示す図である。
図５は、バックライト輝度値の変化の過程を示す図である。
【００１７】
まず、図３のステップＳ１０１において、ハイライトシーン検出器３は、４から１０までの各検出器を並行して実行し、各検出器の検出結果に基づいて、ハイライトシーンを検出する。以下、４から１０までの各検出器によるハイライトシーン検出処理について、順次、説明する。
【００１８】
音量型検出器４は、音量の変化に基づいて、ハイライトシーンを検出する。これは、例えば、サッカーにおいてゴール際の攻防のシーン、あるいは、相撲において注目の一番の両力士が土俵に上がったときのシーンなどでは、観衆の声や、ざわめきが、大きくなることを利用したものである。すなわち、この音量型検出器４では、入力された音声信号の音量が、予め定めた所定の規定基準値を超えた場合に、ハイライトシーンが開始したものとし、その後、音量が規定基準値を継続して超えるシーンをハイライトシーンと見なして、その検出結果を出力する。
【００１９】
音声周波数型検出器５は、音声の周波数の変化に基づいて、ハイライトシーンを検出する。これは、例えば、サッカーにおいてゴール際の攻防のシーン、あるいは、相撲において注目の一番の両力士が土俵に上がったときのシーンなどでは、観衆の声や、ざわめきが、かん高い音声になることを利用したものである。すなわち、この音声周波数型検出器５では、入力信号の音声周波数が、予め定めた所定の規定基準値に照らして、高音側に変化した場合に、ハイライトシーンが開始したものとし、その後、音声周波数が規定基準値を継続して超えるシーンをハイライトシーンと見なして、その検出結果を出力する。
【００２０】
特定音声型検出器６は、歓声のような特定の音声に基づいて、ハイライトシーンを検出する。
これは、例えば、サッカーにおいてゴール際の攻防のシーン、あるいは、相撲において注目の一番の両力士が土俵に上がったときのシーンなどでは、観衆から歓声が沸きあがることを利用したものである。すなわち、この特定音声型検出器６では、入力信号の音声から歓声などの特定の音声を認識した場合に、ハイライトシーンが開始したものとし、その後、歓声などの特定の音声が継続して認識されるシーンをハイライトシーンと見なして、その検出結果を出力する。
【００２１】
音声パタン型検出器７は、応援歌のような特定の音声の時間変化パタンに基づいて、ハイライトシーンを検出する。これは、例えば、野球の早慶戦において、ここ一番のチャンスというときに、学生らによる応援歌が歌われることを利用したものである。すなわち、この音声パタン型検出器７では、入力信号の音声から、応援歌などの特定の音声の時間変化パタンを認識した場合に、ハイライトシーンが開始したものとし、その後、応援歌などの特定の音声の時間変化パタンが継続して認識されるシーンをハイライトシーンと見なして、その検出結果を出力する。
【００２２】
画像パタン型検出器８は、画像に含まれる特定の画像パタンに基づいて、ハイライトシーンを検出する。これは、例えば、サッカーでシュートが行なわれるシーンや行なわれそうなシーンでは、ゴールポストが大写しにされることを利用したものである。すなわち、この画像パタン型検出器８では、入力信号の画像から、サッカーゴールの大写しなどの特定の画像パタンを認識した場合に、ハイライトシーンが開始したものとし、その後、サッカーゴールの大写しなどの特定の画像パタンが継続して認識されるシーンをハイライトシーンと見なして、その検出結果を出力する。
【００２３】
文字列・記号型検出器９は、画像に含まれる特定の文字列や記号に基づいて、ハイライトシーンを検出する。これは、例えば、野球において打者が打席に入って打とうとする前に、ストライク、ボール、アウトの数が、文字と記号とにより示されることを利用したものである。すなわち、この文字列・記号型検出器９では、入力信号の画像から、その画像に含まれる特定の文字列や記号を認識した場合に、ハイライトシーンが開始したものとし、その後、特定の文字列や記号が継続して認識されるシーンを、ハイライトシーンと見なして、その検出結果を出力する。
【００２４】
輝度分析型検出器１０は、画像を分析して得られる輝度分布のパタン、あるいは、この輝度分布から導出される記述統計量などのパラメータの値に基づいて、ハイライトシーンを検出する。これは、例えば、ゴルフにおいて、それまで解説が続いていたが、いよいよ注目のゴルファーが球を打とうとするとき、そのゴルファーの顔や姿が画面にアップされることによる輝度分布の変化を利用したものである。
【００２５】
この場合の具体的な輝度分布の例を、図４を参照して説明する。図４の（ａ）は、芝生やギャラリーや風景など様々なものが映っている解説のときの画像の輝度分布を示している。この場合の輝度分布は、低輝度領域から高輝度領域まで広く分布したものとなる。また、（ｂ）は、ゴルファーが打球した後、その飛球を追って大きな空がそのほとんどを占めているときの画像の輝度分布を示している。この場合の輝度分布は、高輝度領域に偏って分布したものとなる。さらに、（ｃ）は、ゴルファーが玉を打とうとしている画面で、そのゴルファーの顔や姿が画面にアップされているときの画像の輝度分布を示している。この場合の輝度分布は、中輝度領域にまとまって分布したものとなる。
【００２６】
このような輝度分布の形状特徴に着目することにより、ゴルフにおけるハイライトシーンを検出することが可能である。例えば、上記の（ａ）の場合を輝度分布パタンＡ、（ｂ）の場合を輝度分布パタンＢ、（ｃ）の場合を輝度分布パタンＣとして、それらの輝度分布パタンに対する判定条件を予め定めておき、画像ディスプレイ２から出力される画像の輝度信号に対して、この判定条件を適用することにより、これらの輝度分布パタンを判定することができる。どの輝度分布パタンをハイライトシーンとするかは、番組の内容に応じて、適宜、定めておけばよい。なお、これらの輝度分布パタンを判定する判定条件を詳細化することにより、更に多種の輝度分布パタンに分類しても良い。
【００２７】
このようにして、この輝度分析型検出器１０では、入力信号の画像から、輝度分布、あるいは、平均輝度などの輝度情報を測定し、その特定のパタン、あるいは、特定の変化を認識した場合に、ハイライトシーンが開始したものとし、その後、その特定の輝度分布パタンが継続して認識されるシーンを、ハイライトシーンと見なして、その検出結果を出力する。
【００２８】
次に、図３のステップＳ１０２において、ハイライトシーン検出器３は、統合型検出器として、前記音量型検出器４、前記音声周波数型検出器５、前記特定音声型検出器６、前記音声パタン型検出器７、前記画像パタン型検出器８、前記文字列・記号型検出器９、及び、前記輝度分析型検出器１０による複数の検出結果を組み合わせて統合し、予め定義されたハイライトシーン検出条件と照合する。このハイライトシーン検出条件は、例えば、上記４から１０の検出器の各出力の論理積演算として定義され、複数の検出条件の検出がすべて成立した場合にのみ、ハイライトシーンの検出とするものである。
【００２９】
次に、ステップＳ１０３において、ハイライトシーン検出器３は、上記のハイライトシーン検出条件の照合結果に従って、ハイライトシーンを検出したと判定した場合には、ステップＳ１０４へ進み、ハイライトシーンを検出していないと判定した場合には、ステップＳ１０１へ戻る。
【００３０】
次に、ステップＳ１０４において、モード切替器１１は、省エネモード解除器１２により、省エネモードの画像表示設定を解除する。この結果、モード切替器１１により、暗い表示の省エネモードから、通常の明るい画面の表示に切り替えるための切替信号を出力する。
【００３１】
さらに、ステップＳ１０５において、モード切替器１１は、演出モードで表示するか否かを判定する。この判定では、番組に応じて設定されたハイライトシーンの判定条件に、演出モードの要否を設定するようにしておき、ハイライトシーンが検出された場合に、この設定に従って判定するようにする。あるいは、ハイライトシーンが検出された場合には、常に、演出モードに切り替えるようにしても良い。このようにして、モード切替器１１は、演出モードで表示すると判定した場合には、ステップＳ１０６へ進み、演出モードで表示しないと判定した場合には、ステップＳ１０７へ進む。
【００３２】
次に、ステップＳ１０６において、モード切替器１１は、演出モード切替器１３により、演出モードによる表示に切り替える。演出モードによる表示では、画像の画質を、通常の控えめな画質から、演出された画質に切り替えて表示する。これは、例えば、ゴルフにおけるハイライトシーンとして、ゴルファーが、今まさに玉を打とうとしているシーンを検出した場合、ゴルファーの顔や姿が際立つように、人物の表示に適した画質に切り替えるようにする。あるいは、ゴルファーが打球した後に、その飛球の弾道を追い易いように、空と飛球とのコントラストが明瞭になる画質に切り替えるようにする。
【００３３】
次に、ステップＳ１０７において、画質制御器１４は、輝度制御器１５により、画像の輝度を制御して調整するために、バックライト輝度を変化させる信号を、画像ディスプレイ２に出力する。これは、画像ディスプレイ２の画面において、暗い表示である省エネモードの表示から、明るい表示に実際に切り替える処理である。また、ステップＳ１０６において、演出モードで表示すると判定された場合には、画質制御器１４は、画像の画質を制御して、演出モードの画質に切り替える。
【００３４】
最後に、ステップＳ１０８において、画質調整装置１は、一連の画質調整処理を終了するか否かを判定し、終了しない場合は、ステップＳ１０１へ戻る。終了する場合は、一連の画質調整処理を終了する。
【００３５】
以上述べたハイライトシーンの検出、演出モードによる表示、画像の輝度制御の処理を実行した後、画質調整装置１は、ハイライトシーンが検出されなくなった場合に、省エネモードによる表示に復帰する。これらの一連の処理の流れにおいて、バックライト輝度値の変化の過程を、図５に示す。画質調整装置１は、時刻Ｔ１に、ハイライトシーンを検出した場合、省エネモードの表示設定を解除して、明るい画面の表示へ切り替える。その後、ハイライトシーンの輝度調整と演出モードによる画質調整を行なって、時刻Ｔ２に、ハイライトシーンが検出されなくなったものとする。時刻Ｔ２からは、徐々に輝度を低下させて、時刻Ｔ３に、省エネモードの表示へ復帰する。
【００３６】
なお、以上の説明は、本発明による画質調整装置１を、省エネモードによる画質と、それ以外のモードによる画質との移行及び復帰への応用として説明したが、この発明は必ずしもこの応用に留まることは無く、その他の画質モード間の移行と復帰、さらに一般的には、2つ、あるいはそれ以上の異なる画質間の移行および復帰に応用が可能である。
【００３７】
以上のように、実施の形態１によれば、省エネモードの暗い画面から、ハイライトシーンを自動的に検出して明るい画面に移行することにより、ユーザが、どうしても見たいシーンや、大切なシーンを、明るい画面で明瞭に視聴することができるようになるという顕著な効果がある。
【図１】
2011015129.tif 000003
【図２】
2011015129.tif 000004
【図３】
2011015129.tif 000005
【図４】
2011015129.tif 000006
【図５】
2011015129.tif 000007