(57)【要約】【課題】  画像の注目領域のエッジ部分の視認性を向上させる技術を提供する。【解決手段】  本発明の画像処理装置は、入力画像のエッジ部分以外の領域をぼかした第１画像を生成するエッジ保存型ＬＰＦ３０１と、入力画像の注目領域を検出する注目領域検出部３０２と、を備える。エッジ保存型ＬＰＦ３０１は、注目領域のぼかし度合いを、注目領域以外のぼかし度合いよりも強くすることを特徴とする。【選択図】  図３
2019028536.tif 000002
【特許請求の範囲】
【請求項１】
入力画像のエッジ部分以外の領域をぼかした第１画像を生成するフィルタ手段と、
前記入力画像の注目領域を検出する検出手段と、を備え、
前記フィルタ手段は、前記注目領域のぼかし度合いを、前記注目領域以外のぼかし度合いよりも強くすることを特徴とする画像処理装置。
【請求項２】
前記入力画像をエッジ強調した第２画像を生成する強調手段と、
前記第１画像と前記第２画像の合成処理を行う合成手段と、をさらに備えることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記フィルタ手段は、前記入力画像に対してＬＰＦ（Ｌｏｗ  Ｐａｓｓ  Ｆｉｌｔｅｒ）とサンプリングを行うことにより、前記第１画像を生成することを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
前記画像処理装置は、接続された撮像装置のフォーカスをアシストするフォーカスアシストモードを備え、
前記フィルタ手段は、前記フォーカスアシストモードに設定された場合に、前記注目領域のぼかし度合いを、前記注目領域以外のぼかし度合いよりも強くすることを特徴とする請求項１から３までのいずれか１項に記載の画像処理装置。
【請求項５】
前記フィルタ手段は、前記注目領域のサイズが小さいほど、ぼかし度合いを強くすることを特徴とする請求項１から４までのいずれか１項に記載の画像処理装置。
【請求項６】
前記強調手段は、前記注目領域のサイズが小さいほど、エッジ強調を強くすることを特徴とする請求項２に記載の画像処理装置。
【請求項７】
請求項１から６までの画像処理装置と、
表示手段と、を備える表示装置。
【請求項８】
前記フィルタ手段は、前記表示手段の表示輝度が低いほど、ぼかし度合いを強くすることを特徴とする請求項７に記載の表示装置。
【請求項９】
前記強調手段は、前記表示手段の表示輝度が低いほど、エッジ強調を強くすることを特徴とする請求項７に記載の表示装置。
【請求項１０】
入力画像のエッジ部分以外の領域をぼかした第１画像を生成するフィルタステップと、
前記入力画像の注目領域を検出する検出ステップと、を有し、
前記フィルタステップは、前記注目領域のぼかし度合いを、前記注目領域以外のぼかし度合いよりも強くすることを特徴とする画像処理装置の制御方法。
【請求項１１】
コンピュータを請求項１から請求項６までのいずれか１項に記載の画像処理装置の各手段として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、入力画像に画像処理を施す画像処理装置及びその制御方法、表示装置、プログラムに関する。
【背景技術】
【０００２】
撮像装置には、撮像している画像のフォーカスが合ったエッジ部分に強調処理を施して表示するフォーカスアシスト機能が搭載されている。
【０００３】
例えば、下記の特許文献１には、撮影された画像の焦点が合っているエッジ部分を着色することによりマニュアルフォーカス調整において容易に焦点を合わせることを可能にする撮像装置が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１３−１５３３７１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、エッジ部分に着色すると、被写体のエッジ部分の画像の視認性が悪くなってしまうという課題があった。
【０００６】
そこで、本発明は、画像の注目領域のエッジ部分の視認性を向上させる技術を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した課題を解決するために、本発明の一実施形態に係る画像処理装置は、入力画像のエッジ部分以外の領域をぼかした第１画像を生成するフィルタ手段と、入力画像の注目領域を検出する検出手段と、を備える。そして、フィルタ手段は、注目領域のぼかし度合いを、注目領域以外のぼかし度合いよりも強くする。
【０００８】
また、本発明の一実施形態に係る画像処理装置の制御方法は、入力画像のエッジ部分以外の領域をぼかした第１画像を生成するフィルタステップと、入力画像の注目領域を検出する検出ステップと、を有する。そして、フィルタステップは、注目領域のぼかし度合いを、注目領域以外のぼかし度合いよりも強くする。
【発明の効果】
【０００９】
本発明によれば、画像の注目領域のエッジ部分の視認性を向上させることが可能となる。
【図面の簡単な説明】
【００１０】
【図１】実施の形態１のシステムの構成を示すブロック図である。
【図２】フォーカスアシスト機能をオンに設定する際の設定メニュー画面の一例を示す図である。
【図３】図１の画像処理部の内部構成を示すブロック図である。
【図４】図３のエッジ保存型ＬＰＦの構成を示すブロック図である。
【図５】エッジ強度Ｅｓと混合比ｋの関係を示す概略図である。
【図６】エッジ強度Ｅｓと混合比ｋの関係を示す他の概略図である。
【図７】実施の形態２における画像処理部の内部構成を示すブロック図である。
【図８】補正係数ｒとフィルタサイズ、繰り返し回数、ダウンサンプリング数との対応関係を記憶したテーブルの一例を示す図である。
【図９】実施の形態３のシステムの構成を示すブロック図である。
【図１０】図９の画像処理部の内部構成を示すブロック図である。
【図１１】実施の形態３における表示輝度と補正係数ｒｂの関係を説明するための図である。
【発明を実施するための形態】
【００１１】
以下、図面を用いて本発明の実施の形態について説明する。なお、本発明の技術的範囲は、特許請求の範囲によって確定され、以下に例示する実施形態によって限定されるものではない。また、実施形態の中で説明されている特徴の組み合わせすべてが本発明に必須とは限らない。本明細書および図面に記載の内容は例示であって、本発明を制限するものと見なすべきではない。本発明の趣旨に基づき種々の変形（各実施形態の有機的な組合せを含む）が可能であり、それらを本発明の範囲から除外するものではない。即ち、各実施形態及びその変形例を組み合わせた構成も全て本発明に含まれるものである。
【００１２】
なお、本発明の各実施形態に示す表示装置は、表示パネルと、該表示パネルを背面から照射するバックライトを備える。以下では表示パネルとして液晶パネルを例示し、バックライトの光源としてＬＥＤ発光素子を例示するが、表示パネルやバックライトの光源はこれに限らない。例えば、バックライトの光源は、有機ＥＬ素子やレーザー光源であってもよい。表示パネルは、液晶素子以外の素子（バックライトからの光の透過率を制御可能な素子）を有する表示パネルであってもよい。また、スクリーンに画像を投影する液晶プロジェクター等にも適用可能である。
【００１３】
（実施の形態１）
図１（Ａ）は、実施の形態１のシステムの構成を示すブロック図である。表示装置１０１は、画像出力装置１００にＳＤＩ（Ｓｅｒｉａｌ  Ｄｉｇｉｔａｌ  Ｉｎｔｅｒｆａｃｅ）ケーブルやＨＤＭＩ（登録商標）ケーブル等で接続されている。画像出力装置１００は、例えば、デジタル画像データを出力する撮像装置である。なお、画像出力装置１００は、撮像装置に限定されず、デジタル画像データが出力可能な装置であればよい。例えば、表示装置１０１が、ネットワークで接続されたサーバ装置や記録装置（ストレージ）からデジタル画像データを取得する構成でもよい。
【００１４】
表示装置１０１は、ＣＰＵ１０２、ＲＯＭ１０３、ＲＡＭ１０４、入力部１０５、画像処理部１０６、表示部１０７、バックライト部１０８、及び操作入力部１０９を備える。システムバスに、ＣＰＵ１０２、ＲＯＭ１０３、ＲＡＭ１０４が接続されている。ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１０２は、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）１０３に格納されたプログラムに従い動作する。そして、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）１０４をワークメモリとして、表示装置１０１全体の動作を制御する。
【００１５】
入力部１０５は、不図示の入力端子を介して、画像出力装置１００から入力された画像データ（映像データ）をデコード処理し、画像処理部１０６へ出力する。画像処理部１０６へ入力された画像データに、後述する画像処理を施した後、表示部１０７へ出力する。
【００１６】
表示部１０７は、液晶パネル等の表示パネルを含み、画像処理部１０６で画像処理が施された画像（映像）を表示する。バックライト部１０８は、例えば、バックライト制御部とＬＥＤドライバとＬＥＤ（Ｌｉｇｈｔ  Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ）で構成される。バックライト制御部は、ＬＥＤから表示パネルへの出射光量が均一となるように、ＬＥＤドライバにデューティ比や電流値等の情報を設定する。ＬＥＤドライバは、バックライト制御部により設定された情報に基づき、ＬＥＤを点灯制御する。
【００１７】
なお、表示部１０７とバックライト部１０８は別体となっていてもよい。その場合、図１（Ｂ）に示すように、画像処理装置１１０と、表示装置１１１とが接続された構成となる。
【００１８】
操作入力部１０９は、表示装置１０１に設けられたボタン（キー）等のユーザーインターフェースを含む。ユーザは、操作入力部１０９を操作して、表示装置１０１の設定状態を変更することが可能である。
【００１９】
図２は、ユーザが表示装置１０１のフォーカスアシスト機能をオンに設定する際の設定メニュー画面の一例を示す図である。ユーザは、操作入力部１０９を操作して、設定メニュー画面を表示させ、設定メニュー２０１上のフォーカス枠２０２を移動させることで、フォーカスアシストモードの「オン」／「オフ」を設定できる。ユーザがフォーカスアシストモード「オン」を選択すると、表示対象の画像に後述する画像処理が適用される。
【００２０】
図３は、図１の画像処理部１０６の内部構成を示すブロック図である。画像処理部１０６が実行する各処理を実現するためのプログラムコードおよび各種設定パラメータ等は図１のＲＯＭ１０３に格納されており、ＣＰＵ１０２がＲＯＭ１０３からＲＡＭ１０４に読み出して各処理を実行する。
【００２１】
画像処理部１０６は、エッジ保存型ＬＰＦ（Ｌｏｗ  Ｐａｓｓ  Ｆｉｌｔｅｒ）３０１、注目領域検出部３０２、エッジ強調部３０３、および合成部３０４を備える。エッジ保存型ＬＰＦ３０１は、ＬＰＦとダウンサンプリングを繰り返して多重解像度化した複数階層の画像を生成し、エッジ部分を上層の高解像度側に置き換えながらアップサンプリングする構成とする。多重解像度化することにより、比較的小さなサイズのＬＰＦで画像のぼかし度合いを大きくすることができる。
【００２２】
図４は、図３のエッジ保存型ＬＰＦ３０１の構成を示すブロック図である。ＬＰＦ４０１は、５×５の２次元デジタルフィルタである。ＬＰＦ４０１が入力画像にＬＰＦ処理を施した後に、ダウンサンプリング部４０２が１／２のダウンサンプリング処理を行うことにより、第１階層４０３の画像を得ることができる。同様に、第１階層４０３の画像にＬＰＦ処理とダウンサンプリング処理を行うことにより、第２階層４０４の画像を得ることができる。これを繰り返すことで、ぼかし度合いが大きなボケ画像を得ることができる。例えば、第３階層の画像は、縦横１／６に縮小された画像に５×５のＬＰＦ処理をかけたものになるため、元画像に３０×３０のＬＰＦを適用した画像に相当するボケ画像が得られる。実際には途中の階層でもＬＰＦを適用しているので、よりぼかし度合いが大きなボケ画像となる。
【００２３】
下層の画像をアップサンプリング部４０５でアップサンプリングした画像ＩＬに対して、エッジ検出部４０６によりエッジ検出フィルタを適用して画素ごとにエッジ強度ＥＳを算出する。エッジ検出フィルタは、３×３のｐｒｅｗｉｔｔフィルタとする。このエッジ強度ＥＳにより、画像ＩＬと一つ上層の画像ＩＨの混合比ｋを制御して、下記の数式（１）を用いて合成部４０７で合成処理して新たな画像ＩＬ’を得る。
ＩＬ’＝（１−ｋ）＊ＩＬ＋ｋ＊ＩＨ      ・・・（１）
ただし、
ｋ＝０（ＥＳ≦Ｅ１）、ｋ＝ｆ（Ｅ）（Ｅ１≦ＥＳ≦Ｅ２）、ｋ＝１．０（Ｅ２≦ＥＳ）
【００２４】
Ｅ１、Ｅ２は混合を制御する閾値で、ｆは単調増加関数である。この合成により、エッジ部分は元の情報をより多く含んでいる画像ＩＨの比率が高くなる。これを元画像のサイズまで繰り返すことでエッジ部分以外の領域のぼかし度合いが大きなボケ画像が得られる。
【００２５】
この実施の形態１では、Ｅ１，Ｅ２の閾値を、注目領域内か注目領域外かで異ならせていることを特徴としている。例えば、注目領域内の閾値をＥ１、Ｅ２、注目領域外の閾値をＥ１’、Ｅ２’として下記の数式（２）の関係が成り立つ値として定める。
Ｅ１’≦  Ｅ１、  Ｅ２≦Ｅ２’      ・・・（２）
【００２６】
図５は、エッジ強度Ｅｓと混合比ｋの関係を示す概略図である。エッジ強度Ｅｓと混合比ｋの関係は、例えば、注目領域内５０１と注目領域外５０２となるように定められる。上記関係が成り立つようにすることで、注目領域内の方が、注目領域外に比べて、エッジを保ちつつよりぼかし度合いの大きなボケ画像となる。
【００２７】
なお、ｆの単調増加関数を２次関数として、注目領域内の単調増加関数ｆ（Ｅ）の接線の傾きｆ’（Ｅ１）、注目領域外の単調増加関数ｆ（Ｅ）’の接線の傾きｆ’（Ｅ１）’の関係が下記の数式（３）となるように定めることも可能である。
ｆ’（Ｅ１）  ≦ｆ’（Ｅ１）’、
ｆ’（Ｅ２）  ≧ｆ’（Ｅ２）’      ・・・（３）
【００２８】
図６は、単調増加関数が２次関数の場合のエッジ強度Ｅｓと混合比ｋの関係を示す概略図である。エッジ強度Ｅｓと混合比ｋの関係は、例えば、注目領域内６０１と注目領域外６０２となるように定められる。上記関係が成り立つようにすることで、注目領域内の方が注目領域外に比べて、エッジを保ちつつ、よりぼかし度合いの大きなボケ画像となる。
【００２９】
図３の注目領域検出部３０２は、入力画像から注目領域を検出する。例えば、画像出力装置１００が撮像装置である場合、撮影時の合焦領域を示す撮影情報が画像データに付加されて出力、画像出力装置１００から出力される。表示装置１０１は、画像出力装置１００から出力された画像データに付随する撮影情報から合焦領域（フォーカス領域）を検知して、該合焦領域を注目領域として検出する。なお、顔検出技術等によるオブジェクト検出処理を適用することで、画像データから顔領域を注目領域として検出することも可能である。オブジェクト検出処理については既に広く知られている技術であり、詳細説明は省略する。
【００３０】
エッジ強調部３０３は、例えばラプラシアンフィルタを用いて入力画像の鮮鋭化を行う。ラプラシアンフィルタは２次微分フィルタであり、原画像からラプラシアンフィルタを適用した結果の差分によってエッジ強調した効果を得る。なお、鮮鋭化を行う方法は上記方法に限定されない。例えば、入力画像をフーリエ変換し、フーリエ変換後の画像から低周波部分をカットするフィルタをかけた後、逆フーリエ変換することによって高周波画像を生成してエッジ強調した画像を生成してもよい。
【００３１】
合成部３０４は、注目領域検出部３０２の結果に基づいて、エッジ保存型ＬＰＦ３０１から出力されたボケ画像と、エッジ強調部３０３から出力されたエッジ強調画像とを合成処理する。具体的には、注目領域検出部３０２で検出された注目領域のみをエッジ強調画像から抽出して、エッジ保存型ＬＰＦ３０１から出力されたボケ画像に合成する処理を行う。なお、エッジ強調処理の処理負荷を低減するために、入力画像の注目領域の部分画像のみをエッジ強調部３０３に入力して、注目領域をエッジ強調する構成としてもよい。
【００３２】
したがって、この実施の形態１では、画像の注目領域のエッジ部分の視認性を向上させることが可能になる。具体的には、フォーカスを合わせたい注目領域のエッジ部分以外の領域のぼかし度合いが大きくかつエッジが強調されるため、エッジ部分とボケ部分の差が明瞭に判別できるようになり、エッジ部分の視認性が向上する。
【００３３】
なお、画像処理部１０６は、フォーカスアシストモードが「オン」設定の場合にだけ、エッジ保存型ＬＰＦ３０１、注目領域検出部３０２、エッジ強調部３０３、および合成部３０４による処理を実行するようにしてもよい。この場合、フォーカスアシストモードが「オフ」設定の場合には、画像処理部１０６は、入力画像をそのままスルーで表示部１０７に出力する。このようにすることで、フォーカス調整中のときだけ、画像のエッジ部分がエッジ強調され、かつぼかし度合いが大きくなるので、フォーカス調整しやすくなる。また、フォーカス調整完了後は、過度な画像処理が施されていない画像が表示できるので、撮影対象の画像を好適に確認することが可能となる。
【００３４】
また、画像出力装置１００が撮像装置の場合、撮像装置からフォーカス調整中であることを示すフォーカスアシスト情報を取得してもよい。例えば、撮像装置から出力された画像データに付加されたフォーカスアシスト情報を取得する。そして、画像処理部１０６は、撮像装置でフォーカス調整中の場合にだけ、エッジ保存型ＬＰＦ３０１、注目領域検出部３０２、エッジ強調部３０３、および合成部３０４による処理を実行するようにしてもよい。
【００３５】
また、画像処理部１０６のエッジ強調部３０３と合成部３０４は、省略してもよい。この場合、エッジ強調度合いは弱くなるが、注目領域のエッジ部分以外の領域のぼかし度合いが、注目領域以外のぼかし度合いに比べて大きくなるため、像の注目領域のエッジ部分の視認性が向上する。
【００３６】
（実施の形態２）
画像のエッジ部分の視認性は、画像の表示サイズによって変わる。したがって、この実施の形態２では、画像の注目領域のサイズに応じた処理を行う。以下、実施の形態１と異なる点についてのみ説明する。
【００３７】
図７は、実施の形態２における画像処理部７００の内部構成を示すブロック図である。画像処理部７００は、注目領域検出部３０２、合成部３０４、エッジ保存型ＬＰＦ７０１、注目領域割合算出部７０２、およびエッジ強調部７０３を備える。
【００３８】
注目領域割合算出部７０２は、入力画像の面積に対する、注目領域検出部３０２により検出された注目領域の面積の割合を算出し、算出した当該面積割合の逆数を補正係数ｒとして出力する。入力画像の面積Ｓ＝Ｗ（幅）＊Ｈ（高さ）、注目領域の面積ＳＦ＝ＷＦ（注目領域の幅）＊ＨＦ（注目領域の高さ）とすると、補正係数ｒ１は下記の数式で表すことが出来る。
ｒ１＝Ｓ／ＳＦ      ・・・（４）
【００３９】
また、表示画像の実表示サイズを用いて割合を求めることも可能である。具体的には、表示部１０７の表示有効領域のサイズである面積ＤＳ＝ＤＷ（表示有効領域の幅）＊ＤＨ（表示有効領域の高さ）、注目領域の実表示サイズである面積ＤＳＦ＝ＤＷＦ（注目領域の実表示幅）＊ＤＨＦ（注目領域の実表示高さ）とする。その場合、補正係数ｒ２は下記の数式で表すことができる。
ｒ２＝ＤＳ／ＤＳＦ      ・・・（５）
【００４０】
なお、補正係数ｒは、上記の補正係数ｒ１と補正係数ｒ２の積または平均値で算出してもよい。
【００４１】
エッジ保存型ＬＰＦ７０１は、注目領域割合算出部７０２から入力された補正係数ｒに基づいて、ぼかし度合いを調節する。ぼかし度合いの調節はＬＰＦの繰り返し回数を変更したり、フィルタサイズを変更したり、サンプリング量を変更したりすることにより可能である。デジタルフィルタでぼかし度合いが大きくなるように調節する場合は、補正係数ｒに比例するようにフィルタサイズや繰り返し回数を変更する。また、ダウンサンプリング処理でぼかし度合いを調節する場合は、補正係数ｒの逆比となるように処理量を変更する。具体的には、２次元のデジタルフィルタを５×５から１０×１０に変更したり、繰り返し回数を２回から４回に変更したり、１／２のダウンサンプリングを１／４のダウンサンプリングに変更したりする。このようにすることで、より大きなぼかし度合いのボケ画像を得ることができる。
【００４２】
入力画像のぼかし度合いが大きくなるように調節する場合、補正係数ｒと各パラメータの関係は、例えば下記の数式により求めることが可能である。ただし、フィルタサイズＦｓ、繰り返し回数Ｆｎ、ダウンサンプリング数Ｄｓｐｌとする。
Ｆｓ＝（初期フィルタサイズ）＊  ｒ  ＊  ｌ                  ・・・（６）
Ｆｎ＝（初期繰り返し回数）＊  ｒ  ＊  ｍ                    ・・・（７）
Ｄｓｐｌ＝（初期ダウンサンプリング数）＊  １／ｒ  ＊ｎ      ・・・（８）
（ｌ、ｍ、ｎは任意の係数）
【００４３】
なお、ここでは補正係数ｒと各パラメータを、上記のように数式を用いて算出する構成としたが、これに限定されるものではない。例えば、補正係数ｒに対応したフィルタサイズ、繰り返し回数、ダウンサンプリング数等をテーブルとして予め保持しておく構成としてもよい。
【００４４】
図８（Ａ）は、補正係数ｒとフィルタサイズとの対応関係を記憶したテーブルの一例を示す図である。図８（Ｂ）は、補正係数ｒと繰り返し回数との対応関係を記憶したテーブルの一例を示す図である。図８（Ｃ）は、補正係数ｒとダウンサンプリング数との対応関係を記憶したテーブルの一例を示す図である。
【００４５】
エッジ強調部７０３は、注目領域割合算出部７０２から入力された補正係数ｒに基づいて、鮮鋭化フィルタ処理の強調度合いを制御する。具体的には補正係数ｒに比例する強調度合いでエッジ強調処理を行う。すなわち、注目領域の面積が小さくなる程、エッジ強調度合いを強くしたエッジ強調画像が生成されるように処理する。
【００４６】
したがって、この実施の形態２では、画像の注目領域のサイズに応じて、画像の注目領域のエッジ部分の視認性を向上させることが可能になる。具体的には、画像の注目領域の表示サイズが小さく、画像のエッジ部分の視認性が低下するような場合、ボケ画像のぼかし度合いを大きくしつつ、エッジ強調を強くするようにしたので、エッジ部のコントラスが向上する。このため、画像の注目領域の表示サイズが小さい場合に、画像のエッジ部分の視認性の低下を抑制することができる。
【００４７】
（実施の形態３）
画像のエッジ部分の視認性は、画像の表示輝度によって変わる。したがって、この実施の形態３では、画像の表示輝度に応じた処理を行う。以下、実施の形態１と異なる点についてのみ説明する。
【００４８】
図９は、実施の形態３のシステムの構成を示すブロック図である。表示装置１００１は、実施の形態１の表示装置１０１の構成に加え、センサー部１００２を備える。センサー部１００２は、表示装置１００１の周辺の外光照度レベル（ｌｘ；ルクス）を測定する。例えば、通常の室内環境であれば７５〜１５０ｌｘであり、スタジオ等の照明環境であれば１０００ｌｘといった測定結果が得られる。また、表示装置１０１の画像処理部１０６に変わって、表示装置１００１は画像処理部１００３を備える。
【００４９】
図１０は、図９の画像処理部１００３の内部構成を示すブロック図である。画像処理部１００３は、実施の形態１の画像処理部１０６の構成に加え、外光照度取得部１１０１、バックライト制御部１１０２、および表示輝度推定部１１０３を備えている。また、画像処理部１０６のエッジ保存型ＬＰＦ３０１およびエッジ強調部３０３に変わって、エッジ保存型ＬＰＦ１１０４およびエッジ強調部１１０５を備える。
【００５０】
外光照度取得部１１０１は、表示装置１００１のセンサー部１００２で測定された表示装置１００１の周辺の外光照度レベルを取得し、表示輝度推定部１１０３に出力する。表示輝度推定部１１０３は、外光照度取得部１１０１で取得された外光照度レベルと、バックライト制御部１１０２から入力されたバックライト輝度レベルとに基づいて、ユーザが表示装置１００１を見た際の見た目の表示輝度［ｃｄ／ｍ２］を推定する。外光照度レベルとバックライト輝度レベルから表示輝度を推定する方法については、従来からいくつかの手法があるが、本実施の形態ではどの手法を用いてもよく、詳細な説明は省略する。
【００５１】
図１１は、実施の形態３における表示輝度と補正係数ｒｂの関係を説明するための図である。図１１において、横軸は表示輝度［ｃｄ／ｍ２］、縦軸は補正係数ｒｂを示す。表示輝度に応じて、ａ点とｂ点とを結ぶ直線１２０１または曲線１２０２に沿って、補正係数ｒｂが変化する。例えば、表示輝度が５００［ｃｄ／ｍ２］の場合はｒｂ＝１．０とし、表示輝度が低くなるに従って、補正係数ｒｂが大きくなる。補正係数ｒｂは、実施の形態２で説明した補正係数ｒと同様に、エッジ保存型ＬＰＦ７０１およびエッジ強調部７０３の処理に適用される。具体的には、表示輝度が低いほど、補正係数ｒｂが大きくなるので、ぼかし度合いが大きくなり、エッジ強調度合いが強くなる。
【００５２】
したがって、この実施の形態３では、画像の表示輝度に応じて、画像のエッジ部分の視認性を向上させることが可能になる。具体的には、画像の表示輝度が低く、画像のエッジ部分の視認性が低下するような場合、ボケ画像のぼかし度合いを大きくしつつ、エッジ強調を強くするようにしたので、エッジ部のコントラスが向上する。このため、画像の表示輝度が低い場合に、画像のエッジ部分の視認性の低下を抑制することができる。
【００５３】
なお、画像処理部１００３の注目領域検出部３０２による注目領域の検出処理は省略してもよい。この場合、入力画像全体に対して、同じぼかし度合い、かつ同じエッジ強調度合いで処理が行われる。
【００５４】
（その他の実施例）
本発明は、上述の実施の形態の１以上の機能を実現するプログラムをネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。上記コンピュータは、例えば、ＣＰＵやＭＰＵ等のプロセッサーで構成される。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。上述の実施形態の１以上の機能を実現するためのコンピュータプログラム自体も本発明の一つである。
【符号の説明】
【００５５】
１０６  画像処理部
３０１  エッジ保存型ＬＰＦ
３０２  注目領域検出部
３０３  エッジ強調部
３０４  合成部
【図１】
2019028536.tif 000003
【図２】
2019028536.tif 000004
【図３】
2019028536.tif 000005
【図４】
2019028536.tif 000006
【図５】
2019028536.tif 000007
【図６】
2019028536.tif 000008
【図７】
2019028536.tif 000009
【図８】
2019028536.tif 000010
【図９】
2019028536.tif 000011
【図１０】
2019028536.tif 000012
【図１１】
2019028536.tif 000013