(57)【要約】【課題】人の視覚の状態に応じてボケを抑制した画像を提供する。【解決手段】情報処理装置１３は、元画像の表示態様を変更した画像である表示画像を生成する。情報処理装置１３は、閾値設定部２１と、範囲設定部２２、と、画像生成部２３と、を備える。閾値設定部２１は、コントラスト閾値を設定する。範囲設定部２２は、コントラスト閾値と、空間周波数特性と、に基づき、輝度コントラストを増加する空間周波数の範囲を設定する。画像生成部は、範囲設定部により設定された空間周波数の範囲において元画像の輝度コントラストが増加された画像を生成する。【選択図】図１
2020003704.tif 000002
【特許請求の範囲】
【請求項１】
元画像の表示態様を変更した画像である表示画像を生成する情報処理装置（１３、１１３、２１３）であって、
コントラスト閾値を設定するように構成された閾値設定部（２１、１２１）と、
前記閾値設定部により設定された前記コントラスト閾値と、前記元画像に係る、空間周波数に対する輝度コントラストを示す空間周波数特性と、に基づき、前記輝度コントラストを増加する前記空間周波数の範囲を設定するように構成された範囲設定部（２２、２２１）と、
前記範囲設定部により設定された前記空間周波数の範囲において前記元画像の前記輝度コントラストが増加された画像を、前記表示画像として生成するように構成された画像生成部（２３、１２３）と、を備える情報処理装置。
【請求項２】
請求項１に記載の情報処理装置であって、
前記閾値設定部は、少なくとも使用者による入力操作に応じて前記コントラスト閾値を設定するように構成されている、情報処理装置。
【請求項３】
請求項１又は請求項２に記載の情報処理装置であって、
前記閾値設定部は、使用者の視力の情報を取得する視力取得部（１３３）を備えており、少なくとも前記視力取得部により取得された前記視力に応じて前記コントラスト閾値を設定するように構成されている、情報処理装置。
【請求項４】
請求項１から請求項３のいずれか１項に記載の情報処理装置であって、
前記閾値設定部は、少なくとも使用者の年齢に応じて前記コントラスト閾値を設定するように構成されている、情報処理装置。
【請求項５】
請求項１から請求項４のいずれか１項に記載の情報処理装置であって、
当該情報処理装置は車両に搭載して用いられるものであって、
前記閾値設定部は、少なくとも運転開始後の経過時間に応じて前記コントラスト閾値を設定するように構成されている、情報処理装置。
【請求項６】
請求項１から請求項５のいずれか１項に記載の情報処理装置であって、
さらに、
前記閾値設定部は、使用者のまぶたの開度を検出する開度検出部（１３２）を備えており、少なくとも前記開度検出部により検出された開度に応じて前記コントラスト閾値を設定するように構成されている、情報処理装置。
【請求項７】
請求項１から請求項６のいずれか１項に記載の情報処理装置であって、
前記画像生成部は、少なくとも使用者による入力操作に応じて設定された前記輝度コントラストの増加量にて前記輝度コントラストを増加するように構成されている、情報処理装置。
【請求項８】
請求項１から請求項７のいずれか１項に記載の情報処理装置であって、
前記範囲設定部は、少なくとも、前記閾値設定部により設定された前記コントラスト閾値を下回る輝度コントラストを有する前記空間周波数を含むように、前記輝度コントラストを増加する前記空間周波数の範囲を設定するように構成されている、情報処理装置。
【請求項９】
請求項１から請求項８のいずれか１項に記載の情報処理装置であって、
当該情報処理装置は車両に搭載して用いられるものであって、かつ、前記表示画像はヘッドアップディスプレイにより表示されるものであり、
また前記元画像（２５１）は、要部（２５３）と、背景部（２５２）と、を備える画像であり、
前記範囲設定部及び前記画像生成部は、車両外部を撮影した撮影画像のうち、使用者により前記表示画像が視認される部分と重畳する部分である重畳部分の平均輝度を、前記元画像における背景部の輝度に置き換えて処理を行うように構成されている、情報処理装置。
【請求項１０】
請求項１から請求項９のいずれか１項に記載の情報処理装置であって、
前記元画像は、第１領域と、第２領域と、を含む画像であり、
前記画像生成部は、前記表示画像のうち、前記第１領域を表示すべき画像として出力するように構成されている、情報処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、車両に搭載される表示装置に画像を表示する技術に関する。
【背景技術】
【０００２】
画像を表示する表示装置において、画像を視認し易くするための技術が知られている。例えば、下記特許文献１では、入力画像のエッジを強調するフィルタにより境界のボケを抑制する技術が提案されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００２−１４９１０５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、発明者の詳細な検討の結果、上記技術は人の視覚の状態を考慮したものではないため、視覚の状態によっては十分にボケの抑制がなされないという課題が見出された。
【０００５】
本開示の１つの局面は、人の視覚の状態に応じてボケを抑制した画像を提供することにある。
【課題を解決するための手段】
【０００６】
本開示の一態様による情報処理装置（１３、１１３、２１３）は、元画像の表示態様を変更した画像である表示画像を生成する。情報処理装置は、閾値設定部（２１、１２１）と、範囲設定部（２２、２２１）と、画像生成部（２３、１２３）と、を備える。閾値設定部は、コントラスト閾値を設定するように構成されている。範囲設定部は、閾値設定部により設定されたコントラスト閾値と、元画像に係る、空間周波数に対する輝度コントラストを示す空間周波数特性と、に基づき、輝度コントラストを増加する空間周波数の範囲を設定するように構成されている。画像生成部は、範囲設定部により設定された空間周波数の範囲において元画像の輝度コントラストが増加された画像を、表示画像として生成するように構成されている。
【０００７】
このような構成によれば、視覚の状態に対応するコントラスト閾値に基づいて表示画像のコントラストを増加するため、視覚の状態に応じてボケを抑制した見易い画像を提供することができる。
【０００８】
なお、この欄及び特許請求の範囲に記載した括弧内の符号は、一つの態様として後述する実施形態に記載の具体的手段との対応関係を示すものであって、本開示の技術的範囲を限定するものではない。
【図面の簡単な説明】
【０００９】
【図１】第１実施形態の車載表示システムの構成を示すブロック図である。
【図２】空間周波数特性とコントラスト閾値を説明する図である。
【図３】所定の空間周波数範囲においてコントラストを増加させた状態を説明する図である。
【図４】第１実施形態の画像生成処理のフローチャートである。
【図５】コントラストを増加する空間周波数の上限の設定方法を説明する図である。
【図６】コントラスト増加倍率の設定方法を説明する図である。
【図７】コントラスト閾値の視力による相違を説明する図である。
【図８】コントラスト閾値の相違によるコントラスト増加の相違を説明する図である。
【図９】コントラスト閾値の相違によるコントラスト増加の相違を説明する図である。
【図１０】第２実施形態の車載表示システムの構成を示すブロック図である。
【図１１】第２実施形態の画像生成処理のフローチャートである。
【図１２】コントラスト増加倍率の設定方法を説明する図である。
【図１３】第３実施形態の車載表示システムの構成を示すブロック図である。
【図１４】図１４Ａが車両の前方風景を示す図であり、図１４Ｂがヘッドアップディスプレイによる表示がなされた状態を示す図である。
【図１５】元画像の背景の輝度変更を説明する模式図である。
【図１６】第３実施形態の画像生成処理のフローチャートである。
【発明を実施するための形態】
【００１０】
以下、図面を参照しながら、本開示の実施形態を説明する。
［１．第１実施形態］
［１−１．構成］
図１に示す第１実施形態の車載表示システム１は、操作器１１、表示器１２、及び情報処理装置１３を備える。なお車載表示システム１は車両に搭載して用いられて運転者などの車両の搭乗者が使用するシステムであり、表示器を視認する搭乗者を以下では使用者と記載する。
【００１１】
操作器１１は、使用者が操作可能なボリューム調整つまみを有する装置である。この操作器１１の操作に応じた信号が情報処理装置１３に出力される。この操作器１１は、コントラスト閾値を調整するために用いられる。コントラスト閾値を調整する目的及び作用については後述する。
【００１２】
表示器１２は、画像を表示可能に構成された液晶ディスプレイや有機ＥＬディスプレイなどを備える。表示器１２は、情報処理装置１３から入力される信号に従って画像を表示する。
【００１３】
情報処理装置１３は、ＣＰＵと、例えば、ＲＡＭ又はＲＯＭ等の半導体メモリ（以下、メモリ）と、を有するマイクロコンピュータを備える。情報処理装置１３の各機能は、ＣＰＵが非遷移的実体的記録媒体に格納されたプログラムを実行することにより実現される。この例では、メモリが、プログラムを格納した非遷移的実体的記録媒体に該当する。また、このプログラムが実行されることで、プログラムに対応する方法が実行される。なお、情報処理装置１３は、１つのマイクロコンピュータを備えてもよいし、複数のマイクロコンピュータを備えてもよい。
【００１４】
情報処理装置１３は、予めメモリに格納されている元画像を用い、元画像の表示態様を変更した画像である表示画像を生成し、表示器１２に出力する。情報処理装置１３は、図１に示すように、閾値設定部２１と、範囲設定部２２と、画像生成部２３と、を備える。情報処理装置１３に含まれる各部の機能を実現する手法はソフトウェアに限るものではなく、その一部又は全部の機能は、一つあるいは複数のハードウェアを用いて実現されてもよい。例えば、上記機能がハードウェアである電子回路によって実現される場合、その電子回路は、デジタル回路、又はアナログ回路、あるいはこれらの組合せによって実現されてもよい。
【００１５】
閾値設定部２１は、予め準備された複数のコントラスト閾値の中から、使用者による操作器１１の操作に応じたコントラスト閾値を設定する。本実施形態においては、使用者が操作器１１を操作することによりコントラスト閾値が変化し、それにより後述する理由により使用者の表示画像の見え方が変化する。
【００１６】
範囲設定部２２は、コントラスト閾値と、元画像の空間周波数特性と、に基づいて、元画像における輝度のコントラスト値である輝度コントラスト（以下、単にコントラストとも記載する）を増加する空間周波数の範囲を設定する。
【００１７】
図２は、ある元画像に係る空間周波数ごとのコントラストを示すグラフであり、これが空間周波数特性を示している。図２は、さらに、コントラスト閾値を重ねて示している。コントラスト閾値は、一般に視覚の状態（例えば視力）に対応する値であって、空間周波数に応じて変化する値を有している。このコントラスト閾値が正弦波格子の縞が知覚できる下限である。図２に示される空間周波数特性では、視力０．７のコントラスト閾値及び視力０．３のコントラスト閾値と対比したときに、視力０．７の方が、より広い空間周波数の範囲において、コントラスト閾値を超えるコントラストを有している。つまり、視力が高い方が、より広い空間周波数の範囲において、より低いコントラストでも縞が見えるため、使用者に表示画像のボケが抑制された画像が認識され易い。
【００１８】
図３は、視力０．３に対応するコントラスト閾値を用いて、元画像のコントラストを増加した例である。コントラストを増加する空間周波数の下限は、図２の空間周波数特性におけるコントラストがコントラスト閾値を超えた最大の空間周波数である１．５（［cycles/degree］、以下略）よりも大きい空間周波数２．０となっている。空間周波数１．５以下では、コントラストを増加しなくとも縞が見える状態であるため、輝度コントラストの増加はしない。これにより、コントラストの増加に伴う表示画像の眩しさの増大を抑制する。また、コントラストを増加する空間周波数の上限は、コントラスト閾値が１となる空間周波数９．０である。空間周波数が９．０を超えると、コントラストの値に関らず知覚が困難になることから、コントラスト増加を行う実益が小さいためである。
【００１９】
画像生成部２３は、範囲設定部２２により設定された空間周波数の範囲において、図３のように元画像の輝度コントラストを増加させた画像である表示画像を生成する。図３の例では、コントラストが、コントラスト増加前には超えていなかった空間周波数２−４の範囲でコントラスト閾値を超えた。
【００２０】
上記図２及び図３では視力０．３と視力０．７の２つのコントラスト閾値を例示しているが、もちろん、より多くの段階のコントラスト閾値を準備してもよい。そして、使用者が操作器１１を操作することで、複数のコントラスト閾値のいずれかが選択され、画像生成部２３により表示画像が生成されて情報処理装置１３に表示される。使用者は、操作器１１を操作して自らが表示画像を見易いと感じるコントラスト閾値を設定することができる。
【００２１】
［１−２．処理］
次に、情報処理装置１３が実行する画像生成処理について、図４のフローチャートを用いて説明する。
【００２２】
まず、Ｓ１では、情報処理装置１３は、操作器１１の操作量を読み込む。コントラスト閾値は、この操作量に応じて設定される。
続くＳ２では、情報処理装置１３は、コントラスト増加を行う上限の空間周波数を設定する。図５に示されるように、知覚可能な空間周波数の上限は、対応する視力推定値に応じて定まる。図２に示されるように、視力０．３のときは、コントラストの増加により知覚可能となりうる空間周波数の上限は９であり、視力０．７のときの空間周波数の上限は２１である。図５では、視力推定値が１．０のときの上限の空間周波数は３０となり、視力がそれ以上であっても変化しない。視力推定値と、操作器１１の操作量に応じたコントラスト閾値とは対応しているため、図５のグラフに基づいて、操作量に応じた空間周波数の上限が定められる。
【００２３】
続くＳ３では、情報処理装置１３は、元画像の読み込みをする。
続くＳ４では、情報処理装置１３は、コントラストの空間周波数特性計算をする。ここでは、元画像の各画素の輝度パラメータを対象として高速フーリエ変換（Fast Fourier Transform）を行い、元画像の周波数特性を取得する。
【００２４】
続くＳ５では、情報処理装置１３は、Ｓ４にて取得した元画像の周波数特性と、Ｓ１にて取得した操作量に対応するコントラスト閾値と、を比較して、コントラスト増加を行う下限の空間周波数を設定する。
【００２５】
続くＳ６では、情報処理装置１３は、コントラスト増加を行う。コントラストは、例えば図６のグラフに示されるように、下限周波数から上限周波数までの間で徐々に大きくなるように増加倍率を設定することができる。下限周波数に近い空間周波数ほどコントラスト閾値と輝度コントラストとの差が小さいため、増加倍率に上述した傾向を持たせることで、必要以上に倍率を上げて眩しさが増大してしまったり、倍率が小さすぎて効果が得られなかったりすることを抑制することができる。
【００２６】
続くＳ７では、情報処理装置１３は、コントラスト増加後の表示画像を生成する。ここでは、Ｓ６にてコントラストの増加がなされた空間周波数特性を対象として逆高速フーリエ変換（Inverse Fast Fourier Transform）を行い、表示画像を生成する。
【００２７】
続くＳ８では、情報処理装置１３は、表示器１２にＳ７にて生成した表示画像の表示指令をした後、図４の画像生成処理を終了する。
［１−３．効果］
以上詳述した第１実施形態によれば、以下の効果を奏する。
【００２８】
（１ａ）本実施形態の車載表示システム１では、情報処理装置が視覚の状態に対応するコントラスト閾値に基づいて表示画像のコントラストを増加するため、視覚の状態に応じてボケを抑制した見易い画像を提供することができる。
【００２９】
図７に示されるように、低い視力に対応するコントラスト閾値ほど、空間周波数が高くなるにつれ急激に値が大きくなり、早期に縞が視認できない状態となる。図８及び図９に示すように、コントラストを増加させることで、縞が確認できる範囲が広がり、ボケなくなる。また、図８と図９とを比較すると、低い視力に対応するコントラスト閾値が設定された場合には、図８の場合と比較してその分の増加率を大きくすることで、コントラスト閾値の変化に応じた適切なコントラスト増加を行うことができる。
【００３０】
（１ｂ）使用者による操作器１１の操作量に応じてコントラスト閾値が変化するため、使用者は、適切な見易さの表示画像に自ら調整することができる。
（１ｃ）範囲設定部２２は、設定されたコントラスト閾値を下回る輝度コントラストを有する空間周波数を含むように、コントラストを増加する空間周波数の範囲を設定する。具体的には、範囲の下限は、それ以上の空間周波数では縞が知覚できなくなる空間周波数であり、範囲の上限は、それ以上ではコントラストを増加させても縞が知覚できない空間周波数である。このように空間周波数を設定することで、表示画像がボケて見えることを効果的に抑制しつつ、縞が近くできる周波数範囲のコントラスト増加による眩しさの増加を抑制できる。
【００３１】
［２．第２実施形態］
［２−１．第１実施形態との相違点］
第２実施形態は、基本的な構成は第１実施形態と共通する部分を有するため、相違点について以下に説明する。なお、第１実施形態と同じ符号は、同一の構成を示すものであって、先行する説明を参照する。
【００３２】
前述した第１実施形態では、使用者の操作に応じてコントラスト閾値が変更される構成を例示した。これに対し、第２実施形態では、コントラスト閾値は推定される視力に応じて設定され、コントラスト倍率を使用者が操作によって調整する点で、第１実施形態と相違する。
【００３３】
図１０に示す第２実施形態の車載表示システム１０１は、それぞれ車両に搭載して用いられる、顔撮影カメラ１１１、操作器１１２、表示器１２、及び情報処理装置１１３を備える。表示器１２は第１実施形態と同様であるため説明を割愛する。
【００３４】
顔撮影カメラ１１１は、車両室内に設けられた撮像装置であって、例えば公知のＣＣＤイメージセンサやＣＭＯＳイメージセンサなどを用いることができる。顔撮影カメラ１１１は搭乗者の顔を撮影できるように配置されており、撮影した撮影画像を情報処理装置１１３に出力する。
【００３５】
操作器１１２は、使用者が操作可能なボリューム調整つまみを有する装置である。この操作器１１２の操作に応じた信号が情報処理装置１１３に出力される。この操作器１１２は、コントラスト倍率を調整するために用いられる。
【００３６】
情報処理装置１１３は、第１実施形態の情報処理装置１３と同様のハードウェア構成を採用することができる。もちろん、本実施例に適した回路やチップが搭載されていてもよい。情報処理装置１１３は、閾値設定部１２１と、範囲設定部２２と、画像生成部１２３と、を備える。
【００３７】
閾値設定部１２１は、顔撮影カメラ１１１の撮影画像から使用者の視力を推定し、その推定視力値に対応したコントラスト閾値を設定する。具体的には、顔向き検出部１３１が１１１の撮影画像に基づいて使用者の顔向きを検出する。また、まぶた開度検出部１３２が撮影画像に基づいて使用者のまぶたの開度を検出する。視力取得部１３３は、使用者の顔が表示器１２を向いているときのまぶたの開度から使用者の視力を推定する。このとき、まぶたの開度と視力との対応を示すマップを用いて視力を推定してもよい。
【００３８】
なお、閾値設定部１２１による視力推定方法は上記の方法に限定されず、公知の他の手法で視力を推定してもよい。その手法は、顔撮影カメラ１１１を用いない手法であってもよい。また、視力は、例えば使用者が自ら入力することで取得してもよいし、使用者の視力を予め情報処理装置１１３が有していてもよい。
【００３９】
閾値設定部１２１は、予め準備された複数のコントラスト閾値の中から、推定された視力に応じたコントラスト閾値を取得する。
範囲設定部２２は、第１実施例と同様に、元画像における輝度のコントラスト値を増加すべき空間周波数の範囲を設定する。
【００４０】
画像生成部１２３は、範囲設定部２２により設定された空間周波数の範囲において、元画像のコントラスト値を増加させた表示画像を生成する。なお、このときのコントラスト値の増加倍率は、操作器１１２の操作量により定まる。
【００４１】
［２−２．処理］
次に、第２実施形態の情報処理装置１２３が実行する画像生成処理について、図１１のフローチャートを用いて説明する。
【００４２】
Ｓ１１では、情報処理装置１２３は、使用者の顔の撮像画像を取得し、Ｓ１２では、情報処理装置１２３は、顔向きを検出する。そしてＳ１３では、情報処理装置１２３は、顔が表示器１２に向いているか否かを判定する。
【００４３】
情報処理装置１２３は、Ｓ１３で顔が表示器１２に向いていると判定した場合には、Ｓ１４へ移行する。一方、情報処理装置１２３は、Ｓ１３で顔が表示器１２に向いていないと判定した場合には、Ｓ１６へ移行する。
【００４４】
Ｓ１４では、情報処理装置１２３は、まぶたの開度を検出する。
続く、Ｓ１５では、情報処理装置１２３は、まぶたの開度に基づいて、視力推定値を行い、最新の推定値に更新する。
【００４５】
続くＳ１６では、情報処理装置１２３は、空間周波数におけるコントラスト増加を行う上限周波数の設定をする。ここでは、Ｓ１５で更新された視力推定値に対応するコントラスト閾値を用いて、上述した図４のＳ２と同様に、使用者が知覚可能な範囲を上限として設定する。
【００４６】
続く、Ｓ１７〜Ｓ１９は、上述した図４のＳ３〜Ｓ５と同様の処理である。
続く、Ｓ２０では、情報処理装置１２３は、操作器１１２の操作量の読み込みをする。
続く、Ｓ２１では、情報処理装置１２３は、Ｓ２０にて読み込んだ操作量に応じてコントラストの増加倍率を決定する。増加倍率の決定方法の一例を図１２に示す。図１２では、例として、操作量が０％のとき、５０％のとき、１００％のとき、の３例が示されている。いずれの空間周波数においても、操作量が大きいほど、増加倍率は大きくなるように設定されている。また、空間周波数が高くなるほど、同じ操作量であっても、増加倍率は増加するように設定されている。
【００４７】
なお、操作量は０％、５０％、及び１００％の３通りに限定されず、より多くの段階に操作することができる。例えば３０％の操作量であれば、図１２の０％と５０％のラインの間に増加倍率を示すラインが存在する。
【００４８】
説明を図１１に戻る。
続くＳ２２では、情報処理装置１２３は、コントラストの増加をする。ここでは、Ｓ１８で取得した元画像の周波数特性において、Ｓ１６及びＳ１９で定めた周波数範囲にてＳ２１で決定したコントラスト増加倍率に従ってコントラストの増加をする。
続く、Ｓ２３、Ｓ２４は、上述した第１実施形態のＳ７、Ｓ８と同様の処理である。Ｓ２４の後、図１１の画像生成処理を終了する。
【００４９】
［２−３．効果］
以上詳述した第２実施形態によれば、前述した第１実施形態の効果（１ａ）を奏し、さらに、以下の効果を奏する。
【００５０】
（２ａ）第２実施形態の車載表示システム１０１では、まぶたの開度に応じてコントラスト閾値を設定するように構成されている。使用者が表示器１２を視認する際には、視力が低いほど使用者は眼を細める傾向があるため、まぶたの開度に応じてコントラスト閾値を選択することで、適切なコントラスト閾値を用いることができる。
【００５１】
（２ｂ）画像生成部１２３は、使用者による操作器１１２への入力操作に応じた増加倍率にて、輝度コントラストを増加する。よって、使用者は自ら知覚しやすい表示画像を調整することができる。なお、輝度コントラストが増加される空間周波数の範囲は、推定されたまぶた開度（視力）に応じたコントラスト閾値に基づいて適切な範囲に定められているため、コントラスト増加が不要な周波数範囲での増加はなく、眩しさが過度に上昇してしまうことを抑制できる。
【００５２】
［３．第３実施形態］
［３−１．第１実施形態との相違点］
第３実施形態は、基本的な構成は第１実施形態と共通する部分を有するため、相違点について以下に説明する。なお、第１実施形態と同じ符号は、同一の構成を示すものであって、先行する説明を参照する。
【００５３】
第３実施形態では、車両の外部を撮影した撮影画像に応じて元画像の輝度コントラストを算出する点で、第１実施形態と相違する。
図１３に示す第３実施形態の車載表示システム２０１は、それぞれ車両に搭載して用いられる、操作器１１、外部撮影カメラ２１１、表示器２１２、及び情報処理装置２１３を備える。操作器１１は第１実施形態と同様であるため説明を割愛する。
【００５４】
表示器２１２は、車両のウインドガラス等を用いて反射光により画像を表示するヘッドアップディスプレイである。表示画像は、虚像として使用者の前方に表示される。
外部撮影カメラ２１１は、車両外部、特に進行方向前方の道路を撮影する撮影装置であって、例えば公知のＣＣＤイメージセンサやＣＭＯＳイメージセンサなどを用いることができる。外部撮影カメラ２１１は車両の外部、特に進行方向前方の道路を撮影できるように配置されており、撮影した撮影画像を情報処理装置２１３に出力する。
【００５５】
情報処理装置２１３の範囲設定部２２１は、元画像の輝度コントラストの周波数特性を取得するにあたり、元画像の背景に当たる部分の輝度を、撮影画像に基づいて求められた輝度の値に置き換える。
図１４Ａは、車両の進行方向を運転席から見た視点の図である。表示領域２４１は、運転者から表示器２１２の表示画像が視認される領域であり、図１４Ｂに示されるように、その位置において表示器２１２の表示画像２４２を視認することができる。つまり、表示領域２４１は、使用者により表示画像２４２が視認される部分と重畳する重畳部分である。
【００５６】
図１５Ａに示されるように、元画像２５１は背景部２５２と要部２５３とにより構成されている。そして、図１５Ｂに示される修正元画像２５５は、要部２５３は元画像２５１と同一であるが、背景部２５６の輝度については、外部撮影カメラ２１１の撮影画像のうち表示領域２４１に相当する部分の平均輝度に置き換えられる。そして、その置き換えた修正元画像２５５に基づいて空間周波数特性が取得される。なお本実施形態では背景部２５２のみが変更される構成を例示しているが、要部２５３も変更されてもよい。
【００５７】
［３−２．処理］
次に、第３実施形態の情報処理装置２１３が実行する画像生成処理について、図１６のフローチャートを用いて説明する。
【００５８】
Ｓ３１〜Ｓ３３の処理、即ち、情報処理装置２１３による操作器１１の操作量の読み込み、コントラスト増加を行う空間周波数の上限周波数の設定、及び元画像の読み込み、は、図４のＳ１〜Ｓ３の処理と同様である。
【００５９】
Ｓ３４では、情報処理装置２１３は、前方風景の読み込みをする。ここでは、外部撮影カメラ２１１により撮影された撮像画像を取得する。
続くＳ３５では、情報処理装置２１３は、Ｓ３４にて読み込んだ前方風景の中から、重畳部分を特定する。重畳部分は、外部撮影カメラ２１１の位置、運転者の目の位置、及びヘッドアップディスプレイの表示位置から求めることができる。運転者の目の位置は、予め定められた値であってもよいし、室内を撮影するカメラの撮影画像などに基づいて算出してもよい。
【００６０】
続くＳ３６では、情報処理装置２１３は、Ｓ３５にて特定した重畳部分の平均輝度を計算する。
続くＳ３７では、情報処理装置２１３は、元画像の背景部２５２の輝度を、Ｓ３６にて取得した重畳部分の平均輝度で置き換える。
【００６１】
続くＳ３８では、情報処理装置２１３は、コントラストの空間周波数特性計算をする。ここでは、Ｓ３７にて背景部分の輝度を置き換えた画像の各画素の輝度パラメータを対象として高速フーリエ変換を行い、周波数特性を取得する。
【００６２】
Ｓ３９〜Ｓ４１の処理は、図４のＳ５〜Ｓ７の処理と同様である。
続くＳ４２では、情報処理装置２１３は、表示画像の表示指令を行う。ここでは、生成された表示画像のうち、文字部分（図１５Ｂにおいては要部２５３）のみを表示すべき画像として表示器２１２に出力する一方、背景部分（図１５Ｂにおいては背景部２５６）は出力しない。よって、文字部分のみが運転者に虚像として視認される。文字部分が第１領域に相当し、背景部分が第２領域に相当する。なお、表示器２１２は背景を含めた画像全体を表示しても良い。
【００６３】
［３−３．効果］
以上詳述した第３実施形態によれば、前述した第１実施形態の効果（１ａ）を奏し、さらに、以下の効果を奏する。
【００６４】
（３ａ）本第３実施形態の車載表示システム２０１では、重畳部分の平均輝度を背景部の平均輝度に置き換えて、Ｓ３８−Ｓ４１の処理を行っているため、より視認される表示に近い状態でコントラストを調整することができ、効果的にボケを抑制することができる。
【００６５】
（３ｂ）本実施形態では、表示器２１２は文字部分のみを虚像として表示させる。そのため、必要な部分のみを知覚しやすい態様で表示させることができる。
【００６６】
［４．他の実施形態］
以上、本開示の実施形態について説明したが、本開示は上述の実施形態に限定されることなく、種々変形して実施することができる。
【００６７】
（４ａ）上記各実施形態で開示した閾値設定部、範囲設定部、及び画像生成部は、他の実施形態の構成と適宜組み合わせてもよい。例えば第１実施形態において、第２実施形態のようにコントラスト増加倍率を使用者自ら操作可能に構成されていてもよい。さらに、以下に示す変形例の各構成も、上記各実施形態の構成と選択的に組み合わせて用いることができる。
【００６８】
（４ｂ）上記各実施形態においては、閾値設定部は、使用者による入力操作に応じて、又は、まぶたの開度或いは視力に基づきコントラスト閾値を設定する構成を例示したが、これ以外の方法で設定されてもよい。
【００６９】
例えば、閾値設定部は、少なくとも使用者の年齢に応じてコントラスト閾値を設定してもよいし、少なくとも運転開始後の経過時間に応じてコントラスト閾値を設定してもよい。年齢の取得方法は特に限定されないが、予め使用者ごとの年齢が車両に登録されていてもよいし、使用者が年齢を入力してもよい。また、上述した使用者による操作、まぶた開度、視力、使用者の年齢、運転開始後の経過時間、及びそれ以外の要素のうちの２つ以上の組み合わせに基づいて、コントラスト閾値を設定してもよい。
【００７０】
（４ｃ）上記実施形態では、輝度コントラストの増加量を、周波数に応じた増加倍率により決定する構成を例示した。しかしながら、輝度コントラストの増加量の設定方法は特に限定されず、輝度コントラストの少なくとも一部がコントラスト閾値を超えるようになる様々な手法を用いることができる。例えば、空間周波数に応じて変化しない一定の倍率を用いてコントラストを増加させてもよい。また、少なくともいずれかの空間周波数において輝度コントラストがコントラスト閾値を超えるならば、輝度コントラストの一部は減少させてもよい。
【００７１】
（４ｄ）上記実施形態では、車載表示システムは車両に搭載される構成を例示したが、車両に搭載されずに用いられる構成であってもよい。
（４ｅ）上記実施形態における１つの構成要素が有する複数の機能を、複数の構成要素によって実現したり、１つの構成要素が有する１つの機能を、複数の構成要素によって実現したりしてもよい。また、複数の構成要素が有する複数の機能を、１つの構成要素によって実現したり、複数の構成要素によって実現される１つの機能を、１つの構成要素によって実現したりしてもよい。また、上記実施形態の構成の一部を省略してもよい。また、上記実施形態の構成の少なくとも一部を、他の上記実施形態の構成に対して付加又は置換してもよい。なお、特許請求の範囲に記載した文言から特定される技術思想に含まれるあらゆる態様が本開示の実施形態である。
【００７２】
（４ｆ）上述した情報処理装置の他、当該情報処理装置を構成要素とするシステム、当該情報処理装置としてコンピュータを機能させるためのプログラム、このプログラムを記録した半導体メモリ等の非遷移的実態的記録媒体、画像表示方法など、種々の形態で本開示を実現することもできる。
【符号の説明】
【００７３】
１３，１１３，２１３…情報処理装置、２１，１２１…閾値設定部、２２，２２１…範囲設定部、２３，１２３…画像生成部
【図１】
2020003704.tif 000003
【図２】
2020003704.tif 000004
【図３】
2020003704.tif 000005
【図４】
2020003704.tif 000006
【図５】
2020003704.tif 000007
【図６】
2020003704.tif 000008
【図７】
2020003704.tif 000009
【図８】
2020003704.tif 000010
【図９】
2020003704.tif 000011
【図１０】
2020003704.tif 000012
【図１１】
2020003704.tif 000013
【図１２】
2020003704.tif 000014
【図１３】
2020003704.tif 000015
【図１４】
2020003704.tif 000016
【図１５】
2020003704.tif 000017
【図１６】
2020003704.tif 000018