(57)【要約】【課題】鏡像表示と映像表示とを切り換えなくても利用者の利便性の良い付加情報を得ることができる技術を提供する。【解決手段】鏡ディスプレイ装置１０は、光を透過する板状の鏡本体部２の一方側の面に、光を反射する反射膜３１を含む薄膜部３が設けられ、薄膜部３に光を透過する微細貫通孔４が平面的に整列して配置されたピンホールアレイ５が設けられている鏡１と、表示画像を表示する表示面８ａが薄膜部３に対向して配置されている表示装置７と、を備え、鏡１に映る鏡像に表示画像に基づくピンホール画像が重畳される。【選択図】図１
2017195491.tif 000002
【特許請求の範囲】
【請求項１】
光を透過する板状の鏡本体部の一方側の面に、光を反射する反射膜を含む薄膜部が設けられ、当該薄膜部に光を透過する微細貫通孔が平面的に整列して配置されたピンホールアレイが設けられている鏡と、
表示画像を表示する表示面が前記薄膜部に対向して配置されている表示装置と、を備え、
前記鏡に映る鏡像に前記表示画像に基づくピンホール画像が重畳される、鏡ディスプレイ装置。
【請求項２】
前記表示画像は、利用者の視点に基づいて生成された画像である、請求項１に記載の鏡ディスプレイ装置。
【請求項３】
前記鏡像は、前記利用者の視点に基づく可視空間であるイマジナリーライトフィールドの画像であり、前記ピンホール画像は、前記ピンホールアレイを介して前記利用者の網膜に結像される可視空間であるピンホールライトフィールドの画像であり、前記ピンホールライトフィールドが、前記イマジナリーライトフィールドにおける視点に応じた可視空間となるように前記表示画像が生成されている、請求項２に記載の鏡ディスプレイ装置。
【請求項４】
前記表示画像は、前記鏡像に対応する画像を撮影するカメラによる撮影画像に基づいて生成された画像である、請求項１から３の何れか一項に記載の鏡ディスプレイ装置。
【請求項５】
前記ピンホール画像は、前記鏡像及び前記撮影画像に含まれる対象物を強調するための強調表示である、請求項４に記載の鏡ディスプレイ装置。
【請求項６】
前記表示装置は、前記対象物との距離に基づいて、異なる表示形態で前記強調表示を行う、請求項５に記載の鏡ディスプレイ装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、鏡と表示装置とを備えた鏡ディスプレイ装置に関する。
【背景技術】
【０００２】
例えば、下記の非特許文献１には、自動車の車室内に設置されるルームミラー（Rearview Mirror）に液晶モニターを備え、通常の鏡像と、液晶モニターに描画されるカメラ映像とを切り換えて表示するルームミラー装置が示されている。液晶モニターには、車両の後部に備えられたカメラ（Rear Camera）により撮影された車両の後方の情景が描画される。ルームミラーは、車室内の乗員や荷物等によって視界が遮られたり、雨天時等に背面の窓に付く水滴や太陽の高度が低い場合の眩光によって鮮明度が低下したりするなど、視認性が低下する場合がある。ルームミラーに備えられた液晶モニターに、カメラによる撮影画像を描画することで、このように視認性が低下する場合にも、良好な後方視界を得ることができる。
【先行技術文献】
【非特許文献】
【０００３】
【非特許文献１】[online]、日産自動車株式会社（Nissan Motor Corporation）、［２０１６年４月７日検索］、インターネット＜http://www2.nissan.co.jp/OPTIONAL-PARTS/NAVI_AUDIO/UPGRADE/SMART_ROOMMIRROR/＞、＜http://www.nissan-global.com/EN/TECHNOLOGY/OVERVIEW/smart_rearview_mirror.html＞
【０００４】
但し、カメラによる撮影画像の視点は、カメラの設置位置であり、ドライバーの視点ではないから、ドライバーが違和感を覚えることもある。また、一般的に、カメラによる撮影画像には、画像（文字の画像化も含む）による付加情報を重畳することも可能であるが、鏡に映る鏡像にそのような付加情報を重畳することは困難である。例えば、上述したルームミラー装置がカメラ映像を表示している場合には、そのような付加情報の重畳も可能であるが、ルームミラー装置が通常の鏡像を表示している場合には、そのような付加情報の重畳は困難である。利用者の利便性を考慮すると、ルームミラー装置の利用形態（鏡像表示とカメラ映像表示）を切り換えなくても、必要に応じて付加情報を得られることが好ましい。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
上記背景に鑑みて、鏡像表示と映像表示とを切り換えなくても利用者の利便性の良い付加情報を得ることができる技術が望まれる。
【課題を解決するための手段】
【０００６】
上記に鑑みた鏡ディスプレイ装置は、１つの態様として、光を透過する板状の鏡本体部の一方側の面に、光を反射する反射膜を含む薄膜部が設けられ、当該薄膜部に光を透過する微細貫通孔が平面的に整列して配置されたピンホールアレイが設けられている鏡と、表示画像を表示する表示面が前記薄膜部に対向して配置されている表示装置と、を備え、前記鏡に映る鏡像に前記表示画像に基づくピンホール画像が重畳される。
【０００７】
ピンホールアレイを形成する孔は、微細貫通孔であるから、鏡像への影響は抑制される。例えば表示装置に表示画像が表示されていない場合には、鏡ディスプレイ装置を見る人（利用者）は、通常の鏡像が映る鏡として、違和感を覚えることなく利用することができる。一方、鏡像に別の画像を重畳させる場合には、各微細貫通孔を介して表示画像に基づくピンホール画像を利用者に適切に視認させることができる。即ち、本構成によれば、鏡に映る通常の鏡像は維持した状態で、当該鏡像に対して別の画像であるピンホール画像を重畳させることができる。また、ピンホールアレイは、薄膜部に形成され、鏡本体部には構造的な影響を及ぼさないので、鏡の強度の低下も抑制されている。このように、本構成によれば、鏡に映る鏡像に別の画像を重畳させて、合成画像を提供することができる。
【０００８】
ここで、前記表示画像は、利用者の視点に基づいて生成された画像であると好適である。
【０００９】
微細貫通孔を通って、鏡の鏡面に鏡像と共に現れる画像は、視点によって異なる。従って、利用者の視点に応じた表示画像が生成されると、利用者に違和感を抱かせることなく、適切なピンホール画像を鏡像に重畳させることができる。
【００１０】
ここで、前記鏡像は、前記利用者の視点に基づく可視空間であるイマジナリーライトフィールドの画像であり、前記ピンホール画像は、前記ピンホールアレイを介して前記利用者の網膜に結像される可視空間であるピンホールライトフィールドの画像であり、前記ピンホールライトフィールドが、前記イマジナリーライトフィールドにおける視点に応じた可視空間となるように前記表示画像が生成されていると好適である。
【００１１】
近年、ライトフィールド（Light Field）という概念から種々のディスプレイが研究・開発されている。ライトフィールドとは、観察者（鏡ディスプレイ装置の利用者と同義）の視野の範囲にあるすべての光（可視光）を含む可視空間のことをいう。鏡によって再現されているイマジナリーライトフィールド（鏡に映る画像、鏡像）は、良く知られているように視点に応じて変化する。このため、例えば、鏡に映る画像（鏡像）の特定の位置に別の画像を重畳しようとして、鏡面の固定座標に画像を描画しても、当該別の画像の鏡像における位置は観察者（利用者）の視点によって変わってしまう。ピンホールアレイを介して観察者（利用者）の目に再現されるピンホールライトフィールドも、視点に応じて変化する。同一の視点からイマジナリーライトフィールドの画像と、ピンホールライトフィールドの画像とが視認できる場合、両ライトフィールドの画像は重なって観察される。従って、ピンホールライトフィールドが、イマジナリーライトフィールドにおける視点に応じた可視空間となるように表示画像が生成されていると好適である。
【００１２】
ここで、前記表示画像は、前記鏡像に対応する画像を撮影するカメラによる撮影画像に基づいて生成された画像であると好適である。
【００１３】
例えば、利用者が鏡像により確認したい物体（対象物）や風景が、対象物や風景と鏡との間に存在する障害物によって見えづらくなっている場合がある。例えば、カメラがそのような障害物の影響を受けることなく、対象物や風景を撮影できる位置に設置されていれば、対象物や風景の画像を表示画像として鏡像に重畳させることで、例えば障害物を透過しているように、対象物や風景を利用者に見せることができる。即ち、カメラによる撮影画像に基づいて、鏡像を補完することができる。また、撮影画像に対する画像認識によって、鏡像における対象物の大きさや位置に応じたピンホール画像が重畳されるように表示画像を生成することもできる。このように、撮影画像に基づいて表示画像を生成することによって、より適切な情報を利用者に提供することができる。
【００１４】
ここで、前記ピンホール画像は、前記鏡像及び前記撮影画像に含まれる対象物を強調するための強調表示であると好適である。
【００１５】
撮影画像を画像処理することによって、撮影画像中の対象物を認識することができる。鏡像において当該対象物が強調されるように、表示画像を鏡像に重畳させることによって利用者に対して対象物に関する情報をより明瞭に提供することができる。
【００１６】
ここで、前記表示装置は、前記対象物との距離に基づいて、異なる表示形態で前記強調表示を表示させると好適である。
【００１７】
この構成によれば、例えば、対象物が遠くに存在する場合に比べて、近くに存在する場合には、利用者が対象物の存在に早く気が付くように、より視認性が高い表示形態で強調表示を行うことができる。また、逆に対象物が近くに存在する場合に比べて、遠くに存在する場合に、対象物の特定の部位がより明瞭に視認できるように、部分的な拡大像を表示するような表示形態で強調表示を行うこともできる。本構成によれば、対象物の種類や、対象物について利用者に報知したい情報の種類に応じて、対象物との距離に基づき異なる方法で強調表示を行うことができる。つまり、本構成によれば、より適切に対象物に関する情報を利用者に提供することができる。
【００１８】
本発明のさらなる特徴と利点は、図面を参照して説明する本発明の実施形態についての以下の記載から明確となる。
【図面の簡単な説明】
【００１９】
【図１】鏡ディスプレイ装置の構成例を示す模式的断面図
【図２】ピンホールアレイにおけるピンホールの配置例を示す図
【図３】視点とピンホールを介した画像との関係を示す説明図
【図４】車両の運転席の模式的な斜視図
【図５】後方ミラー及び後方カメラの視野を示す模式的側面図
【図６】距離センサによる測距の原理を示す模式的側面図
【図７】表示装置及び周辺装置の模式的ブロック図
【図８】鏡ディスプレイ装置から得られる視覚情報の一例を模式的に示す図
【図９】鏡ディスプレイ装置から得られる視覚情報の一例を模式的に示す図
【図１０】ピンホールアレイにおけるピンホールの他の配置例を示す図
【図１１】鏡ディスプレイ装置から得られる視覚情報の他の例を模式的に示す図
【発明を実施するための形態】
【００２０】
以下、鏡ディスプレイ装置の実施形態を、車両の後方ミラーに適用した場合を例として、図面を参照して説明する。後方ミラーには、車室内に設けられたルームミラー、前席ドアの外側に設けられたドアミラー、車両の前方フェンダー部に設けられたフェンダーミラー等が含まれる。本実施形態では、後方ミラーとしてルームミラーを例示して説明する。
【００２１】
図１は、鏡ディスプレイ装置１０の構成例を模式的断面図で表している。図１に示すように、鏡ディスプレイ装置１０は、鏡１と表示装置７とを備えて構成されている。鏡１には、光を透過する板状の鏡本体部２の一方側の面に、光を反射する反射膜（銀膜３１）を含む薄膜部３が設けられている。本実施形態では、薄膜部３は、銀膜３１、銅膜３２、保護塗料膜３３を備えている。鏡本体部２は、数百マイクロメートル〜数ミリメートル程度の厚みのガラス板やアクリル板などである。これらのガラス板やアクリル板の一方側の面に、銀がメッキ加工されて数十ナノメートルの厚みの反射膜（銀膜３１）が形成されている。銀膜３１には、保護材としての塗料等を塗布することができないため、一般的に銀膜３１の上に銅がメッキ加工されて銅膜３２が形成される。銅膜３２は一般的に銀膜３１よりも薄い膜である。そして、銅膜３２の上に例えば樹脂塗料が塗布されて保護塗料膜３３が形成される。保護塗料膜３３も一般的に銀膜３１よりも薄い膜である。
【００２２】
図１及び図２に示すように、薄膜部３には、光を透過するピンホール４（微細貫通孔）が平面的に整列して配置されたピンホールアレイ５が設けられている。各ピンホール４の径（ピンホール径φ１）は、数十マイクロメートル〜数百マイクロメートルである。例えば、ピンホール径φ１が１００［μｍ］程度の場合、目視ではほとんどピンホール４の存在を確認することはできない。さらにピンホール径φ１が小さい場合には、肉眼による確認はさらに困難となるが、透過する光の光量も少なくなる。従って、肉眼でピンホール４が視認できない程度の大きさを径が大きい場合の限度とし、ピンホール画像（後述する）を視認させるための光量が維持できなくなる程度の大きさを径が小さい場合の限度として、ピンホール径φ１が設定されていると好適である。
【００２３】
図２は、ピンホールアレイ５におけるピンホール４の配置例を示している。ここでは、ピンホール４は、図示横方向に第１ピッチＧ１（横ピッチ）、図示縦方向に第２ピッチ（縦ピッチ）で矩形状に配置されている。理想的なピンホール４は、開口部の縁が滑らかで真円に近いものである。ピンホール４を形成するための加工方法としては、機械加工やレーザー加工などの様々な方法がある。ピンホール４は、ガラス板やアクリル板などの鏡本体部２には形成されない。このため、薄膜部３へのピンホール４の形成は、照射される光のエネルギーのピーク強度が高く、微細な加工に適した超短パルスレーザーの１つであるフェムト秒レーザー（Femto Second Laser）を用いて行うと好適である。また、半導体の製造と同様に、成膜（Deposition）、リソグラフィ（Photo Resist Patterning）、エッチング（Etching）等を行って、ピンホール４を有する薄膜部３を鏡本体部２に形成してもよい。
【００２４】
図１に示すように、表示装置７は、例えば、液晶や有機ＥＬなどの、表示画像を表示するディスプレイパネル８と、表示画像をディスプレイパネル８に描画する表示制御部９とを備えている。表示装置７は、ディスプレイパネル８の表示面８ａが、予め規定された離間距離Ｄ１の隙間を空けて薄膜部３に対向するように配置されている。具体的には、表示面８ａと薄膜部３とが、離間距離Ｄ１を対向する状態で、鏡１と表示装置７とが、筐体１１に固定されている。鏡１に映る鏡像には、各ピンホール４を介して利用者の目に届く表示面８ａの一部の画素領域の集合がピンホール画像として重畳される。つまり、鏡１に映る鏡像に表示画像に基づくピンホール画像が重畳される。
【００２５】
ところで、図３に示すように、ピンホール４を通って利用者の目に入る表示面８ａの画素領域は、利用者の視点Ｐによって異なる。例えば、利用者の目が第１視点Ｐ１の場合には、表示面８ａにおいて実線の丸印で示された画素（ディスプレイパネル８の解像度に基づく最小単位の画素ではなく、ピンホール４の大きさ及び視野角に対応する画素領域）を利用者が知覚する。一方、利用者の目が第２始点Ｐ２の場合には、表示面８ａにおいて破線の丸印で示された画素（同上）を利用者が知覚する。このように、ピンホール４（ピンホールアレイ５）を通して利用者が知覚する画像（利用者の網膜に結像する画像）であるピンホール画像は、視点Ｐによって異なる。従って、ピンホール画像の元（源画像）となる表示画像は、利用者の視点Ｐに基づいて生成された画像であると好適である。利用者の視点Ｐは視点検出装置によって検出され、表示制御部９は、その検出結果に基づいて表示画像を生成する。
【００２６】
本実施形態では、図４に示すように、車両のコンソールに利用者Ｈの顔、特に目を撮影する視点検出用カメラ２０が備えられており、この視点検出用カメラ２０と表示装置７の表示制御部９とが視点検出装置として機能する。表示制御部９は、視点検出用カメラ２０の撮影画像に基づいて利用者Ｈの視点を検出する。利用者Ｈの視点は、顔認識技術を利用して、顔の向き、目の中の瞳の位置などから演算される。尚、ここでは、表示制御部９が視点検出の演算を行う形態を例示したが、表示装置７とは別の制御装置により視点が演算され、その結果が表示装置７に伝達されてもよい。この場合は、視点検出用カメラ２０と当該別の制御装置が、視点検出装置として機能する。
【００２７】
ところで、近年、ライトフィールド（Light Field）という概念から種々のディスプレイが研究・開発されている。ライトフィールドとは、観察者（利用者Ｈと同義）の視野の範囲にあるすべての光（可視光）を含む可視空間のことをいう。例えば、ライトフィールドを再現した表示装置は、ライトフィールドディスプレイと称され、理想的には、観察者の目に入るあらゆる光（可視光）が再現された表示装置である。この観点に立てば、鏡は、ライトフィールドディスプレイということができ、鏡によって再現されているライトフィールド（鏡に映る画像、鏡像）は、イマジナリーライトフィールド（仮想的な可視空間）と称される。良く知られているようにイマジナリーライトフィールドは、視点に応じて変化する。このため、例えば、鏡に映る画像（鏡像）の特定の位置に別の画像を重畳しようとして、鏡面の固定座標に画像を描画しても、当該別の画像の鏡像における位置は観察者の視点によって変わってしまう。
【００２８】
また、図３に示すように、ピンホールアレイ５を利用して、観察者の眼球網膜に結像される画像（ピンホール画像）も、観察者の視点Ｐによって異なるものとなる。ピンホールアレイ５を介して観察者の目に再現されるライトフィールドを、ここではピンホールライトフィールドと称する。イマジナリーライトフィールドも、ピンホールライトフィールドも、観察者の視点Ｐに応じて変化する画象である。同一の視点Ｐからイマジナリーライトフィールドの画像と、ピンホールライトフィールドの画像とが視認できる場合、両ライトフィールドの画像は重なって観察される。しかし、両ライトフィールドの画像に関連性がなければ、単に煩わしいだけである。反対に考えれば、ピンホールライトフィールドの画像が、イマジナリーライトフィールドの観察者の視点Ｐに応じた適切な画像であれば、鏡像に対して適切な別の画像を重畳させることができる。
【００２９】
鏡ディスプレイ装置１０は、鏡像に、表示画像に基づくピンホール画像を重畳させることができる。ここで、表示画像は、鏡像に対応する画像を撮影する後方カメラ（カメラ）による撮影画像に基づいて生成された画像であると好適である。図５の一点鎖線は、鏡１のイマジナリーライトフィールドの視野を模式的に示している。また、図５の破線は、後方カメラ３０による撮影視野を模式的に示している。後方カメラ３０は自車両１００に固定されているから、その撮影画像の座標系であるカメラ座標系と、自車両１００を基準とした基準座標系（ワールド座標系）との関係は既知である。カメラ座標系と基準座標系との関係は、基準座標系に対するカメラ座標系の位置情報（並進パラメータ）及び姿勢情報（回転パラメータ）によって規定される。
【００３０】
同様に、鏡１も自車両１００に固定されているから、鏡１の鏡像の座標系（鏡座標系）も基準座標系に対して規定される。尚、本実施形態のように、鏡ディスプレイ装置１０が車両の後方ミラー（ルームミラー、サイドミラー、フェンダーミラー等）である場合などでは、鏡面の向きが変更可能であることが多い。鏡座標系もカメラ座標系と同様に、基準座標系に対する鏡座標系の位置情報（並進パラメータ）及び姿勢情報（回転パラメータ）によって規定される。鏡面の向きを変えると、主に姿勢情報（回転パラメータ）が変化する。従って、例えば不図示の姿勢センサ等を設けて鏡座標系を規定すると好適である。
【００３１】
観察者（利用者Ｈ）の視点Ｐは、図４を参照して上述したように、視点検出用カメラ２０の撮影画像に基づいて検出される。視点検出用カメラ２０も自車両１００に固定されているから、この視点Ｐも基準座標系に対して規定することができる。
【００３２】
即ち、同一の座標系（基準座標系）において、イマジナリーライトフィールド及びピンホールライトフィールドを、同一の観察者の視点Ｐに一致させることができるので、両ライトフィールドにおける画像を適切に重ね合わせることができる。例えば、図５に示すように他車両２００は、鏡座標系における画像、カメラ座標系における画像の双方に含まれている。例えば、カメラ座標系の撮影画像に対する画像処理によって、カメラ座標系における他車両２００の座標を特定することができる。カメラ座標系と基準座標系との関係は既知であるから基準座標系における他車両２００の座標も特定することができる。さらに、基準座標系における当該座標は、基準座標系と鏡座標系との関係が既知であるから、鏡座標系の座標に当てはめることができる。従って、他車両２００の位置を鏡座標系において特定することができる。例えば、鏡座標系における当該座標にピンホール画像が重畳されるように表示画像を生成することで、鏡像における他車両２００の近傍で利用者Ｈが視認可能なように、他車両２００に関する情報を提供することができる。
【００３３】
このように、鏡像は、利用者Ｈの視点Ｐに基づく可視空間であるイマジナリーライトフィールドの画像であり、ピンホール画像は、ピンホールアレイ５を介して利用者Ｈの網膜に結像される可視空間であるピンホールライトフィールドの画像であり、ピンホールライトフィールドが、イマジナリーライトフィールドにおける視点Ｐに応じた可視空間となるように表示画像が生成されていると好適である。尚、ここでは、カメラ座標系から基準座標系を経て鏡座標系へと変換する形態を例示したが、基準座標系との関係に基づいて、カメラ座標系と鏡座標系との関係も定義しておくことができる。従って、カメラ座標系から直接鏡座標系へと座標を変換してもよい。
【００３４】
尚、本実施形態のように、鏡ディスプレイ装置１０が車両の後方ミラーである場合には、例えば、図６に示すように、後方から自車両１００に接近する他車両２００と、自車両１００との距離を検出するレーザーレーダーなどの距離センサ４０による検出結果も利用すると好適である。詳細については後述する。
【００３５】
表示装置７とその周辺装置との関係を模式的に示す図７に示すように、表示制御部９は、画像生成部９１とディスプレイパネルドライバ９２とを有している。画像生成部９１は、グラフィックコントローラやマイクロコンピュータ、ＤＳＰ（Digital Signal Processor）等を中核として構成され、ハードウェアとソフトウェア（プログラム等）との協働によって機能する。画像生成部９１は、視点検出用カメラ２０による撮影画像、後方カメラ３０による撮影画像、距離センサ４０による後方の物体との距離情報を利用して、ディスプレイパネル８に表示させる表示画像を生成する。この表示画像は、視点検出用カメラ２０による撮影画像に基づいて検出された利用者Ｈの視点Ｐに対応した画像である。当然ながら、利用者Ｈが身体を動かして視点Ｐが移動した場合には、視点Ｐに応じた位置に追従するように表示画像も変化する。尚、僅かな視点Ｐの移動に考慮して、例えば、当該視点Ｐの近傍など、他の視点位置に対応する画像も含めて表示画像を生成してもよい。また、助手席側の乗員を撮影する第２の視点検出用カメラを備えて、運転席からの視点Ｐと助手席からの視点Ｐの双方から同じピンホール画像が見えるように表示画像を生成してもよい。
【００３６】
図８及び図９は、利用者Ｈから見た鏡ディスプレイ装置１０の画像を例示している。ここでは、ピンホール画像は、鏡像及び後方カメラ３０の撮影画像に含まれる対象物（他車両２００など）を強調するための強調表示Ｆである。図８は、自車両１００の後方に他車両２００が存在する場合に、当該他車両２００の存在を示す強調表示Ｆ（第１強調表示Ｆ１）が鏡１の鏡像に重畳される例を示している。他車両２００の存在は、後方カメラ３０による撮影画像に対する画像認識処理、或いは距離センサ４０による距離情報に基づいて、例えば画像生成部９１において判定される。第１強調表示Ｆ１の大きさや、位置は、後方カメラ３０による撮影画像に対する画像認識処理によって、画像生成部９１において決定される。
【００３７】
尚、この第１強調表示Ｆ１は、ピンホール画像として鏡像に重畳されるように、利用者Ｈの網膜に結像される画像である。画像生成部９１は、視点検出用カメラ２０による撮影画像に基づいて検出された利用者Ｈの視点Ｐに応じた表示面８ａ上の画像となるように第１強調表示Ｆ１を変換して表示画像を生成する。ディスプレイパネルドライバ９２は、ディスプレイパネル８に、この表示画像を表示させる。ディスプレイパネル８に表示される表示画像は、一般的な画像とは異なり、それだけでは表示内容を認知することが困難な画像である。
【００３８】
図８に示す例では、他車両２００は自車両１００に比較的遠い位置に存在する。従って、自車両１００の乗員（例えば、利用者Ｈ）が進路を譲る等の運転操作を急いで行う必要性は高くない。従って、第１強調表示Ｆ１は、例えば緑色の枠線によって、他車両２００が存在することを示す程度の強調表示であると好適である。上述したように、この枠線は、利用者Ｈが身体を動かして視点Ｐが移動した場合には、視点Ｐに応じた位置に追従する。図９を参照して例示する枠線につても同様である。
【００３９】
図９は、他車両２００がさらに自車両１００に接近した場合に、当該他車両２００の接近を警告する強調表示Ｆ（第２強調表示Ｆ２）が鏡１の鏡像に重畳される例を示している。他車両２００の接近は、例えば距離センサ４０による距離情報や、距離情報の変化速度（変化率）等に基づいて、例えば画像生成部９１において判定される。第２強調表示Ｆ２の大きさや位置は、第１強調表示Ｆ１と同様に、後方カメラ３０による撮影画像に対する画像認識処理によって、画像生成部９１において決定される。第２強調表示Ｆ２も、ピンホール画像として鏡像に重畳されるように、利用者Ｈの網膜に結像される画像である。従って、画像生成部９１は、視点検出用カメラ２０による撮影画像に基づいて検出された利用者Ｈの視点Ｐに応じた表示面８ａ上の画像となるように第２強調表示Ｆ２を変換し、ディスプレイパネルドライバ９２を介してディスプレイパネル８に、表示画像として表示させる。
【００４０】
図９に示す例では、他車両２００は自車両１００にかなり接近している。従って、自車両１００の乗員（例えば、利用者Ｈ）は、進路を譲る等の退避操作を迅速に行うことが好ましい。従って、例えば赤色の枠線を点滅させるなど、他車両２００の接近に対して注意を促すような（或いは警告するような）強調表示が行われると好適である。このように、表示装置７は、鏡ディスプレイ装置１０が設置される設置場所に基づく基準位置（ここでは自車両１００の任意の位置）と対象物（例えば他車両２００）との距離に基づいて、異なる表示形態で強調表示を表示させると好適である。尚、本実施形態では、背面ドアやリヤバンパに距離センサ４０が設置されており、距離センサ４０が設置されているこれらの位置を基準位置としてもよいし、自車両１００の後端（例えばバンパーの最後端）を基準位置としてもよい。
【００４１】
以上説明したように、光を透過する板状の鏡本体部２の一方側の面に設けられた反射膜（銀膜３１）を含む薄膜部３にピンホールアレイ５が設けられている鏡１と、薄膜部３に表示面８ａが対向するように配置されている表示装置７とを備えた鏡ディスプレイ装置１０は、鏡１に映る鏡像に表示面８ａへの表示画像に基づくピンホール画像を重畳することができる。上述したように、ピンホール径φ１が１００［μｍ］程度のピンホール４は、目視が困難である。従って、例えばディスプレイパネル８が真っ黒な画像を表示していたり、消灯していたりした場合には、鏡ディスプレイ装置１０を単なる鏡１として利用することができる。一方、ディスプレイパネル８にピンホール画像の源画像である表示画像を表示させると、鏡像にピンホール画像が重畳される鏡ディスプレイ装置１０として利用することができる。尚、ピンホール４を通過してきた光は回折現象を生じる。回折現象の発生は、ピンホール径φ１や、ピンホール４に入光する光の角度等にも影響される。従って、上記においては、１００［μｍ］程度のピンホール径φ１を例示したが、３０〜１００［μｍ］程度の範囲内で、回折も考慮してピンホール径φ１を設定すると好適である。
【００４２】
〔その他の実施形態〕
以下、その他の実施形態について説明する。尚、以下に説明する各実施形態の構成は、それぞれ単独で適用されるものに限られず、矛盾が生じない限り、他の実施形態の構成と組み合わせて適用することも可能である。尚、以下の記載を含め、本明細書において開示された実施形態は全ての点で単なる例示に過ぎない。従って、本開示の趣旨を逸脱しない範囲内で、適宜、種々の改変を行うことが可能である。
【００４３】
（１）上記においては、図２を参照して、ピンホール４が矩形状に配置されてピンホールアレイ５が形成される形態を例示した。しかし、ピンホールアレイ５は、図１０に示すように、千鳥格子状に配置されてもよい。
【００４４】
（２）上記においては、図１に示すように、表示装置７のディスプレイパネル８の表示面８ａと、鏡１の薄膜部３とが、離間距離Ｄ１の隙間を空けて対向するように配置されている形態を例示した。しかし、図示は省略するが、鏡１の薄膜部３と、表示装置７の表示面８ａとの間に、ピンホールアレイ５の各ピンホール４に１つの超小型凸レンズ（Micro Lens）が対応するように当該超小型凸レンズが配置されたマイクロレンズアレイが設けられていてもよい。各超小型凸レンズは、ディスプレイパネル８からの光を、対応する各ピンホール４に集光する。このため、各ピンホール４を通過する光量は、マイクロレンズアレイを備えていない場合よりも大きくなり、重畳されるピンホール画像はより明るく鮮明になる。
【００４５】
尚、当然ながら、そのような超小型凸レンズを用いること無く、表示装置７の輝度を高くすることも好適である。また、マイクロレンズアレイの有無によって光学系が異なるため、視野角等も異なる場合がある。従って、鏡ディスプレイ装置１０の用途や、表示装置７の出力（明るさ等）、鏡１の構造（鏡本体部２の透過率やピンホール径φ１）に基づき、光量及び視野角を考慮して、マイクロレンズアレイの有無や、離間距離Ｄ１を決定すると好適である。
【００４６】
（３）上記においては、利用者Ｈの視点Ｐを検出して当該視点Ｐに対応した表示画像を表示装置７に表示させる形態を例示した。しかし、図８及び図９に例示したように、鏡像や後方カメラ３０の撮影画像の中の対象物（例えば後続車両）を特定して強調しなくてもよいような場合には、視点Ｐを特定することなく、表示画像を表示させてもよい。当然ながら、この場合には、視点Ｐの位置によって、鏡面に重畳されるピンホール画像の位置は異なることになる。しかし、図１１に示すような注意喚起アイコンＷ（Ｗ１，Ｗ２，Ｗ３）であれば、特に対象物を特定しなくてもよい。注意喚起アイコンＷによって、利用者Ｈは、注意をすべき事象が発生していることを知ることができ、鏡像を見て退避操作を行うことができる。但し、これらの場合においても（鏡像に対してピンホール画像の位置が特定されていなくても）、利用者Ｈから見てピンホール画像が鏡像に重畳されている状態では、両画像は、同一視点の画像である。
【００４７】
尚、このような場合の表示画像は、注意喚起アイコンＷに限らず、例えば燃料が少なくなったことを示す給油アイコン（不図示）や、時刻を示す時計アイコン（不図示）、制限速度が変わったことを示す道路情報アイコン（不図示）であってもよい。
【００４８】
（４）上記においては、後方カメラ３０による撮影画像に基づく表示画像を表示装置７に表示させる形態を例示した。しかし、例えば、表示装置７は、車両が車両の前方の情景を撮影する前方カメラ（不図示）を備え、当該前方カメラによって撮影された撮影画像に基づいて生成された表示画像を表示してもよい。当該表示画像には、例えば、前方カメラによる撮影画像に含まれる道路標識や道路標示、或いはナビゲーションシステムの目的地や目印（ランドマーク）となっている建物や施設等が表示されると好適である。
【００４９】
（５）上記においては、鏡ディスプレイ装置１０を車両の後方ミラーに適用した場合を例として説明した。しかし、鏡ディスプレイ装置１０は、車両の後方ミラーに限らず、例えば化粧台の鏡や、道路や通路におけるカーブミラーなど、他の鏡に対しても適用することができる。例えば、化粧台の鏡に鏡ディスプレイ装置１０を適用した場合には、口紅やアイシャドウの色などをピンホール画像として重畳させることで、化粧のシミュレーションを行う事ができる。また、カーブミラーに鏡ディスプレイ装置１０を適用した場合には、当該カーブミラーに人等が近づいた場合に、進行方向を示す矢印を表示したり、鏡の視野の外からカーブミラーに向かってくる人等の存在の有無を表示したりすることができる。
【００５０】
（６）また、鏡ディスプレイ装置１０は、上述したように視点Ｐに応じて異なるピンホール画像を利用者（観察者）に提供する。上述したように、異なる視点Ｐにおいても同じように鏡像に重なる画像を提供することも可能であるが、当然ながら異なる視点Ｐにおいて異なる画像を提供することも可能である。例えば、鏡の前を利用者が移動していくに従って、利用者に異なるピンホール画像を見せるようにしてもよい。つまり、利用者の運動に伴う視差（運動視差）を利用して、利用者の運動に応じて変化するピンホール画像を見せてもよい。例えば、鏡ディスプレイ装置１０は、横後方に長い鏡の前を歩行者が通過する場合に、以下のような表示を行う事ができる。鏡ディスプレイ装置１０は、歩行者が鏡に差し掛かった辺りから中央付近までは、進行方向とは逆方向の矢印と共に例えば「東出口」の表示を行い、中央付近を通過した後は、進行方向の矢印と共に「西出口」の表示を行う。つまり、歩行者の位置に応じて、より近い「出口」を案内することができる。このように、鏡ディスプレイ装置１０は、歩行者の運動に伴う視差を利用してより適切な表示を行うことができる。
【００５１】
尚、上述したカーブミラーに鏡ディスプレイ装置１０を適用する例でも、運動視差が利用されている。具体的には、カーブミラーに対して、所定の距離以内に人等が近づいた場合に、進行方向を示す矢印を表示しているが、所定の距離よりも離れている場合には、カーブミラーの鏡像を視認することができても、そのような矢印は表示させない。また、例えば、カーブミラーと利用者との位置関係に応じて、矢印の向きを変えるようにすることも好適である。
【００５２】
（７）上記においては、図１及び図１１に例示したように、鏡１が、鏡本体部２の裏面側に反射膜（銀膜３１）を有する裏面反射鏡である場合を例示した。しかし、鏡１は、鏡本体部２の表面側（鏡面側）に反射膜を有する表面反射鏡であってもよい。
【産業上の利用可能性】
【００５３】
本発明は、鏡と表示装置とを備えた鏡ディスプレイ装置に利用することができる。
【符号の説明】
【００５４】
１      ：鏡
２      ：鏡本体部
３      ：薄膜部
４      ：ピンホール（微細貫通孔）
５      ：ピンホールアレイ
７      ：表示装置
８      ：ディスプレイパネル（表示部）
８ａ    ：表示面
１０    ：鏡ディスプレイ装置
３１    ：銀膜（反射膜）
１００  ：自車両
２００  ：他車両（対象物）
Ｆ      ：強調表示
Ｆ１    ：第１強調表示
Ｆ２    ：第２強調表示
Ｈ      ：利用者
Ｐ      ：視点
Ｐ１    ：第１視点
Ｐ２    ：第２始点
【図１】
2017195491.tif 000003
【図２】
2017195491.tif 000004
【図３】
2017195491.tif 000005
【図４】
2017195491.tif 000006
【図５】
2017195491.tif 000007
【図６】
2017195491.tif 000008
【図７】
2017195491.tif 000009
【図８】
2017195491.tif 000010
【図９】
2017195491.tif 000011
【図１０】
2017195491.tif 000012
【図１１】
2017195491.tif 000013