(57)【要約】前進時における進行方向の視界を十分に確保しながら、有益な情報を運転者に提供することのできる投写型表示装置、投写制御方法、及び、投写制御プログラムを提供する。乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得部６１と、撮像画像データに基づいて、撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成部６２と、光源（４１ｒ，４１ｇ，４１ｂ）から出射される光を、輪郭像データを含む画像データに基づいて空間変調し、空間変調して得られた画像光を乗り物のフロントウインドシールド１に投写する投写表示部と、を備える。
2017145546.tif 000002
【特許請求の範囲】
【請求項１】
乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得部と、
前記撮像画像データに基づいて、前記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成部と、
光源から出射される光を、前記輪郭像データを含む画像データに基づいて空間変調し、前記空間変調して得られた画像光を前記乗り物における投写面に投写する投写表示部と、を備える投写型表示装置。
【請求項２】
請求項１記載の投写型表示装置であって、
前記乗り物は、運転者から見て前記乗り物のフロントウインドシールドの前方に進行する前進モードと、前記前方の反対方向である前記乗り物の後方に進行する後退モードとが設定可能であり、
前記撮像部は、前記乗り物の前記後方を撮像し、
前記投写表示部は、前記乗り物が前記後退モードに設定されたタイミングに同期して、前記輪郭像データを含む画像データに基づく画像光の投写を開始する投写型表示装置。
【請求項３】
請求項２記載の投写型表示装置であって、
前記投写表示部は、前記乗り物が前記後退モードに設定されてから予め決められた期間において、前記輪郭像データを含む画像データに基づく画像光の投写を行う投写型表示装置。
【請求項４】
請求項１〜３のいずれか１項記載の投写型表示装置であって、
前記輪郭像データは、前記撮像画像の輪郭を複数の表示形態によって表すデータである投写型表示装置。
【請求項５】
請求項４記載の投写型表示装置であって、
前記輪郭像データは、前記撮像画像の輪郭を複数色によって表すデータである投写型表示装置。
【請求項６】
請求項４記載の投写型表示装置であって、
前記輪郭像データは、前記撮像画像の輪郭を複数の記号によって表すデータである投写型表示装置。
【請求項７】
請求項１〜３のいずれか１項記載の投写型表示装置であって、
前記撮像画像データから物体を検出する物体検出部を更に備え、
前記投写表示部は、前記物体検出部により検出された物体の面積が閾値以下の場合には、前記輪郭像データにおける当該物体に対応する部分を、前記撮像画像データのうちの当該物体に対応する部分に置換した後の置換後輪郭像データに基づいて画像光の投写を行い、前記物体検出部により検出された物体の面積が前記閾値を超える場合には、前記輪郭像データに基づいて画像光の投写を行う投写型表示装置。
【請求項８】
乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得ステップと、
前記撮像画像データに基づいて、前記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成ステップと、
光源から出射される光を、前記輪郭像データを含むデータに基づいて空間変調し、前記空間変調して得られた画像光を前記乗り物における投写面に投写する投写表示ステップと、を備える投写表示方法。
【請求項９】
請求項８記載の投写表示方法であって、
前記乗り物は、運転者から見て前記乗り物のフロントウインドシールドの前方に進行する前進モードと、前記前方の反対方向である前記乗り物の後方に進行する後退モードとが設定可能であり、
前記撮像部は、前記乗り物の前記後方を撮像し、
前記投写表示ステップは、前記乗り物が前記後退モードに設定されたタイミングに同期して、前記輪郭像データに基づく画像光の投写を開始する投写表示方法。
【請求項１０】
請求項９記載の投写表示方法であって、
前記投写表示ステップは、前記乗り物が前記後退モードに設定されてから予め決められた期間において、前記輪郭像データに基づく画像光の投写を行う投写表示方法。
【請求項１１】
請求項８〜１０のいずれか１項記載の投写表示方法であって、
前記輪郭像データは、前記撮像画像の輪郭を複数の表示形態によって表すデータである投写表示方法。
【請求項１２】
請求項１１記載の投写表示方法であって、
前記輪郭像データは、前記撮像画像の輪郭を複数色によって表すデータである投写表示方法。
【請求項１３】
請求項１１記載の投写表示方法であって、
前記輪郭像データは、前記撮像画像の輪郭を複数の記号によって表すデータである投写表示方法。
【請求項１４】
請求項８〜１０のいずれか１項記載の投写表示方法であって、
前記撮像画像データから物体を検出する物体検出ステップを更に備え、
前記投写表示ステップでは、前記物体検出ステップにより検出された物体の面積が閾値以下の場合には、前記輪郭像データにおける当該物体に対応する部分を、前記撮像画像データのうちの当該物体に対応する部分に置換した後の置換後輪郭像データに基づいて画像光の投写を行い、前記物体検出ステップにより検出された物体の面積が前記閾値を超える場合には、前記輪郭像データに基づいて画像光の投写を行う投写表示方法。
【請求項１５】
乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得ステップと、
前記撮像画像データに基づいて、前記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成ステップと、
光源から出射される光を、前記輪郭像データを含むデータに基づいて空間変調し、前記空間変調して得られた画像光を前記乗り物における投写面に投写する投写表示ステップと、をコンピュータに実行させるための投写表示プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、投写型表示装置、投写表示方法、及び、投写表示プログラムに関する。
【背景技術】
【０００２】
自動車、電車、船舶、重機、航空機、又は、農作用機械等の乗り物内において、ウインドシールド、又は、ウインドシールドの付近に配置されるコンバイナをスクリーンとして用い、これに光を投写して画像を表示させる乗り物用のＨＵＤ（Ｈｅａｄ−ｕｐ  Ｄｉｓｐｌａｙ）が知られている。このＨＵＤによれば、ＨＵＤから投写された光に基づく画像を、スクリーン上で実像として、又は、スクリーン前方において虚像として、運転者に視認させることができる。【０００３】
このＨＵＤを利用して、自動車の駐車支援を行う装置が特許文献１に記載されている。特許文献１に記載の駐車支援装置は、自動車のシフトレバーが“リア（後退）”の位置に移動されると、自動車の後方に設置された撮像部により撮像された撮像画像をＨＵＤに表示させている。【０００４】
特許文献２には、自動車の左方向を撮像する撮像部、自動車の右方向を撮像する撮像部、及び、自動車の後方を撮像する撮像部の各々により撮像された撮像画像をＨＵＤに表示させることによって、車線変更を安全かつ容易に行うことを実現する車両安全確認装置が記載されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１３−２１２７２３号公報
【特許文献２】特開２００６−２４８３７４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１のように、自動車を駐車する際に、自動車の後方の景色を撮像して得られる撮像画像がＨＵＤに表示されることによって、運転者は、前方を向いたまま視線を動かすことなく、駐車作業を行うことができる。しかし、駐車作業時には、自動車の切り返しを行う場合があり、前進と後退が頻繁に切り替えられる可能性がある。【０００７】
例えば、運転者が、ＨＵＤに表示される自動車後方の撮像画像を確認しながら、自動車を後退させている状態を考える。この状態では、ＨＵＤに表示される撮像画像によって、自動車前方にある障害物が運転者によって気付かれない可能性がある。そして、この状態から、切り返しのために、運転者が自動車を前進モードに設定して自動車を前進させると、ＨＵＤの表示はオフになる。このとき、ＨＵＤに撮像画像が表示されていた領域に障害物が存在していると、運転者はこの障害物を認知できなくなる可能性がある。【０００８】
また、特許文献２のように、自動車を前進させている状態において、撮像部により撮像された撮像画像をＨＵＤに表示させる構成では、ＨＵＤに表示される撮像画像によって前方の視界が妨げられる。これにより、自動車前方の障害物又は白線等を認知することができなくなる可能性がある。【０００９】
また、特許文献１，２に限らず、乗り物が前進している状態において、乗り物の周囲を撮像して得られる撮像画像をＨＵＤに表示させるケースは他にも想定され、このケースにおいても、乗り物前方の視界が妨げられる可能性がある。【００１０】
本発明は、上記事情に鑑みてなされたものであり、前進時における進行方向の視界を十分に確保しながら、有益な情報を運転者に提供することのできる投写型表示装置、投写表示方法、及び、投写表示プログラムを提供することを目的とする。
【課題を解決するための手段】
【００１１】
本発明の投写型表示装置は、乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得部と、上記撮像画像データに基づいて、上記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成部と、光源から出射される光を、上記輪郭像データを含む画像データに基づいて空間変調し、上記空間変調して得られた画像光を上記乗り物における投写面に投写する投写表示部と、を備えるものである。【００１２】
本発明の投写表示方法は、乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得ステップと、上記撮像画像データに基づいて、上記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成ステップと、光源から出射される光を、上記輪郭像データを含むデータに基づいて空間変調し、上記空間変調して得られた画像光を上記乗り物における投写面に投写する投写表示ステップと、を備えるものである。【００１３】
本発明の投写表示プログラムは、乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得ステップと、上記撮像画像データに基づいて、上記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成ステップと、光源から出射される光を、上記輪郭像データを含むデータに基づいて空間変調し、上記空間変調して得られた画像光を上記乗り物における投写面に投写する投写表示ステップと、をコンピュータに実行させるためのプログラムである。
【発明の効果】
【００１４】
本発明によれば、前進時における進行方向の視界を十分に確保しながら、有益な情報を運転者に提供することのできる投写型表示装置、投写表示方法、及び、投写表示プログラムを提供することができる。
【図面の簡単な説明】
【００１５】
【図１】本発明の投写型表示装置の一実施形態であるＨＵＤ１００が搭載される自動車１０の概略構成を示す模式図である。
【図２】図１に示すＨＵＤ１００が搭載される自動車１０の室内構成を示す模式図である。
【図３】図２に示すＨＵＤ１００の制御ユニット４の詳細構成を示す模式図である。
【図４】図３に示すシステム制御部６０の機能ブロック図である。
【図５】図２に示すＨＵＤ１００の動作を説明するためのフローチャートである。
【図６】ＨＵＤ１００に表示される輪郭画像の一例を示す図である。
【図７】自動車１０の室内における図６に示した輪郭画像１１０の観察状態を示す模式図である。
【図８】ＨＵＤ１００に表示される輪郭画像の別の例を示す図である。
【図９】ＨＵＤ１００に表示される輪郭画像の更に別の例を示す図である。
【図１０】図４に示すＨＵＤ１００のシステム制御部６０の機能ブロックの変形例を示す図である。
【図１１】図１に示す自動車１０の撮像部１１により撮像された撮像画像データの一例を示す図である。
【図１２】図１１に示す撮像画像データから生成された置換後輪郭像データを示す図である。
【図１３】図１１に示す撮像画像データが得られた状態から自動車１０が更に後方に進んだ状態で撮像部１１により撮像された撮像画像データを示す図である。
【図１４】図１３に示す撮像画像データから生成された輪郭像データを示す図である。
【発明を実施するための形態】
【００１６】
以下、本発明の実施形態について図面を参照して説明する。
【００１７】
図１は、本発明の投写型表示装置の一実施形態であるＨＵＤ１００が搭載される自動車１０の概略構成を示す模式図である。図２は、図１に示すＨＵＤ１００が搭載される自動車１０の室内構成を示す模式図である。
【００１８】
図１に示すように、自動車１０は、自動車１０の後部に位置するトランク部分に取り付けられた撮像部１１を備える。また、自動車１０のフロントウインドシールド１の一部は、後述する画像光を反射させる加工がなされた領域となっており、この領域が投写面２を構成している。
【００１９】
撮像部１１は、自動車１０の後方を撮像するためのものであり、有線又は無線によってＨＵＤ１００と接続されている。撮像部１１で撮像して得られた撮像画像データは、有線通信又は無線通信によってＨＵＤ１００に転送される。この撮像部１１は、例えば、自動車１０のナンバープレートの近傍位置又はリヤウインドウ近傍位置等、後方を撮像できるのであれば、その具体的な位置は限定されない。
【００２０】
なお、図１には、自動車１０の後部に設置される撮像部１１のみが例示されているが、自動車１０の周囲（右前方又は左前方等）の外界を撮像することができる複数の撮像部が自動車１０に搭載されていてもよい。
【００２１】
ＨＵＤ１００は、自動車１０に搭載され、自動車１０のフロントウインドシールド１の一部の領域である投写面２に投写される画像光により、自動車１０の運転者によって虚像又は実像を視認可能にするものである。
【００２２】
ＨＵＤ１００は、自動車以外に、電車、重機、建機、航空機、船舶、又は、農作機械等の乗り物に搭載して用いることができる。
【００２３】
図２の例では、ＨＵＤ１００は、自動車１０のダッシュボード３に内蔵されている。ダッシュボード３は、自動車１０のスピードメータ、タコメータ、燃料計、水温計、又は、距離計等の走行に必要な情報を通知するための計器類等を含む内装部品を内蔵する部材である。
【００２４】
ＨＵＤ１００は、光源及びこの光源から出射される光を画像データに基づいて空間変調する光変調素子を含む制御ユニット４と、制御ユニット４の光変調素子により空間変調された画像光をフロントウインドシールド１における投写面２に投写する投写部を構成する拡散部材５、反射ミラー６、及び、凹面鏡７と、を備える。
【００２５】
拡散部材５は、制御ユニット４の光変調素子により空間変調された画像光を拡散させて面光源化する部材である。拡散部材５は、表面に微細構造を有するマイクロミラーアレイ、拡散ミラー、又は、反射ホログラフィクディフューザー等が用いられる。
【００２６】
反射ミラー６は、拡散部材５で拡散された画像光を反射する。
【００２７】
凹面鏡７は、反射ミラー６で反射された画像光を拡大して反射し、投写面２に投写する。フロントウインドシールド１における投写面２は、凹面鏡７から投写された画像光を運転者の目の方向に反射するような加工がなされている。
【００２８】
なお、ＨＵＤ１００は、自動車１０の天井付近に配置され、自動車１０の天井付近に設置されたサンバイザタイプのコンバイナに対して画像光を投写する構成であってもよい。この構成では、コンバイナが投写面を構成する。
【００２９】
自動車の運転者は、投写面２に投写され、投写面２で反射された画像光に基づく虚像により、運転を支援するためのアイコン又は文字等の情報を視認することができる。また、投写面２は、フロントウインドシールド１の外部（車外）からの光を透過する機能を持つ。このため、運転者は、凹面鏡７から投写された画像光に基づく虚像と外界の景色とが重畳された像を視認することができる。
【００３０】
図３は、図２に示すＨＵＤ１００の制御ユニット４の詳細構成を示す模式図である。
【００３１】
制御ユニット４は、光源ユニット４０と、光変調素子４４と、光変調素子４４を駆動する駆動部４５と、ＨＵＤ１００全体を統括制御するシステム制御部６０と、を備える。
【００３２】
システム制御部６０は、一つ又は複数のプロセッサ（CPU：Central Processing Unit：中央処理装置）を主体に構成されており、プロセッサの実行するプログラム等が記憶される非一時性の記録媒体ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、及び、ワークメモリとしてのＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）等を含み、記録媒体に記憶されているプログラムをロードされることにより動作する。
【００３３】
光源ユニット４０は、光源制御部４０Ａと、赤色光を出射する赤色光源であるＲ光源４１ｒと、緑色光を出射する緑色光源であるＧ光源４１ｇと、青色光を出射する青色光源であるＢ光源４１ｂと、ダイクロイックプリズム４３と、Ｒ光源４１ｒとダイクロイックプリズム４３の間に設けられたコリメータレンズ４２ｒと、Ｇ光源４１ｇとダイクロイックプリズム４３の間に設けられたコリメータレンズ４２ｇと、Ｂ光源４１ｂとダイクロイックプリズム４３の間に設けられたコリメータレンズ４２ｂと、を備える。Ｒ光源４１ｒとＧ光源４１ｇとＢ光源４１ｂはＨＵＤ１００の光源を構成する。
【００３４】
ダイクロイックプリズム４３は、Ｒ光源４１ｒ、Ｇ光源４１ｇ、及びＢ光源４１ｂの各々から出射される光を同一光路に導くための光学部材である。ダイクロイックプリズム４３は、コリメータレンズ４２ｒによって平行光化された赤色光を透過させて光変調素子４４に出射する。また、ダイクロイックプリズム４３は、コリメータレンズ４２ｇによって平行光化された緑色光を反射させて光変調素子４４に出射する。さらに、ダイクロイックプリズム４３は、コリメータレンズ４２ｂによって平行光化された青色光を反射させて光変調素子４４に出射する。光を同一光路に導く機能を持つ光学部材としては、ダイクロイックプリズムに限らない。例えば、クロスダイクロイックミラーを用いてもよい。
【００３５】
Ｒ光源４１ｒ、Ｇ光源４１ｇ、及びＢ光源４１ｂは、それぞれ、レーザ又はＬＥＤ（Ｌｉｇｈｔ  Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ）等の発光素子が用いられる。ＨＵＤ１００の光源は、Ｒ光源４１ｒとＧ光源４１ｇとＢ光源４１ｂの３つの例に限らず、１つ、２つ、または４つ以上の光源によって構成されていてもよい。
【００３６】
光源制御部４０Ａは、Ｒ光源４１ｒ、Ｇ光源４１ｇ、及びＢ光源４１ｂの各々を制御し、Ｒ光源４１ｒ、Ｇ光源４１ｇ、及び、Ｂ光源４１ｂから光を出射させる制御を行う。
【００３７】
光変調素子４４は、Ｒ光源４１ｒ、Ｇ光源４１ｇ、及び、Ｂ光源４１ｂから出射され、ダイクロイックプリズム４３から出射された光を、システム制御部６０により入力される画像データに基づいて空間変調する。
【００３８】
光変調素子４４としては、例えば、ＬＣＯＳ（Ｌｉｑｕｉｄ  ｃｒｙｓｔａｌ  ｏｎ  ｓｉｌｉｃｏｎ）、ＤＭＤ（Ｄｉｇｉｔａｌ  Ｍｉｃｒｏｍｉｒｒｏｒ  Ｄｅｖｉｃｅ）、ＭＥＭＳ（Ｍｉｃｒｏ  Ｅｌｅｃｔｒｏ  Ｍｅｃｈａｎｉｃａｌ  Ｓｙｓｔｅｍｓ）素子、又は、液晶表示素子等を用いることができる。
【００３９】
駆動部４５は、システム制御部６０から入力される画像データに基づいて光変調素子４４を駆動し、画像データに応じた画像光（赤色画像光、青色画像光、及び、緑色画像光）を、光変調素子４４から拡散部材５に出射させる。
【００４０】
図１に示した拡散部材５、反射ミラー６、及び、凹面鏡７から構成される投写部は、投写面２に投写された画像光に基づく画像が、フロントウインドシールド１前方の位置において虚像として運転者に視認可能となるように光学設計がなされている。この画像光に基づく画像が、フロントウインドシールド１において実像として運転者に視認可能となるように投写部の光学設計がなされていてもよい。
【００４１】
システム制御部６０は、光源制御部４０Ａ及び駆動部４５を制御して、画像データに基づく画像光を制御ユニット４から拡散部材５に出射させる。
【００４２】
光源ユニット４０、光変調素子４４、駆動部４５、拡散部材５、反射ミラー６、及び、凹面鏡７は、Ｒ光源４１ｒ、Ｇ光源４１ｇ、及びＢ光源４１ｂから出射される光を、システム制御部６０から入力された画像データに基づいて空間変調し、空間変調して得られた画像光を自動車１０の投写面２に投写する投写表示部を構成する。
【００４３】
図４は、図３に示すシステム制御部６０の機能ブロック図である。
【００４４】
システム制御部６０は、撮像画像データ取得部６１と、輪郭像データ生成部６２と、表示情報入力部６３と、を備える。撮像画像データ取得部６１、輪郭像データ生成部６２、及び、表示情報入力部６３は、ＲＯＭに記憶されるプログラムを１つ又は複数のプロセッサが実行することによって構成される。このプログラムは、投写表示プログラムを含む。
【００４５】
撮像画像データ取得部６１は、撮像部１１が自動車１０の後方を撮像して得られた撮像画像データを有線通信又は無線通信により取得する。
【００４６】
輪郭像データ生成部６２は、撮像画像データ取得部６１により取得された撮像画像データに基づいて、この撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する。具体的には、輪郭像データ生成部６２は、撮像画像データに輪郭抽出処理又は特徴点抽出処理を施して、輪郭像データを生成する。
【００４７】
輪郭像データは、例えば、輪郭抽出処理によって抽出された撮像画像のうちの輪郭部分を黒色以外の色（例えば白色）とし、その他の部分を黒色にした画像データであり、輪郭抽出処理によって抽出された輪郭部分を線ではなく、黒色以外の色（例えば白色）の破線又は鎖線等とし、その他の部分を黒色にした画像データであり、又は、特徴点抽出を行って得られる特徴点を黒色以外の色（例えば白色）とし、その他の部分を黒色とした画像データ等である。
【００４８】
表示情報入力部６３は、ナビゲーション情報、燃料残量、又は、走行速度等の情報を含む第一の画像データと、輪郭像データ生成部６２で生成された輪郭像データを少なくとも含む第二の画像データとのいずれか一方を駆動部４５に入力して、入力した画像データに基づく画像光を投写面２に投写させる。表示情報入力部６３は、自動車１０の運転モードに基づいて、第一の画像データと第二の画像データのどちらを駆動部４５に入力するかを決定する。
【００４９】
第二の画像データは、輪郭像データに加えて、障害物の存在を文字又はアイコン等によって警告するための情報等の自動車を後退させる際の運転を支援するための情報が含まれていてもよい。
【００５０】
運転モードとは、運転者から見てフロントウインドシールド１の前方（ボンネット側）に自動車１０が進行するための前進モードと、この前方の反対の方向に自動車１０が進行するための後退モードの２つのモードを少なくとも含む。この運転モードは、自動車１０のシフトレバー等を操作することで、運転者によって設定可能である。
【００５１】
表示情報入力部６３は、自動車１０が後退モードに設定された場合には第二の画像データを駆動部４５に入力する。表示情報入力部６３は、自動車１０が前進モードに設定された場合には第一の画像データを駆動部４５に入力する。
【００５２】
図５は、図２に示すＨＵＤ１００の動作を説明するためのフローチャートである。図５の説明にあたり、図６及び図７を参照し、運転者から観察される像の表示例も説明する。なお、図５に示す処理は、ＨＵＤ１００の電源がオンされている間、繰り返し実行される。
【００５３】
まず、表示情報入力部６３は、自動車１０の運転モードを検知し（ステップＳ１）、運転モードが後退モードに設定されたか否かを判定する（ステップＳ２）。表示情報入力部６３は、シフトレバーが“リア”の位置にある状態が所定時間（例えば２秒間）継続した場合に、後退モードが設定されたと判定し、後退モードが設定されたと判定した（ステップＳ２：ＹＥＳ）場合には、撮像画像データ取得部６１が、撮像部１１により撮像された撮像画像データを取得する（ステップＳ３）。
【００５４】
ここで、シフトレバーが“リア”の位置にある状態が所定時間継続した場合に後退モードが設定されたと判定しているのは、例えば、シフトレバーを“ドライブ”の位置から“パーキング”の位置まで移動させる操作等によってシフトレバーが瞬間的に“リア”の位置にある状態によりステップＳ３以降の処理が行われるのを防ぐためである。なお、ボタン操作等によって運転モードを個別に設定することのできる自動車であれば、後退モードに対応するボタンの押下を検知した時点で、ステップＳ２の判定がＹＥＳとなるようにしてもよい。
【００５５】
次に、輪郭像データ生成部６２は、ステップＳ３で取得された撮像画像データに輪郭抽出処理を施し、輪郭像データを生成する（ステップＳ４）。
【００５６】
次に、表示情報入力部６３は、輪郭像データ生成部６２により生成された輪郭像データを含む第二の画像データを駆動部４５に入力する。駆動部４５は、表示情報入力部６３から入力された第二の画像データに基づいて光変調素子４４を駆動することによって、第二の画像データに基づく画像光を投写面２に投写させる（ステップＳ５）。これにより、図６に示すように、輪郭画像１１０が運転者により観察される。
【００５７】
図６に示すように、輪郭画像１１０には、駐車場に駐車されている自動車の輪郭１１０Ａ及び輪郭１１０Ｂと、駐車場の地面に引かれた白線の輪郭１１０Ｃとが含まれている。光変調素子４４が液晶表示素子である場合には、輪郭画像１１０における輪郭１１０Ａ〜１１０Ｃ以外の部分は、光変調素子４４において光が遮断された部分に相当するため、この部分は透明になっている。光変調素子４４がＤＭＤである場合には、輪郭画像１１０における輪郭１１０Ａ〜１１０Ｃ以外の部分は、光が投写面２に投写されない方向に反射されることによって、透明として視認される。
【００５８】
図７は、自動車１０の室内における輪郭画像１１０の観察状態を示す模式図である。投写面２の前方には、自動車１０の後方を撮像して得られた輪郭画像１１０が虚像として観察される。図７の例では、フロントウインドイールド１における投写面２の前方に障害物１２０が存在している。運転者は、輪郭画像１１０を視認しつつ、輪郭画像１１０の透明部分（輪郭以外の部分）を通して、障害物１２０を視認することができる。
【００５９】
ステップＳ５の後、表示情報入力部６３は、自動車１０が後退モードに設定されたと判定してから予め決められた時間が経過したか否かを判定し（ステップＳ６）、この時間が経過していない場合（ステップＳ６：ＮＯ）には、ステップＳ３に処理が戻る。表示情報入力部６３は、この時間が経過したと判定した場合（ステップＳ６：ＹＥＳ）には、ステップＳ１に処理を戻し、上述した処理が繰り返される。
【００６０】
表示情報入力部６３は、ステップＳ２において前進モードが設定されていると判定した場合（ステップＳ２：ＮＯ）には、第一の画像データを駆動部４５に入力する。駆動部４５は、表示情報入力部６３から入力された第一の画像データに基づいて光変調素子４４を駆動することで、第一の画像データに基づく画像光を投写面２に投写させる。これにより、投写面２には、ナビゲーション情報、燃料残量、又は、走行速度等の自動車１０の前進時における運転を支援するための情報が投写される。ステップＳ７の後は、ステップＳ１に処理が戻り、上述した処理が繰り返される。
【００６１】
以上のようにＨＵＤ１００によれば、自動車１０が後退モードに設定されている場合には、撮像部１１により撮像して得られる撮像画像データから生成された輪郭像データに基づく画像光が投写面２に投写される。このため、運転者は、この画像光に基づく輪郭画像によって、フロントウインドシールド１側を見たままの姿勢で、自動車１０の進行方向（後方）の障害物等の状況を確認することができる。したがって、自動車１０の駐車作業等を安全かつ容易に行うことができる。
【００６２】
また、図７に例示したように、輪郭画像１１０は、輪郭以外が透明な画像である。このため、輪郭画像１１０が表示された状態においても、フロントウインドシールド１前方の視界を妨げることはなく、自動車１０の切り返し動作を行う際の安全性を十分に確保することができる。
【００６３】
また、ＨＵＤ１００によれば、後退モードに設定されたと判定してから予め決められた時間が経過するまでの間は、輪郭画像１１０の表示が継続して行われる。このため、駐車作業時等のように前進モードと後退モードとを頻繁に切り替える状況であっても、輪郭画像１１０の表示と非表示が頻繁に切り替わるのを防ぐことができ、円滑な駐車作業を支援することができる。
【００６４】
なお、輪郭像データは、輪郭抽出処理によって抽出された撮像画像の輪郭を単一の表示形態ではなく複数の表示形態で表すデータであってもよい。
【００６５】
例えば、図６の例では、白線の輪郭１１０Ｃを白色、自動車の輪郭１１０Ａ及び１１０Ｂを赤色等といったように、輪郭像データが撮像画像の輪郭を複数色によって表す画像データであってもよい。このような構成とすることにより、白線と障害物といった複数の物の区別が容易となり、視認性を向上させることができる。
【００６６】
または、図８に示すように、白線の輪郭を星記号の集合体２１０Ｃによって表し、自動車の輪郭を丸記号の集合体２１０Ａ，２１０Ｂによって表すように、輪郭像データが撮像画像の輪郭を複数の記号によって表す画像データであってもよい。このような構成とすることにより、白線と障害物といった複数の物の区別が容易となり、視認性を向上させることができる。
【００６７】
或いは、輪郭像データは、図９に示すように、直線部分の多い白線の輪郭については記号の集合体２１０Ｃによって表し、自動車等の曲線の多い物体については線によって輪郭１１０Ａ，１１０Ｂを表した画像データであってもよい。このような構成とすることにより、自動車１０の後方の視認性を向上させることができる。
【００６８】
なお、輪郭像データにおける輪郭を表す各記号は、黒色で塗りつぶされたデータとするのが好ましい。このようにすることにより、記号が虚像として表示された場合に、この記号によって前方の視界が妨げられるのを防ぐことができる。
【００６９】
図１０は、図４に示すＨＵＤ１００のシステム制御部６０の機能ブロックの変形例を示す図である。図１０において図４と同じ構成には同一符号を付して説明を省略する。
【００７０】
図１０に示すシステム制御部６０は、物体検知部６４が追加された点を除いては図４と同じ構成である。
【００７１】
物体検知部６４は、撮像画像データ取得部６１で取得された撮像画像データから画像処理により物体を検知する。物体とは、例えば人物、壁、電柱、又は、自動車等の自動車の走行時に障害となり得る立体物である。
【００７２】
図１０に示すシステム制御部６０の表示情報入力部６３は、物体検知部６４により検知された物体の面積が閾値以下の場合には、輪郭像データ生成部６２により生成された輪郭像データのうち、この物体に対応する部分を、撮像画像データ取得部６１により取得された撮像画像データのうちのこの物体に対応する部分に置換した置換後輪郭像データを生成し、置換後輪郭像データを駆動部４５に入力する。
【００７３】
表示情報入力部６３は、物体検知部６４により検知された物体の面積が閾値を超える場合には、輪郭像データ生成部６２により生成された輪郭像データを駆動部４５に入力する。
【００７４】
例えば、撮像部１１により撮像された撮像画像データが図１１に示すようなものである場合を説明する。図１１に示す撮像画像データには、駐車スペースを示す白線３０１と、別の自動車等の物体３００とが含まれる。
【００７５】
図１１に示す撮像画像データから物体検知部６４により検知される物体３００の面積は閾値以下である。このため、表示情報入力部６３は、撮像画像データから生成した輪郭像データ（白線３０１の輪郭と、物体３００の輪郭を示す画像データ）のうち、物体３００の輪郭で囲まれる部分を、図１１に示す物体３００の画像そのものに置換した置換後輪郭像データを生成し、この置換後輪郭像データを駆動部４５に入力する。
【００７６】
図１２は、図１１に示す撮像画像データから生成された置換後輪郭像データを示す図である。図１２に示す置換後輪郭像データには、図１１に示した白線３０１の輪郭３０１Ａと、図１１に示した物体３００とが含まれる。
【００７７】
図１３は、図１１に示す撮像画像データが得られた状態から自動車１０が更に後方に進んだ状態において撮像部１１により撮像された撮像画像データを示す図である。
【００７８】
図１３に示す撮像画像データには、図１１と同様に、駐車スペースを示す白線３０１と、別の自動車等の物体３００とが含まれる。図１３に示す撮像画像データは、図１１とは異なり、物体３００の面積が大きくなっており、図１３に示す撮像画像データから物体検知部６４により検知される物体３００の面積は閾値を超えている。
【００７９】
この場合、表示情報入力部６３は、撮像画像データから生成した輪郭像データ（白線３０１の輪郭と、物体３００の輪郭を示す画像データ）を駆動部４５に入力する。
【００８０】
図１４は、図１３に示す撮像画像データから生成された輪郭像データを示す図である。図１４に示す輪郭像データには、図１３に示した白線３０１の輪郭３０１Ａと、図１３に示した物体３００の輪郭３００Ａとが含まれる。
【００８１】
このように、変形例のシステム制御部６０は、物体の面積が閾値以下である状態、つまり、障害物となる物体が遠くにある状態では、その物体は輪郭ではなく画像そのものを表示させる。物体の面積が小さい状態では、画像そのものが表示されても、フロントウインドシールド１前方の視界を遮る面積は僅かとなるため、前方の視界を十分に確保することができる。また、物体の面積が小さい状態では、この物体が輪郭ではなく画像として表示されることによって、この物体の視認性を高めることができ、物体の存在に早い段階で気付くことができ、必要な行動の準備を行うことができる。
【００８２】
一方、物体の面積が閾値を超えた状態では、この物体が画像ではなく輪郭として表示されることになる。このため、物体を運転者に認識させながら、自動車１０の前方の視界を十分に確保することができる。
【００８３】
以上の説明では、自動車１０の後部に取り付けられた撮像部１１により撮像された撮像画像データから輪郭像データを生成する構成としたが、自動車１０の左右のサイドミラーに新たな撮像部を取り付け、自動車１０の右側の側方から後方と、自動車１０の左側の側方から後方をそれぞれ撮像するように構成してもよい。この構成では、システム制御部６０が、左右の撮像部により撮像された撮像画像データから輪郭像データを生成し、生成した輪郭像データに基づく画像光を投写面２に投写させる。これにより、運転者は、走行中においても、前方を向いたまま視線を動かすことなく、左右の状況を認知することができる。この構成は、車線変更を行う際に有効である。
【００８４】
以上説明してきたように、本明細書には以下の事項が開示されている。
【００８５】
開示された投写型表示装置は、乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得部と、上記撮像画像データに基づいて、上記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成部と、光源から出射される光を、上記輪郭像データを含む画像データに基づいて空間変調し、上記空間変調して得られた画像光を上記乗り物における投写面に投写する投写表示部と、を備えるものである。
【００８６】
開示された投写型表示装置は、上記乗り物は、運転者から見て上記乗り物のフロントウインドシールドの前方に進行する前進モードと、上記前方の反対方向である前記乗り物の後方に進行する後退モードとが設定可能であり、上記撮像部は、上記乗り物の上記後方を撮像し、上記投写表示部は、上記乗り物が上記後退モードに設定されたタイミングに同期して、上記輪郭像データを含む画像データに基づく画像光の投写を開始するものである。
【００８７】
開示された投写型表示装置は、上記投写表示部は、上記乗り物が上記後退モードに設定されてから予め決められた期間において、上記輪郭像データを含む画像データに基づく画像光の投写を行うものである。
【００８８】
開示された投写型表示装置は、上記輪郭像データは、上記撮像画像の輪郭を複数の表示形態によって表すデータであるものを含む。
【００８９】
開示された投写型表示装置は、上記輪郭像データは、上記撮像画像の輪郭を複数色によって表すデータであるものを含む。
【００９０】
開示された投写型表示装置は、上記輪郭像データは、上記撮像画像の輪郭を複数の記号によって表すデータであるものを含む。
【００９１】
開示された投写型表示装置は、上記撮像画像データから物体を検出する物体検出部を更に備え、上記投写表示部は、上記物体検出部により検出された物体の面積が閾値以下の場合には、上記輪郭像データにおけるその物体に対応する部分を、上記撮像画像データのうちのその物体に対応する部分に置換した後の置換後輪郭像データに基づいて画像光の投写を行い、上記物体検出部により検出された物体の面積が上記閾値を超える場合には、上記輪郭像データに基づいて画像光の投写を行うものである。
【００９２】
開示された投写表示方法は、乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得ステップと、上記撮像画像データに基づいて、上記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成ステップと、光源から出射される光を、上記輪郭像データを含むデータに基づいて空間変調し、上記空間変調して得られた画像光を上記乗り物における投写面に投写する投写表示ステップと、を備えるものである。
【００９３】
開示された投写表示方法は、上記乗り物は、運転者から見て上記乗り物のフロントウインドシールドの前方に進行する前進モードと、上記前方の反対方向である前記乗り物の後方に進行する後退モードとが設定可能であり、上記撮像部は、上記乗り物の上記後方を撮像し、上記投写表示ステップは、上記乗り物が上記後退モードに設定されたタイミングに同期して、上記輪郭像データに基づく画像光の投写を開始するものである。
【００９４】
開示された投写表示方法は、上記投写表示ステップは、上記乗り物が上記後退モードに設定されてから予め決められた期間において、上記輪郭像データに基づく画像光の投写を行うものである。
【００９５】
開示された投写表示方法は、上記輪郭像データは、上記撮像画像の輪郭を複数の表示形態によって表すデータであるものを含む。
【００９６】
開示された投写表示方法は、上記輪郭像データは、上記撮像画像の輪郭を複数色によって表すデータであるものを含む。
【００９７】
開示された投写表示方法は、上記輪郭像データは、上記撮像画像の輪郭を複数の記号によって表すデータであるものを含む。
【００９８】
開示された投写表示方法は、上記撮像画像データから物体を検出する物体検出ステップを更に備え、上記投写表示ステップでは、上記物体検出ステップにより検出された物体の面積が閾値以下の場合には、上記輪郭像データにおけるその物体に対応する部分を、上記撮像画像データのうちのその物体に対応する部分に置換した後の置換後輪郭像データに基づいて画像光の投写を行い、上記物体検出ステップにより検出された物体の面積が上記閾値を超える場合には、上記輪郭像データに基づいて画像光の投写を行うものである。
【００９９】
開示された投写表示プログラムは、乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得ステップと、上記撮像画像データに基づいて、上記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成ステップと、光源から出射される光を、上記輪郭像データを含むデータに基づいて空間変調し、上記空間変調して得られた画像光を上記乗り物における投写面に投写する投写表示ステップと、をコンピュータに実行させるためのプログラムである。
【産業上の利用可能性】
【０１００】
本発明は、特に、後退する際に後方が直視しにくいバス、トラック、建機、重機、又は、ダンプカー等の乗り物に搭載して利便性が高く、有効である。
【符号の説明】
【０１０１】
１００  ＨＵＤ
１  フロントウインドシールド
２  投写面
３  ダッシュボード
４  制御ユニット
５  拡散部材
６  反射ミラー
７  凹面鏡
１０  自動車
１１  撮像部
４０  光源ユニット
４０Ａ  光源制御部
４１ｒ  Ｒ光源
４１ｇ  Ｇ光源
４１ｂ  Ｂ光源
４２ｒ、４２ｇ、４２ｂ  コリメータレンズ
４３  ダイクロイックプリズム
４４  光変調素子
４５  駆動部
６０  システム制御部
６１  撮像画像データ取得部
６２  輪郭像データ生成部
６３  表示情報入力部
６４  物体検知部
１１０，２１０  輪郭画像
１１０Ａ，１１０Ｂ  自動車の輪郭
１１０Ｃ  白線の輪郭
１２０  障害物
２１０Ａ，２１０Ｂ  自動車の輪郭を示す丸記号の集合体
２１０Ｃ  白線を示す星記号の集合体
３００  物体
３０１  白線
３００Ａ  物体の輪郭
３０１Ａ  白線の輪郭
【図１】
2017145546.tif 000003
【図２】
2017145546.tif 000004
【図３】
2017145546.tif 000005
【図４】
2017145546.tif 000006
【図５】
2017145546.tif 000007
【図６】
2017145546.tif 000008
【図７】
2017145546.tif 000009
【図８】
2017145546.tif 000010
【図９】
2017145546.tif 000011
【図１０】
2017145546.tif 000012
【図１１】
2017145546.tif 000013
【図１２】
2017145546.tif 000014
【図１３】
2017145546.tif 000015
【図１４】
2017145546.tif 000016
【手続補正書】
【提出日】平成30年8月1日(2018.8.1)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得部と、
前記撮像画像データに基づいて、前記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成部と、
光源から出射される光を、前記輪郭像データを含む画像データに基づいて空間変調し、前記空間変調して得られた画像光を前記乗り物における投写面に投写する投写表示部と、
前記撮像画像データから物体を検出する物体検出部と、を備え、
前記投写表示部は、前記物体検出部により検出された物体の面積が閾値以下の場合には、前記輪郭像データにおける当該物体に対応する部分を、前記撮像画像データのうちの当該物体に対応する部分に置換した後の置換後輪郭像データに基づいて画像光の投写を行い、前記物体検出部により検出された物体の面積が前記閾値を超える場合には、前記輪郭像データに基づいて画像光の投写を行う投写型表示装置。
【請求項２】
請求項１記載の投写型表示装置であって、
前記乗り物は、運転者から見て前記乗り物のフロントウインドシールドの前方に進行する前進モードと、前記前方の反対方向である前記乗り物の後方に進行する後退モードとが設定可能であり、
前記撮像部は、前記乗り物の前記後方を撮像し、
前記投写表示部は、前記乗り物が前記後退モードに設定されたタイミングに同期して、前記輪郭像データを含む画像データに基づく画像光の投写を開始する投写型表示装置。
【請求項３】
請求項２記載の投写型表示装置であって、
前記投写表示部は、前記乗り物が前記後退モードに設定されてから予め決められた期間において、前記輪郭像データを含む画像データに基づく画像光の投写を行う投写型表示装置。
【請求項４】
乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得ステップと、
前記撮像画像データに基づいて、前記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成ステップと、
光源から出射される光を、前記輪郭像データを含むデータに基づいて空間変調し、前記空間変調して得られた画像光を前記乗り物における投写面に投写する投写表示ステップと、
前記撮像画像データから物体を検出する物体検出ステップと、を備え、
前記投写表示ステップでは、前記物体検出ステップにより検出された物体の面積が閾値以下の場合には、前記輪郭像データにおける当該物体に対応する部分を、前記撮像画像データのうちの当該物体に対応する部分に置換した後の置換後輪郭像データに基づいて画像光の投写を行い、前記物体検出ステップにより検出された物体の面積が前記閾値を超える場合には、前記輪郭像データに基づいて画像光の投写を行う投写表示方法。
【請求項５】
請求項４記載の投写表示方法であって、
前記乗り物は、運転者から見て前記乗り物のフロントウインドシールドの前方に進行する前進モードと、前記前方の反対方向である前記乗り物の後方に進行する後退モードとが設定可能であり、
前記撮像部は、前記乗り物の前記後方を撮像し、
前記投写表示ステップは、前記乗り物が前記後退モードに設定されたタイミングに同期して、前記輪郭像データに基づく画像光の投写を開始する投写表示方法。
【請求項６】
請求項５記載の投写表示方法であって、
前記投写表示ステップは、前記乗り物が前記後退モードに設定されてから予め決められた期間において、前記輪郭像データに基づく画像光の投写を行う投写表示方法。
【請求項７】
乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得ステップと、
前記撮像画像データに基づいて、前記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成ステップと、
光源から出射される光を、前記輪郭像データを含むデータに基づいて空間変調し、前記空間変調して得られた画像光を前記乗り物における投写面に投写する投写表示ステップと、
前記撮像画像データから物体を検出する物体検出ステップと、をコンピュータに実行させるための投写表示プログラムであって、
前記投写表示ステップでは、前記物体検出ステップにより検出された物体の面積が閾値以下の場合には、前記輪郭像データにおける当該物体に対応する部分を、前記撮像画像データのうちの当該物体に対応する部分に置換した後の置換後輪郭像データに基づいて画像光の投写を行い、前記物体検出ステップにより検出された物体の面積が前記閾値を超える場合には、前記輪郭像データに基づいて画像光の投写を行う投写表示プログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
本発明の投写型表示装置は、乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得部と、前記撮像画像データに基づいて、前記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成部と、光源から出射される光を、前記輪郭像データを含む画像データに基づいて空間変調し、前記空間変調して得られた画像光を前記乗り物における投写面に投写する投写表示部と、前記撮像画像データから物体を検出する物体検出部と、を備え、前記投写表示部は、前記物体検出部により検出された物体の面積が閾値以下の場合には、前記輪郭像データにおける当該物体に対応する部分を、前記撮像画像データのうちの当該物体に対応する部分に置換した後の置換後輪郭像データに基づいて画像光の投写を行い、前記物体検出部により検出された物体の面積が前記閾値を超える場合には、前記輪郭像データに基づいて画像光の投写を行うものである。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
本発明の投写表示方法は、乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得ステップと、前記撮像画像データに基づいて、前記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成ステップと、光源から出射される光を、前記輪郭像データを含むデータに基づいて空間変調し、前記空間変調して得られた画像光を前記乗り物における投写面に投写する投写表示ステップと、前記撮像画像データから物体を検出する物体検出ステップと、を備え、前記投写表示ステップでは、前記物体検出ステップにより検出された物体の面積が閾値以下の場合には、前記輪郭像データにおける当該物体に対応する部分を、前記撮像画像データのうちの当該物体に対応する部分に置換した後の置換後輪郭像データに基づいて画像光の投写を行い、前記物体検出ステップにより検出された物体の面積が前記閾値を超える場合には、前記輪郭像データに基づいて画像光の投写を行うものである。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
本発明の投写表示プログラムは、乗り物の周囲を撮像する撮像部により撮像して得られた撮像画像データを取得する撮像画像データ取得ステップと、
前記撮像画像データに基づいて、前記撮像画像データに基づく撮像画像の輪郭を表す輪郭像データを生成する輪郭像データ生成ステップと、
光源から出射される光を、前記輪郭像データを含むデータに基づいて空間変調し、前記空間変調して得られた画像光を前記乗り物における投写面に投写する投写表示ステップと、前記撮像画像データから物体を検出する物体検出ステップと、をコンピュータに実行させるための投写表示プログラムであって、前記投写表示ステップでは、前記物体検出ステップにより検出された物体の面積が閾値以下の場合には、前記輪郭像データにおける当該物体に対応する部分を、前記撮像画像データのうちの当該物体に対応する部分に置換した後の置換後輪郭像データに基づいて画像光の投写を行い、前記物体検出ステップにより検出された物体の面積が前記閾値を超える場合には、前記輪郭像データに基づいて画像光の投写を行うものである。
【国際調査報告】
2017145546.tif 000017
2017145546.tif 000018
2017145546.tif 000019
2017145546.tif 000020