(57)【要約】【課題】運転者の快適性を向上させることができる表示装置、表示制御方法、およびプログラムを提供すること。【解決手段】風景に重畳させて画像を観者に視認させる画像生成装置と、前記画像生成装置を制御する制御装置と、を備え、前記制御装置は、前記画像の観者の前記画像の示す情報への理解度合を推定し、前記推定した理解度合に応じて前記画像の誘目性を変化させるように前記投光装置を制御する、表示装置である。【選択図】図４
2020024141.tif 000002
【特許請求の範囲】
【請求項１】
風景に重畳させて画像を観者に視認させる画像生成装置と、
前記画像生成装置を制御する制御装置と、を備え、
前記制御装置は、前記画像の観者の前記画像の示す情報への理解度合を推定し、前記推定した理解度合に応じて前記画像の誘目性を変化させるように前記画像生成装置を制御する、
表示装置。
【請求項２】
前記制御装置は、前記理解度合が所定の理解度合に到達したと推定した場合、前記誘目性を低下させる、
請求項１に記載の表示装置。
【請求項３】
前記制御装置は、前記観者が前記画像の示す情報に対応付けられた所定の応答動作をした場合に、前記理解度合が所定の理解度合に到達したと推定する、
請求項２に記載の表示装置。
【請求項４】
前記制御装置は、前記観者が前記画像の投影位置を所定の確認時間以上視認した場合に、前記理解度合が所定の理解度合に到達したと推定する、
請求項２に記載の表示装置。
【請求項５】
前記制御装置は、前記画像が理解されたのちに表示する次の像が存在する場合、前記画像の誘目性を低下させた状態で前記次の像を表示させる、
請求項２に記載の表示装置。
【請求項６】
前記制御装置は、前記観者が、前記画像の投影の前に前記画像に対応付けられた所定の応答動作をした場合に、投影される予定の画像の示す情報について、既に所定の理解度合に到達していると推定し、前記画像の誘目性をあらかじめ低下させた状態で表示させる、
請求項３に記載の表示装置。
【請求項７】
前記画像生成装置は、
前記画像を光として出力する投光装置と、
前記光の経路上に設けられ、所定の位置から前記光が虚像として形成される位置までの距離を調節可能な光学機構と、
前記光学機構を通過した光を反射体に向けて反射する凹面鏡と、
前記光学機構における前記距離を調節する第１アクチュエータと、
前記凹面鏡の反射角度を調節する第２アクチュエータと、を有する、
請求項１から６のうち何れか１項に記載の表示装置。
【請求項８】
風景に重畳させて画像を観者に視認させる画像生成装置と、
前記画像生成装置を制御する制御装置と、を備え、
前記制御装置は、前記画像の観者が前記画像の示す情報に対応付けられた所定の応答動作をした場合に、前記画像の誘目性を変化させるように前記画像生成装置を制御する、
表示装置。
【請求項９】
風景に重畳させて画像を観者に視認させる画像生成装置を制御するコンピュータが、
前記画像の観者の前記画像の示す情報への理解度合を推定し、
前記推定した理解度合に応じて前記画像の誘目性を変化させるように前記画像生成装置を制御する、
表示制御方法。
【請求項１０】
風景に重畳させて画像を観者に視認させる画像生成装置を制御するコンピュータに、
前記画像の観者の前記画像の示す情報への理解度合を推定させ、
前記推定させた理解度合に応じて前記画像の誘目性を変化させるように前記画像生成装置を制御させる、
プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置、表示制御方法、およびプログラムに関する。
【背景技術】
【０００２】
従来、フロントウインドシールドに運転者向けの基本的な情報に関する画像を表示するヘッドアップディスプレイ装置（以下、ＨＵＤ（Head Up Display）装置と称する）が知られている（例えば、特許文献１参照）。このＨＵＤ装置を用いて、障害物や注意喚起、進行方向を示す各種マークを車両前方の風景と重ねて表示させることで、運転者は、運転時の視線の方向を前方に維持しながら、表示される各種情報を把握することができる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１７−９１１１５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の技術では、運転者が既に表示内容を把握した場合であっても同一内容のＨＵＤ表示が表示され続け、運転者がＨＵＤ表示を煩わしく感じる可能性があった。
【０００５】
本発明は、このような事情を考慮してなされたものであり、運転者の快適性を向上させることができる表示装置、表示制御方法、およびプログラムを提供することを目的の一つとする。
【課題を解決するための手段】
【０００６】
この発明に係る表示装置、表示制御方法、およびプログラムは、以下の構成を採用した。
（１）：この発明の一態様に係る表示装置は、風景に重畳させて画像を観者に視認させる画像生成装置と、前記画像生成装置を制御する制御装置と、を備え、前記制御装置は、前記画像の観者の前記画像の示す情報への理解度合を推定し、前記推定した理解度合に応じて前記画像の誘目性を変化させるように前記画像生成装置を制御する、表示装置である。
【０００７】
（２）：上記（１）の態様において、前記制御装置は、前記理解度合が所定の理解度合に到達したと推定した場合、前記誘目性を低下させるものである。
【０００８】
（３）：上記（２）の態様において、前記制御装置は、前記観者が前記画像の示す情報に対応付けられた所定の応答動作をした場合に、前記理解度合が所定の理解度合に到達したと推定するものである。
【０００９】
（４）：上記（２）の態様において、前記制御装置は、前記観者が前記画像の投影位置を所定の確認時間以上視認した場合に、前記理解度合が所定の理解度合に到達したと推定するものである。
【００１０】
（５）：上記（２）の態様において、前記制御装置は、前記画像が理解されたのちに表示する次の像が存在する場合、前記画像の誘目性を低下させた状態で前記次の像を表示させるものである。
【００１１】
（６）：上記（３）の態様において、前記制御装置は、前記観者が、前記画像の投影の前に前記画像に対応付けられた所定の応答動作をした場合に、投影される予定の画像の示す情報について、既に所定の理解度合に到達していると推定し、前記画像の誘目性をあらかじめ低下させた状態で表示させるものである。
【００１２】
（７）：上記（１）から（６）のいずれかの態様において、前記画像生成装置は、前記画像を光として出力する投光装置と、前記光の経路上に設けられ、所定の位置から前記光が虚像として形成される位置までの距離を調節可能な光学機構と、前記光学機構を通過した光を反射体に向けて反射する凹面鏡と、前記光学機構における前記距離を調節する第１アクチュエータと、前記凹面鏡の反射角度を調節する第２アクチュエータと、を有するものである。
【００１３】
（８）：この発明の一態様に係る表示装置は、風景に重畳させて画像を観者に視認させる画像生成装置と、前記画像生成装置を制御する制御装置と、を備え、前記制御装置は、前記画像の観者が前記画像の示す情報に対応付けられた所定の応答動作をした場合に、前記画像の誘目性を変化させるように前記投光装置を制御する表示装置である。
【００１４】
（９）：この発明の一態様に係る表示制御方法は、風景に重畳させて画像を観者に視認させる画像生成装置を制御するコンピュータが、前記画像の観者の前記画像の示す情報への理解度合を推定し、前記推定した理解度合に応じて前記画像の誘目性を変化させるように前記画像生成装置を制御する、表示制御方法である。
【００１５】
（１０）：この発明の一態様に係るプログラムは、風景に重畳させて画像を観者に視認させる画像生成装置を制御するコンピュータに、前記画像の観者の前記画像の示す情報への理解度合を推定させ、前記推定させた理解度合に応じて前記画像の誘目性を変化させるように前記画像生成装置を制御させる、プログラムである。
【発明の効果】
【００１６】
（１）〜（１０）の態様によれば、運転者の理解度合に応じて情報の表示を変化させることができる。
【図面の簡単な説明】
【００１７】
【図１】実施形態に係る表示装置１００が搭載された車両Ｍの車室内の構成を例示した図である。
【図２】実施形態の操作スイッチ１３０について説明するための図である。
【図３】表示装置１００の部分構成図である。
【図４】表示制御装置１５０を中心とした表示装置１００の構成例を示す図である
【図５】表示制御装置１５０により表示させる虚像ＶＩの一例を示す図である。
【図６】推定部１５２が運転者の理解度合を推定する際の期待動作の一例を示す図である。
【図７】推定部１５２が運転者の理解度合を推定する際の期待動作の他の一例を示す図である。
【図８】表示制御装置１５０により表示させる虚像ＶＩの誘目性低下条件の一例を示す図である。
【図９】表示装置１００により実行される処理の流れを示すフローチャートである。
【図１０】表示制御装置１５０により表示させる虚像ＶＩの表示条件の他の一例を示す図である。
【発明を実施するための形態】
【００１８】
以下、図面を参照し、本発明の表示装置、表示制御方法、およびプログラムの実施形態について説明する。表示装置は、例えば、車両（以下、車両Ｍと称する）に搭載され、風景に重畳させて画像を視認させる装置である。表示装置は、ＨＵＤ装置と称することができる。一例として、表示装置は、車両Ｍのフロントウインドシールドに画像を含む光を投光することで、観者に虚像を視認させる装置である。観者は、例えば運転者であるが、運転者以外の乗員であってもよい。また、表示装置は、車両Ｍのフロントウインドシールドに取り付けられた光透過性を有する表示装置（例えば液晶ディスプレイや有機ＥＬ（Electroluminescence）によって実現されてもよいし、人が身体に装着するデバイスが有する透明な部材（バイザー、眼鏡のレンズなど）に投光し、または光透過性の表示装置が取り付けられたものであってもよい。以下の説明では、表示装置は、車両Ｍに搭載され、フロントウインドシールドに画像を含む光を投光する装置であるものとする。
【００１９】
以下の説明において、適宜、ＸＹＺ座標系を用いて位置関係等を説明する。
【００２０】
［全体構成］
図１は、実施形態に係る表示装置１００が搭載された車両Ｍの車室内の構成を例示した図である。車両Ｍには、例えば、車両Ｍの操舵を制御するステアリングホイール１０と、車外と車室内とを区分するフロントウインドシールド（反射体の一例）２０と、インストルメントパネル３０とが設けられる。フロントウインドシールド２０は、光透過性を有する部材である。表示装置１００は、例えば、運転席４０の前方のフロントウインドシールド２０の一部に設けられる表示可能領域Ａ１に画像を含む光を投射する（投光する）ことで、運転席に着座した運転者に虚像ＶＩを視認させる。
【００２１】
表示装置１００は、例えば、運転者の運転を支援するための情報を画像化した像を、虚像ＶＩとして運転者に視認させる。運転者の運転を支援するための情報には、例えば、車両Ｍの速度、駆動力配分比率、エンジン回転数、運転支援機能の動作状態シフト位置、標識認識結果、交差点位置等の情報が含まれる。運転支援機能とは、例えば、方向指示機能、ＡＣＣ（Adaptive Cruise Control）、ＬＫＡＳ（Lane Keep Assist System）、ＣＭＢＳ（Collision Mitigation Brake System）、トラフィックジャムアシスト機能等である。
【００２２】
また、車両Ｍには、表示装置１００の他に、第１表示装置５０−１や第２表示装置５０−２が設けられてよい。第１表示装置５０−１は、例えば、インストルメントパネル３０における運転席４０の正面付近に設けられ、運転者がステアリングホイール１０の間隙から、或いはステアリングホイール１０越しに視認可能な表示装置である。また、第２表示装置５０−２は、例えば、インストルメントパネル３０の中央部に取り付けられる。第２表示装置５０−２は、例えば、車両Ｍに搭載されるナビゲーション装置（不図示）により実行されるナビゲーション処理に対応する画像、またはテレビ電話における相手の映像等を表示する。また、第２表示装置５０−２は、テレビ番組を表示したり、ＤＶＤを再生したり、ダウンロードされた映画等のコンテンツを表示してもよい。
【００２３】
また、車両Ｍには、表示装置１００による表示のオン／オフの切り替え指示や、虚像ＶＩの位置を調節する指示を受け付ける操作スイッチ（操作部の一例）１３０が設けられる。操作スイッチ１３０は、例えば、運転席４０に着座した運転者が大きく体勢を変えることなく操作可能な位置に取り付けられている。操作スイッチ１３０は、例えば、第１表示装置５０−１の前方に設けられていてもよく、ステアリングホイール１０のボス部に設けられていてもよく、ステアリングホイール１０とインストルメントパネル３０とを連結するスポークに設けられていてもよい。
【００２４】
図２は、実施形態の操作スイッチ１３０について説明するための図である。操作スイッチ１３０は、例えば、メインスイッチ１３２と、調節スイッチ１３４および１３６とを含む。メインスイッチ１３２は、表示装置１００のオン・オフを切り替えるスイッチである。
【００２５】
調節スイッチ１３４は、例えば、運転者の視線位置Ｐ１から表示可能領域Ａ１を透過した空間にあるように視認される虚像ＶＩの位置を、鉛直方向Ｚに関して上側（以下、上方向と称する）に移動させる指示を受け付けるためのスイッチである。運転者は、調節スイッチ１３４を押し続けることで、表示可能領域Ａ１内で虚像ＶＩの視認位置を上方向に継続して移動させることができる。
【００２６】
調節スイッチ１３６は、前述した虚像ＶＩの位置を鉛直方向Ｚに関して下側（以下、下方向と称する）に移動させる指示を受け付けるためのスイッチである。運転者は、調節スイッチ１３６を押し続けることで、表示可能領域Ａ１内で虚像ＶＩの視認位置を下方向に継続して移動させることができる。
【００２７】
また、調節スイッチ１３４は、虚像ＶＩの位置を上方向に移動させるのに代えて（または加えて）、視認される虚像ＶＩの輝度を上げるためのスイッチであってもよい。また、調節スイッチ１３６は、虚像ＶＩの位置を下方向に移動するのに代えて（または加えて）、視認される虚像ＶＩの輝度を下げるためのスイッチであってもよい。調節スイッチ１３４、１３６が受け付ける指示の内容は、何らかの操作に基づいて切り替えられてもよい。何らかの操作とは、例えば、メインスイッチ１３２の長押し操作である。また、操作スイッチ１３０は、図２に示す各スイッチに加えて、例えば、表示内容を選択するスイッチや、専ら表示される虚像の輝度を調節するスイッチを含んでよい。
【００２８】
図３は、表示装置１００の部分構成図である。表示装置１００は、例えば、表示器（画像生成装置の一例）１１０と、表示制御装置（制御装置の一例）１５０とを備える。表示器１１０は、例えば、筐体１１５内に、投光装置１２０と、光学機構１２２と、平面鏡１２４と、凹面鏡１２６と、透光カバー１２８とを収納する。これらの他、表示装置１００は、各種センサやアクチュエータを備えるが、これらについては後述する。
【００２９】
投光装置１２０は、例えば、光源１２０Ａと、表示素子１２０Ｂとを備える。光源１２０Ａは、例えば、冷陰極管であり、運転者に視認させる虚像ＶＩに対応する可視光を出力する。表示素子１２０Ｂは、光源１２０Ａからの可視光の透過を制御する。表示素子１２０Ｂは、例えば、薄膜トランジスタ（ＴＦＴ）型の液晶表示装置（ＬＣＤ）である。また、表示素子１２０Ｂは、複数の画素のそれぞれを制御して、光源１２０Ａからの可視光の色要素ごとの透過程度を制御することで、虚像ＶＩに画像要素を含ませ、虚像ＶＩの形態（見え方）を決定付ける。以下では、表示素子１２０Ｂを透過し画像が含まれた可視光を画像光ＩＬという。なお、表示素子１２０Ｂは、有機ＥＬディスプレイであってもよく、この場合、光源１２０Ａは省略されてよい。
【００３０】
光学機構１２２は、例えば、一以上のレンズを含む。各レンズの位置は、例えば光軸方向に調節可能となっている。光学機構１２２は、例えば、投光装置１２０が出力する画像光ＩＬの経路上に設けられ、投光装置１２０から入射した画像光ＩＬを通過させて、フロントウインドシールド２０に向けて出射する。光学機構１２２は、例えば、レンズの位置を変更することで、運転者の視線位置Ｐ１から、画像光ＩＬによる虚像が形成される形成位置Ｐ２までの距離（以下、虚像視認距離Ｄと称する）を調節することができる。運転者の視線位置Ｐ１は、凹面鏡１２６およびフロントウインドシールド２０によって反射され画像光ＩＬが集光される位置であり、この位置に運転者の目が存在することが想定される位置である。虚像視認距離Ｄは、厳密には上下方向の傾きを持つ線分の距離であるが、以下の説明において「虚像視認距離Ｄが７［ｍ］」などと表現する場合、その距離は水平方向の距離を意味してもよい。
【００３１】
以下の説明において、俯角θを、運転者の視線位置Ｐ１を通る水平面と、運転者の視線位置Ｐ１から形成位置Ｐ２までの線分とがなす角度と定義する。虚像ＶＩが下方に形成されているほど、すなわち、運転者が虚像ＶＩを見る視線方向が下向きであるほど、俯角θは大きくなる。俯角θは、凹面鏡１２６の反射角度φと、後述するように表示素子１２０Ｂにおける元画像の表示位置とに基づいて決定される。反射角度φは、平面鏡１２４により反射された画像光ＩＬが凹面鏡１２６に入射する入射方向と、凹面鏡１２６が画像光ＩＬを出射する出射方向とのなす角である。
【００３２】
平面鏡１２４は、光源１２０Ａにより出射され表示素子１２０Ｂを通過した可視光（すなわち、画像光ＩＬ）を凹面鏡１２６の方向に反射させる。
【００３３】
凹面鏡１２６は、平面鏡１２４から入射した画像光ＩＬを反射し、フロントウインドシールド２０に向かって出射する。凹面鏡１２６は、車両Ｍの幅方向の軸であるＹ軸回りに回転（回動）可能に支持される。
【００３４】
透光カバー１２８は、凹面鏡１２６からの画像光ＩＬを透過させてフロントウインドシールド２０に到達させると共に、筐体１１５内に埃や塵、水滴などの異物が入り込むことを抑制する。透光カバー１２８は、筐体１１５の上側部材に形成された開口部に設けられる。また、インストルメントパネル３０にも開口部あるいは光透過性部材が設けられ、画像光ＩＬは、透光カバー１２８とインストルメントパネル３０の開口部或いは光透過性部材を透過してフロントウインドシールド２０に到達する。
【００３５】
フロントウインドシールド２０に入射した画像光ＩＬは、フロントウインドシールド２０によって反射され、運転者の視線位置Ｐ１に集光する。このとき、運転者は、画像光ＩＬによって写し出される画像が車両Ｍの前方に表示されているように感じる。
【００３６】
表示制御装置１５０は、運転者に視認させる虚像ＶＩの表示を制御する。図４は、表示制御装置１５０を中心とした表示装置１００の構成例を示す図である。図４の例では、表示制御装置１５０に加えて、表示装置１００に含まれるレンズ位置センサ１６２と、凹面鏡角度センサ１６４と、環境センサ１６６と、情報取得装置１６８と、操作スイッチ１３０と、光学系コントローラ１７０と、ディスプレイコントローラ１７２と、レンズアクチュエータ（第１アクチュエータの一例）１８０と、凹面鏡アクチュエータ（第２アクチュエータの一例）１８２と、投光装置１２０とを示している。
【００３７】
レンズ位置センサ１６２は、光学機構１２２に含まれる一以上のレンズの位置を検出する。凹面鏡角度センサ１６４は、凹面鏡１２６の図３に示すＹ軸回りの回転角度を検出する。環境センサ１６６は、例えば、投光装置１２０や光学機構１２２の温度を検出する、また、環境センサ１６６は、車両Ｍの周囲の照度を検出する。情報取得装置１６８は、例えば、車両Ｍに搭載されたＥＣＵ（Electronic Control Unit）等（例えばエンジンＥＣＵ、ステアリングＥＣＵといったもの）であり、不図示のセンサの出力に基づいて車両Ｍの速度やステアリング操舵角等を取得する。また、情報取得装置１６８は、情報取得装置１６８車載カメラの画像を解析して、運転者を含む乗員の動作や表情を検出してもよい。
【００３８】
表示制御装置１５０は、例えば、推定部１５２と、駆動制御部１５４と、表示態様変更部１５６と、記憶部１５８とを備える。これらのうち記憶部１５８を除く構成要素は、それぞれ、例えば、ＣＰＵ（Central Processing Unit）等のハードウェアプロセッサがプログラム（ソフトウェア）を実行することにより実現される。また、これらの構成要素のうち一部または全部は、ＬＳＩ（Large Scale Integration）やＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-Programmable Gate Array）、ＧＰＵ（Graphics Processing Unit）等のハードウェア（回路部；circuitryを含む）によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。プログラムは、予め記憶部１５８等の記憶装置に格納されていてもよいし、ＤＶＤやＣＤ−ＲＯＭ等の着脱可能な記憶媒体に格納されており、記憶媒体がドライブ装置に装着されることで表示制御装置１５０のＨＤＤやフラッシュメモリにインストールされてもよい。
【００３９】
推定部１５２は、情報取得装置１６８により検出されるステアリングホイール１０等の運転操作子の操作量（例えば前述したステアリング操舵角）や、情報取得装置１６８運転者の動作や表情に基づいて、運転者の虚像ＶＩの表示内容の理解度合を推定する。推定部１５２は、推定された理解度合を表示態様変更部１５６に出力する。
【００４０】
駆動制御部１５４は、例えば、操作スイッチ１３０からの操作内容等に応じて、運転者が視認する虚像ＶＩの位置を調節する。例えば、駆動制御部１５４は、調節スイッチ１３４の操作が受け付けられた場合に、虚像ＶＩの位置を表示可能領域Ａ１内の上方向に移動させる第１制御信号を光学系コントローラ１７０に出力する。虚像ＶＩを上方向に移動させるとは、例えば、図３に示す運転者の視線位置に対する水平方向と、視線位置から虚像ＶＩが視認される方向とのなす俯角θ１を小さくすることである。また、駆動制御部１５４は、調節スイッチ１３６の操作が受け付けられた場合に、虚像ＶＩの位置を表示可能領域Ａ１内の下方向に移動させる第１制御信号を光学系コントローラ１７０に出力する。虚像ＶＩをした下方向に移動させるとは、例えば、俯角θ１を大きくすることである。
【００４１】
また、駆動制御部１５４は、例えば、情報取得装置１６８により検出される車両Ｍの速度に基づいて、虚像視認距離Ｄを調節するための第２制御信号を、光学系コントローラ１７０に出力する。なお、駆動制御部１５４は、光学機構１２２に、虚像視認距離Ｄを車両Ｍの速度に応じて変更するよう制御させる。駆動制御部１５４は、例えば、車両Ｍの速度が大きい場合に虚像視認距離Ｄをより大きくさせ、速度が小さい場合には虚像視認距離Ｄを小さくさせる。また、駆動制御部１５４は、光学機構１２２に、車両Ｍが停車中の虚像視認距離Ｄを最小とするよう制御させる。
【００４２】
表示態様変更部１５６は、推定部１５２により出力された理解度合に応じて虚像ＶＩの表示様態を変更する。表示態様変更部１５６による表示様態の変更については後述する。記憶部１５８は、例えば、ＨＤＤやＲＡＭ（Random Access Memory）、フラッシュメモリなどにより実現される。記憶部１５８は、推定部１５２および表示態様変更部１５６によって参照される設定情報１５８ａを記憶する。設定情報１５８ａは、推定結果と表示様態との関係を規定した情報である。
【００４３】
光学系コントローラ１７０は、駆動制御部１５４により受け付けた第１制御信号または第２制御信号に基づいて、レンズアクチュエータ１８０または凹面鏡アクチュエータ１８２を駆動する。レンズアクチュエータ１８０は、光学機構１２２に連結されたモータ等を含み、光学機構１２２における一以上のレンズの位置を移動させ、虚像視認距離Ｄを調節する。凹面鏡アクチュエータ１８２は、凹面鏡１２６の回転軸に連結されたモータ等を含み、凹面鏡１２６の反射角度を調節する。
【００４４】
例えば、光学系コントローラ１７０は、駆動制御部１５４から取得した第１制御信号情報に基づいて、レンズアクチュエータ１８０を駆動し、駆動制御部１５４から取得した第２制御信号情報に基づいて、凹面鏡アクチュエータ１８２を駆動する。
【００４５】
レンズアクチュエータ１８０は、光学系コントローラ１７０からの駆動信号を取得し、取得した駆動信号に基づいて、モータ等を駆動させて光学機構１２２に含まれる一以上のレンズの位置を移動させる。これにより、虚像視認距離Ｄが調節される。
【００４６】
凹面鏡アクチュエータ１８２は、光学系コントローラ１７０からの駆動信号を取得し、取得した駆動信号に基づいて、モータ等を駆動させて凹面鏡アクチュエータ１８２をＹ軸回りに回転させて、凹面鏡１２６の反射角度φを調節する。これにより、俯角θが調節される。
【００４７】
ディスプレイコントローラ１７２は、表示態様変更部１５６からの表示制御情報に基づいて、投光装置１２０に所定の画像光ＩＬを投光させる。
【００４８】
［理解度合の推定方法］
以下、推定部１５２による運転者の虚像ＶＩに対する理解度合の推定方法について説明する。推定部１５２は、例えば、ナビゲーション装置により実行されるナビゲーション処理と、情報取得装置１６８により検出される運転操作子の操作量とに基づいて、運転者の虚像ＶＩの表示内容が示す情報への理解度合を推定する。
【００４９】
図５は、表示制御装置１５０により表示させる虚像ＶＩの一例を示す図である。表示制御装置１５０は、例えば、情報取得装置１６８によって車両Ｍが交差点に接近し、且つ、車両Ｍが交差点を左折する予定であると検出された場合に、当該交差点を左折することを示すターンバイターンナビゲーション（Turn-by-turn navigation）の虚像ＶＩ１を表示可能領域Ａ１に表示する。
【００５０】
また、推定部１５２は、例えば、虚像ＶＩを表示した後の運転者の操作に基づいて、虚像ＶＩの表示内容が示す情報の理解度合を推定する。図６は、設定情報１５８ａに記憶された、推定部１５２が運転者の理解度合を推定する際の期待動作の一例を示す図である。表示制御装置１５０は、車両Ｍを左折させる場面において、図５に示す虚像ＶＩ１を表示させる。推定部１５２は、虚像ＶＩ１表示の後に、運転者によって図６に示すような左折時に対応付けられた期待動作を実現する運転操作が行われた場合に、運転者が虚像ＶＩを理解したと推定する。図６に示す期待動作は「所定の応答動作」の一例である。
【００５１】
推定部１５２には、車両Ｍが左折する走行場面において、運転者により車速を３０［ｋｐｈ］以下に減速する操作が行われ（図６のＮｏ．１）、且つ、左折することを示すように方向指示器が操作され（図６のＮｏ．２）、且つ、左折するようにステアリングホイール１０等の操作子が操作される（図６のＮｏ．３）ことを、期待動作として設定が記憶されている。推定部１５２は、車両Ｍが左折する予定である場合に、情報取得装置１６８により運転者により期待動作が行われること、またはその期待動作が開始されたことが検出された場合に、所定の理解度合に到達したと判定する。なお、期待動作が複数の動作からなる場合、その操作順（例えば、図６のＮｏ．１〜Ｎｏ．３の順番）が設定されてもよい。
【００５２】
また、期待動作が複数の動作からなる場合、必須の期待動作と任意（非必須）の期待動作が設定されてもよい。例えば、図５に示す虚像ＶＩ２の４領域ＣＲ１〜ＣＲ４において車両Ｍが交差点を左折する際に通過する横断歩道を含む領域ＣＲ１およびＣＲ２は運転者によって必ず目視確認されることが望ましいため、領域ＣＲ１およびＣＲ２を目視確認することは必須の期待動作として設定される。同様に、車両Ｍが交差点を左折する際に通過する横断歩道を、車両Ｍと同じタイミングで横断する歩行者等の交通参加者の有無を確認するため、領域ＣＲ３を目視確認することは必須の期待動作として設定される。一方、領域ＣＲ４の交通参加者の有無は車両Ｍの運転制御に影響する可能性が低いことから、任意の期待動作として設定されてもよい。
【００５３】
表示態様変更部１５６は、必須の期待動作が行われるまでは、虚像ＶＩ２を表示し続け、必須の動作が行われたことを情報取得装置１６８により検出された場合に、虚像ＶＩ２の誘目性を低下させる。また、表示態様変更部１５６は、図５の例において、虚像ＶＩ２を表示し続けた場合であって、必須の期待動作が行われたことを情報取得装置１６８により検出されずに、車両Ｍの左折が終了した場合には、虚像ＶＩ２の誘目性を低下させる。
【００５４】
図７は、設定情報１５８ａに記憶された、推定部１５２が運転者の理解度合を推定する際の期待動作の他の一例を示す図である。推定部１５２は、車両Ｍが交差点を左折する走行場面であり、且つ、交差点付近に歩行者が検知された場合、情報取得装置１６８によって検出された歩行者の移動ベクトルと、車両Ｍの移動ベクトルが重なることが予想されるときにおいて、所定の車速である１０［ｋｐｈ］以下まで減速した場合には、歩行者を認識していると推定する。
【００５５】
［変形例］
図６および図７に示した車両Ｍが交差点を左折する倉庫場面における期待動作は、車両Ｍと交差点との距離毎に段階的条件が設けられてもよい。図８は、設定情報１５８ａに記憶された、表示制御装置１５０により表示させる虚像ＶＩ１の削除条件の一例を示す図である。表示制御装置１５０は、車両Ｍが交差点を左折する予定である場合、且つ、図８に示す交差点を左折する場面において対応づけられた誘目性低下条件を満たす場合に、虚像ＶＩ１を表示可能領域Ａ１から削除する。表示制御装置１５０は、例えば、図８に示すＮｏ．１〜Ｎｏ．３のすべての条件を満たしたら虚像ＶＩの視認性を低下させる。また、図８に示すＮｏ．１〜Ｎｏ．３の段階毎の条件を満たしていたら視認性を低下させ、次の段階で条件を満たしていない場合には、虚像ＶＩの視認性を向上させる。
【００５６】
推定部１５２は、例えば、情報取得装置１６８により車両Ｍが交差点まで１０［ｍ］以内の距離に位置し、且つ、車両Ｍの車速が１０［ｋｐｈ］以上であり、且つ、道路端から１０［ｍ］以上であると検出された場合に、運転者が左折の準備をしていない、または左折への準備が不十分であると推定する。一方、推定部１５２は、情報取得装置１６８により車両Ｍが交差点まで１０［ｍ］以内の距離に位置し、且つ、車両Ｍの車速が１０［ｋｐｈ］未満であり、且つ、道路端から１０［ｍ］未満であると検出された場合に、運転者が既に左折することを理解しているものと推定する。
【００５７】
［処理フロー］
図９は、実施形態の表示装置１００により実行される処理の流れを示すフローチャートである。まず、情報取得装置１６８は車両Ｍの走行場面を認識する（ステップＳ１００）、次に、推定部１５２は、表示条件を満たすか否かを判定する（ステップＳ１０２）。推定部１５２は、表示条件を満たすと判定した場合、表示制御装置１５０に虚像ＶＩ１を表示させる（ステップＳ１０４）。推定部１５２は、表示条件を満たすと判定しなかった場合、フローチャートの処理を終了する。
【００５８】
ステップＳ１０４の処理の後、推定部１５２は、期待動作が実現されたか否かに基づいて、運転者の虚像ＶＩの理解度合を推定する（ステップＳ１０６）。推定部１５２は、期待動作が実行されなかった場合、一定時間経過後に再度ステップＳ１０６の処理を行う。推定部１５２は、期待動作が実行された場合、運転者の虚像ＶＩ１の表示内容に対する理解度合が所定の理解度合に到達していると判定し、虚像ＶＩ１の誘目性を低下させる（ステップＳ１０８）。以上、本フローチャートの処理の説明を終了する。
【００５９】
［虚像の変更］
また、推定部１５２は、運転者の操作に応じて、表示制御装置１５０により表示させる虚像ＶＩを変更する。図５に戻り、推定部１５２は、運転者が虚像ＶＩ１の表示を理解し、車両Ｍを左折させるための運転制御を開始したと判定した場合、虚像ＶＩ１の誘目性を低下させると同時に、次に運転者に注意を促したい情報を新たな虚像ＶＩ２として表示する。
【００６０】
推定部１５２は、左折することを示すように方向指示器が操作されたことが情報取得装置１６８により検出された場合に、運転者がターンバイターンナビゲーションの虚像ＶＩ１を理解したと推定し、虚像ＶＩ１の誘目性を低下させる。誘目性の低下については後述する。さらに、推定部１５２は、交差点の横断歩道に歩行者や自転車等の交通参加者がいないことの確認を促す虚像ＶＩ２を表示する。表示装置１００は、表示可能領域Ａ１と実際の風景の領域ＣＲ１〜ＣＲ４とを重畳させることができる場合には、領域ＣＲ１〜ＣＲ４に重ねて虚像ＶＩ２を表示してもよい。表示装置１００は、表示可能領域Ａ１と実際の風景の領域ＣＲ１〜ＣＲ４とを重畳させることができない場合には、領域ＣＲ１〜ＣＲ４を示唆する虚像ＶＩ２を表示する。
【００６１】
［虚像の初期誘目性の低下］
また、推定部１５２は、虚像ＶＩの表示タイミングよりも前に行われた運転者の操作から、虚像ＶＩが含む情報を既に運転者が理解していると推定される場合には、虚像ＶＩの誘目性をあらかじめ低下させた状態で表示させてもよい。例えば、推定部１５２は、図５に示すような交差点を左折する走行場面に差し掛かる前に、運転者が車両Ｍの減速や方向指示器の操作を開始したと情報取得装置１６８により検出された場合には、運転者が交差点で曲がることを理解しており、虚像ＶＩの表示が不要であると推定して、虚像ＶＩの表示を中止する。
【００６２】
［誘目性の変化］
表示態様変更部１５６は、推定部１５２により出力された理解度合に応じて、虚像ＶＩの誘目性を変化させる。表示態様変更部１５６は、推定部１５２により運転者の理解度合が所定の理解度合に達したと推定された場合、虚像ＶＩの誘目性を低下させる。誘目性を低下させるとは、例えば、虚像ＶＩの輝度を標準の強度よりも低下させることや、虚像ＶＩの表示を徐々に削除することや、虚像ＶＩを表示する大きさを小さくすることや、虚像ＶＩを表示する位置を表示可能領域Ａ１の端部に移動させることである。
【００６３】
また、表示態様変更部１５６は、虚像ＶＩの表示開始から一定時間が経過しても、推定部１５２により運転者の理解度合が所定の理解度合に達していないと推定された場合、虚像ＶＩの誘目性を向上させる。誘目性を向上させるとは、例えば、虚像ＶＩを表示する大きさをより大きくすることや、虚像ＶＩを点滅表示させることや、虚像ＶＩの輝度を高くすることである。
【００６４】
［運転マナー・運転テクニック向上支援］
また、表示制御装置１５０は、運転者によって期待動作が実施されない場合や、情報取得装置１６８によって検出された運転者の運転マナーが所定の規定を満たさない場合、運転テクニックの改善が望ましい場合等の、虚像ＶＩの視認性低下が想定通り行われないことの理由を運転者に提示して、改善を促してもよい。
【００６５】
図１０は、設定情報１５８ａに記憶された、運転マナーを含む表示条件の一例を示す図である。表示制御装置１５０は、例えば、情報取得装置１６８によって車両Ｍが走行中であると検出された場合であり、情報取得装置１６８によって車両Ｍと前走者との車間距離が適切な距離以下（例えば、４［ｍ］程度）になったと検出された場合、運転者に車間距離を広めるように促す虚像ＶＩを表示する。推定部１５２は、運転者に車間距離を広めるように促す安全車間距離推奨表示コンテンツを虚像ＶＩとして表示した後、車間距離が所定の距離以上になった場合や、運転者が車速を落とす等の操作を行った場合に、所定の理解度合に到達したと推定する。
【００６６】
また、表示制御装置１５０は、例えば、情報取得装置１６８によって車両Ｍと前走者との車間距離が適切な距離以下であり、且つ、早期に車間距離の調節を要する距離（例えば、３［ｍ］程度）以下になったと検出された場合、運転者に車間距離を広めるように警告する虚像ＶＩを表示する。
【００６７】
表示制御装置１５０は、改善の改善が望ましいと判断したタイミングで表示してもよいし、改善の改善が望ましいと判断した走行場面と同様のまたは類似するタイミングで安全車間距離推奨表示コンテンツを虚像ＶＩとして表示する。
【００６８】
表示制御装置１５０は、虚像ＶＩの視認性低下が想定通り行われないことの理由の運転者への提示を、表示装置１００によって行ってもよいし、他の出力装置（例えば、ナビゲーション装置の出力部）から行ってもよい。
【００６９】
［他の推定方法］
推定部１５２は、情報取得装置１６８によって検出された運転者の頭部の動きや、目の動きに基づいて、運転者の理解度合を推定してもよい。推定部１５２は、例えば、運転者の視線位置から推察される運転者の視線と、虚像ＶＩが表示された表示可能領域Ａ１とが所定の確認時間（例えば、０．２［秒］）以上重なったことを情報取得装置１６８によって検出された場合に、虚像ＶＩが少なくとも所定の確認時間目視されたものと推定し、所定の理解度合に到達したと推定する。
【００７０】
上述の例では、推定部１５２は、運転者の操作に基づいて理解度合を推定したが、運転者が虚像ＶＩを理解したことを情報取得装置１６８に特定の言葉（例えば、図５に示す場面であれば「左折」、「分かった」）を含む文節を音声入力が検出された場合に、所定の理解度合に到達したと推定してもよい。また、推定部１５２は、運転者が虚像ＶＩを理解したことを示す任意のジェスチャー（例えば、複数回頷くことや、複数回瞬きすること）をあらかじめ設定し、そのジェスチャーを情報取得装置１６８が検出した場合に、所定の理解度合に到達したと推定してもよい。
【００７１】
［他のＨＵＤ表示領域］
なお、表示装置１００は、フロントウインドシールド２０に直接画像を投影するのに代えて、運転者の位置とフロントウインドシールド２０との間に設けられるコンバイナ等の光透過性反射部材に画像を投影してもよい。
【００７２】
以上説明したように、表示装置１００において、風景に重畳させて画像を運転者等の観者に視認させる表示器１１０と、画像生成装置を制御する表示制御装置１５０と、を備え、表示制御装置１５０は、乗員の投光装置１２０によって投影される虚像ＶＩの示す情報への理解度合を推定する推定部１５２と、推定部１５２により推定された理解度合に応じて虚像ＶＩの誘目性を変化させるように投光装置１２０を制御する表示態様変更部１５６とを備えることで、乗員の虚像ＶＩの理解度合に応じて情報の表示を変化させることにより、運転者の快適性を向上させることができる。
【００７３】
以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
【符号の説明】
【００７４】
１０…ステアリングホイール、２０…フロントウインドシールド、３０…インストルメントパネル、４０…運転席、５０−１…第１表示装置、５０−２…第２表示装置、６２…第２地図情報、１００…表示装置、１１０…表示器、１１５…筐体、１２０…投光装置、１２０Ａ…光源、１２０Ｂ…表示素子、１２２…光学機構、１２４…平面鏡、１２６…凹面鏡、１２８…透光カバー、１３０…操作スイッチ、１３２…メインスイッチ、１３４…調節スイッチ、１３６…調節スイッチ、１５０…表示制御装置、１５２…推定部、１５４…駆動制御部、１５６…表示態様変更部、１６２…レンズ位置センサ、１６４…凹面鏡角度センサ、１６６…環境センサ、１６８…情報取得装置、１７０…光学系コントローラ、１７２…ディスプレイコントローラ、１８０…レンズアクチュエータ、１８２…凹面鏡アクチュエータ、Ａ１…表示可能領域、ＩＬ…画像光、ＶＩ…虚像
【図１】
2020024141.tif 000003
【図２】
2020024141.tif 000004
【図３】
2020024141.tif 000005
【図４】
2020024141.tif 000006
【図５】
2020024141.tif 000007
【図６】
2020024141.tif 000008
【図７】
2020024141.tif 000009
【図８】
2020024141.tif 000010
【図９】
2020024141.tif 000011
【図１０】
2020024141.tif 000012