(57)【要約】【課題】より乗員に分かりやすい経路案内を行うことができる表示システム、表示方法、およびプログラムを提供すること。【解決手段】画像を表示する表示部と、車両の周辺の道路に擬した第１画像と、前記周辺の道路のうち、前記車両に設定された目的地までの経路に基づいて決定される推奨車線に擬した第２画像とを、前記表示部に表示させる表示制御部と、を備え、前記表示制御部は、前記目的地までの経路において、前記車両が進路変更すべき第１地点よりも所定距離手前の第２地点に到達した場合に、前記表示部に、前記車両の進路を案内する第３画像と、前記第２画像とを表示させる、表示システム。【選択図】図１
2020051902.tif 000002
【特許請求の範囲】
【請求項１】
画像を表示する表示部と、
車両の周辺の道路に擬した第１画像と、前記周辺の道路のうち、前記車両に設定された目的地までの経路に基づいて決定される推奨車線に擬した第２画像とを、前記表示部に表示させる表示制御部と、を備え、
前記表示制御部は、前記目的地までの経路において、前記車両が進路変更すべき第１地点よりも所定距離手前の第２地点に到達した場合に、前記表示部に、前記車両の進路を案内する第３画像と、前記第２画像とを表示させる、
表示システム。
【請求項２】
前記表示制御部は、前記第３画像の表示の開始および終了に同期させて、前記第２画像を表示させる、
請求項１に記載の表示システム。
【請求項３】
前記表示制御部は、前記車両が前記第２地点よりも前記第１地点に近い第３地点に到達した場合に、前記第２画像を、進路変更後の車線に重畳して表示させる、
請求項１または２に記載の表示システム。
【請求項４】
前記表示制御部は、前記進路変更後の車線が複数ある場合に、複数の進路変更後の車線のそれぞれに前記第２画像を重畳して表示させる、
請求項３に記載の表示システム。
【請求項５】
前記表示制御部は、前記車両の走行態様に関する画像を表示部に表示させるとともに、前記第２画像を前記走行態様に関する画像の色に対応付けられた色で、前記表示部に表示させる、
請求項１から４のうち、何れか１項に記載の表示システム。
【請求項６】
画像を表示する表示部を備える車両に搭載されたコンピュータが、
前記車両の周辺の道路に擬した第１画像と、前記周辺の道路のうち、前記車両に設定された目的地までの経路に基づいて決定される推奨車線に擬した第２画像とを、前記表示部に表示させ、
前記目的地までの経路において、前記車両が進路変更すべき第１地点よりも所定距離手前の第２地点に到達した場合に、前記表示部に、前記車両の進路を案内する第３画像と、前記第２画像とを表示させる、
表示方法。
【請求項７】
画像を表示する表示部を備える車両に搭載されたコンピュータに、
前記車両の周辺の道路に擬した第１画像と、前記周辺の道路のうち、前記車両に設定された目的地までの経路に基づいて決定される推奨車線に擬した第２画像とを、前記表示部に表示させ、
前記目的地までの経路において、前記車両が進路変更すべき第１地点よりも所定距離手前の第２地点に到達した場合に、前記表示部に、前記車両の進路を案内する第３画像と、前記第２画像とを表示させる、
プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示システム、表示方法、およびプログラムに関する。
【背景技術】
【０００２】
従来、目的地までの経路案内を表示する表示システムにおいて、車両が進路変更すべき分岐地点（例えば、交差点）までの距離が、所定距離以下になると、分岐地点を通過するまでの間、ナビ画面にターンバイターン（Turn by turn）画像を表示する技術が存在する（例えば、特許文献１参照）。特許文献１では、ターンバイターン画像として、現在位置から分岐までの地図画像に、現在位置を示すマークや、進路方向を示す矢印、分岐までの距離を表すメモリが表示される。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】国際公開第２０１７／１０４３３０号
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来技術では、ターンバイターン画像が表示されてから分岐地点までの間のどのタイミングで進路変更を行ったらよいのかが分かりにくい場合や、進路変更すべき分岐地点付近に他の分岐地点がある際に、どの分岐地点で分岐するのかが分かりにくい場合があった。
【０００５】
本発明の態様は、このような事情を考慮してなされたものであり、より乗員に分かりやすい経路案内を行うことができる表示システム、表示方法、およびプログラムを提供することを目的の一つとする。
【課題を解決するための手段】
【０００６】
この発明に係る表示システム、表示方法、およびプログラムは、以下の構成を採用した。
（１）：この発明の一態様に係る表示システムは、画像を表示する表示部と、車両の周辺の道路に擬した第１画像と、前記周辺の道路のうち、前記車両に設定された目的地までの経路に基づいて決定される推奨車線に擬した第２画像とを、前記表示部に表示させる表示制御部と、を備え、前記表示制御部は、前記目的地までの経路において、前記車両が進路変更すべき第１地点よりも所定距離手前の第２地点に到達した場合に、前記表示部に、前記車両の進路を案内する第３画像と、前記第２画像とを表示させる、表示システムである。
【０００７】
（２）：上記（１）の態様において、前記表示制御部は、前記第３画像の表示の開始および終了に同期させて、前記第２画像を表示させるものである。
【０００８】
（３）：上記（１）または（２）の態様において、前記表示制御部は、前記車両が前記第２地点よりも前記第１地点に近い第３地点に到達した場合に、前記第２画像を、進路変更後の車線に重畳して表示させるものである。
【０００９】
（４）：上記（３）の態様において、前記表示制御部は、前記進路変更後の車線が複数ある場合に、複数の進路変更後の車線のそれぞれに前記第２画像を重畳して表示させるものである。
【００１０】
（５）：上記（１）〜（４）のうち何れか一つの態様において、前記表示制御部は、前記車両の走行態様に関する画像を表示部に表示させるとともに、前記第２画像を前記走行態様に関する画像の色に対応付けられた色で、前記表示部に表示させるものである。
【００１１】
（６）：この発明の一態様に係る表示方法は、画像を表示する表示部を備える車両に搭載されたコンピュータが、前記車両の周辺の道路に擬した第１画像と、前記周辺の道路のうち、前記車両に設定された目的地までの経路に基づいて決定される推奨車線に擬した第２画像とを、前記表示部に表示させ、前記目的地までの経路において、前記車両が進路変更すべき第１地点よりも所定距離手前の第２地点に到達した場合に、前記表示部に、前記車両の進路を案内する第３画像と、前記第２画像とを表示させる、表示方法である。
【００１２】
（７）：この発明の一態様に係るプログラムは、画像を表示する表示部を備える車両に搭載されたコンピュータに、前記車両の周辺の道路に擬した第１画像と、前記周辺の道路のうち、前記車両に設定された目的地までの経路に基づいて決定される推奨車線に擬した第２画像とを、前記表示部に表示させ、前記目的地までの経路において、前記車両が進路変更すべき第１地点よりも所定距離手前の第２地点に到達した場合に、前記表示部に、前記車両の進路を案内する第３画像と、前記第２画像とを表示させる、プログラムである。
【発明の効果】
【００１３】
（１）〜（７）によれば、より乗員に分かりやすい経路案内を行うことができる。
【図面の簡単な説明】
【００１４】
【図１】実施形態に係る表示システムを備えた車両システム１の構成図である。
【図２】自車両Ｍの車室内の様子を模式的に示す図である。
【図３】第１制御部１２０、第２制御部１６０、および第３制御部１７０の機能構成図である。
【図４】各場面を説明するための自車両Ｍの周辺状況の一例を示す図である。
【図５】第１の場面において、ＨＭＩ制御部１７４により生成される自車両周辺画像ＩＭ１の一例を示す図である。
【図６】第２の場面において、ＨＭＩ制御部１７４により生成されるターンバイターン画像ＩＭ２ａの一例を示す図である。
【図７】第２の場面において、ＨＭＩ制御部１７４により生成される自車両周辺画像ＩＭ２ｂの一例を示す図である。
【図８】第３の場面において、ＨＭＩ制御部１７４により生成されるターンバイターン画像ＩＭ３ａの一例を示す図である。
【図９】第３の場面において、ＨＭＩ制御部１７４により生成される自車両周辺画像ＩＭ３ｂの一例を示す図である。
【図１０】第４の場面において、ＨＭＩ制御部１７４により生成されるターンバイターン画像ＩＭ４ａの一例を示す図である。
【図１１】第４の場面において、ＨＭＩ制御部１７４により生成される自車両周辺画像ＩＭ４ｂの一例を示す図である。
【図１２】第５の場面において、ＨＭＩ制御部１７４により生成されるターンバイターン画像ＩＭ５ａの一例を示す図である。
【図１３】第５の場面において、ＨＭＩ制御部１７４により生成される自車両周辺画像ＩＭ５ｂの一例を示す図である。
【図１４】ＨＭＩ制御部１７４により生成される自車両周辺画像ＩＭ６ｂの一例を示す図である。
【図１５】表示システムによる一連の処理の流れの一例を示すフローチャートである。
【図１６】実施形態の表示システムを備えた車両システム１における運転制御装置１００のハードウェア構成の一例を示す図である。
【発明を実施するための形態】
【００１５】
以下、図面を参照し、本発明の表示システム、表示方法、およびプログラムの実施形態について説明する。実施形態では、乗員の運転操作を支援する運転制御が実行可能な車両において、車両の周辺の認識結果を車両に搭載された表示装置に表示させる表示システムについて説明する。運転制御とは、例えば、車両の操舵または速度のうち一方または双方を制御することである。運転制御は、ＡＣＣ（Adaptive Cruise Control System）やＬＫＡＳ（Lane Keeping Assistance System）、ＡＬＣ（Auto Lane Changing）、ＬＣＡ（Lane Change Assist）等の運転制御が実行可能である。ＡＣＣは、例えば、車両を前走車両に追従して走行させる運転制御である。ＬＫＡＳは、例えば、車両が走行する車線を維持する運転制御である。ＡＬＣは、例えば、乗員からの車線変更指示を受け付けたか否かに係わらず、ナビゲーション装置による経路設定に基づいて車線変更を行う運転制御である。ＡＬＣには、例えば、自動追い越し制御における車線変更と、分岐における車線変更とが含まれる。また、ＬＣＡは、乗員からの車線変更指示に基づいて、指示した方向に車線変更を行う運転制御である。
【００１６】
［全体構成］
図１は、実施形態に係る表示システムを備えた車両システム１の構成図である。車両システム１が搭載される車両（以下、自車両Ｍと称する）は、例えば、二輪や三輪、四輪等の車両であり、その駆動源は、ディーゼルエンジンやガソリンエンジン等の内燃機関、電動機、或いはこれらの組み合わせを含む。電動機は、内燃機関に連結された発電機による発電電力、或いは二次電池や燃料電池の放電電力を使用して動作する。
【００１７】
車両システム１は、例えば、カメラ１０と、レーダ装置１２と、ファインダ１４と、物体認識装置１６と、通信装置２０と、ＨＭＩ（Human Machine Interface）３０と、車両センサ４０と、ナビゲーション装置５０と、ＭＰＵ（Map Positioning Unit）６０と、運転操作子８０と、運転制御装置１００と、走行駆動力出力装置２００と、ブレーキ装置２１０と、ステアリング装置２２０とを備える。これらの装置や機器は、ＣＡＮ（Controller Area Network）通信線等の多重通信線やシリアル通信線、無線通信網等によって互いに接続される。なお、図１に示す構成はあくまで一例であり、構成の一部が省略されてもよいし、更に別の構成が追加されてもよい。ＨＭＩ３０と、後述する第３制御部とを組み合わせたものが「表示システム」の一例である。
【００１８】
カメラ１０は、例えば、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の固体撮像素子を利用したデジタルカメラである。カメラ１０は、自車両Ｍの任意の箇所に取り付けられる。前方を撮像する場合、カメラ１０は、フロントウインドシールド上部やルームミラー裏面等に取り付けられる。カメラ１０は、例えば、周期的に繰り返し自車両Ｍの周辺を撮像する。カメラ１０は、ステレオカメラであってもよい。
【００１９】
レーダ装置１２は、自車両Ｍの周辺にミリ波等の電波を放射するとともに、物体によって反射された電波（反射波）を検出して少なくとも物体の位置（距離および方位）を検出する。レーダ装置１２は、自車両Ｍの任意の箇所に取り付けられる。レーダ装置１２は、ＦＭ−ＣＷ（Frequency Modulated Continuous Wave）方式によって物体の位置および速度を検出してもよい。
【００２０】
ファインダ１４は、ＬＩＤＡＲ（Light Detection and Ranging）である。ファインダ１４は、自車両Ｍの周辺に光を照射し、散乱光を測定する。ファインダ１４は、発光から受光までの時間に基づいて、対象までの距離を検出する。照射される光は、例えば、パルス状のレーザー光である。ファインダ１４は、自車両Ｍの任意の箇所に取り付けられる。
【００２１】
物体認識装置１６は、カメラ１０、レーダ装置１２、およびファインダ１４のうち一部または全部による検出結果に対してセンサフュージョン処理を行って、物体の位置、種類、速度等を認識する。物体認識装置１６は、認識結果を運転制御装置１００に出力する。物体認識装置１６は、カメラ１０、レーダ装置１２、およびファインダ１４の検出結果をそのまま運転制御装置１００に出力してよい。車両システム１から物体認識装置１６が省略されてもよい。
【００２２】
通信装置２０は、例えば、セルラー網やＷｉ−Ｆｉ網、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＤＳＲＣ（Dedicated Short Range Communication）等を利用して、自車両Ｍの周辺に存在する他車両と通信（車車間通信）し、或いは無線基地局を介して各種サーバ装置と通信する。
【００２３】
ＨＭＩ３０は、自車両Ｍの乗員に対して各種情報を提示するとともに、乗員による入力操作を受け付ける。ＨＭＩ３０は、例えば、表示部３２、スイッチ、スピーカ、ブザー、タッチパネル、キー等を備える。表示部３２は、例えば、第１表示部３２Ａと、第２表示部３２Ｂとを備える。
【００２４】
図２は、自車両Ｍの車室内の様子を模式的に示す図である。例えば、第１表示部３２Ａは、インストルメントパネルＩＰにおける運転席（例えばステアリングホイールＳＷに最も近い座席）の正面付近に設けられ、乗員がステアリングホイールＳＷの間隙から、或いはステアリングホイールＳＷ越しに視認可能な位置に設置される。第１表示部３２Ａは、例えば、ＬＣＤ（Liquid Crystal Display）や有機ＥＬ（Electro Luminescence）表示装置等である。第１表示部３２Ａには、自車両Ｍの手動運転時または運転制御時の走行に必要な情報が画像として表示される。手動運転時の自車両Ｍの走行に必要な情報とは、例えば、自車両Ｍの速度、エンジン回転数、燃料残量、ラジエータ水温、走行距離、その他の情報である。運転制御時における自車両Ｍの走行に必要な情報とは、例えば、車線（区画線）、ナビゲーション装置５０等のシステム側で推奨される目的地までの経路（推奨車線）、自車両Ｍの将来の軌道（目標軌道）、他車両等の情報である。また、運転制御時における自車両Ｍの走行に必要な情報には、手動運転時の自車両Ｍの走行に必要な情報の一部または全部が含まれてよい。
【００２５】
第２表示部３２Ｂは、例えば、インストルメントパネルＩＰの中央付近に設置される。第２表示部３２Ｂは、例えば、第１表示部３２Ａと同様に、ＬＣＤや有機ＥＬ表示装置等である。第２表示部３２Ｂは、例えば、ナビゲーション装置５０により実行されるナビゲーション処理に対応する画像等を表示する。また、第２表示部３２Ｂは、テレビ番組を表示したり、ＤＶＤを再生したり、ダウンロードされた映画等のコンテンツを表示してもよい。また、表示部３２には、第１表示部３２Ａおよび第２表示部３２Ｂに代えて（または加えて）、ＨＵＤ（Head-Up Display）装置が含まれてもよい。ＨＵＤ装置は、風景に重畳させて画像を視認させる装置であり、一例として、自車両Ｍのフロントウインドシールドやコンバイナーに画像を含む光を投光することで、観者に虚像を視認させる装置である。観者は、例えば運転者であるが、運転者以外の乗員であってもよい。
【００２６】
車両センサ４０は、自車両Ｍの速度を検出する車速センサ、加速度を検出する加速度センサ、鉛直軸回りの角速度を検出するヨーレートセンサ、自車両Ｍの向きを検出する方位センサ等を含む。
【００２７】
ナビゲーション装置５０は、例えば、ＧＮＳＳ（Global Navigation Satellite System）受信機５１と、ナビＨＭＩ５２と、経路決定部５３とを備える。ナビゲーション装置５０は、ＨＤＤ（Hard Disk Drive）やフラッシュメモリ等の記憶装置に第１地図情報５４を保持している。
【００２８】
ＧＮＳＳ受信機５１は、ＧＮＳＳ衛星から受信した信号に基づいて、自車両Ｍの位置を特定する。自車両Ｍの位置は、車両センサ４０の出力を利用したＩＮＳ（Inertial Navigation System）によって特定または補完されてもよい。
【００２９】
ナビＨＭＩ５２は、表示装置、スピーカ、タッチパネル、キー等を含む。ナビＨＭＩ５２は、前述したＨＭＩ３０と一部または全部が共通化されてもよい。
【００３０】
経路決定部５３は、例えば、ＧＮＳＳ受信機５１により特定された自車両Ｍの位置（或いは入力された任意の位置）から、ナビＨＭＩ５２を用いて乗員により入力された目的地までの経路（以下、地図上経路）を、第１地図情報５４を参照して決定する。第１地図情報５４は、例えば、道路を示すリンクと、リンクによって接続されたノードとによって道路形状が表現された情報である。第１地図情報５４は、道路の曲率やＰＯＩ（Point Of Interest）情報等を含んでもよい。地図上経路は、ＭＰＵ６０に出力される。
【００３１】
ナビゲーション装置５０は、地図上経路に基づいて、ナビＨＭＩ５２を用いた経路案内を行ってもよい。ナビゲーション装置５０は、例えば、乗員の保有するスマートフォンやタブレット端末等の端末装置の機能によって実現されてもよい。ナビゲーション装置５０は、通信装置２０を介してナビゲーションサーバに現在位置と目的地を送信し、ナビゲーションサーバから地図上経路と同等の経路を取得してもよい。
【００３２】
ＭＰＵ６０は、例えば、推奨車線決定部６１を含み、ＨＤＤやフラッシュメモリ等の記憶装置に第２地図情報６２を保持している。推奨車線決定部６１は、ナビゲーション装置５０から提供された地図上経路を複数のブロックに分割し（例えば、車両進行方向に関して１００［ｍ］毎に分割し）、第２地図情報６２を参照してブロックごとに推奨車線を決定する。推奨車線決定部６１は、左から何番目の車線を走行するといった決定を行う。推奨車線決定部６１は、地図上経路に分岐箇所が存在する場合、自車両Ｍが、分岐先に進行するための合理的な経路を走行できるように、推奨車線を決定する。
【００３３】
第２地図情報６２は、第１地図情報５４よりも高精度な地図情報である。第２地図情報６２は、例えば、車線の中央の情報あるいは車線の境界の情報、車線の種別の情報等を含んでいる。また、第２地図情報６２には、道路情報、交通規制情報、住所情報（住所・郵便番号）、施設情報、電話番号情報等が含まれてよい。第２地図情報６２は、通信装置２０が他装置と通信することにより、随時、アップデートされてよい。
【００３４】
運転操作子８０は、例えば、ステアリングホイールＳＷ、アクセルペダル、ブレーキペダル、シフトレバー、異形ステア、ジョイスティックその他の操作子を含む。運転操作子８０には、操作量あるいは操作の有無を検出するセンサが取り付けられており、その検出結果は、運転制御装置１００、もしくは、走行駆動力出力装置２００、ブレーキ装置２１０、およびステアリング装置２２０のうち一部または全部に出力される。
【００３５】
運転制御装置１００は、例えば、第１制御部１２０と、第２制御部１６０と、第３制御部１７０と、記憶部１８０とを備える。第１制御部１２０、第２制御部１６０、および第３制御部１７０は、例えば、ＣＰＵ（Central Processing Unit）等のコンピュータプロセッサがプログラム（ソフトウェア）を実行することにより実現される。また、これらの構成要素のうち一部または全部は、ＬＳＩ（Large Scale Integration）やＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-Programmable Gate Array）、ＧＰＵ（Graphics Processing Unit）等のハードウェア（回路部；circuitryを含む）によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。プログラムは、予め運転制御装置１００の記憶部１８０に格納されていてもよいし、ＤＶＤやＣＤ−ＲＯＭ等の着脱可能な記憶媒体に格納されており、記憶媒体がドライブ装置に装着されることで記憶部１８０にインストールされてもよい。
【００３６】
記憶部１８０は、例えば、ＨＤＤ、フラッシュメモリ、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read Only Memory）、ＲＯＭ（Read Only Memory）、またはＲＡＭ（Random Access Memory）等により実現される。記憶部１８０は、例えば、プロセッサによって読み出されて実行されるプログラム等を格納する。
【００３７】
図３は、第１制御部１２０、第２制御部１６０、および第３制御部１７０の機能構成図である。第１制御部１２０は、例えば、認識部１３０と、行動計画生成部１４０とを備える。第１制御部１２０は、例えば、ＡＩ（Artificial Intelligence；人工知能）による機能と、予め与えられたモデルによる機能とを並行して実現する。例えば、「交差点を認識する」機能は、ディープラーニング等による交差点の認識と、予め与えられた条件（パターンマッチング可能な信号、道路標示等がある）に基づく認識とが並行して実行され、双方に対してスコア付けして総合的に評価することで実現されてよい。これによって、自車両Ｍに対する運転制御の信頼性が担保される。
【００３８】
認識部１３０は、自車両Ｍの周辺状況を認識する。例えば、認識部１３０は、カメラ１０、レーダ装置１２、およびファインダ１４から物体認識装置１６を介して入力された情報に基づいて、自車両Ｍの周辺に存在する物体を認識する。認識部１３０により認識される物体は、例えば、自転車、オートバイク、および四輪自動車等の他車両である。また、物体は、歩行者、道路標識、道路標示、区画線、電柱、ガードレール、落下物等を含む。また、認識部１３０は、物体の位置や、速度、加速度、操舵角、自車両Ｍの向き等の自車両Ｍの状態を認識する。物体の位置は、例えば、自車両Ｍの代表点（重心や駆動軸中心等）を原点とした相対座標上の位置（すなわち自車両Ｍに対する相対位置）として認識され、制御に使用される。物体の位置は、その物体の重心やコーナー等の代表点で表されてもよいし、表現された領域で表されてもよい。物体の「状態」とは、物体が他車両等の移動体である場合に、物体の加速度やジャーク、あるいは「行動状態」（例えば車線変更をしている、またはしようとしているか否か）を含んでもよい。
【００３９】
また、認識部１３０は、例えば、自車両Ｍの周辺の道路形状を認識する。例えば、認識部１３０は、自車両Ｍが走行している自車線や、自車線に隣接した隣接車線を認識する。例えば、認識部１３０は、第２地図情報６２から得られる道路区画線のパターン（例えば実線と破線の配列）と、カメラ１０によって撮像された画像から認識される自車両Ｍの周辺の道路区画線のパターンとを比較することで、自車線や隣接車線を認識する。
【００４０】
また、認識部１３０は、道路区画線に限らず、道路区画線や路肩、縁石、中央分離帯、ガードレール等を含む走路境界（道路境界）を認識することで、自車線や隣接車線を認識してもよい。この認識において、ナビゲーション装置５０から取得される自車両Ｍの位置やＩＮＳによる処理結果が加味されてもよい。また、認識部１３０は、一時停止線、障害物、赤信号、料金所、その他の道路事象を認識する。
【００４１】
認識部１３０は、自車線を認識する際に、自車線に対する自車両Ｍの相対位置や姿勢を認識する。認識部１３０は、例えば、自車両Ｍの基準点の車線中央からの乖離、および自車両Ｍの進行方向の車線中央を連ねた線に対してなす角度を、自車線に対する自車両Ｍの相対位置および姿勢として認識してもよい。これに代えて、認識部１３０は、自車線のいずれかの側端部（道路区画線または道路境界）に対する自車両Ｍの基準点の位置等を、自車線に対する自車両Ｍの相対位置として認識してもよい。
【００４２】
行動計画生成部１４０は、例えば、イベント決定部１４２と、目標軌道生成部１４４とを備える。イベント決定部１４２は、推奨車線が決定された経路において運転制御のイベントを決定する。イベントは、自車両Ｍの走行態様を規定した情報である。
【００４３】
イベントには、例えば、自車両Ｍを一定の速度で同じ車線を走行させる定速走行イベント、自車両Ｍの前方の所定距離以内（例えば１００［ｍ］以内）に存在し、自車両Ｍに最も近い他車両（以下、必要に応じて前走車両と称する）に自車両Ｍを追従させる追従走行イベント、自車両Ｍを自車線から隣接車線へと車線変更させる車線変更イベント、自車両Ｍを一旦隣接車線に車線変更させて前走車両を隣接車線において追い越してから再び元の車線へと車線変更させる追い越しイベント、道路の分岐地点で自車両Ｍを目的側の車線に分岐させる分岐イベント、合流地点で自車両Ｍを本線に合流させる合流イベント等が含まれる。「追従」とは、例えば、自車両Ｍと前走車両との車間距離（相対距離）を一定に維持させる走行態様であってもよいし、自車両Ｍと前走車両との車間距離を一定に維持させることに加えて、自車両Ｍを自車線の中央で走行させる走行態様であってもよい。また、イベントには、例えば、運転制御による自動運転を終了して手動運転に切り替えるためのテイクオーバーイベント、自車両Ｍの前方に存在する障害物を回避するために自車両Ｍに制動および操舵の少なくとも一方を行わせる回避イベント等が含まれてよい。
【００４４】
また、イベント決定部１４２は、例えば、自車両Ｍの走行時に認識部１３０により認識された周辺の状況に応じて、現在の区間に対して既に決定したイベントを他のイベントに変更したり、現在の区間に対して新たなイベントを決定したりしてよい。
【００４５】
また、イベント決定部１４２は、乗員の車載機器に対する操作に応じて、現在の区間に対して既に決定したイベントを他のイベントに変更したり、現在の区間に対して新たなイベントを決定したりしてよい。例えば、イベント決定部１４２は、乗員によってウインカスイッチ等が操作された場合、現在の区間に対して既に決定したイベントを車線変更イベントに変更したり、現在の区間に対して新たに車線変更イベントを決定したりしてよい。
【００４６】
目標軌道生成部１４４は、原則的には推奨車線決定部６１により決定された推奨車線を自車両Ｍが走行し、更に、自車両Ｍが推奨車線を走行する際に周辺の状況に対応するため、イベントにより規定された走行態様で自車両Ｍを自動的に（運転者の操作に依らずに）走行させる将来の目標軌道を生成する。目標軌道には、例えば、将来の自車両Ｍの位置を定めた位置要素と、将来の自車両Ｍの速度等を定めた速度要素とが含まれる。
【００４７】
例えば、目標軌道生成部１４４は、自車両Ｍが順に到達すべき複数の地点（軌道点）を、目標軌道の位置要素として決定する。軌道点は、所定の走行距離（例えば数［ｍ］程度）ごとの自車両Ｍの到達すべき地点である。所定の走行距離は、例えば、経路に沿って進んだときの道なり距離によって計算されてよい。
【００４８】
また、目標軌道生成部１４４は、所定のサンプリング時間（例えば０コンマ数［ｓｅｃ］程度）ごとの目標速度および目標加速度を、目標軌道の速度要素として決定する。また、軌道点は、所定のサンプリング時間ごとの、そのサンプリング時刻における自車両Ｍの到達すべき位置であってもよい。この場合、目標速度や目標加速度は、サンプリング時間および軌道点の間隔によって決定される。目標軌道生成部１４４は、生成した目標軌道を示す情報を、第２制御部１６０に出力する。
【００４９】
第２制御部１６０は、目標軌道生成部１４４によって生成された目標軌道を、予定の時刻通りに自車両Ｍが通過するように、走行駆動力出力装置２００、ブレーキ装置２１０、およびステアリング装置２２０を制御する。
【００５０】
第２制御部１６０は、例えば、第１取得部１６２と、速度制御部１６４と、操舵制御部１６６とを備える。第１取得部１６２は、目標軌道生成部１４４から目標軌道（軌道点）の情報を取得し、記憶部１８０のメモリに記憶させる。
【００５１】
速度制御部１６４は、メモリに記憶された目標軌道に含まれる速度要素（例えば目標速度や目標加速度等）に基づいて、走行駆動力出力装置２００およびブレーキ装置２１０の一方または双方を制御する。
【００５２】
操舵制御部１６６は、メモリに記憶された目標軌道に含まれる位置要素（例えば目標軌道の曲り具合を表す曲率等）に応じて、ステアリング装置２２０を制御する。実施形態における運転制御とは、例えば、走行駆動力出力装置２００およびブレーキ装置２１０と、ステアリング装置２２０との一方または双方を制御するものである。
【００５３】
速度制御部１６４および操舵制御部１６６の処理は、例えば、フィードフォワード制御とフィードバック制御との組み合わせにより実現される。一例として、操舵制御部１６６は、自車両Ｍの前方の道路の曲率に応じたフィードフォワード制御と、目標軌道からの乖離に基づくフィードバック制御とを組み合わせて実行する。
【００５４】
走行駆動力出力装置２００は、車両が走行するための走行駆動力（トルク）を駆動輪に出力する。走行駆動力出力装置２００は、例えば、内燃機関、電動機、および変速機等の組み合わせと、これらを制御するパワーＥＣＵ（Electronic Control Unit）とを備える。パワーＥＣＵは、第２制御部１６０から入力される情報、或いは運転操作子８０から入力される情報に従って、上記の構成を制御する。
【００５５】
ブレーキ装置２１０は、例えば、ブレーキキャリパーと、ブレーキキャリパーに油圧を伝達するシリンダと、シリンダに油圧を発生させる電動モータと、ブレーキＥＣＵとを備える。ブレーキＥＣＵは、第２制御部１６０から入力される情報、或いは運転操作子８０から入力される情報に従って電動モータを制御し、制動操作に応じたブレーキトルクが各車輪に出力されるようにする。ブレーキ装置２１０は、運転操作子８０に含まれるブレーキペダルの操作によって発生させた油圧を、マスターシリンダを介してシリンダに伝達する機構をバックアップとして備えてよい。なお、ブレーキ装置２１０は、上記説明した構成に限らず、第２制御部１６０から入力される情報に従ってアクチュエータを制御して、マスターシリンダの油圧をシリンダに伝達する電子制御式油圧ブレーキ装置であってもよい。
【００５６】
ステアリング装置２２０は、例えば、ステアリングＥＣＵと、電動モータとを備える。電動モータは、例えば、ラックアンドピニオン機構に力を作用させて転舵輪の向きを変更する。ステアリングＥＣＵは、第２制御部１６０から入力される情報、或いは運転操作子８０から入力される情報に従って、電動モータを駆動し、転舵輪の向きを変更させる。
【００５７】
第３制御部１７０は、例えば、第２取得部１７２と、ＨＭＩ制御部１７４とを備える。ＨＭＩ制御部１７４は、「表示制御部」の一例である。
【００５８】
第２取得部１７２は、認識部１３０による認識結果の情報を取得する。また、第２取得部１７２は、目標軌道生成部１４４により生成された目標軌道の情報を取得する。また、第２取得部１７２は、ナビゲーション装置５０またはＭＰＵ６０から、自車両Ｍの周辺の地図情報や目的地までの地図情報を取得する。また、第２取得部１７２は、推奨車線決定部６１により決定された推奨車線の情報を取得する。
【００５９】
ＨＭＩ制御部１７４は、第２取得部１７２によって取得された情報に基づいてＨＭＩ３０に各種情報を出力させる。例えば、ＨＭＩ制御部１７４は、第２取得部１７２により取得された情報に対応する画像を生成し、生成した画像を表示部３２に表示させる。例えば、ＨＭＩ制御部１７４は、第１表示部３２Ａまたは第２表示部３２Ｂのうち、乗員により指定された一方または双方に、生成した画像を表示させる。また、ＨＭＩ制御部１７４は、自車両Ｍの走行態様（例えば、運転制御におけるイベント）に対応付けられた表示部に生成した画像を表示させてもよい。
【００６０】
[各場面におけるＨＭＩ制御部の処理]
以下、自車両Ｍが走行する各場面におけるＨＭＩ制御部１７４の処理について説明する。なお、以下では、主に、乗員による自車両Ｍの運転操作（手動運転）により、進路変更を行う例について説明する。図４は、各場面を説明するための自車両Ｍの周辺状況の一例を示す図である。図４の例において、自車両Ｍは、図４のＸ方向に延伸する車線Ｌ１およびＬ２のうち、車線ＮＬ１を走行しているものとし、車線Ｌ１には、分岐車線Ｌ３およびＬ４が存在するものとする。また、以下の例では、ナビゲーション装置５０により設定された目的地方面に進行するために、車線Ｌ１から車線Ｌ１への進路変更が必要であるものとする。また、以下の説明において、自車両Ｍが地点Ｐに到達するとは、図４に示す地点Ｐ１〜Ｐ３のそれぞれから車線Ｌ１およびＬ２の車幅方向（図４のＹ方向）に延ばした線に到達することと同等であるものとする。
【００６１】
また、以下の説明において、時刻ｔ１〜ｔ５は、「ｔ１＜ｔ２＜ｔ３＜ｔ４＜ｔ５」の関係が成り立つものとし、それぞれの時刻における車両の位置を自車両Ｍ（Ｔ）と称するものとする。また、以下の説明において、ＨＭＩ制御部１７４によって生成される画像は、第１表示部３２Ａに表示されるものとする。また、第１表示部３２Ａに表示される画像には、エンジンの回転数を示すタコメータや、自車両Ｍの速度を示すスピードメータ等も含まれもよいが、以下では、これらの説明を省略するものとする。また、ＨＭＩ制御部１７４によって生成される画像の種類や、配置等のレイアウトについては、以下に示す画像に限定されるものではない。
【００６２】
＜第１の場面（時刻ｔ１）＞
第１の場面（時刻ｔ１）は、運転制御装置１００が、車線Ｌ１を走行している場面である。図５は、第１の場面において、ＨＭＩ制御部１７４により生成される自車両周辺画像ＩＭ１の一例を示す図である。画像ＩＭ１は、第１表示部３２Ａにおける画像の表示領域の大きさに対応した大きさの画像であるものとする。以降の各画像ＩＭについても同様とする。
【００６３】
この場面において、ＨＭＩ制御部１７４は、例えば、認識部１３０により認識された自車両Ｍの周辺の道路に擬した道路画像（第１画像の一例）ＲＯを生成する。道路画像ＲＯには、例えば、車線Ｌ１およびＬ２に擬した画像が含まれる。図５の例では、自車両周辺画像ＩＭ１の中央（例えば、幅方向の中央）付近に自車両Ｍが走行する車線Ｌ１を位置付けた道路画像ＲＯが示されている。また、ＨＭＩ制御部１７４は、車線変更が可能な車線間の区画線と、車線変更が不可能な車線間の区画線を異なる表示態様（例えば、実線と点線等）で表示させてもよい。車線変更が可能か否かは、例えば、地図情報（第１地図情報５４、第２地図情報６２）を参照することで取得できる。図５の例において、自車両周辺画像ＩＭ１には、車線Ｌ１およびＬ２の車線間において、車線変更が可能な区画線（点線）が示されている。
【００６４】
また、ＨＭＩ制御部１７４は、自車両Ｍに擬した画像（以下、自車両画像ＭＩ（ｔ１）と称する）を生成し、生成した自車両画像ＭＩ（ｔ１）を、道路画像ＲＯ上の存在する位置に重畳表示させてもよい。この場合、ＨＭＩ制御部１７４は、自車両画像ＭＩ（ｔ１）の大きさを、道路画像ＲＯにおける車線の大きさに対応付けて調整してもよい。また、ＨＭＩ制御部１７４は、認識部１３０により認識された他車両ｍに擬した画像（以下、他車両画像ｍＩと称する）を生成し、生成した他車両画像ｍＩを、道路画像ＲＯ上の存在する位置に重畳表示させてもよい。この場合、ＨＭＩ制御部１７４は、自車両画像ＭＩ（ｔ１）および他車両画像ｍＩのそれぞれを区別可能に乗員に視認されるように、色や模様、形状等を異ならせてもよい。
【００６５】
＜第２の場面（時刻ｔ２）＞
第２の場面（時刻ｔ２）は、目的地までの経路において、自車両Ｍが進路変更すべき第１地点Ｐ１よりも所定距離Ｄ１だけ手前の第２地点Ｐ２に到達した場面を示している。地点Ｐ１は、例えば、自車両Ｍが目的地方面に進行するために、車線変更すべき地点である。車線変更すべき地点とは、例えば、車線Ｌ１と車線Ｌ４との分岐の開始地点あるいは開始地点付近の地点である。また、車線変更すべき地点とは、乗員による車線変更のための操舵操作が開始される地点でもよく、ＬＣＡによる運転制御が実行される地点でもよい。所定距離Ｄ１は、予め決められた固定距離であるが、道路形状（例えば、車線数、車幅、道路の曲率）や自車両Ｍの車速等に基づいて可変に設定される距離でもよい。以下では、車線Ｌ１およびＬ２を高速道路とし、所定距離Ｄ１を２[ｋｍ]として説明する。
【００６６】
第２の場面において、ＨＭＩ制御部１７４は、第２地点Ｐ２に到達した場合に、第２取得部１７２によって取得された推奨車線に擬した推奨車線画像（第２画像の一例）を生成する。また、ＨＭＩ制御部１７４は、第２地点Ｐ２に到達した場合に、自車両Ｍの進路を案内する案内図形に関するターンバイターン画像（第３画像の一例）を生成する。
【００６７】
図６は、第２の場面において、ＨＭＩ制御部１７４により生成されるターンバイターン画像ＩＭ２ａの一例を示す図である。図７は、第２の場面において、ＨＭＩ制御部１７４により生成される自車両周辺画像ＩＭ２ｂの一例を示す図である。以下では、自車両周辺画像ＩＭ１と異なる部分について説明する。以降のターンバイターン画像および自車両周辺画像についても他の画像と異なる部分について説明するものとする。
【００６８】
ターンバイターン画像ＩＭ２ａには、例えば、文字情報に関するオブジェクト画像ＣＯ１と、進路変更すべき地点Ｐ１までの残距離を示すメモリに擬したオブジェクト画像ＭＯ１と、進路変更の方向を示すオブジェクト画像ＤＯ１とが含まれる。文字情報には、例えば、地点Ｐ１までの残距離に関する文字情報や、運転制御に関する文字情報等が含まれる。オブジェクト画像ＣＯ１、ＭＯ１、およびＤＯ１は、第１の所定色で示された画像である。第１の所定色とは、例えば、予め決められた色でもよく、自車両Ｍの走行態様に関する画像の色に対応付けられた色でもよい。自車両Ｍの走行態様に関する画像の色に対応付けられた色とは、例えば、走行態様において、ＡＣＣやＬＫＡＳ等の運転制御が実行される場合において、それぞれの走行態様に応じた色が設定されている場合に、その色に対応付けられた色のことである。また、第１の所定色は、他の表示部に表示された自車両の走行態様に対応付けられた画像の色と同系色の色でもよい。また、第１の所定色は、模様や輝度、明度、彩度の色調や明暗等の調整により乗員に視認可能な色でもよく、所定の透過率により透過された色でもよい。
【００６９】
ＨＭＩ制御部１７４は、上述したターンバイターン画像ＩＭ２ａを、自車両周辺画像ＩＭ２ｂと同じ第１表示部３２Ａに表示させてもよく、第１表示部３２Ａとは異なる表示部（例えば、第２表示部３２ＢまたはＨＵＤ装置）に表示させてもよい。
【００７０】
また、ＨＭＩ制御部１７４は、ターンバイターン画像ＩＭ２ａを表示させるタイミングで、生成した推奨車線画像ＲＥ１を、道路画像ＲＯ上に重畳表示させる。推奨車線画像ＲＥ１は、例えば、推奨車線に対応する車線の領域の略全域が第２の所定色で色付けされた画像を含む。第２の所定色とは、例えば、予め決められた色でもよく、自車両Ｍの走行態様に関する画像の色に対応付けられた色でもよい。また、第２の所定色は、第１の所定色と同系色の色でもよい。また、第２の所定色は、模様や輝度、明度、彩度の色調や明暗等の調整により乗員に視認可能な色でもよく、所定の透過率により透過された色でもよい。
【００７１】
ＨＭＩ制御部１７４は、推奨車線画像ＲＥ１を、道路画像ＲＯに対応付けた位置に表示させる。道路画像ＲＯに対応付けた位置とは、例えば、道路画像ＲＯに含まれる車線Ｌ１およびＬ２のうち、推奨車線に相当する車線の表示位置に対応付けた位置である。推奨車線に相当する車線の一例としては、進路変更先の車線Ｌ４に、現時点で隣接する車線、または近い将来隣接する車線があるが、これに限定されるものではない。図７の例では、自車両周辺画像ＩＭ２ｂは、道路画像ＲＯに含まれる、将来的に車線Ｌ４の隣接車線となる車線Ｌ１の領域の略全域に、推奨車線画像ＲＥ１が重畳表示されている。
【００７２】
これにより、ＨＭＩ制御部１７４は、乗員に、近い将来に進路変更を行う必要があること、および現時点で進路変更を行う必要がないことを、より正確に認識させることができる。
【００７３】
＜第３の場面（時刻ｔ３）＞
第３の場面（時刻ｔ３）は、時刻ｔ２から所定時間が経過し、車線Ｌ３を含む道路画像ＲＯが第１表示部３２Ａに表示される場面である。具体的には、第３の場面は、地点Ｐ１からの残距離が１．５［ｋｍ］の地点を自車両Ｍが走行している場面を示している。
【００７４】
図８は、第３の場面において、ＨＭＩ制御部１７４により生成されるターンバイターン画像ＩＭ３ａの一例を示す図である。図９は、第３の場面において、ＨＭＩ制御部１７４により生成される自車両周辺画像ＩＭ３ｂの一例を示す図である。第３の場面において、ＨＭＩ制御部１７４は、図８のターンバイターン画像ＩＭ３ａに示すように、地点Ｐ１までの残距離が１．５［ｋｍ］であることを示すオブジェクト画像ＣＯ２と、残距離に対応してメモリの残量を調整したオブジェクト画像ＭＯ２と、進路変更の方向を示すオブジェクト画像ＤＯ２とを生成する。オブジェクト画像ＤＯ２は、オブジェクト画像ＤＯ１と同様の画像である。したがって、ＨＭＩ制御部１７４は、変更がないオブジェクト画像については、新たに画像を生成せずに、前回生成したオブジェクト画像ＤＯ１をそのまま流用してもよい。
【００７５】
また、第３の場面において、ＨＭＩ制御部１７４は、車線Ｌ１から分岐する車線Ｌ３を含む道路画像ＲＯを生成する。また、ＨＭＩ制御部１７４は、推奨車線画像ＲＥ１を生成し、生成した推奨車線画像ＲＥ１を、図９の自車両周辺画像ＩＭ３ｂに示すように、車線Ｌ１上に表示させる。これにより、乗員は、ターンバイターン画像ＩＭ３ａにより、誤って車線Ｌ３に進路変更することなく、車線Ｌ１を走行し続けることができる。
【００７６】
＜第４の場面（時刻ｔ４）＞
第４の場面（時刻ｔ４）は、時刻ｔ３から所定時間が経過し、地点Ｐ１からの残距離が８００［ｍ］の場面を示している。
【００７７】
図１０は、第４の場面において、ＨＭＩ制御部１７４により生成されるターンバイターン画像ＩＭ４ａの一例を示す図である。図１１は、第４の場面において、ＨＭＩ制御部１７４により生成される自車両周辺画像ＩＭ４ｂの一例を示す図である。第４の場面において、ＨＭＩ制御部１７４は、図１０のターンバイターン画像ＩＭ４ａに示すように、地点Ｐ１までの残距離が８００［ｍ］であることを示すオブジェクト画像ＣＯ３と、残距離に対応してメモリの残量を調整したオブジェクト画像ＭＯ３と、進路変更の方向を示すオブジェクト画像ＤＯ３とを生成する。オブジェクト画像ＤＯ３は、オブジェクト画像ＤＯ１と同様の画像である。したがって、ＨＭＩ制御部１７４は、オブジェクト画像ＤＯ１をそのまま流用してもよい。
【００７８】
また、第４の場面において、ＨＭＩ制御部１７４は、車線Ｌ３の道路形状に合わせて車線Ｌ３が車線Ｌ１から分岐した形状の道路画像ＲＯを生成する。このような場面においても、推奨車線画像ＲＥ１は、図１１の自車両周辺画像ＩＭ４ｂに示すように、車線Ｌ１上に表示されるため、乗員は、焦ることなく車線Ｌ１に沿った運転を継続させることができる。
【００７９】
＜第５の場面（時刻ｔ５）＞
第５の場面（時刻ｔ５）は、時刻ｔ４から所定時間が経過し、自車両Ｍが、第２地点Ｐ２よりも第１地点Ｐ１に近い第３地点Ｐ３に到達した場面である。地点Ｐ３は、自車両Ｍに対して、地点Ｐ１からの距離Ｄ２だけ手前の地点である。距離Ｄ２は、例えば、３０［ｍ］である。
【００８０】
図１２は、第５の場面において、ＨＭＩ制御部１７４により生成されるターンバイターン画像ＩＭ５ａの一例を示す図である。図１３は、第５の場面において、ＨＭＩ制御部１７４により生成される自車両周辺画像ＩＭ５ｂの一例を示す図である。第５の場面において、ＨＭＩ制御部１７４は、図１２のターンバイターン画像ＩＭ５ａに示すように、地点Ｐ１までの残距離が３０［ｍ］であることを示すオブジェクト画像ＣＯ４と、残距離に対応してメモリの残量を調整したオブジェクト画像ＭＯ４と、進路変更の方向を示すオブジェクト画像ＤＯ４とを生成する。オブジェクト画像ＤＯ４は、オブジェクト画像ＤＯ１と同様の画像であるため、ＨＭＩ制御部１７４は、変更がないオブジェクト画像については、新たに画像を生成せずに、前回生成したオブジェクト画像ＤＯ１をそのまま流用してもよい。
【００８１】
また、第５の場面において、ＨＭＩ制御部１７４は、車線Ｌ１から分岐する車線Ｌ４を含む道路画像ＲＯを生成する。また、ＨＭＩ制御部１７４は、第５の場面において、乗員により進路変更を実行させるために、進路変更先の車線Ｌ４に重畳して表示させる推奨車線画像ＲＥ２を生成する。これにより、乗員は、ターンバイターン画像ＩＭ５ａにより表示された情報が車線Ｌ４に対する進路変更であることを、より正確に把握することができる。
【００８２】
また、ＨＭＩ制御部１７４は、自車両Ｍの車線Ｌ４へ進路変更が完了した時点で、ターンバイターン画像および推奨車線画像の表示を終了する。自車両Ｍの車線Ｌ４へ進路変更が完了した時点とは、例えば、車線Ｌ１から車線Ｌ４への車線変更により、自車両Ｍの所定の位置（例えば、重心）が、車線Ｌ４の幅方向の中央付近に存在する場合、または自車両Ｍの全体が車線Ｌ４内に存在すると推測される時点である。
【００８３】
上述したように、ＨＭＩ制御部１７４は、ターンバイターン画像の表示の開始または終了に同期させて、推奨車線画像を表示させる。これにより、ＨＭＩ制御部１７４は、近い将来に進路変更を行う必要があることをターンバイターン画像により、事前に乗員に把握させることができるとともに、進路変更（例えば、車線変更）を行うタイミングを推奨車線画像の表示位置の変化によって乗員に把握させることができる。また、乗員に、現在の車線が目的地方向へ進行する車線であるか否かを、より正確に把握させることができる。したがって、より乗員に分かりやすい経路案内を行うことができる。
【００８４】
＜変形例＞
ＨＭＩ制御部１７４による画像の表示態様の変形例について説明する。例えば、ＨＭＩ制御部１７４は、目的地方面へ進行可能な車線が複数車線ある場合に、複数の進路変更後の車線のそれぞれに推奨車線画像を重畳して表示させてもよい。図１４は、ＨＭＩ制御部１７４により生成される自車両周辺画像ＩＭ６ｂの一例を示す図である。図１４の例では、車線Ｌ１〜Ｌ３のうち、車線Ｌ３から分岐する車線Ｌ１およびＬ２が目的地方面に進行可能な車線であるものとする。
【００８５】
ＨＭＩ制御部１７４は、道路画像ＲＯに対して、車線Ｌ１およびＬ２のそれぞれに重畳する推奨車線画像ＲＥ３を生成し、生成した推奨車線画像ＲＥ３を道路画像ＲＯに含まれる車線Ｌ１およびＬ２に擬した画像上に重畳表示させる。これにより、ＨＭＩ制御部１７４は、乗員に、車線Ｌ１およびＬ２の何れかの車線上を走行することで、目的地方面へ進行することができることを容易に把握させることができる。
【００８６】
また、ＨＭＩ制御部１７４は、自車両Ｍに対する走行態様を示す画像を生成し、生成した画像を道路画像ＲＯに重畳表示させてもよい。図１４の例において、自車両周辺画像ＩＭ６ｂには、ＬＫＡＳによる運転制御が実行されていることを示す画像の一例として、車線Ｌ１を区画する左右の区画線を車両システム側（認識部１３０等）で認識していることを示す画像ＢＬおよびＢＲが、車線Ｌ１の自車両Ｍ付近の左右の区画線に沿って重畳表示されている。
【００８７】
また、ＨＭＩ制御部１７４は、ＬＫＡＳ以外の走行態様（例えば、ＡＣＣ、ＬＣＡ）等に関する走行態様に対応付けられた画像を生成し、生成した画像を道路画像ＲＯに重畳表示させてもよい。例えば、ＡＣＣが実行されている場合、ＨＭＩ制御部１７４は、前走車両に対応する他車両画像ｍや、追従走行における目標軌道に擬した画像、追従対象の前走車両をシステム側で認識していることを示すロックオン画像等を生成し、生成した画像を道路画像に対応付けて重畳表示させる。これにより、乗員に、自車両Ｍの走行態様（運転制御の状態）を、より詳細に把握させることができる。
【００８８】
［処理フロー］
以下、実施形態の表示システムによる一連の処理の流れを、フローチャートを用いて説明する。図１５は、表示システムによる一連の処理の流れの一例を示すフローチャートである。本フローチャートの処理は、例えば、ナビゲーション装置５０により設定された目的地までの自車両Ｍの走行において、所定の周期で繰り返し実行されてよい。
【００８９】
まず、ＨＭＩ制御部１７４は、認識部１３０等により認識された自車両Ｍの周辺状況に基づいて、自車両Ｍの周辺の道路画像を生成し、生成した画像を表示部３２に表示させる（ステップＳ１００）。次に、ＨＭＩ制御部１７４は、第２取得部１７２により取得された情報に基づいて、自車両Ｍが進路変更を行うべき第１地点Ｐ１よりも所定距離手前の第２地点Ｐ２に到達したか否かを判定する（ステップＳ１０２）。
【００９０】
自車両Ｍが第２地点Ｐ２に到達したと判定された場合、ＨＭＩ制御部１７４は、第２取得部１７２により取得された情報に基づいて、自車両Ｍが第２地点Ｐ２よりも第１地点Ｐ１に近い、第３地点Ｐ３に到達しているか否かを判定する（ステップＳ１０４）。第３地点Ｐ３に到達していると判定された場合、ＨＭＩ制御部１７４は、進路変更先に対応するターンバイターン画像および推奨車線画像を生成し、生成したターンバイターン画像を表示するとともに、推奨車線画像を道路画像に含まれる進路変更先の車線に重畳表示させる（ステップＳ１０６）。また、ステップＳ１０４の処理において、第３地点Ｐ３に到達していないと判定された場合、ＨＭＩ制御部１７４は、進路変更先に対応するターンバイターン画像および推奨車線画像を生成し、生成したターンバイターン画像を表示するとともに、推奨車線画像を、推奨車線に重畳表示させる（ステップＳ１０８）。
【００９１】
次に、ＨＭＩ制御部１７４は、自車両Ｍの進路変更が終了したか否かを判定する（ステップＳ１１０）。自車両Ｍの進路変更が終了していないと判定された場合、ステップＳ１０４の処理に戻る。また、自車両Ｍの進路変更が終了していると判定された場合、ＨＭＩ制御部１７４は、ターンバイターン画像および推奨車線画像の表示を終了する（ステップＳ１１２）。これにより、本フローチャートの処理は、終了する。また、ステップＳ１０２の処理において、自車両Ｍが第２地点Ｐ２に到達していないと判定された場合にも、本フローチャートの処理は、終了する。
【００９２】
以上説明した実施形態によれば、より乗員に分かりやすい経路案内を行うことができる。より具体的には、実施形態によれば、乗員に対し、目的地方面に進行するために、近い将来に進路変更を行う必要があることをターンバイターン画像により予告表示することができるとともに、道路画像上に重畳される推奨車線画像の表示位置を変化させることで、進路変更すべき分岐地点付近であること、および進路変更を行うタイミングであることを、より正確に把握させることができる。これにより、表示システムは、より乗員に安心感を与える表示制御を行うことができる。
【００９３】
［ハードウェア構成］
図１６は、実施形態の表示システムを備えた車両システム１における運転制御装置１００のハードウェア構成の一例を示す図である。図示するように、運転制御装置１００は、通信コントローラ１００−１、ＣＰＵ１００−２、ワーキングメモリとして使用されるＲＡＭ１００−３、ブートプログラム等を格納するＲＯＭ１００−４、フラッシュメモリやＨＤＤ等の記憶装置１００−５、ドライブ装置１００−６等が、内部バスあるいは専用通信線によって相互に接続された構成となっている。通信コントローラ１００−１は、運転制御装置１００以外の構成要素との通信を行う。記憶装置１００−５には、ＣＰＵ１００−２が実行するプログラム１００−５ａが格納されている。このプログラムは、ＤＭＡ（Direct Memory Access）コントローラ（不図示）等によってＲＡＭ１００−３に展開されて、ＣＰＵ１００−２によって実行される。これによって、第１制御部１２０、第２制御部１６０、および第３制御部１７０のうち一部または全部が実現される。
【００９４】
上記説明した実施形態は、以下のように表現することができる。
画像を表示する表示部と、
プログラムを記憶するストレージと、
プロセッサと、を備え、
前記プロセッサは、前記プログラムを実行することにより、
前記車両の周辺の道路に擬した第１画像と、前記周辺の道路のうち、前記車両に設定された目的地までの経路に基づいて決定される推奨車線に擬した第２画像とを、前記表示部に表示させ、
前記目的地までの経路において、前記車両が進路変更すべき第１地点よりも所定距離手前の第２地点に到達した場合に、前記表示部に、前記車両の進路を案内する第３画像と、前記第２画像とを表示させる、
ように構成されている、表示システム。
【００９５】
以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
【符号の説明】
【００９６】
１…車両システム、１０…カメラ、１２…レーダ装置、１４…ファインダ、１６…物体認識装置、２０…通信装置、３０…ＨＭＩ、３２…表示部、４０…車両センサ、５０…ナビゲーション装置、６０…ＭＰＵ、８０…運転操作子、１００…運転制御装置、１２０…第１制御部、１３０…認識部、１４０…行動計画生成部、１４２…イベント決定部、１４４…目標軌道生成部、１６０…第２制御部、１６２…第１取得部、１６４…速度制御部、１６６…操舵制御部、１７０…第３制御部、１７２…第２取得部、１７４…ＨＭＩ制御部、２００…走行駆動力出力装置、２１０…ブレーキ装置、２２０…ステアリング装置
【図１】
2020051902.tif 000003
【図２】
2020051902.tif 000004
【図３】
2020051902.tif 000005
【図４】
2020051902.tif 000006
【図５】
2020051902.tif 000007
【図６】
2020051902.tif 000008
【図７】
2020051902.tif 000009
【図８】
2020051902.tif 000010
【図９】
2020051902.tif 000011
【図１０】
2020051902.tif 000012
【図１１】
2020051902.tif 000013
【図１２】
2020051902.tif 000014
【図１３】
2020051902.tif 000015
【図１４】
2020051902.tif 000016
【図１５】
2020051902.tif 000017
【図１６】
2020051902.tif 000018