(57)【要約】【課題】自動運転モード中にユーザが娯楽コンテンツを便利に使用することができるようにする。【解決手段】表示装置１００は、自動運転モードと手動運転モードの切り替え制御が可能な車両２で使用され、画像を表示する表示手段１０と、車両２から取得した情報に基づいて手動運転モードから自動運転モードへの切り替えを特定したことに応じて、娯楽コンテンツ項目を含む複数のコンテンツ項目が示されたメニュー画像を表示手段１０に表示させる制御部１１０と、を備える。制御部１１０は、メニュー画像における複数のコンテンツ項目のうち、いずれかを選択する選択操作を受け付けたことに応じて、表示手段１０における表示を、メニュー画像から、当該選択操作で選択されたコンテンツ項目に応じたコンテンツを表示するコンテンツ画像へと切り替える。【選択図】図１
2019082856.tif 000002
【特許請求の範囲】
【請求項１】
自動運転モードと手動運転モードの切り替え制御が可能な車両で使用される表示装置であって、
画像を表示する表示手段と、
前記車両から取得した情報に基づいて前記手動運転モードから前記自動運転モードへの切り替えを特定したことに応じて、娯楽コンテンツ項目を含む複数のコンテンツ項目が示されたメニュー画像を前記表示手段に表示させる制御手段と、を備え、
前記制御手段は、前記メニュー画像における前記複数のコンテンツ項目のうち、いずれかを選択する選択操作を受け付けたことに応じて、前記表示手段における表示を、前記メニュー画像から、当該選択操作で選択されたコンテンツ項目に応じたコンテンツを表示するコンテンツ画像へと切り替える、
ことを特徴とする表示装置。
【請求項２】
前記複数のコンテンツ項目の優先度を示す優先度情報を記憶する記憶手段を備え、
前記制御手段は、前記メニュー画像において、前記複数のコンテンツ項目を前記優先度に応じた態様で表示させる、
ことを特徴とする請求項１に記載の表示装置。
【請求項３】
前記優先度は、前記選択操作の履歴と頻度との少なくともいずれかに基づいて決定される、
ことを特徴とする請求項２に記載の表示装置。
【請求項４】
自動運転モードと手動運転モードの切り替え制御が可能な車両で使用される表示手段に画像を表示させる表示制御方法であって、
前記車両から取得した情報に基づいて前記手動運転モードから前記自動運転モードへの切り替えを特定したことに応じて、娯楽コンテンツ項目を含む複数のコンテンツ項目が示されたメニュー画像を前記表示手段に表示させるステップと、
前記メニュー画像における前記複数のコンテンツ項目のうち、いずれかを選択する選択操作を受け付けたことに応じて、前記表示手段における表示を、前記メニュー画像から、当該選択操作で選択されたコンテンツ項目に応じたコンテンツを表示するコンテンツ画像へと切り替えるステップと、を備える、
ことを特徴とする表示制御方法。
【請求項５】
自動運転モードと手動運転モードの切り替え制御が可能な車両で使用される表示手段に画像を表示させるためのプログラムであって、
コンピュータに、
前記車両から取得した情報に基づいて前記手動運転モードから前記自動運転モードへの切り替えを特定したことに応じて、娯楽コンテンツ項目を含む複数のコンテンツ項目が示されたメニュー画像を前記表示手段に表示させる処理と、
前記メニュー画像における前記複数のコンテンツ項目のうち、いずれかを選択する選択操作を受け付けたことに応じて、前記表示手段における表示を、前記メニュー画像から、当該選択操作で選択されたコンテンツ項目に応じたコンテンツを表示するコンテンツ画像へと切り替える処理と、
を実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、自動運転モードと手動運転モードの切り替え制御が可能な車両で使用される表示装置、表示制御方法、及びプログラムに関する。
【背景技術】
【０００２】
従来の技術として、自動運転モードと手動運転モードの切り替え制御が可能な車両において、自動運転モードに切り替えられたことに応じて娯楽モードが起動され、当該車両内の表示部に所定の表示を行う技術が開示されている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特表２０１６−５３３３０２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に記載の技術では、単に娯楽モードが起動されるだけであるため、自動運転モード中にユーザが娯楽コンテンツを便利に使用するに当たっては改善の余地がある。
【０００５】
本発明は、上記実情に鑑みてなされたものであり、自動運転モード中にユーザが娯楽コンテンツを便利に使用することができる表示装置、表示制御方法、及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明の第１の観点に係る表示装置は、
自動運転モードと手動運転モードの切り替え制御が可能な車両で使用される表示装置であって、
画像を表示する表示手段と、
前記車両から取得した情報に基づいて前記手動運転モードから前記自動運転モードへの切り替えを特定したことに応じて、娯楽コンテンツ項目を含む複数のコンテンツ項目が示されたメニュー画像を前記表示手段に表示させる制御手段と、を備え、
前記制御手段は、前記メニュー画像における前記複数のコンテンツ項目のうち、いずれかを選択する選択操作を受け付けたことに応じて、前記表示手段における表示を、前記メニュー画像から、当該選択操作で選択されたコンテンツ項目に応じたコンテンツを表示するコンテンツ画像へと切り替える。
【０００７】
上記目的を達成するため、本発明の第２の観点に係る表示制御方法は、
自動運転モードと手動運転モードの切り替え制御が可能な車両で使用される表示手段に画像を表示させる表示制御方法であって、
前記車両から取得した情報に基づいて前記手動運転モードから前記自動運転モードへの切り替えを特定したことに応じて、娯楽コンテンツ項目を含む複数のコンテンツ項目が示されたメニュー画像を前記表示手段に表示させるステップと、
前記メニュー画像における前記複数のコンテンツ項目のうち、いずれかを選択する選択操作を受け付けたことに応じて、前記表示手段における表示を、前記メニュー画像から、当該選択操作で選択されたコンテンツ項目に応じたコンテンツを表示するコンテンツ画像へと切り替えるステップと、を備える。
【０００８】
上記目的を達成するため、本発明の第３の観点に係るプログラムは、
自動運転モードと手動運転モードの切り替え制御が可能な車両で使用される表示手段に画像を表示させるためのプログラムであって、
コンピュータに、
前記車両から取得した情報に基づいて前記手動運転モードから前記自動運転モードへの切り替えを特定したことに応じて、娯楽コンテンツ項目を含む複数のコンテンツ項目が示されたメニュー画像を前記表示手段に表示させる処理と、
前記メニュー画像における前記複数のコンテンツ項目のうち、いずれかを選択する選択操作を受け付けたことに応じて、前記表示手段における表示を、前記メニュー画像から、当該選択操作で選択されたコンテンツ項目に応じたコンテンツを表示するコンテンツ画像へと切り替える処理と、
を実行させる。
【発明の効果】
【０００９】
本発明によれば、自動運転モード中にユーザが娯楽コンテンツを便利に使用することができる。
【図面の簡単な説明】
【００１０】
【図１】本発明の一実施形態に係る車両用表示システムのブロック図である。
【図２】本発明の一実施形態に係る表示装置の車両への搭載態様を示す図である。
【図３】通常態様に係る表示画像の一例を示す図である。
【図４】（ａ）はメニュー画像の一例を示し、（ｂ）はコンテンツ画像の一例を示す図である。
【図５】メモリに格納される優先度データの構成例を示す図である。
【図６】本発明の一実施形態に係る画像制御処理の一例を示すフローチャートである。
【発明を実施するための形態】
【００１１】
本発明の一実施形態に係る表示装置を、図面を参照して説明する。
【００１２】
本実施形態に係る車両用表示システム１は、図１に示すように、表示装置１００と、携帯端末４０と、車載ＥＣＵ（Electronic Control Unit）５０と、カーナビ（カーナビゲーション）システム６０と、手動運転意思検出部７０と、を備える。
【００１３】
表示装置１００は、車両用表示システム１の各部と通信することにより、図２に示すように、車両２に搭乗した運転者４に車両２に関する各種情報（以下、車両関連情報と言う）を表示する。車両関連情報は、車両２自体の情報のみならず、車両２の外部情報も含む。
【００１４】
本実施形態に係る表示装置１００が搭載される車両２は、車載ＥＣＵ５０の制御により、自動運転モードと手動運転モードの切り替えが可能なものである。ここで、例えば、手動運転モードに設定されているときの自動運転レベルはレベル０又はレベル１である。レベル０においては、運転者４がすべての主制御系統（加速・操舵・制動）の操作を行う。レベル１においては、加速・操舵・制動のいずれか一つをシステムが支援的に行う。また、例えば、自動運転モードに設定されているときの自動運転レベルはレベル３以上である。レベル３においては、限定的な環境下若しくは交通状況のみ、システムが加速・操舵・制動を行い、システムが要請したときは運転者４が対応する。
【００１５】
表示装置１００は、図２に示すように、車両２に搭載される（例えば、車両２のインスツルメントパネル内に設置される）。表示装置１００は、車両２のフロントガラス３（ウインドシールド）に表示光Ｌを投射することで、表示光Ｌが表す画像を虚像Ｖとしてフロントガラス３の前方に表示するヘッドアップディスプレイ（ＨＵＤ：Head-Up Display）として構成されている。虚像Ｖとして視認される画像は、車両関連情報を報知するためのものである。これにより、運転者４は、フロントガラス３を介した実景に重畳する虚像Ｖを視認可能となる。この虚像Ｖは、仮想的な表示面Ａに表示される。
【００１６】
表示装置１００は、図１に示すように、表示手段１０と、制御部１１０と、図示しない操作部と、を備える。
【００１７】
表示手段１０は、制御部１１０の制御の下で、車両関連情報を報知するための画像を表示する。表示手段１０は、液晶ディスプレイ（ＬＣＤ：Liquid Crystal Display）、ＬＣＤを背後から照明するバックライト等から構成されている。なお、表示手段１０は、有機ＥＬ（Electro-Luminescence）ディスプレイ（ＯＬＥＤ：Organic Light Emitting Diodes）や、ＤＭＤ（Digital Micromirror Device）、反射型及び透過型のＬＣＯＳ（登録商標：Liquid Crystal On Silicon）等で構成されてもよい。
【００１８】
また、表示装置１００は、図示しない反射部を備えている。表示手段１０に表示されている画像を表す表示光Ｌは、当該反射部で反射した後、フロントガラス３へと向かう。反射部は、例えば、平面鏡及び凹面鏡の二枚の鏡から構成される。平面鏡は、例えばコールドミラーからなり、表示手段１０からの表示光Ｌを凹面鏡へと反射させる。凹面鏡は、表示手段１０から射出されて平面鏡で反射した表示光Ｌを拡大しつつ、フロントガラス３へと反射させる。これにより、運転者４に視認される虚像Ｖは、表示手段１０に表示されている画像が拡大されたものとなる。なお、反射部は、１枚、又は３枚以上の鏡から構成されてもよい。
【００１９】
以上に例示した反射部を介して、表示手段１０からは、フロントガラス３に向けて表示光Ｌが射出される。この表示光Ｌがフロントガラス３で運転者４に向かって反射することで、運転者４から見てフロントガラス３の前方に虚像Ｖが表示される。
【００２０】
携帯端末４０は、ユーザによって携帯され車両２内で用いられるスマートフォン、タブレットＰＣ（Personal Computer）などであり、表示装置１００と無線又は有線により通信を行う。携帯端末４０は、制御部１１０に、後述のエンターテインメント（エンタメ）情報Ｉｅなどを送信する。無線通信としては、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＵＷＢ（Ultra Wide Band）、Ｚ−Ｗａｖｅ、ＺｉｇＢｅｅなどの規格に準拠した方式を用いることができる。また、有線通信としては、ＵＳＢ（Universal Serial Bus）などの公知の方式を用いることができる。
【００２１】
手動運転意思検出部７０は、車両２の運転者４が手動運転を行う意思があるか否かを検出し、その検出結果を信号Ｄ１〜Ｄ４として制御部１１０に出力する。手動運転意思検出部７０は、接触検出部７１と、シート位置検出部７２と、内カメラ７３と、生体情報検出部７４と、を備える。
【００２２】
接触検出部７１は、手動運転の際に操作される図示しない運転操作部（ステアリングホイール、アクセルペダル又はブレーキペダル）への接触があるか否かを検出し、その検出結果を含む検出信号Ｄ１を制御部１１０に出力する。例えば、接触検出部７１は、運転操作部に設けられるタッチセンサ又は圧力センサにより構成される。なお、接触検出部７１は、タッチセンサ又は圧力センサに限らず、運転操作部の操作量を検出する操作検出センサであってもよい。この操作検出センサは、例えば、何れも図示しないアクセルポジションセンサ、ブレーキポジションセンサ、舵角センサ又はトルクセンサである。この場合、接触検出部７１は運転者４の運転操作部への接触に伴う微少な操作量を検出する。
【００２３】
シート位置検出部７２は、車両２の前後方向における運転席の位置又は運転席の背もたれ部の角度を検出し、その検出結果を含む検出信号Ｄ２を制御部１１０に出力する。
【００２４】
内カメラ７３は、運転者４の顔を撮影し、その撮影した画像信号Ｄ３を制御部１１０に出力する。
【００２５】
生体情報検出部７４は、運転者４の脳波、心拍又は筋肉の動きを検出し、その検出結果を含む検出信号Ｄ４を制御部１１０に出力する。生体情報検出部７４は、例えば、運転者４の腕、脚又は頭等に装着される図示しないウェアラブル端末に設けられる。この場合、生体情報検出部７４は、検出信号Ｄ４を無線信号として制御部１１０に送信してもよい。
【００２６】
表示装置１００の制御部１１０は、マイクロコンピュータなどから構成される。詳しくは、制御部１１０は、ＣＰＵ（Central Processing Unit）等からなる処理部１１１と、ＲＯＭ（Read Only Memory）及びＲＡＭ（Random Access Memory）等からなるメモリ１１２と、を備える。
なお、表示装置１００には、図示しない電源が接続されており、例えば、車両２のイグニッションのオンに伴って制御部１１０へ動作電力が供給される。また、制御部１１０の少なくとも一部は、ＡＳＩＣ（Application Specific Integrated Circuit）などの専用回路によって構成されていてもよい。
【００２７】
メモリ１１２のＲＯＭは、動作プログラム（後述の画像制御処理を実行するためのプログラムＰＧを含む）や固定データ（後述の優先度情報ＰＥを含む）を予め記憶する。ＲＡＭは、各種の演算結果などを一時的に記憶する。例えば、ＲＡＭには、後述の画像制御処理における判別結果や決定結果を示すデータなどが記憶される。また、メモリ１１２は、表示手段１０に表示する画像を生成するために利用される画像データを記憶するビデオメモリを含む。
【００２８】
処理部１１１は、メモリ１１２から読み出した動作プログラムや固定データを用いて、表示装置１００の全体動作を制御するための処理を実行する。このときには、処理部１１１がＲＯＭから固定データを読み出す固定データ読出動作や、処理部１１１がメモリ１１２のＲＡＭに各種データを書き込んで一時記憶させるデータ書込動作、処理部１１１がＲＡＭに一時記憶されている各種データを読み出すデータ読出動作、処理部１１１がＩ／Ｆ（InterFace）を介して制御部１１０の外部から各種信号の入力を受け付ける受信動作、処理部１１１がＩ／Ｆを介して制御部１１０の外部へと各種信号を出力する送信動作なども行われる。また、処理部１１１は内蔵のタイマにより、適宜計時を行う。特にこの実施形態では、処理部１１１は、メモリ１１２に記憶されるプログラムＰＧを実行することで後述するフローチャートに沿った表示処理を行う。
【００２９】
処理部１１１は、図示しない操作部からの操作信号の入力を受け付ける。操作部は、例えば、タッチパネルや、プッシュボタンなどから構成され、ユーザによる操作内容を示す操作信号を処理部１１１に供給する。当該操作は、後述する「選択操作」や「コンテンツ終了操作」を含む。
【００３０】
処理部１１１は、車載ＥＣＵ５０とＣＡＮ（Controller Area Network）を介して通信可能に構成される。
車載ＥＣＵ５０は、車両２の各部を制御するものであり、この実施形態では特に、所定条件の下で車両２の運転モードを切り替えることにより運転支援を行う。例えば、処理部１１１は、車載ＥＣＵ５０から運転モード情報Ｉｍ、残燃料情報Ｉｆ、車速情報Ｉｓ、近接距離情報Ｉａ等の車両情報Ｉを取得する。
【００３１】
運転モード情報Ｉｍは、車両２が自動運転モード及び手動運転モードの何れの運転モードに設定されているかを示す情報である。前述のように、例えば、手動運転モードに設定されているときの自動運転レベルはレベル０又はレベル１である。また、例えば、自動運転モードに設定されているときの自動運転レベルはレベル３以上である。
【００３２】
近接距離情報Ｉａは、車両２から車両２の周囲に存在する物体までの近接距離を示す情報であり、車両２に搭載される何れも図示しないステレオカメラ、ソナー、超音波センサ、ミリ波レーダ等を利用して生成される。車速情報Ｉｓは、車両２の速度を示す情報であり、図示しない車速センサの検出結果に基づき生成される。残燃料情報Ｉｆは、車両２の燃料の残量を示す情報であり、図示しない残燃料検出センサの検出結果に基づき生成される。
【００３３】
また、処理部１１１は、カーナビシステム６０からカーナビ情報Ｉｎやエンタメ情報Ｉｅを取得する。
カーナビシステム６０は、人工衛星などから受信したＧＰＳ（Global Positioning System）信号に基づいて車両２の位置を算出するＧＰＳコントローラを含む。ナビゲーションシステムは、地図データを記憶する記憶部を有し、ＧＰＳコントローラからの位置情報に基づいて、現在位置近傍の地図データを記憶部から読み出し、ユーザにより設定された目的地までの案内経路を決定する。そして、カーナビシステム６０は、現在の車両２の位置や、決定した案内経路に関する情報を処理部１１１に出力する。また、カーナビシステム６０は、地図データを参照することにより、車両２の前方の施設の名称・種類や、施設と車両２との距離などを示す情報を処理部１１１に出力する。地図データでは、道路形状情報（車線、道路の幅員、車線数、交差点、カーブ、分岐路等）、制限速度などの道路標識に関する規制情報、車線が複数存在する場合の各車線についての情報などの各種情報が位置データと対応付けられている。カーナビシステム６０は、これらの各種情報をカーナビ情報Ｉｎとして、処理部１１１に出力する。
【００３４】
また、カーナビシステム６０は、インターネット通信部と、テレビ（ＴＶ）チューナーと、映像・音楽再生部とを有する。インターネット通信部は、ＷＡＮ（Wide Area Network）に直接アクセスできる通信モジュール、ＷＡＮにアクセス可能な外部装置（モバイルルータなど）や公衆無線ＬＡＮ（Local Area Network）のアクセスポイント等と通信するための通信モジュールなどから構成され、インターネットで取得可能な情報を制御部１１０に供給する。また、カーナビシステム６０は、ＴＶチューナーを介して受信したＴＶ情報を制御部１１０に供給する。また、カーナビシステム６０は、映像・音楽再生部として、内蔵メモリ、ＣＤ（Compact Disc）、ＤＶＤ（Digital Video Disk）などの記録媒体に記録された映像や音楽を再生可能であるとともに、映像や音楽に係る情報（作品タイトルや作者名など）を制御部１１０に供給する。また、映像・音楽再生部は、例えば、車両２内に設けられたスピーカーから再生した音声を出力する。
【００３５】
以上のように構成されたカーナビシステム６０は、娯楽コンテンツとして、映画、ＴＶ、ニュース、ブラウザ閲覧、ゲーム、音楽などの情報をエンタメ情報Ｉｅとして、処理部１１１に出力する。なお、カーナビ情報Ｉｎとエンタメ情報Ｉｅの少なくともいずれかは、携帯端末４０から処理部１１１に供給されてもよい。また、表示装置１００は、インターネット通信部やＧＰＳコントローラなどを備え、携帯端末４０やカーナビシステム６０を介さずに、カーナビ情報Ｉｎやエンタメ情報Ｉｅを取得可能であってもよい。
【００３６】
処理部１１１は、機能として、画像処理部１１１ａと、運転モード判別部１１１ｂと、運転モード切替推定部１１１ｃと、を備える。
【００３７】
画像処理部１１１ａは、メモリ１１２に記憶された画像データに基づき、表示手段１０の表示制御を行う。また、画像処理部１１１ａは、携帯端末４０やカーナビシステム６０から通信により取得した画像データに基づき、表示手段１０の表示制御を実行し、当該画像データに基づく虚像Ｖを表示する。画像処理部１１１ａは、表示手段１０に表示させる画像（結果として、表示面Ａで視認される画像）の切換タイミングを決定することなどにより、各種の表示を実行させるための制御を行う。なお、画像処理部１１１ａでは、表示要素（虚像Ｖとして視認される画像に含まれる要素）毎にレイヤーが割り当てられており、個別の表示制御が可能となっている。当該表示要素は、車両情報画像Ｃに含まれる残燃料情報画像Ｃａ、車速情報画像Ｃｂや、メニュー画像Ｅ１に含まれる各コンテンツ項目を示す画像などである。これらの画像については後述する。
【００３８】
運転モード判別部１１１ｂは、車載ＥＣＵ５０から取得した運転モード情報Ｉｍに基づき、現在車両２が手動運転モードであるか、自動運転モードであるかを判別する。
【００３９】
運転モード切替推定部１１１ｃは、（ｉ）車載ＥＣＵ５０とカーナビシステム６０の少なくともいずれかからの情報に基づき、手動運転モードと自動運転モードとの一方から他方へ切り替えられることを推定するとともに、（ｉｉ）手動運転意思検出部７０からの情報に基づき、自動運転モードから手動運転モードへ切り替えられることを推定する。
【００４０】
まず、車載ＥＣＵ５０及びカーナビシステム６０からの情報に基づいて運転モードの切り替えを推定する例を説明する。
運転モード切替推定部１１１ｃは、カーナビシステム６０からのカーナビ情報Ｉｎと、車載ＥＣＵ５０からの車速情報Ｉｓと、近接距離情報Ｉａとの少なくともいずれかに基づき、自動運転モードの許容環境（例えば、高速道路）に対しての車両２の位置を算出する。そして、運転モード切替推定部１１１ｃは、車両２の当該許容環境まで（例えば、高速道路の入口まで）の距離や所要時間が所定値以下となった場合には、手動運転モードから自動運転モードへの切り替えを推定する。一方、運転モード切替推定部１１１ｃは、車両２が当該許容環境から出るまで（例えば、高速道路の出口まで）の距離や所要時間が所定値以下となった場合には、自動運転モードから手動運転モードへの切り替えを推定する。
【００４１】
なお、車両２や表示装置１００が外部サーバーやインフラなどと無線通信する通信装置を有し、当該通信により取得した交通情報を用いて運転モードの切り替えを推定してもよい。例えば、安全運転支援システム（ＤＳＳＳ：Driving Safety Support Systems）の基地局から、インフラストラクチャーとして設置された路側無線装置を介して、交通情報を取得することができる。
【００４２】
続いて、手動運転意思検出部７０からの信号Ｄ１〜Ｄ４に基づいて運転モードの切り替えを推定する例を説明する。
運転モード切替推定部１１１ｃは、検出信号Ｄ１に基づき運転操作部への接触があるか否かを判別する。ここで、運転者４による運転操作部への接触があることを第１条件とする。
運転モード切替推定部１１１ｃは、検出信号Ｄ２に基づき運転席が手動運転に適した状態に調整されたか否かを判別する。ここで、運転席が手動運転に適した状態に調整されることを第２条件とする。
運転モード切替推定部１１１ｃは、画像信号Ｄ３に基づき運転者４の視線が手動運転に適した位置にあるか否かを判別する。ここで、運転者４の視線が手動運転に適した位置にあることを第３条件とする。
運転モード切替推定部１１１ｃは、検出信号Ｄ４に基づき運転者４の生体情報が手動運転に適した状態にあるか否かを判別する。ここで、運転者４の生体情報が手動運転に適した状態にあることを第４条件とする。
【００４３】
運転モード切替推定部１１１ｃは、第１条件、第２条件、第３条件及び第４条件のうち何れか一つの条件が成立したときに、自動運転モードから手動運転モードへ切り替えられることを推定する。なお、この例に限らず、運転モード切替推定部１１１ｃは、第１条件、第２条件、第３条件及び第４条件のうち複数の条件が成立したときに、自動運転モードから手動運転モードへ切り替えられることを推定する。
【００４４】
第２条件について、より詳しくは、運転モード切替推定部１１１ｃは、車両２の前後方向における運転席の位置及び／又は運転席の背もたれ部の角度が予め設定される設定範囲内にあるとき運転席が手動運転に適した状態に調整された旨判別し、車両２の前後方向における運転席の位置及び／又は運転席の背もたれ部の角度がこの設定範囲外にあるとき運転席が手動運転に適した状態に調整されていない旨判別する。
【００４５】
第３条件について、より詳しくは、運転モード切替推定部１１１ｃは、公知の視線検出技術を利用して検出された運転者４の視線が走行道路に注がれている場合には運転者４の視線が手動運転に適した位置にある旨判別し、検出された運転者４の視線が走行道路に注がれていない場合には運転者４の視線が手動運転に適した位置にない旨判別する。
【００４６】
第４条件について、より詳しくは、運転モード切替推定部１１１ｃは、検出された運転者４の脳波、心拍及び筋肉の少なくとも何れか一つの信号波形が予め設定された運転準備パターンと一致したとき、運転者４の生体情報が手動運転に適した状態にある旨判別し、この信号波形が上記運転準備パターンと一致しないとき、運転者４の生体情報が手動運転に適した状態にない旨判別する。上記運転準備パターンは、実験又はシミュレーションにより生成される。
【００４７】
なお、運転モードが切り替わることの推定は、表示装置１００ではなく、車両２側のコントローラによってなされてもよい。この場合、表示装置１００の制御部１１０は、当該コントローラから取得した推定結果を示す情報を用いればよい。
【００４８】
車両用表示システム１の構成の説明は以上である。表示装置１００は、表示手段１０の表示制御を実行し、車両関連情報を報知するための種々の画像を虚像Ｖとして表示することが可能であるが、以下では、図３、図４（ａ）、（ｂ）等を参照して、本実施形態に特有の表示態様を説明した後に、図６を参照して、当該表示態様を切り替えるために実行される画像制御処理について説明する。
【００４９】
図３は、手動運転モード時に実現される通常態様の表示画像の一例である、車両情報画像Ｃを示す図である。
車両情報画像Ｃは、燃料の残量をバーグラフにより表す残燃料情報画像Ｃａと、車両２の速度を数字により表す車速情報画像Ｃｂと、を含む。制御部１１０は、車載ＥＣＵ５０からの車速情報Ｉｓに応じて車速情報画像Ｃｂを更新するとともに、車載ＥＣＵ５０からの残燃料情報Ｉｆに応じて残燃料情報画像Ｃａを更新する。
【００５０】
図４（ａ）は、自動運転モード時に実現される娯楽態様の表示画像の一例である、メニュー画像Ｅ１を示す図である。
メニュー画像Ｅ１は、娯楽コンテンツ項目を含む複数のコンテンツ項目が示された画像である。図示例では、娯楽コンテンツ項目として、「映画」、「ＴＶ」、「ニュース」、「Ｉｎｔｅｒｎｅｔ（ブラウザ閲覧）」、「Ｇａｍｅ」、「音楽」が示されている。これらの娯楽コンテンツに応じたコンテンツは、カーナビシステム６０又は携帯端末４０からのエンタメ情報Ｉｅにより提供される。また、メニュー画像Ｅ１においては、娯楽コンテンツ以外の項目として「カーナビ」が示されている。当該カーナビに係るコンテンツは、カーナビシステム６０又は携帯端末４０からのカーナビ情報Ｉｎにより提供される。
【００５１】
メニュー画像Ｅ１に示された各コンテンツ項目は、メモリ１１２に記憶された優先度情報ＰＥが示す優先度に応じた態様で表示される。優先度情報ＰＥは、図５に示すように、コンテンツ項目と優先度とを対応付けたデータである。図５では、優先度を示す数値が小さい程、優先度が高いことを表している。
図４（ａ）に示すように、メニュー画像Ｅ１内には、コンテンツ項目を示す画像の表示領域Ｈ１〜Ｈ７が規定されている。これら表示領域は、優先度が高いものから順に、Ｈ１、Ｈ２、Ｈ３、Ｈ４、Ｈ５、Ｈ６、Ｈ７である。これら表示領域は、図４（ａ）の例では、メニュー画像Ｅ１内の左上から順に優先度が高く、且つ、大きく設定されている。処理部１１１は、メニュー画像Ｅ１を表示する際には、優先度情報ＰＥを参照し、このような優先度に応じた表示領域に、各コンテンツ項目を示す画像を表示する。例えば、優先度情報ＰＥを参照し、「映画」の優先度が「１」であれば、映画に係るコンテンツ項目を示す画像を「Ｈ１」の領域に表示させる。
【００５２】
なお、優先度に応じたコンテンツ項目の表示態様は、任意であり、種々の態様を適用可能である。例えば、優先度が高いコンテンツ項目ほど、明度や彩度が高い画像で表してもよい。また、優先度が所定順位以上のものと、当該所定順位未満のものとで、色や形状を変化させることで優先度の認識を可能にしてもよい。また、横長の帯状のコンテンツ項目を上下方向に配列し、優先度が高いコンテンツ項目ほど上側に表示してもよい。また、虚像Ｖの結像位置が複数設定されている場合や、３次元コンピュータグラフィックスが可能な場合は、優先度が高いコンテンツ項目ほどユーザにとって近くに表示されるなど、表示画像の奥行きを用いて優先度を認識させてもよい。
【００５３】
また、優先度情報ＰＥが示す優先度は、ユーザによるコンテンツ項目の選択頻度や、選択履歴に応じて更新可能となっている。例えば、処理部１１１は、選択頻度の高さに応じて優先度情報ＰＥが示す優先度を更新する。なお、処理部１１１は、選択頻度ではなく、直近に選択されたものから順に優先度情報ＰＥが示す優先度を更新してもよい。また、処理部１１１は、携帯端末４０などを介して取得可能なユーザの属性（性別、年齢、消費傾向、閲覧傾向など）を示す情報に応じて、優先度情報ＰＥが示す優先度を更新してもよい。また、処理部１１１は、選択頻度、選択履歴、ユーザの属性のうち、複数の情報を重み付けして評価するなどの公知のアルゴリズムを用い、優先度情報ＰＥが示す優先度を更新してもよい。このように、どのように優先度を更新するかは目的に応じて任意である。
【００５４】
図４（ｂ）は、自動運転モード時に実現される娯楽態様の表示画像の一例である、コンテンツ画像Ｅ２を示す図である。
コンテンツ画像Ｅ２は、メニュー画像Ｅ１が表示されている際に、処理部１１１がユーザによる選択操作を受け付けたことに応じて、メニュー画像Ｅ１から切り替えられる画像である。選択操作は、図示しない操作部からユーザによってなされるものであり、メニュー画像Ｅ１に示された複数のコンテンツ項目のうち、いずれかを選択するための操作である。図４（ｂ）は、図４（ａ）のメニュー画像Ｅ１における表示領域Ｈ１に示された「映画」のコンテンツ項目が、選択操作によって選択された際に遷移するコンテンツ画像Ｅ２を表している。当該コンテンツ画像Ｅ２は、選択された「映画」が再生されていることを示している。なお、メニュー画像Ｅ１から、選択されたコンテンツ項目に応じたコンテンツ画像Ｅ２へ切り替わった際に、当該コンテンツが直ぐさま再生されるか否かや、利用可能となるか否かは、コンテンツに応じて適宜定めればよい。例えば、処理部１１１は、画像や音声により、当該コンテンツ項目に応じたコンテンツを再生するか否かの許可を求める報知を実行し、ユーザによる許可操作を受け付けたことに応じて、コンテンツを再生してもよい。
【００５５】
このように、例えばレベル３以上の自動運転モード時に娯楽態様の表示を行うことにより、運転者４が運転から解放された際に、娯楽コンテンツを便利に使用することができる。
【００５６】
続いて、図６を参照して、画像制御処理について説明する。例えば、車両２のイグニッションのオンに伴って表示装置１００に電源が投入されたことを契機に、処理部１１１は、画像制御処理を実行する。なお、当該処理の開始時では、表示手段１０は図３に示すような通常態様での表示を行っているものとする。
【００５７】
（画像制御処理）
まず、処理部１１１は、表示手段１０が通常態様で表示中であるか否かを判別し（ステップＳ１）、通常態様で表示中である場合（ステップＳ１；Ｙｅｓ）、ステップＳ２の処理を実行する。一方、通常態様で表示中でない場合（ステップＳ１；Ｎｏ）、後述のステップＳ１０の処理を実行する。
【００５８】
ステップＳ２において、処理部１１１は、自動運転モードへの切り替えを特定できるか否かを判別する。ここで、自動運転モードへの切り替えの特定は、（ｉ）処理部１１１が運転モード判別部１１１ｂとしての機能で、車載ＥＣＵ５０から取得した運転モード情報Ｉｍが自動運転モードであることを示しているときだけでなく、（ｉｉ）運転モード切替推定部１１１ｃとしての機能で、上述のように、手動運転モードから自動運転モードへ切り替わることを推定した際にも行われる。
【００５９】
自動運転モードへの切り替えを特定できない場合（ステップＳ２；Ｎｏ）、処理部１１１は、表示手段１０の通常態様による表示を継続する（ステップＳ３）。一方、自動運転モードへの切り替えを特定できた場合（ステップＳ２；Ｙｅｓ）、処理部１１１は、メモリ１１２内の優先度情報ＰＥを参照し（ステップＳ４）、優先度情報ＰＥが示す優先度に応じてコンテンツ項目を配置した、図４（ａ）に示すメニュー画像Ｅ１を表示手段１０に表示させる（ステップＳ５）。
【００６０】
続いて、処理部１１１は、ユーザ（主に運転者４）による選択操作があったか否かを判別する（ステップＳ６）。選択操作があった場合には（ステップＳ６；Ｙｅｓ）、処理部１１１は、選択操作による選択対象のコンテンツ項目を示す選択情報をメモリ１１２に記憶し、必要がある場合は優先度情報ＰＥの優先度を更新する（ステップＳ７）。前述の通り、優先度情報ＰＥが示す優先度は、ユーザによるコンテンツ項目の選択頻度や、選択履歴に応じて更新可能となっている。一方、選択操作がない場合には（ステップＳ６；Ｎｏ）、処理部１１１は、処理をステップＳ９にスキップする。
【００６１】
ステップＳ７に続いて、処理部１１は、ステップＳ６における選択操作されたコンテンツ項目に応じたコンテンツを示すコンテンツ画像Ｅ２を表示する（ステップＳ８）。例えば、メニュー画像Ｅ１における表示領域Ｈ１に示された「映画」のコンテンツ項目が、選択操作によって選択された際には、図４（ｂ）に示すコンテンツ画像Ｅ２を表示する。
【００６２】
続いて、処理部１１１は、手動運転モードへの切り替えを特定できるか否かを判別する（ステップＳ９）。ここで、手動運転モードへの切り替えの特定は、（ｉ）処理部１１１が運転モード判別部１１１ｂとしての機能で、車載ＥＣＵ５０から取得した運転モード情報Ｉｍが手動運転モードであることを示しているときだけでなく、（ｉｉ）運転モード切替推定部１１１ｃとしての機能で、上述のように、自動運転モードから手動運転モードへ切り替わることを推定した際にも行われる。
【００６３】
手動運転モードへの切り替えを特定できた場合（ステップＳ９；Ｙｅｓ）、処理部１１１は、表示手段１０の表示態様を娯楽態様から通常態様へと切り替え（ステップＳ３）、処理を終了する。一方、手動運転モードへの切り替えを特定できない場合（ステップＳ９；Ｎｏ）、処理部１１１は、処理を終了する。以降、処理部１１１は、例えば表示装置１００の電源がオフされるまで、所定の制御周期で継続して画像制御処理を実行する。
【００６４】
ステップＳ１に戻って、通常態様で表示中でない場合（ステップＳ１；Ｎｏ）、つまり、ステップＳ５でメニュー画像Ｅ１に切り替えられていたか、ステップＳ８でコンテンツ画像Ｅ２に切り替えられており、娯楽態様で表示中である場合には、処理部１１１は、ステップＳ１０の処理を実行する。
【００６５】
ステップＳ１０では、娯楽態様としてコンテンツ画像Ｅ２を表示中であるか否かを判別し、コンテンツ画像Ｅ２を表示中でない場合（ステップＳ１０；Ｎｏ）、つまり、メニュー画像Ｅ１を表示中の場合は、ステップＳ６の処理を実行する。一方で、コンテンツ画像Ｅ２を表示中である場合（ステップＳ１０；Ｙｅｓ）、処理部１１１は、コンテンツ終了操作があったか否かを判別する（ステップＳ１１）。コンテンツ終了操作があった場合には（ステップＳ１１；Ｙｅｓ）、ステップＳ４、Ｓ５の処理が実行され、メニュー画像Ｅ１に戻ることになる。
【００６６】
ステップＳ１１で、コンテンツ終了操作がなされていないと判別すると（ステップＳ１１；Ｎｏ）、コンテンツ画像Ｅ２はそのまま継続され、処理部１１１は、ステップＳ９の処理を実行する。ステップＳ１１又はＳ８からＳ９へと処理が遷移し、コンテンツ画像Ｅ２が表示中である場合に、手動運転モードへの切り替えを特定すると（ステップＳ９；Ｙｅｓ）、処理部１１１は、直ちにコンテンツ画像Ｅ２から通常態様の表示画像へと画像を切り替える。また、ステップＳ５、Ｓ６、Ｓ９と処理が遷移し、メニュー画像Ｅ１が表示中である場合に、手動運転モードへの切り替えを特定すると（ステップＳ９；Ｙｅｓ）、処理部１１１は、直ちにメニュー画像Ｅ１から通常態様の表示画像へと画像を切り替える。
このように、表示画像が娯楽態様で表示されている場合に、実際に手動運転モードになった際は勿論のこと、手動運転モードになると推定される際にも、表示態様を娯楽態様から通常態様へ切り替えることができるため、ユーザ（主に運転者４）の安全を確保することができる。
【００６７】
なお、本発明は以上の実施形態、変形例、及び図面によって限定されるものではない。本発明の要旨を変更しない範囲で、適宜、変更（構成要素の削除も含む）を加えることが可能である。
【００６８】
表示光Ｌの投射対象は、フロントガラス３に限定されず、板状のハーフミラー、ホログラム素子等により構成されるコンバイナであってもよい。また、表示手段１０は、車両２の運転者４の頭部に装着されるヘッドマウントディスプレイ（ＨＭＤ：Head Mounted Display）として構成され、ＨＭＤが虚像として表示する表示画像において、メニュー画像Ｅ１やコンテンツ画像Ｅ２が表示可能であってもよい。つまり、表示手段１０は、車両２に搭載されているものに限られず、車両２で使用されるものであればよい。
【００６９】
また、以上の実施形態では、表示手段１０がＨＵＤとして構成され、虚像Ｖを表示する例を示したが、これに限られない。表示手段１０は、例えば、車両２のインスツルメントパネルに設置された、ＬＣＤ、ＯＬＥＤなどの表示ディスプレイであってもよい。
【００７０】
また、以上では、自動運転モードに設定されているときの自動運転レベルがレベル３以上である例を説明したが、車両２の搭乗車の安全が確保できる限りにおいてはこの限りでなく、自動運転モードに設定されているときの自動運転レベルがレベル２であってもよい。
【００７１】
また、図６に示す画像制御処理を構成する各処理の変更、追加、又は削除は任意である。例えば、運転モードの切り替え推定は行わずに、実際に運転モードが切り替わったときにのみ、表示画像の表示態様の切り替えを実行するようにしてもよい。
【００７２】
また、動作プログラム（プログラムＰＧを含む）は、予めメモリ１１２のＲＯＭに記憶されているものとしたが、着脱自在の記録媒体により配布・提供されてもよい。また、動作プログラムは、表示装置１００と接続された他の機器からダウンロードされるものであってもよい。また、表示装置１００は、他の機器と電気通信ネットワークなどを介して各種データの交換を行うことにより動作プログラムに従う各処理を実行してもよい。
【００７３】
（１−１）以上に説明した表示装置１００は、自動運転モードと手動運転モードの切り替え制御が可能な車両２で使用され、画像（例えば、虚像Ｖ）を表示する表示手段１０と、車両２から取得した情報（運転モード情報Ｉｍ、車速情報Ｉｓ、近接距離情報Ｉａ、信号Ｄ１〜Ｄ４など）に基づいて手動運転モードから自動運転モードへの切り替えを特定したこと（推定したことも含む）に応じて、娯楽コンテンツ項目を含む複数のコンテンツ項目が示されたメニュー画像Ｅ１を表示手段１０に表示させる制御部１１０（制御手段の一例）と、を備える。制御部１１０は、メニュー画像Ｅ１における複数のコンテンツ項目のうち、いずれかを選択する選択操作を受け付けたことに応じて、表示手段１０における表示を、メニュー画像Ｅ１から、当該選択操作で選択されたコンテンツ項目に応じたコンテンツを表示するコンテンツ画像Ｅ２へと切り替える。
（１−２）また、制御部１１０による表示制御方法は、車両２から取得した情報に基づいて手動運転モードから自動運転モードへの切り替えを特定したことに応じて、娯楽コンテンツ項目を含む複数のコンテンツ項目が示されたメニュー画像Ｅ１を表示手段１０に表示させるステップと、メニュー画像Ｅ１における複数のコンテンツ項目のうち、いずれかを選択する選択操作を受け付けたことに応じて、表示手段１０における表示を、メニュー画像Ｅ１から、当該選択操作で選択されたコンテンツ項目に応じたコンテンツを表示するコンテンツ画像Ｅ２へと切り替えるステップと、を備える。
（１−３）また、プログラムＰＧは、制御部１１０（コンピュータの一例）に、車両２から取得した情報に基づいて手動運転モードから自動運転モードへの切り替えを特定したことに応じて、娯楽コンテンツ項目を含む複数のコンテンツ項目が示されたメニュー画像Ｅ１を表示手段１０に表示させる処理と、メニュー画像Ｅ１における複数のコンテンツ項目のうち、いずれかを選択する選択操作を受け付けたことに応じて、表示手段１０における表示を、メニュー画像Ｅ１から、当該選択操作で選択されたコンテンツ項目に応じたコンテンツを表示するコンテンツ画像Ｅ２へと切り替える処理と、を実行させる。
このようにしたので、前述の通り、自動運転モード中にユーザ（主に運転者４）が娯楽コンテンツを便利に使用することができる。
【００７４】
（２）表示装置１００は、複数のコンテンツ項目の優先度を示す優先度情報ＰＥを記憶するメモリ１１２（記憶手段の一例）を備え、制御部１１０は、メニュー画像Ｅ１において、複数のコンテンツ項目を優先度に応じた態様で表示させてもよい。
（３）また、当該優先度は、選択操作の履歴と頻度との少なくともいずれかに基づいて決定されてもよい。
このようにすれば、ユーザの好みが反映された娯楽を提供することができるため、ユーザフレンドリである。
【００７５】
以上の説明では、本発明の理解を容易にするために、公知の技術的事項の説明を適宜省略した。
【符号の説明】
【００７６】
１…車両用表示システム
２…車両、３…フロントガラス、４…運転者、Ａ…表示面
１００…表示装置
１０…表示手段
１１０…制御部
１１１…処理部
１１１ａ…画像処理部、１１１ｂ…運転モード判別部、１１１ｃ…運転モード切替推定部
１１２…メモリ、ＰＧ…プログラム、ＰＥ…優先度情報
４０…携帯端末、Ｉｅ…エンタメ情報
５０…車載ＥＣＵ
Ｉｍ…運転モード情報、Ｉｓ…車速情報、Ｉｆ…残燃料情報、Ｉａ…近接距離情報
６０…カーナビシステム、Ｉｎ…カーナビ情報
７０…手動運転意思検出部
７１…接触検出部、Ｄ１…検出信号
７２…シート位置検出部、Ｄ２…検出信号
７３…内カメラ、Ｄ３…画像信号
７４…生体情報検出部、Ｄ４…検出信号
Ｃ…車両情報画像、Ｃａ…残燃料情報画像、Ｃｂ…車速情報画像
Ｅ１…メニュー画像、Ｈ１〜Ｈ７…表示領域
Ｅ２…コンテンツ画像
【図１】
2019082856.tif 000003
【図２】
2019082856.tif 000004
【図３】
2019082856.tif 000005
【図４】
2019082856.tif 000006
【図５】
2019082856.tif 000007
【図６】
2019082856.tif 000008