(57)【要約】【課題】搭乗員の簡単な動作で、１つのメイン画面エリアに表示されている表示情報を他のメイン画面エリアに変更することができる車両用表示システムを提供すること。【解決手段】車両用表示システム１の制御装置は、各メイン画面エリアＥＭＡ〜ＥＭＥ内の一部に、通常注視画像ＸＮを表示する注視画像表示出力部と、視線状態に基づいて、複数のメイン画面エリアＥＭＡ〜ＥＭＥのうち、１つのメイン画面エリアの通常注視画像ＸＮを搭乗者２００が視認している否かを判定する注視画像視認判定部と、入力部に基づいて、搭乗者２００が視認していると判定された通常注視画像ＸＮに対応するメイン画面エリアを選択するメイン画面エリア選択部とを有し、メイン画面エリア選択部により先に選択された先選択メイン画面エリアＥＭ１において表示されている先選択表示情報Ｓ１を、後に選択された後選択メイン画面エリアＥＭ２に表示する。【選択図】図１
2019215663.tif 000002
【特許請求の範囲】
【請求項１】
車両の搭乗者の視線の状態である視線状態を検出する視線状態検出装置と、
前記搭乗者が視認できる１以上の表示装置と、
１以上の前記表示装置により構成される複数のメイン画面エリアと、
前記複数のメイン画面エリアに対する表示制御を行う制御装置と、
前記搭乗者の決定意志が入力される入力部と、
を備え、
前記制御装置は、
各前記メイン画面エリア内の一部に、注視画像を表示する注視画像表示出力部と、
前記視線状態に基づいて、前記複数のメイン画面エリアのうち、１つの前記メイン画面エリアの前記注視画像を前記搭乗者が視認している否かを判定する注視画像視認判定部と、
前記入力部に基づいて、前記搭乗者が視認していると判定された前記注視画像に対応する前記メイン画面エリアを選択するメイン画面エリア選択部と、
複数の前記メイン画面エリアのうち、１つの前記メイン画面エリアにおいて表示されている表示情報を他の前記メイン画面エリアにおいて表示する画面制御部と、
を有し、
前記画面制御部は、前記メイン画面エリア選択部により先に選択された前記メイン画面エリアである先選択メイン画面エリアにおいて表示されている先選択表示情報を、後に選択された前記メイン画面エリアである後選択メイン画面エリアに表示する、
ことを特徴とする車両用表示システム。
【請求項２】
請求項１に記載の車両用表示システムにおいて、
前記画面制御部は、
前記注視画像視認判定部により、前記搭乗者が視認していると判定された前記注視画像の表示態様を、前記搭乗者が視認していると判定される前の表示態様である通常表示態様と異なる視認中表示態様とする、
車両用表示システム。
【請求項３】
請求項２に記載の車両用表示システムにおいて、
前記画面制御部は、
前記メイン画面エリア選択部により、前記メイン画面エリアが選択された場合に、選択された前記メイン画面エリアに対応する前記注視画像の表示態様を、前記通常表示態様および視認中表示態様と異なる選択後表示態様とする、
車両用表示システム。
【請求項４】
請求項１〜３のいずれか１項に記載の車両用表示システムにおいて、
制御装置は、
前記メイン画面エリア選択部により、前記先選択メイン画面エリアが選択されると、前記先選択メイン画面エリア内の一部に、複数の変更モードに対応する変更モード画像を表示する変更モード画像出力部と、
前記視線状態に基づいて、前記複数の変更モード画像のうち、１つの前記変更モード画像を前記搭乗者が視認している否かを判定する変更モード画像視認判定部と、
前記入力部に基づいて、前記搭乗者が視認していると判定された前記変更モード画像に対応する変更モードを選択する変更モード選択部と、
を有し、
前記画面制御部は、前記先選択表示情報を、前記後選択メイン画面エリアに表示するとともに、前記変更モード選択部により、選択された前記変更モードに基づいて、前記先選択メイン画面エリアにおいて表示される表示情報を変更する、
車両用表示システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車両用表示システムに関する。
【背景技術】
【０００２】
車室内においては、搭乗者に対する情報提供のため、種々の情報を表示する複数の表示装置が設けられている。通常、表示装置の多くはタッチパネルモニタであり、搭乗者が操作することで、表示装置のメイン画面エリアに表示する表示情報を選択することとなる。一方、搭乗者の状態を検出するために、車両の搭乗者の視線の状態である視線状態を検出する視線状態検出装置が設けられている（例えば、特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１７−０２１７３１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、搭乗者において、複数のメイン画面エリアのうち、１つのメイン画面エリアに表示されている表示情報を他のメイン画面エリアに表示するように変更したいという要望がある。表示装置がタッチパネルモニタである場合、運転者が１つのメイン画面エリアを視認し、表示情報を表示するメイン画面エリアを変更する意志に基づいてタッチパネルを操作することで、変更先となるメイン画面エリアの候補を複数表示させ、タッチパネルを操作することで表示された複数のメイン画面エリアのうち１つのメイン画面エリアを選択し、さらにタッチパネルを操作することで選択したメイン画面エリアを変更先のメイン画面エリアとして決定することとなる。従って、搭乗者が１つのメイン画面エリアを注視している時間が長く、変更先のメイン画面エリアを決定するまでの搭乗者の動作が複雑であるという問題がある。
【０００５】
本発明は、上記の点に鑑みてなされるものであり、搭乗員の簡単な動作で、１つのメイン画面エリアに表示されている表示情報を他のメイン画面エリアに変更することができる車両用表示システムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明に係る車両用表示システムは、車両の搭乗者の視線の状態である視線状態を検出する視線状態検出装置と、前記搭乗者が視認できる１以上の表示装置と、１以上の前記表示装置により構成される複数のメイン画面エリアと、前記複数のメイン画面エリアに対する表示制御を行う制御装置と、前記搭乗者の決定意志が入力される入力部と、を備え、前記制御装置は、各前記メイン画面エリア内の一部に、注視画像を表示する注視画像表示出力部と、前記視線状態に基づいて、前記複数のメイン画面エリアのうち、１つの前記メイン画面エリアの前記注視画像を前記搭乗者が視認している否かを判定する注視画像視認判定部と、前記入力部に基づいて、前記搭乗者が視認していると判定された前記注視画像に対応する前記メイン画面エリアを選択するメイン画面エリア選択部と、複数の前記メイン画面エリアのうち、１つの前記メイン画面エリアにおいて表示されている表示情報を他の前記メイン画面エリアにおいて表示する画面制御部と、を有し、前記画面制御部は、前記メイン画面エリア選択部により先に選択された前記メイン画面エリアである先選択メイン画面エリアにおいて表示されている先選択表示情報を、後に選択された前記メイン画面エリアである後選択メイン画面エリアに表示する、ことを特徴とする。
【０００７】
また、上記車両用表示システムにおいて、前記制御装置は、前記注視画像視認判定部により、前記搭乗者が視認していると判定された前記注視画像の表示態様を、前記搭乗者が視認していると判定される前の表示態様である通常表示態様と異なる視認中表示態様とする、ものである。
【０００８】
また、上記車両用表示システムにおいて、前記制御装置は、前記メイン画面エリア選択部により、前記メイン画面エリアが選択された場合に、選択された前記メイン画面エリアに対応する前記注視画像の表示態様を、前記通常表示態様および視認中表示態様と異なる選択後表示態様とする、ものである。
【０００９】
また、上記車両用表示システムにおいて、制御装置は、前記メイン画面エリア選択部により、先に前記メイン画面エリアが選択されると、前記先選択メイン画面エリア内の一部に、複数の変更モードに対応する変更モード画像を表示する変更モード画像出力部と、前記視線状態に基づいて、前記複数の変更モード画像のうち、１つの前記変更モード画像を前記搭乗者が視認している否かを判定する変更モード画像視認判定部と、前記入力部に基づいて、前記搭乗者が視認していると判定された前記変更モード画像に対応する変更モードを選択する変更モード選択部と、を有し、前記画面制御部は、前記先選択表示情報を、前記後選択メイン画面エリアに表示するとともに、前記変更モード選択部により、選択された前記変更モードに基づいて、前記先選択メイン画面エリアにおいて表示される表示情報を変更する、ものである。
【発明の効果】
【００１０】
本発明に係る車両用表示システムにおいては、搭乗員の簡単な動作で、１つのメイン画面エリアに表示されている表示情報を他のメイン画面エリアに変更することができるという効果を奏する。
【図面の簡単な説明】
【００１１】
【図１】図１は、実施形態における車両用表示システムの構成例を示す図である。
【図２】図２は、実施形態における車両用表示システムのブロック図である。
【図３】図３は、先選択メイン画面エリア（通常注視画像）を示す図である。
【図４】図４は、先選択メイン画面エリア（視認中注視画像）を示す図である。
【図５】図５は、先選択メイン画面エリア（選択後注視画像）を示す図である。
【図６】図６は、先選択メイン画面エリア（通常モード画像）を示す図である。
【図７】図７は、先選択メイン画面エリア（視認中モード画像）を示す図である。
【図８】図８は、先選択メイン画面エリア（選択後モード画像）を示す図である。
【図９】図９は、後選択メイン画面エリア（通常注視画像）を示す図である。
【図１０】図１０は、後選択メイン画面エリア（視認中注視画像）を示す図である。
【図１１】図１１は、後選択メイン画面エリア（選択後注視画像）を示す図である。
【図１２】図１２は、実施形態における車両用表示システムの動作を示すフロー図である。
【図１３】図１３は、実施形態における車両用表示システムのメイン画面エリア選択処理を示すフロー図である。
【図１４】図１４は、実施形態における車両用表示システムの変更モード選択処理を示すフロー図である。
【図１５】図１５は、変形例における車両用表示システムのメイン画面エリア選択処理を示すフロー図である。
【図１６】図１６は、変形例における車両用表示システムの変更モード選択処理を示すフロー図である。
【発明を実施するための形態】
【００１２】
以下に、本発明に係る車両用表示システムの実施形態を図面に基づいて詳細に説明する。なお、この実施形態によりこの発明が限定されるものではない。また、下記の実施形態における構成要素には、当業者が容易に想定できるもの、あるいは実質的に同一のものが含まれる。また、下記の実施形態における構成要素は、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。
【００１３】
〔実施形態〕
実施形態に係る車両用表示システムについて説明する。図１は、実施形態における車両表示システムの構成例を示す図である。図２は、実施形態における車両表示システムのブロック図である。図３は、先選択メイン画面エリア（通常注視画像）を示す図である。図４は、先選択メイン画面エリア（視認中注視画像）を示す図である。図５は、先選択メイン画面エリア（選択後注視画像）を示す図である。図６は、先選択メイン画面エリア（通常モード画像）を示す図である。図７は、先選択メイン画面エリア（視認中モード画像）を示す図である。図８は、先選択メイン画面エリア（選択後モード画像）を示す図である。図９は、後選択メイン画面エリア（通常注視画像）を示す図である。図１０は、後選択メイン画面エリア（視認中注視画像）を示す図である。図１１は、後選択メイン画面エリア（選択後注視画像）を示す図である。
【００１４】
本実施形態に係る車両用表示システム１は、例えば、手動運転のみ、自動運転のみ、手動運転および自動運転を行うことができる車両１００に適用するものであり、図１に示すように、車室１０１に設けられている。ここで、車室１０１には、車両前方に位置するウィンドシールド１０２の下側にインストルメントパネル１０３が設けられている。インストルメントパネル１０３よりも車両後方には、ステアリングコラム１０４に回転自在に支持されたステアリング１０５が設けられている。本実施形態における搭乗者２００は、ステアリング１０５よりも車両方向に設けられた図示しないシートに着座した運転者であり、ウィンドシールド１０２を介して車両１００の前方およびインストルメントパネル１０３を視認することができる。車両用表示システム１は、図２に示すように、複数の表示装置２Ａ〜２Ｅと、視線状態検出装置３と、マイク４と、操作部５と、制御装置６とを備える。
【００１５】
複数の表示装置２Ａ〜２Ｅは、図１および図２に示すように、搭乗者２００が視認できるものである。本実施形態における表示装置２Ａ〜２Ｅは、インストルメントパネル１０３に設けられており、液晶パネル、有機ＥＬパネルなどのモニターである。各表示装置２Ａ〜２Ｅは、制御装置６と電気的に接続されており、制御装置６により表示制御が行われる。各表示装置２Ａ〜２Ｅは、メイン画面エリアＥＭＡ〜ＥＭＥを構成するものである。本実施形態における各メイン画面エリアＥＭＡ〜ＥＭＥは、各表示装置２Ａ〜２Ｅにそれぞれ対応するものであり、各表示装置２Ａ〜２Ｅの全画面エリアである。メイン画面エリアＥＭＡ〜ＥＭＥは、制御装置６により制御されるものであり、種々の表示情報が表示されるものである。ここで、メイン画面エリアＥＭＡ〜ＥＭＥのそれぞれに表示される表示情報をＳＡ〜ＳＥとする。なお、表示装置２Ａ〜２Ｅは、タッチパネル機能を有していてもよいし、ウィンドシールド１０２に表示情報を虚像として表示するヘッドアップディスプレイや、図示しないコンバイナに表示情報を表示するヘッドアップディスプレイであってよい。また、１つの表示装置２Ａ〜２Ｅを複数の分割エリアに分割し、各分割エリアを複数のメイン画面エリアＥＭＡ〜ＥＭＥとしてもよい。
【００１６】
視線状態検出装置３は、車両１００の搭乗者２００の視線状態を検出するものである。視線状態検出装置３は、入力部であり、搭乗者２００の視線Ｌに基づいた搭乗者２００の決定意志が入力されるものである。本実施形態における視線状態検出装置３は、赤外線を用いて搭乗者２００の２つの目２０１，２０２の視点から視線Ｌを検出するものである。また、視線状態検出装置３は、各目２０１，２０２にそれぞれ対応する２つの視点のうち、少なくとも一方が検出されないことで、視点が検出されない目２０１，２０２の目つぶりを検出するものである。視線状態検出装置３は、車室１０１のうち、各目２０１，２０２の視点を検出することができる位置、本実施形態ではインストルメントパネル１０３に取り付けられている。視線状態検出装置３は、制御装置６と電気的に接続されており、制御装置６により視線状態検出制御が行われ、検出された視線情報および目つぶり情報が制御装置６に出力される。視線状態検出装置３は、赤外線ＬＥＤ３１と、赤外線カメラ３２と、視線状態検出部３３とを有する。赤外線ＬＥＤ３１は、赤外線カメラ３２により撮像できる赤外光を照射するものである。赤外線ＬＥＤ３１は、搭乗者２００の各目２０１，２０２を含む顔２０３に赤外光を照射するものである。赤外線カメラ３２は、顔２０３において反射した赤外光に基づいて、少なくとも各目２０１，２０２を撮像し、連続する複数の視点情報画像を生成するものである。視線状態検出部３３は、車両１００の搭乗者２００の視線Ｌの状態である視線状態を検出するものである。ここで、視線状態とは、少なくとも視線Ｌがある状態としての搭乗者２００の視線Ｌであり、視線Ｌがない状態としての各目２０１，２０２の目つぶりを含むものである。視線状態検出部３３は、連続する複数の視点情報画像における視点の位置および赤外線カメラ３２と搭乗者との相対位置に基づいて、搭乗者２００の視線Ｌの方向を検出し、視線情報として制御装置６に出力するものである。また、連続する複数の視点情報画像における視点の検出の有無に基づいて、目つぶりを検出し、目つぶり情報として制御装置６に出力するものである。
【００１７】
マイク４は、搭乗者２００の音声が入力されるものである。マイク４は、入力部であり、搭乗者２００の音声に基づいた搭乗者２００の決定意志が入力されるものである。マイク４は、制御装置６と電気的に接続されており、搭乗者２００が発した音声に基づいた音声情報が制御装置６に出力される。
【００１８】
操作部５は、搭乗者２００が操作するものである。操作部５は、入力部であり、搭乗者２００の操作に基づいた搭乗者２００の決定意志が入力されるものである。本実施形態における操作部５は、１回の操作を行うスイッチであり、ステアリング１０５に設けられている。つまり、操作部５は、搭乗者２００が車両１００を運転するためにステアリング１０５を握っている状態でも、搭乗者２００による１回の操作が可能な場所に設けられる。操作部５は、制御装置６と電気的に接続されており、搭乗者２００の操作部５に対する操作に基づいた操作情報が制御装置６に出力される。
【００１９】
制御装置６は、複数のメイン画面エリアＥＭＡ〜ＥＭＥに対する表示制御を行うものである。本実施形態における制御装置６は、視線Ｌに基づいて、表示情報に関する選択・決定を行うものである。制御装置６は、画面制御部６１と、視認判定部６２と、選択部６３と、音声認識部６４と、記憶部６５と有する。ここで、各部は、制御装置６が有する一機能である。ここで、制御装置６のハードウェア構成は、既知の制御装置６のハードウェア構成と同一であり、例えば、図示しないＣＰＵ、ＲＡＭ、ＲＯＭを有する。
【００２０】
画面制御部６１は、画面制御部であり、各表示装置２Ａ〜２Ｅに対する表示制御を行うものである。画面制御部６１は、少なくとも記憶部６５に記憶されている表示情報を各表示装置２Ａ〜２Ｅに表示させるものである。画面制御部６１は、各表示装置２Ａ〜２Ｅにどの表示情報を表示するかについて、運転状態、車両１００の走行状態などに基づいて決定してもよいし、表示情報に予め表示装置２Ａ〜２Ｅが対応づけられている場合は対応付けに基づいて決定してよい。画面制御部６１は、メイン画面エリアＥＭＡ〜ＥＭＥのうち、１つのメイン画面エリアにおいて表示されている表示情報を他のメイン画面エリアにおいて表示するものである。本実施形態における画面制御部６１は、選択部６３により先に選択されたメイン画面エリアである先選択メイン画像エリアＥＭ１において表示されている先選択表示情報Ｓ１を、後に選択されたメイン画面エリアである後選択メイン画面エリアＥＭ２に表示する、画面制御部６１は、注視画像出力部６１ａと、変更モード画像出力部６１ｂとを有する。なお、画面制御部６１は、図示しない車両１００に設けられた通信装置が受信した表示情報を各メイン画面エリアＥＭＡ〜ＥＭＥに表示することもできる。
【００２１】
注視画像出力部６１ａは、各メイン画面エリアＥＭＡ〜ＥＭＥ内の一部に注視画像Ｘを表示するものである。本実施形態における注視画像出力部６１ａは、記憶部６５に記憶されている注視画像情報６５ａに基づいて、各メイン画面エリアＥＭＡ〜ＥＭＥ内の一部に同じ通常表示態様である通常注視画像ＸＮをそれぞれ表示する。ここで、注視画像出力部６１ａは、各メイン画面エリアＥＭＡ〜ＥＭＥの一部に予め設定されている注視画像エリアＥＸＡ〜ＥＸＥに通常注視画像ＸＮを、各メイン画面エリアＥＭＡ〜ＥＭＥにそれぞれ対応する各表示情報に基づいた表示情報ＳＡ〜ＳＥに重ねて表示する。なお、注視画像Ｘとは、搭乗者２００が各メイン画面エリアＥＭＡ〜ＥＭＥを視認している状態で、表示情報ＳＡ〜ＳＥと区別することができる画像であり、画像の形状、色などは任意に設定することができる。
【００２２】
また、注視画像出力部６１ａは、後述する注視画像視認判定部６２ａにより、搭乗者２００が視認していると判定されると、搭乗者２００が視認している注視画像Ｘの表示態様を搭乗者２００が視認していると判定される前の表示態様である通常表示態様と異なる視認中表示態様に切り替える。本実施形態における注視画像出力部６１ａは、図３、図４、図９および図１０に示すように、メイン画面エリアＥＭＡ〜ＥＭＥの一部に表示されている通常表示態様である通常注視画像ＸＮを、視認中表示態様である視認中注視画像ＸＬに変更して表示する。ここで、視認中注視画像ＸＬは、通常注視画像ＸＮと表示態様が異なるものであり、搭乗者２００に対して各メイン画面エリアＥＭＡ〜ＥＭＥにそれぞれ対応する注視画像Ｘのうち、どの注視画像Ｘを視認しているかを認識することができる表示態様である。本実施形態における視認中注視画像ＸＬは、例えば、通常注視画像ＸＮに対して外枠を太枠とする表示態様である。従って、搭乗者２００が注視画像Ｘの視認を開始した場合に、通常表示態様である通常注視画像ＸＮが通常表示態様と異なる視認中表示態様である視認中注視画像ＸＬに変化する。これにより、搭乗者２００は、自身が視認を開始した注視画像Ｘを車両用表示システム１が認識していることを把握することができるとともに、注視画像Ｘを自身が視認を開始したことを認識することができる。
【００２３】
また、注視画像出力部６１ａは、後述するメイン画面選択部６３ａにより、先選択メイン画面エリアＥＭ１または後選択メイン画面エリアＥＭ２が選択されると、先選択メイン画面エリアＥＭ１または後選択メイン画面エリアＥＭ２に対応する注視画像Ｘの表示態様を通常表示態様および視認中表示態様と異なる選択後表示態様に切り替える。本実施形態における注視画像出力部６１ａは、図４、図５、図１０および図１１に示すように、先選択メイン画面エリアＥＭ１または後選択メイン画面エリアＥＭ２の一部に表示されている視認中表示態様である視認中注視画像ＸＬを、選択後表示態様である選択後注視画像ＸＣに変更して表示する。ここで、選択後注視画像ＸＣは、通常注視画像ＸＮおよび視認中注視画像ＸＬと表示態様が異なるものであり、搭乗者２００に複数のメイン画面エリアＥＭＡ〜ＥＭＥのうち、先選択メイン画面エリアＥＭ１および後選択メイン画面エリアＥＭ２が選択されたことを認識することができる表示態様である。本実施形態における選択後注視画像ＸＣは、例えば、通常注視画像ＸＮに対して外枠を太枠とし、枠内の色を変更する表示態様である。従って、搭乗者２００が注視画像Ｘを視認し続けている場合に、視認中注視画像ＸＬが通常表示態様および視認中表示態様と異なる選択後表示態様である選択後注視画像ＸＣに変化する。これにより、搭乗者２００は、自身が視認し続けることで選択した注視画像Ｘに対応するメイン画面エリアを車両用表示システム１が認識していることを把握することができるとともに、メイン画面エリアを自身が視認し続けることで選択したことを認識することができる。
【００２４】
変更モード画像出力部６１ｂは、後述する変更モード選択部６３ｂにより、先にメイン画面エリアが選択される、すなわち先選択メイン画面エリアＥＭ１が決定すると、先選択メイン画面エリアＥＭ１内の一部に複数の変更モード画像ＷＡ〜ＷＣを表示するものである。本実施形態における変更モード画像出力部６１ｂは、記憶部６５に記憶されている変更モード画像情報６５ｂに基づいて、先選択メイン画面エリアＥＭ１内の一部に変更モード画像ＷＡ〜ＷＣを含むモード画像ＷＡ〜ＷＤをメニュー画像Ｗとして表示する。具体的には、メニュー画像Ｗは、複数の変更モードＣＡ〜ＣＣに対応するとともに通常表示態様である通常変更モード画像ＷＡＮ〜ＷＣＮと、変更を行わないキャンセルのためのキャンセルモードＣＤに対応するとともに通常表示態様である通常キャンセルモード画像ＷＤＮとを含むものである。ここで、変更モード画像出力部６１ｂは、先選択メイン画面エリアＥＭ１の一部に予め設定されている変更モード画像エリアＥＷＡ〜ＥＷＣにそれぞれ通常変更モード画像ＷＡＮ〜ＷＣＮを、およびキャンセルモード画像エリアＥＷＤに通常キャンセルモード画像ＷＤＮを、先選択メイン画面エリアＥＭ１に対応する表示情報に基づいた先選択メイン画面エリアＥＭ１に表示されている表示情報である先選択表示情報Ｓ１に重ねて表示する。ここで、変更モード画像エリアＥＷＡ〜ＥＷＣおよびキャンセルモード画像エリアＥＷＤは、先選択メイン画面エリアＥＭ１の注視画像エリアＥＸＡ〜ＥＸＥの下側に順番に形成される。
【００２５】
ここで、複数の変更モードＣＡ〜ＣＣは、少なくとも先選択表示情報Ｓ１を、後選択メイン画面エリアＥＭ２に表示することを行うモードである。本実施形態における変更モードＣＡは、図６に示すように、「入れ替え」であり、先選択表示情報Ｓ１を後選択メイン画面エリアＥＭ２に表示し、後選択メイン画面エリアＥＭ２において表示されている表示情報である後選択表示情報Ｓ２を先選択メイン画面エリアＥＭ１に表示するモードである。本実施形態における変更モードＣＢは、「コピー」であり、先選択表示情報Ｓ１を後選択メイン画面エリアＥＭ２に表示し、先選択メイン画面エリアＥＭ１における先選択表示情報Ｓ１の表示を維持するモードである。本実施形態における変更モードＣＡは、「移動」であり、先選択表示情報Ｓ１を後選択メイン画面エリアＥＭ２に表示し、先選択メイン画面エリアＥＭ１に先選択表示情報Ｓ１と異なる表示情報、例えば先選択メイン画面エリアにおいて基準となる基準表示情報を表示するモードである。
【００２６】
また、変更モード画像出力部６１ｂは、後述する変更モード画像視認判定部６２ｂにより、搭乗者２００が視認していると判定されると、搭乗者２００が視認しているモード画像ＷＡ〜ＷＤの表示態様を搭乗者２００が視認していると判定される前の表示態様である通常表示態様と異なる視認中表示態様に切り替える。本実施形態における変更モード画像出力部６１ｂは、図６および図７に示すように、先選択メイン画面エリアＥＭ１の一部に表示されている通常表示態様である通常変更モード画像ＷＡＮ〜ＷＣＮおよび通常キャンセルモード画像ＷＤＮ、すなわち通常モード画像ＷＡＮ〜ＷＤＮのうち、搭乗者２００が視認している通常モード画像ＷＡＮ〜ＷＤＮを、視認中表示態様である視認中モード画像ＷＡＬ〜ＷＤＬ（視認中変更モード画像ＷＡＬ〜ＷＣＬおよび視認中キャンセルモード画像ＷＤＬ）に変更して表示する。ここで、視認中モード画像ＷＡＬ〜ＷＤＬは、通常モード画像ＷＡＮ〜ＷＤＮと表示態様が異なるものであり、搭乗者２００に対して各モードＣＡ〜ＣＤにそれぞれ対応するモード画像ＷＡ〜ＷＤのうち、どのモード画像ＷＡ〜ＷＤを視認しているかを認識することができる表示態様である。本実施形態における視認中モード画像ＷＡＬ〜ＷＤＬは、例えば、通常モード画像ＷＡＮ〜ＷＤＮに対して外枠を太枠とする表示態様である。
【００２７】
また、変更モード画像出力部６１ｂは、後述する変更モード選択部６３ｂにより、変更モードＣＡ〜ＣＣを含むモードＣＡ〜ＣＤのいずれかが選択されると、選択されたモードＣＡ〜ＣＤに対応するモード画像ＷＡ〜ＷＤの表示態様を通常表示態様および視認中表示態様と異なる選択後表示態様に切り替える。本実施形態における変更モード画像出力部６１ｂは、図７および図８示すように、選択されたモードＣＡ〜ＣＤに対応して先選択メイン画面エリアＥＭ１の一部に表示されている視認中表示態様である視認中モード画像ＷＡＬ〜ＷＤＬを選択後表示態様である選択後モード画像ＷＡＣ〜ＷＤＣ（選択後変更モード画像ＷＡＣ〜ＷＣＣおよび選択後キャンセルモード画像ＷＤＣ）に変更して表示する。ここで、選択後モード画像ＷＡＣ〜ＷＤＣは、通常モード画像ＷＡＮ〜ＷＤＮおよび視認中モード画像ＷＡＬ〜ＷＤＬと表示態様が異なるものであり、搭乗者２００に対して各モードＣＡ〜ＣＤのうち、どのモードＣＡ〜ＣＤが選択されたかを認識することができる表示態様である。本実施形態における選択後モード画像ＷＡＣ〜ＷＤＣは、例えば、通常モード画像ＷＡＮ〜ＷＤＮに対して外枠を太枠とし、枠内の色を変更する表示態様である。なお、選択後表示態様としては、画面上の動きも含まれるものであり、選択後モード画像ＷＡＣ〜ＷＤＣは、例えば、通常モード画像ＷＡＮ〜ＷＤＮに対して外枠が点滅したり、通常モード画像ＷＡＮ〜ＷＤＮが先選択メイン画面エリアＥＭ１に対して位置が変化する、すなわち動くことであってもよい。
【００２８】
視認判定部６２は、視線状態に基づいて、複数の注視画像Ｘのうち、どの注視画像Ｘを搭乗者２００が視認しているかを判定するものである。また、視認判定部６２は、視線状態に基づいて、複数のモード画像ＷＡ〜ＷＤのうち、どのモード画像ＷＡ〜ＷＤを搭乗者２００が視認しているかを判定するものである。本実施形態における視認判定部６２は、搭乗者２００からみた場合における仮想平面内の表示装置２Ａ〜２Ｅの位置（２次元座標位置）と、視線状態検出装置３により検出された視線Ｌに基づいた仮想平面内の視点の位置とに基づいて、搭乗者２００が表示装置２Ａ〜２Ｅのうちどこを視認しているかを判定する。視認判定部６２は、注視画像視認判定部６２ａと、変更モード画像視認判定部６２ｂとを有する。
【００２９】
注視画像視認判定部６２ａは、視線状態に基づいて、複数のメイン画面エリアＥＭＡ〜ＥＭＥのうち、１つのメイン画面エリアＥＭＡ〜ＥＭＥの注視画像Ｘを搭乗者２００が視認している否かを判定するものである。本実施形態における注視画像視認判定部６２ａは、視線Ｌの方向が各メイン画面エリアＥＭＡ〜ＥＭＥの注視画像エリアＥＸＡ〜ＥＸＥ内のいずれかに向いているか否か、すなわち仮想平面において注視画像エリアＥＸＡ〜ＥＸＥに対応する領域内のいずれかに視点が位置する否かを判定する。
【００３０】
変更モード画像視認判定部６２ｂは、視線状態に基づいて、複数の変更モード画像ＷＡ〜ＷＣのうち、１つの変更モード画像ＷＡ〜ＷＣを搭乗者２００が視認している否かを判定するものである。本実施形態における変更モード画像視認判定部６２ｂは、複数の変更モード画像ＷＡ〜ＷＣを含むモード画像ＷＡ〜ＷＤのうち、１つのモード画像ＷＡ〜ＷＤを搭乗者２００が視認している否かを判定する。変更モード画像視認判定部６２ｂは、視線Ｌの方向が各複数のモード画像ＷＡ〜ＷＤに対応するモード画面エリアＥＷＡ〜ＥＷＤ内のいずれかに向いているか否か、すなわち仮想平面においてモード画面エリアＥＷＡ〜ＥＷＤに対応する領域内のいずれかに視点が位置する否かを判定する。
【００３１】
選択部６３は、メイン画面エリア選択部６３ａと、変更モード選択部６３ｂとを有する。メイン画面エリア選択部６３ａは、入力部に基づいて、複数のメイン画面エリアＥＭＡ〜ＥＭＥのうち、搭乗者２００が視認していると判定された注視画像Ｘに対応するメイン画面エリアＥＭＡ〜ＥＭＥを搭乗者２００の意志により選択するものである。本実施形態におけるメイン画面エリア選択部６３ａは、視線情報に基づいて、視認している注視画像Ｘを視認し続けることで、メイン画面エリアＥＭＡ〜ＥＭＥの選択を行うものである。また、変更モード選択部６３ｂは、入力部に基づいて、複数のモードＣＡ〜ＣＤのうち、搭乗者２００が視認していると判定されたモード画像ＷＡ〜ＷＤに対応するモードＣＡ〜ＣＤを搭乗者２００の意志により選択するものである。本実施形態における変更モード選択部６３ｂは、視線情報に基づいて、視認しているモード画像ＷＡ〜ＷＤ画像を視認し続けることで、対応するモードＣＡ〜ＣＤの選択を行うものである。
【００３２】
音声認識部６４は、マイク４により入力された搭乗者２００の音声を識別するものであり、予め記憶部６５に記憶されている音声情報と比較することで、入力された搭乗者２００の音声に対応する音声情報を選択するものである。
【００３３】
記憶部６５は、制御装置６が実行する各種処理にそれぞれ対応するプログラム、初期設定情報などを記憶するものである。記憶部６５は、注視画像情報６５ａと、メニュー画像情報６５ｂとを有する。
【００３４】
次に、本実施形態における車両用表示システム１の動作について説明する。図１２は、実施形態における車両用表示システムの動作を示すフロー図である。図１３は、実施形態における車両用表示システムのメイン画面エリア選択処理を示すフロー図である。図１４は、実施形態における車両用表示システムの変更モード選択処理を示すフロー図である。
【００３５】
制御装置６は、図１２に示すように、まずメイン画面エリア選択処理を実行する（ステップＳＴ１０１）。次に、制御装置６は、図１３に示すように、視線状態を取得する（ステップＳＴ２０１）。ここでは、制御装置６は、視線状態検出装置３により検出された視線情報を取得する。なお、制御装置６の注視画像出力部６１ａは、各メイン画面エリアＥＭＡ〜ＥＭＥに対して通常注視画像ＸＮを表示している。
【００３６】
次に、制御装置６の注視画像視認判定部６２ａは、視線状態に基づいて、搭乗者２００が複数のメイン画面エリアＥＭＡ〜ＥＭＥに対応する複数の注視画像Ｘのいずれかを視認しているか否かを判定する（ステップＳＴ２０２）。
【００３７】
次に、制御装置６は、搭乗者２００が複数のメイン画面エリアＥＭＡ〜ＥＭＥに対応する複数の注視画像Ｘのいずれかを視認していると判定する（ステップＳＴ２０２：Ｙｅｓ）と、停留中フラグがＯＮであるか否かを判定する（ステップＳＴ２０３）。ここでは、制御装置６は、図３に示すように、搭乗者２００が複数のメイン画面エリアＥＭＡ〜ＥＭＥに対応する複数の注視画像Ｘのうち、メイン画面エリアＥＭＣに対応する注視画像Ｘ（表示されている通常注視画像ＸＮ）を視認しているとした場合に、搭乗者２００がメイン画面エリアＥＭＣに対応する注視画像Ｘを視認しつづけているか否かを滞留中フラグがＯＮであるか否かを判定する。
【００３８】
次に、制御装置６は、停留中フラグがＯＦＦであると判定する（ステップＳＴ２０３：Ｎｏ）と、停留中フラグをＯＮとする（ステップＳＴ２０４）。ここでは、制御装置６は、搭乗者２００がメイン画面エリアＥＭＣに対応する注視画像Ｘを視認し始めた場合に、停留中フラグをＯＮとする。
【００３９】
次に、制御装置６の注視画像出力部６１ａは、メイン画面エリアＥＭＣに対応する通常注視画像ＸＮを視認中注視画像ＸＬに変更して表示する（ステップＳＴ２０５）。ここでは、注視画像出力部６１ａは、図５に示すように、メイン画面エリアＥＭＣに対応する注視画像Ｘとして、視認中注視画像ＸＬを表示する。
【００４０】
次に、制御装置６は、図１３に示すように、タイマーＴ２のカウントを開始する（ステップＳＴ２０６）し、停留中フラグがＯＮとなった状態で、メイン画面エリア選択処理を終了する。
【００４１】
また、制御装置６は、停留中フラグがＯＮであると判定する（ステップＳＴ２０３：Ｙｅｓ）と、タイマーＴ２が所定値Ｔｔｈ２以上であるか否かを判定する（ステップＳＴ２０７）。ここでは、制御装置６は、搭乗者２００がメイン画面エリアＥＭＣに対応する注視画像Ｘを所定時間視認し続けているか否かをタイマーＴ２が所定値Ｔｔｈ２（例えば、数秒）以上であるか否かで判定する。
【００４２】
次に、制御装置６は、タイマーＴ２が所定値Ｔｔｈ２を超えると判定する（ステップＳＴ２０７：Ｙｅｓ）と、選択メイン画面エリアを記憶する（ステップＳＴ２０８）。ここでは、制御装置６のメイン画面エリア選択部６３ａは、搭乗者２００がメイン画面エリアＥＭＣに対応する注視画像Ｘを所定時間視認し続けていると、複数のメイン画面エリアＥＭＡ〜ＥＭＥのうち、メイン画面エリアＥＭＣを選択メイン画面エリア、本実施形態では先選択メイン画面エリアＥＭ１として記憶する。
【００４３】
次に、制御装置６の注視画像出力部６１ａは、メイン画面エリアＥＭＣに対応する視認中注視画像ＸＬを選択後注視画像ＸＣに変更して表示する（ステップＳＴ２０９）。ここでは、注視画像出力部６１ａは、図７に示すように、メイン画面エリアＥＭＣに対応する注視画像Ｘとして、選択後注視画像ＸＣを表示する。制御装置６は、メイン画面エリア選択処理を終了する。
【００４４】
また、制御装置６は、図１３に示すように、タイマーＴ２が所定値Ｔｔｈ２以下であると判定する（ステップＳＴ２０７：Ｎｏ）と、メイン画面エリア選択処理を終了する。
【００４５】
また、注視画像視認判定部６２ａは、搭乗者２００が複数のメイン画面エリアＥＭＡ〜ＥＭＥに対応する複数の注視画像Ｘのいずれかを視認していないと判定する（ステップＳＴ２０２：Ｎｏ）と、停留中フラグをＯＦＦとする（ステップＳＴ２１０）。ここでは、制御装置６は、搭乗者２００がメイン画面エリアＥＭＣに対応する注視画像Ｘを視認し終えた場合に、停留中フラグをＯＦＦとする。
【００４６】
次に、制御装置６は、タイマーＴ２をリセットする（ステップＳＴ２１１）。
【００４７】
次に、制御装置６の注視画像出力部６１ａは、表示されている視認中注視画像ＸＬを通常注視画像ＸＮに変更して表示する（ステップＳＴ２１２）。ここでは、注視画像出力部６１ａは、図６に示すように、メイン画面エリアＥＭＣに対応する注視画像Ｘとして、通常注視画像ＸＮを表示する。制御装置６は、メイン画面エリア選択処理を終了する。
【００４８】
次に、制御装置６は、図１２に示すように、先選択メイン画面エリアＥＭ１を選択したか否かを判定する（ステップＳＴ１０２）。
【００４９】
次に、制御装置６は、先選択メイン画面エリアＥＭ１が選択されたと判定する（ステップＳＴ１０２：Ｙｅｓ）と、先選択表示情報Ｓ１を記憶する（ステップＳＴ１０３）。ここでは、制御装置６は、メイン画面エリアＥＭＣを先選択メイン画面エリアＥＭ１として選択すると、先選択メイン画面エリアＥＭ１に表示されている表示情報ＳＣを先選択表示情報Ｓ１として記憶する。なお、制御装置６は、先選択メイン画面エリアＥＭ１が選択されていないと判定する（ステップＳＴ１０２：Ｎｏ）と、先選択メイン画面エリアＥＭ１が選択されたと判定するまで、メイン画面エリア選択処理を実行する。
【００５０】
次に、制御装置６は、タイマーＴ１のカウントを開始する（ステップＳＴ１０４）。
【００５１】
次に、制御装置６の変更モード画像出力部６１ｂは、メニュー画像Ｗを表示する（ステップＳＴ１０５）。ここでは、制御装置６は、図６に示すように、先選択メイン画面エリアＥＭ１に変更モード画像ＷＡ〜ＷＣおよびキャンセルモード画像ＷＤを含むメニュー画像Ｗを表示する。
【００５２】
まず、制御装置６は、変更モード選択処理を実行する（ステップＳＴ１０６）。
【００５３】
次に、制御装置６は、図１４に示すように、視線状態を取得する（ステップＳＴ３０１）。
【００５４】
次に、制御装置６の変更モード画像視認判定部６２ｂは、視線状態に基づいて、搭乗者２００が複数のモードＣＡ〜ＣＤに対応する複数のモード画像ＷＡ〜ＷＤのいずれかを視認しているか否かを判定する（ステップＳＴ３０２）。
【００５５】
次に、制御装置６は、搭乗者２００が複数のモードＣＡ〜ＣＤに対応する複数のモード画像ＷＡ〜ＷＤのいずれかを視認していると判定する（ステップＳＴ３０２：Ｙｅｓ）と、今回のモードＣ１を記憶する（ステップＳＴ３０３）。ここでは、制御装置６は、図６に示すように、搭乗者２００が複数のモードＣＡ〜ＣＤに対応する複数のモード画像ＷＡ〜ＷＤのうち、メイン画面エリアＥＭＣに表示されている変更モードＣＢに対応する変更モード画像ＷＢ（表示されている通常モード画像ＷＢＮ）を視認しているとした場合に、変更モードＣＢを今回のモードＣ１として記憶する。
【００５６】
次に、制御装置６は、停留中フラグがＯＮであるか否かを判定する（ステップＳＴ３０４）。ここでは、搭乗者２００が変更モードＣＢに対応する変更モード画像ＷＢを視認し続けているか否かを滞留中フラグがＯＮであるか否かで判定する。
【００５７】
次に、制御装置６は、停留中フラグがＯＦＦであると判定する（ステップＳＴ３０４：Ｎｏ）と、停留中フラグをＯＮとする（ステップＳＴ３０５）。ここでは、制御装置６は、搭乗者２００が変更モードＣＢに対応する変更モード画像ＷＢを視認し始めた場合に、停留中フラグをＯＮとする。
【００５８】
次に、制御装置６の変更モード画像出力部６１ｂは、今回のモードである変更モードＣＢに対応する通常モード画像ＷＢＮを視認中モード画像ＷＢＬに変更して表示する（ステップＳＴ３０６）。ここでは、変更モード画像出力部６１ｂは、図７に示すように、変更モードＣＢに対応する変更モード画像ＷＢとして、視認中モード画像ＷＢＬを表示する。
【００５９】
次に、制御装置６は、図１４に示すように、タイマーＴ３のカウントを開始（ステップＳＴ３０７）し、停留中フラグがＯＮとなった状態で、ステップＳＴ３０１〜ＳＴ３０４を繰り返す。
【００６０】
また、制御装置６は、停留中フラグがＯＮであると判定する（ステップＳＴ３０４：Ｙｅｓ）と、今回のモードが前回のモードと同じか否かを判定する（ステップＳＴ３０８）。ここでは、制御装置６は、搭乗者２００が以前に視認したモードＣＡ〜ＣＤに対応するモード画像ＷＡ〜ＷＤと異なるモードＣＡ〜ＣＤに対応するモード画像ＷＡ〜ＷＤを視認、すなわち搭乗者２００によるモードＣＡ〜ＣＤの変更意志があるか否かを判定する。
【００６１】
また、制御装置６は、今回のモードが前回のモードと同じであると判定する（ステップＳＴ３０８：Ｙｅｓ）と、タイマーＴ３が所定値Ｔｔｈ３以上であるか否かを判定する（ステップＳＴ３０９）。ここでは、制御装置６は、搭乗者２００が変更モードＣＢに対応する変更モード画像ＷＢを所定時間視認し続けているか否かをタイマーＴ３が所定値Ｔｔｈ３（例えば、数秒）以上であるか否かで判定する。
【００６２】
次に、制御装置６は、タイマーＴ３が所定値Ｔｔｈ３を超えると判定する（ステップＳＴ３０９：Ｙｅｓ）と、選択モードを記憶する（ステップＳＴ３１０）。ここでは、制御装置６の変更モード選択部６３ｂは、搭乗者２００が変更モードＣＢに対応する変更モード画像ＷＢを所定時間視認し続けていると、複数のモードＣＡ〜ＣＤのうち、変更モードＣＢを選択モードＣ１として記憶する。
【００６３】
次に、変更モード画像出力部６１ｂは、変更モードＣＢに対応する視認中モード画像ＷＢＬを選択後モード画像ＷＢＣに変更して表示する（ステップＳＴ３１１）。ここでは、変更モード画像出力部６１ｂは、図８に示すように、変更モードＣＢに対応する変更モード画像ＷＢとして、選択後モード画像ＷＢＣを表示する。制御装置６は、変更モード選択処理を終了する。
【００６４】
また、制御装置６は、図１４に示すように、タイマーＴ３が所定値Ｔｔｈ３以下であると判定する（ステップＳＴ３０９：Ｎｏ）と、タイマーＴ３が所定値Ｔｔｈ３を超えるまで、ステップＳＴ３０１〜ＳＴ３０９を繰り返す。
【００６５】
また、変更モード画像出力部６１ｂは、今回のモードが前回のモードと異なると判定する（ステップＳＴ３０８：Ｎｏ）と、前回モードであるモードＣＡ〜ＣＤに対応する視認中モード画像ＷＡＬ〜ＷＤＬを通常モード画像ＷＡＮ〜ＷＤＮに変更して表示する（ステップＳＴ３１２）。
【００６６】
次に、変更モード画像出力部６１ｂは、今回のモードである変更モードＣＢに対応する通常モード画像ＷＢＮを視認中モード画像ＷＢＬに変更して表示する（ステップＳＴ３１３）。
【００６７】
次に、制御装置６は、今回のモードを前回のモードとして記憶する（ステップＳＴ３１４）。
【００６８】
次に、制御装置６は、タイマーＴ３をリセットするとともに、タイマーＴ３のカウントを開始し（ステップＳＴ３１５）し、ステップＳＴ３０１〜ＳＴ３０８を繰り返す。ここでは、制御装置６は、搭乗者２００によるモードＣＡ〜ＣＤの変更意志がある場合に、タイマーＴ３をリスタートする。
【００６９】
また、変更モード画像視認判定部６２ｂは、搭乗者２００が複数のモードＣＡ〜ＣＤに対応する複数のモード画像ＷＡ〜ＷＤのいずれかを視認していないと判定する（ステップＳＴ３０２：Ｎｏ）と、停留中フラグをＯＦＦとする（ステップＳＴ３１６）。ここでは、制御装置６は、搭乗者２００が変更モードＣＢに対応する変更モード画像ＷＢを視認し終えた場合に、停留中フラグをＯＦＦとする。
【００７０】
次に、制御装置６は、タイマーＴ３をリセットする（ステップＳＴ３１７）。
【００７１】
次に、変更モード画像出力部６１ｂは、表示されている視認中モード画像ＷＡＬ〜ＷＤＬを通常モード画像ＷＡＮ〜ＷＤＮに変更して表示する（ステップＳＴ３１８）。ここでは、変更モード画像出力部６１ｂは、図６に示すように、変更モードＣＢに対応する変更モード画像ＷＢとして、通常モード画像ＷＢＮを表示する。制御装置６は、変更モード選択処理を終了する。
【００７２】
次に、制御装置６は、図１２に示すように、変更モード処理が終了すると、タイマーＴ１が所定値Ｔｔｈ１以下であるか否か判定する（ステップＳＴ１０７）。ここでは、制御装置６は、先選択メイン画面エリアＥＭ１を選択した後、変更モード選択処理を行うために要した時間が車両用表示システム１の動作を強制的に終了してもよい時間か否かをタイマーＴ１が所定値Ｔｔｈ１（例えば、十数秒）以上であるか否かで判定する。
【００７３】
次に、制御装置６は、タイマーＴ１が所定値Ｔｔｈ１以下であると判定する（ステップＳＴ１０７：Ｙｅｓ）と、変更モード処理において、変更モードＣＡ〜ＣＣが選択されたか否かを判定する（ステップＳＴ１０８）。ここでは、制御装置６は、変更モード処理において、選択モードＣ１として変更モードＣＡ〜ＣＣ以外のモード、すなわちキャンセルモードＣＤが選択されているか否かを判定する。
【００７４】
次に、制御装置６は、変更モード選択処理において、変更モードＣＡ〜ＣＣが選択されたと判定する（ステップＳＴ１０８：Ｙｅｓ）と、タイマーＴ１をリセットするとともに、タイマーＴ１のカウントを開始し（ステップＳＴ１０９）。ここでは、制御装置６は、複数のメイン画面エリアＥＭＡ〜ＥＭＥのうち、後選択メイン画面エリアＥＭ２を選択されるまでの時間をカウントするために、タイマーＴ１をリスタートする。
【００７５】
次に、制御装置６は、メイン画面エリア選択処理を実行する（ステップＳＴ１１０）。ここでは、制御装置６は、複数のメイン画面エリアＥＭＡ〜ＥＭＥのうち、後選択メイン画面エリアＥＭ２を選択する。制御装置６は、図１２に示すメイン画面エリア選択処理を実行することで、搭乗者２００が複数のメイン画面エリアＥＭＡ〜ＥＭＥに対応する複数の注視画像Ｘのうち、図９に示すように、メイン画面エリアＥＭＡに対応する注視画像Ｘ（表示されている通常注視画像ＸＮ）を視認しているとした場合に、図１０に示すように、メイン画面エリアＥＭＡに対応する注視画像Ｘを視認中注視画像ＸＬに変更し、搭乗者２００がメイン画面エリアＥＭＡに対応する注視画像Ｘを視認し続けることで、図１１に示すように、メイン画面エリアＥＭＡに対応する注視画像Ｘを選択後注視画像ＸＣに変更し、メイン画面エリアＥＭＡを後選択メイン画面エリアＥＭ２として選択する。
【００７６】
次に、制御装置６は、図１２に示すように、メイン画面エリア選択処理が終了すると、タイマーＴ１が所定値Ｔｔｈ１以下であるか否か判定する（ステップＳＴ１１１）。ここでは、制御装置６は、後選択メイン画面エリアＥＭ２を選択するためにメイン画面エリア選択処理を行うために要した時間が車両用表示システム１の動作を強制的に終了してもよい時間か否かをタイマーＴ１が所定値Ｔｔｈ１（例えば、十数秒）以上であるか否かで判定する。
【００７７】
次に、制御装置６は、後選択メイン画面エリアＥＭ２を選択したか否かを判定する（ステップＳＴ１１２）。
【００７８】
次に、画面制御部６１は、後選択メイン画面エリアＥＭ２を選択したと判定する（ステップＳＴ１１２：Ｙｅｓ）と、選択された変更モードＣＡ〜ＣＣを実行する（ステップＳＴ１１３）。ここでは、制御装置６は、選択モードＣ１である変更モードＣＡ〜ＣＣに応じた変更モードを実行する。制御装置６は、選択モードＣ１が変更モードＣＢである場合に、後選択メイン画面エリアＥＭ２（ＥＭＡ）の表示を後選択表示情報Ｓ２から先選択表示情報Ｓ１に切り替えて表示し、先選択メイン画面エリアＥＭ１（ＥＭＣ）における表示情報を先選択表示情報Ｓ１のまま維持する。なお、制御装置６は、後選択メイン画面エリアＥＭ２が選択されていないと判定する（ステップＳＴ１１２：Ｎｏ）と、後選択メイン画面エリアＥＭ２が選択されたと判定するまで、ステップＳＴ１１０〜ステップＳＴ１１２を繰り返す。
【００７９】
次に、変更モード画像出力部６１ｂは、メニュー画像Ｗを消去する（ステップＳＴ１１４）。ここでは、制御装置６は、変更モードを実行した後に、先選択メイン画面エリアＥＭ１（ＥＭＣ）に表示されているメニュー画像Ｗを消去する。
【００８０】
次に、注視画像出力部６２ａは、選択後注視画像ＸＣが表示されている場合に、通常注視画像ＸＮに変更して表示する（ステップＳＴ１１５）。
【００８１】
次に、制御装置６は、タイマーＴ１をリセットし（ステップＳＴ１１６）、現在の制御周期を終了し、次の制御周期に移行する。
【００８２】
また、制御装置６は、タイマーＴ１が所定値Ｔｔｈ１を越えると判定する（ステップＳＴ１０７：Ｎｏ、ステップＳＴ１１１：Ｎｏ）と、メニュー画像Ｗを消去し（ステップＳＴ１１４）、通常注視画像ＸＮに変更して表示する（ステップＳＴ１１５）。
【００８３】
また、制御装置６は、変更モード処理において、キャンセルモードＣＤが選択されたと判定する（ステップＳＴ１０８：Ｎｏ）と、メニュー画像Ｗを消去し（ステップＳＴ１１４）、通常注視画像ＸＮに変更して表示する（ステップＳＴ１１５）。
【００８４】
以上のように、本実施形態における車両用表示システム１は、注視画像視認判定部６２ａにより複数のメイン画面エリアＥＭＡ〜ＥＭＥのうち、１つのメイン画面エリアの注視画像を搭乗者２００が視認していると判定すると、メイン画面エリア選択部６３ａにより搭乗者２００が１つのメイン画面エリアの注視画像を視認し続けることで、視認し続けている先の１つのメイン画面エリアを先選択メイン画面エリアＥＭ１として選択し、後の１つのメイン画面エリアを後選択メイン画面エリアＥＭ２として選択することで、先選択メイン画面エリアＥＭ１において表示されている先選択表示情報Ｓ１を後選択メイン画面エリアＥＭ２に表示する。従って、搭乗者２００は、複数のメイン画面エリアＥＭＡ〜ＥＭＥのうち、移動したい表示情報が表示されているメイン画面エリアの注視画像Ｘを視認し続けたのち、表示情報を移動させたいメイン画面エリアの注視画像Ｘを視認し続けることで、表示情報をメイン画面エリア間で移動することができる。これにより、搭乗者２００は、視線の移動という簡単な動作で、１つのメイン画面エリアに表示されている表示情報を他のメイン画面エリア変更することができる。
【００８５】
以上のように、本実施形態における車両用表示システム１は、変更モード画像視認判定部６２ｂにより複数の変更モードＣＡ〜ＣＣに対応する変更モード画像ＷＡ〜ＷＣのうち、１つの変更モード画像を搭乗者２００が視認していると判定すると、変更モード選択部６３ｂにより搭乗者２００が１つの変更モードに対応する変更モード画像を視認し続けることで、視認し続けている１つの変更モードを選択モードＣ１として選択し、選択モードＣ１である変更モードに基づいて、先選択メイン画面エリアＥＭ１において表示されている先選択表示情報Ｓ１を後選択メイン画面エリアＥＭ２に表示するとともに、先選択メイン画面エリアＥＭ１に表示する表示情報を決定することができる。従って、搭乗者２００は、複数のメイン画面エリアＥＭＡ〜ＥＭＥのうち、移動したい表示情報が表示されているメイン画面エリアの注視画像Ｘを視認し続けたのち、表示情報を移動させたいメイン画面エリアの注視画像Ｘを視認し続けることで、表示情報をメイン画面エリア間で移動することができるとともに、選択モードＣ１である変更モードに対応して先選択メイン画面エリアＥＭ１に表示する表示情報を決定することができる。これにより、搭乗者２００は、視線の移動という簡単な動作で、１つのメイン画面エリアに表示されている表示情報を他のメイン画面エリアに移動することができるとともに、１つのメイン画面エリアに表示する表示情報を決定することができる。
【００８６】
なお、上記実施形態における車両用表示システム１は、先選択メイン画面エリアＥＭ１に対応する注視画像Ｘを選択後表示態様である選択後注視画像ＸＣに変更するが、この変更時に合わせて先選択メイン画面エリアＥＭ１の外枠の表示態様を制御装置６により変更してもよい。例えば、変更時において、先選択メイン画面エリアＥＭ１の外枠の色を変更したり、外枠を点滅させりしてもよい。これにより、ユーザーは、注視画像Ｘのみならず、先選択メイン画面エリアＥＭ１においても表示態様が変更されるので、先選択メイン画像エリアＥＭ１を選択したことをより認識しやすくすることができる。
【００８７】
また、上記実施形態における車両用表示システム１は、入力部として視線状態検出装置３を用いているが、本発明はこれに限定されるものではなく、入力部としてマイク４および操作部５を用いてもよい。図１５は、変形例における車両用表示システムのメイン画面エリア選択処理を示すフロー図である。図１６は、変形例における車両用表示システムの変更モード選択処理を示すフロー図である。ここで、変形例における車両用表示システム１の基本的動作は、実施形態における車両用表示システム１の基本的動作と同一またはほぼ同一であるので同一ステップは、その説明を省略または簡略化する。
【００８８】
制御装置６は、メイン画面エリア選択処理において、図１５に示すように、視線状態を取得し（ステップＳＴ２０１）、搭乗者２００が複数のメイン画面エリアＥＭＡ〜ＥＭＥに対応する複数の注視画像Ｘのいずれかを視認しているか否かを判定する（ステップＳＴ２０２）。
【００８９】
次に、注視画像出力部６１ａは、搭乗者２００が複数のメイン画面エリアＥＭＡ〜ＥＭＥに対応する複数の注視画像Ｘのいずれかを視認していると判定する（ステップＳＴ２０２：Ｙｅｓ）と、メイン画面エリアＥＭＣに対応する通常注視画像ＸＮを視認中注視画像ＸＬに変更して表示する（ステップＳＴ２２０）。
【００９０】
次に、制御装置６は、操作情報または音声情報を取得する（ステップＳＴ２２１）。ここで、制御装置６は、メイン画面エリアＥＭＣに対応する視認中注視画像ＸＬを表示した後、搭乗者２００が視認中注視画像ＸＬを表示しているメイン画面エリアＥＭＣを選択するために、操作部５を操作することで操作情報を取得、またはマイク４に対して音声を入力することで音声情報を取得する。
【００９１】
次に、制御装置６は、スイッチがＯＮである、または音声認識ができたか否かを判定する（ステップＳＴ２２２）。ここで、制御装置６は、搭乗者２００が視認中注視画像ＸＬを表示しているメイン画面エリアＥＭＣを選択するため、操作部５を操作することで、操作情報がスイッチをＯＮ、すなわち選択するという意志に基づいた情報であるか否かを判定する。また、制御装置６の音声認識部６４は、搭乗者２００が視認中注視画像ＸＬを表示しているメイン画面エリアＥＭＣを選択するため、マイク４に音声を入力することで、音声情報が選択するという意志に基づいた情報であるか否かを判定する。
【００９２】
次に、制御装置６は、スイッチがＯＮである、または音声認識ができたと判定する（ステップＳＴ２２２：Ｙｅｓ）と、選択メイン画面エリアを記憶し（ステップＳＴ２０８）、メイン画面エリアＥＭＣに対応する視認中注視画像ＸＬを選択後注視画像ＸＣに変更して表示し（ステップＳＴ２０９）、メイン画面エリア選択処理を終了する。
【００９３】
また、制御装置６は、スイッチがＯＦＦである、または音声認識ができないと判定する（ステップＳＴ２２２：Ｎｏ）と、メイン画面エリアＥＭＣに対応する視認中注視画像ＸＬを通常注視画像ＸＮに変更して表示し（ステップＳＴ２２３）、メイン画面エリア選択処理を終了する。
【００９４】
また、制御装置６は、搭乗者２００が複数のメイン画面エリアＥＭＡ〜ＥＭＥに対応する複数の注視画像Ｘのいずれかを視認していないと判定すると（ステップＳＴ２０２：Ｎｏ）、メイン画面エリア選択処理を終了する。
【００９５】
制御装置６は、変更モード選択処理において、図１６に示すように、視線状態を取得し（ステップＳＴ３０１）、視線状態に基づいて、搭乗者２００が複数のモードＣＡ〜ＣＤに対応する複数のモード画像ＷＡ〜ＷＤのいずれかを視認しているか否かを判定する（ステップＳＴ３０２）。
【００９６】
次に、変更モード画像出力部６１ｂは、搭乗者２００が複数のモードＣＡ〜ＣＤに対応する複数のモード画像ＷＡ〜ＷＤのいずれかを視認していると判定する（ステップＳＴ３０２：Ｙｅｓ）と、変更モードＣＢに対応する通常モード画像ＷＢＮを視認中モード画像ＷＢＬに変更して表示する（ステップＳＴ３１９）。
【００９７】
次に、制御装置６は、操作情報または音声情報を取得する（ステップＳＴ３２０）。ここで、制御装置６は、変更モードＣＢに対応する視認中モード画像ＷＢＬを表示した後、搭乗者２００が視認中モード画像ＷＢＬを表示している変更モードＣＢを選択するために、操作部５を操作することで操作情報を取得、またはマイク４に対して音声を入力することで音声情報を取得する。
【００９８】
次に、制御装置６は、スイッチがＯＮである、または音声認識ができたか否かを判定する（ステップＳＴ３２１）。ここで、制御装置６は、搭乗者２００が視認中モード画像ＷＢＬを表示している変更モードＣＢを選択するため、操作部５を操作することで、操作情報がスイッチをＯＮ、すなわち選択するという意志に基づいた情報であるか否かを判定する。また、制御装置６の音声認識部６４は、搭乗者２００が視認中モード画像ＷＢＬを表示している変更モードＣＢを選択するため、マイク４に音声を入力することで、音声情報が選択するという意志に基づいた情報であるか否かを判定する。
【００９９】
次に、制御装置６は、スイッチがＯＮである、または音声認識ができたと判定する（ステップＳＴ３２１：Ｙｅｓ）と、選択モードを記憶し（ステップＳＴ３１０）、変更モードＣＢに対応する視認中モード画像ＷＢＬを選択後モード画像ＷＢＣに変更して表示し（ステップＳＴ３１１）、変更モード選択処理を終了する。
【０１００】
また、制御装置６は、スイッチがＯＦＦである、または音声認識ができないと判定する（ステップＳＴ３２１：Ｎｏ）と、変更モードＣＢに対応する視認中モード画像ＷＢＬを通常モード画像ＷＢＮに変更して表示し（ステップＳＴ３２２）、変更モード選択処理を終了する。
【０１０１】
また、制御装置６は、搭乗者２００が複数のモードＣＡ〜ＣＤに対応する複数のモード画像ＷＡ〜ＷＤのいずれかを視認していないと判定する（ステップＳＴ３０２：Ｎｏ）と、変更モード選択処理を終了する。
【０１０２】
以上のように、変形例における車両用表示システム１においては、搭乗者２００は、複数のメイン画面エリアＥＭＡ〜ＥＭＥのうち、移動したい表示情報が表示されているメイン画面エリアの注視画像Ｘを視認し、簡単な動作である操作部５の操作、またはマイク４に対する音声入力により選択し、表示情報を移動させたいメイン画面エリアの注視画像Ｘを視認し、簡単な動作である操作部５に対する１回の操作、またはマイク４に対する音声入力により選択することで、表示情報をメイン画面エリア間で移動することができる。これにより、搭乗者２００は、操作部５に対する１回の操作、またはマイク４に対する音声入力という簡単な動作で、１つのメイン画面エリアに表示されている表示情報を他のメイン画面エリアに移動することができる。
【０１０３】
また、変形例における車両用表示システム１においては、搭乗者２００は、複数のメイン画面エリアＥＭＡ〜ＥＭＥのうち、移動したい表示情報が表示されているメイン画面エリアの注視画像Ｘを視認し、簡単な動作である操作部５の操作、またはマイク４に対する音声入力により選択し、表示情報を移動させたいメイン画面エリアの注視画像Ｘを視認し、簡単な動作である操作部５の操作、またはマイク４に対する音声入力により選択することで、表示情報をメイン画面エリア間で移動することができるとともに、選択モードＣ１である変更モードに対応して先選択メイン画面エリアＥＭ１に表示する表示情報を決定することができる。これにより、搭乗者２００は、視線の移動という簡単な動作で、１つのメイン画面エリアに表示されている表示情報を他のメイン画面エリアに移動することができるとともに、１つのメイン画面エリアに表示する表示情報を決定することができる。
【０１０４】
なお、入力部として視線状態検出装置３を用いて、視線Ｌの変化に基づいて、メイン画面エリアおよびモードの選択を行ってもよい。制御装置６は、例えば、視線状態として目をつぶっているか否かに基づいてメイン画面エリアおよびモードの選択を行ってもよい。
【０１０５】
なお、入力部としてマイク４を用いて、音声認識の違いに基づいて、メイン画面エリアおよびモードの選択を行ってもよい。制御装置６の記憶部に、予め「入れ替え」、「コピー」、「移動」、「キャンセル」という音声情報を記憶しておき、搭乗者２００が入力した音声が、これら音声情報のいずれかに該当するか否かに基づいてメイン画面エリアおよびモードの選択を行ってもよい。
【符号の説明】
【０１０６】
１  車両用表示システム
２Ａ〜２Ｅ  表示装置
３  視線状態検出装置
３１  赤外線ＬＥＤ
３２  赤外線カメラ
３３  視線状態検出部
４  マイク
５  操作部
６  制御装置
６１  画面制御部
６１ａ  注視画像出力部
６１ｂ  変更モード画像出力部
６２  視認判定部
６２ａ  注視画像視認判定部
６２ｂ  変更モード視認判定部
６３  選択部
６３ａ  面画面エリア注視画像情報
６３ｂ  メニュー画像情報
６４  音声認識部
６５  記憶部
６５ａ  注視画像情報
６５ｂ  メニュー画像情報
１００  車両
１０１  車室
１０２  ウィンドシールド
１０３  インストルメントパネル
２００  搭乗者
２０１，２０２  目
ＣＡ〜ＣＣ  変更モード
ＣＤ  キャンセルモード
ＥＭＡ〜ＥＭＥ  メイン画面エリア
ＥＸＡ〜ＥＸＥ  注視画像エリア
ＥＷＡ〜ＥＷＤ  モード画像エリア
ＳＡ〜ＳＥ  表示情報
Ｓ１  先選択表示情報
Ｓ２  後選択表示情報
Ｘ  注視画像
ＸＮ  通常注視画像
ＸＬ  視認中注視画像
ＸＣ  選択後注視画像
Ｗ  メニュー画像
ＷＡ〜ＷＣ  変更モード画像
ＷＤ  キャンセルモード画像
ＷＡＮ〜ＷＤＮ  通常モード画像
ＷＡＬ〜ＷＤＬ  注視中モード画像
ＷＡＣ〜ＷＤＣ  選択後モード画像
【図１】
2019215663.tif 000003
【図２】
2019215663.tif 000004
【図３】
2019215663.tif 000005
【図４】
2019215663.tif 000006
【図５】
2019215663.tif 000007
【図６】
2019215663.tif 000008
【図７】
2019215663.tif 000009
【図８】
2019215663.tif 000010
【図９】
2019215663.tif 000011
【図１０】
2019215663.tif 000012
【図１１】
2019215663.tif 000013
【図１２】
2019215663.tif 000014
【図１３】
2019215663.tif 000015
【図１４】
2019215663.tif 000016
【図１５】
2019215663.tif 000017
【図１６】
2019215663.tif 000018