(57)【要約】【課題】通知情報を搭乗者に対して確実に通知することができる通知装置、通知システムおよび通知方法を提供する。【解決手段】実施形態の一態様においては、通知装置は、通知部と、視線検出部と、視線移動予測部とを備える。通知部は、通知情報を出力可能な表示装置を含む複数種類の出力装置をそれぞれ制御し、通知情報を出力装置を介して出力させる。視線検出部は、搭乗者の視線を検出する。視線移動予測部は、検出された視線に基づいて視線の移動方向を予測する。また、通知部は、予測された視線の移動方向に表示装置が存在しない場合、通知情報を表示装置とは異なる出力装置を介して出力させる。【選択図】図１
2019012046.tif 000002
【特許請求の範囲】
【請求項１】
通知情報を出力可能な表示装置を含む複数種類の出力装置をそれぞれ制御し、前記通知情報を前記出力装置を介して出力させる通知部と、
搭乗者の視線を検出する視線検出部と、
前記視線検出部によって検出された前記視線に基づいて前記視線の移動方向を予測する視線移動予測部と
を備え、
前記通知部は、
前記視線移動予測部によって予測された前記視線の移動方向に前記表示装置が存在しない場合、前記通知情報を前記表示装置とは異なる前記出力装置を介して出力させること
を特徴とする通知装置。
【請求項２】
前記複数種類の出力装置は、
音を出力可能な音出力装置を含み、
前記通知部は、
前記視線移動予測部によって予測された前記視線の移動方向に前記表示装置が存在しない場合、前記通知情報を示す音を前記音出力装置を介して出力させること
を特徴とする請求項１に記載の通知装置。
【請求項３】
前記複数種類の出力装置は、
車両のハンドルを振動可能なハンドル振動出力装置を含み、
前記通知部は、
前記視線移動予測部によって予測された前記視線の移動方向に前記表示装置が存在しない場合、前記ハンドル振動出力装置を制御して前記ハンドルを振動させること
を特徴とする請求項１または２に記載の通知装置。
【請求項４】
前記複数種類の出力装置は、
車両の座席を振動可能な座席振動出力装置を含み、
前記通知部は、
前記視線移動予測部によって予測された前記視線の移動方向に前記表示装置が存在しない場合、前記座席振動出力装置を制御して前記座席を振動させること
を特徴とする請求項１〜３のいずれか一つに記載の通知装置。
【請求項５】
前記搭乗者は複数であり、
前記複数の搭乗者のそれぞれに対し、前記通知情報を優先的に通知する度合いを示す優先度を算出する優先度算出部
を備え、
前記通知部は、
前記優先度算出部によって算出された前記優先度に基づき、前記通知情報を前記出力装置を介して出力させること
を特徴とする請求項１〜４のいずれか一つに記載の通知装置。
【請求項６】
前記通知部は、
前記通知情報が所定の条件を満たす場合、前記搭乗者の視線を前記表示装置に誘導する誘導制御を前記出力装置に対して実行すること
を特徴とする請求項１〜５のいずれか一つに記載の通知装置。
【請求項７】
通知情報を出力可能な表示装置を含む複数種類の出力装置と、
前記複数種類の出力装置をそれぞれ制御し、通知情報を前記出力装置を介して出力させる通知部と、搭乗者の視線を検出する視線検出部と、前記視線検出部によって検出された前記視線に基づいて前記視線の移動方向を予測する視線移動予測部と、を備えた通知装置と
を備え、
前記通知部は、
前記視線移動予測部によって予測された前記視線の移動方向に前記表示装置が存在しない場合、前記通知情報を前記表示装置とは異なる前記出力装置を介して出力させること
を特徴とする通知システム。
【請求項８】
通知情報を出力可能な表示装置を含む複数種類の出力装置をそれぞれ制御し、前記通知情報を前記出力装置を介して出力させる通知工程と、
搭乗者の視線を検出する視線検出工程と、
前記視線検出工程によって検出された前記視線に基づいて前記視線の移動方向を予測する視線移動予測工程と
を含み、
前記通知工程は、
前記視線移動予測工程によって予測された前記視線の移動方向に前記表示装置が存在しない場合、前記通知情報を前記表示装置とは異なる前記出力装置を介して出力させること
を特徴とする通知方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、通知装置、通知システムおよび通知方法に関する。
【背景技術】
【０００２】
従来、車両には、例えば警報等の緊急情報や渋滞情報等の道路交通情報など、種々の通知情報を搭乗者に通知する装置が搭載されている。かかる装置にあっては、例えば表示装置に通知情報を表示することで、搭乗者への通知を行うようにしている（例えば特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−１３４９７１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記した従来技術において、例えば搭乗者が表示装置を視認していない場合、通知情報が搭乗者に認識されないおそれがある。このように、従来技術には、通知情報を搭乗者に確実に通知するという点でさらなる改善の余地があった。
【０００５】
本発明は、上記に鑑みてなされたものであって、通知情報を搭乗者に対して確実に通知することができる通知装置、通知システムおよび通知方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決し、目的を達成するために、本発明は、通知装置において、通知部と、視線検出部と、視線移動予測部とを備える。通知部は、通知情報を出力可能な表示装置を含む複数種類の出力装置をそれぞれ制御し、前記通知情報を前記出力装置を介して出力させる。視線検出部は、搭乗者の視線を検出する。視線移動予測部は、前記視線検出部によって検出された前記視線に基づいて前記視線の移動方向を予測する。また、前記通知部は、前記視線移動予測部によって予測された前記視線の移動方向に前記表示装置が存在しない場合、前記通知情報を前記表示装置とは異なる前記出力装置を介して出力させる。
【発明の効果】
【０００７】
本発明によれば、通知情報を搭乗者に対して確実に通知することができる。
【図面の簡単な説明】
【０００８】
【図１】図１は、実施形態に係る通知方法の概要説明図である。
【図２】図２は、実施形態における通知システムの構成例を示すブロック図である。
【図３】図３は、車室内を模式的に示す図である。
【図４】図４は、条件情報を説明する図である。
【図５Ａ】図５Ａは、優先度情報を説明する図（その１）である。
【図５Ｂ】図５Ｂは、優先度情報を説明する図（その２）である。
【図６Ａ】図６Ａは、通知装置が実行する処理手順を示すフローチャート（その１）である。
【図６Ｂ】図６Ｂは、通知装置が実行する処理手順を示すフローチャート（その２）である。
【図７】図７は、誘導制御の一例を示す図である。
【図８】図８は、変形例に係る通知装置が実行する処理手順を示すフローチャートである。
【発明を実施するための形態】
【０００９】
以下、添付図面を参照して、本願の開示する通知装置、通知システムおよび通知方法の実施形態を詳細に説明する。なお、以下に示す実施形態によりこの発明が限定されるものではない。
【００１０】
＜１．通知方法の概要＞
以下では先ず、実施形態に係る通知方法の概要について図１を参照して説明する。図１は、実施形態に係る通知方法の概要説明図である。
【００１１】
図１に示すように、実施形態に係る通知方法は、例えば自動車などの車両１に搭載された通知装置１０によって実行される。具体的には、車両１には、上記した通知装置１０に加え、出力装置５０と、撮像部６１とが搭載される。
【００１２】
なお、車両１の車室２には、その前方に運転席Ｓ１および助手席Ｓ２が設けられるとともに、後方に後部席Ｓ３，Ｓ４，Ｓ５が設けられるものとする。なお、図１に示す座席の位置や数は、あくまでも例示であって限定されるものではない。
【００１３】
また、図１に示す例では、搭乗者として運転者Ｐ１が運転席Ｓ１に着座しているものとし、ここでは、搭乗者たる運転者Ｐ１に対して通知情報が通知される場合を例に挙げて説明する。なお、通知情報には、例えば緊急情報や道路交通情報などが含まれるが、これらについては後述する。
【００１４】
出力装置５０は、通知情報を出力可能な装置である。かかる出力装置５０は、例えば通知情報を表示して出力する表示装置４０や、通知情報を示す音を出力するスピーカ５１など、複数種類の出力装置を含む。なお、スピーカ５１は、音出力装置の一例である。
【００１５】
詳しくは、例えば、出力装置５０は、表示装置４０と、スピーカ５１とを含む。表示装置４０は、例えば、メータディスプレイ４１と、センタディスプレイ４２とを含む。
【００１６】
メータディスプレイ４１およびセンタディスプレイ４２は、例えばインストルメントパネル３に取り付けられ、通知情報を含む各種情報を表示する。具体的には、メータディスプレイ４１は、インストルメントパネル３においてハンドル４の背面側であって運転席Ｓ１の正面付近に取り付けられる。センタディスプレイ４２は、インストルメントパネル３の中央付近で、運転席Ｓ１と助手席Ｓ２との間に対応する位置に取り付けられる。
【００１７】
なお、上記したメータディスプレイ４１およびセンタディスプレイ４２の取付位置は、あくまでも例示であって限定されるものではない。また、上記では、表示装置４０の例として、メータディスプレイ４１等を挙げたが、これらに限られない。すなわち、表示装置４０としては、メータディスプレイ４１等に加えてあるいは代えて、例えばフロントガラスに通知情報を映し出すヘッドアップディスプレイや、後部席Ｓ３，Ｓ４，Ｓ５の搭乗者用のリアディスプレイ（後述）などを含んでもよい。
【００１８】
スピーカ５１は、例えば図示しないドアやインストルメントパネル３など車室２の適宜位置に取り付けられ、通知情報を含む各種情報を示す音を出力する。なお、スピーカ５１から出力される「音」には、例えば人の声を模した音（音声）や、ブザー音等の警告音など種々の音が含まれてもよい。
【００１９】
撮像部６１は、車室２の適宜位置に設けられ、例えば運転者Ｐ１など搭乗者を撮像する。撮像部６１は、後述するように、搭乗者の視線検出に利用されるため、搭乗者の顔を含む画像、換言すると、搭乗者の視線に関する画像を撮像し、かかる画像情報を通知装置１０へ出力する。
【００２０】
通知装置１０は、複数種類の出力装置５０および撮像部６１をそれぞれ制御する。なお、通知装置１０の詳しい構成については、図２を参照して後述する。
【００２１】
そして、通知装置１０にあっては、搭乗者の視線を検出し、検出された視線に基づいて通知情報を出力装置５０を介して出力させることで、通知情報を搭乗者に対して確実に通知できるようにした。
【００２２】
具体的に説明すると、本実施形態に係る通知装置１０は、撮像部６１から出力された画像情報に基づいて搭乗者（ここでは運転者Ｐ１）の視線の検出を行う（ステップＳ１）。なお、図１の例では、運転者Ｐ１は最初に車両１の前方を視認しているものとし、そのときの運転者Ｐ１の視線Ａ１を実線矢印で示した。
【００２３】
なお、図１においては、例えば、運転者Ｐ１が左前方のセンタディスプレイ４２を視認している場合の視線Ａ２を一点鎖線矢印で示し、運転者Ｐ１が右前方の車外を視認している場合の視線Ａ３を二点鎖線矢印で示している。
【００２４】
通知装置１０は、運転者Ｐ１の視線を継続的または断続的に検出し、検出された視線に基づいて視線の移動方向を予測する（ステップＳ２）。
【００２５】
そして、通知装置１０は、予測された視線の移動方向が、例えば視線Ａ１から視線Ａ２へ移動する方向である場合、通知情報をセンタディスプレイ４２に表示させる（ステップＳ３）。言い換えると、通知装置１０は、予測された視線の移動方向に表示装置４０（ここではセンタディスプレイ４２）が存在する場合、通知情報をセンタディスプレイ４２に表示させて運転者Ｐ１に対する通知を行う。これにより、通知装置１０は、通知情報をセンタディスプレイ４２を介して運転者Ｐ１に通知することができる。
【００２６】
他方、通知装置１０は、予測された視線の移動方向が、例えば視線Ａ１から視線Ａ３へ移動する方向である場合、通知情報を示す音をスピーカ５１から出力させる（ステップＳ４）。言い換えると、通知装置１０は、予測された視線の移動方向にセンタディスプレイ４２等の表示装置４０が存在しない場合、通知情報を示す音をスピーカ５１を介して出力させて運転者Ｐ１への通知を行う。
【００２７】
このように、本実施形態に係る通知装置１０にあっては、予測された視線の移動方向に表示装置４０が存在しない場合、通知情報を表示装置４０とは異なる出力装置５０（ここではスピーカ５１）を介して出力させて、搭乗者たる運転者Ｐ１への通知を行うようにした。
【００２８】
これにより、通知装置１０は、例えばメータディスプレイ４１やセンタディスプレイ４２などの表示装置４０を視認していない搭乗者（例えば運転者Ｐ１）に対し、通知情報を確実に通知することができる。
【００２９】
なお、上記では、通知情報が通知される搭乗者が運転者Ｐ１である場合を例にとって説明したが、これに限られず、助手席Ｓ２などに着座する他の搭乗者に通知情報が通知されてもよい。また、運転者Ｐ１以外の搭乗者に通知情報が通知される場合については、後述する。
【００３０】
＜２．通知装置を備えた通知システムの構成＞
次に、図２を用いて、実施形態に係る通知装置１０を備えた通知システム１００の構成を説明する。図２は、実施形態における通知システム１００の構成例を示すブロック図である。なお、図２では、本実施形態の特徴を説明するために必要な構成要素のみを機能ブロックで表しており、一般的な構成要素についての記載を省略している。
【００３１】
換言すれば、図２に図示される各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。例えば、各機能ブロックの分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することが可能である。
【００３２】
図２に示すように、本実施形態に係る通知システム１００は、通知装置１０と、出力装置５０と、撮像部６１と、車載センサ群６２と、通信部６３とを備える。出力装置５０は、表示装置４０と、スピーカ５１と、ハンドル用アクチュエータ５２と、座席用アクチュエータ５３とを備える。
【００３３】
表示装置４０は、上記したメータディスプレイ４１等に加え、リアディスプレイ４３を含んでもよい。図３は、車室２内を模式的に示す図である。図３に示すように、リアディスプレイ４３は、例えば車室２の天井中央部など後部席Ｓ３，Ｓ４，Ｓ５にそれぞれ着座する搭乗者Ｐ３，Ｐ４，Ｐ５が視認し易い位置に取り付けられる。なお、図３では、リアディスプレイ４３が一台である例を示したが、これに限られず、後部席Ｓ３，Ｓ４，Ｓ５の前方にリアディスプレイ４３が一台ずつ取り付けられてもよい。
【００３４】
スピーカ５１は、例えば車室２内に複数個取り付けられてもよい。なお、図３では、スピーカ５１が、運転席Ｓ１、助手席Ｓ２および後部席Ｓ３，Ｓ４付近にそれぞれ取り付けられる例を示したが、スピーカ５１の取付位置は任意に設定可能である。
【００３５】
図３に示すように、ハンドル用アクチュエータ５２は、例えばハンドル４に内蔵され、ハンドル４を振動させることが可能なアクチュエータである。なお、ハンドル用アクチュエータ５２は、ハンドル振動出力装置の一例である。
【００３６】
座席用アクチュエータ５３は、例えば運転席Ｓ１、助手席Ｓ２および後部席Ｓ３，Ｓ４，Ｓ５にそれぞれ内蔵され、各座席を振動させることが可能なアクチュエータである。なお、座席用アクチュエータ５３は、全ての座席に内蔵されることを要さず、例えば運転席Ｓ１のみなど、任意の座席に内蔵されてもよい。かかる座席用アクチュエータ５３は、座席振動出力装置の一例である。上記したハンドル用アクチュエータ５２および座席用アクチュエータ５３としては、例えば振動モータを用いることができるが、これに限られない。
【００３７】
撮像部６１は、上記したように、搭乗者Ｐ１〜Ｐ５の視線に関する画像を撮像し、画像情報を通知装置１０の制御部２０（後述）へ出力する。なお、撮像部６１としては、車載カメラなどを用いることができる。また、図３に示す例では、撮像部６１は、１台であるが、２台以上であってもよい。
【００３８】
車載センサ群６２には、車両１（図１参照）の走行状態を検出する各種のセンサが含まれ、各種のセンサ出力に基づいて得られた通知情報を示す信号を出力する。例えば、車載センサ群６２には、車両１の周囲に向けて電磁波を放射して得られた反射波に基づいて他の車両などの対象物までの距離や方向を測定するレーダ、車両１の外方（周辺）に存在する他の車両などの対象物を撮像するカメラなどが含まれる。
【００３９】
そして、車載センサ群６２は、例えば先行車までの距離が所定値以下となった場合に車間距離への注意を促す警報など、緊急性を要する通知情報（すなわち緊急情報）を示す信号を通知装置１０の制御部２０へ出力する。
【００４０】
通信部６３は、例えば路肩に設置される通信機との間で各種情報（例えば走行している道路の渋滞情報や工事情報などの道路交通情報）を送受信する路車間通信機などを備え、得られた道路交通情報等を含んだ通知情報を示す信号を制御部２０へ出力する。
【００４１】
また、通信部６３は、例えばＧＰＳ（Global  Positioning  System）衛星と通信して得られる信号に基づき、自車の現在位置を検出する。そして、通信部６３は、インターネットなどの通信ネットワークに接続され、現在位置の周辺情報（例えば現在位置の周辺にある観光スポット情報や、人気のある飲食店情報など）を取得し、かかる周辺情報を含んだ通知情報を示す信号を制御部２０へ出力する。このように、搭乗者に通知される通知情報は、例えば、緊急情報、道路交通情報および周辺情報などであるが、これらに限定されるものではない。
【００４２】
図２の説明を続けると、通知装置１０は、制御部２０と、記憶部３０とを備える。制御部２０は、視線検出部２１と、視線移動予測部２２と、優先度算出部２３と、通知部２４とを備え、ＣＰＵ（Central  Processing  Unit）などを有するマイクロコンピュータである。
【００４３】
また、記憶部３０は、不揮発性メモリやハードディスクドライブといった記憶デバイスで構成される記憶部であり、条件情報３１と、優先度情報３２とを記憶する。
【００４４】
本実施形態では、後述するように、通知情報の種類によって搭乗者への通知方法を変えるように構成される。上記した条件情報３１は、通知情報の種類に応じて通知方法を変える条件に関する情報を含む。図４は、条件情報３１を説明する図である。
【００４５】
図４に示すように、条件情報３１では、通知情報が緊急情報である場合に「条件Ａ」が対応付けられている。また、条件情報３１では、通知情報が道路交通情報である場合に「条件Ｂ」が対応付けられ、通知情報が周辺情報である場合に「条件Ｃ」が対応付けられている。なお、通知装置１０の制御部２０は、条件情報３１に基づいて通知情報の種類に適した搭乗者への通知を行うが、これについては後述する。
【００４６】
優先度情報３２は、後述する搭乗者の優先度の算出に用いられる情報を含む。優先度とは、通知情報を優先的に通知する度合いを示し、例えば搭乗者が複数いる場合、複数の搭乗者のそれぞれに対して優先度が算出される。
【００４７】
かかる優先度は、例えば搭乗者の乗車位置および搭乗者の年齢に基づいて算出されてもよい。図５Ａおよび図５Ｂは、優先度情報３２を説明する図である。図５Ａは、搭乗者の乗車位置に関する優先度情報３２ａであり、図５Ｂは、搭乗者の年齢層に関する優先度情報３２ｂである。なお、本実施形態では、運転者Ｐ１を除く搭乗者に対して優先度が算出される例を用いて説明するが、これに限られず、運転者Ｐ１を含む搭乗者に対して優先度が算出されてもよい。
【００４８】
図５Ａに示すように、乗車位置に関する優先度情報３２ａには、乗車位置に対し、優先度の算出に用いられる点数の情報が対応付けられている。乗車位置に関する優先度情報３２ａでは、通知情報を通知すべき搭乗者が着座し易い、または着座することが多いと推定される乗車位置の点数が高くなるように設定される。例えば、助手席Ｓ２の点数は４、運転席Ｓ１後方の後部席Ｓ３の点数は３、助手席Ｓ２後方の後部席Ｓ４の点数は２、中央の後部席Ｓ５の点数は１に設定される（図３参照）。
【００４９】
図５Ｂに示すように、年齢層に関する優先度情報３２ｂには、年齢層に対し、優先度の算出に用いられる点数の情報が対応付けられている。年齢層に関する優先度情報３２ｂでは、通知情報を通知すべきと推定される搭乗者の年齢層の点数が高くなるように設定される。例えば、年齢層が大人の場合の点数は３、高齢者の場合の点数は２、子供の場合の点数は１、赤ちゃんや人以外のペット等の場合の点数は０に設定される。なお、図５Ａおよび図５Ｂに示す点数は、あくまでも例示であって限定されるものではない。
【００５０】
図２の説明に戻ると、制御部２０の視線検出部２１は、撮像部６１によって撮像された搭乗者の画像を取得し、かかる画像に対する画像解析処理を行って搭乗者の視線を検出する。例えば、視線検出部２１は、搭乗者の画像における搭乗者の頭部の向きや目の位置を、予め記憶部３０に記憶された基準画像と比較し、搭乗者の視線が何処に向いているかを検出してもよい。
【００５１】
なお、例えば、撮像部６１が赤外線カメラおよび赤外線ＬＥＤを備えるように構成し、視線検出部２１は、赤外線カメラで撮像した画像に基づいて搭乗者の視線を検出してもよい。具体的には、視線検出部２１は、赤外線ＬＥＤで照らした搭乗者の顔を赤外線カメラで撮像することによって得られる赤外画像中の瞳孔と、眼球上に生じる赤外照明反射像との位置関係に基づき、搭乗者の視線を検出してもよい。
【００５２】
そして、視線検出部２１は、検出された搭乗者の視線を示す情報を視線移動予測部２２および通知部２４へ出力する。なお、上記した搭乗者の視線を検出する手法は、あくまでも例示であって限定されるものではない。
【００５３】
視線移動予測部２２は、視線検出部２１によって検出された視線に基づいて視線の移動方向を予測する。例えば、視線移動予測部２２は、検出された視線が移動している場合、視線の所定時間当たりの移動量等を算出し、算出した視線の移動量等に基づいて視線の移動方向を予測してもよい。
【００５４】
優先度算出部２３は、優先度情報３２に基づいて優先度を算出する。詳しくは、優先度算出部２３は、乗車位置に関する優先度情報３２ａ、および、年齢層に関する優先度情報３２ｂに基づいて優先度を算出する。
【００５５】
例えば、搭乗者が助手席Ｓ２に着座した大人である場合、優先度算出部２３は、優先度情報３２ａの「助手席Ｓ２」に対応付けられた点数「４」に、優先度情報３２ｂの「大人」に対応付けられた点数「３」を乗算して得た積「１２」を優先度として算出する。なお、上記したように、優先度算出部２３は、搭乗者が複数いる場合、複数の搭乗者のそれぞれに対して優先度を算出する。そして、優先度算出部２３は、算出された優先度を示す情報を通知部２４へ出力する。
【００５６】
なお、後述する通知部２４では、運転者Ｐ１以外の搭乗者がいるか否かの判定を行うが、例えば、搭乗者が赤ちゃんのみで、優先度の最高点が０の場合、搭乗者は運転者Ｐ１のみという判定を行うようにしてもよい。
【００５７】
なお、優先度算出部２３は、例えば搭乗者の有無を検出する着座センサ（図示せず）の出力や、撮像部６１による撮像画像の解析結果などに基づき、搭乗者の乗車位置を検出することができる。また、優先度算出部２３は、例えば撮像部６１による撮像画像を解析することで、撮像されている搭乗者の年齢層を推定することができる。
【００５８】
なお、上記では、優先度算出部２３は、優先度情報３２ａの点数に優先度情報３２ｂの点数を乗算して優先度を算出したが、これに限られず、例えば２つの点数を加算して得た和を優先度として算出してもよい。また、優先度を算出する所定の数式を予め設定しておき、優先度算出部２３は、かかる数式に点数を代入して優先度を算出してもよい。また、優先度算出部２３は、乗車位置に関する優先度情報３２ａおよび年齢層に関する優先度情報３２ｂのいずれか一方を用いて優先度を算出してもよい。
【００５９】
通知部２４は、複数種類の出力装置５０をそれぞれ制御し、通知情報を出力装置５０を介して出力させて車両１（図１参照）の搭乗者への通知を行う。
【００６０】
詳しく説明すると、通知部２４は、条件情報３１に基づき、通知情報の種類に適した通知方法で搭乗者への通知を行う。例えば、通知部２４は、通知情報が緊急情報であって条件Ａを満たす場合、検出された搭乗者の視線に関わらず、通知情報を表示装置４０およびスピーカ５１を介して出力させる。具体的には、通知部２４は、通知情報が緊急情報である場合、メータディスプレイ４１やセンタディスプレイ４２などの表示装置４０に通知情報を表示させるとともに、通知情報を示す音をスピーカ５１から出力させる。これにより、通知部２４は、通知情報たる緊急情報を搭乗者（例えば運転者Ｐ１）に対して確実に通知することができる。
【００６１】
また、例えば、通知部２４は、通知情報が道路交通情報であって条件Ｂを満たす場合、検出された搭乗者（例えば運転者Ｐ１）の視線に応じて、通知情報を表示装置４０に表示させたり、通知情報を示す音をスピーカ５１から出力させたりする。具体的には、通知部２４は、運転者Ｐ１の視線の移動がなく、表示装置４０を視認している場合、視認している表示装置４０に道路交通情報を表示させるとともに、道路交通情報を示す音を運転席Ｓ１付近のスピーカ５１から出力させる。
【００６２】
また、通知部２４は、運転者Ｐ１の視線の移動があり、予測された視線の移動方向に表示装置４０が存在する場合、かかる表示装置４０に道路交通情報を表示させるとともに、道路交通情報を示す音を運転席Ｓ１付近のスピーカ５１から出力させる。
【００６３】
また、通知部２４は、運転者Ｐ１の視線の移動があり、予測された視線の移動方向に表示装置４０が存在しない場合、または、運転者Ｐ１の視線の移動がなく、表示装置４０を視認していない場合、道路交通情報を示す音を運転席Ｓ１付近のスピーカ５１から出力させる。
【００６４】
これにより、通知部２４は、例えば運転者Ｐ１の視線の移動方向に表示装置４０が存在しない場合であっても、通知情報たる道路交通情報を搭乗者（例えば運転者Ｐ１）に対して確実に通知することができる。
【００６５】
なお、道路交通情報は主に運転者Ｐ１に通知した方がよい情報であるため、上記では、道路交通情報を示す音を運転席Ｓ１付近のスピーカ５１から出力させるようにしたが、これに限られず、運転席Ｓ１付近のスピーカ５１以外のスピーカ５１から出力させてもよい。
【００６６】
また、例えば、通知部２４は、通知情報が周辺情報であって条件Ｃを満たす場合、かかる周辺情報を優先度に基づいて搭乗者に通知する。詳しくは、運転者Ｐ１以外の搭乗者がいる場合、運転者Ｐ１以外の搭乗者に周辺情報を通知する。
【００６７】
例えば、通知部２４は、運転者Ｐ１以外の搭乗者に対して算出された優先度を比較して、優先度の高い搭乗者を選択し、選択された搭乗者に対して周辺情報を通知する。具体的には、通知部２４は、選択された搭乗者が表示装置４０を視認している場合、視認している表示装置４０に周辺情報を表示させる。また、通知部２４は、選択された搭乗者が表示装置４０を視認していない場合、周辺情報を示す音を選択された搭乗者の座席付近のスピーカ５１から出力させる。これにより、通知部２４は、通知情報たる周辺情報を、優先度の高い搭乗者に対して確実に通知することができる。
【００６８】
また、通知部２４は、選択された搭乗者が起きていない、すなわち寝ているような場合、選択された搭乗者の次に優先度が高い搭乗者に対して周辺情報を通知するようにしてもよい。
【００６９】
なお、通知部２４において、搭乗者が起きているか否かの判定は、例えば、搭乗者の視線に基づいて行うことができる。例えば、通知部２４は、視線検出部２１によって視線が検出される場合、搭乗者が起きていると判定する一方、視線が所定時間に亘って検出されない場合、搭乗者は起きていない、すなわち寝ていると判定することができる。
【００７０】
また、通知部２４は、通知情報が周辺情報であり、搭乗者が運転者Ｐ１のみの場合、運転者Ｐ１に周辺情報を通知する。なお、周辺情報を通知する方法は、道路交通情報の通知方法と同様であってもよいし、これに限定されるものではなく、異なる通知方法であってもよい。
【００７１】
異なる通知方法としては、例えば通知部２４は、運転者Ｐ１の視線の移動があり、予測された視線の移動方向に表示装置４０が存在する場合、かかる表示装置４０に周辺情報を表示させる一方、道路交通情報では行っていた音での通知を行わないようにしてもよい。これは、周辺情報が道路交通情報に比べて重要性が低いため、周辺情報を表示装置４０の表示に加えて、音でも通知すると、運転者Ｐ１によっては煩わしく感じることがあるためである。
【００７２】
なお、上記では、通知部２４は、運転者Ｐ１の視線の移動があり、予測された視線の移動方向に表示装置４０が存在しない場合、通知情報を表示装置４０とは異なる出力装置５０であるスピーカ５１を介して出力するようにしたが、これに限定されるものではない。
【００７３】
すなわち、表示装置４０とは異なる出力装置５０として、ハンドル用アクチュエータ５２を用いてもよい。例えば、通知部２４は、予測された視線の移動方向に表示装置４０が存在しない場合、ハンドル用アクチュエータ５２を制御してハンドル４を振動させることで、通知情報の搭乗者への通知を行うようにしてもよい。
【００７４】
これにより、通知部２４は、例えば搭乗者の視線の移動方向に表示装置４０が存在しない場合であっても、通知情報を搭乗者（例えば運転者Ｐ１）に対して確実に通知することができる。
【００７５】
また、表示装置４０とは異なる出力装置５０として、座席用アクチュエータ５３を用いてもよい。例えば、通知部２４は、予測された視線の移動方向に表示装置４０が存在しない場合、座席用アクチュエータ５３を制御して座席を振動させることで、通知情報の搭乗者への通知を行うようにしてもよい。
【００７６】
これにより、通知部２４は、例えば搭乗者の視線の移動方向に表示装置４０が存在しない場合であっても、スピーカ５１やハンドル用アクチュエータ５２と同様に、通知情報を搭乗者（例えば運転者Ｐ１）に対して確実に通知することができる。
【００７７】
なお、上記では、表示装置４０とは異なる出力装置５０として、スピーカ５１、ハンドル用アクチュエータ５２および座席用アクチュエータ５３を挙げたが、これらに限定されるものではない。また、表示装置４０とは異なる出力装置５０としては、スピーカ５１、ハンドル用アクチュエータ５２および座席用アクチュエータ５３のうち、一つでもよいし、二つ以上を組み合わせてもよい。
【００７８】
＜３．実施形態に係る通知装置の通知制御処理＞
次に、通知装置１０の出力装置５０を制御する具体的な処理手順について図６Ａおよび図６Ｂを用いて説明する。図６Ａ，６Ｂは、通知装置１０が実行する処理手順を示すフローチャートである。
【００７９】
図６Ａに示すように、通知装置１０の制御部２０は、通知情報が発生したか否かを判定する（ステップＳ１０）。制御部２０は、通知情報が発生していないと判定された場合（ステップＳ１０，Ｎｏ）、以降の処理をスキップする。一方、制御部２０は、通知情報が発生したと判定された場合（ステップＳ１０，Ｙｅｓ）、発生した通知情報が緊急情報であるか否かを判定する（ステップＳ１１）。
【００８０】
制御部２０は、通知情報が緊急情報であると判定された場合（ステップＳ１１，Ｙｅｓ）、通知情報を表示装置４０に表示させ（ステップＳ１２）、通知情報を示す音をスピーカ５１から出力させる（ステップＳ１３）。
【００８１】
なお、ステップＳ１２およびステップＳ１３の処理では、通知情報を表示させた後に音出力を行うようにしたが、これに限られず、通知情報の表示と音出力とを同時に行ってもよいし、音出力の後に通知情報の表示を行ってもよい。なお、以降の処理で、通知情報の表示に次いで音出力を行う場合も同様である。
【００８２】
制御部２０は、通知情報が緊急情報ではないと判定された場合（ステップＳ１１，Ｎｏ）、続いて通知情報が道路交通情報であるか否かを判定する（ステップＳ１４）。制御部２０は、通知情報が道路交通情報であると判定された場合（ステップＳ１４，Ｙｅｓ）、搭乗者たる運転者Ｐ１の視線の移動があるか否かを判定する（ステップＳ１５）。
【００８３】
制御部２０は、運転者Ｐ１の視線の移動があると判定された場合（ステップＳ１５，Ｙｅｓ）、運転者Ｐ１の視線の移動方向を予測し、予測された視線の移動方向に表示装置４０が存在するか否かを判定する（ステップＳ１６）。
【００８４】
制御部２０は、視線の移動方向に表示装置４０が存在すると判定された場合（ステップＳ１６，Ｙｅｓ）、通知情報を視線の移動先の表示装置４０に表示させる（ステップＳ１７）。また、制御部２０は、通知情報を示す音を運転席Ｓ１付近のスピーカ５１から出力させる（ステップＳ１８）。
【００８５】
他方、制御部２０は、視線の移動方向に表示装置４０が存在しないと判定された場合（ステップＳ１６，Ｎｏ）、通知情報を示す音を運転席Ｓ１付近のスピーカ５１から出力させる（ステップＳ１９）。
【００８６】
制御部２０は、運転者Ｐ１の視線の移動がないと判定された場合（ステップＳ１５，Ｎｏ）、運転者Ｐ１の視線が表示装置４０を向いて視認しているか否かを判定する（ステップＳ２０）。制御部２０は、表示装置４０を視認していると判定された場合（ステップＳ２０，Ｙｅｓ）、通知情報を視認している表示装置４０に表示させ（ステップＳ２１）、通知情報を示す音を運転席Ｓ１付近のスピーカ５１から出力させる（ステップＳ２２）。なお、制御部２０は、表示装置４０を視認していないと判定された場合（ステップＳ２０，Ｎｏ）、上記したステップＳ１９の処理を行う。
【００８７】
制御部２０は、通知情報が道路交通情報ではないと判定された場合（ステップＳ１４，Ｎｏ）、言い換えると、通知情報が緊急情報および道路交通情報以外の情報（例えば周辺情報）である場合、運転者Ｐ１以外の搭乗者がいるか否かを判定する（ステップＳ２３）。
【００８８】
制御部２０は、運転者Ｐ１以外の搭乗者がいないと判定された場合（ステップＳ２３，Ｎｏ）、運転者Ｐ１に周辺情報を通知させるべく、上記したステップＳ１５以降の処理を行う。
【００８９】
一方、制御部２０は、運転者Ｐ１以外の搭乗者がいると判定された場合（ステップＳ２３，Ｙｅｓ）、図６Ｂに示すように、搭乗者の優先度を算出する（ステップＳ２４）。次いで、制御部２０は、算出された優先度に基づいて搭乗者を選択する（ステップＳ２５）、詳しくは、優先度を比較して優先度の高い搭乗者を選択する。
【００９０】
次いで、制御部２０は、選択された搭乗者が起きているか否かを判定する（ステップＳ２６）。制御部２０は、搭乗者が起きていると判定された場合（ステップＳ２６，Ｙｅｓ）、かかる搭乗者の視線が表示装置４０を向いて視認しているか否かを判定する（ステップＳ２７）。
【００９１】
制御部２０は、表示装置４０を視認していると判定された場合（ステップＳ２７，Ｙｅｓ）、通知情報を視認している表示装置４０に表示させる（ステップＳ２８）。制御部２０は、選択された搭乗者が表示装置４０を視認していないと判定された場合（ステップＳ２７，Ｎｏ）、通知情報を示す音を選択された搭乗者の座席付近のスピーカ５１から出力させる（ステップＳ２９）。
【００９２】
一方、制御部２０は、選択された搭乗者が起きていない、すなわち寝ていると判定された場合（ステップＳ２６，Ｎｏ）、選択された搭乗者および運転者Ｐ１以外の他の搭乗者がいるか否かを判定する（ステップＳ３０）。
【００９３】
制御部２０は、他の搭乗者がいると判定された場合（ステップＳ３０，Ｙｅｓ）、ステップＳ２５の処理に戻り、先に選択された搭乗者の次に優先度の高い搭乗者を選択する。そして、制御部２０は、新たに選択された搭乗者に通知情報を通知するべく、上記したステップＳ２６以降の処理を実行する。
【００９４】
制御部２０は、他の搭乗者がいないと判定された場合（ステップＳ３０，Ｎｏ）、すなわち、例えば運転者Ｐ１以外の搭乗者が寝ているような場合、周辺情報を運転者Ｐ１に通知するべく、上記したステップＳ１５以降の処理を実行する。
【００９５】
上述してきたように、実施形態に係る通知装置１０は、通知部２４と、視線検出部２１と、視線移動予測部２２とを備える。通知部２４は、通知情報を出力可能な表示装置４０を含む複数種類の出力装置５０をそれぞれ制御し、通知情報を出力装置５０を介して出力させる。視線検出部２１は、搭乗者の視線を検出する。視線移動予測部２２は、視線検出部２１によって検出された視線に基づいて視線の移動方向を予測する。また、通知部２４は、視線移動予測部２２によって予測された視線の移動方向に表示装置４０が存在しない場合、通知情報を表示装置４０とは異なる出力装置５０を介して出力させる。これにより、通知情報を搭乗者に対して確実に通知することができる。
【００９６】
（変形例）
＜４．変形例に係る通知方法＞
次いで、上記した実施形態の変形例について説明する。なお、以下においては、実施形態と共通の構成については、同一の符号を付して説明を省略する。
【００９７】
上記した実施形態にあっては、例えば通知情報が緊急情報である場合、検出された搭乗者の視線に関わらず、通知情報を表示装置４０およびスピーカ５１を介して出力させるようにした。
【００９８】
変形例に係る通知部２４は、通知情報が緊急情報であって条件Ａを満たす場合、搭乗者の視線を表示装置４０に誘導する誘導制御を出力装置５０に対して実行することで、搭乗者に対して表示装置４０の視認を促すようにした。なお、条件Ａは、所定の条件の一例である。
【００９９】
図７は、誘導制御の一例を示す図である。図７の左図に示すように、変形例に係る通知部２４は、例えば搭乗者たる運転者Ｐ１が表示装置４０を視認していない場合、例えば、出力装置５０のうちメータディスプレイ４１の周縁部４１ａを点滅させる。これにより、通知部２４は、運転者Ｐ１に対して視線を誘導してメータディスプレイ４１の視認を促すことが可能になる。
【０１００】
なお、誘導制御としては、上記した表示装置４０を点滅させる制御に限定されるものではない。すなわち、誘導制御は、例えば出力装置５０であるスピーカ５１から「ディスプレイを見て下さい」など視線を表示装置４０へ誘導する旨の音声を出力したり、出力装置５０であるハンドル用アクチュエータ５２や座席用アクチュエータ５３を制御してハンドル４や座席を振動させたりすることで、視線の誘導を図ってもよい。
【０１０１】
そして、通知部２４は、かかる誘導制御によって、運転者Ｐ１が例えばメータディスプレイ４１を視認した場合、図７の右図に示すように、視認しているメータディスプレイ４１に通知情報を表示させてもよい。
【０１０２】
このように、変形例にあっては、通知情報が緊急情報であって条件Ａを満たす場合、誘導制御を出力装置５０に対して実行するようにしたので、搭乗者の視線を表示装置４０に誘導して、表示装置４０の視認を促すことができる。これにより、変形例では、通知情報たる緊急情報を搭乗者（例えば運転者Ｐ１）に対してより確実に通知することができる。
【０１０３】
＜５．変形例に係る通知装置の通知制御処理＞
図８は、変形例に係る通知装置１０が実行する処理手順を示すフローチャートである。図８に示すように、通知装置１０の制御部２０は、ステップＳ１０およびステップＳ１１の処理を行い、通知情報が緊急情報であると判定された場合（ステップＳ１１，Ｙｅｓ）、搭乗者たる運転者Ｐ１の視線が表示装置４０を向いて視認しているか否かを判定する（ステップＳ１１ａ）。
【０１０４】
制御部２０は、運転者Ｐ１が表示装置４０を視認していると判定された場合（ステップＳ１１ａ，Ｙｅｓ）、通知情報を視認している表示装置４０に表示させ（ステップＳ１２）、通知情報を示す音をスピーカ５１から出力させる（ステップＳ１３）。
【０１０５】
制御部２０は、運転者Ｐ１が表示装置４０を視認していないと判定された場合（ステップＳ１１ａ，Ｎｏ）、上記した誘導制御を出力装置５０に対して実行する（ステップＳ１１ｂ）。
【０１０６】
次いで、制御部２０は、運転者Ｐ１が表示装置４０を視認したか否かを判定する（ステップＳ１１ｃ）。制御部２０は、運転者Ｐ１が表示装置４０を視認したと判定された場合（ステップＳ１１ｃ，Ｙｅｓ）、ステップＳ１２以降の処理に進んで、通知情報を視認している表示装置４０に表示させたり、スピーカ５１から音出力させたりする。
【０１０７】
他方、制御部２０は、運転者Ｐ１が表示装置４０を視認していないと判定された場合（ステップＳ１１ｃ，Ｎｏ）、ステップＳ１１ｃの処理を繰り返す。なお、制御部２０は、運転者Ｐ１が表示装置４０を視認していないと判定される状態が所定時間に亘って継続した場合、通知情報を運転者Ｐ１に通知するべく、ステップＳ１２以降の処理に進んでもよい。
【０１０８】
一方、制御部２０は、通知情報が緊急情報ではないと判定された場合（ステップＳ１１，Ｎｏ）、ステップＳ１４（図６Ａ参照）以降の処理に進む。なお、図８にあっては、図示の簡略化のため、上記したステップＳ１４〜Ｓ３０の通知制御処理を、まとめてステップＳ４０として示している。
【０１０９】
さらなる効果や変形例は、当業者によって容易に導き出すことができる。このため、本発明のより広範な態様は、以上のように表しかつ記述した特定の詳細および代表的な実施形態に限定されるものではない。したがって、添付の特許請求の範囲およびその均等物によって定義される総括的な発明の概念の精神または範囲から逸脱することなく、様々な変更が可能である。
【符号の説明】
【０１１０】
１０  通知装置
２０  制御部
２１  視線検出部
２２  視線移動予測部
２３  優先度算出部
２４  通知部
３０  記憶部
４０  表示装置
４１  メータディスプレイ
４２  センタディスプレイ
４３  リアディスプレイ
５０  出力装置
５１  スピーカ
５２  ハンドル用アクチュエータ
５３  座席用アクチュエータ
６１  撮像部
１００  通知システム
【図１】
2019012046.tif 000003
【図２】
2019012046.tif 000004
【図３】
2019012046.tif 000005
【図４】
2019012046.tif 000006
【図５Ａ】
2019012046.tif 000007
【図５Ｂ】
2019012046.tif 000008
【図６Ａ】
2019012046.tif 000009
【図６Ｂ】
2019012046.tif 000010
【図７】
2019012046.tif 000011
【図８】
2019012046.tif 000012