(57)【要約】  混乱度判定部（４）は、乗員状態取得部（３）により取得された乗員状態情報を用いて乗員の混乱度を判定する。認識度判定部（５）は、自車状況取得部（２）により取得された周辺状況情報及び制御情報並びに乗員状態取得部（３）により取得された乗員状態情報を用いて車両の周辺状況及び自動的な制御に対する乗員の認識度を判定する。情報生成部（６）は、自車状況取得部（２）により取得された周辺状況情報及び制御情報、混乱度判定部（４）により判定された混乱度、並びに認識度判定部（５）により判定された認識度を用いて乗員に提供する情報を生成する。
2020079755.tif 000002
【特許請求の範囲】
【請求項１】
車両の周辺状況を示す情報及び前記車両の自動的な制御に関する情報を取得する自車状況取得部と、
前記車両の乗員の状態を示す情報を取得する乗員状態取得部と、
前記乗員状態取得部により取得された情報を用いて前記乗員の混乱度を判定する混乱度判定部と、
前記自車状況取得部及び前記乗員状態取得部により取得された情報を用いて前記車両の周辺状況及び自動的な制御に対する前記乗員の認識度を判定する認識度判定部と、
前記自車状況取得部により取得された情報、前記混乱度判定部により判定された混乱度、及び前記認識度判定部により判定された認識度を用いて前記乗員に提供する情報を生成する情報生成部とを備える情報提供装置。
【請求項２】
前記情報生成部は、前記混乱度判定部により判定された混乱度又は前記認識度判定部により判定された認識度に応じて、前記乗員に提供する情報量を増減させることを特徴とする請求項１記載の情報提供装置。
【請求項３】
前記情報生成部は、前記混乱度判定部により判定された混乱度が高いほど、又は前記認識度判定部により判定された認識度が低いほど、前記乗員に提供する情報量を増加させることを特徴とする請求項２記載の情報提供装置。
【請求項４】
前記混乱度判定部は、前記乗員状態取得部により取得された前記乗員の表情、視線、挙動、音声、心拍数、発汗量、及び乗車回数のうちの少なくとも１つの情報を用いて前記乗員の混乱度を判定することを特徴とする請求項１記載の情報提供装置。
【請求項５】
前記混乱度判定部は、前記乗員に対する過去の混乱度の判定履歴を用いて現在の混乱度を推定することを特徴とする請求項１記載の情報提供装置。
【請求項６】
前記認識度判定部は、前記車両の周辺状況及び自動的な制御のうちの前記乗員が認識していた事柄を判定し、
前記情報生成部は、前記認識度判定部により前記乗員が認識していたと判定された事柄以外の前記車両の周辺状況及び自動的な制御に関する情報を生成することを特徴とする請求項１記載の情報提供装置。
【請求項７】
前記情報生成部は、前記自車状況取得部により取得された情報、前記混乱度判定部により判定された混乱度、及び前記認識度判定部により判定された認識度を用いて前記乗員に提供する情報を生成し、かつ、前記乗員に提供した後、前記混乱度判定部により新たに判定された混乱度が予め定められた値以上低下しない場合、前記乗員に提供する情報量を増加させることを特徴とする請求項１記載の情報提供装置。
【請求項８】
前記情報生成部は、前記乗員の混乱度が他の乗員との会話に起因して高くなった場合、前記乗員に提供する情報を変更しないことを特徴とする請求項１記載の情報提供装置。
【請求項９】
自車状況取得部が、車両の周辺状況を示す情報及び前記車両の自動的な制御に関する情報を取得し、
乗員状態取得部が、前記車両の乗員の状態を示す情報を取得し、
混乱度判定部が、前記乗員状態取得部により取得された情報を用いて前記乗員の混乱度を判定し、
認識度判定部が、前記自車状況取得部及び前記乗員状態取得部により取得された情報を用いて前記車両の周辺状況及び自動的な制御に対する前記乗員の認識度を判定し、
情報生成部が、前記自車状況取得部により取得された情報、前記混乱度判定部により判定された混乱度、及び前記認識度判定部により判定された認識度を用いて前記乗員に提供する情報を生成する情報提供方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、車両の制御に関する情報を乗員に提供する情報提供装置及び情報提供方法に関するものである。
【背景技術】
【０００２】
従来、車両の自動的な制御により自車両に急動作が発生した場合に、急動作の発生原因を乗員に容易に把握させるようにした情報提供装置が知られている。
例えば、特許文献１に記載された車両用表示装置は、自車両の周囲状況に応じて、自車両の自動的な制御が実行されるか否かを判定し、自動的な制御が実行されると判定された場合、周囲状況に基づいて自動的な制御の発生原因を含む周囲状況を示す画像を生成し、生成した画像を自車両内に設けられた画像表示手段に表示する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１７−１８７８３９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１記載の車両用表示装置のような従来の情報提供装置は、自車両に急動作が発生した場合のみに基づいて画像を表示していた。そのため、乗員がその急動作を予め予想できていた場合及びその急動作の発生原因を認識できていた場合等の不要な場面及び不要な内容についても画像が表示され、乗員に煩わしさを与えていた。また、急動作以外の動作が発生した場合には画像が表示されないため、その動作の発生原因を認識できていない乗員に不安感を与えていた。このように、従来の情報提供装置は、過不足のない情報提供ができていないという課題があった。【０００５】
この発明は、上記のような課題を解決するためになされたもので、過不足のない情報提供を行うことを目的とする。
【課題を解決するための手段】
【０００６】
この発明に係る情報提供装置は、車両の周辺状況を示す情報及び車両の自動的な制御に関する情報を取得する自車状況取得部と、車両の乗員の状態を示す情報を取得する乗員状態取得部と、乗員状態取得部により取得された情報を用いて乗員の混乱度を判定する混乱度判定部と、自車状況取得部及び乗員状態取得部により取得された情報を用いて車両の周辺状況及び自動的な制御に対する乗員の認識度を判定する認識度判定部と、自車状況取得部により取得された情報、混乱度判定部により判定された混乱度、及び認識度判定部により判定された認識度を用いて乗員に提供する情報を生成する情報生成部とを備えるものである。
【発明の効果】
【０００７】
この発明によれば、車両の周辺状況を示す情報及び車両の自動的な制御に関する情報に加え、車両の乗員の状態を示す情報に基づいて、乗員に提供する情報を生成するようにしたので、過不足のない情報提供を行うことができる。
【図面の簡単な説明】
【０００８】
【図１】実施の形態１に係る情報提供装置の構成例を示すブロック図である。
【図２】実施の形態１に係る情報提供装置が有する情報生成テーブルの一例を示す図である。
【図３】実施の形態１に係る情報提供装置の動作例を示すフローチャートである。
【図４】図４Ａ、図４Ｂ、及び図４Ｃは、実施の形態１に係る情報提供装置１の情報提供例を示す図である。
【図５】実施の形態１に係る情報提供装置のハードウェア構成例を示す図である。
【発明を実施するための形態】
【０００９】
以下、この発明をより詳細に説明するために、この発明を実施するための形態について、添付の図面に従って説明する。
実施の形態１．
図１は、実施の形態１に係る情報提供装置１の構成例を示すブロック図である。情報提供装置１は、車両に搭載される。また、情報提供装置１は、同じ車両に搭載された車両制御装置１０、入力装置１１、及び出力装置１２と接続される。
【００１０】
車両制御装置１０は、ミリ波レーダ、ＬＩＤＡＲ（Ｌｉｇｈｔ  Ｄｅｔｅｃｔｉｏｎ  Ａｎｄ  Ｒａｎｇｉｎｇ）又はコーナセンサ等の各種車外センサ、及び、Ｖ２Ｘ（Ｖｅｈｉｃｌｅ  ｔｏ  Ｅｖｅｒｙｔｈｉｎｇ）通信機又はＧＮＳＳ（Ｇｌｏｂａｌ  Ｎａｖｉｇａｔｉｏｎ  Ｓａｔｅｌｌｉｔｅ  Ｓｙｓｔｅｍ）受信機等の各種通信機と接続され、周辺状況を監視しながら車両の自動的な制御（運転支援を含む）を実現する。また、車両制御装置１０は、光ビーコンを備えた路側機、又は他車両等に搭載された外部装置等との間で情報を送受信しながら車両の自動的な制御（運転支援を含む）を実現してもよい。
【００１１】
この車両制御装置１０は、加速、制動、及び操舵等の車両の自動的な制御の内容を示す情報（以下、「制御情報」と称する）を出力する。なお、制御情報は、現在作動中の制御に関わる情報だけでなく、これから作動する予定の制御に関わる情報を含んでもよい。また、車両制御装置１０は、車両の自動的な制御が作動する要因となる車両の周辺状況を示す情報（以下、「周辺状況情報」と称する）を出力する。
【００１２】
入力装置１１は、車両に乗車している乗員による入力を受け付けるためのマイク、リモコン、又はタッチセンサ等、及び、乗員の状態を監視するためのカメラ、赤外線センサ、又は生体センサ等である。入力装置１１は、マイク、リモコン、タッチセンサ、カメラ、赤外線センサ、又は生体センサ等を用いて検知した乗員の状態を示す情報（以下、乗員状態情報）を出力する。乗員状態情報は、乗員の表情、視線、挙動、音声、心拍数、脳波、及び発汗量のうちの少なくとも１つを含む。また、入力装置１１は、乗員の顔画像又は音声等を用いて個人を認識し、乗員毎の乗車回数又は乗車時間等、車両の自動的な制御に対する乗員毎の経験値を示す情報を生成し、乗員状態情報に含めてもよい。なお、乗員状態情報は、上記例に限定されず、乗員の状態を示す情報であれば何でもよい。
【００１３】
出力装置１２は、スピーカ等の音声出力装置、液晶若しくは有機ＥＬ（Ｅｌｅｃｔｒｏ  Ｌｕｍｉｎｅｓｃｅｎｃｅ）を用いた表示装置、又は、アクチュエータを内蔵して振動できるようになっているハンドル若しくはシート等である。
【００１４】
情報提供装置１は、自車状況取得部２、乗員状態取得部３、混乱度判定部４、認識度判定部５、情報生成部６、及び情報生成テーブル７を備える。情報提供装置１が情報を提供する対象は運転者のみでなく、複数の乗員すべてを対象とできるものであるが、ここでは説明を単純化するため、乗員が一人であるものとして説明する。
【００１５】
自車状況取得部２は、自車両の制御内容を示す制御情報と制御要因となった周辺状況情報とを、車両制御装置１０から取得し、乗員状態取得部３及び情報生成部６へ出力する。
【００１６】
乗員状態取得部３は、乗員状態情報を入力装置１１から取得すると共に制御情報及び周辺状況情報を自車状況取得部２から取得し、取得した情報を認識度判定部５又は混乱度判定部４へ出力する。具体的には、乗員状態取得部３は、制御情報を自車状況取得部２から取得し、この制御情報に基づき車両の自動的な制御が作動したか否かを検知する。そして、乗員状態取得部３は、車両の自動的な制御が作動したことを検知した場合に、作動時を含む前後一定時間（例えば、１分間）における乗員の状態変化が分かるように、当該一定時間内の乗員状態情報の時系列データを混乱度判定部４及び認識度判定部５へ出力する。また、乗員状態取得部３は、車両の自動的な制御が作動したことを検知した場合に、作動時を含む前後一定時間（例えば、１分間）における自車両とその周辺状況との状態変化が分かるように、当該一定時間内の制御情報及び周辺状況情報の時系列データを認識度判定部５へ出力する。
【００１７】
混乱度判定部４は、乗員状態情報を乗員状態取得部３から取得し、乗員の状態に基づき乗員の混乱度を判定する。例えば、混乱度判定部４は、乗員が咄嗟に発した音声の音量に基づき、音圧６０ｄＢ未満であれば混乱度「低」、音圧６０ｄＢ以上７０ｄＢ未満であれば混乱度「中」、音圧７０ｄＢ以上であれば混乱度「高」のように混乱度を判定する。なお、混乱度判定部４は、音声の音量だけでなく、韻律情報又は言語情報を利用して判定するようにしてもよい。また、混乱度判定部４は、ＤＮＮ（Ｄｅｅｐ  Ｎｅｕｒａｌ  Ｎｅｔｗｏｒｋ）法等の一般的な方法を用いて、音声、カメラ画像、及び心拍等の複数の情報を統合して判定するようにしてもよい。また、混乱度判定部４は、ＤＮＮ法等の一般的な方法を用いて、音声以外の情報である乗員の表情、視線、挙動、心拍数、脳波、及び発汗量のうちの少なくとも１つから個別に判定するようにしてもよい。さらに、混乱度判定部４は、車両の自動的な制御に対する乗員の経験値が高い場合、車両の自動的な制御に対する乗員の理解度が高いことを考慮して混乱度を低下させるようにしてもよい。また、混乱度判定部４は、車両の自動的な制御に対する乗員の経験度が低い場合、車両の自動的な制御に対する乗員の理解度が低いことを考慮して混乱度を上昇させるようにしてもよい。その後、混乱度判定部４は、判定した混乱度を情報生成部６へ出力する。
【００１８】
認識度判定部５は、周辺状況情報、制御情報、及び乗員状態情報を乗員状態取得部３から取得する。そして、認識度判定部５は、取得したこれらの情報を用いて、乗員の状態に基づき、車両の周辺状況及び車両の自動的な制御に対する乗員の認識度を判定する。例えば、認識度判定部５は、カメラ画像等を用いて乗員の瞼の開き具合を検知し、瞼の開き具合に基づき覚醒状態か否かを判定し、乗員の覚醒状態、顔向き及び視線方向等に基づき乗員の車両周辺の確認状況等を判定する。そして、認識度判定部５は、乗員が睡眠中等の非覚醒状態であれば認識度「低」、覚醒状態であるもののスマートフォン等を操作中のように車外の状況を視認できていない状態であれば認識度「中」、車外の状況を視認できている状態であれば認識度「高」のように認識度を判定する。なお、認識度判定部５は、混乱度判定部４と同様に、ＤＮＮ法等の一般的な方法を用いて、複数の情報を統合して判定するようにしてもよい。その後、認識度判定部５は、判定した認識度を情報生成部６へ出力する。
【００１９】
情報生成部６は、周辺状況情報及び制御情報を自車状況取得部２から取得し、混乱度を混乱度判定部４から取得し、認識度を認識度判定部５から取得する。そして、情報生成部６は、情報生成テーブル７を参照し、周辺状況情報及び制御情報、混乱度、並びに認識度に基づき、乗員に提供する情報を生成する。情報生成部６による情報生成方法は後述する。
【００２０】
情報生成テーブル７は、例えば、制御内容に対し、混乱度と認識度に応じて乗員に提供する情報の情報量を規定したテーブルである。図２は、実施の形態１に係る情報提供装置１が有する情報生成テーブル７の一例を示す図である。図２の例では、制御内容「自動操舵」に対し、乗員の混乱度が高いほど、提供する情報量が増加する。また、制御内容「自動操舵」に対し、乗員の認識度が低いほど、提供する情報量が増加する。なお、混乱度の高低と認識度の高低との組み合わせに対する情報量の種類は、図２の例に限定されない。例えば、混乱度「低」に対して認識度「低」、「中」及び「高」の３種類の情報量、混乱度「中」に対して認識度「低」、「中」及び「高」の３種類の情報量、並びに、混乱度「高」に対して認識度「低」、「中」及び「高」の３種類の情報量の、合計９種類の情報量が、情報生成テーブル７によって規定されていてもよい。また、図２の例では、混乱度及び認識度が「低」、「中」及び「高」の３段階で表現されているが、この３段階に限定されるものではない。混乱度及び認識度は、例えば「１」から「１００」までの数値で表現されてもよく、この場合には乗員に提供する情報のより細かな制御が可能である。
【００２１】
また、図２では、乗員に提供する情報の情報量として、警告のみ、警告と制御内容、及び、警告と制御内容と制御要因の３種類を例示するが、情報量はこれに限定されない。警告、制御内容、及び制御要因の情報提供は、音若しくは音声、又は表示等によって行われる。図２では、制御内容が「自動操舵」の場合を例示するが、制御内容はこれに限定されず、「自動ブレーキ」及び「交差点右左折」等であってもよい。また、図２では、混乱度及び認識度の値によらず乗員に情報を提供するようになっているが、例えば混乱度「低」及び認識度「高」の場合には情報を提供しないようになっていてもよい。このように、情報生成部６は、混乱度が予め定められた値以上であり、かつ認識度が予め定められた値未満である場合に情報を提供し、混乱度が上記予め定められた値未満であり、かつ認識度が上記予め定められた値以上である場合に情報を提供しない構成であってもよい。
【００２２】
次に、実施の形態１に係る情報提供装置１の動作を説明する。
図３は、実施の形態１に係る情報提供装置１の動作例を示すフローチャートである。情報提供装置１は、例えば車両のエンジンが作動している期間、図３のフローチャートに示される動作を繰り返す。
【００２３】
図４Ａ、図４Ｂ、及び図４Ｃは、実施の形態１に係る情報提供装置１の情報提供例を示す図である。ここでは、図４Ａに示されるように、出力装置１２の一種である表示装置が車両のインスツルメントパネルに設置されている場合を例に挙げる。また、このインスツルメントパネルには、出力装置１２の一種であるスピーカ（図示せず）も設置されているものとする。
また、以下では、車両制御装置１０が、車両前方に障害物を検出し、当該障害物を回避するために自動操舵を作動させる場合を想定する。この場合、車両制御装置１０は、制御内容を「自動操舵」とした制御情報と、制御要因を「前方の障害物を検知」とした周辺状況情報とを自車状況取得部２へ出力する。
【００２４】
ステップＳＴ１において、自車状況取得部２は、上述の周辺状況情報及び制御情報を車両制御装置１０から取得し、乗員状態取得部３は、乗員状態情報を入力装置１１から取得する。
【００２５】
ステップＳＴ２において、乗員状態取得部３は、自車状況取得部２が取得した制御情報に基づき車両の自動的な制御が作動したか否かを検知する。乗員状態取得部３は、車両の自動的な制御が作動したことを検知した場合（ステップＳＴ２“ＹＥＳ”）、作動時を含む前後一定時間内の乗員状態情報を、混乱度判定部４及び認識度判定部５へ出力し、それ以外の場合（ステップＳＴ２“ＮＯ”）、処理はステップＳＴ１へ戻る。
【００２６】
ステップＳＴ３において、混乱度判定部４は、乗員状態取得部３から取得した乗員状態情報に基づき、作動時を含む前後一定時間内の乗員の混乱度を判定する。例えば、図４Ａのように、乗員の「どうしたの！？」というような驚いた音声の音量が７０ｄＢである場合、混乱度判定部４は、混乱度「高」と判定する。
【００２７】
ステップＳＴ４において、認識度判定部５は、乗員状態取得部３から取得した周辺状況情報、制御情報、及び乗員状態情報に基づき、作動時を含む前後一定時間内の、車両の周辺状況及び車両の自動的な制御に対する乗員の認識度を判定する。例えば、乗員が覚醒状態であり自車両の制御状態をある程度把握できたものの、窓の外に視線を向けておらず車外の状況を完全には認識できていなかった場合、認識度判定部５は、認識度「中」と判定する。
【００２８】
ステップＳＴ５において、情報生成部６は、情報生成テーブル７を参照し、車両の自動的な制御の内容とステップＳＴ３で判定された混乱度とステップＳＴ４で判定された認識度とに応じた情報を生成する。例えば、制御内容が「自動操舵」であり、混乱度が「高」であり、認識度が「中」であった場合、情報生成部６は、図２のような情報生成テーブル７に基づき、乗員に提供する情報の情報量を警告と制御内容と制御要因と決定する。そして、情報生成部６は、自動的な制御が作動したことを乗員に知らせるための「ピピピ」等の警告音、又は警告画面を生成する。また、情報生成部６は、制御内容である「自動操舵」を乗員に知らせるための音声又は表示画面の少なくとも一方を生成する。さらに、情報生成部６は、制御要因である「前方の障害物を検知」を乗員に知らせるための音声又は表示画面の少なくとも一方を生成する。
【００２９】
ステップＳＴ６において、情報生成部６は、ステップＳＴ５で生成した情報を、出力装置１２へ出力する。混乱度「高」かつ認識度「低」の場合、出力装置１２は、情報生成部６が生成した警告、制御内容及び制御要因の情報を、乗員に対して提供する。例えば、まず情報生成部６は、図４Ｂのように、出力装置１２の一種であるスピーカに「ピピピ」という警告音を出力させる。同時に、情報生成部６は、出力装置１２の一種である表示装置に、警告アイコンと「自動操舵」というテキストとを含む警告画面を表示させる。続いて情報生成部６は、図４Ｃのように、出力装置１２の一種であるスピーカに、制御内容である「自動操舵」と制御要因である「前方の障害物を検知」とを表す「前方に障害物を検知したため、自動操舵により回避します。」という音声を出力させる。同時に、情報生成部６は、出力装置１２の一種である表示装置に、制御内容である「自動操舵」と制御要因である「前方の障害物を検知」とを表す画面を表示させる。
【００３０】
なお、例えば、混乱度「低」かつ認識度「高」の場合、どうして自動操舵が作動したかを乗員は理解していると考えられる。そのため、情報生成部６は、自動操舵が作動したことを乗員に知らせるために、図４Ｂのような警告音又は警告表示の情報のみ生成すればよい。
【００３１】
また、図４Ａ、図４Ｂ及び図４Ｃでは、情報提供装置１がスピーカ及び表示装置を利用して乗員に警告したが、ハンドル又はシート等に内蔵されたアクチュエータを振動させることにより乗員に警告してもよい。
【００３２】
最後に、情報提供装置１のハードウェア構成を説明する。
図５は、実施の形態１に係る情報提供装置１のハードウェア構成例を示す図である。バス１００には、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１０１、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）１０２、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）１０３、ＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）１０４、車両制御装置１０、入力装置１１、及び出力装置１２が接続されている。情報提供装置１における自車状況取得部２、乗員状態取得部３、混乱度判定部４、認識度判定部５、及び情報生成部６の機能は、ＲＯＭ１０２又はＨＤＤ１０４に格納されるプログラムを実行するＣＰＵ１０１により実現される。ＣＰＵ１０１は、マルチコア等により複数処理を並行して実行することが可能であってもよい。ＲＡＭ１０３は、ＣＰＵ１０１がプログラム実行時に使用するメモリである。ＨＤＤ１０４は、外部記憶装置の一例であり、情報生成テーブル７を記憶している。なお、外部記憶装置は、ＨＤＤ１０４以外であってもよく、ＣＤ（Ｃｏｍｐａｃｔ  Ｄｉｓｃ）若しくはＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｃ）等のディスク、又は、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）メモリ若しくはＳＤカード等のフラッシュメモリを採用したストレージ等であってもよい。
【００３３】
自車状況取得部２、乗員状態取得部３、混乱度判定部４、認識度判定部５、及び情報生成部６の機能は、ソフトウェア、ファームウェア、又はソフトウェアとファームウェアとの組み合わせにより実現される。ソフトウェア又はファームウェアはプログラムとして記述され、ＲＯＭ１０２又はＨＤＤ１０４に格納される。ＣＰＵ１０１は、ＲＯＭ１０２又はＨＤＤ１０４に格納されたプログラムを読みだして実行することにより、各部の機能を実現する。即ち、情報提供装置１は、ＣＰＵ１０１により実行されるときに、図３のフローチャートで示されるステップが結果的に実行されることになるプログラムを格納するためのＲＯＭ１０２又はＨＤＤ１０４を備える。また、このプログラムは、自車状況取得部２、乗員状態取得部３、混乱度判定部４、認識度判定部５、及び情報生成部６の手順又は方法をコンピュータに実行させるものであるとも言える。
【００３４】
以上のように、実施の形態１に係る情報提供装置１は、自車状況取得部２、乗員状態取得部３、混乱度判定部４、認識度判定部５、及び情報生成部６を備える。自車状況取得部２は、車両の周辺状況を示す情報及び車両の自動的な制御に関する情報を取得する。乗員状態取得部３は、車両の乗員の状態を示す情報を取得する。混乱度判定部４は、乗員状態取得部３により取得された情報を用いて乗員の混乱度を判定する。認識度判定部５は、自車状況取得部２及び乗員状態取得部３により取得された情報を用いて車両の周辺状況及び自動的な制御に対する乗員の認識度を判定する。情報生成部６は、自車状況取得部２により取得された情報、混乱度判定部４により判定された混乱度、及び認識度判定部５により判定された認識度を用いて乗員に提供する情報を生成する。この構成により、情報提供装置１は、車両の自動的な制御に伴う乗員の混乱度並びにその前後の車両の周辺状況及び自動的な制御に対する乗員の認識度に基づき、提供する情報を変更できる。そのため、車両制御装置１０による自動運転又は運転支援の制御内容をよく知らず不安を感じている乗員に対しては、十分な情報を提供でき、安心感を与えることができる。また、車両制御装置１０による自動運転又は運転支援の制御内容を理解した乗員に対しては、不要な情報提供を低減でき、煩わしさを抑制することができる。したがって、情報提供装置１は、過不足のない情報提供を行うことができる。
【００３５】
また、実施の形態１の情報生成部６は、混乱度判定部４により判定された混乱度が高いほど、又は認識度判定部５により判定された認識度が低いほど、乗員に提供する情報量を増加させる。これにより、情報提供装置１は、車両制御装置１０による自動運転又は運転支援の制御内容に対する乗員の理解度に応じて提供する情報量を増減できるため、過不足のない情報提供を行うことができる。
【００３６】
なお、上記では、混乱度判定部４は、車両の自動的な制御の作動時を含む前後一定時間内の乗員状態情報に基づき乗員の混乱度を判定したが、乗員に対する過去の混乱度の判定履歴を用いて、現在の自動的な制御の作動時の混乱度を推定するようにしてもよい。例えば、今回の自動操舵が乗員にとって３度目の作動である場合に、過去２回の自動操舵の作動時の混乱度がともに「高」であった場合、混乱度判定部４は、今回の乗員状態に関わらず作動時の混乱度を「高」と推定する。このようにすれば、情報提供装置１は、実際に乗員が混乱するよりも早く即座に適切な情報提供ができるため、乗員の混乱が発生すること自体を防ぐことができる。
【００３７】
また、上記では、情報生成部６は、単純に認識度の高低に応じて提供する情報を生成したが、乗員が具体的にどこまで周囲状況及び自動的な制御を認識していたかに基づき、提供する情報を生成するようにしてもよい。例えば、車両制御装置１０が、車両前方に障害物を検出し、当該障害物を回避するために自動操舵を作動させる場合を想定する。この場合、認識度判定部５は、乗員の視線情報等を基に、乗員が車外に視線を向けて車両前方の障害物を視認しているか否かを判定する。認識度判定部５により乗員が車両前方の障害物を視認していると判定された場合、情報生成部６は、乗員が制御内容である「自動操舵」と制御要因である「前方の障害物を検知」とを認識できていると判断し、自動操舵についての情報を生成しない。一方、認識度判定部５により乗員が車両前方の障害物に気付いていないと判定された場合、情報生成部６は、乗員が制御内容である「自動操舵」と制御要因である「前方の障害物を検知」とを認識できていないと判断し、自動操舵についての情報を生成する。このように、認識度判定部５が、車両の周辺状況及び自動的な制御のうちの乗員が認識していた事柄を判定し、情報生成部６が、認識度判定部５により乗員が認識していたと判定された事柄以外の車両の周辺状況及び自動的な制御に関する情報を生成することにより、より過不足のない適切な情報提供が可能となる。
【００３８】
なお、情報生成部６は、自車状況取得部２により取得された周辺状況情報及び制御情報、混乱度判定部４により判定された混乱度、並びに認識度判定部５により取得された認識度を用いて乗員に提供する情報を生成し、かつ、乗員に提供した後、混乱度判定部４により新たに判定された混乱度が予め定められた値以上低下しない場合、乗員に提供する情報量を増加させるようにしてもよい。ここで、予め定められた値は、例えば、混乱度１段階分に相当するものとする。情報生成部６は、混乱度「中」及び認識度「高」に応じて提供する情報量を警告と制御内容とに決定し、出力装置１２を用いて情報を提供した後、混乱度が「中」から「低」に低下しなければ、混乱度が「中」であっても、警告と制御内容とに制御要因を追加して再び情報提供を行う。このようにすることで、情報提供装置１は、提供した情報量が不足している場面で情報量を増加させることができ、より過不足のない適切な情報提供が可能となる。
【００３９】
また、情報生成部６は、乗員の混乱度が他の乗員との会話に起因して高くなった場合、当該乗員に提供する情報を、混乱度が高くなる前の情報のまま変更しないようにしてもよい。この場合、乗員状態取得部３は、入力装置１１からの音声に基づき、複数の乗員が交互に発話している場合に、当該複数の乗員が会話をしていると判定する。または、乗員状態取得部３は、入力装置１１からのカメラ画像及び音声に基づき、複数の乗員が互いを見ながら発話している場合に、当該複数の乗員が会話をしていると判定してもよい。さらに、乗員状態取得部３は、乗員の音声に基づき、乗員が車両の周辺状況及び自動的な制御とは関係ない内容の発話をしているか否かを判定する。そして、情報生成部６は、情報提供対象の乗員の混乱度が高くなった場合、かつ、乗員状態取得部３により複数の乗員が車両の周辺状況及び自動的な制御とは関係ない内容の会話をしていると判定された場合、情報提供対象の乗員の混乱度が他の乗員との会話に起因して高くなったと判断して、当該乗員に提供する情報を変更しない。一方、情報生成部６は、情報提供対象の乗員の混乱度が高くなった場合、かつ、当該乗員が発話していないか乗員状態取得部３により複数の乗員が車両の周辺状況及び自動的な制御に関係する内容の会話をしていると判定された場合、情報提供対象の乗員の混乱度が車両の自動的な制御に起因して高くなったと判断して、当該乗員に提供する情報を混乱度及び認識度に応じて変更する。このようにすることで、情報提供装置１は、自動的な制御とは無関係な混乱に対して不要に情報を提供してしまうことを防ぐことができ、乗員に煩わしさを与えてしまうことを防ぐことができる。
【００４０】
また、上記では、情報を提供する対象が乗員一人であるものとして情報提供装置１を説明したが、車両に搭乗している複数の乗員すべてを対象とすることが可能である。その場合、例えば、情報提供装置１は、各乗員の混乱度と認識度とに基づき、提供する情報量が最も多い乗員を選択し、その乗員の混乱度と認識度とに応じて情報を生成し、車両に１つ設置されている出力装置１２を用いて当該情報を全乗員に提供する。または、情報提供装置１は、各乗員の混乱度と認識度とに応じて個別に情報を生成し、各座席に設置されている出力装置１２を用いて個別に情報を提供するようにしてもよい。
【００４１】
また、上記では、情報提供装置１、車両制御装置１０、入力装置１１、及び出力装置１２が車両に搭載された例を説明したが、この構成に限定されない。例えば、情報提供装置１が、車外のサーバ装置として構成され、このサーバ装置が車両に搭載された車両制御装置１０、入力装置１１、及び出力装置１２と無線通信を行うことにより情報提供を行ってもよい。また、情報提供装置１の自車状況取得部２、乗員状態取得部３、混乱度判定部４、認識度判定部５、情報生成部６、及び情報生成テーブル７が、サーバ装置とスマートフォン等の携帯端末と車載器とに分散されていてもよい。
【００４２】
また、上記では、情報提供装置１を四輪自動車に適用した場合を例に挙げて説明したが、二輪車、船舶、航空機、及びパーソナルモビリティ等の乗員が搭乗する移動体に適用してもよい。
【００４３】
なお、本発明はその発明の範囲内において、実施の形態の任意の構成要素の変形、又は実施の形態の任意の構成要素の省略が可能である。
【産業上の利用可能性】
【００４４】
この発明に係る情報提供装置は、乗員の状態を考慮して情報を提供するようにしたので、自動運転又は運転支援を行う車両等の情報提供装置に用いるのに適している。
【符号の説明】
【００４５】
１  情報提供装置、２  自車状況取得部、３  乗員状態取得部、４  混乱度判定部、５  認識度判定部、６  情報生成部、７  情報生成テーブル、１０  車両制御装置、１１  入力装置、１２  出力装置、１００  バス、１０１  ＣＰＵ、１０２  ＲＯＭ、１０３  ＲＡＭ、１０４  ＨＤＤ。
【図１】
2020079755.tif 000003
【図２】
2020079755.tif 000004
【図３】
2020079755.tif 000005
【図４】
2020079755.tif 000006
【図５】
2020079755.tif 000007
【国際調査報告】
2020079755.tif 000008
2020079755.tif 000009