(57)【要約】【課題】  情報の提供に伴って車両の乗員に与えられる煩わしさを軽減または解消しながら、乗員が興味を持ちうる情報を提供することができる情報提供装置を提供する。【解決手段】  情報提供装置１は、乗員が車両Ｘに乗車した時から所定期間内に乗員の感情を推定する感情推定部１０４と（ＳＴＥＰ１１４）、乗員の感情に基づいて、車両Ｘのベース感情を設定するベース感情設定部１０５と（ＳＴＥＰ１２０）、車両Ｘの状態を検出する車両状態検出部１１と（ＳＴＥＰ１２２）、ベース感情及び車両Ｘの状態に応じて、車両Ｘの感情を生成する感情生成部１０６と（ＳＴＥＰ１２６）、車両Ｘの感情に基づいて乗員に提供する情報を決定する情報決定部１０８と（ＳＴＥＰ１２８）、情報を乗員に対して出力する情報出力部１５，１７と（ＳＴＥＰ１３０）、を備える。【選択図】図６
2019139354.tif 000002
【特許請求の範囲】
【請求項１】
乗員が車両に乗車した時から所定期間内に乗員の感情を推定する感情推定部と、
前記感情推定部により前記推定された乗員の感情に基づいて、前記車両の感情のベースとなるベース感情を設定するベース感情設定部と、
前記車両の状態を検出する車両状態検出部と、
前記ベース感情及び前記車両状態検出部により検出された前記車両の状態に応じて、前記車両の感情を生成する感情生成部と、
前記車両の感情に基づいて前記乗員に提供する情報を決定する情報決定部と、
前記情報を前記乗員に対して出力する情報出力部と、を備えることを特徴とする情報提供装置。
【請求項２】
請求項１記載の情報提供装置において、
前記ベース感情設定部は、さらに、前回において推定された乗員の感情と、今回において推定された乗員の感情との差分に応じてベース感情を設定するように構成されていることを特徴とする情報提供装置。
【請求項３】
請求項１又は２記載の情報提供装置において、
さらに、前記乗員のスケジュール情報を取得するスケジュール情報取得部を備え、
前記ベース感情設定部は、さらに、乗員のスケジュール情報を加味して前記ベース感情を設定するように構成されていることを特徴とする情報提供装置。
【請求項４】
指定の情報を車両の乗員に対して出力する情報出力部と、前記車両の状態を検出する車両状態検出部と、を備える装置が実行する方法であって、
乗員が前記車両に乗車した時から所定期間内に乗員の感情を推定するステップと、
前記推定された乗員の感情に基づいて、前記車両の感情のベースとなるベース感情を設定するステップと、
前記ベース感情及び前記車両状態検出部により検出された前記車両の状態に応じて、前記車両の感情を生成するステップと、
前記車両の感情に基づいて前記乗員に提供する情報を決定するステップと、
前記決定された情報を前記情報出力部に出力させるステップと、を含むことを特徴とする情報提供方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報提供装置及び情報提供方法に関する。
【背景技術】
【０００２】
従来、車両の乗員に対して情報を提供する装置が知られている。
【０００３】
運転中の乗員に対して情報を提供する場合、運転に集中しているときには煩わしく感じたり、意識が運転に向いているために情報を認識できないような場合がある。このような課題を解決するために、例えば、特許文献１の技術は、運転者の運転負荷レベルに応じて、運転負荷が高い場合には情報を提示せずに保留し、運転負荷が低い場合に情報を提示することにより、運転者の注意を妨げることなく情報を提供することができる装置が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−２４１３０９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、運転負荷レベルに基づいて情報の提示を判断する特許文献１の技術においては、機嫌が悪い等の情報を受け取る乗員の感情によっては、提供される情報を運転者が煩わしく感じるおそれもある。また、一方的で一律的な情報提供は無味乾燥であると感じる乗員もいる可能性がある。情報提供装置から煩わしい情報又は無味乾燥な情報が提供され続けると、乗員が情報提供装置の使用を避ける可能性もある。
【０００６】
そこで、本発明は、情報の提供に伴って車両の乗員に与えられる煩わしさを軽減または解消しながら、乗員が興味を持ちうる情報を提供することができる情報提供装置及び情報提供方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の情報提供装置は、
乗員が車両に乗車した時から所定期間内に乗員の感情を推定する感情推定部と、
前記感情推定部により前記推定された乗員の感情に基づいて、前記車両の感情のベースとなるベース感情を設定するベース感情設定部と、
前記車両の状態を検出する車両状態検出部と、
前記ベース感情及び前記車両状態検出部により検出された前記車両の状態に応じて、前記車両の感情を生成する感情生成部と、
前記車両の感情に基づいて前記乗員に提供する情報を決定する情報決定部と、
前記情報を前記乗員に対して出力する情報出力部と、を備えることを特徴とする。
【０００８】
当該構成の情報提供装置によれば、感情推定部により、乗員が車両に乗車した時から所定期間内に乗員の感情が推定される。
【０００９】
そして、ベース感情設定部により、前記感情推定部により前記推定された乗員の感情に基づいて、前記車両の感情のベースとなるベース感情が設定される。
【００１０】
そして、感情生成部により、前記ベース感情及び車両状態検出部により検出された前記車両の状態に応じて、前記車両の感情が生成される。
【００１１】
そして、情報決定部により、前記車両の感情に基づいて前記乗員に提供する情報が決定される。
【００１２】
ベース感情は乗員が車両に乗車した時から所定期間内に推定された乗員の感情に基づいて設定された感情であるので、ベース感情に応じて生成された車両の感情は、乗員の乗車時から所定期間内の感情に応じた感情となる。
【００１３】
乗員の乗車時から所定期間内の感情は、例えば、休日の前でワクワクしているなど乗員の状況を示すことが多い。このような乗員の状況を示しうる乗員の乗車時から所定期間内の感情が加味されて車両の感情が生成され、当該車両の感情に応じて乗員に提供する情報が決定されることにより、乗員に車両が乗員の状況に共感していると感じさせることができ、乗員に当該提供される情報に興味を持たせうる。
【００１４】
また、車両走行中に推定された乗員の感情ではなく、感情生成部により、車両の状態に応じて感情が加味されて車両の感情が生成される。
【００１５】
車両走行中に推定された乗員の感情は、他の車両との関係、信号機の変化、道路状況など多くの要因によって左右されるため、乗員の性格によっては乗員の感情が激しく変化する可能性がある。これに対し、車両の状態は比較的変化が小さいので、車両の状態に応じて感情が加味されて車両の感情が生成されることにより、車両の状態を車両の感情に反映させながら、車両の感情の頻繁な変化を抑制することができる。
【００１６】
これにより、車両の感情の頻繁な変化に起因して車両の乗員に与えられる煩わしさを解消又は軽減することができる。
【００１７】
以上述べたところによれば、当該構成の情報提供装置によれば、情報の提供に伴って車両の乗員に与えられる煩わしさを軽減または解消しながら、乗員が興味を持ちうる情報を提供することができる。
【００１８】
本発明の情報提供装置において、
前記ベース感情設定部は、さらに、前回において推定された乗員の感情と、今回において推定された乗員の感情との差分に応じてベース感情を設定するように構成されていることが好ましい。
【００１９】
当該構成の情報提供装置によれば、前回において推定された乗員の感情と、今回において推定された乗員の感情との差分に応じてベース感情が設定される。これにより、前回と今回との間に乗員の感情変化があった場合に、当該感情変化が加味されてベース感情、ひいては車両の感情が生成される。この車両の感情に応じて提供される情報が決定されることにより、車両が乗員に共感していると乗員に感じさせることができる。
【００２０】
本発明の情報提供装置において、
さらに、前記乗員のスケジュール情報を取得するスケジュール情報取得部を備え、
前記ベース感情設定部は、さらに、乗員のスケジュール情報を加味して前記ベース感情を設定するように構成されていることが好ましい。
【００２１】
乗員のスケジュール情報は乗員の感情の変化の要因となりうるところ、当該スケジュール情報が加味されて車両のベース感情が設定され、ひいては車両の感情が生成される。当該車両の感情に応じて乗員に提供される情報が決定されることで、車両があたかも乗員に共感しているかのような印象を乗員に与えうる。
【図面の簡単な説明】
【００２２】
【図１】基本システムの構成説明図。
【図２】エージェント装置の構成説明図。
【図３】携帯端末装置の構成説明図。
【図４】エージェントの感情表現の構成を説明する図。
【図５】情報記憶部に記憶される各情報の例を示す図で、図５Ａは、対象ユーザの感情履歴の例を示す図、図５Ｂは、対象ユーザのスケジュール情報を示す図、図５Ｃは、各イベントと補助オフセットとの関係を示す図、図５Ｄは、車両の状態と補助オフセットとの関係を示す図、図５Ｅは、車両の仮想的な感情と出力されるコンテンツとの関係を示す図。
【図６】情報出力処理のフローチャート。
【図７】基本感情表現のマップの説明図。
【図８】付加パーツのマップの説明図。
【発明を実施するための形態】
【００２３】
（基本システムの構成）
図１に示されている基本システムは、対象車両Ｘ（移動体）に搭載されているエージェント装置１、乗員により対象車両Ｘの内部に持ち込み可能な携帯端末装置２（例えばスマートホン）およびサーバ３により構成されている。エージェント装置１、携帯端末装置２およびサーバ３は無線通信網（例えばインターネット）を通じて相互に無線通信する機能を備えている。エージェント装置１および携帯端末装置２は、同一の対象車両Ｘの空間内に共存するなど、物理的に近接している場合、近接無線方式（例えばＢｌｕｅｔｏｏｔｈ（登録商標））により相互に無線通信する機能を備えている。対象車両Ｘが、本発明の「
車両」に相当する。
【００２４】
（エージェント装置の構成）
エージェント装置１は、例えば図２に示されているように、制御部１００、センサ部１１（ＧＰＳセンサ１１１、車速センサ１１２、ジャイロセンサ１１３及び燃料センサ１１４を備えている。）、車両情報部１２、記憶部１３、無線部１４（近接無線通信部１４１および無線通信網通信部１４２を備えている。）、表示部１５、操作入力部１６、オーディオ部１７（音声出力部）、ナビゲーション部１８、撮像部１９１（車内カメラ）および音声入力部１９２（マイク）を備えている。エージェント装置１が、本発明の「情報提供装置」の一例に相当する。表示部１５及びオーディオ部１７のそれぞれが、本発明の「情報出力部」の一例に相当する。操作入力部１６及び音声入力部１９２のそれぞれが、本発明の「入力部」の一例に相当する。センサ部１１が、本発明の「車両状態検出部」に相当する。制御部１００が、後述する演算を実行することにより、ユーザ検出部１０１、日時情報認識部１０２、ユーザ状態認識部１０３、感情推定部１０４、ベース感情設定部１０５、感情生成部１０６及びスケジュール情報取得部１０７として機能する。なお、情報提供装置のすべての構成要素がエージェント装置１に含まれる必要はなく、エージェント装置１が通信を介して外部のサーバ等に必要な機能を実行させることにより、情報提供装置の構成要素として機能させてもよい。
【００２５】
センサ部１１のＧＰＳセンサ１１１はＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ
Ｓｙｓｔｅｍ）衛星からの信号を基に現在位置を算出する。車速センサ１１２は回転軸からのパルス信号を基に対象車両Ｘの速度を算出する。ジャイロセンサ１１３は角速度を検出する。燃料センサ１１４は、対象車両Ｘの燃料タンクからの信号をもとに、対象車両Ｘの燃料残量を算出する。これらＧＰＳセンサ、車速センサ、ジャイロセンサにより、対象車両Ｘの現在位置や向きを正確に算出することが可能となっている。また、ＧＰＳセンサ１１１は、ＧＰＳ衛星から現在日時を示す情報を取得してもよい。
【００２６】
車両情報部１２は、ＣＡＮ−ＢＵＳなどの車内ネットワークを通じて車両情報を取得する。車両情報には、例えばイグニッションＳＷのＯＮ／ＯＦＦ、安全装置系の動作状況（ＡＤＡＳ、ＡＢＳおよびエアバッグなど）の情報が含まれている。操作入力部１６は、スイッチ押下等の操作のほか、乗員の感情推定に利用可能なステアリング、アクセルペダルまたはブレーキペダルの操作量、窓およびエアコンの操作（温度設定など）などの入力を検知する。
【００２７】
記憶部１３は、エージェント画像１３１と、データ記憶部１３２とを備える。
【００２８】
エージェント画像１３１は、車両Ｘの仮想的なキャラクターの顔の画像として、人の顔を模した画像である。エージェント画像１３１は、図４に示されるように、基本表情画像４１と、付加パーツ４２とを含む。基本表情画像４１と付加パーツ４２とを組み合わせることにより、応用表情画像４３が構成される。エージェント画像１３１は、例えばサーバ３からダウンロードされた画像である。
【００２９】
情報記憶部１３２は、種々の情報を記憶しており、例えば、図５Ａに示されるユーザの感情履歴情報、図５Ｂに示されるユーザのスケジュール情報、図５Ｃに示されるイベントと補助オフセットとの関係を示す情報、図５Ｄに示される車両の状態と補助オフセットとの関係を示す情報、図５Ｅに示される車両の感情とコンテンツの関係を示す情報を記憶している。情報記憶部１３２は、この他に、処理に付随して認識された種々の情報を記憶する。図５Ａに示されるユーザの感情履歴情報は、例えば、後述する情報出力処理（図６）のＳＴＥＰ２４０において取得されうる。図５Ｂに示されるユーザのスケジュール情報は、例えば、ユーザが所持している携帯端末等と通信することにより認識されうる。
【００３０】
基本表情画像４１は、例えば、図４に示されるように、好き、平穏、嫌い及び耐えるという感情に対応する夫々の画像である。付加パーツ４２は、基本表情画像４１のそれぞれに対応する愛しい、楽しい、機嫌がいい、安心、悲しい、怒り、苦しい及び辛いに関するパーツである。
【００３１】
例えば、好きの基本表情画像４１１と、好きに対応する愛しいの付加パーツ４２１とが組み合わされることにより、愛しいの応用表現画像４３１が構成される。
【００３２】
無線部１４の近接無線通信部１４１は、例えばＷｉ−Ｆｉ：  Ｗｉｒｅｌｅｓｓ  Ｆｉｄｅｌｉｔｙ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の通信部であり、無線通信網通信部１４２は、３Ｇやセルラー、ＬＴＥ通信等のいわゆる携帯電話網に代表される無線通信網に接続される通信部である。
【００３３】
（携帯端末装置の構成）
携帯端末装置２は、例えば図３に示されているように、制御部２００、センサ部２１（ＧＰＳセンサ２１１およびジャイロセンサ２１３を備えている。）、記憶部２３（データ記憶部２３１およびアプリケーション記憶部２３２を備えている。）、無線部２４（近接無線通信部２４１および無線通信網通信部２４２を備えている。）、表示部２５、操作入力部２６、音声出力部２７、撮像部２９１（カメラ）および音声入力部２９２（マイク）を備えている。携帯端末装置２が、本発明の「情報提供装置」として機能してもよい。この場合、表示部２５及び音声出力部２７のそれぞれが、本発明の「情報出力部」の一例に相当する。制御部２００が、ユーザ検出部２０１、日時情報認識部２０２、ユーザ状態認識部２０３、感情推定部２０４、ベース感情設定部２０５、感情生成部２０６及びスケジュール情報取得部２０７として機能する。
【００３４】
携帯端末装置２は、エージェント装置１と共通する構成要素を備えている。携帯端末装置２は、車両情報を取得する構成要素（例えば、図２の燃料センサ１１４参照）を備えていないが、例えば近接無線通信部２４１を通じてエージェント装置１又は対象車両Ｘに備えられた「車両状態検出部」から車両情報を取得することが可能である。また、アプリケーション記憶部２３２に記憶されているアプリケーション（ソフトウェア）にしたがって、エージェント装置１のオーディオ部１７およびナビゲーション部１８のそれぞれと同様の機能を携帯端末装置２が備えていてもよい。
【００３５】
（サーバの構成）
サーバ３は、一又は複数のコンピュータにより構成されている。サーバ３は、それぞれのエージェント装置１または携帯端末装置２から、データ及びリクエストを受信し、データをデータベース等の記憶部に記憶し、リクエストに応じた処理を実行し、処理結果をエージェント装置１または携帯端末装置２に送信するように構成されている。
【００３６】
サーバ３を構成するコンピュータの一部又は全部が、移動局、例えば、一又は複数のエージェント装置１または携帯端末装置２の構成要素により構成されていてもよい。
【００３７】
本発明の構成要素が担当演算処理を実行するように「構成されている」とは、当該構成要素を構成するＣＰＵ等の演算処理装置が、ＲＯＭ、ＲＡＭ等のメモリ又は記録媒体から必要な情報に加えてソフトウェアを読み出し、当該情報に対して当該ソフトウェアにしたがって演算処理を実行するように「プログラムされている」又は「デザイン（設計）されている」ことを意味する。各構成要素が共通のプロセッサ（演算処理装置）により構成されてもよく、各構成要素が相互通信可能な複数のプロセッサにより構成されてもよい。
【００３８】
（情報出力処理）
次に、図５〜図８を参照して、情報出力処理を説明する。
【００３９】
エージェント装置１の制御部１００（ユーザ検出部１０１）は、撮像部１９１及び音声入力部１９２の一方または両方を介して、撮像画像データ及び音声データの一方または両方を認識し、データ記憶部１３２に記憶する（図６／ＳＴＥＰ１０２）。
【００４０】
エージェント装置１の制御部１００（ユーザ検出部１０１）は、図６／ＳＴＥＰ１０２で取得された撮像画像データ及び音声データの一方または両方を画像解析又は音声解析して乗員（以下、対象ユーザと適宜いう。）を検出したか否かを判定する（図６／ＳＴＥＰ１０４）。ここでの画像解析又は音声解析には公知の技術を適用できる。
【００４１】
当該判定結果が否定的である場合（図６／ＳＴＥＰ１０４‥ＮＯ）、エージェント装置１の制御部１００は、図６／ＳＴＥＰ１０２の処理を実行する。
【００４２】
当該判定結果が肯定的である場合（図６／ＳＴＥＰ１０４‥ＹＥＳ）、エージェント装置１の制御部１００（日時情報認識部１０２）は、ＧＰＳセンサ１１１から処理時点の日時情報を認識し、データ記憶部１３２に記憶する（図６／ＳＴＥＰ１０６）。当該日時情報には、日付情報、時間情報及び曜日情報が含まれる。
【００４３】
エージェント装置１の制御部１００（スケジュール情報取得部１０７）は、図６／ＳＴＥＰ１０６で取得された日時情報に対応する対象ユーザのスケジュールを認識し、データ記憶部１３２に記憶する（図６／ＳＴＥＰ１０８）。例えば、エージェント装置１の制御部１００は、図６／ＳＴＥＰ１０６で取得された日時情報が2018/2/2 10:00~19:00に含まれるものであれば、対象ユーザが予定しているイベント「○○会」を認識する。
【００４４】
エージェント装置１の制御部１００（ベース感情設定部１０５）は、図６／ＳＴＥＰ１０６で取得された日時情報に応じた補助オフセットを認識し、データ記憶部１３２に記憶する（図６／ＳＴＥＰ１０８）。補助オフセットは、後述する図６／ＳＴＥＰ１２０のベース感情設定で用いられるパラメータセットであり、ベース感情を示すパラメータセットと同じ次元のパラメータセットであることが好ましい。例えば、補助オフセットは、図７に示される定常状態を示す第１値および穏やかさを示す第２値により表される。
【００４５】
エージェント装置１の制御部１００は、例えば、図６／ＳＴＥＰ１０６で認識された日時情報に含まれる曜日情報「金曜日」に対応した補助オフセット（１，２）を認識してもよい。エージェント装置１の制御部１００は、例えば、図６／ＳＴＥＰ１０８で認識されたイベント「○○会」に対応した補助オフセット（２，２）を認識してもよい。エージェント装置１の制御部１００は、ユーザが予定しているイベントが近くなるほど、後述するベース感情が肯定的な感情（好き、平穏等）となりやすくなるような補助オフセットを認識してもよい。
【００４６】
エージェント装置１の制御部１００（ユーザ状態認識部１０３）は、対象ユーザの状態を認識する（図５／ＳＴＥＰ１１２）。また、制御部１００は、対象ユーザの状態の一方または両方の時系列データを情報記憶部１３２に記憶する。
【００４７】
エージェント装置１の制御部１００は、例えば、操作入力部１６により検知された操作、撮像部１９１により撮像された画像、音声入力部１９２により検知された音声及び不図示の対象車両Ｘのユーザである対象ユーザが装着しているウェアラブルセンサから取得された対象ユーザの生体情報のうちの少なくとも１つに基づいて、対象ユーザの状態を認識する。
【００４８】
例えば、制御部１００は、操作入力部１６により検知された操作に基づいて、対象ユーザの状態としての、「今の気分は？」等のアンケートに対する回答を認識する。
【００４９】
また、例えば、制御部１００は、撮像部１９１により撮像された画像に基づいて、対象ユーザの状態としての、対象ユーザの表情及び挙動を認識する。
【００５０】
また、例えば、制御部１００は、音声入力部１９２により検知された音声に基づいて、対象ユーザの状態としての、対象ユーザの発言内容及び発言する際の声の高さを認識する。
【００５１】
また、例えば、制御部１００は、対象ユーザが装着したウェアラブルデバイスから受信した生体情報（筋電、脈拍、血圧、血中酸素濃度、体温等）を認識する。
【００５２】
制御部１００（感情推定部１０４）は、図５／ＳＴＥＰ１１２で認識された対象ユーザの状態に基づいて、対象ユーザの今回の感情を推定する（図５／ＳＴＥＰ１１４）。
【００５３】
例えば、制御部１００は、あらかじめ定められた規則に従って、対象ユーザの状態に基づいて、対象ユーザの感情を推定してもよい。
【００５４】
対象のユーザの感情は、複数のパラメータのセットにより表される。対象のユーザの感情は、後述する図６／ＳＴＥＰ１２０のベース感情設定で用いられるパラメータセットであり、ベース感情を示すパラメータセットと同じ次元のパラメータセットであることが好ましい。
【００５５】
例えば、対象のユーザの感情は、図７に示される定常状態を示す第１値および穏やかさを示す第２値により表される。
【００５６】
制御部１００は、例えば、アンケートに対する回答に基づいて、対象ユーザの感情を推定してもよい。たとえば、アンケートに対する回答が「いつも通り」であった場合には、制御部１００は、対象ユーザの定常状態を示す第１値として比較的高い値（例えば３）を認識してもよい。アンケートに対する回答が「いつもと異なる」であった場合には、制御部１００は、対象ユーザの定常状態を示す第２値として比較的低い値（例えば−３）を認識してもよい。
【００５７】
また、対象車両Ｘの速度が所定の速度以上である状態が所定の時間以上続いている場合、制御部１００は、対象のユーザの穏やかさを示す第２値として比較的高い値（例えば３）を認識してもよい。また、対象車両Ｘの速度が所定の速度未満である状態が所定の時間以上続いていたり、対象車両Ｘの速度が短期間で頻繁に増減しているような場合には、制御部１００は、対象ユーザの穏やかさを示す第２値として比較的低い値（例えば−３）を認識してもよい。
【００５８】
また、制御部１００は、これらの状態が長く続いているほど、より高く又はより低くなるように第２値を認識してもよい。
【００５９】
また、制御部１００は、対象ユーザの表情に基づいて、対象ユーザの感情を推定してもよい。たとえば、制御部１００は、画像解析を行って対象ユーザが笑っているような表情をしていると判断した場合、穏やかさを示す第２値として比較的高い値（たとえば５）を認識してもよい。また、たとえば、制御部１００は、画像解析を行って対象ユーザがむっとした表情をしていると判断した場合、制御部１００は、穏やかさを示す第２値として比較的低い値（たとえば−５）を認識してもよい。これに加えて又は代えて、制御部１００は、対象ユーザの視線または顔の向きを加味して対象ユーザの感情を推定してもよい。
【００６０】
また、制御部１００は、対象ユーザの挙動に基づいて、対象ユーザの感情を推定してもよい。たとえば、制御部１００は、画像解析を行って対象ユーザの動きがほとんどないと判断した場合、制御部１００は、対象ユーザの定常状態を示す第１値として比較的高い値（たとえば３）を認識してもよい。また、たとえば、制御部１００は、画像解析をおこなって対象ユーザが落ち着きなく動いていると判断した場合、制御部１００は、対象ユーザの定常状態を示す第１値として比較的低い値（たとえば−３）を認識してもよい。
【００６１】
また、制御部１００は、対象ユーザの発言内容に基づいて、対象ユーザの感情を推定してもよい。たとえば、制御部１００は、音声解析を行って対象ユーザの発言内容が何かをほめたり、期待したりしている等肯定的な内容であると判断した場合には、穏やかさを示す第２値として比較的高い値（たとえば５）を認識してもよい。たとえば、制御部１００は、音声解析を行って対象ユーザの発言内容が何かを非難したりする等否定的な内容であると判断した場合には、穏やかさを示す第２値として比較的低い値（たとえば−５）を認識してもよい。また、制御部１００は、対象ユーザの発言内容に特定のキーワードが含まれる場合（「いいね」「超いいね」等）に、当該キーワードに関連付けられた感情の種別と、感情の強度とを対象ユーザの感情として推定してもよい。
【００６２】
また、制御部１００は、対象ユーザの発言する際の声の高さに基づいて、対象ユーザの感情を推定してもよい。たとえば、制御部１００は、対象ユーザの発言する際の声の高さが所定の高さ以上である場合、対象ユーザの定常状態を示す第１値として比較的低い値（たとえば−３）を認識してもよい。制御部１００は、対象ユーザの発言する際の声の高さが所定の高さ未満である場合、対象ユーザの定常状態を示す第１値として比較的高い値（たとえば３）を認識してもよい。
【００６３】
また、制御部１００は、対象ユーザが装着したウェアラブルデバイスからの生体情報（筋電、脈拍、血圧、血中酸素濃度、体温等）を用いて対象ユーザの定常状態を示す第１値及び対象ユーザの穏やかさを示す第２値を認識してもよい。
【００６４】
また、例えば、制御部１００は、機械学習によって生成された対象車両Ｘの走行状態及び対象ユーザの状態から対象ユーザの感情を出力する感情エンジンを用いて、対象車両Ｘの走行状態及び対象ユーザの状態に基づいて、対象ユーザの定常状態を示す第１値及び対象ユーザの穏やかさを示す第２値を認識してもよい。
【００６５】
また、例えば、制御部１００は、あらかじめ定められたテーブルを参照して、対象車両Ｘの走行状態及び対象ユーザの状態に基づいて、対象ユーザの定常状態を示す第１値及び対象ユーザの穏やかさを示す第２値を認識してもよい。
【００６６】
制御部１００は、これらを組み合わせて対象ユーザの定常状態を示す第１値及び対象ユーザの穏やかさを示す第２値を認識してもよい。
【００６７】
以下においては、制御部１００は、図６／ＳＴＥＰ１１４において、対象ユーザの今回の感情を示すパラメータセットＰ１として、対象ユーザの定常状態を示す第１値「２」及び対象ユーザの穏やかさを示す第２値「１」を認識したとして説明する。
【００６８】
制御部１００（感情推定部１０４）は、情報記憶部１３２に記憶された対象ユーザの感情履歴情報を参照することにより、対象ユーザの前回推定された感情を認識する（図６／ＳＴＥＰ１１６）。例えば、制御部１００は、図５Ａに示される2018/2/2 7:00の対象ユーザの定常状態を示す第１値「−１」及び対象ユーザの穏やかさを示す第２値「−２」を今回の対象ユーザの感情を示すパラメータセットＰ０として認識する。
【００６９】
制御部１００（ベース感情設定部１０５）は、図６／ＳＴＥＰ１１４で認識された対象ユーザの感情に応じたオフセットを認識する（図６／ＳＴＥＰ１１８）。例えば、制御部１００は、図７に示されるように、図６／ＳＴＥＰ１１６において認識された対象ユーザの前回の感情を示すパラメータセットＰ２から図６／ＳＴＥＰ１１４において認識された対象ユーザの今回の感情を示すパラメータセットＰ１までのベクトルＶ１を当該オフセットとして認識してもよい。制御部１００は、このベクトルに所定の係数をかけて得られたベクトルをオフセットとして認識してもよい。
【００７０】
制御部１００（ベース感情設定部１０５）は、図６／ＳＴＥＰ１１８で認識されたオフセットに基づいて、車両の仮想的な感情のベースであるベース感情を設定する（図６／ＳＴＥＰ１２０）。例えば、制御部１００は、原点を基準として、図６／ＳＴＥＰ１１８で認識されたオフセットであるベクトルＶ１で示されるパラメータセットＢ１をベース感情を示すパラメータセットとして設定してもよい。また、制御部１００は、パラメータセットＢ１を基準として、図６／ＳＴＥＰ１１０で認識された補助オフセットを加味して決定されるパラメータセットＢ２をベース感情を示すパラメータセットとして認識してもよい。
【００７１】
制御部１００は、センサ部１１により取得された情報に基づいて、対象車両Ｘの状態を認識する（図６／ＳＴＥＰ１２２）。また、制御部１００は、認識した対象車両Ｘの状態の時系列データを情報記憶部１３２に記憶する。
【００７２】
例えば、制御部１００（感情生成部）は、センサ部１１により取得された情報に基づいて、対象車両Ｘの動作状態としての、時系列的な位置、対象車両Ｘの走行速度、対象車両Ｘの向きを認識する。制御部１００は、センサ部１１により取得された情報に基づいて、対象車両Ｘの燃料残量を認識する。
【００７３】
制御部１００（感情生成部）は、情報記憶部１３２に記憶された情報を参照して、図６／ＳＴＥＰ１２２で認識された対象車両Ｘの状態に対応する補助オフセットを認識する（図６／ＳＴＥＰ１２４）。制御部１００は、図５Ｄに示される情報記憶部１３２に記憶された対象車両Ｘの状態と補助オフセットとの関係に基づいて、対象車両Ｘの状態に対応する補助オフセットを認識する。例えば、制御部１００は、燃料残量が所定以下となった場合には、対象車両Ｘの感情が否定的な感情（例えば嫌い、耐える）になりやすい補助オフセットを認識する。例えば、制御部１００は、一定時間以上、対象車両Ｘの走行速度が所定速度以上の場合には、対象車両Ｘの感情が肯定的な感情（例えば好き、平穏）になりやすい補助オフセットを認識する。
【００７４】
制御部１００（感情生成部１０６）は、図６／ＳＴＥＰ１２０で設定されたベース感情及び図６／ＳＴＥＰ１２４で認識された補助オフセットに基づいて対象車両Ｘの仮想的な感情を決定する（図５／ＳＴＥＰ１２６）。制御部１００は、図６／ＳＴＥＰ１２０で設定されたベース感情のパラメータセットで表される位置を基準として、図６／ＳＴＥＰ１２４で認識された補助オフセット分だけ移動させることにより、対象車両Ｘの仮想的な感情を決定する。そして、制御部１００は、対象車両Ｘの感情を元に図７または図８に示される感情マップに基づいて、対象車両Ｘの仮想的な感情を決定し、当該感情に対応する表現を決定する。
【００７５】
なお、図７および図８の感情マップは、定常状態の第１軸と、穏やかさの第２軸であらわされている。
【００７６】
例えば、エージェント感情指標値が図７の第１象限に含まれる場合、制御部１００は、対象車両Ｘの仮想的な感情を「好き」と決定し、エージェントの感情表現の基本表現として、好きの基本表情画像４１１を選択する。制御部１００は、画像に代えてまたは加えて、エージェントの感情表現の基本表現として、内容又は発声態様がエージェントの感情に対応するような音声メッセージ又は音楽を選択してもよい。
【００７７】
また、例えば、エージェント感情指標値が第１軸の値が第１閾値Ｔ１以上かつ及び第２軸の値が第２閾値Ｔ２以上である場合、制御部１００は、図８に示されるようなマップを用いて、対象車両Ｘの仮想的な感情を「愛しい」と決定し、エージェントの感情表現の応用表現として、「愛しい」の付加パーツ４２１を選択する。また、例えば、エージェント感情指標値が第１軸の値が第１閾値Ｔ１以上かつ及び第２軸の値がゼロ以上第２閾値Ｔ２未満である場合、制御部１００は、対象車両Ｘの仮想的な感情を「楽しい」と決定し、エージェントの感情表現の応用表現として、「楽しい」の付加パーツ４２２を選択する。また、例えば、エージェント感情指標値が第１軸の値が０以上第１閾値Ｔ１未満である場合、制御部１００は、エージェントの感情表現の応用表現としての付加パーツを選択しない。また、制御部１００は、第１軸又は第２軸とは異なる評価軸を基にして、付加パーツを選択してもよい。
【００７８】
制御部１００は、さらに、図６／ＳＴＥＰ１１４と同様にして対象ユーザの感情を推定して、対象ユーザの感情に近くなるように、対象車両Ｘの仮想的な感情を決定してもよい。
【００７９】
制御部１００（情報決定部１０８）は、対象車両Ｘの仮想的な感情に応じて、出力するコンテンツ及び出力態様を選択する（図６／ＳＴＥＰ１２８）。出力するコンテンツは、ユーザの嗜好に関する質問、その他の質問、ニュース、豆知識、ユーザが走行している地域の紹介、有名な地点の紹介、音楽等のコンテンツ及びその説明等、様々な内容であってもよい。出力態様は、対象車両Ｘの感情を反映したものであることが好ましく、例えば、対象車両Ｘの感情が好き（図７の第１象限）であれば、出力される音声のトーンが高いものであることが好ましい。
【００８０】
制御部１００は、例えば、情報記憶部１３２に記憶された図５に示される対象車両Ｘとコンテンツとの関係から、出力すべきコンテンツを認識してもよい。制御部１００は、例えば、サーバ３に対象車両Ｘの仮想的な感情を示すパラメータセットを送信し、出力すべきコンテンツ及び出力態様を受信してもよい。
【００８１】
制御部１００は、選択された出力する情報の内容及び出力態様に従って、表示部１５及びオーディオ部１７の一方または両方に情報に出力させる（図６／ＳＴＥＰ１３０）。
【００８２】
制御部１００（ユーザ状態認識部１０３）は、図６／ＳＴＥＰ１１２と同様にして対象ユーザの状態を認識する（図６／ＳＴＥＰ１３２）。
【００８３】
制御部１００（感情推定部１０４）は、図６／ＳＴＥＰ１１４と同様にして対象ユーザの感情を推定する（図６／ＳＴＥＰ１３４）。
【００８４】
制御部１００（ユーザ検出部１０１）は、図６／ＳＴＥＰ１０２と同様にして撮像画像データ及び音声データを取得する（図６／ＳＴＥＰ１３６）。
【００８５】
制御部１００（ユーザ検出部１０１）は、図６／ＳＴＥＰ１３６で取得されたデータに基づいて図６／ＳＴＥＰ１０４と同様にして乗員が検出されたか否かを判定する（図６／ＳＴＥＰ１３８）。
【００８６】
当該判定結果が肯定的である場合（図６／ＳＴＥＰ１３８‥ＹＥＳ）、制御部１００は、図６／ＳＴＥＰ１２２以下の処理を実行する。
【００８７】
当該判定結果が肯定的である場合（図６／ＳＴＥＰ１３８‥ＮＯ）、制御部１００（感情推定部１０４）は、図６／ＳＴＥＰ１３４で推定されたユーザの感情を示すパラメータセットを情報記憶部１３２に記憶し、情報出力処理を終了する。
【００８８】
（本実施形態の作用効果）
当該構成のエージェント装置１（本発明の「情報提供装置」に相当する。）によれば、制御部１００（本発明の「感情推定部」として機能する。）により、対象ユーザが対象車両Ｘに乗車した後に対象ユーザの感情が推定される（図６／ＳＴＥＰ１１４）。
【００８９】
そして、制御部１００（本発明の「ベース感情設定部」として機能する。）により、前記感情推定部１０４（制御部１００）により前記推定された対象ユーザの感情に基づいて、対象車両Ｘの仮想的な感情のベースとなるベース感情が設定される（図６／ＳＴＥＰ１２０）。
【００９０】
そして、制御部１００（感情生成部１０６）により、前記ベース感情及びセンサ部１１（本発明の「車両状態検出部」に相当する。）により検出された対象車両Ｘの状態に応じて、対象車両Ｘの感情が生成される（図６／ＳＴＥＰ１２６）。
【００９１】
そして、制御部１００（本発明の「情報決定部」として機能する。）により、対象車両Ｘの感情に基づいて対象ユーザに提供する情報が決定される（図６／ＳＴＥＰ１２８）。
【００９２】
ベース感情は対象ユーザが対象車両Ｘに乗車した後に推定された対象ユーザの感情に基づいて設定された感情であるので、ベース感情に応じて生成された対象車両Ｘの感情は、対象ユーザの乗車時の感情に応じた感情となる。
【００９３】
対象ユーザの乗車時の感情は、例えば、休日の前でワクワクしているなど対象ユーザの状況を示すことが多い。このような対象ユーザの状況を示しうる対象ユーザの乗車時の感情が加味されて対象車両Ｘの仮想的な感情が生成され、当該対象車両Ｘの仮想的な感情に応じて対象ユーザに提供する情報が決定されることにより、対象ユーザに対象車両Ｘが対象ユーザの状況に共感していると感じさせることができ、提供される情報に対して対象ユーザに興味を持たせうる。
【００９４】
また、制御部１００（本発明の「感情生成部」として機能する。）により、対象車両Ｘの走行中に推定された「乗員の感情」ではなく、「対象車両Ｘの状態」に応じて感情が加味されて対象車両Ｘの感情が生成される（図６／ＳＴＥＰ１２２、図６／ＳＴＥＰ１２６）。
【００９５】
対象車両Ｘの走行中に推定された対象ユーザの感情は、他の車両との関係、信号機の変化、道路状況など多くの要因によって左右されるため、対象ユーザの性格によっては乗員の感情が激しく変化する可能性がある。これに対し、対象車両Ｘの状態は比較的変化が小さいので、対象車両Ｘの状態が加味されて対象車両Ｘの仮想的な感情が生成されることにより、対象車両Ｘの状態を対象車両Ｘの感情に反映させながら、対象車両Ｘの仮想的な感情の頻繁な変化を抑制することができる。
【００９６】
これにより、対象車両Ｘの仮想的な感情の頻繁な変化に起因して対象ユーザに与えられる煩わしさを解消又は軽減することができる。
【００９７】
以上述べたところによれば、当該構成のエージェント装置１によれば、情報の提供に伴って対象ユーザに与えられる煩わしさを軽減または解消しながら、対象ユーザが興味を持ちうる情報を提供することができる。
【００９８】
また、当該構成のエージェント装置１によれば、前回において推定された対象ユーザの感情と、今回において推定された対象ユーザの感情との差分に応じてベース感情が設定される（図６／ＳＴＥＰ１１４〜図６／ＳＴＥＰ１２０）。これにより、前回と今回との間に対象ユーザの感情変化があった場合に、当該感情変化が加味されてベース感情、ひいては対象車両Ｘの仮想的な感情が生成される。この対象車両Ｘの仮想的な感情に応じて提供される情報が決定されることにより、対象車両Ｘが対象ユーザの感情の変化に共感して出力される情報が選択されると対象ユーザに感じさせることができる。
【００９９】
対象ユーザのスケジュール情報は対象ユーザの感情の変化の要因となりうるところ、当該スケジュール情報が加味されて対象車両Ｘのベース感情が設定され（図６／ＳＴＥＰ１０６〜ＳＴＥＰ１１０、ＳＴＥＰ１２０）、ひいては対象車両Ｘの感情が生成される（図６／ＳＴＥＰ１２６）。このように、対象ユーザのスケジュール情報が加味されて対象車両Ｘの仮想的な感情が生成され、当該感情に応じて対象ユーザに提供される情報が決定されることで、対象車両Ｘがあたかも対象ユーザの状況に共感しているかのような印象を対象ユーザに与えうる。
【０１００】
（変形態様）
本実施形態では、対象ユーザが検出された後（図６／ＳＴＥＰ１０４‥ＹＥＳ）に順次処理を行う段階で制御部１００が、対象ユーザの感情を推定し、当該対象ユーザの感情を加味してベース感情を設定した（図６／ＳＴＥＰ１０６〜ＳＴＥＰ１２０）。
【０１０１】
これに代えてまたは加えて、対象ユーザが検出された後（図６／ＳＴＥＰ１０４‥ＹＥＳ）、制御部１００が、所定の期間が経過するまで対象ユーザの感情を繰り返し推定し、当該所定の期間が経過した後に、推定された感情を加味してベース感情を設定してもよい。
【０１０２】
ここで、所定の期間とは、実験的に求められた、対象ユーザの乗車直後の感情を高精度に推定するために十分な時間（たとえば  １０分）であってもよいし、例えば、対象車両Ｘの状態が所定の状態（対象車両Ｘの速度が所定速度以上又は対象車両Ｘに対する操舵量が所定量以上）となる前までの期間であってもよい。
【０１０３】
また、本実施形態では、乗員（対象ユーザ）が１人であることを前提として説明したが、制御部１００は、複数の乗員に対して同様の処理を行ってもよい。
【０１０４】
以下に、複数の乗員に対する処理の一例を示す。
【０１０５】
ユーザ状態認識部は、複数の乗員のそれぞれの状態を認識する。
【０１０６】
感情推定部は、複数の乗員のそれぞれの状態に鑑みて、複数の乗員のそれぞれの感情を推定する。
【０１０７】
ベース感情設定部は、複数の乗員のそれぞれの感情から複数の乗員の共通の仮想的な感情を仮決定する。例えば、ベース感情設定部は、複数の乗員のそれぞれの感情を示すパラメータセットを、複数の乗員間での平均値を取得することにより、複数の乗員に共通の仮想的な感情を示すパラメータセットを仮決定する。
【０１０８】
ベース感情設定部は、当該仮決定された複数の乗員の共通の仮想的な感情に基づいて、対象車両Ｘの仮想的な感情を決定する。
【符号の説明】
【０１０９】
１‥エージェント装置、２‥携帯端末装置、３‥サーバ、１００‥制御部、１１‥センサ部、１１１‥ＧＰＳセンサ、１１２‥車速センサ、１１３‥ジャイロセンサ、１３‥記憶部、１４‥無線部、１４１‥近接無線通信部、１４２‥無線通信網通信部、１５‥表示部、１６‥操作入力部、１７‥オーディオ部、１８‥ナビゲーション部、１９１‥撮像部（車内カメラ）、１９２‥音声入力部（マイク）、２１‥センサ部、２１１‥ＧＰＳセンサ、２１３‥ジャイロセンサ、２３‥記憶部、２３１‥データ記憶部、２３２‥アプリケーション記憶部、２４‥無線部、２４１‥近接無線通信部、２４２‥無線通信網通信部、２５‥表示部、２６‥操作入力部、２７‥音声出力部、２９１‥撮像部（カメラ）、２９２‥音声入力部（マイク）、Ｘ‥車両（移動体）。
【図１】
2019139354.tif 000003
【図２】
2019139354.tif 000004
【図３】
2019139354.tif 000005
【図４】
2019139354.tif 000006
【図５】
2019139354.tif 000007
【図６】
2019139354.tif 000008
【図７】
2019139354.tif 000009
【図８】
2019139354.tif 000010