(57)【要約】      （修正有）【課題】ドライバが聞き逃した電話会議の内容を容易に確認可能にする情報処理装置及び電話会議システムを提供する。【解決手段】情報処理装置（車載装置）は、互いに離れた複数の地点にいる参加者間の電話会議に用いられ、通信機能を備え、少なくとも一人の電話会議の参加者が電話会議と平行して行う電話会議以外の作業による負荷を推定する負荷推定部と、負荷推定部により推定された負荷に関する情報を、電話会議の発言内容のデータに紐付けして記憶する記憶部とを備える。【選択図】図７
2020031388.tif 000002
【特許請求の範囲】
【請求項１】
互いに離れた複数の地点にいる参加者間の電話会議に用いられ、通信機能を備えた情報処理装置（３、５）であって、
少なくとも一人の電話会議の参加者が前記電話会議と平行して行う前記電話会議以外の作業による負荷を推定する負荷推定部（１７）と、
前記負荷推定部により推定された負荷に関する情報を、前記電話会議の発言内容のデータに紐付けして記憶する記憶部（２１、５）と
を備えた情報処理装置。
【請求項２】
前記電話会議の発言内容のデータには、電話会議の参加者の理解度に関する情報が紐付けられて記憶されるように構成された請求項１記載の情報処理装置。
【請求項３】
前記記憶部に記憶された電話会議の発言内容を確認する（２１）を備え、
前記発言確認部は、電話会議の発言内容をキーワードで検索するように構成され、検索結果を理解度の低い順に表示するように構成された請求項２記載の情報処理装置。
【請求項４】
前記電話会議の参加者が理解度の低い電話会議の発言内容を確認したときに、確認度合を判定し、判定した確認度合に基づいて理解度に関する情報を更新する理解度更新部（２１）を備えた請求項３記載の情報処理装置。
【請求項５】
移動体に搭載された情報処理装置と、前記移動体の情報処理装置と通信することにより前記移動体に乗車している参加者と電話会議を行う情報処理装置とを備えた電話会議システム（１）であって、
前記移動体用の情報処理装置は、電話会議の参加者が前記電話会議と平行して行う前記電話会議以外の作業による負荷を推定する負荷推定部と、前記負荷推定部により推定された負荷に関する情報を前記電話会議の発言内容のデータに紐付けして記憶する記憶部とを備えるように構成された電話会議システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置及び電話会議システムに関する。
【背景技術】
【０００２】
北米では、Ｆｒｅｅｗａｙはオフィスと言われており、車両で移動しながら電話会議を行うことがよく知られている。特許文献１には、複数の車両間で電話会議を行う地図通信会議システムが記載されている。この会議システムでは、電話会議を行っている間、電話会議に参加している各車両に搭載されている表示装置例えばナビゲーションモニタに、各車両の位置を地図と共に表示するように構成されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−６１９６６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
電話会議の参加者である車両のドライバは、車両の運転時の負荷が大きいときに、会議の内容、例えば重要な情報を聞き逃すことがあった。このような場合、ドライバは、聞き逃した電話会議の内容を確認したいときには、例えば録音しておいた電話会議の内容を最初から聞き直したり、聞き逃した部分を探し出して聞き直す必要があり、かなり面倒であることから、効率的に電話会議に参加することができないという問題があった。
本発明の目的は、ドライバが聞き逃した電話会議の内容を容易に確認することができる情報処理装置及び電話会議システムを提供することにある。
【課題を解決するための手段】
【０００５】
請求項１の発明は、互いに離れた複数の地点にいる参加者間の電話会議に用いられ、通信機能を備えた情報処理装置３、５であって、少なくとも一人の電話会議の参加者が前記電話会議と平行して行う前記電話会議以外の作業による負荷を推定する負荷推定部１７と、負荷推定部１７により推定された負荷に関する情報を、電話会議の発言内容のデータに紐付けして記憶する記憶部２１、５とを備えたものである。
請求項５の発明は、移動体に搭載された情報処理装置３と、前記移動体の情報処理装置３と通信することにより前記移動体に乗車している参加者と電話会議を行う情報処理装置５、６とを備えた電話会議システムであって、前記移動体用の情報処理装置３は、電話会議の参加者が前記電話会議と平行して行う前記電話会議以外の作業による負荷を推定する負荷推定部１７と、前記負荷推定部１７により推定された負荷に関する情報を前記電話会議の発言内容のデータに紐付けして記憶する記憶部２１、５とを備えるように構成されたものである。
【図面の簡単な説明】
【０００６】
【図１】第１実施形態を示すもので、電話会議システムの全体概略構成を示すブロック図
【図２】車載装置のブロック図
【図３】電話会議の発言内容のデータと紐付けられた各種情報とを有するデータ構造を示す図（その１）
【図４】電話会議の発言内容のデータと紐付けられた各種情報とを有するデータ構造を示す図（その２）
【図５】電話会議の発言内容のデータと紐付けられた各種情報とを有するデータ構造を示す図（その３）
【図６】電話会議の発言内容のデータと紐付けられた各種情報とを有するデータ構造を示す図（その４）
【図７】車載装置の記憶制御を示すフローチャート
【図８】車載装置の情報表示装置の表示画面を示す図（その１）
【図９】車載装置の情報表示装置の表示画面を示す図（その２）
【図１０】車載装置の情報表示装置の表示画面を示す図（その３）
【図１１】車載装置の情報表示装置の表示画面を示す図（その４）
【図１２】車載装置の情報表示装置の表示画面を示す図（その５）
【図１３】車載装置の更新制御を示すフローチャート
【図１４】情報端末の制御を示すフローチャート
【発明を実施するための形態】
【０００７】
（第１実施形態）
以下、第１実施形態について、図１ないし図１４を参照して説明する。図１は、本実施形態の電話会議システム１の概略構成図である。図１に示すように、電話会議システム１は、少なくとも１台以上の車両２に搭載された車載装置３と、情報センター４に配置された電話会議システム用のサーバ５と、電話会議の少なくとも１人以上の他の参加者が操作する情報端末６とを含んで構成される。車載装置３、サーバ５、情報端末６は、通信機能を備えた情報処理装置としての機能を有する。
【０００８】
車両２は、乗用車やトラックなどの車両であり、例えば北米の高速道路（即ち、フリーウエイ）を走行中の車両のドライバが、電話会議システム１によって開催される電話会議の参加者となることを想定している。車両２の車載装置３は、後述する通信端末３０（図２参照）及び通信網７を介して情報センター４のサーバ５との間で通信を行うことが可能なように構成されている。車載装置３は、例えば、車両２の位置情報や目的地までの経路情報などを表示するナビゲーション装置としての機能を有している。
【０００９】
車載装置３には、電話会議システム１用のプログラムが記憶、即ち、インストールされており、上記プログラムを実行させることにより、車載装置３の操作者、即ち、車両２のドライバは、電話会議に参加することが可能なようになっている。尚、車載装置３を、例えばスマートフォンや、携帯電話や、タブレット等を含む情報処理装置で構成しても良い。車載装置３の具体的構成や動作については、後述する。
【００１０】
情報センター４のサーバ５は、ＣＰＵ、ＲＡＭ、ＲＯＭ、ハードディスク、入出力装置（キーボード、マウス、ディスプレイ）等を備えた一般的なコンピュータで構成されている。サーバ５は、例えばインターネットや携帯電話網等からなる通信網７を介して、電話会議の参加者の車両２の車載装置３や、電話会議の参加者の情報端末６等と通信を行うことが可能なように構成されている。サーバ５は、電話会議全体を制御する機能を有しており、車載装置３や情報端末６から電話会議の参加者が発した音声情報や種々の情報を受信すると、受信した音声情報や種々の情報を、電話会議の他の参加者の車載装置３や情報端末６へ送信するように構成されている。また、サーバ５は、電話会議の参加者が発した音声情報や、音声情報をテキストデータに変換したデータや、種々の情報を内部のメモリ（例えばＲＡＭ、フラッシュメモリ、ハードディスク等）に記憶するように構成されている。情報センター４には、上記サーバ５の他に、複数のサーバ例えば３ｒｄパーティーコンテンツサーバやメールサーバやカレンダーサーバ等が設けられており、各サーバは、互いに通信可能であると共に、通信網７を介して外部と通信可能になっている。
【００１１】
情報端末６は、通信網７を介して情報センター４のサーバ５と通信可能な端末、例えばパソコンや、タブレットや、携帯情報端末や、スマートフォン等で構成されている。情報端末６には、電話会議システム１用のプログラムやアプリケーションプログラム等がインストールされており、上記プログラムを起動させることにより、情報端末６の操作者は、電話会議に参加することが可能なようになっている。情報端末６の動作については、後述する。
【００１２】
さて、車載装置３の具体的構成について、図２を参照して説明する。図２に示すように、車載装置３は、地図データベース１１と、自車両情報入力部１２と、ドライバ情報入力部１３と、歩行者位置情報入力部１４と、ナビ演算部１５と、走行状況推定部１６と、運転負荷検出部１７と、音声入力制御部１８と、メール送受信部１９と、カレンダ解釈部２０と、電話会議制御部２１と、通信制御部２２とを備えている。
【００１３】
地図データベース１１には、ナビゲーション用の地図データや種々のデータが記憶されており、これら地図データ等は、適宜必要に応じて自車両情報入力部１２に入力される。自車両情報入力部１２は、車両２に搭載された各種センサ２３から種々のセンサ情報、例えば車速情報や、ステアリング情報や、アクセル情報や、ブレーク情報等を入力すると共に、ＧＰＳ受信機２４から車両２の現在位置情報等を入力する。自車両情報入力部１２は、入力したセンサ情報等の情報、即ち、自車両情報を、ナビ演算部１５、走行状況推定部１６、及び、運転負荷検出部１７に出力する。
【００１４】
ドライバ情報入力部１３は、ドライバの顔等を撮影するドライバカメラ２５により撮影された画像情報を入力し、入力した画像情報に基づいてドライバの顔向きや視線等のドライバ情報を検出し、検出したドライバ情報を運転負荷検出部１７に出力する。
【００１５】
歩行者位置情報入力部１４は、車両２の外周囲を撮影する外向きカメラ２６により撮影された画像情報を入力し、入力した画像情報に基づいて車両２の外周囲にいる歩行者及びその位置を検出し、検出した歩行者位置情報を運転負荷検出部１７に出力する。
【００１６】
ナビ演算部１５は、自車両情報入力部１２からの情報と、図示しない入力装置例えばタッチパネルや操作スイッチやリモコン等により入力された目的地の情報とに基づいて、現在地から目的地までの誘導経路を演算したり、誘導経路に沿って経路案内したりする機能を有する。ナビ演算部１５は、誘導経路の情報や現在地の情報等を電話会議制御部２１及び通信制御部２２に送信する。
【００１７】
走行状況推定部１６は、自車両情報入力部１２からの情報に基づいて、車両２の走行状況を推定する機能を有する。走行状況推定部１６は、推定した走行状況の情報を電話会議制御部２１及び通信制御部２２に送信する。
【００１８】
運転負荷検出部１７は、自車両情報入力部１２からの情報と、ドライバ情報入力部１３からの情報と、歩行者位置情報入力部１４からの情報等に基づいて、ドライバの運転負荷を検出する機能を有する。この場合、運転負荷検出部１７は、種々の車両信号、ドライバカメラ２５の撮影画像、ナビ情報や地図情報、または、Ｖ２Ｘによる取得情報などに基づいて、ドライバの運転負荷を推定するように構成されている。運転負荷検出部１７は、負荷推定部としての機能を有する。本実施形態の場合、車載装置３は、Ｖ２Ｘによって情報を取得可能なように構成されている。そして、情報運転負荷検出部１７は、検出した運転負荷の情報を電話会議制御部２１及び通信制御部２２に送信する。
【００１９】
音声入力制御部１８は、マイク２７により入力したドライバ等の音声信号を入力し、音声情報を通信制御部２２に出力する機能を有する。メール送受信部１９は、通信制御部２２を介してメールを送受信する機能を有する。カレンダ解釈部２０は、カレンダに登録された電話会議の予定があるか否かを判断し、電話会議の予定があるときにその旨を通信制御部２２に送信する機能を有する。
【００２０】
電話会議制御部２１は、ナビ演算部１５、走行状況推定部１６、運転負荷検出部１７及び通信制御部２２からの情報を入力し、電話会議の各種の情報や運転負荷の情報等を情報表示装置２８に表示すると共に、電話会議の音声情報、即ち、電話会議の他の参加者の音声を音声出力装置２９を介して出力する。
【００２１】
また、電話会議制御部２１は、電話会議の音声情報である発言内容をテキストデータ化、即ち、ディクテーションしてテキストデータで内部のメモリ、例えばＲＡＭやフラッシュメモリやハードディスク等に記憶する機能を有する。この場合、電話会議制御部２１は、図３に示すように、電話会議の発言内容のテキストデータに対して、発言時間（即ち、発言時刻）、発言者の名前、キーワード、ドライバの運転負荷、ドライバの理解度等の各種情報を紐付けして記憶するように構成されている。ドライバの運転負荷としては、例えば、高、中、低の３段階のレベルの情報を記憶する。ドライバの理解度としては、例えば、高、中、低の３段階のレベルの情報を記憶する。
【００２２】
尚、ドライバの運転負荷及びドライバの理解度として、例えば１０段階のレベルの数値、即ち、１−１０の数値を記憶するように構成しても良い。電話会議制御部２１は、負荷判定部、理解度判定部、記憶部、発言確認部及び理解度更新部としての各機能を有する。尚、上記した電話会議の発言内容を各種情報を紐付けして記憶する制御の詳細については、後述する。また、上記した電話会議の発言内容を各種情報を紐付けして記憶する制御を、車載装置３で実行する代わりに、情報センタ―４のサーバ５で実行するように構成しても良い。
【００２３】
また、電話会議制御部２１は、ドライバの理解度が低または中の発言内容を検索してディスプレイに表示する機能、即ち、ヒストリー表示モードを有する。このヒストリー表示モードでは、例えば、図１０に示すような画面がディスプレイに表示される。更に、電話会議制御部２１は、ヒストリー表示モードで理解度が低または中の発言内容をドライバが視認して、ドライバの理解度が高くなったと判定したときには、理解度のデータを更新する機能を有する。尚、ヒストリー表示モードの制御並びに理解度を更新する制御の詳細については、後述する。
【００２４】
通信制御部２２は、通信端末３０及び通信網７を介して情報センター４のサーバ５と通信する機能を有する。通信制御部２２は、報知部としての機能を有する。通信端末３０は、携帯電話網や他の無線通信網等と通信可能な通信端末で構成されている。尚、通信端末３０の代わりに、ドライバや乗員の所持するスマートフォンや携帯電話機を用いるように構成しても良い。また、通信端末３０を車載装置３内に内蔵するように構成しても良い。
【００２５】
次に、上記した構成の電話会議システム１の動作について、図７ないし図１４を参照して説明する。まず、車両２の車載装置３の制御について、図７のフローチャートに従って説明する。尚、図７のフローチャートは、車載装置３の電話会議用の制御の内容を示しており、本制御は、予め決められた設定時間毎に繰り返し実行されるように構成されている。
【００２６】
図７のステップＳ１０においては、カレンダ解釈部２０によりカレンダ情報を取得する。続いて、ステップＳ２０へ進み、カレンダ解釈部２０によりカレンダ情報を解釈し、カレンダに登録されている電話会議の予定を調べる。
【００２７】
そして、ステップＳ３０へ進み、カレンダに登録されている電話会議の予定があるか否か、即ち、登録されている電話会議の予定の開始時刻になったか否かを判断する。ここで、電話会議の予定がないときには、「ＮＯ」へ進み、本制御を終了する。
【００２８】
上記ステップＳ３０において、電話会議の予定があるときには（ＹＥＳ）、ステップＳ４０へ進み、ドライバに対して電話会議に接続するか否かを確認する。この場合、電話会議接続確認のメッセージを情報表示装置２８に表示したり、音声出力装置２９により音声で出力したりする。
【００２９】
続いて、ステップＳ５０へ進み、ドライバが電話会議接続を了解したか否かを判断する。ここで、ドライバが電話会議接続を了解しなかったときは、「ＮＯ」へ進み、本制御を終了する。また、上記ステップＳ５０にて、ドライバが電話会議接続を了解したときには（ＹＥＳ）、ステップＳ６０へ進み、車載装置３は、電話会議システム１に接続する、即ち、情報センター４の電話会議システム１のサーバ５に接続する。尚、電話会議に接続したときに、車両２を自動運転モードに設定したり、車両２に搭載されている各種の運転支援機能を自動的に起動させるように構成しても良い。
【００３０】
そして、ステップＳ７０へ進み、車載装置３は、電話会議システム１のサーバ５から電話会議の情報を受信し、受信した情報を情報表示装置２８に表示する。続いて、ステップＳ８０へ進み、車載装置３は、音声を回通させる処理を実行し、ドライバは電話会議に参加することが可能になる。これにより、情報センター４のサーバ５から送信された電話会議の他の参加者の音声情報が車載装置３に受信されて音声出力装置２９から出力されるようになると共に、ドライバの発する音声情報は車載装置３から情報センター４のサーバ５ひいては電話会議の他の参加者の情報端末６に送信されて情報端末６の音声出力装置から出力されるようになる。
【００３１】
続いて、ステップＳ９０へ進み、車載装置３は、自車両情報、ドライバ情報、及び、周辺環境情報として例えば歩行者位置情報を取得する。そして、ステップＳ１００へ進み、車載装置３の運転負荷検出部１７は、上記取得した情報に基づいてドライバの運転負荷を推定する。次いで、ステップＳ１１０へ進み、車載装置３は、上記推定したドライバの運転負荷の情報を情報センター４のサーバ５に送信する。この場合、車載装置３は、推定したドライバの運転負荷の情報を情報表示装置２８に表示するように構成しても良い。更に、車載装置３は、上記推定したドライバの運転負荷の情報を情報センター４のサーバ５ひいては電話会議の参加者の情報端末６に送信したこと示す情報を、情報表示装置２８に表示するように構成しても良い。
【００３２】
また、情報センター４のサーバ５は、上記受信したドライバの運転負荷の情報を、電話会議の他の参加者の情報端末６に送信する。これにより、電話会議の他の参加者の情報端末６は、上記ドライバの運転負荷の情報を表示装置３６に表示するように構成されている。また、サーバ５は、上記受信したドライバの運転負荷の情報に基づいて、前記した電話会議の発言内容のテキストデータをドライバの運転負荷等の各種情報に紐付けして記憶する制御を実行するように構成しても良い。尚、サーバ５側で運転負荷の表示制御や紐付け記憶制御を実行しない場合には、ステップＳ１１０の処理を省略することも可能である。
【００３３】
この後、ステップＳ１２０へ進み、車載装置３の電話会議制御部２１は、情報センター４のサーバ５から電話会議の内容、即ち、発言時間の情報、発言者の名前の情報、発言内容のテキストデータ、キーワードの情報等を受信し、内部のメモリに記憶する。この場合、図３において、領域Ａで示す部分のデータを記憶する。尚、本実施形態では、情報センター４のサーバ５側で電話会議の発言内容の音声情報をテキストデータに変換しておくように構成されている。また、発言時間の情報、発言者の名前の情報、キーワードの情報等も、サーバ５側で取得されて車載装置３へ送信されるように構成されている。尚、音声データをテキストデータに変換する処理や、発言時間の情報、発言者の名前の情報、キーワードの情報等を取得する処理を、車載装置３側で実行するように構成しても良い。また、車載装置３側で上記した発言内容のテキストデータ等を記憶する制御を実行しない場合には、ステップＳ１２０の処理を省略することが可能である。
【００３４】
続いて、ステップＳ１３０へ進み、車載装置３の電話会議制御部２１は、発言内容と、発言が行われたときのドライバの運転負荷と、発言に対するドライバの理解度とを紐付けて内部のメモリに記憶する。この場合、図３において、領域Ｂで示す部分のデータを記憶する。ドライバの運転負荷としては、前記ステップＳ１００で推定された運転負荷の高、中、低のレベルが記憶される。ドライバの理解度としては、ドライバの運転負荷に連動した値、例えば運転負荷が高のときには、理解度として低が記憶され、運転負荷が中のときには、理解度として中が記憶され、運転負荷が低のときには、理解度として高が記憶されるように構成されている。
【００３５】
次いで、ステップＳ１４０へ進み、車載装置３の電話会議制御部２１は、電話会議が継続中であるか否かを判断する。ここで、電話会議が継続中であるときには（ＹＥＳ）、ステップＳ９０へ戻り、上述した処理を繰り返し実行する。また、上記ステップＳ１４０において、電話会議が終了したときには、「ＮＯ」へ進み、本制御を終了する。尚、電話会議の終了については、電話会議の図示しない会議終了スイッチ、または、図８に示す電話会議からの退出スイッチ３１を操作すると、電話会議が終了するように構成されている。この場合、ドライバ等が会議終了スイッチ、または、退出スイッチ３１を操作すると、会議終了割り込みまたは退出割り込みが発生し、図７に示す制御を終了するように構成されている。
【００３６】
上述した図７の制御を実行することにより、図３に示すデータ、即ち、電話会議の内容として、発言時間の情報、発言者の名前の情報、発言内容のテキストデータ、キーワードの情報、ドライバの運転負荷の情報、ドライバの理解度の情報が紐付けされて記憶されると共に、これら発言内容の紐付けされたデータ等が蓄積されていく。
【００３７】
また、本実施形態においては、運転負荷検出部１７によって、ドライバの運転負荷として、次の４種類の負荷、即ち、運転基本負荷、動的環境負荷、静的環境負荷、ドライバ行動負荷を検出している。
【００３８】
第１の運転基本負荷は、主に車両信号から取得できる車両操作に関する負荷である。この運転基本負荷を検出するために入力する情報としては、例えばアクセル、ブレーキ、ステアリング、ウィンカー、シフトポジション、ナビ、オーディオ、エアコン等の操作の情報や、運転補助機能動作状況（例えばＡＣＣ、ＬＫＡ）の情報などがあり、これらの情報に基づいて運転基本負荷のレベルを推定する。
【００３９】
第２の動的環境負荷は、交通や室温などの動的に変わる環境による負荷である。この動的環境負荷を検出するために入力する情報としては、例えば気象、時間帯、周辺車両の位置や挙動、歩行者の位置や挙動、障害物の位置や大きさなどの情報があり、これらの情報に基づいて動的環境負荷のレベルを推定する。
【００４０】
第３の静的環境負荷は、道路や走行地点からドライバに与えられる負荷である。この静的環境負荷を検出するために入力する情報としては、主にナビやロケーターから取得される情報、例えば場所情報、具体的には、分岐、合流、踏み切り、トンネル等の情報や、道路種別の情報や、道路形状の情報などがあり、これらの情報に基づいて静的環境負荷のレベルを推定する。
【００４１】
第４のドライバ行動負荷は、ドライバの行動や疲れなどの生理的状態による負荷である。このドライバ行動負荷を検出するために入力する情報としては、例えば行動、具体的には、よそ見、飲食、安全確認行動等の情報や、技量などの特性の情報や、眠気、疲れ、緊張等の情報などがあり、これらの情報に基づいてドライバ行動負荷のレベルを推定する。
【００４２】
本実施形態では、運転負荷検出部１７により上記４種類の運転負荷を全て検出するように構成しているが、これに限られるものではなく、４種類の運転負荷の中のいずれか３つ、またはいづれか２つ、または、いずれか１つを検出するように構成しても良い。
【００４３】
尚、人が車両に同乗する場合、例えば助手席に乗車する場合には、ドライバの状況、即ち、上記４種類の運転負荷を総合的に判断して、会話のタイミングの調整や、ドライバからの回答に対する察し、例えばドライバが運転に集中していて、あまり考えずに返事したなという判断等を行ったり、ドライバに話かけないようにしたりしている。これに対して、電話会議のドライバ以外の参加者は、オフィス等にいることから、ドライバの状況がわからない。そのため、ドライバの運転負荷が高いときに、ドライバに回答を求めたりし勝ちとなり、ドライバの運転操作に支障が出るおそれがあった。
【００４４】
これに対して、本実施形態では、ドライバの運転負荷を推定し、推定した運転負荷の情報を情報センタ２のサーバ５を介して電話会議の他の参加者の情報端末６や車載装置３に送信することにより、情報端末６の表示装置に上記推定したドライバの運転負荷の情報を表示することが可能になる。これにより、電話会議の参加者は、電話会議に参加しているドライバの運転負荷の情報を認識することができるから、例えば助手席に乗車している同乗者と、ほぼ同様の判断を行なうことが可能になる。
【００４５】
図８に、車両２の車載装置３の情報表示装置２８に表示される電話会議の表示態様の一例を示す。この図８に示すように、情報表示装置２８の画面の例えば右半部には、道路地図が表示されていると共に、車両２の現在位置Ｐが表示されている。情報表示装置２８の画面の例えば左半部には、電話会議のタイトル、表示モード、電話会議の参加者の発言内容のテキストデータが表示されている。図８の表示モードは、例えばストリーミング表示モードであり、電話会議の参加者の発言内容のテキストデータがストリーミング表示されている。この場合、参加者（即ち、発言者）の名前や顔画像や発言時間等の情報が、上記テキストデータに付加して表示されている。尚、参加者の発言内容のテキストデータがストリーミング表示される際には、参加者の発言の音声も音声出力装置２９から出力されるように構成されている。
【００４６】
そして、情報表示装置２８の画面の例えば左半部の最下部には、モード切替スイッチ３２、戻りスイッチ３３、マイクミュートスイッチ３４、スピーカミュートスイッチ３５、ボイスメモスイッチ３６、退出スイッチ３１が表示されている。モード切替スイッチ３２は、表示モードを、ストリーミング表示モードまたはヒストリー表示モードに切り替えるスイッチである。モード切替スイッチ３２は、ストリーミング表示中においては、ヒストリー表示モードに切り替えるために「Ｈ」と表示されており、ヒストリー表示中においては、ストリーミング表示モードに切り替えるために「Ｓ」と表示されている（図９、図１０参照）。戻りスイッチ３３は、表示画面を１つ前の画面に戻すためのスイッチである。
【００４７】
また、図８の画面において、マイクミュートスイッチ３４が操作されると、ドライバの発した音声は電話会議に出力されなくなる。スピーカミュートスイッチ３５が操作されると、電話会議の他の参加者が発する音声が音声出力装置２９から出力されなくなる。
【００４８】
図８の画面において、ボイスメモスイッチ３６が操作されると、ボイスメモモードに入り、電話会議の音声の入出力双方がミュートされ、発話音声はボイスメモとして、車載装置３内のメモリに録音保存されるように構成されている。この場合、電話会議の音声情報を保存すると共に、音声データをディクテーションしたテキストデータも同時に保存するように構成されている。ディクテーションしてテキストデータに変換する際には、例えば明後日はｘ月ｘ日というように、後日、テキストデータを読んだときに内容を分かりやすくするように、自動的に変換する機能を備えるように構成しても良い。
【００４９】
また、図８の画面において、退出スイッチ３１が操作されると、電話会議へのドライバの参加が終了し、電話会議システム１への接続が解除されるように構成されている。
【００５０】
さて、車両の運転時の負荷が大きいときに、ドライバが電話会議の内容を聞き逃すことがあった。このような場合に、本実施形態においては、ドライバは、運転時の負荷が小さくなったときに、聞き逃した電話会議の内容を容易に確認することができる。
【００５１】
具体的には、ドライバが聞き逃した電話会議の内容を確認したい場合、図８に示すように、情報表示装置２８に電話会議の内容をストリーミング表示中において、ドライバがモード切替スイッチ３２を操作する。すると、図９に示すように、情報表示装置２８に電話会議の内容をヒストリー表示するモードとなる。このヒストリー表示モードでは、最初に、発言内容を検索するためのキーワードが表示される。本実施形態の場合、キーワードは、電話会議の発言の中における出現頻度が高いものから順に、即ち、頻度順に表示されるように構成されている。
【００５２】
上記キーワードが表示されている状態で、ドライバが確認したい発言の中にあるキーワード例えば「単価」を選択すると、選択されたキーワードが存在する発言内容が検索される。そして、図１０に示すように、上記検索された発言内容は、ドライバの理解度が低いもの、即ち、ドライバの運転負荷が高いときのものから順に表示されるようになっている。これにより、ドライバは、ドライバの運転負荷が高いときの発言内容を素早く見つけることができ、その内容を確認することができる。
【００５３】
また、図９の表示画面において、ドライバが、キーワードの表示順序を、上記頻度順から関連順、即ち、電話会議の現在の発言内容に含まれるキーワードに関連するものでドライバの理解度が低いものを順に表示する表示順序に変更したいときには、キーワードの表示順序のエリア３７をタッチ操作する。すると、図１１に示すように、キーワードが関連順に表示された表示画面が表示されるようになる。
【００５４】
この図１１に示す表示画面において、ドライバが確認したい発言の中にあるキーワード例えば「新機能」を選択すると、選択されたキーワードが存在する発言内容が検索される。そして、図１２に示すように、上記検索された発言内容は、ドライバの理解度が低いもの、即ち、ドライバの運転負荷が高いときのものから順に表示されるようになっている。
【００５５】
また、図１１の表示画面において、ドライバが、キーワードの表示順序を、上記関連順から頻度順に変更したいときには、キーワードの表示順序のエリア３７をタッチ操作すれば良い。この操作により、図９に示すように、頻度順のキーワードが表示された表示画面が表示されるようになる。
【００５６】
また、ヒストリー表示中の表示画面、即ち、図９、図１０、図１１、図１２の表示画面において、ストリーミング表示モードに変更したいときには、モード切替スイッチ３２を操作する。この操作により、図８に示すように、ストリーミング表示モードの表示画面が表示されるようになる。
【００５７】
さて、ドライバが、車両の運転負荷が高いときに聞き逃した電話会議の発言内容を、上述したようにして見つけ、その内容を視認して確認し、理解することができた場合、上記発言内容の理解度が高くなる。そこで、本実施形態では、車載装置３によって蓄積記憶した電話会議の発言内容の中のドライバの理解度の項目のデータの内容を更新する制御を実行するように構成されている。
【００５８】
ここで、上記理解度のデータを更新する制御について、図１３のフローチャートを参照して説明する。尚、図１３のフローチャートは、車載装置３の制御の中の理解度更新制御内容を示す。また、図１３に示す理解度更新制御は、予め決められた設定時間毎に繰り返し実行されるように構成されている。また、図１３の理解度更新制御と、図７の電話会議用の制御（即ち、電話会議の発言内容のデータ等の蓄積制御）は、平行して実行されるように構成されている。
【００５９】
まず、図１３のステップＳ２１０においては、車載装置３は、電話会議が継続中であるか否かを判断する。ここで、電話会議が継続中でないときには、「ＮＯ」へ進み、本制御を終了するようになっている。また、上記ステップＳ２１０において、電話会議が継続中であるときには（ＹＥＳ）、ステップＳ２２０へ進む。
【００６０】
このステップＳ２２０においては、ヒストリー表示モード、即ち、図９、図１０、図１１または図１２の表示画面である否かを判断する。ここで、ヒストリー表示モードでないときには（ＮＯ）、ステップＳ２１０へ戻り、継続中であるか否かの判断を続ける。また、上記ステップＳ２２０において、ヒストリー表示モードであるときには（ＹＥＳ）、ステップＳ２３０へ進み、ドライバの状態、即ち、ドライバが情報表示装置２８の表示画面を視認する状態であるかどうかを確認する。
【００６１】
上記ステップＳ２３０では、情報表示装置２８の表示画面にヒストリー表示されている電話会議の発言内容を、ドライバが視認したか否かを、具体的には、発言内容を視認した時間の長さによって発言内容の視認状態、即ち、確認度合を判定する。この場合、ドライバ情報入力部１３によりドライバの視線や顔向き等の情報に基づいてドライバの視認状態、即ち、電話会議の発言内容の確認度合を判定するように構成されている。例えば、発言内容を視認した時間がある程度長い場合、即ち、発言内容の視認時間が例えば第１閾値よりも長い場合、確認度合が中であると判定する。また、視認時間が十分長い場合、即ち、視認時間が第１閾値よりも長い第２閾値よりも長い場合、確認度合が大きいと判定する。また、視認時間が第１閾値よりも短い場合には、確認度合が小さい、即ち、ドライバが発言内容を視認していないと判定する。
【００６２】
続いて、ステップＳ２４０へ進み、表示されている発言内容をドライバが確認したか、即ち、視認したか否かを判断する。ここで、発言内容をドライバが確認しなかったときには（ＮＯ）、ステップＳ２１０へ戻り、継続中であるか否かの判断を続ける。また、上記ステップＳ２４０において、発言内容をドライバが確認したときには（ＹＥＳ）、ステップＳ２５０へ進み、上記判定した確認度合に応じて発言内容の理解度のデータを更新する。
【００６３】
具体的には、電話会議の発言内容の理解度が、図４に示すようなデータ「低」であった場合に、ヒストリー表示されている電話会議の発言内容(図１０、図１２参照)を、ドライバが視認して、その視認時間が十分長くて確認度合が大と判定されたときには、上記データの中の理解度のデータを更新する。例えば、図４の上から１行目と２行目の発言内容を、ドライバが視認して、その視認時間が十分長くて確認度合が大と判定されたときには、それらの発言内容の理解度のデータをそれぞれ「低」から「高」に更新する。これにより、図５に示す理解度のデータが車載装置３内のメモリに記憶されるようになる。
【００６４】
また、例えば、図４の上から１行目と２行目の発言内容を、ドライバが視認して、その視認時間に基づいて確認度合が中と判定されたときには、それらの発言内容の理解度をそれぞれ「低」から「中」に更新する。これにより、図６に示す理解度のデータが車載装置３内のメモリに記憶されるようになる。
【００６５】
そして、上記ステップＳ２５０を実行した後は、ステップＳ２１０へ戻り、継続中であるか否かの判断を続けるようになっている。
【００６６】
次に、電話会議の他の参加者、即ち、車両２以外のオフィス等にいる参加者の情報端末６の制御について、図１４のフローチャートを参照して説明する。尚、図１４のフローチャートは、電話会議の他の参加者の情報端末６の制御の中の電話会議制御の内容を示しており、本制御は、予め決められた設定時間毎に繰り返し実行されるように構成されている。
【００６７】
図１４のステップＳ３１０においては、情報端末６において、電話会議システム１用のアプリを起動する。続いて、ステップＳ３２０へ進み、情報端末６は、表示装置に電話会議の情報を入力する画面を表示する。そして、ステップＳ３３０へ進み、情報端末６の操作者、即ち、電話会議の参加者は、情報端末６を操作して電話会議情報を入力すると共に、電話会議システム１に接続するための操作を行なう。
【００６８】
次いで、ステップＳ３４０へ進み、情報端末６は、電話会議システム１に接続する、即ち、情報センター４の電話会議システム１のサーバ５に接続する。そして、ステップＳ３５０へ進み、情報端末６は、電話会議システム１のサーバ５から電話会議の情報を受信し、受信した情報を表示装置に表示する。続いて、ステップＳ３６０へ進み、情報端末６は、音声を回通させる処理を実行し、情報端末６の操作者、即ち、参加者は電話会議に参加することが可能になる。これにより、情報端末６の参加者の音声情報は、情報センター４のサーバ５を介して車両２の車載装置３に送信されて音声出力装置２９から出力されるようになると共に、情報センター４のサーバ５を介して電話会議の他の参加者の情報端末６や車載装置３に送信されて情報端末６や車載装置３の音声出力装置から出力されるようになる。
【００６９】
続いて、ステップＳ３７０へ進み、情報端末６は、電話会議が継続中であるか否かを判断する。ここで、電話会議が継続中でないときには、「ＮＯ」へ進み、本制御を終了するようになっている。また、上記ステップＳ３７０において、電話会議が継続中であるときには（ＹＥＳ）、ステップＳ３５０へ戻り、上述した処理を繰り返し実行する。
【００７０】
尚、情報端末６において、電話会議システム１用のアプリを起動したときには、その表示画面に、車載装置３の情報表示装置２８の表示画面（例えば図８参照）とほぼ同じ画面が表示される。そして、モード切替スイッチを操作することにより、ストリーミング表示モードとヒストリー表示モードを選択して実行することが可能なように構成されている。
【００７１】
即ち、ステップＳ３５０からステップＳ３７０までの処理を繰り返し実行しているときに、ストリーミング表示モードが選択されているときには、電話会議の現在進行中の発言内容が逐次表示されると共に、発言が音声出力されるようになっている。また、ヒストリー表示モードが選択されると、上述した車載装置３とほぼ同様にして、キーワード等を選択して、確認した発言内容を検索して表示することが可能なように構成されている。
【００７２】
また、ステップＳ３５０からステップＳ３７０までの処理を繰り返し実行しているときに、本制御を終了させたい場合には、電話会議の会議終了スイッチ、または、電話会議からの退出スイッチを操作するように構成されている。即ち、電話会議の参加者、即ち、情報端末６の操作者が会議終了スイッチ、または、退出スイッチを操作すると、会議終了割り込みまたは退出割り込みが発生し、本制御を終了するようになっている。
【００７３】
上記した構成の本実施形態においては、少なくとも一人の電話会議の参加者である車両のドライバが電話会議と平行して行う電話会議以外の作業による負荷例えば運転負荷を推定し、この推定された負荷に関する情報を、電話会議の発言内容のデータに紐付けして記憶するように構成した。この構成によれば、ドライバの運転負荷が大きくて電話会議の発言内容を聞き逃したような場合に、記憶された電話会議の発言内容のデータの中から負荷が大きいときの発言内容を読み出すことが可能であるから、ドライバが聞き逃した電話会議の内容を容易に確認することができる。
【００７４】
また、上記実施形態では、電話会議の発言内容のデータに、電話会議の参加者の理解度に関する情報を紐付けて記憶させるように構成した。この構成によれば、記憶された電話会議の発言内容のデータの中から理解度が低い発言内容を読み出すことが可能であるから、ドライバが聞き逃した電話会議の内容を容易に確認することができる。
【００７５】
また、本実施形態では、記憶部に記憶された電話会議の発言内容を確認する際に、電話会議の発言内容に含まれるキーワードで検索し、検索結果を理解度の低い順に表示するように構成した。この構成によれば、ドライバが確認したい発言内容を速やかに見つけ出すことができる。
【００７６】
また、本実施形態では、ドライバが理解度の低い電話会議の発言内容を確認したときに、ドライバの確認度合を判定し、判定した確認度合に基づいて理解度に関する情報を更新するように構成した。この構成によれば、ドライバが理解度の低い電話会議の発言内容を確認したいときに、ドライバの確認度合に基づいて理解度に関する情報を更新した発言内容は、検索されなくなることから、ドライバが確認したい発言内容をより一層速やかに見つけ出すことができる。
【００７７】
本開示は、実施例に準拠して記述されたが、本開示は当該実施例や構造に限定されるものではないと理解される。本開示は、様々な変形例や均等範囲内の変形をも包含する。加えて、様々な組み合わせや形態、さらには、それらに一要素のみ、それ以上、あるいはそれ以下、を含む他の組み合わせや形態をも、本開示の範疇や思想範囲に入るものである。
【符号の説明】
【００７８】
図面中、１は電話会議システム、２は車両、３は車載装置、４は情報センター、５はサーバ、６は情報端末、１２は自車両情報入力部、１３はドライバ情報入力部、１５はナビ演算部、１６は走行状況推定部、１７は運転負荷検出部、２１は電話会議制御部、２２は通信制御部、２５はドライバカメラ、２６は外向きカメラ、２８は情報表示装置、２９は音声出力装置、３０は通信端末、３１は退出スイッチ、３２はモード切替スイッチ、３３は戻りスイッチである。
【図１】
2020031388.tif 000003
【図２】
2020031388.tif 000004
【図３】
2020031388.tif 000005
【図４】
2020031388.tif 000006
【図５】
2020031388.tif 000007
【図６】
2020031388.tif 000008
【図７】
2020031388.tif 000009
【図８】
2020031388.tif 000010
【図９】
2020031388.tif 000011
【図１０】
2020031388.tif 000012
【図１１】
2020031388.tif 000013
【図１２】
2020031388.tif 000014
【図１３】
2020031388.tif 000015
【図１４】
2020031388.tif 000016