(57)【特許請求の範囲】
【請求項１】
車両の周囲を撮像するカメラと、
前記車両に搭乗するユーザの音声情報を取得するマイクと、
前記カメラの撮像画像の特徴に基づいて、前記車両の周囲に存在する対象を識別する識別手段と、
前記対象と当該対象に関するテキスト情報とを予め対応づけた辞書を参照し、前記識別された前記対象に関するテキスト情報を前記音声情報から抽出する抽出手段と、
前記識別された前記対象と当該対象に関するテキスト情報とを対応づけた対象情報を出力する出力手段と、を有する情報提供装置。
【請求項２】
前記識別手段は、前記対象が存在する位置及び／又は時刻を識別し、
前記出力手段は、前記識別された前記対象と、前記対象が存在する位置及び／又は時刻と、当該対象に関するテキスト情報とを対応づけた対象情報を出力する請求項１に記載の情報提供装置。
【請求項３】
前記識別手段は、前記対象の識別結果が複数得られた場合には、複数の前記識別結果をユーザに提示し、前記ユーザにより入力された選択情報に基づいて、前記対象を識別する請求項１又は２に記載の情報提供装置。
【請求項４】
請求項１〜３の何れか一項に記載された情報提供装置と、
複数の前記情報提供装置から対象情報を収集するサーバと、を備え、
前記サーバは、
前記収集した対象情報を前記対象ごとに記憶し、
前記識別された前記対象の識別子を含む要求情報を前記情報提供装置から取得した場合には、収集した前記対象に関するテキスト情報を前記情報提供装置に提示する情報提供システム。
【請求項５】
車両の周囲を撮像するカメラと、
前記車両に搭乗するユーザの音声情報を取得するマイクと、を備える情報提供装置を用いて、
前記カメラの撮像画像の特徴に基づいて、前記車両の周囲に存在する対象を識別し、
前記対象と当該対象に関するテキスト情報とを予め対応づけた辞書を参照し、前記識別された前記対象に関するテキスト情報を前記音声情報から抽出し、
前記識別された前記対象と当該対象に関するテキスト情報とを対応づけて出力する情報提供方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報提供装置、情報提供システム及び情報提供方法に関する。
【背景技術】
【０００２】
この種の装置に関し、位置情報と取得情報を含む電子メールなどの情報パッケージを取得し、受信した情報パッケージから位置情報と取得情報を抽出し、位置情報を基準として取得情報を登録する技術が知られている（特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−２９００２７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の装置は、位置情報を基準として対象を識別するので、移動可能な対象を識別することができず、移動可能な対象に関する情報の共有化が難しいという問題がある。
【０００５】
本発明が解決しようとする課題は、移動可能な対象に関する情報を共有できるようにすることである。
【課題を解決するための手段】
【０００６】
本発明は、カメラで撮像した撮像画像を用いて車両の周囲に存在する対象を識別し、マイクで集音した音声情報から、車両の周囲に存在する対象に関するテキスト情報を抽出し、識別された対象とその対象に関するテキスト情報とを対応づけて出力することにより、上記課題を解決する。
【発明の効果】
【０００７】
本発明によれば、移動可能な対象に対する情報を複数のユーザで共有することができる。
【図面の簡単な説明】
【０００８】
【図１】本実施形態に係る情報提供システムのブロック構成図である。
【図２】本実施形態の辞書の一例を示す図である。
【図３】本実施形態の対象情報の一例を示す図である。
【図４】本実施形態の収集情報の一例を示す図である。
【図５】本実施形態の提供情報の第１の表示例を示す図である。
【図６】本実施形態の提供情報の第２の表示例を示す図である。
【図７】本実施形態に係る情報提供装置の制御手順を説明するためのフローチャートである。
【図８】本実施形態に係るサーバの制御手順を説明するためのフローチャートである。
【発明を実施するための形態】
【０００９】
以下、本発明の実施形態を図面に基づいて説明する。本実施形態では、本発明に係る情報提供装置１００を、情報提供システム１に適用した場合を例にして説明する。本実施形態の情報提供システム１は、車両において用いられる。つまり、車両に搭乗するユーザによって利用される。
【００１０】
図１は、本実施形態の情報提供システム１のブロック構成を示す図である。
本実施形態の情報提供システム１は、ユーザの情報提供装置１００を介して、ユーザが移動中に遭遇する対象に関する情報を収集するとともに、ユーザが移動中に遭遇する対象に関する情報を提供する。
【００１１】
本実施形態の情報提供システム１は、一の情報提供装置１００と、他の情報提供装置１００Ｎと、サーバ２００と、備える。
【００１２】
本実施形態の情報提供装置１００は、通信装置１２０を備え、他の複数の情報提供装置１００Ｎとサーバ２００と情報の授受を行う。本明細書では、説明を簡潔にする観点から、一の情報提供装置１００の構成及び動作を説明し、これと共通する他の情報提供装置１００Ｎの構成及び動作についての説明は割愛する。情報提供装置１００，１００Ｎの数は限定されない。
【００１３】
本実施形態のサーバ２００は、各情報提供装置１００から対象情報を取得する情報取得装置２１０を有する。情報取得装置２１０は通信装置２１１を備える。またサーバ２００は、取得した対象情報を蓄積するデータベース２２０を有する。サーバ２００は情報提供装置１００に表示させるテキスト情報を出力する出力装置２３０を有する。出力装置２３０は、通信装置２１１を介して、テキスト情報の出力指令を情報取得装置２１０に送出する。
【００１４】
本実施形態の情報提供装置１００について説明する。
本実施形態の情報提供装置１００は、ユーザの求めに応じて、対象に関する対象情報を提示する。対象情報の内容は限定されない。情報提供装置１００は、車載装置として構成してもよいし、車室内に持ち込み可能なスマートフォン、ＰＤＡ（Personal Digital 
Assistance）などの可搬端末装置として構成してもよい。
【００１５】
図１に示すように、本実施形態の情報提供装置１００，１００Ｎ（以下、代表する符号として１００を付して説明する）は、制御装置１０と、カメラ２０と、マイク３０とを備える。本実施形態の情報提供装置１００は、さらに、ナビゲーション装置１１０と、通信装置１２０と、出力装置１３０とを備える。車両側に装備される情報提供装置１００において、上記各装置は、ＣＡＮ（Controller Area Network）その他の車載ＬＡＮによって相互に接続されている。
【００１６】
本実施形態のカメラ２０は、車両の周囲を撮像する。カメラ２０は、ＣＣＤ等の撮像素子を用いたカメラである。レンズは、遠方が撮像可能な視野角の狭い望遠レンズでも良いし、走行経路のカーブや勾配変化に対応するために視野の広い魚眼レンズや、全周囲を撮像可能な全方位カメラ用のレンズを用いても良い。カメラ２０の取り付け位置は限定されないが、本実施形態では、自車両の車室内ミラーの近傍に、車両前方向きに設置する。自車両の運転者の視線に、カメラの撮像方向を合せるためである。なお、カメラ２０のレンズ歪み等の内部パラメータ、及び車両に対する取り付け位置を示す外部パラメータなどの撮像特性情報は、ＲＯＭに予め記憶しておく。カメラ２０は、撮像画像を、後述する出力装置１３０を介して出力する。
【００１７】
マイク３０は、車室内に配置され、車両に搭乗するユーザの音声情報を取得し、少なくとも一時的に記憶する。マイク３０の取り付け位置は限定されないが、車両のシート近傍に設けることが好ましい。
【００１８】
本実施形態のナビゲーション装置１１０は、位置検出装置１１１と、地図情報１１２と、ＰＯＩ情報１１３を備える。いわゆるＰＯＩ（point of interest）情報は、店舗、レストラン、銀行その他の施設の情報、イベント情報、交通規制に関する情報などを含む。ナビゲーション装置１１０は、自車両の現在位置から目的地までの経路を示してドライバを誘導する。また、ナビゲーション装置１１０は、外部との通信が可能であり、通信回線を介して各地点のＰＯＩ情報、交通規制情報などを取得できる。ナビゲーション装置１１０は、取得した情報、演算した情報を、後述する出力装置１３０を介して出力する。
【００１９】
位置検出装置１１１は、ＧＰＳ（Global Positioning System）を備える。位置検出装置１１１は、路側装置に搭載された高度道路交通システム：ＩＴＳ（Intelligent Transport Systems）が提供する位置情報を、近距離通信を介して、自車両の現在位置として取得することもできる。
【００２０】
出力装置１３０は、ディスプレイ１３１と、スピーカ１３２を有する。ディスプレイ１３１は、取得した対象情報を提示する。スピーカ１３２は取得した対象情報に含まれるテキスト情報を読み上げる。
【００２１】
続いて、本実施形態の制御装置１０について説明する。本実施形態の情報提供装置１００が備える制御装置１０は、対象情報を生成し、出力するプログラムが格納されたＲＯＭ（Read Only Memory）１２と、このＲＯＭに格納されたプログラムを実行することで、情報提供装置１００として機能する動作回路としてのＣＰＵ（Central Processing Unit）１１と、アクセス可能な記憶装置として機能するＲＡＭ（Random Access Memory）１３と、を備えるコンピュータである。
【００２２】
制御装置１０は、識別機能と、抽出機能と、出力機能とを有する。制御装置１０は、上記機能を実現するためのソフトウェアと、上述したハードウェアの協働により各機能を実行する。以下、本実施形態に係る情報提供装置１００の各機能について説明する。
【００２３】
制御装置１０の識別機能について説明する。制御装置１０は、カメラ２０の撮像画像の特徴を抽出し、抽出した画像の特徴に基づいて、車両の周囲に存在する対象を識別する。識別される「対象」は、複数のユーザの共通の話題の対象となる。「対象」は、移動するユーザが視認できる対象であれば、その属性は限定されない。「対象」は、走行経路近傍の店舗や施設であってもよいし、走行経路においてすれ違ったり、追い越されたりする車両であってもよいし、走行経路において見える自然物（富士山）や建造物（東京スカイツリー）などであってもよい。
【００２４】
制御装置１０は、撮像画像の特徴を抽出する。特徴の抽出手法は特に限定されない。制御装置１０は、エッジを抽出し、エッジから求めた形状を対象の特徴として抽出する。制御装置１０は、撮像画像に含まれる文字又は文字列を対象の特徴として抽出する。制御装置１０は、撮像画像に含まれる図形を対象の特徴として抽出する。
【００２５】
対象が移動するものであるときには、位置を用いて対象を識別することができない。このため、制御装置１０は、対象の形態上の特徴からその移動する対象を識別する。具体的に、制御装置１０は、対象の外観が特殊な車両（救急車、警察車両、工事車両）である場合には、車両の外観(形状、模様、色彩)を、対象となる他車両（特殊車両）の特徴として抽出する。制御装置１０は、車両の外観の相違に基づいて、車両の属性を識別してもよい。車両の属性を識別することにより、特定することまではできないが、対象となる車両を絞り込むことができる。車両の属性は、セダンタイプ、ランドクルーザ、スポーツカー、軽自動車、トラック、キャンピングカーなどである。「スポーツカー」といった識別によっても、対象がある程度絞り込めれば、複数のユーザの共通の話題の対象となる。また、制御装置１０は、対象が車両である場合には、車両のナンバープレートに表記された文字・記号列を、対象となる他車両の特徴として抽出する。車両のナンバーによれば、特定の車両を識別できる。
【００２６】
対象は、移動体そのものに限定されず、たとえば、移動体が宣伝するイベントなども対象とすることができる。例えば、トラックが荷台の外面を使ってイベントを宣伝している場合には、制御装置１０は、トラックの荷台部分に記載されたイベントの内容、イベントの主体(アーティスト)、イベントの会場を、対象の特徴として抽出する。
【００２７】
対象が移動しない店舗であるときには、店舗のエントランスの形状の特徴を、対象となる店舗の特徴として抽出できる。同様に、対象が施設であるときには、施設の看板に描かれた商標(マーク)の形状の特徴を、対象となる施設の特徴として抽出できる。
【００２８】
対象が移動しないものであっても、自車両が移動すると、自車両の位置によって対象の見え方(撮像画像における形状)が異なる。このような場合には、予め記憶された、各地点の位置情報と、各地点から対象（富士山、東京スカイツリー）を撮像したときの撮像画像の特徴と、その対象物の識別情報とを対応づけたマスター画像情報を用いる。制御装置１０は、このマスター画像情報を参照し、車両の現在位置と、車両に搭載されたカメラ２０の撮像画像から抽出された対象物の特徴とに基づいて、その対象物を識別できる。制御装置１０は、マスター画像情報の特徴と、カメラ２０の撮像画像の特徴とを比較し、その特徴の一致率が所定値よりも高いことを条件に、カメラ２０の撮像画像に含まれる対象の識別処理を行う。撮像画像を用いた対象物の識別処理の手法は特に限定されず、出願時に知られた画像認識技術を適宜に利用できる。
【００２９】
制御装置１０は、対象の抽出処理において、対象が存在する位置及び／又は時刻を用いてもよい。対象は自車両に搭乗するユーザから見えるものであるので、対象の位置は自車両（ユーザ）の現在位置に関連づけることができる。自車両（ユーザ）の現在位置は、位置検出装置１１１から取得できる。制御装置１０は、対象を撮像したタイミングにおける自車両の現在位置と、カメラ２０の撮像方向およびその撮像特性を用いて、対象が存在する位置を絞り込むことができる。
【００３０】
制御装置１０は、対象の識別結果が複数得られた場合には、複数の識別結果をユーザに提示し、ユーザの選択情報を受け付ける。具体的に、制御装置１０は、情報入力を受け付けるタッチパネル式のディスプレイ１３１に複数の識別結果を選択肢として表示する。制御装置１０は、ユーザがタッチした一つの識別結果を、車両搭乗のユーザが認識している対象として識別する。
【００３１】
次に、制御装置１０の抽出機能について説明する。制御装置１０は、車両の周囲に存在する対象に関するテキスト情報を音声情報から抽出する。制御装置１０は、マイク３０で集音したユーザの発話を単語などの所定の単位で切り出し、切り出した各単語と辞書に記録された単語との一致度を算出する。制御装置１０は、一致度が所定値以上の単語を、発話された単語として判断する。発話された音声の認識処理の手法は特に限定されず、出願時に知られた音声認識技術を適宜に利用できる。
【００３２】
なお、対象の識別処理は、情報提供装置１００において行ってもよいし、これと情報授受が可能なサーバ２００において行ってもよい。
【００３３】
情報提供装置１００は、アクセス可能な辞書１４を有する。制御装置１０は、辞書１４を読み込む。辞書１４は、対象とその対象に関するテキスト情報とを対応づけた辞書である。この辞書は、音声情報から対象に関するテキスト情報を抽出する際に用いられる。辞書１４は、情報提供装置１００に格納してもよいし、情報提供装置１００がアクセス可能なサーバ２００に格納してもよい。
【００３４】
図２は、辞書１４の態様の一例である。図２に示すように、辞書１４においては、対象の識別子と、対象の属性と、複数のテキスト情報とが対応づけられている。辞書１４に含まれるテキスト情報は、文章であってもよいし、文章を構成する単語であってもよい。
【００３５】
たとえば、図２に示す対象Ｗ１が飲食施設であるとする。施設である対象Ｗ１を特定する識別子（Ｗ１）には、対象Ｗ１に関する属性が対応づけられている。本例において定義された属性は、対象Ｗ１のカテゴリ、対象Ｗ１の名称、対象Ｗ１において為される行為、対象Ｗ１についての感想や経験、対象Ｗ１の位置を含む。属性の定義は、対象ごとに適宜に定義できる。
【００３６】
対象Ｗ１には、対象Ｗ１に関するテキスト情報が対応づけられている。辞書１４におけるテキスト情報は、対象Ｗ１について発せられる可能性のあるテキストを予測して定義される。辞書１４におけるテキスト情報は、実際にユーザから収集したテキスト情報から、存在数の多いものを抽出して定義してもよい。
【００３７】
たとえば、図２に示す例において、対象Ｗ１の名称に対応づけられたテキスト情報は、対象Ｗ１の名称そのもの（完全同一）である名称Ｗ１Ｎ、短縮された名称Ｗ１ａ、ニックネームとして親しまれている名称Ｗ１ｂ，名称Ｗ１ｃを含む。対象Ｗ１のカテゴリに対応づけられたテキスト情報は、提供されるサービスの内容である「レストラン」、「イタリアン」、「ランチ」、「スイーツ」を含む。対象Ｗ１において行われる行為に対応づけられたテキスト情報は、「食事」、「食べる」、「お茶する」を含む。実際の発話を考慮して「食事」と同じ意味ではあるが「ごはん」といった話し言葉のテキスト情報を含めてもよい。対象Ｗ１に関する感想や経験に対応づけられたテキスト情報は、「味」、「美味しい」、「人気」、「綺麗」を含む。対象Ｗ１に関する位置に対応づけられたテキスト情報は、所在地（行政区域名称）の「Ａ」、「近い」、「すぐ」、「便利」を含む。「近い」「すぐ」などの相対的なテキストについては、所在地Ｋの位置情報から求めた具体的な位置情報に置き換えて辞書１４に記述してもよい。
【００３８】
図２に示す対象Ｗ２が商品の販売施設であるとする。施設を特定する識別子（Ｗ２）にも、Ｗ１と同様の属性が定義されている。同様に、対象Ｗ２には、対象Ｗ２に関するテキスト情報が対応づけられている。対象Ｗ２の名称に対応づけられたテキスト情報は、対象Ｗ２の名称そのもの（完全同一）である名称Ｗ２Ｎ、短縮された名称Ｗ２ａ、ニックネームとして親しまれている名称Ｗ２ｂ，名称Ｗ２ｃを含む。対象Ｗ２のカテゴリに対応づけられたテキスト情報は、提供されるサービスの内容である「ショップ」、「服」、「バッグ」、「靴」を含む。対象Ｗ１において行われる行為に対応づけられたテキスト情報は、「買う」、「買いもの」、「欲しい」、「行く」を含む。対象Ｗ２に関する感想や経験に対応づけられたテキスト情報は、「可愛い」、「おしゃれ」、「流行っている」、「お気に入り」を含む。対象Ｗ２に関する位置に対応づけられたテキスト情報は、所在地（行政区域名称）の「Ｋ」、「近い」、「すぐ」、「Ｎ分」を含む。「近い」「すぐ」「Ｎ分」などの相対的なテキストについては、所在地Ｋの位置情報から求めた具体的な位置情報に置き換えて記述してもよい。
【００３９】
図２に示す対象Ｗ３が道路であるとする。道路を特定する識別子（Ｗ３）にも、Ｖ１と同様の属性が定義されている。同様に、対象Ｗ３には、対象Ｗ３に関するテキスト情報が対応づけられている。対象Ｗ３の名称に対応づけられたテキスト情報は、対象Ｗ３の名称、例えば「東名高速道路」、短縮された名称「東名」、方向を限定した名称「東名上り」「東名下り」を含む。対象Ｗ３において行われる行為に対応づけられたテキスト情報は、「走る」、「流れ」、「向かう」、「行く」を含む。対象Ｗ３に関する感想や経験に対応づけられたテキスト情報は、「混んでいる」、「渋滞」、「事故」、「遅れる」を含む。対象Ｗ２に関する位置に対応づけられたテキスト情報は、所在地の名称の「Ｌ」、例えばインターチェンジＬ１」、「サービスエリアＬ２」、「ジャンクションＬ３」を含む。
【００４０】
次に、出力機能について説明する。制御装置１０は、識別された対象と、その対象に関するテキスト情報とを対応づけた対象情報を出力する。対象情報は、ユーザが発話したテキスト情報と、そのテキスト情報の話題の対象である。対象情報に含まれるテキスト情報は、対象に関するメッセージである。対象情報に含まれるテキスト情報は、文章であることが好ましい。
【００４１】
図３は、対象情報の一例を示す。図３に示す対象情報では、識別された対象Ｐ１〜Ｐ４のそれぞれについて、テキスト情報が対応づけられている。テキスト情報Ｗ１１，Ｗ１２，Ｗ１３は、対象Ｐ１に関する発話を構成する文言である。
【００４２】
また、本例に示す対象情報は、テキスト情報を音声情報が取得された位置情報と、取得時刻とを含む。同図に示すように、実際に取得された画像情報を対象情報に含ませてもよい。このように、制御装置１０は、識別された対象と、対象が存在する位置及び／又は時刻と、その対象に関するテキスト情報とを対応づけた対象情報を出力する。一つの対象には複数のテキスト情報が対応づけられている。
【００４３】
制御装置１０は、生成した対象情報をサーバ２００に送出する。制御装置１０は、車車間通信を用いて、近くに存在する他車両の制御装置１０に送出してもよい。
【００４４】
次に、サーバ２００について説明する。サーバ２００の情報取得装置２１０は、各車両の情報提供装置１００から対象情報を収集する。サーバ２００は、収集した対象情報を対象ごとにデータベース２２０に記憶する。
【００４５】
図４は、収集した情報の一例を示す。収集した対象情報は、対象の識別子とテキスト情報とが対応づけられている。収集した対象情報のテキスト情報は、ユーザの発話内容である文章であってもよいし、その発話内容を構成する単語であってもよい。
【００４６】
サーバ２００の出力装置２３０は、収集したテキスト情報を他のユーザの情報提供装置１００に配信する。本実施形態の出力装置２３０は、識別された対象を含む要求情報を一の情報提供装置１００から取得した場合には、収集した対象に関するテキスト情報を、その一の情報提供装置１００に送出する。出力装置２３０は、テキスト情報と、そのテキスト情報を示させる命令を含めた情報を情報提供装置１００に送出する。情報提供装置１００のディスプレイ１３１は、指令に従いテキスト情報を表示する。
【００４７】
サーバ２００は、識別された対象を含む要求情報を一の情報提供装置１００から取得した場合に、要求情報を発したユーザに、その要求情報に係る対象に関する対象情報を提示させるので、複数のユーザが共通の対象に関する情報を共有できる。
【００４８】
要求情報は、対象が識別されたときに自動的にサーバ２００へ送出する。要求情報には、情報提供装置１００の識別子（ID）を含ませる。ユーザの要求操作がされなくても、自動的に共通の対象についての発話（つぶやき）を共有できる。
【００４９】
図５は、対象情報の第１の表示例を示す図である。
本実施形態の情報提供装置１００は、ディスプレイ１３１を用いて、自車両のカメラ２０の実際の撮像画像を表示するとともに、対象情報を撮像画像に重畳して表示する。
【００５０】
図５に示す例では、自車両の現在位置が検出され、自車両が高速道路のインターチェンジＸの手前、サービスエリアＹの手前を走行している。同図に示す例では、自車両の撮像画像から、周囲を走行する他車両Ｖ２，Ｖ３，Ｖ４が検出されたとする。他車両Ｖ２，Ｖ３，Ｖ４はナンバープレートの表示から識別される。
【００５１】
ディスプレイ１３１の表示画像の図中左上の表示エリアＳ１は、他車両のユーザが発話した音声情報から生成された対象情報の表示エリアである。
【００５２】
図示されていない他車両Ｖ２の情報提供装置１００Ｎが他車両Ｖ３を識別し、その他車両Ｖ２のドライバが他車両Ｖ３について、他車両Ｖ３の運転が乱暴であると感じ、それを発話したとする。発話内容は「運転が乱暴だ」というものである。他車両Ｖ２の情報提供装置１００Ｎは、その撮像画像から他車両Ｖ３を検出し、その発話情報を他車両Ｖ３の識別子に対応づけて対象情報を生成する。話題にされる他車両は、交通流を乱す車両である可能性が高いので、抽出された他車両のうち、加速度／減速度が所定値以上の他車両、又は速度が所定値以上の他車両を対象として識別してもよい。また、対象として、複数の他車両が識別された場合には、ユーザに対象の候補を示して選択させてもよい。
【００５３】
本例では、対象「他車両Ｖ３」について、他車両Ｖ２のドライバが「運転が乱暴だ」というドライバの発話（いわゆるつぶやき）が、自車両Ｖ１の情報提供装置１００のディスプレイ１３１に表示される。発話の対象が他車両Ｖ３であることは、表示してもよいし表示しなくてもよい。また、対象を特定するために、他車両Ｖ３の識別子であるナンバーを表示してもよいが、他車両Ｖ３の色や、車種などを表示してもよい。例えば、話題の対象を共有できる程度に他車両Ｖ３を表現してもよい。たとえば、撮像画像から他車両Ｖ３の色が赤であるという特徴が抽出できた場合には、「赤いスポーツカー、運転が乱暴だ」などの表記としてもよい。このとき、他車両Ｖ３を視覚的に特定できるように、撮像画像に含まれる他車両Ｖ３にマークＭ１を付して表示してもよい。このマークは、収集され、蓄積された対象情報に基づいて表示してもよい。たとえば、「運転が乱暴だ」という発話が収集されている他車両については、その旨を示すマークを付してもよい。
【００５４】
また、自車両Ｖ１の現在位置に応じて、その近傍に関する他車両のドライバの発話を表示してもよい。たとえば、自車両の現在位置がＸインターチェンジ（ＩＣ）の所定距離以内である場合に、そのエリアに関する「ＸＩＣ付近混雑」という発話（つぶやき）を表示する。また、自車両の現在位置がＹサービスエリア（ＳＡ）の所定距離以内である場合に、そのエリアに関する「ＹＳＡのラーメン美味しい」という発話（つぶやき）を表示する。
【００５５】
さらに、表示された撮像画像には、他車両Ｖ４の運転状態をマークＧ１で表示し、他車両Ｖ５の運転状態をマークＧ２で表示してもよい。表示された撮像画像には、自車両の車線変更の意図を表示してもよい。
【００５６】
図６は、対象情報の第２の表示例を示す図である。
本実施形態の情報提供装置１００は、ディスプレイ１３１を用いて、自車両のカメラ２０の実際の撮像画像を表示するとともに、対象情報を撮像画像に重畳して表示する。
【００５７】
図６に示す例では、自車両の現在位置が検出されている。自車両からは山が見える（撮像できる）。情報提供装置１００は、撮像画像から山に対応する領域Ｒ１の特徴を抽出し、自車両の現在位置とマスター画像の特徴とから、現在の地点から見える山は富士山であると識別する。情報提供装置１００は、富士山の識別子を含む要求情報をサーバ２００へ送出する。サーバ２００は対象（富士山）に関する他のユーザの発話（つぶやき）「富士山がきれい」を情報提供装置１００に送出し、ディスプレイ１３１に表示させる。山は移動しないが、自車両が移動するため、その相対的な位置関係が変化する。そのような場合であっても、本実施形態の情報提供装置１００は、ユーザから見える対象を特定し、その特定された対象について、他車両のユーザと情報を共有できる。
【００５８】
情報提供装置１００は、撮像画像に含まれる標識に対応する領域Ｒ１の文字を認識し、自車両の行先や、近傍の施設を対象として識別してもよい。自車両の行先や施設が発話（つぶやき）の対象となることもあるからである。
【００５９】
図６に示すように、位置情報に過去の発話（つぶやき）を対応づけておき、自車両の現在位置に対応づけられた過去の発話を表示してもよい。過去の発話については、発話者の識別情報（ニックネーム）を表示してもよい。さらに、その地点で発生した事故履歴（よそ見、速度出しすぎ）の情報Ｓ２や、交通の傾向（追い抜き多い）の情報Ｓ３を併せて表示してもよい。
【００６０】
続いて、本実施形態の情報提供装置１００の動作手順を、図７のフローチャートに基づいて説明する。なお、図７に示す処理内容は、所定周期で連続的に行われる。
【００６１】
ステップＳ１１０において、制御装置１０は、カメラ２０が撮像した車両の周囲の撮像画像を取得する。制御装置１０は、マイク３０が集音した乗員の音声情報を取得する。
【００６２】
同時に又は相前後して、ステップＳ１２０において、制御装置１０は、位置検出装置１１１が検出した現在位置を取得する。
【００６３】
ステップＳ１３０において、制御装置１０は撮像画像から乗員が視認可能な対象を識別する。
【００６４】
ステップＳ１４０において、制御装置１０は、乗員の発話があった場合には、ステップＳ１５０に移行する。ステップＳ１５０において、制御装置１０は、音声情報からテキスト情報を切り出す。ステップＳ１６０において、制御装置１０は、辞書１４を参照する。ステップＳ１７０において、制御装置１０は、対象に関するテキスト情報を抽出する。ステップＳ１８０において、対象に関するテキスト情報が抽出されたか否かを判断する。ステップＳ１９０において、抽出された対象に関するテキスト情報を対応づけた対象情報をサーバ２００に出力する。近傍に存在する他車両は見える対象が共通する可能性があるので、車車間通信網を用いて他車両に送信してもよい。
【００６５】
図８は、本実施形態のサーバ２００の動作手順を示すフローチャートである。
ステップＳ２１０において、図７のステップＳ１９０で出力された対象情報を取得する。サーバ２００は不特定多数の情報提供装置１００から対象情報を収集する。ステップＳ２２０において、サーバ２００は収集した情報を蓄積する。ステップＳ２３０において、サーバ２００は情報提供装置１００側において識別された対象を含む要求情報を取得した場合には、ステップＳ２４０に進む。ステップＳ２４０において、サーバ２００は、要求情報に対応するテキスト情報（発話の情報）を蓄積したデータベースから抽出する。抽出されたテキスト情報は、同じ対象についての意見や感想である。ステップＳ２５０において、サーバ２００は、送出したテキスト情報を情報提供装置１００のディスプレイ１３１に表示させる。
【００６６】
各ユーザは、自身が認識している対象について、他人のメッセージを取得できる。
【００６７】
本実施形態の情報提供装置１００、情報提供システム１によれば、以下の効果を奏する。
【００６８】
[１]本実施形態の情報提供装置１００は、自車両の周囲に存在する対象を識別し、その対象に関するテキスト情報を音声情報から抽出し、識別された対象とその対象に関するテキスト情報とを対応づけた対象情報を出力する。これにより、移動体のように、位置情報などで一義的に特定できない対象についての情報を不特定の他のユーザと共有できる。対象が自動的に識別され、その対象に関するテキスト情報が自動的に抽出されるので、運転中のユーザは、単に発話した（つぶやいた）だけで、共通の対象に対する意見や経験を他のユーザと共有できる。
【００６９】
[２]本実施形態の情報提供装置１００は、対象とテキスト情報とを対応づけた辞書を参照するので、音声情報から対象に関するテキスト情報を正確に抽出できる。
【００７０】
[３]本実施形態の情報提供装置１００は、識別された対象の位置及び／又は対象を検出した時刻と、テキスト情報とを対応づけた対象情報を出力するので、位置や時刻を参照して対象を正確に識別できる。
【００７１】
[４]本実施形態の情報提供装置１００は、複数の識別結果をユーザに提示して、ユーザに選択させるので、対象を正確に識別できる。
【００７２】
[５]本実施形態の情報提供システム１においては、サーバ２００が対象情報を収集し、各情報提供装置１００において識別された対象に関するテキスト情報を、その情報提供装置１００のディスプレイ１３１に提示させる。これにより、各情報提供装置１００のユーザは、自身が注目する対象についての意見や経験を、他の情報提供装置１００のユーザと共有できる。
【００７３】
[６]本実施形態の情報提供方法によっても、上述した作用及び効果を得ることができる。
【００７４】
なお、以上説明した実施形態は、本発明の理解を容易にするために記載されたものであって、本発明を限定するために記載されたものではない。したがって、上記の実施形態に開示された各要素は、本発明の技術的範囲に属する全ての設計変更や均等物をも含む趣旨である。
【００７５】
すなわち、本明細書では、本発明に係る情報提供システムの一態様として、情報提供装置１００とサーバ２００とを備える情報提供システム１を例にして説明するが、本発明はこれに限定されるものではない。
【００７６】
本明細書では、本発明に係る情報提供装置の一態様として、制御装置１０と、カメラ２０と、マイク３０とを備える情報提供装置１００を一例として説明するが、これに限定されるものではない。
【００７７】
本明細書では、識別手段と、抽出手段と、出力手段と、を備える本発明に係る情報提供装置の一例として、識別機能と、抽出機能と、出力機能とを実行する制御装置１０を備える情報提供装置１００を一例として説明するが、これに限定されるものではない。
【符号の説明】
【００７８】
１…情報提供システム
１００，１００Ｎ…情報提供装置
１０…制御装置
１１…ＣＰＵ
１２…ＲＯＭ
１３…ＲＡＭ
２０…カメラ
３０…マイク
１１０…ナビゲーション装置
１１１…位置検出装置
１１２…地図情報
１１３…ＰＯＩ情報
１２０…通信装置
１３０…出力装置１３０
１３１…ディスプレイ
１３２…スピーカ
２００…サーバ
２１０…情報取得装置
２１１…通信装置
２２０…データベース
２３０…出力装置
【図１】
0006623657.tif 000002
【図２】
0006623657.tif 000003
【図３】
0006623657.tif 000004
【図４】
0006623657.tif 000005
【図５】
0006623657.tif 000006
【図６】
0006623657.tif 000007
【図７】
0006623657.tif 000008
【図８】
0006623657.tif 000009