(57)【要約】【課題】利用者が関心を示す情報を容易に収集できる情報処理装置を提供する。【解決手段】情報処理装置１０は、車載カメラ画像と、車載カメラ画像の撮影位置情報と、車載カメラ画像の撮影時刻情報とを取得する通信部１２と、車載カメラ画像から所定の条件に基づいて評価対象画像を抽出し、評価対象画像を評価し、評価対象画像の評価結果と、撮影位置情報と、撮影時刻情報とを関連づけて出力する制御部１１とを備える。【選択図】図１
2020095353.tif 000002
【特許請求の範囲】
【請求項１】
車載カメラ画像と、前記車載カメラ画像の撮影位置情報と、前記車載カメラ画像の撮影時刻情報とを取得する通信部と、
前記車載カメラ画像から所定の条件に基づいて評価対象画像を抽出し、前記評価対象画像を評価し、前記評価対象画像の評価結果と、前記撮影位置情報と、前記撮影時刻情報とを関連づけて出力する制御部と
を備える情報処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、情報処理装置に関する。
【背景技術】
【０００２】
従来、景観スポットを表示するナビゲーション装置が知られている。例えば、特許文献１には、車両の走行ルートに基づいて、予め登録されている景観スポットの情報を表示するナビゲーション装置が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１７−１５０９７２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
装置の利用者に提供する情報として、利用者が関心を示す情報を収集することが求められる。
【０００５】
かかる事情に鑑みてなされた本開示の目的は、利用者が関心を示す情報を容易に収集することにある。
【課題を解決するための手段】
【０００６】
本開示の一実施形態に係る情報処理装置は、
車載カメラ画像と、前記車載カメラ画像の撮影位置情報と、前記車載カメラ画像の撮影時刻情報とを取得する通信部と、
前記車載カメラ画像から所定の条件に基づいて評価対象画像を抽出し、前記評価対象画像を評価し、前記評価対象画像の評価結果と、前記撮影位置情報と、前記撮影時刻情報とを関連づけて出力する制御部と
を備える。
【発明の効果】
【０００７】
本開示の一実施形態に係る情報処理装置によれば、利用者が関心を示す情報が容易に収集されうる。
【図面の簡単な説明】
【０００８】
【図１】一実施形態に係る情報処理システムの構成例を示すブロック図である。
【図２】情報処理方法の手順の一例を示すフローチャートである。
【発明を実施するための形態】
【０００９】
（一実施形態に係る情報処理システムの構成例）
図１に示されるように、一実施形態に係る情報処理システム１００は、情報処理装置１０と、撮影車両１とを備える。撮影車両１は、例えば自動車であるが、これに限られず任意の車両であってよい。情報処理システム１００は、複数の撮影車両１を備えてもよい。撮影車両１は、情報処理装置１０と通信可能である。撮影車両１は、ネットワーク６０を介して情報処理装置１０と通信してもよい。
【００１０】
情報処理装置１０は、制御部１１と、通信部１２と、記憶部１３とを備える。情報処理装置１０は、サーバを含んでよい。制御部１１は、１つ以上のプロセッサを含んでよい。本実施形態において「プロセッサ」は、汎用のプロセッサ、特定の処理に特化した専用のプロセッサ等であるが、これらに限られない。通信部１２は、通信モジュールを含み、撮影車両１の通信装置３０と通信する。記憶部１３は、１つ以上のメモリを含んでよい。本実施形態において「メモリ」は、例えば半導体メモリ、磁気メモリ、又は光メモリ等であるが、これらに限られない。記憶部１３に含まれる各メモリは、例えば主記憶装置、補助記憶装置、又はキャッシュメモリとして機能してもよい。記憶部１３は、磁気ディスク等の電磁記憶媒体を含んでよい。記憶部１３は、情報処理装置１０の動作に用いられる任意の情報を記憶する。例えば、記憶部１３は、システムプログラム、又はアプリケーションプログラム等を記憶してもよい。
【００１１】
撮影車両１は、車載カメラ２０と、位置情報取得装置２５と、通信装置３０とを搭載している。車載カメラ２０と、位置情報取得装置２５と、通信装置３０とは、例えばＣＡＮ（Controller Area Network）等の車載ネットワーク又は専用線を介して、互いに通信可能に接続されている。
【００１２】
通信装置３０は、情報処理装置１０の通信部１２と通信する。通信装置３０は、ネットワーク６０を介して、情報処理装置１０の通信部１２と通信してよい。通信装置３０は、例えばＤＣＭ（Data Communication Module）等の車載通信機であってよい。通信装置３０は、ネットワーク６０に接続する通信モジュールを含んでよい。通信モジュールは、例えば４Ｇ（4th Generation）及び５Ｇ（5th Generation）等の移動体通信規格に対応する通信モジュールを含んでよいが、これらに限られない。
【００１３】
車載カメラ２０は、撮影車両１の周囲又は車室内に位置する対象物を撮影する。車載カメラ２０が撮影した画像は、車載カメラ画像ともいう。車載カメラ画像は、撮影位置に関する情報、又は、撮影時刻に関する情報と対応づけられる。車載カメラ画像は、静止画像を含んでよいし、動画を含んでもよい。車載カメラ２０は、車載カメラ画像を情報処理装置１０に出力する。
【００１４】
車載カメラ２０は、前方カメラ、側方カメラ、後方カメラ及び車内カメラのうち少なくとも１つを備えてよい。前方カメラは、撮影車両１の前方に位置する対象物を撮影する。前方カメラが撮影した画像は、前方画像ともいう。側方カメラは、撮影車両１の側方に位置する対象物を撮影する。側方カメラが撮影した画像は、側方画像ともいう。後方カメラは、撮影車両１の後方に位置する対象物を撮影する。後方カメラが撮影した画像は、後方画像ともいう。車内カメラは、撮影車両１の車室内に位置する対象物及び撮影車両１の後方に位置する対象物を撮影する。車内カメラが撮影した画像は、車内画像ともいう。
【００１５】
位置情報取得装置２５は、自車両の位置情報を取得する。位置情報取得装置２５は、衛星測位システムに対応する受信機を含んでよい。衛星測位システムに対応する受信機は、例えばＧＰＳ（Global Positioning System）受信機を含んでもよい。撮影車両１は、車載カメラ画像に対して、車載カメラ画像が撮影された位置に関する情報として、位置情報取得装置２５で取得した自車両の位置情報を対応づけてよい。
【００１６】
情報処理システム１００は、端末７０をさらに備えてよい。端末７０は、情報処理装置１０と通信する。端末７０は、ネットワーク６０を介して情報処理装置１０と通信してよい。端末７０は、例えばスマートフォン等の携帯端末を含んでよい。
【００１７】
（情報処理システムの動作）
情報処理システム１００は、撮影車両１が撮影した車載カメラ画像に基づいて、利用者が関心を示す情報を収集する。
【００１８】
情報処理装置１０の通信部１２は、車載カメラ画像と、車載カメラ画像が撮影された位置を特定する情報と、車載カメラ画像が撮影された時刻を特定する情報とを取得する。車載カメラ画像が撮影された位置を特定する情報は、撮影位置情報ともいう。車載カメラ画像が撮影された時刻を特定する情報は、撮影時刻情報ともいう。
【００１９】
情報処理装置１０の制御部１１は、車載カメラ画像から、利用者がどの程度の関心を示すかを評価する対象となる画像を抽出する。利用者がどの程度の関心を示すかを評価する対象となる画像は、評価対象画像ともいう。評価対象画像の撮影位置情報及び撮影時刻情報は、その評価対象画像の抽出元である車載カメラ画像の撮影位置情報及び撮影時刻情報と同一であるとする。
【００２０】
制御部１１は、評価対象画像に対する利用者の関心の程度を評価する。制御部１１は、評価対象画像について、評価値を算出してよい。評価対象画像に対する利用者の関心が高いほど、評価値は高く算出されてよい。
【００２１】
制御部１１は、評価対象画像の評価結果と、評価対象画像の撮影位置情報及び撮影時刻情報とを関連づける。評価対象画像の評価結果と、評価対象画像の撮影位置情報及び撮影時刻情報とが関連づけられた情報は、スポット評価情報ともいう。制御部１１は、スポット評価情報を記憶部１３に出力してよい。記憶部１３は、スポット評価情報を格納する。記憶部１３は、スポット評価情報を格納するデータベースを有してよい。スポット評価情報を格納するデータベースは、スポット評価ＤＢと略称されるとする。
【００２２】
情報処理システム１００は、以上述べてきたように動作することによって、利用者にとって関心の高いスポットの情報を容易に収集できる。
【００２３】
情報処理システム１００は、スポット評価ＤＢに格納した情報を撮影車両１に出力し、撮影車両１の運転者又は同乗者に閲覧させてよい。情報処理システム１００は、スポット評価ＤＢに格納した情報を撮影車両１以外の車両の運転者又は同乗者に閲覧させてもよい。このようにすることで、利用者にとって関心の高い情報が提供されうる。
【００２４】
制御部１１は、車載カメラ画像から、所定の条件に基づいて、評価対象画像を抽出する。評価対象画像を抽出する所定の条件は、抽出条件ともいう。抽出条件は、山、丘、川、湖又は海等の地形が写っていることを含んでもよい。抽出条件は、森、林、草原、花畑、開花した桜、又は、紅葉した木等の植生が写っていることを含んでもよい。抽出条件は、花火大会又は祭礼等のイベントが写っていることを含んでもよい。抽出条件は、ビルの照明又はイルミネーション等の夜景が写っていることを含んでもよい。抽出条件は、朝焼け空、夕焼け空、青空、雲が浮かんでいる空、又は、月若しくは星が出ている夜空等の空の風景が写っていることを含んでもよい。制御部１１は、例示した抽出条件に限られず、種々の抽出条件に基づいて評価対象画像を抽出してもよい。制御部１１は、複数の条件を組み合わせた抽出条件に基づいて評価対象画像を抽出してもよい。抽出条件は、ディープラーニング等の機械学習によって生成された条件を含んでもよい。
【００２５】
制御部１１は、評価対象画像に対する利用者の関心の程度を評価する。制御部１１は、評価対象画像に含まれる要素を解析してよい。制御部１１は、評価対象画像に含まれる要素として、地形、植生、イベント、夜景、及び、空の風景のうち少なくとも１つを解析してよい。制御部１１は、評価対象画像に含まれる要素の数を解析結果として取得してよい。制御部１１は、評価対象画像に含まれる要素の種類の組合せを解析結果として取得してよい。制御部１１は、評価対象画像に含まれる各要素について、画像全体に占める面積の割合を解析結果として取得してよい。制御部１１は、評価対象画像に含まれる各要素の彩度、輝度又はコントラストを解析結果として取得してよい。制御部１１は、評価対象画像全体の彩度、輝度又はコントラストを解析結果として取得してよい。制御部１１は、解析結果に基づいて、評価対象画像に対する利用者の関心の程度を評価してよい。制御部１１は、評価対象画像に対する利用者の関心の程度を表す評価値を、解析結果に基づいて算出してよい。
【００２６】
制御部１１は、例えば、打ち上げ花火とタワー又は高層ビル等のイルミネーションとが写っている評価対象画像に高い関心が示されると判定し、その評価値を高く算出してもよい。制御部１１は、例えば、遠くに小さく見える山脈と近くで大きく見える満開の桜とが写っている評価対象画像に高い関心が示されると判定し、その評価値を高く算出してもよい。制御部１１は、例えば、谷間に形成されている雲海が写っている評価対象画像に高い関心が示されると判定し、その評価値を高く算出してもよい。制御部１１は、種々のアルゴリズムに基づいて、評価対象画像の評価値を算出してよい。評価値を算出するアルゴリズムは、例えばディープラーニング等の機械学習によって生成されたアルゴリズムを含んでもよい。
【００２７】
制御部１１は、評価対象画像が撮影された位置及び時刻における天気の情報をさらに取得してよい。制御部１１は、評価対象画像に写っている空の状態を解析することによって、評価対象画像が撮影された位置及び時刻における天気の情報を取得してよい。制御部１１は、気象庁又は民間の気象サービス事業者等によって提供されている天気の情報に関するデータベースから、評価対象画像の撮影位置情報及び撮影時刻情報における天気の情報を取得してもよい。天気の情報は、晴れ、曇り又は雨等の分類を含んでよい。天気の情報は、雲量を含んでもよい。天気の情報は、気温又は湿度等を含んでもよい。制御部１１は、天気の情報にさらに基づいて評価値を算出してもよい。制御部１１は、天気の情報を評価結果と関連づけてもよい。
【００２８】
スポット評価情報として、評価値だけでなく、撮影位置情報及び撮影時刻情報が提供されることによって、利用者は、高い評価値を有するスポットに行きやすくなる。スポット評価情報として、撮影時の天気の情報がさらに提供されることによって、利用者が期待した風景を見ることができる確率が高まりうる。また、評価結果に撮影時の天気の情報が反映されていることによって、評価値の精度が高まりうる。結果として、利用者の満足度が高まりうる。
【００２９】
撮影位置情報は、評価対象画像が撮影車両１からどの方角を向いて撮影された画像であるかを表す方角情報を含んでもよい。制御部１１は、評価対象画像に遠くからでも見える富士山等の高い山、又は、タワー等の高い建造物が写っている場合、方角情報に基づいて、写っている対象を特定してもよい。制御部１１は、評価対象画像の評価結果を、特定した対象に関連づけてもよい。
【００３０】
情報処理装置１０は、図２に例示されるフローチャートの手順を含む情報処理方法を実行してよい。情報処理方法は、プロセッサに実行させる情報処理プログラムとして実現されてもよい。
【００３１】
通信部１２は、撮影車両１から、車載カメラ画像と撮影位置情報と撮影時刻情報とを取得する（ステップＳ１）。
【００３２】
制御部１１は、撮影位置情報に基づいて、車載カメラ画像が観光スポット付近を撮影した画像であるか判定する（ステップＳ２）。制御部１１は、観光スポットの位置情報に基づき、撮影車両１が観光スポットから所定範囲内に位置する場合に、車載カメラ画像が観光スポット付近を撮影した画像であると判定してよい。観光スポットの位置情報は、予め記憶部１３に格納されていてもよい。つまり、観光スポットは予め登録されていてよい。制御部１１は、地図データに基づいて観光スポットの位置情報を取得してもよい。
【００３３】
制御部１１は、車載カメラ画像が観光スポット付近を撮影した画像である場合（ステップＳ２：ＹＥＳ）、車載カメラ画像に観光スポットを関連づける（ステップＳ３）。これによって、車載カメラ画像が観光スポット付近で撮影された画像であることが特定される。
【００３４】
制御部１１は、車載カメラ画像が観光スポット付近を撮影した画像でない場合（ステップＳ２：ＮＯ）、ステップＳ４の手順に進む。
【００３５】
制御部１１は、車載カメラ画像から評価対象画像を抽出する（ステップＳ４）。
【００３６】
制御部１１は、評価対象画像の撮影時の天気の情報を取得する（ステップＳ５）。
【００３７】
制御部１１は、評価対象画像の評価値を算出する（ステップＳ６）。制御部１１は、ステップＳ６の手順を実行した後、図２のフローチャートに示されている手順の実行を終了する。制御部１１は、ステップＳ６の手順を実行した後、評価値と撮影位置情報と撮影時刻情報とを関連づけて出力してもよい。制御部１１は、天気の情報をさらに関連づけて出力してもよい。
【００３８】
制御部１１は、図２のフローチャートに示されるステップＳ２及びＳ３の手順を省略してもよい。
【００３９】
制御部１１は、評価対象画像が所定期間にわたって続く動画として抽出されたり、所定期間にわたって連続して撮影された静止画像として抽出されたりしている場合、ステップＳ４及びＳ６の手順を繰り返してもよい。このようにすることで、制御部１１は、所定期間にわたって評価対象画像の評価値を算出し続けてもよい。制御部１１は、所定期間にわたって算出した評価値を平均してもよい。
【００４０】
制御部１１は、評価対象画像が観光スポット付近を撮影した画像でない場合、この評価対象画像が撮影された位置を新たな観光スポットとして登録し、評価対象画像に関連づけてもよい。制御部１１は、所定値以上の評価値が算出された場合に、その評価対象画像が撮影された位置を新たな観光スポットとして登録してもよい。
【００４１】
制御部１１は、各観光スポットに関連づけられている評価対象画像の評価値に基づいて、観光スポットのランキングを決定してもよい。
【００４２】
本実施形態に係る情報処理システム１００及び情報処理装置１０は、車載カメラ画像に基づいてスポット評価情報を収集できる。車載カメラ２０は、様々な位置から様々な方角を撮影できる。車載カメラ２０は、撮影車両１のイグニッションがオンになっている期間、走行している期間、又は、アイドリングしている期間等に撮影を継続できる。これによって、情報処理システム１００及び情報処理装置１０は、様々な種類の車載カメラ画像を取得できる。その結果、情報処理システム１００及び情報処理装置１０は、車載カメラ画像を評価することによってスポット評価情報を容易に収集できる。
【００４３】
仮に定点カメラで撮影された画像に基づいてスポット評価情報を収集する場合、撮影範囲が限定される。車載カメラ画像に基づいてスポット評価情報を収集することによって、撮影範囲が広がるとともに、想定されていなかった視点から撮影された画像も収集されうる。
【００４４】
仮に携帯端末に搭載されているカメラ又はコンパクトカメラ若しくは一眼レフカメラ等の個人所有のカメラで撮影された画像に基づいてスポット評価情報を収集する場合、撮影のタイミングが限定される。車載カメラ画像に基づいてスポット評価情報を収集することによって、想定されていなかったタイミングで撮影された画像も収集されうる。また、個人所有のカメラで撮影された画像は、撮影者の行動範囲によって撮影位置が限定されるとともに、撮影者の想定の範囲内に撮影位置が限定される。車載カメラ画像に基づいてスポット評価情報を収集することによって、撮影範囲が広がるとともに、想定されていなかった視点から撮影された画像も収集されうる。
【００４５】
つまり、本実施形態に係る情報処理システム１００及び情報処理装置１０によれば、想定されていなかったスポット評価情報が収集されうる。これによって、利用者は新たなスポットを知ることができる。結果として、利用者の利便性が向上する。
【００４６】
（他の実施形態）
制御部１１は、スポット評価情報を撮影車両１又は端末７０等に出力してよい。撮影車両１は、スポット評価情報を運転者又は同乗者に報知する。端末７０は、スポット評価情報を端末７０の利用者に報知する。
【００４７】
撮影車両１又は端末７０は、スポット評価情報を報知する報知部を備えてよい。報知部は、表示デバイスを含んでよい。表示デバイスは、端末所持者に対して報知する情報を表す、文字、図形又は画像等を表示してよい。表示デバイスは、ＬＥＤ（Light Emission Diode）等の発光デバイスを含んでよい。表示デバイスは、例えば、液晶ディスプレイ（ＬＣＤ:Liquid Crystal Display）であってよい。表示デバイスは、有機ＥＬ（Electro-Luminescence）ディスプレイ又は無機ＥＬディスプレイであってよい。表示デバイスは、プラズマディスプレイ（ＰＤＰ：Plasma Display Panel）であってよい。表示デバイスは、これらのディスプレイに限られず、他の種々の方式のディスプレイであってもよい。報知部は、スピーカを含んでよい。スピーカは、端末所持者に対して報知する情報を表す音声を出力してよい。報知部は、振動デバイスを含んでよい。振動デバイスは、端末所持者に対して報知する情報を表す振動パターンを出力してよい。報知部は、これらの例に限られず、他の種々のデバイスを含んでよい。
【００４８】
撮影車両１に搭載されている報知部は、撮影車両１の運転者に対して情報を報知する場合において、ドライバーディストラクションの観点から、報知する情報の量が多い場合、報知する情報が要約されてよいし、短文化又は記号化されてもよい。
【００４９】
スポット評価情報は、ナビゲーション装置に提供されてもよい。スポット評価情報は、ＳＮＳ（Social Networking Service）の記事として投稿されてもよい。スポット評価情報は、対象となるスポットを含む地域又は近隣の地域のホームページに掲載されてもよい。スポット評価情報は、テレビ、新聞若しくは雑誌、又はウェブメディア等の各種のメディアで紹介されてもよい。スポット評価情報は、旅行業者に提供されてもよい。スポット評価情報は、これらの例に限られず、種々の態様で利用されてもよい。
【００５０】
情報処理装置１０は、評価対象画像として、石焼いも若しくはわらびもち等を販売する移動販売車両、又は、ラーメン若しくはおでん等を提供する屋台車両等の移動型店舗として機能する車両を抽出し、撮影位置情報及び撮影時刻情報と関連づけて出力してもよい。情報処理装置１０が利用者にこれらの車両に関する情報を報知することによって、利用者の購買意欲が刺激されうるとともに、利用者の行動の選択肢が広がりうる。結果として、利用者の利便性が向上する。また、地域経済が活性化しうる。
【００５１】
本開示に係る実施形態について、諸図面及び実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形及び修正を行うことが容易であることに注意されたい。したがって、これらの変形及び修正は本開示の範囲に含まれることに留意されたい。例えば、各手段又は各ステップ等に含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の手段又はステップ等を１つに組み合わせたり、或いは分割したりすることが可能である。
【符号の説明】
【００５２】
１  撮影車両
１０  情報処理装置
１１  制御部
１２  通信部
１３  記憶部
２０  車載カメラ
２５  位置情報取得装置
３０  通信装置
６０  ネットワーク
７０  端末
１００  情報処理システム
【図１】
2020095353.tif 000003
【図２】
2020095353.tif 000004