(57)【要約】【課題】  回答依頼に対して一定時間応答が無かった場合、位置情報・映像情報・音声情報などの周辺情報を取得、分析し、周辺にいる人の属性や人数などを把握する技術を提供する。また、システム利用者同士で対象者の安否情報を閲覧する技術を提供する。【解決手段】  回答依頼を通知後、一定時間応答が無い場合に位置情報や周辺の映像情報、音声情報などを取得し、取得した情報を分析して周囲にいる人の属性や人数を把握し、管理者のみならず予め承認したシステム利用者同士で情報を閲覧することができる。【選択図】  図９
2015204050.tif 000002
【特許請求の範囲】
【請求項１】
複数の情報取得端末と、情報処理装置とを備え、
前記情報処理装置が前記複数の情報取得端末から情報を収集し、
前記収集した情報の処理結果を、閲覧可能にする情報提供システムであって、
各々の前記情報取得端末は、
前記情報処理装置との通信機能と、
周辺情報を取得する情報取得装置と、
前記情報取得装置が取得した周辺情報と、前記情報処理装置から受信した当該情報取得端末の利用者に対する安否情報の回答依頼に対して前記安否情報が入力された場合の当該安否情報と、を前記情報処理装置へ送信する機能と、を備え、
前記情報処理装置は、
前記安否情報の入力と入力された前記安否情報の回答依頼を、前記複数の情報取得端末へ送信する機能と、
複数の前記情報取得端末から受信した前記周辺情報、または、前記周辺情報と前記安否情報、を分析する機能と、
分析結果を、当該情報処理装置および／または前記情報取得端末から閲覧可能にする機能と、を備える
ことを特徴とする情報提供システム。
【請求項２】
請求項１に記載の情報提供システムにおいて、
前記情報取得端末は、
受信した前記安否情報の回答依頼に対して、所定の時間以内に利用者による回答入力が無い場合は、前記安否情報を伴わない前記周辺情報を、前記情報処理装置へ送信する
ことを特徴とする情報提供システム。
【請求項３】
請求項１または２に記載の情報提供システムにおいて、
前記情報取得装置とは、集音装置、撮像装置、位置情報取得装置のいずれか一つ以上であって、
前記周辺情報とは、前記集音装置が取得した音情報、前記撮像装置が取得した画像、前記位置情報取得装置が取得した位置情報、のいずれか一つ以上である
ことを特徴とする情報提供システム。
【請求項４】
請求項１から３のいずれか一に記載の情報提供システムにおいて、
前記情報取得端末は、
前記安否情報の回答依頼に対する複数の回答項目を選択可能に提示し、
前記情報端末の利用者が選択したいずれかの回答項目を、前記安否情報として送信する
ことを特徴とする情報提供システム。
【請求項５】
請求項１から４のいずれか一に記載の情報提供システムにおいて、
前記情報処理装置は、前記回答依頼を、所定の時間を空けて繰り返し送信する
ことを特徴とする情報提供システム。
【請求項６】
請求項５に記載の情報提供システムにおいて、
前記情報処理装置は、繰り返し送信した前記回答依頼に対する回答の処理結果を時系列に管理し、互いに比較可能な状態で、当該情報処理装置および／または前記情報取得端末から閲覧可能にする
ことを特徴とする情報提供システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザー端末から取集した情報を分析し、分析結果を、ユーザー端末へ配信する情報提供システムに関する。
【背景技術】
【０００２】
大規模災害時への適用を想定した、大量の情報を収集して集計するシステムとしては、特許文献１に記載の技術がある。この公報には、「携帯端末のカメラ機能およびＧＰＳ機能を利用したソフトウェアを用いて、現場から電柱番号を基点とした情報である画像および位置情報等の現場情報および安否情報を情報サーバへ送信し、前記現場情報および前記安否情報を情報サーバに蓄積するとともに被害状況を集計し、前記情報サーバに有線または無線接続されたクライアントＰＣでその情報を位置情報を用いて地図上で視覚的に把握できるシステムを提供する」（要約）という記載がある。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−２３８００２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１では、ＧＰＳ機能による位置情報を取得できない場合や、カメラ機能で電柱番号を取得できない場合が想定されていない。そのため、ＧＰＳ機能による位置情報を取得失敗した場合や、撮影した画像に電柱番号が写っていなかった場合には位置情報が特定されない。
【０００５】
また、集計された被害情報は、情報サーバに有線または無線接続されたクライアントＰＣで閲覧することを想定しており、携帯端末を用いてシステム利用者同士で情報を閲覧することが想定されていない。
【０００６】
さらに、回答依頼が届いてからアプリケーションに対して何らかの理由により応答できない場合が想定されておらず、処理できるデータは携帯端末を所持している人が応答できたものに限られる。
【課題を解決するための手段】
【０００７】
そこで、本発明では、回答依頼に対して一定時間応答が無い端末を含めた、より正確な、情報収集と分析を行うシステムを提供する。
【０００８】
より具体的には、本発明は、回答依頼を通知後、一定時間応答が無い場合に位置情報や周辺の映像情報、音情報などを取得し、取得した情報を分析して周囲にいる人の属性や人数を把握し、管理者のみならずシステム利用者による情報の閲覧を可能にする。
【０００９】
より具体的な本発明の態様は、複数の情報取得端末と、情報処理装置とを備え、前記情報処理装置２が前記複数の情報取得端末から情報を収集し、前記収集した情報の処理結果を、閲覧可能にする情報提供システムである。
【００１０】
当該情報提供システムにおいて、
各々の上記情報取得端末は、上記情報処理装置との通信機能と、周辺情報を取得する情報取得装置と、上記情報取得装置が取得した周辺情報と、上記情報処理装置から受信した当該情報取得端末の利用者に対する安否情報の回答依頼に対して上記安否情報が入力された場合の当該安否情報と、を上記情報処理装置へ送信する機能と、を備え、
上記情報処理装置は、上記安否情報の入力と入力された上記安否情報の回答依頼を、上記複数の情報取得端末へ送信する機能と、複数の上記情報取得端末から受信した上記周辺情報、または、上記周辺情報と上記安否情報、を分析する機能と、分析結果を、当該情報処理装置および／または上記情報取得端末から閲覧可能にする機能と、を備えることを特徴とする。
【００１１】
さらに、上記情報取得端末は、
受信した上記安否情報の回答依頼に対して、所定の時間以内に利用者による回答入力が無い場合は、上記安否情報を伴わない上記周辺情報を、上記情報処理装置へ送信するように構成しても良い。
【００１２】
さらに、上記情報取得装置は、集音装置、撮像装置、位置情報取得装置のいずれか一つ以上であっても良く、上記周辺情報とは、上記集音装置が取得した音情報、上記撮像装置が取得した画像、上記位置情報取得装置が取得した位置情報、のいずれか一つ以上であってもよい。
【００１３】
さらに、上記情報取得端末は、上記安否情報の回答依頼に対する複数の回答項目を選択可能に提示し、上記情報端末の利用者が選択したいずれかの回答項目を、上記安否情報として送信するように構成しても良い。
【００１４】
さらに、上記情報処理装置は、上記回答依頼を、所定の時間を空けて繰り返し送信するように構成しても良い。
【００１５】
さらに、上記情報処理装置は、繰り返し送信した上記回答依頼に対する回答の処理結果を時系列に管理し、互いに比較可能な状態で、当該情報処理装置および／または上記情報取得端末から閲覧可能にするように構成しても良い。
【発明の効果】
【００１６】
本発明によれば、より正確な情報収集が可能になり、より多くの災害時支援に貢献する。
【００１７】
上記した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。
【図面の簡単な説明】
【００１８】
【図１】ネットワーク構成図。
【図２】第１の実施形態の情報取得端末１のハードウェア構成例を示す図。
【図３】第１の実施形態の情報処理装置のハードウェア構成例を示す図。
【図４】第１の実施形態の情報処理装置のソフトウェア構成例を示す図。
【図５】第２の実施形態の情報取得端末１のハードウェア構成例を示す図。
【図６】第２の実施形態の情報処理装置のハードウェア構成例を示す図。
【図７】処理結果を情報処理装置上の地図上で表示した図。
【図８】処理結果を情報取得端末１上の地図上で表示した図。
【図９】第１の実施形態のシーケンス図。
【図１０】第１の実施形態の処理手順例を示すフロー図。
【図１１】情報取得端末１のカメラ等撮像装置を用いて撮影した初回撮影画像例を示す図。
【図１２】情報取得端末１のカメラ等撮像装置を用いて撮影した一定時間後に撮影した画像例を示す図。
【図１３】画像認識処理を行う装置に予め登録してある撮影画像例を示す図。
【図１４】情報取得端末１のカメラ等撮像装置を用いて撮影した画像例を示す図。
【図１５】処理結果を情報処理装置上で位置情報を推測し表示した図。
【発明を実施するための形態】
【００１９】
以下、実施例について図面を用いて説明する。
【実施例１】
【００２０】
図１は、本実施例のネットワーク構成図である。本実施例では、回答依頼を情報処理装置から情報取得端末１に通信網を介して通知し、情報処理装置が回答を返答する。
【００２１】
本実施例では、図２のような構成の可搬性のある例えばスマートフォンのような、集音装置１３（例えば、マイク）と、撮像装置１２（例えば、カメラ）、ＧＰＳを利用する位置情報取得装置１１、を搭載した情報処理装置を情報取得端末１として用い、図３のような構成の音認識部２１や画像認識部２０、位置情報処理部１９を組み込んだパソコンなどの電子計算機を情報処理装置として用いる。
【００２２】
本実施例では、情報取得端末１として、スマートフォンなどの可搬型機器を例示して、所有者であるユーザー（利用者という場合がある）の情報を取得することを主に記載しているが、情報取得対象者を特定せず広く情報を収集する装置として、特定の場所に設置した、例えば街頭に設置した監視カメラや集音マイクなどの機器でもよい。
【００２３】
情報処理装置からの通知を受けた後、ユーザーが一定の時間回答を入力しなかった場合には、図２に示す情報取得端末１に搭載された、集音装置１３や撮像装置１２、位置情報取得装置１１などの情報取得装置により、情報を取得して図３に示す情報処理装置に送付し、情報処理装置が、例えばユーザーの安否や所在地を推定してもよい。
【００２４】
また、ユーザーからの応答がなかった場合や、できるだけ新しい安否状況を確認したい場合などに、繰り返し、例えば、一定時間毎に回答依頼の通知を発報するように構成してもよい。
【００２５】
また、ユーザーによる回答作成の手間を省くために、予め管理者側が設定した複数の回答項目を提示し、回答を選択させるように構成しても良い。さらに、回答時に、情報取得端末１の位置情報を取得して、併せて送付してもよい。
【００２６】
図４に、図３の情報処理装置２内の中央演算処理装置１４が具現化する、音認識部２１、画像認識部２０、位置情報処理部１９のソフトウェア構成図を示す。これらの処理部は、記憶装置１６内に格納されるソフトウェアを中央演算処理装置１４が読みだして、実行することにより、具現化される。
【００２７】
音認識部２１では、取得した音データが音声データであれば、人数判定３０１、性別判定３０２、年齢判定３０３のいずれか一つ以上を行う。取得した音声データから、周辺にいる人の人数、性別、年齢を判定する。マイクなどの集音装置は、複数個搭載して、取得する音声のデータ量を増やすことによって、より詳細な分析ができるように構成してもよい。
【００２８】
画像認識部では、取得した映像データから人数判定３０１、性別判定３０２、年齢判定３０３、移動判定３０４、場所判定３０５のいずれか一つ以上を行う。人数判定、性別判定、年齢判定は、撮像装置１２により取得した情報から、周辺にいる人の人数、性別、年齢を判定する。
【００２９】
移動判定は、情報取得端末１のカメラ等撮影装置を用いて、初めに撮影された、図１１のような画像と、続いて撮影された図１２のような画像を比較することで、ユーザーが移動しているかどうかを判定する。図１２の一定時間後に撮影した画像は複数枚あってもよい。情報取得端末１の撮像装置１２にて一定の間隔で撮影を行い、情報処理装置の画像認識装置２０にてそれぞれの画像データを比較することによって、例えば差分が有る場合には情報取得端末１が移動しているとみなす。カメラなどの撮像装置１２を複数個搭載して、取得する画像データの情報量を増やすことにより、例えば周辺の人物が移動しているなどの分析ができるように構成してもよい。
【００３０】
場所判定は、予め情報処理装置の記憶装置１６に登録しておいた図１３のような位置情報が付加された画像と、図１４のようなユーザーが情報取得端末１のカメラ等撮影装置で撮影した画像とを画像認識部が比較して、図１５のように地図上にユーザーの所在地を推定する。
【００３１】
位置情報処理部では、ＧＰＳなどの衛星測位技術による位置情報を取得し、場所判定３０５を行う。情報処理装置２にて一定の間隔で位置情報の取得を行い、情報処理装置の位置情報処理装置１９にてそれぞれの位置データを比較し、例えば差分がある場合に情報取得端末１が移動していると推定する。
【００３２】
地図表示を行う場合には、情報処理装置では、情報取得端末１から得られた位置情報をもとに、表示装置１７を用いて、例えば図７のように地図を升目に区切り、升目で区切ったエリア毎の集計結果を表示したり、実際の位置を例えば図８に示すようなアイコンなどで表示したりする。
【００３３】
図９は、本実施形態のシーケンス図である。
【００３４】
ステップ１００：情報処理装置２の操作端末から、回答依頼を情報処理装置２に対して送信する。この際、情報処理装置２の操作端末からではなく、危機管理サーバ等別のサーバから通知を送信することをステップ１００としてもよい。
【００３５】
ステップ１０１：情報処理装置２が情報取得端末１に対して回答依頼をPUSH通知で送信する。情報取得端末１は、ユーザーに対して、回答依頼に対する回答の入力を依頼する。
【００３６】
ステップ１０２：情報取得端末１は情報処理装置２に回答を送信する。
【００３７】
ステップ１０３：回答依頼の受信１０１から一定時間、情報処理装置２に対して、利用者が回答を送信し無い場合、情報取得端末１は、位置情報取得装置１１により、位置情報、カメラ等撮像装置１２により、周囲の状況を撮影した情報、マイク等集音装置１３により、録音した音情報、を取得できるか確認し、取得できた情報を情報処理装置２に送信する。
【００３８】
ステップ１０４：情報処理装置２は、取得した回答情報を、位置情報処理部１９、画像認識部２０、音認識部２１にて、人数や性別、年齢、場所等を分析する。また、その情報を表示装置１１にて、マップビューやグラフの形態で表示する。
【００３９】
ステップ１０５：情報取得端末１がマップビューやグラフ等の形態で表わされた分析結果を閲覧する。
【００４０】
ステップ１０６：情報処理装置２の操作端末からマップビューやグラフ等の形態で表わされた分析結果を閲覧する。
【００４１】
図１０は、本実施例のシステムの処理手順例を示すフロー図である。図１０のフローチャートに基づく動作は以下の通りである。
【００４２】
ステップ２００：情報処理装置２から情報取得端末１に回答依頼を通知し、情報取得端末１は、ユーザーに対して、回答依頼に対する回答の入力を依頼する。
【００４３】
ステップ２０１：情報取得端末１は、ユーザーが回答依頼に対して回答が入力されたかどうかをチェックする。ＮＯならば、ステップ２０３へ進む。ＹＥＳならば、ステップ１０２へ進む。
【００４４】
ステップ２０２：情報収集装置１は、ユーザーから、安否や位置情報などの回答入力があることを確認できたら、回答結果を情報処理装置２に送付する。
【００４５】
ステップ２０３：情報取得端末１は、ＧＰＳなどの位置情報取得装置１１を用いて、位置情報を取得できるかチェックする。ＮＯならば、ステップ２０５へ進む。ＹＥＳならば、ステップ２０４へ進む。
【００４６】
ステップ２０４：情報取得端末１は、位置情報取得装置１１により、位置情報を取得する。
【００４７】
ステップ２０５：情報取得端末１は、カメラ等撮像装置１２により、映像情報を取得できるかをチェックする。ＮＯならば、ステップ２０７へ進む。ＹＥＳならば、ステップ２０６へ進む。
【００４８】
ステップ２０６：情報取得端末１は、カメラ等撮像装置１２により、周囲の状況を撮影した情報を取得する。
【００４９】
ステップ２０７：情報取得端末１は、マイク等集音装置１３により、音情報を取得できるかをチェックする。ＮＯならば、ステップ２０９へ進む。ＹＥＳならば、ステップ２０８へ進む。
【００５０】
ステップ２０８：情報取得端末１は、マイク等集音装置１３により、周囲の音情報を取得する。
【００５１】
ステップ２０９：情報取得端末１は、取得可能であり、取得したデータを情報処理装置２に送付する。
【００５２】
ステップ２１０：情報処理装置２の音認識部２１、画像認識部２０、位置情報処理部１９は、取得情報を分析する。
【００５３】
ステップ２１１：情報処理装置２は、分析結果を地図に重ねた図面を作成し、表示装置１７上に表示する。分析結果をユーザーが閲覧できるように、情報取得端末１へ送付しても良いし、情報取得端末１からアクセス可能にしても良い。
【００５４】
さらに、分析結果を時系列で管理し、分析日時の異なる複数の分析結果を互いに比較可能に表示（例えば一覧表示）してもよい。
【００５５】
このように、ユーザーが一定時間内に応答できない場合においても、情報取得端末１は、位置情報取得装置１１、撮像装置１２、集音装置１３など周辺情報を取得できる装置を用いて情報を取得する。
【００５６】
これにより、回答対象者であるユーザーが何らかの理由により応答できない場合でも、その位置情報、周辺にいる人の属性や人数などの情報を収集することができるようになり、情報処理装置は、より正確な分析が可能になる。
【００５７】
地図上に重畳表示させた分析結果は、管理者だけでなく情報取得端末１のユーザーにも、情報取得端末１の表示装置１１において、確認可能にすることで、ユーザーの利便性も向上する。
【００５８】
また、情報取得端末１から閲覧できるように、分析結果だけでなく、情報取得端末１周辺の防災マップやハザードマップを送付またはアクセス可能にしてもとよい。これらの防災マップやハザードマップは、管理者側が作成してもよく、これらをアクセス可能に公開しているサーバへ誘導してもよい。
【実施例２】
【００５９】
本実施例は、実施例１における情報処理装置２内にあった音認識部２１、画像認識部２０、位置情報処理部１９を図５のように情報取得端末１が備え、情報取得端末１が分析を行い、取得した情報および分析結果、または分析結果のみを図６のような情報処理装置に送付するものである。また、図９のシーケンス図については、実施例１から変更があるステップについて、以下に示す。
【００６０】
ステップ１０３：情報取得端末１内の、位置情報処理部１９、画像認識部２０、音認識部２１が分析する。分析結果または元データと分析結果の両方を情報処理装置２に送付する。
【００６１】
ステップ１０４：情報処理装置２は、取得した情報からマップビュー、グラフを作成する。
【００６２】
また、図１０のフロー図については、実施例１から変更があるステップについて、以下に示す。
【００６３】
ステップ２０４：位置情報取得装置１１が、位置情報を取得する。取得したデータを用いて、位置情報処理部１９が位置情報を分析する。分析結果を取得する。
【００６４】
ステップ２０６：カメラ等撮像装置１２が、周囲の状況を撮影した情報を取得する。取得したデータを用いて、画像認識部２０が映像情報を分析する。周囲にいる人の人数、性別、年齢や移動の有無、位置情報などの分析結果を取得する。
【００６５】
ステップ２０８：マイク等集音装置１３が、周囲の音情報を取得する。取得したデータを用いて、音認識部２１が音情報を分析する。周囲にいる人の人数、性別、年齢などの分析結果を取得する。
【００６６】
ステップ２１０：取得情報の分析は情報取得端末１で行っているため、実施例２では不要になる。
【００６７】
このように、情報取得端末１で取得した周辺情報を情報取得端末１で分析し、分析結果を情報処理装置に送付し、情報処理装置２では、例えば、分析結果の記録、表示を行うようにしてもよい。
【符号の説明】
【００６８】
１…情報取得端末、２…情報処理装置、１１…位置情報取得装置、１２…撮像装置、１３…集音装置、１４…中央演算処理装置、１５…文字入力装置、１６…記憶装置、１７…表示装置、１８…ネットワーク接続装置、１９…位置情報処理部、２０…画像認識部、２１…音認識部
【図１】
2015204050.tif 000003
【図２】
2015204050.tif 000004
【図３】
2015204050.tif 000005
【図４】
2015204050.tif 000006
【図５】
2015204050.tif 000007
【図６】
2015204050.tif 000008
【図７】
2015204050.tif 000009
【図８】
2015204050.tif 000010
【図９】
2015204050.tif 000011
【図１０】
2015204050.tif 000012
【図１１】
2015204050.tif 000013
【図１２】
2015204050.tif 000014
【図１３】
2015204050.tif 000015
【図１４】
2015204050.tif 000016
【図１５】
2015204050.tif 000017