(57)【要約】【課題】過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行う。【解決手段】ユーザ端末２が、ＧＮＳＳ装置４１により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示するＡＲ表示部３５と、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するマイク３７と、マイク３７を介して取得された検査対象物の検査結果情報に相当する発話音声をサーバ１に送信する端末通信部３１とを備え、サーバ１が、端末通信部３１から受信された検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部１５と、検査対象物の検査結果情報を登録する点検結果データベース２０と、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、過去の検査結果情報をユーザ端末２に送信するサーバ側通信部１１とを有する。【選択図】図１
2019153238.tif 000002
【特許請求の範囲】
【請求項１】
位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備え、
前記ウェアラブル端末は、
前記位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、
前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、
前記発話音声取得部を介して取得された前記検査対象物の検査結果情報に相当する発話音声を前記サーバに送信する端末側通信部とを備え、
前記サーバは、
前記端末側通信部から受信された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、
前記検査対象物の検査結果情報を登録する検査結果情報記憶部と、
取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するサーバ側通信部とを有する、
ことを特徴とする検査支援システム。
【請求項２】
前記ウェアラブル端末は、
前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に前記表示部に前記過去の検査結果情報を表示させる表示制御部と、
前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に警告音を音声出力部に出力させる音声制御部とを有する、
ことを特徴とする請求項１に記載の検査支援システム。
【請求項３】
前記音声制御部は、取得した前記位置情報に対応する地点のキロ程において不良状態が確認された場合に発話される地点のキロ程データに相当する発話音声及び不良情報を含む検査結果情報に相当する発話音声を音声出力部から出力させる、
ことを特徴とする請求項２に記載の検査支援システム。
【請求項４】
前記検査結果情報記憶部は、取得した前記位置情報に対応する地点のキロ程において不良状態が確認された場合に取得された不良情報を含む検査結果情報を登録する、
ことを特徴とする請求項３に記載の検査支援システム。
【請求項５】
前記表示制御部は、
前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを位置情報の変化に応じて変化させる、
ことを特徴とする請求項２〜４のいずれか一項に記載の検査支援システム。
【請求項６】
前記ウェアラブル端末は眼鏡形状のヘッドマウントディスプレイであり、前記表示部は眼前に配置されている、
ことを特徴とする請求項１〜５のいずれか一項に記載の検査支援システム。
【請求項７】
位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、
前記ウェアラブル端末が、前記位置情報取得部により現在位置を取得するステップと、
前記ウェアラブル端末が、前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
前記ウェアラブル端末が、前記受信された過去の検査結果情報を表示部に表示するステップと、
前記ウェアラブル端末が、前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
前記ウェアラブル端末が、前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を前記サーバに送信するステップと、
前記サーバが、前記送信するステップにおいて送信された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
前記サーバが、前記検査対象物の検査結果情報を登録するステップと、
前記サーバが、取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するステップとを有する、
ことを特徴とする検査支援方法。
【請求項８】
前記ウェアラブル端末が、さらに、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを位置情報の変化に応じて変化させて表示させるステップと、
前記ウェアラブル端末が、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に警告音を音声出力部に出力させるステップとを有する、
ことを特徴とする請求項７に記載の検査支援方法。
【請求項９】
位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法をコンピュータに実行させるためのプログラムであって、
前記サーバによって、
前記位置情報取得部により取得された現在位置を前記ウェアラブル端末から取得するステップと、
前記位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を前記ウェアラブル端末に送信するステップと、
受信された前記過去の検査結果情報を前記ウェアラブル端末に表示させるステップと、
前記取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声の取得を促すステップと、
前記取得された検査対象物の検査結果情報に相当する発話音声を受信するステップと、
前記受信された検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
前記検査対象物の検査結果情報を登録するステップと、
取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報前記ウェアラブル端末に送信するステップ
をコンピュータに実行させるためのプログラム。
【請求項１０】
位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備え、
前記ウェアラブル端末は、
前記位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、
前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、
前記発話取得部により取得された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、
前記音声認識処理部により音声認識された前記検査対象物の検査結果情報を前記サーバに送信する端末側通信部とを備え、
前記サーバは、
前記端末側通信部から受信された前記検査対象物の検査結果情報を登録する検査結果情報記憶部と、
取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するサーバ側通信部とを有する、
ことを特徴とする検査支援システム。
【請求項１１】
位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、
前記ウェアラブル端末が、前記位置情報取得部により現在位置を取得するステップと、
前記ウェアラブル端末が、前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
前記ウェアラブル端末が、前記受信された過去の検査結果情報を表示部に表示するステップと、
前記ウェアラブル端末が、前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
前記ウェアラブル端末が、前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
前記ウェアラブル端末が、前記音声認識処理するステップの処理結果を前記サーバに送信するステップと、
前記サーバが、前記送信するステップにおいて送信された前記検査対象物の検査結果情報を登録するステップと、
前記サーバが、取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するステップとを有する、
ことを特徴とする検査支援方法。
【請求項１２】
位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法をコンピュータに実行させるためのプログラムであって、
前記サーバによって、
前記位置情報取得部により取得された現在位置を前記ウェアラブル端末から取得するステップと、
前記位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を前記ウェアラブル端末に送信するステップと、
受信された前記過去の検査結果情報を前記ウェアラブル端末に表示させるステップと、
前記取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声の取得を促すステップと、
前記取得された検査対象物の検査結果情報に相当する発話音声の音声認識結果を受信するステップと、
前記受信された検査対象物の検査結果情報を登録するステップと、
取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報前記ウェアラブル端末に送信するステップ
をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、検査支援システムおよび検査支援方法、ならびにプログラムに関する。
【背景技術】
【０００２】
鉄道の保守検査においては、検査担当者が実際に線路上を歩いて点検することが必要となる。検査結果は、検査担当者が所定の用紙に記入したり、写真をその場で撮像することなどにより得られ、これらの検査結果が登録されて、管理運用される。
【０００３】
鉄道と同様に、日常の保守点検が必要なものに、例えば、高速道路などがある。従来、高速道路等の保全点検業務としては、点検管理員が自動車などに乗り、担当区域の高速道路等を見回りながら道路状況を点検する。そして、点検管理員は、例えば道路に落石や凹凸等を発見し、かつ、発見した道路状況から第三者に被害を与える可能性がある場合、緊急対応処置が必要であると判断し、道路管理関係者や道路補修関係者に対して、電話等を用いて口頭報告を行っている。
【０００４】
そこで、損傷場所を含めて現地の状況を詳細、かつ、迅速に報告することにより、迅速な対応処置を講じることを可能とするために、道路状況を撮影する撮像カメラと、現在位置検知機能を有するＧＰＳ受信機と、道路の損傷状況から緊急対応の必要性が有ると判断した場合、予め定める画面を表示し、その画面内に損傷個所を特定する道路諸元、道路損傷状況及び必要なコメント等の道路損傷状況関係情報を登録する損傷データ登録手段と、この道路損傷状況関係情報の登録後に撮像カメラおよびＧＰＳ受信機を駆動し、損傷部分を含む道路状況撮影写真及び損傷位置を取得する手段と、登録された道路損傷状況関係情報、道路状況撮影写真及び損傷位置からなる緊急報告情報を外部の所定のサーバに送信する報告情報送信手段とを有する道路状況報告用携帯端末が用いられている（例えば、特許文献１）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７−６５８５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
従来行われてきたように、点検結果を登録するために、所定の用紙等に記入したり、カメラや所定の装置に操作入力を行う場合、両手がふさがってしまうため、検査担当者の安全性が損なわれてしまう恐れがある。例えば、上述した特許文献１に記載の技術を、鉄道の保守点検に適応した場合においても、検査結果の登録にかかる手間は減少するが、依然、検査担当者は、装置を把持して操作入力を行う必要がある。したがって、できるだけ検査担当者の安全を確保し、点検結果の登録を容易かつ確実なものとする必要がある。
【０００７】
また、過去の検査結果を確認しつつ、現状の検査を行うに当たっては、例えば、過去の検査結果の一覧を検査担当者が閲覧しながら線路上を移動しながら検査する必要がある。検査担当者は、過去の不良内容を見落としたり、その位置を間違えたりしないように、大きな注意を払わなければならない。
【０００８】
そこで、本発明は、上記課題を解決すること、すなわち、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる、検査支援システムおよび検査支援方法、ならびにプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記課題を解決するために、本発明の検査支援システムの第１の側面は、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバとを備え、ウェアラブル端末は、位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、発話音声取得部を介して取得された検査対象物の検査結果情報に相当する発話音声をサーバに送信する端末側通信部とを備え、サーバは、端末側通信部から受信された検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、検査対象物の検査結果情報を登録する検査結果情報記憶部と、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報をウェアラブル端末に送信するサーバ側通信部とを有することを特徴とする。
【００１０】
また、本発明の検査支援システムの他の側面は、ウェアラブル端末は、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に表示部に過去の検査結果情報を表示させる表示制御部と、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に警告音を音声出力部に出力させる音声制御部とを有することを特徴とする。
【００１１】
また、本発明の検査支援システムの他の側面は、音声制御部は、取得した位置情報に対応する地点のキロ程において不良状態が確認された場合に発話される地点のキロ程データに相当する発話音声及び不良情報を含む検査結果情報に相当する発話音声を音声出力部から出力させることを特徴とする。
【００１２】
また、本発明の検査支援システムの他の側面は、検査結果情報記憶部は、取得した位置情報に対応する地点のキロ程において不良状態が確認された場合に取得された不良情報を含む検査結果情報を登録することを特徴とする。
【００１３】
また、本発明の検査支援システムの他の側面は、表示制御部は、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に表示部に表示された過去の検査結果情報の表示の座標及び大きさを位置情報の変化に応じて変化させることを特徴とする。
【００１４】
また、本発明の検査支援システムの他の側面は、ウェアラブル端末は眼鏡形状のヘッドマウントディスプレイであり、表示部は眼前に配置されていることを特徴とする。
【００１５】
本発明の検査支援方法の第１の側面は、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、ウェアラブル端末が、位置情報取得部により現在位置を取得するステップと、ウェアラブル端末が、取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、ウェアラブル端末が、受信された過去の検査結果情報を表示部に表示するステップと、ウェアラブル端末が、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するステップと、ウェアラブル端末が、発話音声を取得するステップの処理により取得された検査対象物の検査結果情報に相当する発話音声をサーバに送信するステップと、サーバが、送信するステップにおいて送信された検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、サーバが、検査対象物の検査結果情報を登録するステップと、サーバが、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報をウェアラブル端末に送信するステップとを有することを特徴とする。
【００１６】
また、本発明の検査支援方法の他の側面は、ウェアラブル端末が、さらに、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、表示部に表示された過去の検査結果情報の表示の座標及び大きさを位置情報の変化に応じて変化させて表示させるステップと、ウェアラブル端末が、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に警告音を音声出力部に出力させるステップとを有することを特徴とする。
【００１７】
また、本発明のプログラムの第１の側面は、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法をコンピュータに実行させるためのプログラムであって、サーバによって、位置情報取得部により取得された現在位置をウェアラブル端末から取得するステップと、位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をウェアラブル端末に送信するステップと、受信された過去の検査結果情報をウェアラブル端末に表示させるステップと、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声の取得を促すステップと、取得された検査対象物の検査結果情報に相当する発話音声を受信するステップと、受信された検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、検査対象物の検査結果情報を登録するステップと、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報ウェアラブル端末に送信するステップをコンピュータに実行させる。
【００１８】
本発明の検査支援システムの第２の側面は、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバとを備え、ウェアラブル端末は、位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、発話取得部により取得された検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、音声認識処理部により音声認識された検査対象物の検査結果情報をサーバに送信する端末側通信部とを備え、サーバは、端末側通信部から受信された検査対象物の検査結果情報を登録する検査結果情報記憶部と、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報をウェアラブル端末に送信するサーバ側通信部とを有することを特徴とする。
【００１９】
また、本発明の検査支援方法の第２の側面は、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、ウェアラブル端末が、位置情報取得部により現在位置を取得するステップと、ウェアラブル端末が、取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、ウェアラブル端末が、受信された過去の検査結果情報を表示部に表示するステップと、ウェアラブル端末が、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するステップと、ウェアラブル端末が、発話音声を取得するステップの処理により取得された検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、ウェアラブル端末が、音声認識処理するステップの処理結果をサーバに送信するステップと、サーバが、送信するステップにおいて送信された検査対象物の検査結果情報を登録するステップと、サーバが、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報をウェアラブル端末に送信するステップとを有することを特徴とする。
【００２０】
また、本発明のプログラムの第２の側面は、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法をコンピュータに実行させるためのプログラムであって、サーバによって、位置情報取得部により取得された現在位置をウェアラブル端末から取得するステップと、位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をウェアラブル端末に送信するステップと、受信された過去の検査結果情報をウェアラブル端末に表示させるステップと、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声の取得を促すステップと、取得された検査対象物の検査結果情報に相当する発話音声の音声認識結果を受信するステップと、受信された検査対象物の検査結果情報を登録するステップと、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報ウェアラブル端末に送信するステップをコンピュータに実行させる。
【発明の効果】
【００２１】
本発明によれば、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる。
【図面の簡単な説明】
【００２２】
【図１】検査支援システムの機能構成例について説明するための図である。
【図２】検査支援システムが実行する処理について説明するための図である。
【図３】検査支援システムが実行する処理について説明するための図である。
【図４】ユーザ端末２が実行する処理について説明するためのフローチャートである。
【図５】ユーザ端末２が実行する処理について説明するためのフローチャートである。
【図６】ユーザ端末２が実行する処理について説明するためのフローチャートである。
【図７】サーバ１が実行する処理について説明するためのフローチャートである。
【図８】サーバ１が実行する処理について説明するためのフローチャートである。
【図９】サーバ１が実行する処理について説明するためのフローチャートである。
【図１０】サーバ１が実行する処理について説明するためのフローチャートである。
【図１１】サーバ１が実行する処理について説明するためのフローチャートである。
【図１２】サーバ１が実行する処理について説明するためのフローチャートである。
【図１３】サーバ１が実行する処理について説明するためのフローチャートである。
【図１４】サーバ１が実行する処理について説明するためのフローチャートである。
【図１５】検査支援システムの他の機能構成例について説明するための図である。
【図１６】ユーザ端末７２が実行する処理について説明するためのフローチャートである。
【図１７】ユーザ端末７２が実行する処理について説明するためのフローチャートである。
【図１８】ユーザ端末７２が実行する処理について説明するためのフローチャートである。
【図１９】サーバ７１が実行する処理について説明するためのフローチャートである。
【図２０】サーバ７１が実行する処理について説明するためのフローチャートである。
【図２１】サーバ７１が実行する処理について説明するためのフローチャートである。
【図２２】サーバ７１が実行する処理について説明するためのフローチャートである。
【図２３】サーバ７１が実行する処理について説明するためのフローチャートである。
【図２４】サーバ７１が実行する処理について説明するためのフローチャートである。
【図２５】サーバ７１が実行する処理について説明するためのフローチャートである。
【図２６】サーバ７１が実行する処理について説明するためのフローチャートである。
【発明を実施するための形態】
【００２３】
以下、本発明の一実施の形態の検査支援システムについて、図１〜図２６を参照しながら説明する。
【００２４】
図１を参照して、本発明の一実施例である検査支援システムが有する機能構成について説明する。
【００２５】
検査支援システムは、検査結果情報が登録されるサーバ１と、検査担当者であるユーザが線路上を歩行しながら検査現場にて用いるユーザ端末２とを含んで構成されている。ユーザ端末２は、ユーザが携帯可能な形状である。ユーザ端末２は、特に、メガネ型ウェアラブル端末（メガネ形状の透過型のヘッドマウントディスプレイやスマートグラスとも称される）であると、検査実施時に両手が自由になり、ユーザがより安全に検査を行うことができるようになるため好適である。ユーザ端末２は、ウェアラブル端末に対応する。
【００２６】
サーバ１は、サーバ通信部１１、サーバ通信処理制御部１２、点検処理制御部１３、音声認識用データベース１４、音声認識処理部１５、使用者データベース１６、使用者認識処理部１７、位置情報データベース１８、位置情報演算処理部１９、点検結果データベース２０、点検結果登録制御部２１、テキストデータ生成部２２、および、音声データ生成部２３の各機能を含んで構成されている。
【００２７】
サーバ通信部１１は、ユーザ端末２との無線での通信を実行し、情報を授受する。サーバ通信部１１は、サーバ側通信部に対応する。
【００２８】
サーバ通信処理制御部１２は、サーバ通信部１１によるユーザ端末２との情報の授受を制御する。
【００２９】
点検処理制御部１３は、サーバ１の各部の処理を制御するものである。具体的には、点検処理制御部１３は、サーバ通信処理制御部１２を制御して、サーバ通信部１１で受信された情報の供給を受ける。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。点検処理制御部１３は、供給された音声データがユーザ端末２のログイン要求である場合、使用者認識処理部１７を制御して、ユーザ端末２の使用者を認識する処理を実行させる。また、点検処理制御部１３は、サーバ通信部１１より受信された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。そして、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、路線名とキロ程による位置情報を、サーバ通信部１１からユーザ端末２に送信させる。
【００３０】
また、点検処理制御部１３は、ユーザ端末２の位置情報に基づいて、必要に応じて点検結果登録制御部２１を制御して、過去の点検結果を点検結果データベース２０から検索させる。そして、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、過去の点検結果を、サーバ通信部１１からユーザ端末２に送信させる。また、点検処理制御部１３は、ユーザ端末２より送信され、サーバ通信部１１において受信された現在の点検結果の情報を、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。また、点検処理制御部１３は、テキストデータ生成部２２を制御して、ユーザ端末２において表示出力されるテキストデータを生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。また、点検処理制御部１３は、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データを生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。
【００３１】
音声認識用データベース１４は、ユーザ端末２から送信された音声データの認識処理に用いられる情報が登録されているデータベースである。
【００３２】
音声認識処理部１５は、点検処理制御部１３の制御に基づいて、音声認識処理を実行する。音声認識処理部１５は、サーバ通信部１１が、ユーザ端末２から受信した音声データを、音声認識用データベース１４に登録されている情報を用いて認識し、音声認識結果を点検処理制御部１３に供給する。
【００３３】
使用者データベース１６は、ユーザ端末２の使用者の情報を記録するものである。使用者データベース１６に記録される情報には、登録された使用者の発声を本人のものであるかを識別するための声紋などの音声情報が含まれている。
【００３４】
使用者認識処理部１７は、サーバ通信部１１がユーザ端末２から受信した音声データがログイン要求であると認識された場合、点検処理制御部１３の制御に基づいて、使用者データベース１６に登録されている情報を用いて、その音声データに対応する発話が登録されたユーザであるか否かの認識処理を実行し、認識処理結果を点検処理制御部１３に供給する。
【００３５】
位置情報データベース１８は、緯度経度情報と、鉄道路線の各線における基点からのキロ程との対応関係が登録されているデータベースである。鉄道路線の位置は、それぞれの路線の起点からのキロ程によってあらわすことが可能である。
【００３６】
位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、サーバ通信部１１がユーザ端末２から受信した緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部１３に供給する。
【００３７】
点検結果データベース２０は、過去の点検結果（検査結果情報）が登録されているとともに、サーバ通信部１１がユーザ端末２から受信した新たな点検結果（検査結果情報）を新たに登録するために用いられるデータベースである。点検結果データベース２０は、検査結果情報記憶部に対応する。
【００３８】
点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、ユーザ端末２を利用している検査担当者であるユーザが検査を行っている路線の過去の点検結果を、点検結果データベース２０から検索し、点検処理制御部１３に供給する。また、点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、サーバ通信部１１がユーザ端末２から受信した新たな点検結果情報を、点検結果データベース２０に供給して登録する処理を実行する。
【００３９】
テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末２において表示出力されるテキストデータを生成し、点検処理制御部１３に供給する。
【００４０】
音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データを生成し、点検処理制御部１３に供給する。
【００４１】
なお、図１において、サーバ１は１つの装置として構成されているものとして説明したが、図1のサーバ１が有する機能を、複数の装置で実現するものとしてもよい。例えば、音声認識用データベース１４、および、音声認識処理部１５が実現する処理を他の処理とは異なる装置において実現可能とし、それぞれの装置間で情報を授受することができるようにしてもよい。
【００４２】
ユーザ端末２は、端末通信部３１、端末通信処理制御部３２、ユーザ端末処理制御部３３、ＡＲ（Augmented Reality：拡張現実）表示制御部３４、ＡＲ表示部３５、音声データ取得制御部３６、マイク３７、音声データ出力制御部３８、ヘッドホン３９、位置データ取得制御部４０、ＧＮＳＳ(Global Navigation Satellite System / 全球測位衛星システム)装置４１、ジャイロスコープ４２、地磁気センサ４３、撮像制御部４４、および、カメラ４５の各機能を有して構成されている。
【００４３】
端末通信部３１は、サーバ１との無線での通信を実行し、情報を授受する。端末通信部３１は、端末側通信部に対応する。
【００４４】
端末通信処理制御部３２は、端末通信部３１によるサーバ１との情報の授受を制御する。
【００４５】
ユーザ端末処理制御部３３は、ユーザ端末２の各部の処理を制御するものである。具体的には、ユーザ端末処理制御部３３は、端末通信処理制御部３２を制御して、端末通信部３１により受信された情報の供給を受ける。ユーザ端末処理制御部３３は、供給された音声データや、ユーザに注意を促すための所定の音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから音声出力させる。ユーザ端末処理制御部３３は、供給されたテキストデータや画像データを、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５に表示させる。ユーザ端末処理制御部３３は、マイク３７により集音され、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
【００４６】
また、ユーザ端末処理制御部３３は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報の供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。また、ユーザ端末処理制御部３３は、撮像制御部４４を制御して、カメラ４５により画像を撮像させ、撮像された画像データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。また、ユーザ端末処理制御部３３は、ジャイロスコープ４２、および、地磁気センサ４３から供給された計測値に基づいて、ユーザ端末２を装着しているユーザの視線の向き、すなわち、ＡＲ表示部３５を介してユーザが現実世界のいずれの方向を見ているかを検出する。そして、ユーザ端末処理制御部３３は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報、および、ユーザ端末２を装着しているユーザの視線の向きの検出結果に基づいて、ＡＲ表示制御部３４による、過去の検査結果の表示の座標や大きさを制御する。
【００４７】
ＡＲ表示制御部３４は、端末通信処理制御部３２から供給された、画像データおよびテキストデータのＡＲ表示部３５への表示を制御する。ＡＲ表示制御部３４は、表示制御部に対応する。
【００４８】
ＡＲ表示部３５は、実在する風景にバーチャルの視覚情報を重ねて表示することが可能な表示部である。ＡＲ表示部３５では、テキストや画像の表示がない部分には、現実世界が表示される。ユーザ端末２がメガネ型ウェアラブル端末である場合、ＡＲ表示部３５のテキストや画像の表示がない部分は透過式になっており、ユーザ端末２を装着しているユーザの目に見える現実世界に、ＡＲ表示制御部３４の制御により表示されるテキストや画像が重なって表示されるものである。また、ユーザ端末２がメガネ型ウェアラブル端末ではない場合、ＡＲ表示部３５には、カメラ４５により撮像された現実世界の映像に重ねて、ＡＲ表示制御部３４の制御により表示されるテキストや画像が表示される。ＡＲ表示部３５は、表示部に対応する。
【００４９】
音声データ取得制御部３６は、マイク３７による周囲の音声の取得を制御し、取得された音声データを、ユーザ端末処理制御部３３に供給する。
【００５０】
マイク３７は、音声データ取得制御部３６の制御に基づいて、周囲の音声を取得する。マイク３７は、発話音声取得部に対応する。
【００５１】
音声データ出力制御部３８は、ユーザ端末処理制御部３３から供給された音声データの、ヘッドホン３９からの音声出力を制御する。音声データ出力制御部３８は、音声制御部に対応する。
【００５２】
ヘッドホン３９は、音声データ出力制御部３８の制御に基づいて、音声データを、内蔵されているスピーカーから出力する。ヘッドホン３９は、音声出力部に対応する。
【００５３】
位置データ取得制御部４０は、ＧＮＳＳ装置４１による緯度経度情報の受信を制御し、取得された緯度経度情報を、ユーザ端末処理制御部３３に供給する。
【００５４】
ＧＮＳＳ装置４１は、GPS（Global Positioning System）、GLONASS（Global Navigation Satellite System）、Galileo、QZSS（Quasi-Zenith Satellite System：準天頂衛星）等の衛星測位システムを利用して、現在の緯度経度情報を取得する。ＧＮＳＳ装置４１は、位置情報取得部に対応する。
【００５５】
ジャイロスコープ４２は、ユーザ端末２の角度（姿勢）や角速度あるいは角加速度を検出し、ユーザ端末処理制御部３３に供給する。
【００５６】
地磁気センサ４３は、磁場の向きを計測することにより、ユーザ端末２が向いている角度を検出し、ユーザ端末処理制御部３３に供給する。
【００５７】
撮像制御部４４は、カメラ４５による画像の撮像を制御し、撮像された画像データを、ユーザ端末処理制御部３３に供給する。
【００５８】
カメラ４５は、撮像制御部４４の制御に基づいて、撮像処理を行う。
【００５９】
このように、検査支援システムでは、ユーザ端末２が、ＧＮＳＳ装置４１により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示するＡＲ表示部３５と、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するマイク３７と、マイク３７を介して取得された検査対象物の検査結果情報に相当する発話音声をサーバ１に送信する端末通信部３１とを備え、サーバ１が、端末通信部３１から受信された検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部１５と、検査対象物の検査結果情報を登録する点検結果データベース２０と、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、過去の検査結果情報をユーザ端末２に送信するサーバ側通信部１１とを有する。
【００６０】
したがって、検査支援システムでは、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる。
【００６１】
次に、図２および図３を参照し、ユーザ端末２を利用した鉄道の線路における保守点検の具体的な例について説明する。
【００６２】
図２を参照して、ログインからシステム終了までの流れについて説明する。
【００６３】
検査担当者であるユーザが、線路の保守点検において、ユーザ端末２を装着し、ユーザ端末２に対して、「ログイン」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「ログイン」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
【００６４】
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「ログイン」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、ユーザ端末２のログイン要求を受け、使用者認識処理部１７を制御して、ユーザ端末２の使用者を認識する処理を実行させる。使用者認識処理部１７による使用者の認識処理の結果、ユーザ端末２の利用者が登録された利用者であると認識された場合、点検処理制御部１３は、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データ「こんにちは○○さん」を生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。
【００６５】
端末通信部３１で受信された音声データは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから「こんにちは○○さん」を音声出力させる。
【００６６】
また、位置データ取得制御部４０は、ＧＮＳＳ装置４１による緯度経度情報の受信を制御し、取得された緯度経度情報を、随時、ユーザ端末処理制御部３３に供給する。ユーザ端末処理制御部３３は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報の供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
【００６７】
サーバ通信部１１で受信された緯度経度情報は、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、位置情報データベース１８に登録されている情報に基づいて、供給された緯度経度情報を、路線名および基点からのキロ程により表される位置情報に変換し、点検処理制御部１３に供給する。点検処理制御部１３は、現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。
【００６８】
端末通信部３１で受信された位置情報は、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された位置情報を、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５（３５−１として図示）に表示させる。
【００６９】
ユーザが、検査開始位置まで移動している間も、上述した場合と同様の緯度経度情報からキロ程により表される位置情報への変換処理が実行される。ユーザ端末処理制御部３３は、供給された位置情報を、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５（３５−２として図示）に表示させる。ユーザが、検査開始位置まで移動したとき、ユーザ端末２に対して、「検査開始」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「検査開始」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
【００７０】
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「検査開始」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、ユーザ端末２の検査開始要求を受け、位置情報演算処理部１９の処理により得られる発話時のユーザ端末２の位置に対応する路線名と基点からのキロ程による位置情報に基づいて、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データ「１ｋ２００から検査を開始します」を生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。また、点検処理制御部１３は、検査開始位置「１ｋ２００」を、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。
【００７１】
端末通信部３１で受信された音声データは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから「１ｋ２００から検査を開始します」を音声出力させる。
【００７２】
点検処理制御部１３は、位置情報演算処理部１９の処理により得られる発話時のユーザ端末２の位置に対応する路線名と基点からのキロ程による位置情報に基づいて、点検結果登録制御部２１を制御して、過去の点検結果のうち、ユーザ端末２を保有するユーザが次に到着する過去の不良発生個所の情報を、点検結果データベース２０から検索させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、ユーザ端末２を利用しているユーザが検査を行っている路線の過去の点検結果情報を、点検結果データベース２０から検索し、対応する過去の点検結果を点検処理制御部１３に供給する。点検処理制御部１３は、サーバ通信処理制御部１２を制御して、供給された過去の点検結果情報を、サーバ通信部１１からユーザ端末２に送信させる。過去の不良発生個所の情報には、例えば、不良発生個所を示す位置情報、不良種類、および健全度などを示すテキストデータや、不良個所を撮像した画像データが含まれている。
【００７３】
端末通信部３１で受信された過去の不良発生個所の情報は、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、ユーザ端末２の位置に対応する路線名と基点からのキロ程による位置情報に基づいて、過去の不良発生個所との距離が所定の距離以内になった場合、過去の検査において発見された不良情報に対応するテキストデータや画像データを、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５（３５‐３として図示）に表示させる。これにより、検査担当者であるユーザは、前回の検査における不良の状態を事前に把握し、理解することができる。また、ユーザ端末処理制御部３３は、例えば「ポーン」などの警告音を、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから音声出力させる。これにより、過去の不良個所が近くなったことを、ユーザが間違えなく認識することができ、過去における不良発生個所の見落としを防ぐことができる。
【００７４】
この時、ユーザ端末処理制御部３３は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報、ならびに、ジャイロスコープ４２および地磁気センサ４３により検出されるユーザ端末２を装着しているユーザの視線の向きの検出結果に基づいて、ＡＲ表示制御部３４による、図２中の不良発生個所情報５１の座標や大きさを制御する。不良発生個所情報５１は、ＡＲ表示部３５においてユーザが認識する現実世界に対して、不良発生個所に対応する部分を重畳して表示し、ユーザに対して、視線の中のいずれの位置に、次の過去の不良発生個所があるかを示すものである。すなわち、不良発生個所情報５１は、過去の検査結果情報の表示の一部である。過去の不良発生個所をユーザに提示するために、キロ程で示される位置情報に加えて、不良発生個所情報５１として、ＡＲ表示部３５において現実世界と重畳するように表示させることにより、過去の不良発生個所の見落としを効果的に防止することが可能となる。
【００７５】
具体的には、ユーザ端末処理制御部３３は、ジャイロスコープ４２、および、地磁気センサ４３から供給された計測値に基づいて、ユーザ端末２を装着しているユーザの視線の向き、すなわち、ＡＲ表示部３５を介してユーザが現実世界のいずれの方向を見ているかを検出する。そして、ユーザ端末処理制御部３３は、ＧＮＳＳ装置４１において受信された緯度経度情報に基づいて、ユーザ端末２が過去の不良発生個所との距離が所定の距離以内になり、かつ、ユーザの視線の向きが、過去の不良発生個所の方向と一致している場合に、ユーザ端末２を装着しているユーザの視線の向きに基づいて、例えば、図２中の不良発生個所情報５１の表示の座標や大きさを算出し、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５に表示させる。
【００７６】
ユーザ端末２の位置が過去の不良発生個所に近づくに従い、ＡＲ表示部３５（３５‐４として図示）に表示されている不良発生個所情報５１の表示は大きくなる。このように、不良発生個所情報５１を表示させることにより、ユーザが過去の不良内容を見落としたり、その位置を間違えることを防止することができる。
【００７７】
ユーザが、ユーザ端末２に対して、「不良発見。枕木に〇〇、健全度Ａ」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「不良発見。枕木に〇〇、健全度Ａ」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
【００７８】
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「不良発見。まくらぎに〇〇、健全度Ａ」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、ユーザ端末２からの現在の点検結果の登録要求を認識する。点検処理制御部１３は、現在のユーザ端末２の位置情報、および、点検結果の情報である「まくらぎに〇〇、健全度Ａ」を、点検結果登録制御部２１に供給して、位置情報とともに、点検結果データベース２０に登録させる。そして、点検処理制御部１３は、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データ「１ｋ１１３、まくらぎ○○、健全度Ａで登録します。よろしいですか？」を生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。
【００７９】
端末通信部３１で受信された音声データは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから「１ｋ１１３、まくらぎ○○、健全度Ａで登録します。よろしいですか？」を音声出力させる。
【００８０】
音声データにより登録内容を確認したユーザは、必要に応じて、音声で、上述した場合と同様に、登録内容の変更を指示することが可能である。また、ユーザが、カメラ４５を操作し、現在の点検結果の画像を撮像した場合、ユーザ端末処理制御部３３は、撮像制御部４４を制御して、カメラ４５により画像を撮像させ、撮像された画像データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。サーバ通信部１１で受信された画像データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された画像データを、現在の点検結果の情報として、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。
【００８１】
不良個所を発見したユーザが、不良個所に対して措置作業を行う場合については、図３を用いて後述する。
【００８２】
ユーザが、検査終了位置に移動している間も、上述した場合と同様の処理が実行されて、ユーザ端末処理制御部３３は、供給された位置情報を、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５（３５−５として図示）に表示させる。ユーザが、ユーザ端末２に対して、「検査終了」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「検査終了」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
【００８３】
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「検査終了」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、ユーザ端末２の検査終了要求を受け付ける。そして、点検処理制御部１３は、位置情報演算処理部１９の処理により得られる発話時のユーザ端末２の位置に対応する路線名と基点からのキロ程による位置情報に基づいて、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データ「２ｋ０００で検査を終了します」を生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。また、点検処理制御部１３は、検査終了位置「２ｋ０００」を、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。
【００８４】
端末通信部３１で受信された音声データは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから「２ｋ０００で検査を終了します」を音声出力させる。
【００８５】
ユーザが、ユーザ端末２に対して、「システム終了」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「システム終了」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
【００８６】
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「システム終了」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、ユーザ端末２のシステム終了要求を受け、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データ「お疲れ様でした。終了します」を生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。
【００８７】
端末通信部３１で受信された音声データは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから「お疲れ様でした。終了します」を音声出力させる。この時、ユーザ端末処理制御部３３は、ＡＲ表示制御部３４を制御して、検査終了をユーザに通知するための画像やテキストなどを、ＡＲ表示部３５（３５−６として図示）に表示させるようにしてもよい。
【００８８】
次に、図３を参照して、不良個所の表示方法の他の例、および、不良個所を発見したユーザが、不良個所に対して処理作業を行う場合の表示の例について説明する。
【００８９】
過去の点検結果の表示は、図３中のＡＲ表示部３５（３５−１１と図示）に示されるように、例えば、最小限のテキストデータのみであってもよい。また、過去の点検結果の表示は、図３中のＡＲ表示部３５（３５−１２と図示）に示されるように、例えば、詳細なテキストデータおよび画像データの表示であってもよい。
【００９０】
そして、不良個所を発見したユーザが、ユーザ端末２に対して、「措置作業中」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「措置作業中」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
【００９１】
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「措置作業中」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、ユーザ端末２を装着している点検担当者が、措置作業中であることを認識し、措置作業内容についての情報の供給待ち状態となる。
【００９２】
ユーザが、ユーザ端末２に対して、「左締結装置内側ボルト緩み、Ｃランク」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「左締結装置内側ボルト緩み、Ｃランク」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
【００９３】
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「左締結装置内側ボルト緩み、Ｃランク」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、現在のユーザ端末２の位置情報、および、措置作業内容についての情報である「左締結装置内側ボルト緩み、Ｃランク」を、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。そして、点検処理制御部１３は、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データ「２ｋ４４５、左締結装置内側ボルト緩み、Ｃランクで登録します。よろしいですか」を生成させるとともに、テキストデータ生成部２２を制御して、ユーザ端末２において表示出力されるテキストデータ「２ｋ４４５、左締結装置内側ボルト緩み、Ｃランク」を生成させる。そして、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、音声データおよびテキストデータを、サーバ通信部１１からユーザ端末２に送信させる。
【００９４】
端末通信部３１で受信された音声データは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから「１ｋ１１３、まくらぎ○○、健全度Ａで登録します。よろしいですか」を音声出力させる。また、端末通信部３１で受信されたテキストデータは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給されたテキストデータ「２ｋ４４５、左締結装置内側ボルト緩み、Ｃランク」を、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５（３５−１３と図示）に表示させる。この時、すでに表示中のテキストデータや画像データがあった場合、ＡＲ表示部３５には、それらの表示位置を変更し、点検作業員から優先度の高い順に大きく表示されるものとすると好適である。
【００９５】
音声データにより登録内容を確認したユーザは、必要に応じて、音声で、上述した場合と同様に、登録内容の変更を指示することが可能である。また、ユーザが、カメラ４５を操作し、措置作業結果の画像を撮像した場合、ユーザ端末処理制御部３３は、撮像制御部４４を制御して、カメラ４５により画像を撮像させ、撮像された画像データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。サーバ通信部１１で受信された画像データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された画像データを、現在の点検結果の情報として、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。
【００９６】
ユーザが、ユーザ端末２に対して、「ここは定期的にボルトが緩んでいる気がする」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「ここは定期的にボルトが緩んでいる気がする」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
【００９７】
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「ここは定期的にボルトが緩んでいる気がする」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、現在の措置作業内容についての情報である「ここは定期的にボルトが緩んでいる気がする」を、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。そして、点検処理制御部１３は、音声データ生成部２３を制御して、ユーザ端末２において音声出力される音声データ「ここは定期的にボルトが緩んでいる気がする、を登録します。よろしいですか」を生成させるとともに、テキストデータ生成部２２を制御して、ユーザ端末２において表示出力されるテキストデータ「ここは定期的にボルトが緩んでいる気がする」を生成させる。そして、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、音声データおよびテキストデータを、サーバ通信部１１からユーザ端末２に送信させる。
【００９８】
端末通信部３１で受信された音声データは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから「ここは定期的にボルトが緩んでいる気がする、を登録します。よろしいですか」を音声出力させる。また、端末通信部３１で受信されたテキストデータは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給されたテキストデータ「ここは定期的にボルトが緩んでいる気がする」を、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５（３５−１４と図示）に付け加えて表示させる。
【００９９】
また、ユーザが、ユーザ端末２に対して、「不良個所一覧表示」と発話すると、音声データ取得制御部３６の制御に基づいて、マイク３７により「不良個所一覧表示」の音声が集音される。ユーザ端末処理制御部３３は、音声データ取得制御部３６により取得された音声データの供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。
【０１００】
サーバ通信部１１で受信された音声データは、サーバ通信処理制御部１２から、点検処理制御部１３に供給される。点検処理制御部１３は、供給された音声データを、音声認識処理部１５に供給し、音声認識を実行させる。音声認識処理部１５による音声認識の結果、「不良個所一覧表示」の発話が認識され、点検処理制御部１３に供給される。点検処理制御部１３は、不良個所一覧表示要求を受け、点検結果登録制御部２１を制御し、点検結果データベース２０に登録されている、該当する路線の不良個所の情報を検索させ、供給させる。そして、点検処理制御部１３は、テキストデータ生成部２２を制御して、ユーザ端末２において表示出力される不良個所一覧に対応するテキストデータを生成させる。そして、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、不良個所に対応する画像データおよびテキストデータを、サーバ通信部１１からユーザ端末２に送信させる。
【０１０１】
端末通信部３１で受信された画像データおよびテキストデータは、端末通信処理制御部３２から、ユーザ端末処理制御部３３に供給される。ユーザ端末処理制御部３３は、供給された画像データおよびテキストデータを、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５（３５−１５と図示）に表示させる。
【０１０２】
次に、図４〜図６のフローチャートを参照して、図１のユーザ端末２が実行するユーザ端末の処理１について説明する。
【０１０３】
ステップＳ１において、ユーザ端末処理制御部３３は、音声データ取得制御部３６から供給される情報に基づいて、ユーザの音声を取得したか否かを判断する。検査の最初にユーザより発話され、取得される音声データは、ログイン要求を示すものである。ステップＳ１において、ユーザの音声を取得していないと判断された場合、ユーザの音声を取得したと判断されるまで、ステップＳ１の処理が繰り返される。
【０１０４】
ステップＳ１において、ユーザの音声を取得したと判断された場合、ステップＳ２において、ユーザ端末処理制御部３３は、マイク３７により取得され、音声データ取得制御部３６から供給された音声データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。端末通信部３１は、供給された音声データを、サーバ１に送信する。
【０１０５】
ステップＳ３において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ１よりエラーメッセージが通知されたか否かを判断する。ステップＳ３において、エラーメッセージが通知されたと判断された場合、処理は、ステップＳ１に戻り、それ以降の処理が繰り返される。
【０１０６】
ステップＳ３において、エラーメッセージが通知されていないと判断された場合、ステップＳ４において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ１よりログイン許可が通知されたか否かを判断する。ステップＳ４において、サーバ１よりログイン許可が通知されていないと判断された場合、処理は、ステップＳ３に戻り、それ以降の処理が繰り返される。
【０１０７】
ステップＳ４において、サーバ１よりログイン許可が通知されたと判断された場合、ステップＳ５において、ユーザ端末処理制御部３３は、ログイン状態となる。
【０１０８】
ステップＳ６において、ユーザ端末処理制御部３３は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報を取得し、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。端末通信部３１は、緯度経度情報をサーバ１に送信する。
【０１０９】
ステップＳ７において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により受信された、路線の起点からのキロ程に変換された現在位置情報を取得する。そして、ユーザ端末処理制御部３３は、ＡＲ表示制御部３４を制御して、キロ程に変換された現在位置情報をＡＲ表示部３５に表示させる。ＡＲ表示部３５は、キロ程に変換された現在位置情報を表示する。
【０１１０】
ステップＳ８において、ユーザ端末処理制御部３３は、音声データ取得制御部３６から供給される情報に基づいて、ユーザの音声を取得したか否かを判断する。図２および図３を用いて説明したように、検査中のユーザは、ユーザ端末２に対して、検査開始または終了の通知や、それらの位置変更の要求、または、不良内容の登録内容などを発話する。ステップＳ８において、ユーザの音声を取得していないと判断された場合、処理は、ステップＳ６に戻り、それ以降の処理が繰り返される。
【０１１１】
ステップＳ８において、ユーザの音声を取得したと判断された場合、ステップＳ９において、ユーザ端末処理制御部３３は、マイク３７により取得され、音声データ取得制御部３６から供給された音声データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。端末通信部３１は、供給された音声データを、サーバ１に送信する。
【０１１２】
ステップＳ１０において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ１より過去の検査結果情報を受信したか否かを判断する。
【０１１３】
ステップＳ１０において、過去の検査結果情報を受信したと判断された場合、ステップＳ１１において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により受信された過去の検査結果情報を取得する。そして、ユーザ端末処理制御部３３は、ＡＲ表示制御部３４を制御して、過去の検査結果情報であるテキストデータおよび画像データを、例えば、図２または図３を用いて説明したように、ＡＲ表示部３５に表示させる。ＡＲ表示部３５は、過去の検査結果情報を表示出力する。
【０１１４】
ステップＳ１０において、過去の検査結果情報を受信していないと判断された場合、または、ステップＳ１１の処理の終了後、ステップＳ１２において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ１より、過去の検査結果以外のテキストデータまたは音声データの少なくとも一方を受信したか否かを判断する。ここで、過去の検査結果以外のテキストデータまたは音声データとは、例えば、図２または図３を用いて説明したように、「１ｋ２００から検査を開始します」や「２ｋ４４５、左締結装置内側ボルト緩み、Ｃランクで登録します。よろしいですか」などの、ユーザの発話内容を確認するためのキストデータまたは音声データである。ステップＳ１２において、過去の検査結果以外のテキストデータまたは音声データのいずれも受信していないと判断された場合、処理は、後述するステップＳ１６に進む。
【０１１５】
ステップＳ１２において、過去の検査結果以外のテキストデータまたは音声データのうちの少なくとも一方を受信したと判断された場合、ステップＳ１３において、ユーザ端末処理制御部３３は、受信したデータの出力処理を実行する。具体的には、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により受信されたテキストデータを取得する。そして、ユーザ端末処理制御部３３は、ＡＲ表示制御部３４を制御して、テキストデータを、例えば、図２または図３を用いて説明したように、ＡＲ表示部３５に表示させる。ＡＲ表示部３５は、テキストデータを表示出力する。また、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により受信された音声データを取得する。そして、ユーザ端末処理制御部３３は、音声データ出力制御部３８を制御して、ヘッドホン３９から音声データを出力させる。ヘッドホン３９は、音声データを出力する。
【０１１６】
ステップＳ１４において、ユーザ端末処理制御部３３は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報を取得し、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。端末通信部３１は、緯度経度情報をサーバ１に送信する。
【０１１７】
ステップＳ１５において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により受信された、路線の起点からのキロ程に変換された現在位置情報を取得する。そして、ユーザ端末処理制御部３３は、ＡＲ表示制御部３４を制御して、キロ程に変換された現在位置情報をＡＲ表示部３５に表示させる。ＡＲ表示部３５は、キロ程に変換された現在位置情報を表示する。
【０１１８】
ステップＳ１２において、過去の検査結果以外のテキストデータまたは音声データのいずれも受信していないと判断された場合、または、ステップＳ１５の処理の終了後、ステップＳ１６において、ユーザ端末処理制御部３３は、取得されている現在位置情報に基づいて、過去の検査結果のうちのいずれかが所定距離以内であるか否かを判断する。ステップＳ１６において、過去の検査結果のうちのいずれかが所定距離以内ではないと判断された場合、処理は、後述するステップＳ２３に進む。
【０１１９】
ステップＳ１６において、過去の検査結果のうちのいずれかが所定距離以内であると判断された場合、ステップＳ１７において、ユーザ端末処理制御部３３は、ジャイロスコープ４２から供給されるユーザ端末２の角度（姿勢）や角速度あるいは角加速度の検出結果、および、地磁気センサ４３から供給されるユーザ端末２が向いている角度の検出結果に基づいて、ユーザの視線の向き、すなわち、ＡＲ表示部３５を介してユーザが現実世界のいずれの方向を見ているかを検出する。
【０１２０】
ステップＳ１８において、ユーザ端末処理制御部３３はステップＳ１７における検出結果に基づいて、ユーザが、次の過去の不良発生個所の方向に対応する所定の方向を向いているか否かを判断する。
【０１２１】
ステップＳ１８において、ユーザが所定の方向を向いていると判断された場合、ステップＳ１９において、ユーザ端末処理制御部３３は、例えば、図２のＡＲ表示部３５‐３および３５‐４を用いて説明したような、過去の検査結果の表示の一部である不良発生個所情報５１の座標および大きさを演算する。
【０１２２】
ステップＳ１８において、ユーザが所定の方向を向いていないと判断された場合、または、ステップＳ１９の処理の終了後、ステップＳ２０において、ユーザ端末処理制御部３３は、ＡＲ表示制御部３４を制御して、例えば、図２のＡＲ表示部３５‐３および３５‐４を用いて説明したような、または、図３のＡＲ表示部３５‐１１および３５‐１２を用いて説明したような、過去の検査結果の詳細表示を実行させる。ＡＲ表示制御部３４は、ＡＲ表示部３５に、過去の検査結果の詳細を表示させる。
【０１２３】
すなわち、ステップＳ１８において、ユーザが所定の方向を向いていると判断された場合には、ステップＳ２０の処理により、不良発生個所情報５１が、演算結果に基づいた座標および大きさで、他の過去の検査結果であるテキストデータまたは画像データとともに、ＡＲ表示部３５に表示されるが、ステップＳ１８において、ユーザが所定の方向を向いていないと判断された場合、ステップＳ２０の処理により、不良発生個所情報５１は表示されず、他の過去の検査結果であるテキストデータまたは画像データのみがＡＲ表示部３５に表示される。
【０１２４】
ステップＳ２１において、ユーザ端末処理制御部３３は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報を取得し、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。端末通信部３１は、緯度経度情報をサーバ１に送信する。
【０１２５】
ステップＳ２２において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により受信された、路線の起点からのキロ程に変換された現在位置情報を取得する。そして、ユーザ端末処理制御部３３は、ＡＲ表示制御部３４を制御して、キロ程に変換された現在位置情報をＡＲ表示部３５に表示させる。ＡＲ表示部３５は、キロ程に変換された現在位置情報を表示する。
【０１２６】
ステップＳ１６において、過去の検査結果のうちのいずれかが所定距離以内ではないと判断された場合、または、ステップＳ２２の処理の終了後、ステップＳ２３において、ユーザ端末処理制御部３３は、撮像制御部４４から供給された信号に基づいて、撮像が指令されたか否かを判断する。
【０１２７】
ステップＳ２３において、撮像が指令されたと判断された場合、ステップＳ２４において、ユーザ端末処理制御部３３は、撮像制御部４４を制御して、カメラ４５により撮像処理を実行させる。そして、ユーザ端末処理制御部３３は、撮像されて得られた画像データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ１に送信させる。端末通信部３１は、画像データをサーバ１に送信する。
【０１２８】
ステップＳ２３において、撮像が指令されていないと判断された場合、または、ステップＳ２４の処理の終了後、ステップＳ２５において、ユーザ端末処理制御部３３は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ１よりアプリケーション終了要求を受けたことが通知されたか否かを判断する。ステップＳ２５において、アプリケーション終了要求を受けていないと判断された場合、処理は、ステップＳ８に戻り、それ以降の処理が繰り返される。
【０１２９】
ステップＳ２５において、アプリケーション終了要求を受けたと判断された場合、ステップＳ２６において、端末通信部３１は、サーバ１より、例えば、「お疲れ様でした。終了します」などの音声データ、または、テキストデータの少なくとも一方、および、必要に応じて、図２のＡＲ表示部３５−６の表示画面を表示させるための画像データを受信する。ユーザ端末処理制御部３３は、端末通信処理制御部３２から、これらの音声データ、テキストデータ、または、画像データを取得し、音声データ出力制御部３８を制御してヘッドホン３９より出力させるとともに、ＡＲ表示制御部３４を制御してＡＲ表示部３５に表示させて、ログアウト状態となり、処理が終了される。
【０１３０】
このような処理により、ユーザ端末２は、現在位置情報や、ユーザの発話に対応する音声データをサーバ１に送信し、サーバ１から、過去の検査結果、ならびに、ユーザの発話内容やサーバ１への登録内容を確認するためのテキストデータおよび音声データを受信して、ＡＲ表示部３５に表示させ、ヘッドホン３９のスピーカーから音声出力させることが可能となる。したがって、検査支援システムでは、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる。
【０１３１】
次に、図７〜図１４のフローチャートを参照して、図１のサーバ１が実行するサーバの処理１について説明する。
【０１３２】
ステップＳ４１において、サーバ１の点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から音声データを受信したか否かを判断する。ステップＳ４１において受信される音声データは、上述したユーザ端末処理１のステップＳ２において送信された、ログイン要求を示す音声データである。ステップＳ４１において、音声データを受信していないと判断された場合、音声データを受信したと判断されるまで、ステップＳ４１の処理が繰り返される。
【０１３３】
ステップＳ４１において、音声データを受信したと判断された場合、ステップＳ４２において、点検処理制御部１３は、受信された音声データを音声認識処理部１５に供給し、音声認識処理部１５からログイン要求であるという認識結果を受けて、その音声データを使用者認識処理部１７に供給し、ユーザ端末２の使用者の認識処理を実行させる。使用者認識処理部１７は、点検処理制御部１３の制御に基づいて、使用者データベース１６に登録されている情報を用いて、その音声データに対応する発話が登録されたユーザであるか否かの認識処理を実行し、認識処理結果を点検処理制御部１３に供給する。
【０１３４】
ステップＳ４３において、点検処理制御部１３は、ステップＳ４２の認識処理の結果に基づいて、ユーザ端末２の使用者は登録された使用者であるか否かを判断する。
【０１３５】
ステップＳ４３において、ユーザ端末２の使用者は登録された使用者ではないと判断された場合、ステップＳ４４において、点検処理制御部１３は、サーバ通信処理制御部１２を制御し、サーバ通信部１１からユーザ端末２へ、所定のエラーメッセージを送信させる。サーバ通信部１１は、ユーザ端末２に、エラーメッセージを送信する。ステップＳ４４の処理の終了後、処理は、ステップＳ４１に戻り、それ以降の処理が繰り返される。
【０１３６】
ステップＳ４３において、ユーザ端末２の使用者は登録された使用者であると判断された場合、ステップＳ４５において、点検処理制御部１３は、サーバ通信処理制御部１２を制御し、サーバ通信部１１からユーザ端末２へ、ログイン許可を送信させる。サーバ通信部１１は、ユーザ端末２に、ログイン許可を送信する。
【０１３７】
ステップＳ４６において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から緯度経度情報を受信したか否かを判断する。
【０１３８】
ステップＳ４６において、緯度経度情報を受信したと判断された場合、ステップＳ４７において、点検処理制御部１３は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部１３に供給する。点検処理制御部１３は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末２に送信する。
【０１３９】
ステップＳ４６において、緯度経度情報を受信していないと判断された場合、または、ステップＳ４７の処理の終了後、ステップＳ４８において、点検処理制御部１３は、現在位置より検査進行方向の最も近い位置における過去の検査結果情報は、ユーザ端末２へ送信済みであるか否かを判断する。
【０１４０】
ステップＳ４８において、現在位置より検査進行方向の最も近い位置における過去の検査結果情報は送信済みではないと判断された場合、ステップＳ４９において、点検処理制御部１３は、位置情報演算処理部１９の処理により得られるユーザ端末２の位置に対応する路線名と基点からのキロ程による位置情報に基づいて、点検結果登録制御部２１を制御して、過去の点検結果のうち、ユーザ端末２を保有するユーザが次に到着する過去の不良発生個所の情報を、点検結果データベース２０から検索させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、ユーザ端末２を利用しているユーザが検査を行っている路線の過去の点検結果を、点検結果データベース２０から検索し、ユーザ端末２を保有するユーザが次に到着する過去の不良発生個所の情報を、点検処理制御部１３に供給する。点検処理制御部１３は、サーバ通信処理制御部１２を制御して、供給された過去の点検結果を、サーバ通信部１１からユーザ端末２に送信させる。
【０１４１】
ステップＳ４８において、現在位置より検査進行方向の最も近い位置における過去の検査結果情報は送信済みであると判断された場合、または、ステップＳ４９の処理の終了後、ステップＳ５０において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から音声データを受信したか否かを判断する。ステップＳ５０において受信される音声データは、上述したユーザ端末処理１のステップＳ９において送信された、ユーザからの要求や不良内容の登録内容などを示す音声データである。ステップＳ５０において、音声データを受信していないと判断された場合、音声データを受信したと判断されるまで、ステップＳ５０の処理が繰り返される。
【０１４２】
ステップＳ５０において、音声データを受信したと判断された場合、ステップＳ５１において、点検処理制御部１３は、受信された音声データを音声認識処理部１５に供給し、音声認識処理を実行させる。音声認識処理部１５は、点検処理制御部１３の制御に基づいて、音声認識処理を実行する。音声認識処理部１５は、サーバ通信部１１が、ユーザ端末２から受信した音声データを、音声認識用データベース１４に登録されている情報を用いて認識し、音声認識結果を点検処理制御部１３に供給する。
【０１４３】
ステップＳ５２において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「検査開始」などの検査開始要求であるか否かを判断する。ステップＳ５２において、ユーザの発話内容は、検査開始要求ではないと判断された場合、処理は、後述するステップＳ５９に進む。
【０１４４】
ステップＳ５２において、ユーザの発話内容は、検査開始要求であると判断された場合、ステップＳ５３において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から緯度経度情報を受信したか否かを判断する。ステップＳ５３において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ５３の処理が繰り返される。
【０１４５】
ステップＳ５３において、緯度経度情報を受信したと判断された場合、ステップＳ５４において、点検処理制御部１３は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部１３に供給する。点検処理制御部１３は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末２に送信する。
【０１４６】
ステップＳ５５において、点検処理制御部１３は、テキストデータ生成部２２を制御して、変換されたキロ程情報に基づいて、「○○キロ程から検査を開始します」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末２において表示出力されるテキストデータ「○○キロ程から検査を開始します」を生成し、点検処理制御部１３に供給する。
【０１４７】
ステップＳ５６において、サーバの点検処理制御部１３は、音声データ生成部２３を制御して、変換されたキロ程情報に基づいて、「○○キロ程から検査を開始します」の出力用音声データを生成させる。音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データ「○○キロ程から検査を開始します」を生成し、点検処理制御部１３に供給する。
【０１４８】
ステップＳ５７において、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、出力用音声データ、および、現在位置情報を、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、出力用音声データ、および、現在位置情報をユーザ端末２に送信する。
【０１４９】
ステップＳ５８において、点検処理制御部１３は、点検結果登録制御部２１を制御して、検査開始位置の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、検査開始位置を、点検結果データベース２０に供給して登録する処理を実行する。
【０１５０】
ステップＳ５２において、ユーザの発話内容は、検査開始要求ではないと判断された場合、または、ステップＳ５８の処理の終了後、ステップＳ５９において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「検査開始位置を○○キロ程に変更」などの、検査開始キロ程変更要求であるか否かを判断する。ステップＳ５９において、ユーザの発話内容は、検査開始キロ程変更要求ではないと判断された場合、処理は、後述するステップＳ６５に進む。
【０１５１】
ステップＳ５９において、ユーザの発話内容は、検査開始キロ程変更要求であると判断された場合、ステップＳ６０において、点検処理制御部１３は、ステップＳ５１において認識された音声認識結果から、ユーザが変更を指令した検査開始キロ程情報を取得する。
【０１５２】
ステップＳ６１において、点検処理制御部１３は、テキストデータ生成部２２を制御して、取得された検査開始キロ程情報に基づいて、「検査開始位置を○○キロ程に修正します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末２において表示出力されるテキストデータ「検査開始位置を○○キロ程に修正します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
【０１５３】
ステップＳ６２において、点検処理制御部１３は、音声データ生成部２３を制御して、「検査開始位置を○○キロ程に修正します。よろしいですか？」の出力用音声データを生成させる。音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データ「検査開始位置を○○キロ程に修正します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
【０１５４】
ステップＳ６３において、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、出力用音声データ、および、現在位置情報を、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、出力用音声データ、および、現在位置情報をユーザ端末２に送信する。
【０１５５】
ステップＳ６４において、点検処理制御部１３は、点検結果登録制御部２１を制御して、検査開始位置の登録変更処理を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、変更された検査開始位置を、点検結果データベース２０に供給して登録する処理を実行する。
【０１５６】
ステップＳ５９において、ユーザの発話内容は、検査開始キロ程変更要求ではないと判断された場合、または、ステップＳ６４の処理の終了後、ステップＳ６５において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「枕木に××、健全度Ａ」などの、不良内容登録要求であるか否かを判断する。ステップＳ６５において、ユーザの発話内容は、不良内容登録要求ではないと判断された場合、処理は、後述するステップＳ７４に進む。
【０１５７】
ステップＳ６５において、ユーザの発話内容は、不良内容登録要求であると判断された場合、ステップＳ６６において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から緯度経度情報を受信したか否かを判断する。ステップＳ６６において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ６６の処理が繰り返される。
【０１５８】
ステップＳ６６において、緯度経度情報を受信したと判断された場合、ステップＳ６７において、点検処理制御部１３は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部１３に供給する。点検処理制御部１３は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末２に送信する。
【０１５９】
ステップＳ６８において、サーバの点検処理制御部１３は、テキストデータ生成部２２を制御して、音声認識結果、キロ程情報に基づいて、「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末２において表示出力されるテキストデータ「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
【０１６０】
ステップＳ６９において、点検処理制御部１３は、音声データ生成部２３を制御して、「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」の出力用音声データを生成せる。音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データ「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
【０１６１】
ステップＳ７０において、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、出力用音声データ、および、現在位置情報を、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、出力用音声データ、および、現在位置情報をユーザ端末２に送信する。
【０１６２】
ステップＳ７１において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から画像データを受信したか否かを判断する。ステップＳ７１において、画像データを受信していないと判断された場合、処理は、後述するステップＳ７３の処理に進む。
【０１６３】
ステップＳ７１において、画像データを受信したと判断された場合、ステップＳ７２において、点検処理制御部１３は、画像データと音声認識の結果得られた不良内容とを対応付ける。
【０１６４】
ステップＳ７１において、画像データを受信していないと判断された場合、または、ステップＳ７２の処理の終了後、ステップＳ７３において、点検処理制御部１３は、点検結果登録制御部２１を制御して、不良内容の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、不良内容を、点検結果データベース２０に供給して登録する処理を実行する。
【０１６５】
ステップＳ６５において、ユーザの発話内容は、不良内容登録要求ではないと判断された場合、または、ステップＳ７３の処理の終了後、ステップＳ７４において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「○○キロ程、枕木に××、健全度Ａに登録内容を変更」などの、不良内容登録変更要求であるか否かを判断する。ステップＳ７４において、ユーザの発話内容は、不良内容登録変更要求ではないと判断された場合、処理は、後述するステップＳ８１に進む。
【０１６６】
ステップＳ７４において、ユーザの発話内容は、不良内容登録変更要求であると判断された場合、ステップＳ７５において、点検処理制御部１３は、テキストデータ生成部２２を制御して、音声認識結果に基づいて、「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末２において表示出力されるテキストデータ「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
【０１６７】
ステップＳ７６において、点検処理制御部１３は、音声データ生成部２３を制御して、「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」の出力用音声データを生成させる。音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データ「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
【０１６８】
ステップＳ７７において、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、出力用音声データ、および、現在位置情報を、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、出力用音声データ、および、現在位置情報をユーザ端末２に送信する。
【０１６９】
ステップＳ７８において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から画像データを受信したか否かを判断する。ステップＳ７８において、画像データを受信していないと判断された場合、処理は、後述するステップＳ８０の処理に進む。
【０１７０】
ステップＳ７８において、画像データを受信したと判断された場合、ステップＳ７９において、点検処理制御部１３は、画像データと修正された不良内容とを対応付ける。
【０１７１】
ステップＳ７８において、画像データを受信していないと判断された場合、または、ステップＳ７９の処理の終了後、ステップＳ８０において、点検処理制御部１３は、点検結果登録制御部２１を制御して、不良内容の登録修正処理を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、修正された不良内容を、点検結果データベース２０に供給して登録する処理を実行する。
【０１７２】
ステップＳ７４において、ユーザの発話内容は、不良内容登録変更要求ではないと判断された場合、または、ステップＳ８１の処理の終了後、ステップＳ８１において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「措置作業、××××」などの、措置作業内容登録要求であるか否かを判断する。ステップＳ８１において、ユーザの発話内容は、措置作業内容登録要求ではないと判断された場合、処理は、後述するステップＳ９０に進む。
【０１７３】
ステップＳ８１において、ユーザの発話内容は、措置作業内容登録要求であると判断された場合、ステップＳ８２において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から緯度経度情報を受信したか否かを判断する。ステップＳ８２において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ８２の処理が繰り返される。
【０１７４】
ステップＳ８２において、緯度経度情報を受信したと判断された場合、ステップＳ８３において、サーバの点検処理制御部１３は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部１３に供給する。点検処理制御部１３は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末２に送信する。
【０１７５】
ステップＳ８４において、点検処理制御部１３は、テキストデータ生成部２２を制御して、変換されたキロ程情報に基づいて、「○○キロ程、措置作業、××××」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末２において表示出力されるテキストデータ「○○キロ程、措置作業、××××」を生成し、点検処理制御部１３に供給する。
【０１７６】
ステップＳ８５において、点検処理制御部１３は、音声データ生成部２３を制御して、「○○キロ程、措置作業、××××を登録します。よろしいですか？」の出力用音声データを生成させる。音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データ「○○キロ程、措置作業、××××を登録します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
【０１７７】
ステップＳ８６において、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、出力用音声データ、および、現在位置情報を、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、出力用音声データ、および、現在位置情報をユーザ端末２に送信する。
【０１７８】
ステップＳ８７において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から画像データを受信したか否かを判断する。ステップＳ８７において、画像データを受信していないと判断された場合、処理は、後述するステップＳ８９の処理に進む。
【０１７９】
ステップＳ８７において、画像データを受信したと判断された場合、ステップＳ８８において、点検処理制御部１３は、画像データと音声認識の結果得られた措置作業内容とを対応付ける。
【０１８０】
ステップＳ８７において、画像データを受信していないと判断された場合、または、ステップＳ８８の処理の終了後、ステップＳ８９において、点検処理制御部１３は、点検結果登録制御部２１を制御して、措置作業内容の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、措置作業内容を、点検結果データベース２０に供給して登録する処理を実行する。
【０１８１】
ステップＳ８１において、ユーザの発話内容は、措置作業内容登録要求ではないと判断された場合、または、ステップＳ８９の処理の終了後、ステップＳ９０において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「検査終了」などの、検査終了要求であるか否かを判断する。ステップＳ９０において、ユーザの発話内容は、検査終了要求ではないと判断された場合、処理は、後述するステップＳ９７に進む。
【０１８２】
ステップＳ９０において、ユーザの発話内容は、検査終了要求であると判断された場合、ステップＳ９１において、サーバの点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から緯度経度情報を受信したか否かを判断する。ステップＳ９１において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ９１の処理が繰り返される。
【０１８３】
ステップＳ９１において、緯度経度情報を受信したと判断された場合、ステップＳ９２において、サーバの点検処理制御部１３は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部１３に供給する。点検処理制御部１３は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末２に送信する。
【０１８４】
ステップＳ９３において、点検処理制御部１３は、テキストデータ生成部２２を制御して、変換されたキロ程情報に基づいて、「○○キロ程で検査を終了します」の出力用テキストデータを生成せる。テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末において表示出力されるテキストデータ「○○キロ程で検査を終了します」を生成し、点検処理制御部１３に供給する。
【０１８５】
ステップＳ９４において、点検処理制御部１３は、音声データ生成部２３を制御して、「○○キロ程で検査を終了します」の出力用音声データを生成させる。音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データ「○○キロ程で検査を終了します」を生成し、点検処理制御部１３に供給する。
【０１８６】
ステップＳ９５において、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、出力用音声データ、および、現在位置情報を、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、出力用音声データ、および、現在位置情報をユーザ端末２に送信する。
【０１８７】
ステップＳ９６において、点検処理制御部１３は、点検結果登録制御部２１を制御して、検査終了位置の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、点検結果データベース２０に登録されている検査位置を修正登録する処理を実行する。
【０１８８】
ステップＳ９０において、ユーザの発話内容は、検査終了要求ではないと判断された場合、または、ステップＳ９６の処理の終了後、ステップＳ９７において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「検査終了位置を○○キロ程に変更」などの、検査終了キロ程変更要求であるか否かを判断する。ステップＳ９７において、ユーザの発話内容は、検査終了キロ程変更要求ではないと判断された場合、処理は、後述するステップＳ１０２に進む。
【０１８９】
ステップＳ９７において、ユーザの発話内容は、検査終了キロ程変更要求であると判断された場合、ステップＳ９８において、点検処理制御部１３は、テキストデータ生成部２２を制御して、音声認識の結果得られた検査終了キロ程情報に基づいて、「検査終了位置を○○キロ程に修正します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部１３の制御に基づいて、ユーザ端末２において表示出力されるテキストデータ「検査終了位置を○○キロ程に修正します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
【０１９０】
ステップＳ９９において、点検処理制御部１３は、音声データ生成部２３を制御して、「検査開始終了を○○キロ程に修正します。よろしいですか？」の出力用音声データを生成させる。音声データ生成部２３は、点検処理制御部１３の制御に基づいて、ユーザ端末２において音声出力される音声データ「検査開始終了を○○キロ程に修正します。よろしいですか？」を生成し、点検処理制御部１３に供給する。
【０１９１】
ステップＳ１００において、点検処理制御部１３は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、出力用音声データ、および、現在位置情報を、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、出力用音声データ、および、現在位置情報をユーザ端末２に送信する。
【０１９２】
ステップＳ１０１において、点検処理制御部１３は、点検結果登録制御部２１を制御して、検査終了位置の登録変更処理を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、点検結果データベース２０に登録されている検査開始位置を変更する処理を実行する。
【０１９３】
ステップＳ９７において、ユーザの発話内容は、検査終了キロ程変更要求ではないと判断された場合、またはステップＳ１０１の処理の終了後、ステップＳ１０２において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、不良個所一覧表示要求であるか否かを判断する。
【０１９４】
ステップＳ１０２において、ユーザの発話内容は、不良個所一覧表示要求であると判断された場合、ステップＳ１０３において、点検処理制御部１３は、ユーザ端末２の位置に対応する路線名に基づいて、点検結果登録制御部２１を制御して、対応する路線名の過去の点検結果のうち、対応する過去の不良発生個所の一覧を構成する情報を、点検結果データベース２０から検索させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、対応する過去の不良個所一覧を構成する情報を、点検結果データベース２０から検索し、点検処理制御部１３に供給する。点検処理制御部１３は、サーバ通信処理制御部１２を制御して、供給された過去の不良個所一覧を構成するデータを、サーバ通信部１１からユーザ端末２に送信させる。
【０１９５】
ステップＳ１０２において、ユーザの発話内容は、不良個所一覧表示要求ではないと判断された場合、または、ステップＳ１０３の処理の終了後、ステップＳ１０４において、点検処理制御部１３は、ステップＳ５１において認識されたユーザの発話内容は、例えば、「ログアウト」などの、アプリケーション終了要求であるか否かを判断する。ステップＳ１０４において、ユーザの発話内容は、アプリケーション終了要求ではないと判断された場合、処理は、ステップＳ４６に戻り、それ以降の処理が繰り返される。
【０１９６】
ステップＳ１０４において、ユーザの発話内容は、アプリケーション終了要求であると判断された場合、ステップＳ１０５において、点検処理制御部１３は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末２から緯度経度情報を受信したか否かを判断する。ステップＳ１０５において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ１０５の処理が繰り返される。
【０１９７】
ステップＳ１０５において、緯度経度情報を受信したと判断された場合、ステップＳ１０６において、点検処理制御部１３は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部１３の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部１３に供給する。
【０１９８】
ステップＳ１０７において、点検処理制御部１３は、例えば、「お疲れ様でした。終了します。」などの、アプリケーション終了時の出力用テキストデータおよび出力用音声データを、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、アプリケーション終了時の出力用テキストデータおよび出力用音声データを、ユーザ端末２に送信する。
【０１９９】
ステップＳ１０８において、点検処理制御部１３は、点検結果登録制御部２１を制御して、アプリケーション終了情報の登録を実行させる。点検結果登録制御部２１は、点検処理制御部１３の制御に基づいて、アプリケーション終了情報を、点検結果データベース２０に供給して登録する処理を実行する。
【０２００】
ステップＳ１０９において、点検処理制御部１３は、アプリケーション終了要求を受けたことを通知する情報を、信処理制御部の制御により、サーバ通信部１１からユーザ端末２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、アプリケーション終了要求を受けたことを通知する情報を、ユーザ端末２に送信して処理が終了される。この通知は、上述したユーザ端末処理1のステップＳ２５において、ユーザ端末において受信されたか否かが判断される。
【０２０１】
このような処理により、サーバ１は、ユーザ端末２から送信された音声データを認識し、ユーザ端末２を利用しているユーザからの要求に対応する処理や、検査結果の登録処理を実行することができる。また、サーバ１は、ユーザ端末２の位置に基づいて、過去の検査結果に対応する情報を送信する。したがって、検査支援システムでは、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる。
【０２０２】
次に、図１５を参照して、本発明の他の実施例である検査支援システムが有する機能構成について説明する。なお、図１における場合と同様な部分においては、同一の番号を付し、その説明は適宜省略する。
【０２０３】
図１５の検査支援システムは、検査結果情報が登録されるサーバ７１と、検査担当者であるユーザが線路上を歩行しながら検査現場にて用いるユーザ端末７２とを含んで構成されている。ユーザ端末７２は、ユーザが携帯可能な形状である。ユーザ端末７２は、特に、メガネ型ウェアラブル端末（メガネ形状の透過型のヘッドマウントディスプレイやスマートグラスとも称される）であると、検査実施時に両手が自由になり、ユーザがより安全に検査を行うことができるようになるため好適である。ユーザ端末７２は、ウェアラブル端末に対応する。
【０２０４】
サーバ７１は、サーバ通信部１１、サーバ通信処理制御部１２、点検処理制御部８１、使用者データベース８３、使用者認識処理部８４、位置情報データベース１８、位置情報演算処理部１９、点検結果データベース２０、点検結果登録制御部２１、テキストデータ生成部２２、および、音声出力用データ生成部８２の各機能を含んで構成されている。
【０２０５】
すなわち、点検処理制御部１３に代わって点検処理制御部８１、使用者データベース１６に代わって使用者データベース８３、使用者認識処理部１７に代わって使用者認識処理部８４の機能が備えられ、音声認識用データベース１４、音声認識処理部１５、および、音声データ生成部２３の機能が削除され、新たに、音声出力用データ生成部８２の機能が備えられている以外は、基本的に、図１を用いて説明したサーバ１と同様の機能構成を有している。なお、サーバ通信処理制御部１２、使用者認識処理部８４、位置情報演算処理部１９、点検結果登録制御部２１、テキストデータ生成部２２、および、音声出力用データ生成部８２の各部は、点検処理制御部８１の制御に基づいて、それぞれの機能を実現する。
【０２０６】
点検処理制御部８１は、サーバ７１の各部の処理を制御するものである。具体的には、点検処理制御部８１は、サーバ通信処理制御部１２を制御して、サーバ通信部１１で受信された情報の供給を受ける。点検処理制御部８１は、ユーザ端末７２から供給された音声認識結果がユーザ端末７２のログイン要求である場合、使用者認識処理部８４を制御して、ユーザ端末７２の使用者を認識する処理を実行させる。また、点検処理制御部８１は、サーバ通信部１１より受信された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。そして、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、路線名とキロ程による位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。
【０２０７】
また、点検処理制御部８１は、ユーザ端末７２の位置情報に基づいて、必要に応じて点検結果登録制御部２１を制御して、過去の点検結果を点検結果データベース２０から検索させる。そして、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、過去の点検結果を、サーバ通信部１１からユーザ端末７２に送信させる。また、点検処理制御部８１は、ユーザ端末７２より送信され、サーバ通信部１１において受信された現在の点検結果の情報を、点検結果登録制御部２１に供給して、点検結果データベース２０に登録させる。また、点検処理制御部８１は、テキストデータ生成部２２を制御して、ユーザ端末７２において表示出力されるテキストデータを生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。また、点検処理制御部８１は、音声出力用データ生成部８２を制御して、ユーザ端末７２における音声出力のためのデータを生成させ、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。
【０２０８】
音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２における音声出力のためのデータを生成し、点検処理制御部８１に供給する。
【０２０９】
使用者データベース８３は、ユーザ端末７２の使用者の情報を記録するものである。使用者データベース８３に記録される情報には、登録された使用者と、ユーザ端末７２にログインするためのパスワードが含まれている。
【０２１０】
使用者認識処理部８４は、サーバ通信部１１がユーザ端末７２から受信した音声認識結果がログイン要求であると認識された場合、点検処理制御部８１の制御に基づいて、使用者データベース８３に登録されているパスワード情報を用いて、ログインするユーザが、登録されたユーザであるか否かの認識処理を実行し、認識処理結果を点検処理制御部８１に供給する。
【０２１１】
なお、図１５において、サーバ７１は１つの装置として構成されているものとして説明したが、図１５のサーバ７１が有する機能を、複数の装置で実現するものとしてもよい。
【０２１２】
ユーザ端末７２は、端末通信部３１、端末通信処理制御部３２、ユーザ端末処理制御部９１、ＡＲ表示制御部３４、ＡＲ表示部３５、音声データ取得制御部３６、マイク３７、音声データ出力制御部３８、ヘッドホン３９、位置データ取得制御部４０、ＧＮＳＳ装置４１、ジャイロスコープ４２、地磁気センサ４３、撮像制御部４４、カメラ４５、音声認識用データベース９２、音声認識処理部９３、および、音声データ生成部９４の各機能を有して構成されている。
【０２１３】
すなわち、図１５のユーザ端末７２は、ユーザ端末処理制御部３３に代わって、ユーザ端末処理制御部９１の機能が設けられ、新たに、音声認識用データベース９２、音声認識処理部９３、および、音声データ生成部９４の各機能を備えている以外は、図１を用いて説明したユーザ端末２と基本的に同様の機能を有している。なお、末通信処理制御部３２、ＡＲ表示制御部３４、音声データ取得制御部３６、音声データ出力制御部３８、位置データ取得制御部４０、ジャイロスコープ４２、地磁気センサ４３、撮像制御部４４、音声認識処理部９３、および、音声データ生成部９４は、それぞれ、ユーザ端末処理制御部９１の制御に基づいて、それらの機能を実現する。
【０２１４】
ユーザ端末処理制御部９１は、ユーザ端末７２の各部の処理を制御するものである。具体的には、ユーザ端末処理制御部９１は、端末通信処理制御部３２を制御して、端末通信部３１により受信された情報の供給を受ける。ユーザ端末処理制御部９１は、供給された音声出力のためのデータを、音声データ生成部９４に供給して、音声データを生成させる。また、ユーザ端末処理制御部９１は、音声データ生成部９４により生成された音声データや、ユーザに注意を促すための所定の音声データを、音声データ出力制御部３８を制御して、ヘッドホン３９に内蔵されたスピーカーから音声出力させる。ユーザ端末処理制御部９１は、供給されたテキストデータや画像データを、ＡＲ表示制御部３４を制御して、ＡＲ表示部３５に表示させる。
【０２１５】
また、ユーザ端末処理制御部９１は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報の供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。また、ユーザ端末処理制御部９１は、撮像制御部４４を制御して、カメラ４５により画像を撮像させ、撮像された画像データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。また、ユーザ端末処理制御部９１は、ジャイロスコープ４２、および、地磁気センサ４３から供給された計測値に基づいて、ユーザ端末７２を装着しているユーザの視線の向き、すなわち、ＡＲ表示部３５を介してユーザが現実世界のいずれの方向を見ているかを検出する。そして、ユーザ端末処理制御部９１は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報、および、ユーザ端末７２を装着しているユーザの視線の向きの検出結果に基づいて、ＡＲ表示制御部３４による、過去の検査結果の表示の座標や大きさを制御する。
【０２１６】
更に、ユーザ端末処理制御部９１は、マイク３７により集音され、音声データ取得制御部３６により取得された音声データの供給を受け、音声認識処理部９３を制御して、音声認識処理を実行させる。そして、ユーザ端末処理制御部９１は、音声認識処理部９３による音声認識結果の供給を受け、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。
【０２１７】
音声認識用データベース９２は、マイク３７により集音され、音声データ取得制御部３６により取得された音声データの認識処理に用いられる情報が登録されているデータベースである。
【０２１８】
音声認識処理部９３は、ユーザ端末処理制御部９１の制御に基づいて、供給された音声データを、音声認識用データベース９２に登録されている情報を用いて音声認識し、音声認識結果をユーザ端末処理制御部９１に供給する。
【０２１９】
音声データ生成部９４は、ユーザ端末処理制御部９１の制御に基づいて、サーバ７１から送信される音声出力用データを基に、ユーザ端末７２において音声出力される音声データを生成し、ユーザ端末処理制御部９１に供給する。
【０２２０】
すなわち、図１５の検査支援システムは、音声認識処理および音声データの生成の機能が、サーバ７１ではなく、ユーザ端末７２に備えられている。また、ログインにおいては、ユーザの声紋などを用いる代わりに、ログインパスワードが用いられる。なお、ユーザ端末７２を用いた鉄道の保守点検のログインからシステム終了までの流れや、不良個所の表示方法については、音声認識に関する部分以外においては、図２および図３を用いて説明した場合と基本的に同様であるので、その説明は省略する。
【０２２１】
このように、検査支援システムでは、ユーザ端末７２が、ＧＮＳＳ装置４１により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示するＡＲ表示部３５と、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するマイク３７と、マイク３７により取得された検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部９３と、音声認識処理部９３により音声認識された検査対象物の検査結果情報をサーバ７１に送信する端末通信部３１とを備え、サーバ７１は、端末通信部３１から受信された検査対象物の検査結果情報を登録する点検結果データベース２０と、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、過去の検査結果情報をユーザ端末７２に送信するサーバ通信部１１とを有する。
【０２２２】
したがって、検査支援システムでは、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる。
【０２２３】
次に、図１６〜図１８のフローチャートを参照して、図１５のユーザ端末７２が実行するユーザ端末の処理２について説明する。
【０２２４】
ステップＳ１３１において、ユーザ端末処理制御部９１は、音声データ取得制御部３６から供給される情報に基づいて、ユーザの音声を取得したか否かを判断する。検査の最初にユーザより発話され、取得される音声データは、ログイン要求を示すものである。ステップＳ１３１において、ユーザの音声を取得していないと判断された場合、ユーザの音声を取得したと判断されるまで、ステップＳ１３１の処理が繰り返される。
【０２２５】
ステップＳ１３１において、ユーザの音声を取得したと判断された場合、ステップＳ１３２において、ユーザ端末処理制御部９１は、マイク３７により取得され、音声データ取得制御部３６から供給された音声データを、音声認識処理部９３に供給し、音声認識処理を実行させる。音声認識処理部９３は、ユーザ端末処理制御部９１の制御に基づいて、供給された音声データを、音声認識用データベース９２に登録されている情報を用いて音声認識し、音声認識結果をユーザ端末処理制御部９１に供給する。
【０２２６】
ステップＳ１３３において、ユーザ端末処理制御部９１は、ステップＳ１３２の処理により得られた音声認識結果を、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。端末通信部３１は、供給された音声データを、サーバ７１に送信する。
【０２２７】
ステップＳ１３４において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ７１よりエラーメッセージが通知されたか否かを判断する。ステップＳ１３４において、エラーメッセージが通知されたと判断された場合、処理は、ステップＳ１３１に戻り、それ以降の処理が繰り返される。
【０２２８】
ステップＳ１３４において、エラーメッセージが通知されていないと判断された場合、ステップＳ１３５において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ７１よりログイン許可が通知されたか否かを判断する。ステップＳ１３５において、サーバ７１よりログイン許可が通知されていないと判断された場合、処理は、ステップＳ１３４に戻り、それ以降の処理が繰り返される。
【０２２９】
ステップＳ１３５において、サーバ７１よりログイン許可が通知されたと判断された場合、ステップＳ１３６において、ユーザ端末処理制御部９１は、ログイン状態となる。
【０２３０】
ステップＳ１３７において、ユーザ端末処理制御部９１は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報を取得し、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。端末通信部３１は、緯度経度情報をサーバ７１に送信する。
【０２３１】
ステップＳ１３８において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により受信された、路線の起点からのキロ程に変換された現在位置情報を取得する。そして、ユーザ端末処理制御部９１は、ＡＲ表示制御部３４を制御して、キロ程に変換された現在位置情報をＡＲ表示部３５に表示させる。ＡＲ表示部３５は、キロ程に変換された現在位置情報を表示する。
【０２３２】
ステップＳ１３９において、ユーザ端末処理制御部９１は、音声データ取得制御部３６から供給される情報に基づいて、ユーザの音声を取得したか否かを判断する。図２および図３を用いて説明したように、検査中のユーザは、ユーザ端末７２に対して、検査開始または終了の通知や、それらの位置変更の要求、または、不良内容の登録内容などを発話する。ステップＳ１３９において、ユーザの音声を取得していないと判断された場合、処理は、ステップＳ１３７に戻り、それ以降の処理が繰り返される。
【０２３３】
ステップＳ１３９において、ユーザの音声を取得したと判断された場合、ステップＳ１４０において、ユーザ端末処理制御部９１は、マイク３７により取得され、音声データ取得制御部３６から供給された音声データを、音声認識処理部９３に供給し、音声認識処理を実行させる。音声認識処理部９３は、ユーザ端末処理制御部９１の制御に基づいて、供給された音声データを、音声認識用データベース９２に登録されている情報を用いて音声認識し、音声認識結果をユーザ端末処理制御部９１に供給する。
【０２３４】
ステップＳ１４１において、ユーザ端末処理制御部９１は、ステップＳ１４０の処理により得られた音声認識結果を、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。端末通信部３１は、供給された音声データを、サーバ７１に送信する。
【０２３５】
ステップＳ１４２において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ７１より過去の検査結果情報を受信したか否かを判断する。
【０２３６】
ステップＳ１４２において、過去の検査結果情報を受信したと判断された場合、ステップＳ１４３において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により受信された過去の検査結果情報を取得する。そして、ユーザ端末処理制御部９１は、ＡＲ表示制御部３４を制御して、過去の検査結果情報であるテキストデータおよび画像データを、例えば、図２または図３を用いて説明したように、ＡＲ表示部３５に表示させる。ＡＲ表示部３５は、過去の検査結果情報を表示出力する。
【０２３７】
ステップＳ１４２において、過去の検査結果情報を受信していないと判断された場合、または、ステップＳ１４３の処理の終了後、ステップＳ１４４において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ７１より、過去の検査結果以外のテキストデータまたは音声出力のためのデータの少なくとも一方を受信したか否かを判断する。ここで、過去の検査結果以外のテキストデータまたは音声出力のためのデータとは、例えば、図２または図３を用いて説明したように、「１ｋ２００から検査を開始します」や「２ｋ４４５、左締結装置内側ボルト緩み、Ｃランクで登録します。よろしいですか」などの、ユーザの発話内容を確認するためのキストデータまたは音声出力のためのデータである。ステップＳ１４４において、過去の検査結果以外のテキストデータまたは音声出力のためのデータのいずれも受信していないと判断された場合、処理は、後述するステップＳ１４８に進む。
【０２３８】
ステップＳ１４４において、過去の検査結果以外のテキストデータまたは音声出力のためのデータのうちの少なくとも一方を受信したと判断された場合、ステップＳ１４５において、ユーザ端末処理制御部９１は、受信したデータの出力処理を実行する。
【０２３９】
具体的には、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により受信されたテキストデータを取得する。そして、ユーザ端末処理制御部９１は、ＡＲ表示制御部３４を制御して、テキストデータを、例えば、図２または図３を用いて説明したように、ＡＲ表示部３５に表示させる。ＡＲ表示部３５は、テキストデータを表示出力する。
【０２４０】
また、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により受信された音声出力のためのデータを取得する。そして、ユーザ端末処理制御部９１は、供給された音声出力のためのデータを、音声データ生成部９４に供給して、音声データを生成させる。音声データ生成部９４は、ユーザ端末処理制御部９１の制御に基づいて、サーバ７１から送信された音声出力用データを基に、音声データを生成し、ユーザ端末処理制御部９１に供給する。ユーザ端末処理制御部９１は、音声データ出力制御部３８を制御して、ヘッドホン３９から音声データを出力させる。ヘッドホン３９は、音声データを出力する。
【０２４１】
ステップＳ１４６において、ユーザ端末処理制御部９１は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報を取得し、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。端末通信部３１は、緯度経度情報をサーバ７１に送信する。
【０２４２】
ステップＳ１４７において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により受信された、路線の起点からのキロ程に変換された現在位置情報を取得する。そして、ユーザ端末処理制御部９１は、ＡＲ表示制御部３４を制御して、キロ程に変換された現在位置情報をＡＲ表示部３５に表示させる。ＡＲ表示部３５は、キロ程に変換された現在位置情報を表示する。
【０２４３】
ステップＳ１４４において、過去の検査結果以外のテキストデータまたは音声出力のためのデータのいずれも受信していないと判断された場合、または、ステップＳ１４７の処理の終了後、ステップＳ１４８６において、ユーザ端末処理制御部９１は、取得されている現在位置情報に基づいて、過去の検査結果のうちのいずれかが所定距離以内であるか否かを判断する。ステップＳ１４８において、過去の検査結果のうちのいずれかが所定距離以内ではないと判断された場合、処理は、後述するステップＳ１５５に進む。
【０２４４】
ステップＳ１４８において、過去の検査結果のうちのいずれかが所定距離以内であると判断された場合、ステップＳ１４９において、ユーザ端末処理制御部９１は、ジャイロスコープ４２から供給されるユーザ端末７２の角度（姿勢）や角速度あるいは角加速度の検出結果、および、地磁気センサ４３から供給されるユーザ端末７２が向いている角度の検出結果に基づいて、ユーザの視線の向き、すなわち、ＡＲ表示部３５を介してユーザが現実世界のいずれの方向を見ているかを検出する。
【０２４５】
ステップＳ１５０において、ユーザ端末処理制御部９１は、ステップＳ１４９における検出結果に基づいて、ユーザが、次の過去の不良発生個所の方向に対応する所定の方向を向いているか否かを判断する。
【０２４６】
ステップＳ１５０において、ユーザが所定の方向を向いていると判断された場合、ステップＳ１５１において、ユーザ端末処理制御部９１は、例えば、図２のＡＲ表示部３５‐３および３５‐４を用いて説明したような、過去の検査結果の表示の一部である不良発生個所情報５１の座標および大きさを演算する。
【０２４７】
ステップＳ１５０において、ユーザが所定の方向を向いていないと判断された場合、または、ステップＳ１５１の処理の終了後、ステップＳ１５２において、ユーザ端末処理制御部９１は、ＡＲ表示制御部３４を制御して、例えば、図２のＡＲ表示部３５‐３および３５‐４を用いて説明したような、または、図３のＡＲ表示部３５‐１１および３５‐１２を用いて説明したような、過去の検査結果の詳細表示を実行させる。ＡＲ表示制御部３４は、ＡＲ表示部３５に、過去の検査結果の詳細を表示させる。
【０２４８】
すなわち、ステップＳ１５０において、ユーザが所定の方向を向いていると判断された場合には、ステップＳ１５２の処理により、不良発生個所情報５１が、演算結果に基づいた座標および大きさで、他の過去の検査結果であるテキストデータまたは画像データとともに、ＡＲ表示部３５に表示されるが、ステップＳ１５０において、ユーザが所定の方向を向いていないと判断された場合、ステップＳ１５２の処理により、不良発生個所情報５１は表示されず、他の過去の検査結果であるテキストデータまたは画像データのみがＡＲ表示部３５に表示される。
【０２４９】
ステップＳ１５３において、ユーザ端末処理制御部９１は、位置データ取得制御部４０の制御によりＧＮＳＳ装置４１において受信された緯度経度情報を取得し、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。端末通信部３１は、緯度経度情報をサーバ７１に送信する。
【０２５０】
ステップＳ１５４において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により受信された、路線の起点からのキロ程に変換された現在位置情報を取得する。そして、ユーザ端末処理制御部９１は、ＡＲ表示制御部３４を制御して、キロ程に変換された現在位置情報をＡＲ表示部３５に表示させる。ＡＲ表示部３５は、キロ程に変換された現在位置情報を表示する。
【０２５１】
ステップＳ１４８において、過去の検査結果のうちのいずれかが所定距離以内ではないと判断された場合、または、ステップＳ１５４の処理の終了後、ステップＳ１５５において、ユーザ端末処理制御部９１は、撮像制御部４４から供給された信号に基づいて、撮像が指令されたか否かを判断する。
【０２５２】
ステップＳ１５５において、撮像が指令されたと判断された場合、ステップＳ１５６において、ユーザ端末処理制御部９１は、撮像制御部４４を制御して、カメラ４５により撮像処理を実行させる。そして、ユーザ端末処理制御部９１は、撮像されて得られた画像データを、端末通信処理制御部３２を制御して、端末通信部３１から、サーバ７１に送信させる。端末通信部３１は、画像データをサーバ７１に送信する。
【０２５３】
ステップＳ１５５において、撮像が指令されていないと判断された場合、または、ステップＳ１５６の処理の終了後、ステップＳ１５７において、ユーザ端末処理制御部９１は、端末通信処理制御部３２を介して端末通信部３１により供給された情報に基づいて、サーバ７１よりアプリケーション終了要求を受けたことが通知されたか否かを判断する。ステップＳ１５７において、アプリケーション終了要求を受けていないと判断された場合、処理は、ステップＳ１３９に戻り、それ以降の処理が繰り返される。
【０２５４】
ステップＳ１５７において、アプリケーション終了要求を受けたと判断された場合、ステップＳ１５８において、端末通信部３１は、サーバ７１より、例えば、「お疲れ様でした。終了します」などの音声を出力するためのデータ、または、テキストデータの少なくとも一方、および、必要に応じて、図２のＡＲ表示部３５−６の表示画面を表示させるための画像データを受信する。ユーザ端末処理制御部９１は、端末通信処理制御部３２から、これらの音声を出力するためのデータ、テキストデータ、または、画像データを取得する。ユーザ端末処理制御部９１は、音声出力のためのデータを音声データ生成部９４に供給して、音声データを生成させる。音声データ生成部９４は、ユーザ端末処理制御部９１の制御に基づいて、サーバ７１から送信された音声出力用データを基に、音声データを生成し、ユーザ端末処理制御部９１に供給する。ユーザ端末処理制御部９１は、音声データ出力制御部３８を制御して、音声データをヘッドホン３９より出力させるとともに、ＡＲ表示制御部３４を制御して、テキストデータおよび画像データをＡＲ表示部３５に表示させて、ログアウト状態となり、処理が終了される。
【０２５５】
このような処理により、ユーザ端末７２は、現在位置情報や、ユーザの発話に対応する音声データの認識結果をサーバ７１に送信し、サーバ７１から、過去の検査結果、ならびに、ユーザの発話内容やサーバ７１への登録内容を確認するためのテキストデータおよび音声出力のためのデータを受信して、ＡＲ表示部３５に表示させ、ヘッドホン３９のスピーカーから音声出力させることが可能となる。したがって、検査支援システムでは、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる。
【０２５６】
次に、図１９〜図２６のフローチャートを参照して、図１５のサーバ７１が実行するサーバの処理２について説明する。
【０２５７】
ステップＳ１７１において、サーバ７１の点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から音声認識結果を受信したか否かを判断する。ステップＳ１７１において受信される音声認識結果は、上述したユーザ端末処理２のステップＳ１３３において送信された、ログイン要求、および、パスワード情報を示す音声認識結果である。ステップＳ１７１において、音声認識結果を受信していないと判断された場合、音声認識結果を受信したと判断されるまで、ステップＳ１７１の処理が繰り返される。
【０２５８】
ステップＳ１７１において、音声認識結果を受信したと判断された場合、ステップＳ１７２において、点検処理制御部８１は、受信された音声認識結果すなわち、ログイン要求であるという認識結果を受けて、ユーザ端末７２から送信されたパスワードを使用者認識処理部８４に供給し、ユーザ端末７２の使用者の認識処理を実行させる。使用者認識処理部８４は、点検処理制御部８１の制御に基づいて、使用者データベース８３に登録されているパスワード情報を用いて、ユーザ端末７２にログインしようとしているユーザが登録されたユーザであるか否かの認識処理を実行し、認識処理結果を点検処理制御部８１に供給する。
【０２５９】
ステップＳ１７３において、点検処理制御部８１は、ステップＳ４２の認識処理の結果に基づいて、ユーザ端末７２の使用者は登録された使用者であるか否かを判断する。
【０２６０】
ステップＳ１７３において、ユーザ端末７２の使用者は登録された使用者ではないと判断された場合、ステップＳ１７４において、点検処理制御部８１は、サーバ通信処理制御部１２を制御し、サーバ通信部１１からユーザ端末７２へ、所定のエラーメッセージを送信させる。サーバ通信部１１は、ユーザ端末７２に、エラーメッセージを送信する。ステップＳ１７４の処理の終了後、処理は、ステップＳ１７１に戻り、それ以降の処理が繰り返される。
【０２６１】
ステップＳ１７３において、ユーザ端末７２の使用者は登録された使用者であると判断された場合、ステップＳ１７５において、点検処理制御部８１は、サーバ通信処理制御部１２を制御し、サーバ通信部１１からユーザ端末７２へ、ログイン許可を送信させる。サーバ通信部１１は、ユーザ端末７２に、ログイン許可を送信する。
【０２６２】
ステップＳ１７６において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から緯度経度情報を受信したか否かを判断する。
【０２６３】
ステップＳ１７６において、緯度経度情報を受信したと判断された場合、ステップＳ１７７において、点検処理制御部８１は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部８１の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部８１に供給する。点検処理制御部８１は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末７２に送信する。
【０２６４】
ステップＳ１７６において、緯度経度情報を受信していないと判断された場合、または、ステップＳ１７７の処理の終了後、ステップＳ１７８において、点検処理制御部８１は、現在位置より検査進行方向の最も近い位置における過去の検査結果情報は、ユーザ端末７２へ送信済みであるか否かを判断する。
【０２６５】
ステップＳ１７８において、現在位置より検査進行方向の最も近い位置における過去の検査結果情報は送信済みではないと判断された場合、ステップＳ１７９において、点検処理制御部８１は、位置情報演算処理部１９の処理により得られるユーザ端末７２の位置に対応する路線名と基点からのキロ程による位置情報に基づいて、点検結果登録制御部２１を制御して、過去の点検結果のうち、ユーザ端末７２を保有するユーザが次に到着する過去の不良発生個所の情報を、点検結果データベース２０から検索させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、ユーザ端末７２を利用しているユーザが検査を行っている路線の過去の点検結果を、点検結果データベース２０から検索し、ユーザ端末７２を保有するユーザが次に到着する過去の不良発生個所の情報を、点検処理制御部８１に供給する。点検処理制御部８１は、サーバ通信処理制御部１２を制御して、供給された過去の点検結果を、サーバ通信部１１からユーザ端末７２に送信させる。
【０２６６】
ステップＳ１７８において、現在位置より検査進行方向の最も近い位置における過去の検査結果情報は送信済みであると判断された場合、または、ステップ１７９の処理の終了後、ステップＳ１８０において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から音声認識結果を受信したか否かを判断する。ステップＳ１８０において受信される音声認識結果は、上述したユーザ端末処理２のステップＳ１４１において送信された、ユーザからの要求や不良内容の登録内容などを示す音声認識結果である。ステップＳ１８０において、音声認識結果を受信していないと判断された場合、音声認識結果を受信したと判断されるまで、ステップＳ１８０の処理が繰り返される。
【０２６７】
ステップＳ１８０において、音声データを受信したと判断された場合、ステップＳ１８１において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「検査開始」などの検査開始要求であるか否かを判断する。ステップＳ１８１において、ユーザの発話内容は、検査開始要求ではないと判断された場合、処理は、後述するステップＳ１８８に進む。
【０２６８】
ステップＳ１８１において、ユーザの発話内容は、検査開始要求であると判断された場合、ステップＳ１８２において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から緯度経度情報を受信したか否かを判断する。ステップＳ１８２において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ１８２の処理が繰り返される。
【０２６９】
ステップＳ１８２において、緯度経度情報を受信したと判断された場合、ステップＳ１８３において、点検処理制御部８１は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部８１の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部８１に供給する。点検処理制御部８１は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末７２に送信する。
【０２７０】
ステップＳ１８４において、点検処理制御部８１は、テキストデータ生成部２２を制御して、変換されたキロ程情報に基づいて、「○○キロ程から検査を開始します」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において表示出力されるテキストデータ「○○キロ程から検査を開始します」を生成し、点検処理制御部８１に供給する。
【０２７１】
ステップＳ１８５において、サーバの点検処理制御部８１は、音声出力用データ生成部８２を制御して、変換されたキロ程情報に基づいて、「○○キロ程から検査を開始します」の音声出力のためのデータを生成させる。音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において音声出力される「○○キロ程から検査を開始します」に対応する音声出力のためのデータを生成し、点検処理制御部８１に供給する。
【０２７２】
ステップＳ１８６において、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報をユーザ端末７２に送信する。
【０２７３】
ステップＳ１８７において、点検処理制御部８１は、点検結果登録制御部２１を制御して、検査開始位置の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、検査開始位置を、点検結果データベース２０に供給して登録する処理を実行する。
【０２７４】
ステップＳ１８１において、ユーザの発話内容は、検査開始要求ではないと判断された場合、または、ステップＳ１８７の処理の終了後、ステップＳ１８８において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「検査開始位置を○○キロ程に変更」などの検査開始キロ程変更要求であるか否かを判断する。ステップＳ１８８において、ユーザの発話内容は、検査開始キロ程変更要求ではないと判断された場合、処理は、後述するステップＳ１９４に進む。
【０２７５】
ステップＳ１８８において、ユーザの発話内容は、検査開始キロ程変更要求であると判断された場合、ステップＳ１８９において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果から、ユーザが変更を指令した検査開始キロ程情報を取得する。
【０２７６】
ステップＳ１９０において、点検処理制御部８１は、テキストデータ生成部２２を制御して、取得された検査開始キロ程情報に基づいて、「検査開始位置を○○キロ程に修正します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において表示出力されるテキストデータ「検査開始位置を○○キロ程に修正します。よろしいですか？」を生成し、点検処理制御部８１に供給する。
【０２７７】
ステップＳ１９１において、点検処理制御部８１は、音声出力用データ生成部８２を制御して、「検査開始位置を○○キロ程に修正します。よろしいですか？」の音声出力のためのデータを生成させる。音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において音声出力される「検査開始位置を○○キロ程に修正します。よろしいですか？」に対応する音声出力のためのデータを生成し、点検処理制御部８１に供給する。
【０２７８】
ステップＳ１９２において、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報をユーザ端末７２に送信する。
【０２７９】
ステップＳ１９３において、点検処理制御部８１は、点検結果登録制御部２１を制御して、検査開始位置の登録変更処理を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、変更された検査開始位置を、点検結果データベース２０に供給して登録する処理を実行する。
【０２８０】
ステップＳ１８８において、ユーザの発話内容は、検査開始キロ程変更要求ではないと判断された場合、または、ステップＳ１９３の処理の終了後、ステップＳ１９４において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「枕木に××、健全度Ａ」などの、不良内容登録要求であるか否かを判断する。ステップＳ１９４において、ユーザの発話内容は、不良内容登録要求ではないと判断された場合、処理は、後述するステップＳ２０３に進む。
【０２８１】
ステップＳ１９４において、ユーザの発話内容は、不良内容登録要求であると判断された場合、ステップＳ１９５において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から緯度経度情報を受信したか否かを判断する。ステップＳ１９５において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ１９５の処理が繰り返される。
【０２８２】
ステップＳ１９５において、緯度経度情報を受信したと判断された場合、ステップＳ１９６において、点検処理制御部８１は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部８１の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部８１に供給する。点検処理制御部８１は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末７２に送信する。
【０２８３】
ステップＳ１９７において、サーバの点検処理制御部８１は、テキストデータ生成部２２を制御して、音声認識結果、キロ程情報に基づいて、「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において表示出力されるテキストデータ「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」を生成し、点検処理制御部８１に供給する。
【０２８４】
ステップＳ１９８において、点検処理制御部８１は、音声出力用データ生成部８２を制御して、「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」の音声出力のためのデータを生成せる。音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において音声出力される「○○キロ程、枕木に××、健全度Ａで登録します。よろしいですか？」に対応する音声出力のためのデータを生成し、点検処理制御部８１に供給する。
【０２８５】
ステップＳ１９９において、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、ユーザ端末７２に送信する。
【０２８６】
ステップＳ１２０において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から画像データを受信したか否かを判断する。ステップＳ１２０において、画像データを受信していないと判断された場合、処理は、後述するステップＳ２０２の処理に進む。
【０２８７】
ステップＳ１２０において、画像データを受信したと判断された場合、ステップＳ１２１において、点検処理制御部８１は、画像データと受信した不良内容とを対応付ける。
【０２８８】
ステップＳ１２０において、画像データを受信していないと判断された場合、または、ステップＳ１２１の処理の終了後、ステップＳ２０２において、点検処理制御部８１は、点検結果登録制御部２１を制御して、不良内容の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、不良内容を、点検結果データベース２０に供給して登録する処理を実行する。
【０２８９】
ステップＳ１９４において、ユーザの発話内容は、不良内容登録要求ではないと判断された場合、または、ステップＳ２０２の処理の終了後、ステップＳ２０３において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「○○キロ程、枕木に××、健全度Ａに登録内容を変更」などの、不良内容登録変更要求であるか否かを判断する。ステップＳ２０３において、ユーザの発話内容は、不良内容登録変更要求ではないと判断された場合、処理は、後述するステップＳ２１０に進む。
【０２９０】
ステップＳ２０３において、ユーザの発話内容は、不良内容登録変更要求であると判断された場合、ステップＳ２０４において、点検処理制御部８１は、テキストデータ生成部２２を制御して、音声認識結果に基づいて、「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において表示出力されるテキストデータ「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」を生成し、点検処理制御部８１に供給する。
【０２９１】
ステップＳ２０５において、点検処理制御部８１は、音声出力用データ生成部８２を制御して、「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」の音声出力のためのデータを生成させる。音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において音声出力される「○○キロ程、枕木に××、健全度Ａに登録内容を修正します。よろしいですか？」に対応する音声出力のためのデータを生成し、点検処理制御部８１に供給する。
【０２９２】
ステップＳ２０６において、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報をユーザ端末７２に送信する。
【０２９３】
ステップＳ２０７において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から画像データを受信したか否かを判断する。ステップＳ２０７において、画像データを受信していないと判断された場合、処理は、後述するステップＳ２０９の処理に進む。
【０２９４】
ステップＳ２０７において、画像データを受信したと判断された場合、ステップＳ２０８において、点検処理制御部８１は、画像データと修正された不良内容とを対応付ける。
【０２９５】
ステップＳ２０７において、画像データを受信していないと判断された場合、または、ステップＳ２０８の処理の終了後、ステップＳ２０９において、点検処理制御部８１は、点検結果登録制御部２１を制御して、不良内容の登録修正処理を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、修正された不良内容を、点検結果データベース２０に供給して登録する処理を実行する。
【０２９６】
ステップＳ２０３において、ユーザの発話内容は、不良内容登録変更要求ではないと判断された場合、または、ステップＳ２０９の処理の終了後、ステップＳ２１０において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「措置作業、××××」などの、措置作業内容登録要求であるか否かを判断する。ステップＳ２１０において、ユーザの発話内容は、措置作業内容登録要求ではないと判断された場合、処理は、後述するステップＳ２１９に進む。
【０２９７】
ステップＳ２１０において、ユーザの発話内容は、措置作業内容登録要求であると判断された場合、ステップＳ２１１において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から緯度経度情報を受信したか否かを判断する。ステップＳ２１１において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ２１１の処理が繰り返される。
【０２９８】
ステップＳ２１１において、緯度経度情報を受信したと判断された場合、ステップＳ２１２において、サーバの点検処理制御部８１は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部８１の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部８１に供給する。点検処理制御部８１は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末７２に送信する。
【０２９９】
ステップＳ２１３において、点検処理制御部８１は、テキストデータ生成部２２を制御して、変換されたキロ程情報に基づいて、「○○キロ程、措置作業、××××」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において表示出力されるテキストデータ「○○キロ程、措置作業、××××」を生成し、点検処理制御部８１に供給する。
【０３００】
ステップＳ２１４において、点検処理制御部８１は、音声出力用データ生成部８２を制御して、「○○キロ程、措置作業、××××を登録します。よろしいですか？」の音声出力のためのデータを生成させる。音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において音声出力される「○○キロ程、措置作業、××××を登録します。よろしいですか？」に対応する音声出力のためのデータを生成し、点検処理制御部８１に供給する。
【０３０１】
ステップＳ２１５において、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報をユーザ端末７２に送信する。
【０３０２】
ステップＳ２１６において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から画像データを受信したか否かを判断する。ステップＳ２１６において、画像データを受信していないと判断された場合、処理は、後述するステップＳ２１８の処理に進む。
【０３０３】
ステップＳ２１６において、画像データを受信したと判断された場合、ステップＳ２１７において、点検処理制御部８１は、画像データと受信した措置作業内容とを対応付ける。
【０３０４】
ステップＳ２１６において、画像データを受信していないと判断された場合、または、ステップＳ２１７の処理の終了後、ステップＳ２１８において、点検処理制御部８１は、点検結果登録制御部２１を制御して、措置作業内容の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、措置作業内容を、点検結果データベース２０に供給して登録する処理を実行する。
【０３０５】
ステップＳ２１０において、ユーザの発話内容は、措置作業内容登録要求ではないと判断された場合、または、ステップＳ２１８の処理の終了後、ステップＳ２１９において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「検査終了」などの、検査終了要求であるか否かを判断する。ステップＳ２１９において、ユーザの発話内容は、検査終了要求ではないと判断された場合、処理は、後述するステップＳ２２６に進む。
【０３０６】
ステップＳ２１９において、ユーザの発話内容は、検査終了要求であると判断された場合、ステップＳ２２０において、サーバの点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から緯度経度情報を受信したか否かを判断する。ステップＳ２２０において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ２２０の処理が繰り返される。
【０３０７】
ステップＳ２２０において、緯度経度情報を受信したと判断された場合、ステップＳ２２１において、サーバの点検処理制御部８１は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部８１の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部８１に供給する。点検処理制御部８１は、路線名と基点からのキロ程による現在位置情報を、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、現在位置情報をユーザ端末７２に送信する。
【０３０８】
ステップＳ２２２において、点検処理制御部８１は、テキストデータ生成部２２を制御して、変換されたキロ程情報に基づいて、「○○キロ程で検査を終了します」の出力用テキストデータを生成せる。テキストデータ生成部２２は、点検処理制御部８１の制御に基づいて、ユーザ端末において表示出力されるテキストデータ「○○キロ程で検査を終了します」を生成し、点検処理制御部８１に供給する。
【０３０９】
ステップＳ２２３において、点検処理制御部８１は、音声出力用データ生成部８２を制御して、「○○キロ程で検査を終了します」の音声出力のためのデータを生成させる。音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において音声出力される「○○キロ程で検査を終了します」に対応する音声出力のためのデータを生成し、点検処理制御部８１に供給する。
【０３１０】
ステップＳ２２４において、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報をユーザ端末７２に送信する。
【０３１１】
ステップＳ２２５において、点検処理制御部８１は、点検結果登録制御部２１を制御して、検査終了位置の登録処理を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、点検結果データベース２０に登録されている検査位置を修正登録する処理を実行する。
【０３１２】
ステップＳ２１９において、ユーザの発話内容は、検査終了要求ではないと判断された場合、または、ステップＳ２２５の処理の終了後、ステップＳ２２６において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「検査終了位置を○○キロ程に変更」などの、検査終了キロ程変更要求であるか否かを判断する。ステップＳ２２６において、ユーザの発話内容は、検査終了キロ程変更要求ではないと判断された場合、処理は、後述するステップＳ２３１に進む。
【０３１３】
ステップＳ２２６において、ユーザの発話内容は、検査終了キロ程変更要求であると判断された場合、ステップＳ２２７において、点検処理制御部８１は、テキストデータ生成部２２を制御して、受信した音声認識の結果に含まれる検査終了キロ程情報に基づいて、「検査終了位置を○○キロ程に修正します。よろしいですか？」の出力用テキストデータを生成させる。テキストデータ生成部２２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において表示出力されるテキストデータ「検査終了位置を○○キロ程に修正します。よろしいですか？」を生成し、点検処理制御部８１に供給する。
【０３１４】
ステップＳ２２８において、点検処理制御部８１は、音声出力用データ生成部８２を制御して、「検査開始終了を○○キロ程に修正します。よろしいですか？」の音声出力のためのデータを生成させる。音声出力用データ生成部８２は、点検処理制御部８１の制御に基づいて、ユーザ端末７２において音声出力される「検査開始終了を○○キロ程に修正します。よろしいですか？」に対応する音声出力のためのデータを生成し、点検処理制御部８１に供給する。
【０３１５】
ステップＳ２２９において、点検処理制御部８１は、サーバ通信処理制御部１２の制御により、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報を、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、出力用テキストデータ、音声出力のためのデータ、および、現在位置情報をユーザ端末７２に送信する。
【０３１６】
ステップＳ２３０において、点検処理制御部８１は、点検結果登録制御部２１を制御して、検査終了位置の登録変更処理を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、点検結果データベース２０に登録されている検査開始位置を変更する処理を実行する。
【０３１７】
ステップＳ２２６において、ユーザの発話内容は、検査終了キロ程変更要求ではないと判断された場合、またはステップＳ２３０の処理の終了後、ステップＳ２３１において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、不良個所一覧表示要求であるか否かを判断する。
【０３１８】
ステップＳ２３１において、ユーザの発話内容は、不良個所一覧表示要求であると判断された場合、ステップＳ２３２において、点検処理制御部８１は、ユーザ端末７２の位置に対応する路線名に基づいて、点検結果登録制御部２１を制御して、対応する路線名の過去の点検結果のうち、対応する過去の不良発生個所の一覧を構成する情報を、点検結果データベース２０から検索させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、対応する過去の不良個所一覧を構成する情報を、点検結果データベース２０から検索し、点検処理制御部８１に供給する。点検処理制御部８１は、サーバ通信処理制御部１２を制御して、供給された過去の不良個所一覧を構成するデータを、サーバ通信部１１からユーザ端末７２に送信させる。
【０３１９】
ステップＳ２３１において、ユーザの発話内容は、不良個所一覧表示要求ではないと判断された場合、または、ステップＳ２３２の処理の終了後、ステップＳ２３３において、点検処理制御部８１は、ステップＳ１８０において受信された音声認識結果に対応するユーザの発話内容は、例えば、「ログアウト」などの、アプリケーション終了要求であるか否かを判断する。ステップＳ２３３において、ユーザの発話内容は、アプリケーション終了要求ではないと判断された場合、処理は、ステップＳ１７６に戻り、それ以降の処理が繰り返される。
【０３２０】
ステップＳ２３３において、ユーザの発話内容は、アプリケーション終了要求であると判断された場合、ステップＳ２３４において、点検処理制御部８１は、サーバ通信処理制御部１２を介してサーバ通信部１１から供給された情報に基づいて、ユーザ端末７２から緯度経度情報を受信したか否かを判断する。ステップＳ２３４において、緯度経度情報を受信していないと判断された場合、緯度経度情報を受信したと判断されるまで、ステップＳ２３４の処理が繰り返される。
【０３２１】
ステップＳ２３４において、緯度経度情報を受信したと判断された場合、ステップＳ２３５において、点検処理制御部８１は、取得された緯度経度情報を位置情報演算処理部１９に供給し、緯度経度情報を、路線名と基点からのキロ程による位置情報に変換させる。位置情報演算処理部１９は、点検処理制御部８１の制御に基づいて、緯度経度情報を、位置情報データベース１８に登録されている情報に基づいて、路線名および基点からのキロ程により表される位置情報に変換し、変換後の位置情報を点検処理制御部８１に供給する。
【０３２２】
ステップＳ２３６において、点検処理制御部８１は、例えば、「お疲れ様でした。終了します。」などの、アプリケーション終了時の出力用テキストデータおよび音声出力のためのデータを、サーバ通信処理制御部１２の制御により、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、アプリケーション終了時の出力用テキストデータおよび音声出力のためのデータを、ユーザ端末７２に送信する。
【０３２３】
ステップＳ２３７において、点検処理制御部８１は、点検結果登録制御部２１を制御して、アプリケーション終了情報の登録を実行させる。点検結果登録制御部２１は、点検処理制御部８１の制御に基づいて、アプリケーション終了情報を、点検結果データベース２０に供給して登録する処理を実行する。
【０３２４】
ステップＳ２３８において、点検処理制御部８１は、アプリケーション終了要求を受けたことを通知する情報を、信処理制御部の制御により、サーバ通信部１１からユーザ端末７２に送信させる。サーバ通信部１１は、サーバ通信処理制御部１２の制御に基づいて、アプリケーション終了要求を受けたことを通知する情報を、ユーザ端末７２に送信して処理が終了される。この通知は、上述したユーザ端末処理1のステップＳ１５７において、ユーザ端末において受信されたか否かが判断される。
【０３２５】
このような処理により、サーバ７１は、ユーザ端末７２から送信された音声認識結果に基づいて、ユーザ端末７２を利用しているユーザからの要求に対応する処理や、検査結果の登録処理を実行することができる。また、サーバ７１は、ユーザ端末７２の位置に基づいて、過去の検査結果に対応する情報を送信する。したがって、検査支援システムでは、過去の検査結果を見落とさずに、容易かつ確実に点検結果の登録を行うことができる。
【０３２６】
上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
【０３２７】
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
【０３２８】
また、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【符号の説明】
【０３２９】
１…サーバ、  ２…ユーザ端末（ウェアラブル端末）、  １１…サーバ通信部、  １２…サーバ通信処理制御部、  １３…点検処理制御部、  １４…音声認識用データベース、  １５…音声認識処理部、  １６…使用者データベース、  １７…使用者認識処理部、  １８…位置情報データベース、  １９…位置情報演算処理部、  ２０…点検結果データベース、  ２１…点検結果登録制御部、  ２２…テキストデータ生成部、  ２３…音声データ生成部、  ３１…端末通信部、  ３２…端末通信処理制御部、  ３３…ユーザ端末処理制御部、  ３４…ＡＲ表示制御部（表示部）、  ３５…ＡＲ表示部、  ３６…音声データ取得制御部、  ３７…マイク（発話音声取得部）、  ３８…音声データ出力制御部（音声制御部）、  ３９…ヘッドホン（音声出力部）、  ４０…位置データ取得制御部、  ４１…ＧＮＳＳ装置（位置情報取得部）、  ４２…ジャイロスコープ、  ４３…地磁気センサ、  ４４…撮像制御部、  ４５…カメラ、  ５１…不良発生個所情報  ７１…サーバ、  ７２…ユーザ端末（ウェアラブル端末）、  ８１…点検処理制御部８１、  ８２…音声出力用データ生成部、  ８３…使用者データベース、  ８４…使用者認識処理部、  ９１…ユーザ端末処理制御部、  ９２…音声認識用データベース、  ９３…音声認識処理部、  ９４…音声データ生成部
【図１】
2019153238.tif 000003
【図２】
2019153238.tif 000004
【図３】
2019153238.tif 000005
【図４】
2019153238.tif 000006
【図５】
2019153238.tif 000007
【図６】
2019153238.tif 000008
【図７】
2019153238.tif 000009
【図８】
2019153238.tif 000010
【図９】
2019153238.tif 000011
【図１０】
2019153238.tif 000012
【図１１】
2019153238.tif 000013
【図１２】
2019153238.tif 000014
【図１３】
2019153238.tif 000015
【図１４】
2019153238.tif 000016
【図１５】
2019153238.tif 000017
【図１６】
2019153238.tif 000018
【図１７】
2019153238.tif 000019
【図１８】
2019153238.tif 000020
【図１９】
2019153238.tif 000021
【図２０】
2019153238.tif 000022
【図２１】
2019153238.tif 000023
【図２２】
2019153238.tif 000024
【図２３】
2019153238.tif 000025
【図２４】
2019153238.tif 000026
【図２５】
2019153238.tif 000027
【図２６】
2019153238.tif 000028
【手続補正書】
【提出日】平成30年7月17日(2018.7.17)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備え、
前記ウェアラブル端末は、眼鏡形状のヘッドマウントディスプレイであり、
前記ウェアラブル端末を装着するユーザの眼前に配置され、前記位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、
前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に前記表示部に前記過去の検査結果情報を表示させる表示制御部と、
前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、
前記発話音声取得部を介して取得された前記検査対象物の検査結果情報に相当する発話音声を前記サーバに送信する端末側通信部とを備え、
前記表示制御部は、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記位置情報、および、前記ウェアラブル端末を装着する前記ユーザの視線の向きを検出するためのセンサにより検出された前記ユーザの視線の向きの変化に応じて変化させ、
前記サーバは、
前記端末側通信部から受信された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、
前記検査対象物の検査結果情報を登録する検査結果情報記憶部と、
取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するサーバ側通信部とを有する、
ことを特徴とする検査支援システム。
【請求項２】
前記ウェアラブル端末は、
前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に警告音を音声出力部に出力させる音声制御部を有する、
ことを特徴とする請求項１に記載の検査支援システム。
【請求項３】
前記音声制御部は、取得した前記位置情報に対応する地点のキロ程において不良状態が確認された場合に発話される地点のキロ程データに相当する発話音声及び不良情報を含む検査結果情報に相当する発話音声を音声出力部から出力させる、
ことを特徴とする請求項２に記載の検査支援システム。
【請求項４】
前記検査結果情報記憶部は、取得した前記位置情報に対応する地点のキロ程において不良状態が確認された場合に取得された不良情報を含む検査結果情報を登録する、
ことを特徴とする請求項３に記載の検査支援システム。
【請求項５】
眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、
前記ウェアラブル端末が、前記位置情報取得部により現在位置を取得するステップと、
前記ウェアラブル端末が、前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
前記ウェアラブル端末が、前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
前記ウェアラブル端末が、さらに、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記位置情報、および、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
前記ウェアラブル端末が、前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
前記ウェアラブル端末が、前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を前記サーバに送信するステップと、
前記サーバが、前記送信するステップにおいて送信された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
前記サーバが、前記検査対象物の検査結果情報を登録するステップと、
前記サーバが、取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するステップと、
ことを特徴とする検査支援方法。
【請求項６】
前記ウェアラブル端末が、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に警告音を音声出力部に出力させるステップを有する、
ことを特徴とする請求項５に記載の検査支援方法。
【請求項７】
眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法を、前記ウェアラブル端末のコンピュータに実行させるためのプログラムであって、
前記位置情報取得部により現在位置を取得するステップと、
前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記位置情報、および、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を前記サーバに送信するステップと、
をコンピュータに実行させるためのプログラム。
【請求項８】
位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備え、
前記ウェアラブル端末は、眼鏡形状のヘッドマウントディスプレイであり、
前記ウェアラブル端末を装着するユーザの眼前に配置され、前記位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、
前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に前記表示部に前記過去の検査結果情報を表示させる表示制御部と、
前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、
前記発話取得部により取得された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、
前記音声認識処理部により音声認識された前記検査対象物の検査結果情報を前記サーバに送信する端末側通信部とを備え、
前記表示制御部は、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記位置情報、および、前記ウェアラブル端末を装着する前記ユーザの視線の向きを検出するためのセンサにより検出された前記ユーザの視線の向きの変化に応じて変化させ、
前記サーバは、
前記端末側通信部から受信された前記検査対象物の検査結果情報を登録する検査結果情報記憶部と、
取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するサーバ側通信部とを有する、
ことを特徴とする検査支援システム。
【請求項９】
眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、
前記ウェアラブル端末が、前記位置情報取得部により現在位置を取得するステップと、
前記ウェアラブル端末が、前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
前記ウェアラブル端末が、前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
前記ウェアラブル端末が、さらに、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記位置情報、および、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
前記ウェアラブル端末が、前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
前記ウェアラブル端末が、前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
前記ウェアラブル端末が、前記音声認識処理するステップの処理結果を前記サーバに送信するステップと、
前記サーバが、前記送信するステップにおいて送信された前記検査対象物の検査結果情報を登録するステップと、
前記サーバが、取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するステップとを有する、
ことを特徴とする検査支援方法。
【請求項１０】
眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法を、前記ウェアラブル端末のコンピュータに実行させるためのプログラムであって、
前記位置情報取得部により現在位置を取得するステップと、
前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記位置情報、および、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
前記音声認識処理するステップの処理結果を前記サーバに送信するステップと、
をコンピュータに実行させるためのプログラム。
【請求項１１】
位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備え、
前記ウェアラブル端末は、眼鏡形状のヘッドマウントディスプレイであり、
前記ウェアラブル端末を装着するユーザの眼前に配置され、前記位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、
前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に前記表示部に前記過去の検査結果情報を表示させる表示制御部と、
前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、
前記発話音声取得部を介して取得された前記検査対象物の検査結果情報に相当する発話音声を前記サーバに送信する端末側通信部とを備え、
前記表示制御部は、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記過去の検査結果情報を有する走行位置に対応する位置情報および現在位置情報に基づく前記ユーザと前記過去の検査結果情報に基づく位置情報に対応した地点との距離、並びに、前記ウェアラブル端末を装着する前記ユーザの視線の向きを検出するためのセンサにより検出された前記ユーザの視線の向きの変化に応じて変化させ、
前記サーバは、
前記端末側通信部から受信された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、
前記検査対象物の検査結果情報を登録する検査結果情報記憶部と、
取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するサーバ側通信部とを有する、
ことを特徴とする検査支援システム。
【請求項１２】
眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、
前記ウェアラブル端末が、前記位置情報取得部により現在位置を取得するステップと、
前記ウェアラブル端末が、前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
前記ウェアラブル端末が、前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
前記ウェアラブル端末が、さらに、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記過去の検査結果情報を有する走行位置に対応する位置情報および現在位置情報に基づく前記ユーザと前記過去の検査結果情報に基づく位置情報に対応した地点との距離、並びに、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
前記ウェアラブル端末が、前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
前記ウェアラブル端末が、前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を前記サーバに送信するステップと、
前記サーバが、前記送信するステップにおいて送信された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
前記サーバが、前記検査対象物の検査結果情報を登録するステップと、
前記サーバが、取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するステップと、
ことを特徴とする検査支援方法。
【請求項１３】
眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法を、前記ウェアラブル端末のコンピュータに実行させるためのプログラムであって、
前記位置情報取得部により現在位置を取得するステップと、
前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記過去の検査結果情報を有する走行位置に対応する位置情報および現在位置情報に基づく前記ユーザと前記過去の検査結果情報に基づく位置情報に対応した地点との距離、並びに、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を前記サーバに送信するステップと、
をコンピュータに実行させるためのプログラム。
【請求項１４】
位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備え、
前記ウェアラブル端末は、眼鏡形状のヘッドマウントディスプレイであり、
前記ウェアラブル端末を装着するユーザの眼前に配置され、前記位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、
前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に前記表示部に前記過去の検査結果情報を表示させる表示制御部と、
前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、
前記発話取得部により取得された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、
前記音声認識処理部により音声認識された前記検査対象物の検査結果情報を前記サーバに送信する端末側通信部とを備え、
前記表示制御部は、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記過去の検査結果情報を有する走行位置に対応する位置情報および現在位置情報に基づく前記ユーザと前記過去の検査結果情報に基づく位置情報に対応した地点との距離、並びに、前記ウェアラブル端末を装着する前記ユーザの視線の向きを検出するためのセンサにより検出された前記ユーザの視線の向きの変化に応じて変化させ、
前記サーバは、
前記端末側通信部から受信された前記検査対象物の検査結果情報を登録する検査結果情報記憶部と、
取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するサーバ側通信部とを有する、
ことを特徴とする検査支援システム。
【請求項１５】
眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、
前記ウェアラブル端末が、前記位置情報取得部により現在位置を取得するステップと、
前記ウェアラブル端末が、前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
前記ウェアラブル端末が、前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
前記ウェアラブル端末が、さらに、前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記過去の検査結果情報を有する走行位置に対応する位置情報および現在位置情報に基づく前記ユーザと前記過去の検査結果情報に基づく位置情報に対応した地点との距離、並びに、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
前記ウェアラブル端末が、前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
前記ウェアラブル端末が、前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
前記ウェアラブル端末が、前記音声認識処理するステップの処理結果を前記サーバに送信するステップと、
前記サーバが、前記送信するステップにおいて送信された前記検査対象物の検査結果情報を登録するステップと、
前記サーバが、取得した前記位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報を前記ウェアラブル端末に送信するステップとを有する、
ことを特徴とする検査支援方法。
【請求項１６】
眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、前記位置情報に対応する地点における検査結果情報を前記ウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法を、前記ウェアラブル端末のコンピュータに実行させるためのプログラムであって、
前記位置情報取得部により現在位置を取得するステップと、
前記取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、
前記ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、
前記受信された過去の検査結果情報を、前記ウェアラブル端末を装着する前記ユーザの眼前に配置された表示部に表示するステップと、
前記過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、前記表示部に表示された前記過去の検査結果情報の表示の座標及び大きさを、前記過去の検査結果情報を有する走行位置に対応する位置情報および現在位置情報に基づく前記ユーザと前記過去の検査結果情報に基づく位置情報に対応した地点との距離、並びに、前記ユーザの視線の向きの変化に応じて変化させて表示させるステップと、
前記取得された位置情報に対応する前記検査対象物の検査結果情報に相当する発話音声を取得するステップと、
前記発話音声を取得するステップの処理により取得された前記検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、
前記音声認識処理するステップの処理結果を前記サーバに送信するステップと、
をコンピュータに実行させるためのプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
上記課題を解決するために、本発明の検査支援システムの第１の側面は、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバとを備え、ウェアラブル端末は、眼鏡形状のヘッドマウントディスプレイであり、ウェアラブル端末を装着するユーザの眼前に配置され、位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に表示部に過去の検査結果情報を表示させる表示制御部と、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、発話音声取得部を介して取得された検査対象物の検査結果情報に相当する発話音声をサーバに送信する端末側通信部とを備え、表示制御部は、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合、表示部に表示された過去の検査結果情報の表示の座標及び大きさを、位置情報、および、ウェアラブル端末を装着するユーザの視線の向きを検出するためのセンサにより検出されたユーザの視線の向きの変化に応じて変化させ、サーバは、端末側通信部から受信された検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、検査対象物の検査結果情報を登録する検査結果情報記憶部と、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報をウェアラブル端末に送信するサーバ側通信部とを有することを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
また、本発明の検査支援システムの他の側面は、ウェアラブル端末は、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に警告音を音声出力部に出力させる音声制御部を有することを特徴とする。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】削除
【補正の内容】
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】削除
【補正の内容】
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
本発明の検査支援方法の第１の側面は、眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、ウェアラブル端末が、位置情報取得部により現在位置を取得するステップと、ウェアラブル端末が、取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、ウェアラブル端末が、受信された過去の検査結果情報を、ウェアラブル端末を装着するユーザの眼前に配置された表示部に表示するステップと、ウェアラブル端末が、さらに、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、表示部に表示された過去の検査結果情報の表示の座標及び大きさを、位置情報、および、ユーザの視線の向きの変化に応じて変化させて表示させるステップと、ウェアラブル端末が、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するステップと、ウェアラブル端末が、発話音声を取得するステップの処理により取得された検査対象物の検査結果情報に相当する発話音声をサーバに送信するステップと、サーバが、送信するステップにおいて送信された検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、サーバが、検査対象物の検査結果情報を登録するステップと、サーバが、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報をウェアラブル端末に送信するステップとを有することを特徴とする。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】変更
【補正の内容】
【００１６】
また、本発明の検査支援方法の他の側面は、ウェアラブル端末が、ウェアラブル端末が、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に警告音を音声出力部に出力させるステップを有することを特徴とする。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】変更
【補正の内容】
【００１７】
また、本発明のプログラムの第１の側面は、眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法を、ウェアラブル端末のコンピュータに実行させるためのプログラムであって、位置情報取得部により現在位置を取得するステップと、取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、受信された過去の検査結果情報を、ウェアラブル端末を装着するユーザの眼前に配置された表示部に表示するステップと、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、表示部に表示された過去の検査結果情報の表示の座標及び大きさを、位置情報、および、ユーザの視線の向きの変化に応じて変化させて表示させるステップと、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するステップと、発話音声を取得するステップの処理により取得された検査対象物の検査結果情報に相当する発話音声をサーバに送信するステップと、をコンピュータに実行させる。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
本発明の検査支援システムの第２の側面は、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバとを備え、ウェアラブル端末は、眼鏡形状のヘッドマウントディスプレイであり、ウェアラブル端末を装着するユーザの眼前に配置され、位置情報取得部により取得された位置情報に対応した地点における検査対象物の過去の検査結果情報を表示する表示部と、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に表示部に過去の検査結果情報を表示させる表示制御部と、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得する発話音声取得部と、発話取得部により取得された検査対象物の検査結果情報に相当する発話音声を音声認識処理する音声認識処理部と、音声認識処理部により音声認識された検査対象物の検査結果情報をサーバに送信する端末側通信部とを備え、表示制御部は、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合、表示部に表示された過去の検査結果情報の表示の座標及び大きさを、位置情報、および、ウェアラブル端末を装着するユーザの視線の向きを検出するためのセンサにより検出されたユーザの視線の向きの変化に応じて変化させ、サーバは、端末側通信部から受信された検査対象物の検査結果情報を登録する検査結果情報記憶部と、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報をウェアラブル端末に送信するサーバ側通信部とを有することを特徴とする。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
また、本発明の検査支援方法の第２の側面は、眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバを用いた検査支援方法であって、ウェアラブル端末が、位置情報取得部により現在位置を取得するステップと、ウェアラブル端末が、取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、ウェアラブル端末が、受信された過去の検査結果情報を、ウェアラブル端末を装着するユーザの眼前に配置された表示部に表示するステップと、ウェアラブル端末が、さらに、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、表示部に表示された過去の検査結果情報の表示の座標及び大きさを、位置情報、および、ユーザの視線の向きの変化に応じて変化させて表示させるステップと、ウェアラブル端末が、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するステップと、ウェアラブル端末が、発話音声を取得するステップの処理により取得された検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、ウェアラブル端末が、音声認識処理するステップの処理結果をサーバに送信するステップと、サーバが、送信するステップにおいて送信された検査対象物の検査結果情報を登録するステップと、サーバが、取得した位置情報に対応する地点のキロ程における過去の検査結果情報が登録されている場合、当該過去の検査結果情報をウェアラブル端末に送信するステップとを有することを特徴とする。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】変更
【補正の内容】
【００２０】
また、本発明のプログラムの第２の側面は、眼鏡形状のヘッドマウントディスプレイであり、位置情報取得部により取得された位置情報を取得可能なウェアラブル端末と、位置情報に対応する地点における検査結果情報をウェアラブル端末との間で送受することができるサーバとを備えた検査支援システムにおける検査支援方法を、ウェアラブル端末のコンピュータに実行させるためのプログラムであって、位置情報取得部により現在位置を取得するステップと、取得された位置情報に対応した地点における検査対象物の過去の検査結果情報をサーバから受信するステップと、ウェアラブル端末を装着するユーザの視線の向きを検出するステップと、受信された過去の検査結果情報を、ウェアラブル端末を装着するユーザの眼前に配置された表示部に表示するステップと、過去の検査結果情報を有する走行位置に対応する位置情報を取得した場合に、表示部に表示された過去の検査結果情報の表示の座標及び大きさを、位置情報、および、ユーザの視線の向きの変化に応じて変化させて表示させるステップと、取得された位置情報に対応する検査対象物の検査結果情報に相当する発話音声を取得するステップと、発話音声を取得するステップの処理により取得された検査対象物の検査結果情報に相当する発話音声を音声認識処理するステップと、音声認識処理するステップの処理結果をサーバに送信するステップと、をコンピュータに実行させる。