(57)【要約】【課題】特別な操作をせずに自然な対話により必要な情報を記録する技術を提供する。【解決手段】  情報連携システムであって、発話音声を受け付ける複数の音声入出力装置と、患者の生体情報を含むカルテ情報を記憶する症状情報記憶部と、入力された発話音声をテキスト化する音声認識部と、テキストから少なくとも患者の生体情報を抽出して症状情報記憶部に記憶させる症状情報作成部と、生体情報を互いに関連付けられたキー情報を有する音声入出力装置に送信して出力させる出力作成部と、を有する。【選択図】図１
2020144676.tif 000002
【特許請求の範囲】
【請求項１】
発話音声を受け付ける複数の音声入出力装置と、
患者の生体情報を含むカルテ情報を記憶する症状情報記憶部と、
入力された発話音声をテキスト化する音声認識部と、
前記テキストから少なくとも前記患者の前記生体情報を抽出して前記症状情報記憶部に記憶させる症状情報作成部と、
前記生体情報を互いに関連付けられたキー情報を有する前記音声入出力装置に送信して出力させる出力作成部と、
を有することを特徴とする情報連携システム。
【請求項２】
複数の音声入出力装置と、
前記音声入出力装置とネットワークを介して通信可能に接続される情報連携サーバー装置と、を備え、
前記音声入出力装置は、それぞれ、入力された発話音声をテキスト化して所定のキー情報とともに前記情報連携サーバー装置に対して送信する制御部を備え、
前記情報連携サーバー装置は、
患者の生体情報を含む情報を記憶する症状情報記憶部と、
前記テキストから少なくとも前記患者の前記生体情報を抽出して前記症状情報記憶部に記憶させる症状情報作成部と、
前記生体情報を互いに関連付けられた前記キー情報を有する前記音声入出力装置に送信して出力させる出力作成部と、
を有することを特徴とする情報連携システム。
【請求項３】
請求項１または２に記載の情報連携システムであって、
前記音声入出力装置のうち少なくとも一つは緊急車両に設けられ、
前記患者は前記緊急車両に収容した患者である、
ことを特徴とする情報連携システム。
【請求項４】
請求項１〜３のいずれか一項に記載の情報連携システムであって、
前記音声入出力装置のうち少なくとも一つは医療従事者が医療行為を行う救急室に設けられ、
前記音声入出力装置は、少なくとも前記生体情報を表示するディスプレイ装置を備える、
ことを特徴とする情報連携システム。
【請求項５】
請求項１〜４のいずれか一項に記載の情報連携システムであって、
前記音声入出力装置の制御部は、前記発話音声をテキスト化する処理において、前記発話音声を認識する音声認識処理を行い、該処理では、前記患者の前記生体情報に関する所定の用語については近似する語への変換を行わない、
ことを特徴とする情報連携システム。
【請求項６】
請求項２に記載の情報連携システムであって、
前記情報連携サーバー装置は、
前記テキストを互いに共通する前記キー情報を有する前記音声入出力装置に送信して時系列に共有させる時系列会話処理部を備え、
前記音声入出力装置の一つから新たな患者に関する発話がなされると、前記キー情報を発行して、該音声入出力装置とは異なる他の音声入出力装置の少なくとも一つと該キー情報を関連付ける、
ことを特徴とする情報連携システム。
【請求項７】
請求項１〜６のいずれか一項に記載の情報連携システムであって、
前記出力作成部は、前記生体情報とともに、前記テキストを時系列に表示する画面情報を作成して互いに関連付けられた前記キー情報を有する前記音声入出力装置に出力させる、
ことを特徴とする情報連携システム。
【請求項８】
請求項１〜７のいずれか一項に記載の情報連携システムであって、
所定の機器の稼働状態に関するログ情報を収集するログ収集部を備え、
前記出力作成部は、当該稼働状態と発話のあった時刻とを時系列に並べた情報を生成する、
ことを特徴とする情報連携システム。
【請求項９】
複数の音声入出力装置から、入力された発話音声をテキスト化した情報と、キー情報とをネットワークを介して受信する通信部と、
患者の生体情報を含む情報を記憶する症状情報記憶部と、
前記テキストから少なくとも前記患者の前記生体情報を抽出して前記症状情報記憶部に記憶させる症状情報作成部と、
前記生体情報を互いに関連付けられた前記キー情報を有する前記音声入出力装置に送信して出力させる出力作成部と、
を有することを特徴とする情報連携サーバー装置。
【請求項１０】
請求項９に記載の情報連携サーバー装置であって、
前記音声入出力装置のうち少なくとも一つは緊急車両に設けられ、
前記患者は前記緊急車両に収容した患者である、
ことを特徴とする情報連携サーバー装置。
【請求項１１】
請求項９または１０に記載の情報連携サーバー装置であって、
前記音声入出力装置のうち少なくとも一つは医療従事者が医療行為を行う救急室に設けられ、
前記音声入出力装置は、少なくとも前記生体情報を表示するディスプレイ装置を備える、
ことを特徴とする情報連携サーバー装置。
【請求項１２】
請求項９〜１１のいずれか一項に記載の情報連携サーバー装置であって、
前記テキストを互いに関連付けられた前記キー情報を有する前記音声入出力装置に送信して時系列に共有させる時系列会話処理部を備え、
前記音声入出力装置の一つから新たな患者に関する発話がなされると、前記キー情報を発行して、該音声入出力装置とは異なる他の音声入出力装置の少なくとも一つと該キー情報を関連付ける、
ことを特徴とする情報連携サーバー装置。
【請求項１３】
請求項９〜１２のいずれか一項に記載の情報連携サーバー装置であって、
前記出力作成部は、前記生体情報とともに、前記テキストを時系列に表示する画面情報を作成して互いに関連付けられた前記キー情報を有する前記音声入出力装置に送信して出力させる、
ことを特徴とする情報連携サーバー装置。
【請求項１４】
複数の音声入出力装置から、入力された発話音声情報と、キー情報とをネットワークを介して受信する通信部と、
患者の生体情報を含む情報を記憶する症状情報記憶部と、
前記発話音声情報をテキスト化する音声認識部と、
前記テキストから少なくとも前記患者の前記生体情報を抽出して前記症状情報記憶部に記憶させる症状情報作成部と、
前記生体情報を互いに関連付けられた前記キー情報を有する前記音声入出力装置に送信して出力させる出力作成部と、
を有することを特徴とする情報連携サーバー装置。
【請求項１５】
複数の音声入出力装置と、
前記音声入出力装置とネットワークを介して通信可能に接続される情報連携サーバー装置と、を備え、
前記音声入出力装置は、それぞれ、入力された発話音声を受け付けて所定のキー情報とともに前記情報連携サーバー装置に対して送信する制御部を備え、
前記情報連携サーバー装置は、
患者の生体情報を含む情報を記憶する症状情報記憶部と、
前記発話音声を受信してテキスト化する音声認識部と、
前記テキストから少なくとも前記患者の前記生体情報を抽出して前記症状情報記憶部に記憶させる症状情報作成部と、
前記生体情報を互いに関連付けられた前記キー情報を有する前記音声入出力装置に送信して出力させる出力作成部と、
を有することを特徴とする情報連携システム。
【請求項１６】
所定の情報連携サーバー装置とネットワークを介して通信可能に接続する通信部と、
入力された発話音声をテキスト化して所定のキー情報とともに前記情報連携サーバー装置に対して送信する制御部と、を備え、
前記制御部は、生体情報を前記情報連携サーバー装置から受信すると、該生体情報を出力させる、
ことを特徴とする音声入出力装置。
【請求項１７】
請求項１６に記載の音声入出力装置であって、
少なくとも前記生体情報を表示するディスプレイ装置を備える、
ことを特徴とする音声入出力装置。
【請求項１８】
請求項１６または１７に記載の音声入出力装置であって、
前記制御部は、前記発話音声をテキスト化する処理において、前記発話音声を認識する音声認識処理を行い、該処理では、生体情報に関する所定の用語については近似する語への変換を行わない、
ことを特徴とする音声入出力装置。
【請求項１９】
情報連携システムによる情報連携方法であって、
前記情報連携システムは、
発話音声を受け付ける複数の音声入出力装置と、
患者の生体情報を含む情報を記憶する症状情報記憶部と、制御部と、を備え、
前記制御部は、
入力された発話音声をテキスト化する音声認識ステップと、
前記テキストから少なくとも前記患者の前記生体情報を抽出して前記症状情報記憶部に記憶させる症状情報作成ステップと、
前記生体情報を互いに関連付けられたキー情報を有する前記音声入出力装置に送信して出力させる出力作成ステップと、
を実施することを特徴とする情報連携方法。
【請求項２０】
コンピュータに情報連携をさせるプログラムであって、
前記コンピュータを、複数の音声入出力装置から、入力された発話音声をテキスト化した情報と、キー情報と、をネットワークを介して受信する通信部と、制御部と、患者の生体情報を含む情報を記憶する症状情報記憶部として機能させ、
前記制御部に、
前記テキストから少なくとも前記患者の前記生体情報を抽出して前記症状情報記憶部に記憶させる症状情報作成ステップと、
前記生体情報を互いに関連付けられた前記キー情報を有する前記音声入出力装置に送信して出力させる出力作成ステップと、
を実施させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報連携システム、情報連携サーバー、音声入出力装置、情報連携方法およびプログラムに関するものである。
【背景技術】
【０００２】
特許文献１には、「情報を入力するための入力エリアを入力画面に表示するアプリケーションソフトウェアに対して、音声入力機能を追加する入力支援装置であって、前記入力エリアの表示位置と、当該入力エリアを表す読みを特定する第１の情報と、を対応付けた画面構成テーブルを格納する画面構成テーブル格納部と、発話音声に対する音声認識処理の結果を表す第２の情報を取得し、取得した前記第２の情報に対応する前記入力エリアの表示位置を、前記画面構成テーブルを参照して特定し、特定した前記表示位置を選択する操作情報を、前記アプリケーションソフトウェアに入力する入力情報生成部と、を有する入力支援装置」と記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１３−０６１７９３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記技術は、入力エリアを発声により操作するものであり、項目名を発声後入力内容を発声することで入力できるが、自然な対話から適切に入力することはできない。
【０００５】
本発明の目的は、特別な操作をせずに自然な対話により必要な情報を記録することにある。
【課題を解決するための手段】
【０００６】
本願は、上記課題の少なくとも一部を解決する手段を複数含んでいるが、その例を挙げるならば、以下のとおりである。本発明の一態様に係る情報連携システムは、発話音声を受け付ける複数の音声入出力装置と、患者の生体情報を含むカルテ情報を記憶する症状情報記憶部と、入力された発話音声をテキスト化する音声認識部と、上記テキストから少なくとも上記患者の上記生体情報を抽出して上記症状情報記憶部に記憶させる症状情報作成部と、上記生体情報を互いに関連付けられたキー情報を有する上記音声入出力装置に送信して出力させる出力作成部と、を有する。
【０００７】
また、発明の別の態様にかかる情報連携システムは、複数の音声入出力装置と上記音声入出力装置とネットワークを介して通信可能に接続される情報連携サーバー装置と、を備え、上記音声入出力装置は、それぞれ、入力された発話音声をテキスト化して所定のキー情報とともに上記情報連携サーバー装置に対して送信する制御部を備え、上記情報連携サーバー装置は、患者の生体情報を含む情報を記憶する症状情報記憶部と、上記テキストから少なくとも上記患者の上記生体情報を抽出して上記症状情報記憶部に記憶させる症状情報作成部と、上記生体情報を互いに関連付けられた上記キー情報を有する上記音声入出力装置に送信して出力させる出力作成部と、を有する。
【０００８】
また、上述の情報連携システムであって、上記音声入出力装置のうち少なくとも一つは緊急車両に設けられ、上記患者は上記緊急車両に収容した患者であってもよい。
【０００９】
また、上述の情報連携システムであって、上記音声入出力装置のうち少なくとも一つは医療従事者が医療行為を行う救急室に設けられ、上記音声入出力装置は、少なくとも上記生体情報を表示するディスプレイ装置を備える、ことを特徴とするものであってもよい。
【００１０】
また、上述の情報連携システムであって、上記音声入出力装置の制御部は、上記発話音声をテキスト化する処理において、上記発話音声を認識する音声認識処理を行い、該処理では、上記患者の上記生体情報に関する所定の用語については近似する語への変換を行わない、ことを特徴とするものであってもよい。
【００１１】
また、上述の情報連携システムであって、上記情報連携サーバー装置は、上記テキストを互いに共通する上記キー情報を有する上記音声入出力装置に送信して時系列に共有させる時系列会話処理部を備え、上記音声入出力装置の一つから新たな患者に関する発話がなされると、上記キー情報を発行して、該音声入出力装置とは異なる他の音声入出力装置の少なくとも一つと該キー情報を関連付ける、ことを特徴とするものであってもよい。
【００１２】
また、上述の情報連携システムであって、上記出力作成部は、上記生体情報とともに、上記テキストを時系列に表示する画面情報を作成して互いに関連付けられた上記キー情報を有する上記音声入出力装置に出力させる、ことを特徴とするものであってもよい。
【００１３】
また、上述の情報連携システムであって、所定の機器の稼働状態に関するログ情報を収集するログ収集部を備え、上記出力作成部は、当該稼働状態と発話のあった時刻とを時系列に並べた情報を生成する、ことを特徴とするものであってもよい。
【００１４】
また、発明の別の態様に係る情報連携サーバー装置は、複数の音声入出力装置から、入力された発話音声をテキスト化した情報と、キー情報とをネットワークを介して受信する通信部と、患者の生体情報を含む情報を記憶する症状情報記憶部と、上記テキストから少なくとも上記患者の上記生体情報を抽出して上記症状情報記憶部に記憶させる症状情報作成部と、上記生体情報を互いに関連付けられた上記キー情報を有する上記音声入出力装置に送信して出力させる出力作成部と、を有する。
【００１５】
また、上述の情報連携サーバー装置であって、上記音声入出力装置のうち少なくとも一つは緊急車両に設けられ、上記患者は上記緊急車両に収容した患者である、ことを特徴とするものであってもよい。
【００１６】
また、上述の情報連携サーバー装置であって、上記音声入出力装置のうち少なくとも一つは医療従事者が医療行為を行う救急室に設けられ、上記音声入出力装置は、少なくとも上記生体情報を表示するディスプレイ装置を備える、ことを特徴とするものであってもよい。
【００１７】
また、上述の情報連携サーバー装置であって、上記テキストを互いに関連付けられた上記キー情報を有する上記音声入出力装置に送信して時系列に共有させる時系列会話処理部を備え、上記音声入出力装置の一つから新たな患者に関する発話がなされると、上記キー情報を発行して、該音声入出力装置とは異なる他の音声入出力装置の少なくとも一つと該キー情報を関連付ける、ことを特徴とするものであってもよい。
【００１８】
また、上述の情報連携サーバー装置であって、上記出力作成部は、上記生体情報とともに、上記テキストを時系列に表示する画面情報を作成して互いに関連付けられた上記キー情報を有する上記音声入出力装置に送信して出力させる、ことを特徴とするものであっても良い。
【００１９】
また、発明の別の態様に係る情報連携サーバー装置は、複数の音声入出力装置から、入力された発話音声情報と、キー情報とをネットワークを介して受信する通信部と、患者の生体情報を含む情報を記憶する症状情報記憶部と、上記発話音声情報をテキスト化する音声認識部と、上記テキストから少なくとも上記患者の上記生体情報を抽出して上記症状情報記憶部に記憶させる症状情報作成部と、上記生体情報を互いに関連付けられた上記キー情報を有する上記音声入出力装置に送信して出力させる出力作成部と、を有する。
【００２０】
また、発明の別の態様に係る情報連携システムは、複数の音声入出力装置と、上記音声入出力装置とネットワークを介して通信可能に接続される情報連携サーバー装置と、を備え、上記音声入出力装置は、それぞれ、入力された発話音声を受け付けて所定のキー情報とともに上記情報連携サーバー装置に対して送信する制御部を備え、上記情報連携サーバー装置は、患者の生体情報を含む情報を記憶する症状情報記憶部と、上記発話音声を受信してテキスト化する音声認識部と、上記テキストから少なくとも上記患者の上記生体情報を抽出して上記症状情報記憶部に記憶させる症状情報作成部と、上記生体情報を互いに関連付けられた上記キー情報を有する上記音声入出力装置に送信して出力させる出力作成部と、を有する。
【００２１】
また、発明の別の態様に係る音声入出力装置は、所定の情報連携サーバー装置とネットワークを介して通信可能に接続する通信部と、入力された発話音声をテキスト化して所定のキー情報とともに上記情報連携サーバー装置に対して送信する制御部と、を備え、上記制御部は、生体情報を上記情報連携サーバー装置から受信すると、該生体情報を出力させる、ことを特徴とする。
【００２２】
また、上述の音声入出力装置であって、少なくとも上記生体情報を表示するディスプレイ装置を備える、ことを特徴とするものであっても良い。
【００２３】
また、上述の音声入出力装置であって、上記制御部は、上記発話音声をテキスト化する処理において、上記発話音声を認識する音声認識処理を行い、該処理では、生体情報に関する所定の用語については近似する語への変換を行わない、ことを特徴とするものであってもよい。
【００２４】
また、発明の別の態様に係る情報連係方法は、情報連携システムによる情報連携方法であって、上記情報連携システムは、発話音声を受け付ける複数の音声入出力装置と、患者の生体情報を含む情報を記憶する症状情報記憶部と、制御部と、を備え、上記制御部は、入力された発話音声をテキスト化する音声認識ステップと、上記テキストから少なくとも上記患者の上記生体情報を抽出して上記症状情報記憶部に記憶させる症状情報作成ステップと、上記生体情報を互いに関連付けられたキー情報を有する上記音声入出力装置に送信して出力させる出力作成ステップと、を実施する。
【００２５】
また、発明の別の態様に係るプログラムは、コンピュータに情報連携をさせるプログラムであって、上記コンピュータを、複数の音声入出力装置から、入力された発話音声をテキスト化した情報と、キー情報と、をネットワークを介して受信する通信部と、制御部と、患者の生体情報を含む情報を記憶する症状情報記憶部として機能させ、上記制御部に、上記テキストから少なくとも上記患者の上記生体情報を抽出して上記症状情報記憶部に記憶させる症状情報作成ステップと、上記生体情報を互いに関連付けられた上記キー情報を有する上記音声入出力装置に送信して出力させる出力作成ステップと、を実施させることを特徴とする。
【発明の効果】
【００２６】
本発明によると、特別な操作をせずに自然な対話により必要な情報を記録する技術を提供することができる。上記した以外の課題、構成および効果は、以下の実施形態の説明により明らかにされる。
【図面の簡単な説明】
【００２７】
【図１】緊急情報連携システムの構成図である。
【図２】用語記憶部のデータ構造例を示す図である。
【図３】利用者声紋記憶部のデータ構造例を示す図である。
【図４】所属ルーム記憶部のデータ構造例を示す図である。
【図５】症状情報記憶部のデータ構造例を示す図である。
【図６】発話履歴記憶部のデータ構造例を示す図である。
【図７】スマートスピーカーのハードウェア構成例を示す図である。
【図８】緊急情報連携サーバー装置のハードウェア構成例を示す図である。
【図９】緊急搬送時処理（ルーム開始まで）のフローの例を示す図である。
【図１０】緊急搬送時処理（症状情報追加）のフローの例を示す図である。
【図１１】出力画面の例を示す図である。
【図１２】緊急情報連携システムの構成図である。
【図１３】周辺機器稼働ログ記憶部のデータ構造例を示す図である。
【図１４】出力画面の例を示す図である。
【図１５】緊急情報連携システムの構成図である。
【図１６】緊急搬送時処理（ルーム開始まで）のフローの例を示す図である。
【図１７】緊急搬送時処理（症状情報追加）のフローの例を示す図である。
【発明を実施するための形態】
【００２８】
以下に、本発明の一態様に係る実施形態を適用した緊急情報連携システムについて、図面を参照して説明する。以下の実施の形態においては便宜上その必要があるときは、複数のセクションまたは実施の形態に分割して説明するが、特に明示した場合を除き、それらはお互いに無関係なものではなく、一方は他方の一部または全部の変形例、詳細、補足説明等の関係にある。
【００２９】
また、以下の実施の形態において、要素の数等（個数、数値、量、範囲等を含む）に言及する場合、特に明示した場合および原理的に明らかに特定の数に限定される場合等を除き、その特定の数に限定されるものではなく、特定の数以上でも以下でもよい。
【００３０】
さらに、以下の実施の形態において、その構成要素（要素ステップ等も含む）は、特に明示した場合および原理的に明らかに必須であると考えられる場合等を除き、必ずしも必須のものではないことは言うまでもない。
【００３１】
同様に、以下の実施の形態において、構成要素等の形状、位置関係等に言及するときは特に明示した場合および原理的に明らかにそうではないと考えられる場合等を除き、実質的にその形状等に近似または類似するもの等を含むものとする。このことは、上記数値および範囲についても同様である。
【００３２】
また、実施の形態を説明するための全図において、同一の部材には原則として同一の符号を付し、その繰り返しの説明は省略する。
【００３３】
図１は、本実施形態に係る緊急情報連携システムのブロック図である。緊急情報連携システム１は、緊急情報連携サーバー装置２００と、緊急情報連携サーバー装置２００とネットワーク５０を介して通信可能に接続された複数のスマートスピーカー１００、３００とを含む。複数の利用者がスマートスピーカー１００、３００を用いて対話を行い、その対話（音声）に含まれる生体情報を検出して症状情報を構成する。また、緊急情報連携システム１は、複数の利用者がスマートスピーカー１００、３００を用いた対話における時系列の発言（音声）の履歴をテキスト（文字）に変換し、後に簡便に参照できるように記憶させる。それぞれのスマートスピーカー１００、３００は、緊急情報連携サーバー装置２００に接続して利用する。
【００３４】
なお、スマートスピーカー１００、３００から緊急情報連携サーバー装置２００に接続する際には、ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、インターネット、携帯電話網等、あるいはこれらが複合した通信網であるネットワーク５０を介して接続される。なお、当該ネットワーク５０は、携帯電話通信網等の無線通信網上のＶＰＮ（Ｖｉｒｔｕａｌ  Ｐｒｉｖａｔｅ  Ｎｅｔｗｏｒｋ）等であってもよい。
【００３５】
スマートスピーカー１００、３００は、典型的には、救急車等の緊急車両および病院の救急室に配置され、それぞれの配置場所にて業務を行う職員による音声入力を受け付ける。例えば、緊急車両には救急隊員（救急救命士等）や消防士等の職員が配置されて救命業務を行い、救急室には医師や看護師等の職員が配置されて救急対応業務を行う。スマートスピーカー１００、３００は、これらの職員の発話音声を入力として受け取り、緊急情報連携サーバー装置２００へ送信する。
【００３６】
ここで、救急車等に患者が搬入されると、救急車等から近隣の病院の緊急窓口等に救急要請がなされ、それぞれの職員の音声による対話を通じて患者の容態や処置の状況について連携がなされる。また、患者の観察所見等の生体情報が病院前救護記録や傷病者引継書等の所定のフォーマットの書類に記入されて救急車から病院へ申し送られる。
【００３７】
この連携においては、対話と書面とが齟齬する可能性や、対話における連携が不明瞭である可能性、あるいは書面の記載の不明確性等により情報が十分に共有されない場合も多い。また、緊急車両の救急隊員は救命行為と並行して救護記録等の書類を早急かつ正確に作成する必要があり、救命行為と両立することに困難性がある場合もある。
【００３８】
スマートスピーカー１００、３００が発話を受け付けると、緊急情報連携システム１は、入力された発話音声をテキスト化する音声認識処理を行い、テキストから少なくとも患者の生体情報を抽出してカルテ情報とも言える症状情報を作成する処理を行い、生体情報を互いに関連付けられたキー情報を有するスマートスピーカー１００、３００に送信して出力させる処理を行う。
【００３９】
具体的には、スマートスピーカー１００、３００は、救急隊員等や医療従事者による発話を受け付けると、入力された発話音声をテキスト化して所定のキー情報とともに緊急情報連携サーバー装置２００に対してネットワーク５０を介して送信する。なお、所定のキー情報は、初回は保持していないために、空情報を送信する。
【００４０】
また、スマートスピーカー１００、３００は、利用者の声紋情報を予め記憶しており、発話音声から声紋を判定して発話者を特定する。
【００４１】
緊急情報連携サーバー装置２００が発話音声のテキストを受け付けると、救急室に設置されたスマートスピーカー３００のいずれかと共有する仮想ルームを識別するＩＤを発行し、以降はそのＩＤをキー情報として使用するようスマートスピーカー１００、３００のいずれにも送付する。所定のキー情報と共にテキストを受け付けた場合には、仮想ルームを識別するＩＤの発行は行わず、当該所定のキー情報を、仮想ルームを識別するＩＤとして用いる。
【００４２】
なお、仮想ルームを識別するＩＤに、有効時間を予め付与するようにしても良い。例えば、発言の追加が有効になる時間（例えば、ＩＤの発行から３０分以内）と、参照のみが有効になる時間（例えば、ＩＤの発行から３時間以内）とを分けて付与するようにしてもよい。その場合には、発言の追加が有効になる時間内（例えば、ＩＤの発行から３０分以内）にテキスト情報と共に当該ＩＤを受け付けた場合には、緊急情報連携サーバー装置２００は、仮想ルームに発言を追加し、生体情報に情報の追加を行う。発言の追加が有効になる時間内でないが参照のみが有効になる時間内（例えば、ＩＤの発行から３０分経過後３時間以内）にテキスト情報と共に当該ＩＤを受け付けた場合には、緊急情報連携サーバー装置２００は、送信元のスマートスピーカーへ仮想ルームの発話の履歴および生体情報を送信する。
【００４３】
発言の追加が有効になる時間内でなく、参照のみが有効になる時間内でもない時間（例えば、ＩＤの発行から３時間経過後）にテキスト情報と共に当該ＩＤを受け付けた場合、またはテキスト情報のみを受け付けた場合には、緊急情報連携サーバー装置２００は、送信元のスマートスピーカー１００へスマートスピーカー３００と共有する仮想ルームを識別するＩＤを発行しスマートスピーカー１００、３００のいずれにも送付する。
【００４４】
このように仮想ルームに有効化される時間制限を設けることで、１件の救急出動（患者）に対する情報を手間無く整理し、搬送された先の病院からも参照することができる。
【００４５】
緊急情報連携サーバー装置２００は、発話音声のテキストを受け付けると、該テキストから少なくとも患者の生体情報（例えば、脈拍、血圧等の数値化された情報や、出血の有無、痛みの有無、痛みの位置、意識レベル、対処状況等のいずれかまたは複数の情報）を抽出してカルテ情報とも言える症状情報を作成する処理を行う。そして、その情報を互いに関連付けられたキー情報を有するスマートスピーカー１００、３００に送信して出力させる出力作成処理と、を実施する。
【００４６】
ここで、患者の生体情報を抽出するために、緊急情報連携サーバー装置２００は、発話を解析する。例えば、この解析には、言語に関する機械学習等を行って構築された学習済みモデルを用いることができるが、これに限られるものではなく、一般的に人工知能といわれる各種の演算処理により解析することも可能であるし、ルールベースエンジンを用いた演算処理により処理することも可能である。
【００４７】
また、緊急情報連携サーバー装置２００は、発話音声のテキストとともにその発話者を受け付けて、仮想ルームごとに時系列に発話者と発話内容とを対応付けて記憶する。
【００４８】
図１に示すように、スマートスピーカー１００には、記憶部１１０と、制御部１２０と、通信部１３０と、音声入力部１４０と、音声出力部１５０と、が含まれる。記憶部１１０には、用語記憶部１１１と、利用者声紋記憶部１１２と、所属ルーム記憶部１１３と、が含まれる。
【００４９】
図２は、用語記憶部のデータ構造例を示す図である。用語記憶部１１１には、用語識別子１１１Ａと、用語１１１Ｂと、発音情報１１１Ｃと、品詞１１１Ｄと、が含まれる。用語識別子１１１Ａは、他の用語と区別可能な識別子である。用語１１１Ｂは、医療用語、救急救命業務における各種の用語、略語、方言等である。発音情報１１１Ｃは、用語１１１Ｂで特定される語を所定の発音記号等により示した情報、あるいは音声情報そのものである。品詞１１１Ｄは、用語１１１Ｂで特定される語の品詞を特定する情報である。
【００５０】
図３は、利用者声紋記憶部のデータ構造例を示す図である。利用者声紋記憶部１１２には、利用者ＩＤ１１２Ａと、氏名１１２Ｂと、生年月日１１２Ｃと、性別１１２Ｄと、声紋情報１１２Ｅと、が含まれる。利用者ＩＤ１１２Ａは、利用者すなわち医療関係者の識別子である。氏名１１２Ｂは、利用者ＩＤ１１２Ａで特定される利用者の氏名を特定する情報である。生年月日１１２Ｃは、利用者ＩＤ１１２Ａで特定される利用者の生年月日を特定する情報である。性別１１２Ｄは、利用者ＩＤ１１２Ａで特定される利用者の性別を特定する情報である。声紋情報１１２Ｅは、利用者ＩＤ１１２Ａで特定される利用者の声紋を特定する情報である。
【００５１】
図４は、所属ルーム記憶部のデータ構造例を示す図である。所属ルーム記憶部１１３には、所属ルーム１１３Ａが含まれ、ある時点での当該スマートスピーカー１００が属する仮想ルームを特定する仮想ルームＩＤが格納される。
【００５２】
制御部１２０には、音声認識部１２１と、用語特定部１２２と、利用者特定部１２３と、ルーム指定部１２４と、が含まれる。音声認識部１２１は、入力された発話音声を対象としてテキスト化を行う。音声認識部１２１は、音素解析、形態素解析、構文解析、意味解析等の各種の言語依存処理を行い、発話内容を特定し、テキスト化する。または、音声認識部１２１は、ネットワークを介して接続可能な外部の所定の音声認識サーバーに音声認識処理を委譲するために、入力された発話音声の情報を送信し、認識された結果のテキスト情報を取得する。
【００５３】
用語特定部１２２は、音声認識部１２１が認識できなかった発話について、認識できなかった部分について発音情報あるいは用語の共通性から用語を推定し、当該用語についてはそのまま解釈を加えずに認識する。例えば、音声認識部１２１が認識に失敗する単語があると、それが用語として用語記憶部１１１に格納されている場合にはその用語そのままの表記、意味として扱うよう音声認識部１２１に伝える。
【００５４】
利用者特定部１２３は、発話音声の音韻的特徴から声紋を抽出し、利用者声紋記憶部１１２を参照して声紋の一致度合いから推定して利用者を特定する。
【００５５】
ルーム指定部１２４は、緊急情報連携サーバー装置２００に情報を送信する場合に、いずれかの仮想ルームに属している場合には仮想ルームのＩＤをキー情報として、当該情報とともに送信する。ルーム指定部１２４は、いずれの仮想ルームにも属していない場合には、空情報を仮想ルームのＩＤとして送信する。
【００５６】
通信部１３０は、ネットワーク５０を介して他の装置である緊急情報連携サーバー装置２００との通信を行う。
【００５７】
音声入力部１４０は、利用者からの音声入力を受け付ける。音声出力部１５０は、緊急情報連携サーバー装置２００から利用者への発声命令があると、音声出力を行う。出力される情報は、生体情報や発話の履歴等の各種出力情報である。
【００５８】
なお、スマートスピーカー３００は、スマートスピーカー１００と略同様の構成を備える。
【００５９】
緊急情報連携サーバー装置２００には、記憶部２１０と、制御部２２０と、通信部２３０と、が含まれる。
【００６０】
記憶部２１０には、症状情報記憶部２１１と、発話履歴記憶部２１２と、が含まれる。
【００６１】
図５は、症状情報記憶部のデータ構造例を示す図である。症状情報記憶部２１１には、症状の対象となる患者を特定する患者氏名２１１Ａ、患者性別２１１Ｂ、患者年齢２１１Ｃ、脈拍２１１Ｄ、主訴２１１Ｅ、処置２１１Ｆ、患者ルーム２１１Ｇが含まれる。
【００６２】
患者氏名２１１Ａは、患者の氏名であり、患者性別２１１Ｂは、患者の性別であり、患者年齢２１１Ｃは、患者の年齢である。これらの情報の組み合わせにより、特定の個人を特定しうる情報といえる。脈拍２１１Ｄは、患者の生体情報の一つである脈拍の計測値である。主訴２１１Ｅは、患者が訴える主たる症状である。処置２１１Ｆは、患者に対して行った処置を自然言語で説明する情報である。患者ルーム２１１Ｇは、患者の救急出動時の仮想ルームを特定するキー情報である。
【００６３】
図６は、発話履歴記憶部のデータ構造例を示す図である。発話履歴記憶部２１２には、患者ルーム２１２Ａと、発話者２１２Ｂと、発話時刻２１２Ｃと、発話内容２１２Ｄと、が含まれる。
【００６４】
患者ルーム２１２Ａは、仮想ルームを特定するキー情報である。発話者２１２Ｂは、発言を行った発話者を特定する利用者ＩＤの情報であり、通常は予め声紋を登録された救急隊員や病院の医療従事者が発話者となるが、声紋の登録がなされていなくとも匿名の発話者として一時的な利用者ＩＤが割り振られるものであってもよい。
【００６５】
発話時刻２１２Ｃは、発言が行われた時刻を特定する情報である。例えば、発話時刻２１２Ｃは、ＹＹＹＹ／ＭＭ／ＤＤ  ｈｈ：ｍｍ形式で示される時刻情報である。発話内容２１２Ｄは、テキスト化された発話音声の記録である。
【００６６】
制御部２２０には、症状情報作成部２２１と、時系列会話処理部２２２と、出力作成部２２３と、が含まれる。
【００６７】
症状情報作成部２２１は、発話内容に含まれる情報を用いて、患者の症状に関する情報を所定の項目ごとに整理して症状情報記憶部２１１に格納する。この症状情報作成部２２１は、特にカルテ等の医学用語に関する機械学習等を行って構築された学習済みモデルにより実現することができる。しかし、これに限られるものではなく、一般的に人工知能といわれる各種の演算処理により解析することも可能であるし、ルールベースエンジンを用いた演算処理により処理することも可能である。
【００６８】
時系列会話処理部２２２は、テキスト化された発話内容を、発話がなされた仮想ルームと、発話者と、発話時刻と、に対応付けて発話履歴記憶部２１２に格納する。
【００６９】
出力作成部２２３は、仮想ルームごとに、テキスト化された発話内容を、発話履歴記憶部２１２から発話者と、発話時刻と、に対応付けて読み出し、所定のデザインの出力画面情報を構成してスマートスピーカー１００あるいは３００等に送信する。ただし、スマートスピーカー１００あるいは３００等にディスプレイが設けられていない場合には、この限りではない。
【００７０】
通信部２３０は、ネットワーク５０を介して他の装置であるスマートスピーカー１００あるいは３００との通信を行う。
【００７１】
スマートスピーカー３００は、基本的にスマートスピーカー１００と同様の構成を備える。すなわち、スマートスピーカー３００は、記憶部３１０と、制御部３２０と、通信部３３０と、音声入力部３４０と、音声出力部３５０と、を備える。また、記憶部３１０には、用語記憶部３１１と、利用者声紋記憶部３１２と、所属ルーム記憶部３１３と、が含まれ、制御部３２０には、音声認識部３２１と、用語特定部３２２と、利用者特定部３２３と、ルーム指定部３２４と、が含まれる。
【００７２】
図７は、スマートスピーカーのハードウェア構成例を示す図である。スマートスピーカー１００および３００は、いわゆる処理能力を備えたスピーカー装置、パーソナルコンピュータ、スマートフォンあるいはタブレット端末の筐体により実現されるハードウェア構成を備える。スマートスピーカー１００および３００は、演算装置１０１と、主記憶装置１０２と、補助記憶装置１０３と、音声入力装置１０４と、音声出力装置１０５と、表示装置１０６と、通信装置１０７と、各装置をつなぐバス１０８と、を備える。また他に、スマートスピーカー１００および３００は、タッチパネルやディスプレイ等の入出力装置を備えるものであってもよい。
【００７３】
演算装置１０１は、例えばＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）などの演算装置である。
【００７４】
主記憶装置１０２は、例えばＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）などのメモリ装置である。
【００７５】
補助記憶装置１０３は、デジタル情報を記憶可能な、いわゆるハードディスク（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）やＳＳＤ（Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｒｉｖｅ）あるいはフラッシュメモリなどの不揮発性記憶装置である。
【００７６】
音声入力装置１０４は、マイクロフォン等の集音装置である。音声出力装置１０５は、スピーカー等の発音装置である。表示装置１０６は、液晶や有機ＥＬ（Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ）等のディスプレイ装置である。通信装置１０７は、ネットワークインターフェースカード（ＮＩＣ）等である。
【００７７】
上記したスマートスピーカー１００および３００の音声認識部１２１と、用語特定部１２２と、利用者特定部１２３と、ルーム指定部１２４とは、演算装置１０１に処理を行わせるプログラムによって実現される。このプログラムは、主記憶装置１０２、補助記憶装置１０３または図示しないＲＯＭ装置内に記憶され、実行にあたって主記憶装置１０２上にロードされ、演算装置１０１により実行される。
【００７８】
また、スマートスピーカー１００および３００の記憶部１１０は、主記憶装置１０２及び補助記憶装置１０３により実現される。また、通信部１３０、音声入力部１４０および音声出力部１５０は、通信装置１０７音声入力装置１０４、音声出力装置１０５のそれぞれにより実現される。以上が、スマートスピーカー１００および３００のハードウェア構成例である。
【００７９】
スマートスピーカー１００および３００の構成は、処理内容に応じて、さらに多くの構成要素に分類することもできる。また、１つの構成要素がさらに多くの処理を実行するように分類することもできる。
【００８０】
また、各制御部（音声認識部１２１と、用語特定部１２２と、利用者特定部１２３と、ルーム指定部１２４）は、それぞれの機能を実現する専用のハードウェア（ＡＳＩＣ、ＧＰＵなど）により構築されてもよい。また、各制御部の処理が一つのハードウェアで実行されてもよいし、複数のハードウェアで実行されてもよい。
【００８１】
図８は、緊急情報連携サーバー装置２００のハードウェア構成例を示す図である。緊急情報連携サーバー装置２００は、いわゆるワークステーション、パーソナルコンピュータ、スマートフォンあるいはタブレット端末の筐体により実現されるハードウェア構成を備える。緊急情報連携サーバー装置２００は、演算装置２０１と、主記憶装置２０２と、補助記憶装置２０３と、通信装置２０４と、各装置をつなぐバス２０５と、を備える。通信装置２０４は、ネットワークを介して他の装置であるスマートスピーカー１００および３００と通信する。
【００８２】
演算装置２０１は、例えばＣＰＵなどの演算装置であり、主記憶装置２０２は、例えばＲＡＭなどのメモリ装置である。また、補助記憶装置２０３は、デジタル情報を記憶可能な、いわゆるハードディスクやＳＳＤあるいはフラッシュメモリなどの不揮発性記憶装置である。通信装置２０４は、ネットワークインターフェースカード（ＮＩＣ）等である。以上が、緊急情報連携サーバー装置２００のハードウェア構成例である。
【００８３】
緊急情報連携サーバー装置２００の構成は、処理内容に応じて、さらに多くの構成要素に分類することもできる。また、１つの構成要素がさらに多くの処理を実行するように分類することもできる。
【００８４】
次に、本実施形態における緊急情報連携システム１の動作を説明する。
【００８５】
図９は、緊急搬送時処理（ルーム開始まで）のフローの例を示す図である。緊急搬送時処理（ルーム開始まで）は、緊急車両に搭載されたスマートスピーカー１００からの開始指示に応じて起動される。
【００８６】
まず、音声認識部１２１は、発声を受け付ける（ステップＳ００１）。そして、利用者特定部１２３は、利用者声紋記憶部１１２を用いて、利用者を特定する。そして、利用者を発話者として緊急情報連携サーバー装置２００に送信する（ステップＳ００２）。
【００８７】
発話者の情報を受信した時系列会話処理部２２２は、仮想ルームの準備を行う（ステップＳ００３）。具体的には、時系列会話処理部２２２は、新たにキー情報となる仮想ルームＩＤを割り振り、割り振った仮想ルームＩＤをルームＩＤとしてスマートスピーカー１００へ通知する。
【００８８】
そして、音声認識部１２１は、音声を認識してテキスト化する（ステップＳ００４）。具体的には、音声認識部１２１は、学習済みモデルを用いて、音声認識を行う。または、音声認識部１２１は、ネットワークを介して接続可能な外部の所定の音声認識サーバーに音声認識処理を委譲するために、入力された発話音声の情報を送信し、認識された結果のテキスト情報を取得する。
【００８９】
そして、用語特定部１２２は、用語を特定する（ステップＳ００５）。具体的には、用語特定部１２２は、学習済みモデルと用語記憶部１１１とを用いて、所定のアルゴリズムでステップＳ００４にて得られたテキストを対象として医学用語、略語、通称、俗称、方言等の表現の揺らぎを考慮した用語特定を行い、用語についてはそのまま採用し、変換処理を行わないで意味を解釈する。そして、ルーム指定部１２４は、ルームＩＤと、発話テキストとを緊急情報連携サーバー装置２００へと送信する。
【００９０】
そして、時系列会話処理部２２２は、時系列に会話を記録する（ステップＳ００６）。具体的には、時系列会話処理部２２２は、ステップＳ００５で受信したルームＩＤと発話テキストと、ステップＳ００２で受信した発話者の情報とを、それぞれ発話履歴記憶部２１２の患者ルーム２１２Ａと、発話内容２１２Ｄと、発話者２１２Ｂと、に対応付けて記憶させる。また、処理時点を特定する時刻情報を、発話時刻２１２Ｃに記憶させる。
【００９１】
そして、症状情報作成部２２１は、症状情報を作成する（ステップＳ００７）。具体的には、症状情報作成部２２１は、ステップＳ００６で記録した発話テキストを、学習済みモデルを用いて解析して、症状情報記憶部２１１に設定された項目ごとにその値を特定して症状情報記憶部２１１に格納する。具体的には、症状情報作成部２２１は、患者氏名、患者性別、患者年齢、脈拍、主訴、処置等の情報を発話テキストから抽出して症状情報記憶部２１１に格納するとともに、患者ルーム２１１ＧにルームＩＤを格納する。
【００９２】
そして、時系列会話処理部２２２は、スマートスピーカー３００に対して、ルームへ招待する（ステップＳ００８）。具体的には、時系列会話処理部２２２は、所定のアルゴリズムにより、病院の救急室を引き当てて（例えば、救急外来が営業中の病院を検索して）救急室に存在するスマートスピーカー３００に対して、ルームＩＤを招待情報と共に送信する。
【００９３】
そして、スマートスピーカー３００の音声認識部３２１は、救急室の医療従事者の発声を受け付ける（ステップＳ００９）。
【００９４】
そして、利用者特定部３２３は、利用者声紋記憶部３１２を用いて、利用者を特定する。そして、利用者を発話者として緊急情報連携サーバー装置２００に送信する（ステップＳ０１０）。これを受けた緊急情報連携サーバー装置２００の時系列会話処理部２２２は、当該ルームＩＤに発話者を追加する（ステップＳ０１１）。
【００９５】
そして、音声認識部３２１は、音声を認識してテキスト化する（ステップＳ０１２）。具体的には、音声認識部３２１は、学習済みモデルを用いて、音声認識を行う。または、音声認識部３２１は、ネットワークを介して接続可能な外部の所定の音声認識サーバーに音声認識処理を委譲するために、入力された発話音声の情報を送信し、認識された結果のテキスト情報を取得する。
【００９６】
そして、用語特定部３２２は、用語を特定する（ステップＳ０１３）。具体的には、用語特定部３２２は、学習済みモデルと用語記憶部３１１とを用いて、所定のアルゴリズムでステップＳ０１１にて得られたテキストを対象として医学用語、略語、通称、俗称、方言等の表現の揺らぎを考慮した用語特定を行い、用語についてはそのまま採用し、変換処理を行わないで意味を解釈する。そして、ルーム指定部３２４は、ルームＩＤと、発話テキストとを緊急情報連携サーバー装置２００へと送信する。
【００９７】
そして、時系列会話処理部２２２は、時系列に会話を記録する（ステップＳ０１４）。具体的には、時系列会話処理部２２２は、ステップＳ０１２で受信したルームＩＤと発話テキストと、ステップＳ０１０で受信した発話者の情報とを、それぞれ発話履歴記憶部２１２の患者ルーム２１２Ａと、発話内容２１２Ｄと、発話者２１２Ｂと、に対応付けて記憶させる。また、処理時点を特定する時刻情報を、発話時刻２１２Ｃに記憶させる。
【００９８】
以上が、緊急搬送時処理（ルーム開始まで）のフローの例である。緊急搬送時処理（ルーム開始まで）のフローによれば、スマートスピーカーが音声入力を受け付けて、緊急情報連携サーバー装置２００上で仮想ルームを作成して他のスマートスピーカーと仮想ルームのキー情報を共有することができる。また、発話内容から自動的に症状情報を作成することができる。これにより、共有するキー情報を有するスマートスピーカー同士が仮想ルームにおいて発話のテキスト情報および患者の症状の情報を共有することができる。
【００９９】
図１０は、緊急搬送時処理（症状情報追加）のフローの例を示す図である。緊急搬送時処理（症状情報追加）は、緊急搬送時処理（ルーム開始まで）の処理後に起動される。
【０１００】
まず、スマートスピーカー３００の音声認識部３２１は、救急室の医療従事者の発声を受け付ける（ステップＳ１０１）。
【０１０１】
そして、利用者特定部３２３は、利用者声紋記憶部３１２を用いて、利用者を特定する（ステップＳ１０２）。
【０１０２】
そして、音声認識部３２１は、音声を認識してテキスト化する（ステップＳ１０３）。具体的には、音声認識部３２１は、学習済みモデルを用いて、音声認識を行う。または、音声認識部３２１は、ネットワークを介して接続可能な外部の所定の音声認識サーバーに音声認識処理を委譲するために、入力された発話音声の情報を送信し、認識された結果のテキスト情報を取得する。
【０１０３】
そして、用語特定部３２２は、用語を特定する（ステップＳ１０４）。具体的には、用語特定部３２２は、学習済みモデルと用語記憶部３１１とを用いて、所定のアルゴリズムでステップＳ１０３にて得られたテキストを対象として医学用語、略語、通称、俗称、方言等の表現の揺らぎを考慮した用語特定を行い、用語についてはそのまま採用し、変換処理を行わないで意味を解釈する。そして、ルーム指定部３２４は、ルームＩＤと、発話テキストとを緊急情報連携サーバー装置２００へと送信する。
【０１０４】
そして、時系列会話処理部２２２は、時系列に会話を記録する（ステップＳ１０５）。具体的には、時系列会話処理部２２２は、ステップＳ１０４で受信したルームＩＤと発話テキストと、発話者の情報とを、それぞれ発話履歴記憶部２１２の患者ルーム２１２Ａと、発話内容２１２Ｄと、発話者２１２Ｂと、に対応付けて記憶させる。また、処理時点を特定する時刻情報を、発話時刻２１２Ｃに記憶させる。
【０１０５】
そして、症状情報作成部２２１は、症状関連項目を特定する（ステップＳ１０６）。具体的には、症状情報作成部２２１は、ステップＳ１０５で記録した発話テキストを、学習済みモデルを用いて解析して、症状情報記憶部２１１に設定された項目のいずれかについての質問であるか否かを判定する。症状情報記憶部２１１に設定された項目のいずれかについての質問でない場合には、症状情報作成部２２１は、緊急搬送時処理（症状情報追加）のフローを終了させる。
【０１０６】
症状情報記憶部２１１に設定された項目のいずれかについての質問である場合には、その項目について、発話テキストを質問命令として、また特定した症状関連項目としてスマートスピーカー１００に送信する（ステップＳ１０７）。
【０１０７】
スマートスピーカー１００の音声認識部１２１は、質問命令に応じた質問文を出力する（ステップＳ１０８）。
【０１０８】
そして、スマートスピーカー１００の音声認識部１２１は、緊急車両の救急隊員の発声を受け付ける（ステップＳ１０９）。
【０１０９】
そして、利用者特定部１２３は、利用者声紋記憶部１１２を用いて、利用者を特定する（ステップＳ１１０）。
【０１１０】
そして、音声認識部１２１は、音声を認識してテキスト化する（ステップＳ１１１）。具体的には、音声認識部１２１は、学習済みモデルを用いて、音声認識を行う。または、音声認識部１２１は、ネットワークを介して接続可能な外部の所定の音声認識サーバーに音声認識処理を委譲するために、入力された発話音声の情報を送信し、認識された結果のテキスト情報を取得する。
【０１１１】
そして、用語特定部１２２は、用語を特定する（ステップＳ１１２）。具体的には、用語特定部１２２は、学習済みモデルと用語記憶部１１１とを用いて、所定のアルゴリズムでステップＳ１１１にて得られたテキストを対象として医学用語、略語、通称、俗称、方言等の表現の揺らぎを考慮した用語特定を行い、用語についてはそのまま採用し、変換処理を行わないで意味を解釈する。そして、ルーム指定部１２４は、ルームＩＤと、発話テキストと、発話者の情報とを緊急情報連携サーバー装置２００へと送信する。
【０１１２】
そして、時系列会話処理部２２２は、時系列に会話を記録する（ステップＳ１１３）。具体的には、時系列会話処理部２２２は、ステップＳ１１２で受信したルームＩＤと発話テキストと、発話者の情報とを、それぞれ発話履歴記憶部２１２の患者ルーム２１２Ａと、発話内容２１２Ｄと、発話者２１２Ｂと、に対応付けて記憶させる。また、処理時点を特定する時刻情報を、発話時刻２１２Ｃに記憶させる。
【０１１３】
そして、症状情報作成部２２１は、症状情報を作成する（ステップＳ１１４）。具体的には、症状情報作成部２２１は、ステップＳ１１３で記録した発話テキストを、学習済みモデルを用いて解析して、症状情報記憶部２１１に設定された項目ごとにその値を特定して症状情報記憶部２１１に格納する。具体的には、症状情報作成部２２１は、患者氏名、患者性別、患者年齢、脈拍、主訴、処置等の情報を発話テキストから抽出し、症状情報記憶部２１１の患者ルーム２１１Ｇに格納されたルームＩＤが一致する患者の情報として格納する。
【０１１４】
以上が、緊急搬送時処理（症状情報追加）のフローの例である。緊急搬送時処理（症状情報追加）のフローによれば、スマートスピーカーが音声入力を受け付けて、仮想ルームのキー情報を共有する他のスマートスピーカーへ症状の情報を要求することで、発話内容から自動的に症状情報を作成することができる。
【０１１５】
図１１は、出力画面の例を示す図である。出力画面４００は、発話履歴記憶部２１２の情報が更新されると、更新された仮想ルームに属するスマートスピーカー１００および３００の全てに対して緊急情報連携サーバー装置２００から送信される。ただし、ディスプレイ装置を備えないスマートスピーカーについては、この限りではない。
【０１１６】
出力画面４００には、発話者を示すアイコン４０１と、発話内容のテキスト情報４０２と、発話時刻４０３と、が発話時刻４０３の時系列に垂直方向へ並べて表示される。すなわち、画面上方になるほど発話時刻が古い発言となるよう表示される。これにより、発話の経緯を仮想ルームＩＤが共通する端末を用いて参照することができるようになり、誰が何をどういう順序や経緯で発言したのか、という履歴を知ることができるようになる。これは、例えば医療従事者が適切な指示を行ったか否か、あるいは救急隊員が必要な情報を適切に医療従事者へ伝えたか、を確認する客観的な情報となりうることを示す。
【０１１７】
また、出力画面４００では、所定の基準に従って重要な情報はハイライトや大きさを大きくする等、強調表示するようにしても良い。この強調対象の選択および強調処理については、出力作成部２２３が行う。例えば、生体情報に関する文字を太字表記し、医師からの指示についてはハイライトするようにしてもよい。また、テキストを表示するのみならず、自動音声読み上げ処理等により、質疑応答に限られず、確認、指示、報告等について音声出力を行うようにしてもよい。
【０１１８】
また、出力画面４００には、所定のフォーマットに従って症状情報記憶部２１１の患者ルーム２１１Ｇに格納されたルームＩＤが一致する患者の情報を出力するようにしても良い。フォーマットは、緊急車両の管轄や病院の管轄範囲に応じて異なるものである場合も多く、各種のフォーマットを選択可能とするようにしても良い。
【０１１９】
以上が、第一の実施形態に係る緊急情報連携システム１である。このシステムによれば、特別な操作をせずに自然な対話により必要な情報を記録することができる。
【０１２０】
本発明は、上記の実施形態に制限されない。上記の実施形態は、本発明の技術的思想の範囲内で様々な変形が可能である。例えば、上記の実施形態においては、会話の情報のみ共有されているが、これに限られない。例えば、緊急車両に搭載された救命機器（例えば、ＡＥＤとするが、これに限られず、心電図モニター等各種の機器であっても構わない。）から稼働状況を特定しうる情報を得て、稼働状況を示すものであってもよい。このようにした場合、意識不明で救急搬送された場合や、重大な疾患があると認められた場合等に、いつどのような処置を行ったか、そのプロセスに不備は無かったのか等、より細やかな情報の確認を、客観性を持って行うことができる。
【０１２１】
このような例を、第二の実施形態として図１２〜図１４を用いて説明する。第二の実施形態に係る緊急情報連携システム１´は、基本的に第一の実施形態に係る緊急情報連携システム１と略同様であるが、一部において異なる。この相違点を中心に、説明する。
【０１２２】
図１２は、緊急情報連携システムの構成図である。緊急情報連携システム１´では、スマートスピーカー１００´の記憶部１１０´に、周辺機器稼働ログ記憶部１１４が含まれる。また、制御部１２０´には、周辺機器を制御する周辺機器制御部１２５が含まれる。そして、スマートスピーカー１００´には、ＡＥＤ（Ａｕｔｏｍａｔｅｄ  Ｅｘｔｅｒｎａｌ  Ｄｅｆｉｂｒｉｌｌａｔｏｒ：自動体外式除細動器）等の周辺機器１６０が接続されている。スマートスピーカー３００´も同様の構成である。
【０１２３】
図１３は、周辺機器稼働ログ記憶部のデータ構造例を示す図である。周辺機器稼働ログ記憶部１１４および３１４には、周辺機器ＩＤ１１４Ａと、機器名１１４Ｂと、時刻１１４Ｃと、稼働内容１１４Ｄと、が含まれる。周辺機器ＩＤ１１４Ａは、周辺機器１６０または３６０の個体を識別する情報である。機器名１１４Ｂは、周辺機器１６０または３６０のモデルを特定する情報である。時刻１１４Ｃは、周辺機器１６０または３６０の稼働イベントが発生した時刻を特定する情報である。稼働内容１１４Ｄは、周辺機器１６０または３６０のイベントを特定する情報である。すなわち、周辺機器稼働ログ記憶部１１４または３１４には、周辺機器１６０または３６０の稼働ログが集積される。
【０１２４】
周辺機器制御部１２５および３２５は、接続される周辺機器１６０または３６０の稼働の制御を行う。例えば、周辺機器制御部１２５および３２５は、起動開始、準備、診断開始、診断制御、診断結果判断、実施等の各種の動作を制御する。また、その動作時の記録についても周辺機器制御部１２５および３２５が自動的に実施して、周辺機器稼働ログ記憶部１１４または３１４へ格納する。さらに、周辺機器制御部１２５および３２５は、仮想ルームに接続されている間はルーム指定部１２４を介して緊急情報連携サーバー装置２００´に所定のタイミングで、周辺機器稼働ログ記憶部１１４あるいは３１４へ格納された稼働ログをルームＩＤと対応付けて送信する。
【０１２５】
また、緊急情報連携サーバー装置２００´の記憶部２１０´には、機材稼働情報記憶部２１３が含まれる。そして、制御部２２０´には、連動情報作成部２２４が含まれる。
【０１２６】
機材稼働情報記憶部２１３には、周辺機器稼働ログ記憶部１１４あるいは３１４と同様のデータ構造を有するデータが格納される。連動情報作成部２２４は、周辺機器制御部１２５および３２５が送信した稼働ログを受信すると、ルームＩＤごとに機材稼働情報記憶部２１３に格納する。
【０１２７】
また、連動情報作成部２２４は、出力作成部２２３が出力画面を作成する処理において、該当する時刻帯に当該仮想ルームのルームＩＤと対応付けられた機材（周辺機器）の稼働ログ情報を出力作成部２２３に受け渡す。出力作成部２２３は、時系列に発話と稼働ログ情報とを出力するよう出力画面を構成する。
【０１２８】
図１４は、出力画面の例を示す図である。出力画面４００´は、基本的には出力画面４００と同様であるが、さらに、周辺機器の稼働ログであるログ情報４０４表示される点で相違する。図１４の例では、ログ情報４０４として、「１２：０４  緊急車両のＡＥＤが開始されました」、「１２：０４  緊急車両のＡＥＤの準備が完了しました」、「１２：０５  緊急車両のＡＥＤの診断が開始されました」等の情報がテキスト表示される。
【０１２９】
以上が、第二の実施形態に係る緊急情報連携システム１´である。第二の実施形態に係る緊急情報連携システム１´では、上述の出力画面４００´が表示されることで、救急室の医療従事者は、確実に患者にＡＥＤが用いられていることを確認することができる。また、意識不明で救急搬送された場合や、重大な疾患があると認められた場合等に、いつどのような処置を行ったか、そのプロセスに不備は無かったのか等、より細やかな情報の確認を、客観性を持って行うことができる。
【０１３０】
また例えば、上記した第一の実施形態および第二の実施形態に係る緊急情報連携システムでは、スマートスピーカーが発話を受け付けてテキスト化していたが、テキスト化を緊急情報連携サーバー装置２００´´で行うようにしてもよい。
【０１３１】
このような例を、第三の実施形態として図１５〜図１７を用いて説明する。第三の実施形態に係る緊急情報連携システム１´´は、基本的に第一の実施形態に係る緊急情報連携システム１と略同様であるが、一部において異なる。この相違点を中心に、説明する。
【０１３２】
図１５は、緊急情報連携システムの構成図である。緊急情報連携システム１´´では、スマートスピーカー１００´´の記憶部１１０´´には、所属ルーム記憶部１１３が含まれる。第一の実施形態に係る記憶部１１０に含まれていた用語記憶部１１１と利用者声紋記憶部１１２とは、緊急情報連携サーバー装置２００´´の記憶部２１０´´に、用語記憶部２１５および利用者声紋記憶部２１６として含まれる。
【０１３３】
また、スマートスピーカー１００´´の制御部１２０´´には、ルーム指定部１２４が含まれる。第一の実施形態に係る制御部１２０に含まれていた音声認識部１２１と、用語特定部１２２と、利用者特定部１２３とは、緊急情報連携サーバー装置２００´´の制御部２２０´´に、音声認識部２２７と、用語特定部２２８と、利用者特定部２２９として含まれる。
【０１３４】
スマートスピーカー３００´´についても、スマートスピーカー１００´´と同様である。
【０１３５】
図１６は、第三の実施形態における緊急搬送時処理（ルーム開始まで）のフローの例を示す図である。緊急搬送時処理（ルーム開始まで）は、緊急車両に搭載されたスマートスピーカー１００´´からの開始指示に応じて起動される。
【０１３６】
まず、スマートスピーカー１００´´の音声入力部１４０は、発声を受け付ける。そして、該発話音声の情報は制御部１２０´´が緊急情報連携サーバー装置２００´´へ送信する（ステップＳ００１´）。
【０１３７】
そして、利用者特定部２２９は、利用者声紋記憶部２１６を用いて、利用者を特定する（ステップＳ００２´）。
【０１３８】
発話者を特定した時系列会話処理部２２２は、仮想ルームの準備を行う（ステップＳ００３）。具体的には、時系列会話処理部２２２は、新たに仮想ルームＩＤを割り振る。
【０１３９】
そして、音声認識部２２７は、音声を認識してテキスト化する（ステップＳ００４´）。具体的には、音声認識部２２７は、学習済みモデルを用いて、音声認識を行う。または、音声認識部２２７は、ネットワークを介して接続可能な外部の所定の音声認識サーバーに音声認識処理を委譲するために、受け付けた発話音声の情報を送信し、認識された結果のテキスト情報を取得する。
【０１４０】
そして、用語特定部２２８は、用語を特定する（ステップＳ００５´）。具体的には、用語特定部２２８は、学習済みモデルと用語記憶部２１５とを用いて、所定のアルゴリズムでステップＳ００４´にて得られたテキストを対象として医学用語、略語、通称、俗称、方言等の表現の揺らぎを考慮した用語特定を行い、用語についてはそのまま採用し、変換処理を行わないで意味を解釈する。
【０１４１】
そして、時系列会話処理部２２２は、時系列に会話を記録する（ステップＳ００６）。具体的には、時系列会話処理部２２２は、ステップＳ００３にて割り振ったルームＩＤと、ステップＳ００４´にて得られた発話テキストと、ステップＳ００２´で特定した発話者の情報とを、それぞれ発話履歴記憶部２１２の患者ルーム２１２Ａと、発話内容２１２Ｄと、発話者２１２Ｂと、に対応付けて記憶させる。また、処理時点を特定する時刻情報を、発話時刻２１２Ｃに記憶させる。
【０１４２】
そして、症状情報作成部２２１は、症状情報を作成する（ステップＳ００７´）。具体的には、症状情報作成部２２１は、ステップＳ００６´で記録した発話テキストを、学習済みモデルを用いて解析して、症状情報記憶部２１１に設定された項目ごとにその値を特定して症状情報記憶部２１１に格納する。具体的には、症状情報作成部２２１は、患者氏名、患者性別、患者年齢、脈拍、主訴、処置等の情報を発話テキストから抽出して症状情報記憶部２１１に格納するとともに、患者ルーム２１１ＧにルームＩＤを格納する。
【０１４３】
そして、時系列会話処理部２２２は、スマートスピーカー１００´´および３００´´に対して、ルームへ招待する（ステップＳ００８´）。具体的には、時系列会話処理部２２２は、所定のアルゴリズムにより、病院の救急室を引き当てて（例えば、救急外来が営業中の病院を検索して）救急室に存在するスマートスピーカー３００´´に対して、ルームＩＤを招待情報と共に送信する。また、時系列会話処理部２２２は、割り振った仮想ルームＩＤをルームＩＤとしてスマートスピーカー１００´´へ通知する。
【０１４４】
そして、スマートスピーカー３００´´の音声入力部１４０が医療従事者の発声を受け付ける。そして、該発話音声の情報は、ルーム指定部３２４を介してルームＩＤと対応付けられて、制御部３２０´´により緊急情報連携サーバー装置２００´´へ送信される（ステップＳ００９´）。
【０１４５】
そして、利用者特定部２２９は、発話者を一人仮想ルームに追加する（ステップＳ０２０）。そして、利用者特定部２２９は、利用者声紋記憶部２１６を用いて、利用者を特定する。（ステップＳ０１０´）。
【０１４６】
そして、音声認識部２２７は、音声を認識してテキスト化する（ステップＳ０１２´）。具体的には、音声認識部２２７は、学習済みモデルを用いて、音声認識を行う。または、音声認識部２２７は、ネットワークを介して接続可能な外部の所定の音声認識サーバーに音声認識処理を委譲するために、受け付けた発話音声の情報を送信し、認識された結果のテキスト情報を取得する。
【０１４７】
そして、用語特定部２２８は、用語を特定する（ステップＳ０１３´）。具体的には、用語特定部２２８は、学習済みモデルと用語記憶部２１５とを用いて、所定のアルゴリズムでステップＳ０１１´にて得られたテキストを対象として医学用語、略語、通称、俗称、方言等の表現の揺らぎを考慮した用語特定を行い、用語についてはそのまま採用し、変換処理を行わないで意味を解釈する。
【０１４８】
そして、時系列会話処理部２２２は、時系列に会話を記録する（ステップＳ０１４）。具体的には、時系列会話処理部２２２は、ステップＳ００９´で受信したルームＩＤと発話テキストと、ステップＳ０１０´で特定した発話者の情報とを、それぞれ発話履歴記憶部２１２の患者ルーム２１２Ａと、発話内容２１２Ｄと、発話者２１２Ｂと、に対応付けて記憶させる。また、処理時点を特定する時刻情報を、発話時刻２１２Ｃに記憶させる。
【０１４９】
以上が、第三の実施形態に係る緊急搬送時処理（ルーム開始まで）のフローの例である。緊急搬送時処理（ルーム開始まで）のフローによれば、スマートスピーカーが音声入力を受け付けて、緊急情報連携サーバー装置上でテキスト化することで、スマートスピーカーに要求される処理能力を抑えることができるため、スマートスピーカーを簡便な構成とすることができる。
【０１５０】
図１７は、第三の実施形態に係る緊急搬送時処理（症状情報追加）のフローの例を示す図である。緊急搬送時処理（症状情報追加）は、緊急搬送時処理（ルーム開始まで）の処理後に起動される。
【０１５１】
まず、スマートスピーカー３００´´の音声入力部３４０が救急室の医療従事者の発声を受け付ける。そして、該発話音声の情報は、ルーム指定部３２４を介してルームＩＤと対応付けられて、制御部３２０´´により緊急情報連携サーバー装置２００´´へ送信される（ステップＳ１０１´）。
【０１５２】
そして、利用者特定部２２９は、利用者声紋記憶部２１６を用いて、利用者を特定する（ステップＳ１０２´）。
【０１５３】
そして、音声認識部２２７は、音声を認識してテキスト化する（ステップＳ１０３´）。具体的には、音声認識部２２７は、学習済みモデルを用いて、音声認識を行う。または、音声認識部２２７は、ネットワークを介して接続可能な外部の所定の音声認識サーバーに音声認識処理を委譲するために、受け付けた発話音声の情報を送信し、認識された結果のテキスト情報を取得する。
【０１５４】
そして、用語特定部２２８は、用語を特定する（ステップＳ１０４´）。具体的には、用語特定部２２８は、学習済みモデルと用語記憶部２１５とを用いて、所定のアルゴリズムでステップＳ１０３´にて得られたテキストを対象として医学用語、略語、通称、俗称、方言等の表現の揺らぎを考慮した用語特定を行い、用語についてはそのまま採用し、変換処理を行わないで意味を解釈する。
【０１５５】
そして、時系列会話処理部２２２は、時系列に会話を記録する（ステップＳ１０５）。具体的には、時系列会話処理部２２２は、ステップＳ１０１´で受信したルームＩＤと発話テキストと、発話者の情報とを、それぞれ発話履歴記憶部２１２の患者ルーム２１２Ａと、発話内容２１２Ｄと、発話者２１２Ｂと、に対応付けて記憶させる。また、処理時点を特定する時刻情報を、発話時刻２１２Ｃに記憶させる。
【０１５６】
そして、症状情報作成部２２１は、症状関連項目を特定する（ステップＳ１０６）。具体的には、症状情報作成部２２１は、ステップＳ１０５で記録した発話テキストを、学習済みモデルを用いて解析して、症状情報記憶部２１１に設定された項目のいずれかについての質問であるか否かを判定する。症状情報記憶部２１１に設定された項目のいずれかについての質問でない場合には、症状情報作成部２２１は、緊急搬送時処理（症状情報追加）のフローを終了させる。
【０１５７】
症状情報記憶部２１１に設定された項目のいずれかについての質問である場合には、その項目について、発話テキストを質問命令として、また特定した症状関連項目として音声化してスマートスピーカー１００´´に送信する（ステップＳ１０７´）。
【０１５８】
スマートスピーカー１００´´は、質問命令および症状関連項目を音声出力する（ステップＳ１０８´）。
【０１５９】
そして、スマートスピーカー１００´´の音声入力装置は、緊急車両の救急隊員の発声を受け付ける。そして、該発話音声の情報は、ルーム指定部１２４を介してルームＩＤと対応付けられて、緊急情報連携サーバー装置２００´´へ送信される（ステップＳ１０９´）。
【０１６０】
そして、利用者特定部２２９は、利用者声紋記憶部２１６を用いて、利用者を特定する（ステップＳ１１０´）。
【０１６１】
そして、音声認識部２２７は、音声を認識してテキスト化する（ステップＳ１１１´）。具体的には、音声認識部２２７は、学習済みモデルを用いて、音声認識を行う。または、音声認識部２２７は、ネットワークを介して接続可能な外部の所定の音声認識サーバーに音声認識処理を委譲するために、受け付けた発話音声の情報を送信し、認識された結果のテキスト情報を取得する。
【０１６２】
そして、用語特定部２２８は、用語を特定する（ステップＳ１１２´）。具体的には、用語特定部２２８は、学習済みモデルと用語記憶部２１５とを用いて、所定のアルゴリズムでステップＳ１１１´にて得られたテキストを対象として医学用語、略語、通称、俗称、方言等の表現の揺らぎを考慮した用語特定を行い、用語についてはそのまま採用し、変換処理を行わないで意味を解釈する。
【０１６３】
そして、時系列会話処理部２２２は、時系列に会話を記録する（ステップＳ１１３）。具体的には、時系列会話処理部２２２は、ステップＳ１０９´で受信したルームＩＤと発話テキストと、発話者の情報とを、それぞれ発話履歴記憶部２１２の患者ルーム２１２Ａと、発話内容２１２Ｄと、発話者２１２Ｂと、に対応付けて記憶させる。また、処理時点を特定する時刻情報を、発話時刻２１２Ｃに記憶させる。
【０１６４】
そして、症状情報作成部２２１は、症状情報を作成する（ステップＳ１１４）。具体的には、症状情報作成部２２１は、ステップＳ１１３で記録した発話テキストを、学習済みモデルを用いて解析して、症状情報記憶部２１１に設定された項目ごとにその値を特定して症状情報記憶部２１１に格納する。具体的には、症状情報作成部２２１は、患者氏名、患者性別、患者年齢、脈拍、主訴、処置等の情報を発話テキストから抽出し、症状情報記憶部２１１の患者ルーム２１１Ｇに格納されたルームＩＤが一致する患者の情報として格納する。
【０１６５】
以上が、第三の実施形態に係る緊急搬送時処理（症状情報追加）のフローの例である。緊急搬送時処理（症状情報追加）のフローによれば、スマートスピーカーが音声入力を受け付けて、仮想ルームのキー情報を共有する他のスマートスピーカーへ症状の情報を要求することで、発話内容から自動的に症状情報を作成することができる。
【０１６６】
また、上記した実施形態の技術的要素は、単独で適用されてもよいし、プログラム部品とハードウェア部品のような複数の部分に分けられて適用されるようにしてもよい。
【０１６７】
また、上記した発話の解析には、全て、学習済みモデルを適用してもよいし、キーワードの一致度合いに応じて尤度を算出することで意味を推定するようにしてもよいし、単に含まれる単語のルールベースで対応する項目の特定を行うようにしてもよい。以上、本発明について、実施形態を中心に説明した。
【符号の説明】
【０１６８】
１・・・緊急情報連携システム、５０・・・ネットワーク、１００，３００・・・スマートスピーカー、１１０，３１０・・・記憶部、１１１，３１１・・・用語記憶部、１１２，３１２・・・利用者声紋記憶部、１１３，３１３・・・所属ルーム記憶部、１１４，３１４・・・周辺機器稼働ログ記憶部、１２０，３２０・・・制御部、１２１，３２１・・・音声認識部、１２２，３２２・・・用語特定部、１２３，３２３・・・利用者特定部、１２４，３２４・・・ルーム指定部、１２５，３２５・・・周辺機器制御部、１３０，３３０・・・通信部、１４０，３４０・・・音声入力部、１５０，３５０・・・音声出力部、２００・・・緊急情報連携サーバー装置、２１０・・・記憶部、２１１・・・症状情報記憶部、２１２・・・発話履歴記憶部、２１３・・・機材稼働情報記憶部、２１５・・・用語記憶部、２１６・・・利用者声紋記憶部、２２０・・・制御部、２２１・・・症状情報作成部、２２２・・・時系列会話処理部、２２３・・・出力作成部、２２７・・・音声認識部、２２８・・・用語特定部、２２９・・・利用者特定部、２３０・・・通信部。
【図１】
2020144676.tif 000003
【図２】
2020144676.tif 000004
【図３】
2020144676.tif 000005
【図４】
2020144676.tif 000006
【図５】
2020144676.tif 000007
【図６】
2020144676.tif 000008
【図７】
2020144676.tif 000009
【図８】
2020144676.tif 000010
【図９】
2020144676.tif 000011
【図１０】
2020144676.tif 000012
【図１１】
2020144676.tif 000013
【図１２】
2020144676.tif 000014
【図１３】
2020144676.tif 000015
【図１４】
2020144676.tif 000016
【図１５】
2020144676.tif 000017
【図１６】
2020144676.tif 000018
【図１７】
2020144676.tif 000019