(57)【要約】【課題】多様な言語・文化を持ちうる患者に対し、救急隊員を支援する技術を提供する。【解決手段】  情報連携システムであって、発話音声を受け付ける複数の音声入出力装置と、患者の生体情報を含む身上情報を記憶する症状情報記憶部と、入力された発話音声の言語に応じた言語で身上情報に関する質問を出力する時系列会話処理部と、質問に対する返答に含まれる患者の身上情報を抽出して症状情報記憶部に記憶させる症状情報作成部と、言語および身上情報に応じた治療制限を特定する治療制限特定部と、を備え、音声入出力装置は、治療制限を音声出力する。【選択図】図１
2020144681.tif 000002
【特許請求の範囲】
【請求項１】
発話音声を受け付ける複数の音声入出力装置と、
患者の生体情報を含む身上情報を記憶する症状情報記憶部と、
入力された発話音声の言語に応じた言語で身上情報に関する質問を出力する時系列会話処理部と、
前記質問に対する返答に含まれる前記患者の前記身上情報を抽出して前記症状情報記憶部に記憶させる症状情報作成部と、
前記言語および前記身上情報に応じた治療制限を特定する治療制限特定部と、
を備え、
前記音声入出力装置は、前記治療制限を音声出力する、
ことを特徴とする情報連携システム。
【請求項２】
複数の音声入出力装置と、
前記音声入出力装置とネットワークを介して通信可能に接続される情報連携サーバー装置と、を備え、
前記音声入出力装置は、それぞれ、入力された発話音声をテキスト化して当該発話音声の言語を特定する情報とともに前記情報連携サーバー装置に対して送信する制御部を備え、
前記情報連携サーバー装置は、
患者の生体情報を含む身上情報を記憶する症状情報記憶部と、
前記発話音声の言語に応じた言語で身上情報に関する質問を出力する時系列会話処理部と、
前記テキストから少なくとも前記患者の前記身上情報を抽出して前記症状情報記憶部に記憶させる症状情報作成部と、
前記言語および前記身上情報に応じた治療制限を特定する治療制限特定部と、
を備え、
前記音声入出力装置は、前記治療制限を音声出力する、
ことを特徴とする情報連携システム。
【請求項３】
請求項１または２に記載の情報連携システムであって、
前記患者は緊急車両に収容した患者であり、
前記音声入出力装置のうち少なくとも一つは前記緊急車両に設けられて前記治療制限を表示する、
ことを特徴とする情報連携システム。
【請求項４】
請求項１〜３のいずれか一項に記載の情報連携システムであって、
前記音声入出力装置のうち少なくとも一つは医療従事者が医療行為を行う救急室に設けられ、
前記音声入出力装置は、少なくとも前記身上情報および前記治療制限を表示するディスプレイ装置を備える、
ことを特徴とする情報連携システム。
【請求項５】
請求項２〜４のいずれか一項に記載の情報連携システムであって、
前記音声入出力装置の制御部は、前記発話音声をテキスト化する処理において、前記発話音声を認識する音声認識処理と、前記発話音声の言語を特定する処理とを行う、
ことを特徴とする情報連携システム。
【請求項６】
請求項２に記載の情報連携システムであって、
前記情報連携サーバー装置は、
前記身上情報と、前記言語を特定する情報と、を用いて、診療可能な機関を選定する診療機関選定部、
を備えることを特徴とする情報連携システム。
【請求項７】
請求項１〜６のいずれか一項に記載の情報連携システムであって、
前記治療制限とともに、前記テキストを時系列に表示する画面情報を作成して前記音声入出力装置に出力させる情報を作成する出力作成部、
を備えることを特徴とする情報連携システム。
【請求項８】
複数の音声入出力装置から、入力された発話音声をテキスト化した情報と、キー情報とをネットワークを介して受信する通信部と、
患者の生体情報を含む身上情報を記憶する症状情報記憶部と、
入力された発話音声の言語に応じた言語で身上情報に関する質問を出力する時系列会話処理部と、
前記テキストから少なくとも前記患者の前記身上情報を抽出して前記症状情報記憶部に記憶させる症状情報作成部と、
前記言語および前記身上情報に応じた治療制限を特定する治療制限特定部と、
前記治療制限を互いに関連付けられた前記キー情報を有する前記音声入出力装置に送信して出力させる出力作成部と、
を有することを特徴とする情報連携サーバー装置。
【請求項９】
請求項８に記載の情報連携サーバー装置であって、
前記音声入出力装置のうち少なくとも一つは緊急車両に設けられ、
前記患者は前記緊急車両に収容した患者である、
ことを特徴とする情報連携サーバー装置。
【請求項１０】
請求項８または９に記載の情報連携サーバー装置であって、
前記音声入出力装置のうち少なくとも一つは医療従事者が医療行為を行う救急室に設けられ、
前記音声入出力装置は、少なくとも前記生体情報を表示するディスプレイ装置を備える、
ことを特徴とする情報連携サーバー装置。
【請求項１１】
請求項８〜１０のいずれか一項に記載の情報連携サーバー装置であって、
前記テキストを互いに関連付けられた前記キー情報を有する前記音声入出力装置に送信して時系列に共有させる時系列会話処理部を備え、
前記音声入出力装置の一つから新たな患者に関する発話がなされると、前記キー情報を発行して、該音声入出力装置とは異なる他の音声入出力装置の少なくとも一つと該キー情報を関連付ける、
ことを特徴とする情報連携サーバー装置。
【請求項１２】
請求項８〜１１のいずれか一項に記載の情報連携サーバー装置であって、
前記出力作成部は、前記治療制限とともに、前記テキストを時系列に表示する画面情報を作成して互いに関連付けられた前記キー情報を有する前記音声入出力装置に送信して出力させる、
ことを特徴とする情報連携サーバー装置。
【請求項１３】
請求項８に記載の情報連携サーバー装置であって、
前記身上情報と、前記言語を特定する情報と、を用いて、診療可能な機関を選定する診療機関選定部、
を備えることを特徴とする情報連携サーバー装置。
【請求項１４】
複数の音声入出力装置から、入力された発話音声情報と、キー情報とをネットワークを介して受信する通信部と、
患者の生体情報を含む身上情報を記憶する症状情報記憶部と、
前記発話音声情報の言語を特定してテキスト化する音声認識部と、
前記テキストから前記患者の前記身上情報を抽出して前記症状情報記憶部に記憶させる症状情報作成部と、
前記言語および前記身上情報に応じた治療制限を特定する治療制限特定部と、
前記治療制限を互いに関連付けられた前記キー情報を有する前記音声入出力装置に送信して出力させる出力作成部と、
を有することを特徴とする情報連携サーバー装置。
【請求項１５】
複数の音声入出力装置と、
前記音声入出力装置とネットワークを介して通信可能に接続される情報連携サーバー装置と、を備え、
前記音声入出力装置は、それぞれ、入力された発話音声を受け付けて所定のキー情報とともに前記情報連携サーバー装置に対して送信する制御部を備え、
前記情報連携サーバー装置は、
患者の生体情報を含む身上情報を記憶する症状情報記憶部と、
前記発話音声を受信して該発話音声の言語を特定しテキスト化する音声認識部と、
前記テキストから前記患者の前記身上情報を抽出して前記症状情報記憶部に記憶させる症状情報作成部と、
前記言語および前記身上情報に応じた治療制限を特定する治療制限特定部と
前記治療制限を互いに関連付けられた前記キー情報を有する前記音声入出力装置に送信して出力させる出力作成部と、
を有することを特徴とする情報連携システム。
【請求項１６】
所定の情報連携サーバー装置とネットワークを介して通信可能に接続する通信部と、
入力された発話音声の言語を特定してテキスト化して所定のキー情報とともに前記情報連携サーバー装置に対して送信する制御部と、を備え、
前記制御部は、治療制限の情報を前記情報連携サーバー装置から受信すると、該治療制限の情報を出力させる、
ことを特徴とする音声入出力装置。
【請求項１７】
請求項１６に記載の音声入出力装置であって、
少なくとも前記治療制限の情報を表示するディスプレイ装置を備える、
ことを特徴とする音声入出力装置。
【請求項１８】
請求項１６または１７に記載の音声入出力装置であって、
前記制御部は、前記発話音声をテキスト化する処理において、前記発話音声を認識する音声認識処理を行い、該処理では、前記発話音声の言語を特定する処理を行う、
ことを特徴とする音声入出力装置。
【請求項１９】
情報連携システムによる情報連携方法であって、
前記情報連携システムは、
発話音声を受け付ける複数の音声入出力装置と、
患者の生体情報を含む身上情報を記憶する症状情報記憶部と、制御部と、を備え、
前記制御部は、
入力された発話音声の言語に応じた言語で身上情報に関する質問を出力する時系列会話処理ステップと、
前記質問に対する返答に含まれる前記患者の前記身上情報を抽出して前記症状情報記憶部に記憶させる症状情報作成ステップと、
前記言語および前記身上情報に応じた治療制限を特定する治療制限特定ステップと、
を実施し、
前記音声入出力装置は、前記治療制限を音声出力する出力ステップ、
を実施することを特徴とする情報連携方法。
【請求項２０】
コンピュータに情報連携をさせるプログラムであって、
前記コンピュータを、複数の音声入出力装置から、入力された発話音声をテキスト化した情報と、キー情報とをネットワークを介して受信する通信部と、患者の生体情報を含む身上情報を記憶する症状情報記憶部と、制御部として機能させ、
前記制御部に、
入力された発話音声の言語に応じた言語で身上情報に関する質問を出力する時系列会話処理ステップと、
前記テキストから少なくとも前記患者の前記身上情報を抽出して前記症状情報記憶部に記憶させる症状情報作成ステップと、
前記言語および前記身上情報に応じた治療制限を特定する治療制限特定ステップと、
前記治療制限を互いに関連付けられた前記キー情報を有する前記音声入出力装置に送信して出力させる出力作成ステップと、
を実施させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報連携システム、情報連携サーバー、音声入出力装置、情報連携方法およびプログラムに関するものである。
【背景技術】
【０００２】
特許文献１には、「情報を入力するための入力エリアを入力画面に表示するアプリケーションソフトウェアに対して、音声入力機能を追加する入力支援装置であって、前記入力エリアの表示位置と、当該入力エリアを表す読みを特定する第１の情報と、を対応付けた画面構成テーブルを格納する画面構成テーブル格納部と、発話音声に対する音声認識処理の結果を表す第２の情報を取得し、取得した前記第２の情報に対応する前記入力エリアの表示位置を、前記画面構成テーブルを参照して特定し、特定した前記表示位置を選択する操作情報を、前記アプリケーションソフトウェアに入力する入力情報生成部と、を有する入力支援装置」と記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１３−０６１７９３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記技術は、多様な言語・文化を持ちうる患者に対し、救急隊員を支援することまでは対応できない。
【０００５】
本発明の目的は、多様な言語・文化を持ちうる患者に対し、救急隊員を支援することにある。
【課題を解決するための手段】
【０００６】
本願は、上記課題の少なくとも一部を解決する手段を複数含んでいるが、その例を挙げるならば、以下のとおりである。本発明の一態様に係る情報連携システムは、発話音声を受け付ける複数の音声入出力装置と、患者の生体情報を含む身上情報を記憶する症状情報記憶部と、入力された発話音声の言語に応じた言語で身上情報に関する質問を出力する時系列会話処理部と、上記質問に対する返答に含まれる上記患者の上記身上情報を抽出して上記症状情報記憶部に記憶させる症状情報作成部と、上記言語および上記身上情報に応じた治療制限を特定する治療制限特定部と、を備え、上記音声入出力装置は、上記治療制限を音声出力する、ことを特徴とする。
【０００７】
また、本発明の別の態様にかかる情報連携システムは、複数の音声入出力装置と、上記音声入出力装置とネットワークを介して通信可能に接続される情報連携サーバー装置と、を備え、上記音声入出力装置は、それぞれ、入力された発話音声をテキスト化して当該発話音声の言語を特定する情報とともに上記情報連携サーバー装置に対して送信する制御部を備え、上記情報連携サーバー装置は、患者の生体情報を含む身上情報を記憶する症状情報記憶部と、上記発話音声の言語に応じた言語で身上情報に関する質問を出力する時系列会話処理部と、上記テキストから少なくとも上記患者の上記身上情報を抽出して上記症状情報記憶部に記憶させる症状情報作成部と、上記言語および上記身上情報に応じた治療制限を特定する治療制限特定部と、を備え、上記音声入出力装置は、上記治療制限を音声出力する、ことを特徴とする。
【０００８】
また、上記の情報連携システムであって、上記患者は上記緊急車両に収容した患者であり、上記音声入出力装置のうち少なくとも一つは緊急車両に設けられて上記治療制限を表示する、ことを特徴とするものであってもよい。
【０００９】
また、上記の情報連携システムであって、上記音声入出力装置のうち少なくとも一つは医療従事者が医療行為を行う救急室に設けられ、上記音声入出力装置は、少なくとも上記身上情報および上記治療制限を表示するディスプレイ装置を備える、ことを特徴とするものであってもよい。
【００１０】
また、上記の情報連携システムであって、上記音声入出力装置の制御部は、上記発話音声をテキスト化する処理において、上記発話音声を認識する音声認識処理と、上記発話音声の言語を特定する処理とを行う、ことを特徴とするものであってもよい。
【００１１】
また、上記の情報連携システムであって、上記情報連携サーバー装置は、上記身上情報と、上記言語を特定する情報と、を用いて、診療可能な機関を選定する診療機関選定部、を備えるものであってもよい。
【００１２】
また、上記の情報連携システムであって、上記治療制限とともに、上記テキストを時系列に表示する画面情報を作成して上記音声入出力装置に出力させる情報を作成する出力作成部を備えることを特徴とするものであってもよい。
【００１３】
また、本発明の別の態様にかかる情報連携サーバー装置は、複数の音声入出力装置から、入力された発話音声をテキスト化した情報と、キー情報とをネットワークを介して受信する通信部と、患者の生体情報を含む身上情報を記憶する症状情報記憶部と、入力された発話音声の言語に応じた言語で身上情報に関する質問を出力する時系列会話処理部と、上記テキストから少なくとも上記患者の上記身上情報を抽出して上記症状情報記憶部に記憶させる症状情報作成部と、上記言語および上記身上情報に応じた治療制限を特定する治療制限特定部と、上記治療制限を互いに関連付けられた上記キー情報を有する上記音声入出力装置に送信して出力させる出力作成部と、を有することを特徴とする。
【００１４】
また、上記の情報連携サーバー装置であって、上記音声入出力装置のうち少なくとも一つは緊急車両に設けられ、上記患者は上記緊急車両に収容した患者である、ことを特徴とするものであってもよい。
【００１５】
また、上記の情報連携サーバー装置であって、上記音声入出力装置のうち少なくとも一つは医療従事者が医療行為を行う救急室に設けられ、上記音声入出力装置は、少なくとも上記生体情報を表示するディスプレイ装置を備える、ことを特徴とするものであってもよい。
【００１６】
また、上記の情報連携サーバー装置であって、上記テキストを互いに関連付けられた上記キー情報を有する上記音声入出力装置に送信して時系列に共有させる時系列会話処理部を備え、上記音声入出力装置の一つから新たな患者に関する発話がなされると、上記キー情報を発行して、該音声入出力装置とは異なる他の音声入出力装置の少なくとも一つと該キー情報を関連付ける、ことを特徴とするものであってもよい。
【００１７】
また、上記の情報連携サーバー装置であって、上記出力作成部は、上記治療制限とともに、上記テキストを時系列に表示する画面情報を作成して互いに関連付けられた上記キー情報を有する上記音声入出力装置に送信して出力させる、ことを特徴とするものであってもよい。
【００１８】
また、上記の情報連携サーバー装置であって、上記身上情報と、上記言語を特定する情報と、を用いて、診療可能な機関を選定する診療機関選定部、を備えるものであってもよい。
【００１９】
また、本発明の別の態様にかかる情報連携サーバー装置は、複数の音声入出力装置から入力された発話音声情報と、キー情報とをネットワークを介して受信する通信部と、患者の生体情報を含む身上情報を記憶する症状情報記憶部と、上記発話音声情報の言語を特定してテキスト化する音声認識部と、上記テキストから上記患者の上記身上情報を抽出して上記症状情報記憶部に記憶させる症状情報作成部と、上記言語および上記身上情報に応じた治療制限を特定する治療制限特定部と上記治療制限を互いに関連付けられた上記キー情報を有する上記音声入出力装置に送信して出力させる出力作成部と、を有することを特徴とする。
【００２０】
また、本発明の別の態様にかかる情報連携システムは、複数の音声入出力装置と、上記音声入出力装置とネットワークを介して通信可能に接続される情報連携サーバー装置と、を備え、上記音声入出力装置は、それぞれ、入力された発話音声を受け付けて所定のキー情報とともに上記情報連携サーバー装置に対して送信する制御部を備え、上記情報連携サーバー装置は、患者の生体情報を含む身上情報を記憶する症状情報記憶部と、上記発話音声を受信して該発話音声の言語を特定しテキスト化する音声認識部と、上記テキストから上記患者の上記身上情報を抽出して上記症状情報記憶部に記憶させる症状情報作成部と、上記言語および上記身上情報に応じた治療制限を特定する治療制限特定部と上記治療制限を互いに関連付けられた上記キー情報を有する上記音声入出力装置に送信して出力させる出力作成部と、を有することを特徴とする。
【００２１】
また、本発明の別の態様にかかる音声入出力装置は、所定の情報連携サーバー装置とネットワークを介して通信可能に接続する通信部と、入力された発話音声の言語を特定してテキスト化して所定のキー情報とともに上記情報連携サーバー装置に対して送信する制御部と、を備え、上記制御部は、治療制限の情報を上記情報連携サーバー装置から受信すると、該治療制限の情報を出力させる、ことを特徴とする。
【００２２】
また、上記の音声入出力装置であって、少なくとも上記治療制限の情報を表示するディスプレイ装置を備える、ことを特徴とするものであってもよい。
【００２３】
また、上記の音声入出力装置であって、上記制御部は、上記発話音声をテキスト化する処理において、上記発話音声を認識する音声認識処理を行い、該処理では、上記発話音声の言語を特定する処理を行う、ことを特徴とするものであってもよい。
【００２４】
また、本発明の別の態様にかかる情報連携方法は、情報連携システムによる情報連携方法であって、上記情報連携システムは、発話音声を受け付ける複数の音声入出力装置と、患者の生体情報を含む身上情報を記憶する症状情報記憶部と、制御部と、を備え、上記制御部は、入力された発話音声の言語に応じた言語で身上情報に関する質問を出力する時系列会話処理ステップと、上記質問に対する返答に含まれる上記患者の上記身上情報を抽出して上記症状情報記憶部に記憶させる症状情報作成ステップと、上記言語および上記身上情報に応じた治療制限を特定する治療制限特定ステップと、を実施し、上記音声入出力装置は、上記治療制限を音声出力する出力ステップ、を実施することを特徴とする。
【００２５】
また、本発明の別の態様にかかるプログラムは、コンピュータに情報連携をさせるプログラムであって、上記コンピュータを、複数の音声入出力装置から、入力された発話音声をテキスト化した情報と、キー情報とをネットワークを介して受信する通信部と、患者の生体情報を含む身上情報を記憶する症状情報記憶部と、制御部として機能させ、上記制御部に、入力された発話音声の言語に応じた言語で身上情報に関する質問を出力する時系列会話処理ステップと、上記テキストから少なくとも上記患者の上記身上情報を抽出して上記症状情報記憶部に記憶させる症状情報作成ステップと、上記言語および上記身上情報に応じた治療制限を特定する治療制限特定ステップと、上記治療制限を互いに関連付けられた上記キー情報を有する上記音声入出力装置に送信して出力させる出力作成ステップと、を実施させることを特徴とする。
【発明の効果】
【００２６】
本発明によると、多様な言語・文化を持ちうる患者に対し、救急隊員を支援する技術を提供することができる。上記した以外の課題、構成および効果は、以下の実施形態の説明により明らかにされる。
【図面の簡単な説明】
【００２７】
【図１】緊急情報連携システムの構成例を示す図である。
【図２】対話ＩＤ記憶部のデータ構造例を示す図である。
【図３】多言語問診記憶部のデータ構造例を示す図である。
【図４】発話履歴記憶部のデータ構造例を示す図である。
【図５】医療行為制限記憶部のデータ構造例を示す図である。
【図６】診療可能機関記憶部のデータ構造例を示す図である。
【図７】利用者声紋情報記憶部のデータ構造例を示す図である。
【図８】身上情報記憶部のデータ構造例を示す図である。
【図９】スマートスピーカーのハードウェア構成例を示す図である。
【図１０】緊急情報連携サーバー装置のハードウェア構成例を示す図である。
【図１１】緊急搬送時処理（自動問診まで）のフローの例を示す図である。
【図１２】緊急搬送時処理（搬送先選定）のフローの例を示す図である。
【図１３】出力画面の例を示す図である。
【図１４】緊急情報連携システムの構成図である。
【図１５】緊急搬送時処理（自動問診まで）のフローの例を示す図である。
【図１６】緊急搬送時処理（搬送先選定）のフローの例を示す図である。
【発明を実施するための形態】
【００２８】
以下に、本発明の一態様に係る実施形態を適用した緊急情報連携システムについて、図面を参照して説明する。以下の実施の形態においては便宜上その必要があるときは、複数のセクションまたは実施の形態に分割して説明するが、特に明示した場合を除き、それらはお互いに無関係なものではなく、一方は他方の一部または全部の変形例、詳細、補足説明等の関係にある。
【００２９】
また、以下の実施の形態において、要素の数等（個数、数値、量、範囲等を含む）に言及する場合、特に明示した場合および原理的に明らかに特定の数に限定される場合等を除き、その特定の数に限定されるものではなく、特定の数以上でも以下でもよい。
【００３０】
さらに、以下の実施の形態において、その構成要素（要素ステップ等も含む）は、特に明示した場合および原理的に明らかに必須であると考えられる場合等を除き、必ずしも必須のものではないことは言うまでもない。
【００３１】
同様に、以下の実施の形態において、構成要素等の形状、位置関係等に言及するときは特に明示した場合および原理的に明らかにそうではないと考えられる場合等を除き、実質的にその形状等に近似または類似するもの等を含むものとする。このことは、上記数値および範囲についても同様である。
【００３２】
また、実施の形態を説明するための全図において、同一の部材には原則として同一の符号を付し、その繰り返しの説明は省略する。
【００３３】
図１は、本実施形態に係る緊急情報連携システムの構成例を示す図である。緊急情報連携システム１は、緊急情報連携サーバー装置２００と、緊急情報連携サーバー装置２００とネットワーク５０を介して通信可能に接続された複数のスマートスピーカー１００、３００と、スマートスピーカー１００、３００とネットワーク５０を介して通信可能に接続された音声認識サーバー装置１０と、を含む。複数の利用者がスマートスピーカー１００、３００を用いて対話を行い、その対話に含まれる生体情報（例えば、年齢や性別、血圧、血液型等）、精神的情報（信教を含む各種思想関連情報）、文化的情報（出身地、成長環境等）、言語的情報（通常使用言語、第一言語）等を検出して、これらの情報を含む身上情報を構成する。また、緊急情報連携システム１は、複数の利用者がスマートスピーカー１００、３００を用いた対話における時系列の発言の履歴のテキストを簡便に参照できるように記憶させる。それぞれのスマートスピーカー１００、３００は、音声入出力装置であって、音声認識サーバー装置１０、緊急情報連携サーバー装置２００に通信を介して接続して利用する。
【００３４】
また、緊急情報連携サーバー装置２００は、上記した身上情報を用いて、搬送する患者を受け入れ可能な病院等の診療機関を特定する。また、その際に上記身上情報に関連する医療行為の制限があるか否か特定する。
【００３５】
なお、スマートスピーカー１００、３００から音声認識サーバー装置１０、緊急情報連携サーバー装置２００に接続する際には、ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、インターネット、携帯電話網等、あるいはこれらが複合した通信網であるネットワーク５０を介して接続される。なお、当該ネットワーク５０は、携帯電話通信網等の無線通信網上のＶＰＮ（Ｖｉｒｔｕａｌ  Ｐｒｉｖａｔｅ  Ｎｅｔｗｏｒｋ）等であってもよい。
【００３６】
スマートスピーカー１００、３００は、典型的には、救急車等の緊急車両および病院の救急室に配置され、それぞれの配置場所にて業務を行う職員による音声入力を受け付ける。例えば、緊急車両には救急隊員（救急救命士等）や消防士等の職員が配置されて救命業務を行い、救急室には医師や看護師等の職員が配置されて救急対応業務を行う。スマートスピーカー１００、３００は、これらの職員および患者の発話音声を入力として受け取り、音声認識サーバー装置１０へ送信してテキスト情報および言語識別子を受け取り、テキスト情報および言語識別子を緊急情報連携サーバー装置２００へ送信する。
【００３７】
ここで、救急車等に患者が搬入されると、救急車等から近隣の病院の緊急窓口等に救急要請がなされ、それぞれの職員の音声による対話を通じて患者の容態や処置の状況について連携がなされる。また、患者の観察所見等の生体情報が病院前救護記録や傷病者引継書等の所定のフォーマットの書類に記入されて救急車から病院へ申し送られる。
【００３８】
この連携においては、対話と、傷病者引継書等の書類上の記載と、が齟齬する可能性や、対話における連携が不明瞭である可能性、あるいは書面の記載の不明確性等により情報が十分に共有されない場合も多い。また、緊急車両の救急隊員は救命行為と並行して救護記録等の書類を早急かつ正確に作成する必要があり、救命行為と両立することに困難性がある場合もある。
【００３９】
また、この連携において、患者が救急隊員や消防士等の職員が理解できない言語しか話せない場合には、意思疎通そのものができないこともある。また、患者が所定の信教を理由に医療行為（例えば、輸血等）の制限を有する場合もあり、これを見抜く必要が要請される。あるいは、外国籍である、あるいは特定の保険に加入していない等の社会的理由により患者が救急医療を受けられない診療機関に搬送すると、問題が発生する場合もある。
【００４０】
スマートスピーカー１００、３００が発話を受け付けると、緊急情報連携システム１は、入力された発話音声をテキスト化する音声認識処理を行い、テキストから少なくとも患者の生体情報等を含む身上情報を抽出して、入力された発話音声の言語に応じた言語で身上情報に関する質問を出力する時系列会話処理と、質問に対する返答に含まれる患者の身上情報を抽出して症状情報記憶部に記憶させる症状情報作成処理と、言語および身上情報に応じた治療制限を特定する治療制限特定処理と、を行う。そして、スマートスピーカー１００、３００は、治療制限を音声で出力する。
【００４１】
具体的には、スマートスピーカー１００、３００は、患者、救急隊員等や医療従事者による発話を受け付けると、入力された発話音声を音声認識サーバー装置１０に対してネットワーク５０を介して送信する。そして、スマートスピーカー１００、３００は、発話音声の言語を識別する言語識別子と、該言語として音声認識処理を行った結果得られるテキストデータと、を音声認識サーバー装置１０から受け取る。
【００４２】
緊急情報連携サーバー装置２００が発話音声のテキストおよび言語識別子を受け付けると、時系列に会話を記録し、テキストに含まれる身上情報を抽出して記憶し、不足している身上情報があればその不足項目を特定して問診音声としてスマートスピーカー１００、３００に送信する。この処理において、緊急情報連携サーバー装置２００は、言語識別子に応じて問診音声を特定する。つまり、年齢の情報が不足しているのであれば、緊急情報連携サーバー装置２００は、年齢を問診するための質問文を、中国語を第一言語とする患者に対しては中国語で問診音声として送信する。緊急情報連携サーバー装置２００は、不足項目がなければ、この質問を終え、不足項目が依然としてあれば質問を継続する。
【００４３】
緊急情報連携サーバー装置２００は、発話音声のテキストを受け付けると、該テキストから少なくとも患者の生体情報（例えば、脈拍、血圧等の数値化された情報や、年齢や性別、血液型、出血の有無、痛みの有無、痛みの位置、意識レベル、対処状況等のいずれかまたは複数の情報）を検出して、他にも精神的情報（信教を含む各種思想関連情報）、文化的情報（出身地、成長環境等）、言語的情報（通常使用言語、第一言語）等を検出して、これらの情報を含む身上情報を構成する。また、臓器提供のドナー希望の有無についても、身上情報に含めるようにしてもよい。
【００４４】
また、緊急情報連携サーバー装置２００は、言語識別子と、身上情報とに応じた治療制限を特定する。これは、例えば、言語、信教等の属性よっては、医療行為が制限される場合もありうるためである。医療行為には、あらゆる診断、保存行為、延命行為、治療行為、投薬行為が含まれる。例えば、血圧測定、ＡＥＤ（Ａｕｔｏｍａｔｅｄ  Ｅｘｔｅｒｎａｌ  Ｄｅｆｉｂｒｉｌｌａｔｏｒ：自動体外式除細動器）の使用、止血、採血、輸血行為や、ブドウ糖点滴等の行為も医療行為に含まれるものとする。そして、緊急情報連携サーバー装置２００は、治療制限をスマートスピーカー１００、３００に送信して出力させる。
【００４５】
また、緊急情報連携サーバー装置２００は、言語識別子と、身上情報とに応じて診療機関の候補を特定する。これは、例えば、言語、信教等の属性よっては、診療が制限される機関もありうるためである。診療機関には、あらゆる診療所、医院、病院等の医療機関が含まれる。そして、緊急情報連携サーバー装置２００は、診療機関の候補およびドナー希望の有無をスマートスピーカー１００、３００に送信して出力させる。
【００４６】
ここで、患者の生体情報を抽出するために、緊急情報連携サーバー装置２００は、発話を解析する。例えば、この解析には、言語に関する機械学習等を行って構築された学習済みモデルを用いることができるが、これに限られるものではなく、一般的に人工知能といわれる各種の演算処理により解析することも可能であるし、ルールベースエンジンを用いた演算処理により処理することも可能である。
【００４７】
そして、緊急情報連携サーバー装置２００は、診療機関の候補の出力を終えると、発話音声のテキスト情報を受け付けて、その診療機関の候補のいずれかの選択を受け付ける。緊急情報連携サーバー装置２００は、選択を受け付けた診療機関の救急室に設けられたスマートスピーカー３００に救急要請を行い、救急室に設けられたスマートスピーカー３００と、緊急車両に設けられたスマートスピーカー１００と、の間での音声通信を開始させる。
【００４８】
また、緊急情報連携サーバー装置２００は、発話音声のテキストとともにその発話者を受け付けて、発話者と発話内容とを対応付けて記憶することもできる。
【００４９】
図１に示すように、スマートスピーカー１００には、記憶部１１０と、制御部１２０と、通信部１３０と、音声入力部１４０と、音声出力部１５０と、が含まれる。記憶部１１０には、対話ＩＤ記憶部１１１が含まれる。
【００５０】
図２は、対話ＩＤ記憶部のデータ構造例を示す図である。対話ＩＤ記憶部１１１には、対話ＩＤ１１１Ａが含まれる。対話ＩＤ１１１Ａは、他の対話と区別可能な識別子である。対話とは、患者の救急要請に関する一連の発話をいう。
【００５１】
制御部１２０には、対話ＩＤ指定部１２１と、音声制御部１２２と、が含まれる。対話ＩＤ指定部１２１は、緊急情報連携サーバー装置２００に情報を送信する場合に、いずれかの対話に属している場合には対話ＩＤをキー情報としてともに送信する。対話ＩＤ指定部１２１は、いずれの対話にも属していない場合には、空情報を対話ＩＤとして送信する。
【００５２】
音声制御部１２２は、発話音声を受け付けると、音声認識サーバー装置１０へ発話音声を送信し、言語識別子および発話音声のテキストを受け取る。また、音声制御部１２２は、緊急情報連携サーバー装置２００から音声出力を指示されると、当該指示に従って音声出力部１５０から音声を出力する。例えば、問診音声の出力を所定の言語で出力するよう指示されると、スマートスピーカー１００等の付近にいる職員等が聞き取れるように音声出力する。
【００５３】
通信部１３０は、ネットワーク５０を介して他の装置である緊急情報連携サーバー装置２００との通信を行う。
【００５４】
音声入力部１４０は、利用者からの音声入力を受け付ける。音声出力部１５０は、緊急情報連携サーバー装置２００から利用者への発生命令があると、音声出力を行う。出力される情報は、問診、診療機関の候補、生体情報や発話の履歴等の各種出力情報である。
【００５５】
なお、スマートスピーカー３００は、スマートスピーカー１００と略同様の構成を備える。
【００５６】
緊急情報連携サーバー装置２００には、記憶部２１０と、制御部２２０と、通信部２３０と、が含まれる。
【００５７】
記憶部２１０には、多言語問診記憶部２１１と、発話履歴記憶部２１２と、医療行為制限記憶部２１３と、診療可能機関記憶部２１４と、利用者声紋記憶部２１５と、身上情報記憶部２１６と、が含まれる。
【００５８】
図３は、多言語問診記憶部のデータ構造例を示す図である。多言語問診記憶部２１１には、言語識別子２１１Ａと、質問番号２１１Ｂと、問診内容２１１Ｃと、音声２１１Ｄと、が含まれる。
【００５９】
言語識別子２１１Ａは、言語を他の言語と区別する識別子であり、予め定められたコード等であってよい。質問番号２１１Ｂは、言語によらず問診する内容を識別可能な番号である。問診内容２１１Ｃは、質問番号２１１Ｂで特定される質問により特定する属性を示す情報である。音声２１１Ｄは、問診内容２１１Ｃで特定される属性を言語識別子２１１Ａで特定される言語において質問する定型の質問文の音声情報である。
【００６０】
図４は、発話履歴記憶部のデータ構造例を示す図である。発話履歴記憶部２１２には、対話ＩＤ２１２Ａと、発話者２１２Ｂと、発話時刻２１２Ｃと、発話内容２１２Ｄと、が含まれる。
【００６１】
対話ＩＤ２１２Ａは、対話を特定するキー情報である。発話者２１２Ｂは、発言を行った発話者を特定する利用者ＩＤの情報であり、通常は予め声紋を登録された救急隊員や病院の医療従事者が発話者となるが、声紋の登録がなされていなくとも匿名の発話者として一時的な利用者ＩＤが割り振られるものであってもよい。
【００６２】
発話時刻２１２Ｃは、発言が行われた時刻を特定する情報である。例えば、発話時刻２１２Ｃは、ＹＹＹＹ／ＭＭ／ＤＤ  ｈｈ：ｍｍ等の所定の形式で示される時刻情報である。発話内容２１２Ｄは、テキスト化された発話音声の記録である。なお、この発話内容２１２Ｄに格納されるテキストは、発話された言語を用いたテキストである。例えば、中国語（普通話）で発話された場合には、中国語表記（簡体字表記あるいは繁体字）によるテキストが発話内容２１２Ｄに格納される。
【００６３】
図５は、医療行為制限記憶部のデータ構造例を示す図である。医療行為制限記憶部２１３には、制限ＩＤ２１３Ａと、制限に該当する属性２１３Ｂと、制限される医療行為２１３Ｃと、が含まれる。
【００６４】
制限ＩＤ２１３Ａは、医療行為制限を他の医療行為制限から区別する情報である。制限に該当する属性２１３Ｂは、制限ＩＤ２１３Ａにより特定される医療行為制限が課される身上情報の属性値である。例えば、患者の国籍が「無国籍」である場合に特定の医療行為の制限が課される場合には、「無国籍」が属性値となる。制限される医療行為２１３Ｃは、制限ＩＤ２１３Ａにより特定される医療行為（例えば、輸血行為等）を特定する情報である。
【００６５】
図６は、診療可能機関記憶部のデータ構造例を示す図である。診療可能機関記憶部２１４には、医療機関ＩＤ２１４Ａと、診療可能属性（限定）２１４Ｂと、診療不可能属性２１４Ｃと、が含まれる。
【００６６】
医療機関ＩＤ２１４Ａは、医療機関を他の医療機関から識別する情報である。診療可能属性（限定）２１４Ｂは、医療機関ＩＤ２１４Ａで特定される医療機関が診療可能な属性を限定的に指定する情報である。ここで、限定的とは、指定された属性を備える患者のみが、他の要件を満たせば診療を受けることができるという意味である。例えば、診療可能属性（限定）２１４Ｂに、「日本国籍を有する者」との情報が含まれる場合には、日本国籍を有さない者は診療を受けられず、日本国籍を有する者であって診療不可能属性を備えない者のみが診療を受けられる。
【００６７】
診療不可能属性２１４Ｃは、医療機関ＩＤ２１４Ａで特定される医療機関が診療不可能な属性を指定する情報である。すなわち、指定された属性を備える患者は、診療を受けることができないということを示す情報である。例えば、診療不可能属性２１４Ｃに「特定の宗教」との情報が含まれる場合には、当該特定の宗教を信仰する者は、診療可能属性（限定）を満たす者であっても診療を受けられない。
【００６８】
図７は、利用者声紋情報記憶部のデータ構造例を示す図である。利用者声紋記憶部２１５には、利用者ＩＤ２１５Ａと、氏名２１５Ｂと、生年月日２１５Ｃと、性別２１５Ｄと、声紋情報２１５Ｅと、が含まれる。利用者ＩＤ２１５Ａは、利用者すなわち医療関係者または患者の識別子である。氏名２１５Ｂは、利用者ＩＤ２１５Ａで特定される利用者の氏名を特定する情報である。生年月日２１５Ｃは、利用者ＩＤ２１５Ａで特定される利用者の生年月日を特定する情報である。性別２１５Ｄは、利用者ＩＤ２１５Ａで特定される利用者の性別を特定する情報である。声紋情報２１５Ｅは、利用者ＩＤ２１５Ａで特定される利用者の声紋を特定する情報である。
【００６９】
図８は、身上情報記憶部のデータ構造例を示す図である。身上情報記憶部２１６には、患者を特定する患者氏名２１６Ａ、患者性別２１６Ｂ、患者年齢２１６Ｃ、脈拍２１６Ｄ、主訴２１６Ｅ、処置２１６Ｆ、信教２１６Ｇ、国籍２１６Ｈ、対話ＩＤ２１６Ｊが含まれる。上述の例では、患者性別２１６Ｂ、患者年齢２１６Ｃ、脈拍２１６Ｄ、主訴２１６Ｅ、処置２１６Ｆが患者の生体情報に該当する。他にも、信教２１６Ｇが精神的情報に該当し、患者氏名２１６Ａと国籍２１６Ｈとが文化的情報に該当する。その他に、通常使用言語、第一言語等の言語的情報が身上情報には含まれうる。
【００７０】
患者氏名２１６Ａは、患者の指名であり、患者性別２１６Ｂは、患者の性別であり、患者年齢２１６Ｃは、患者の年齢である。これらの情報の組み合わせにより、特定の個人を特定しうる情報といえる。脈拍２１６Ｄは、患者の生体情報の一つである脈拍の計測値である。主訴２１６Ｅは、患者が訴える主たる症状である。処置２１６Ｆは、患者に対して行った処置を自然言語で説明する情報である。信教２１６Ｇは、患者が信仰する宗教あるいは思想・信条を特定する情報である。国籍２１６Ｈは、患者が有する国籍を特定する情報である。対話ＩＤ２１６Ｊは、患者の救急出動時の対話を特定するキー情報である。
【００７１】
制御部２２０には、症状情報作成部２２１と、時系列会話処理部２２２と、出力作成部２２３と、利用者特定部２２４と、治療制限特定部２２５と、診療機関選定部２２６と、が含まれる。
【００７２】
症状情報作成部２２１は、発話内容に含まれる情報を用いて、患者の症状に関する情報を所定の項目ごとに整理して身上情報記憶部２１６に格納する。この症状情報作成部２２１は、特にカルテ等の医学用語に関する機械学習等を行って構築された学習済みモデルにより実現することができる。しかし、これに限られるものではなく、一般的に人工知能といわれる各種の演算処理により解析することも可能であるし、ルールベースエンジンを用いた演算処理により処理することも可能である。
【００７３】
時系列会話処理部２２２は、テキスト化された発話内容を、発話がなされた対話と、発話者と、発話時刻と、に対応付けて発話履歴記憶部２１２に格納する。
【００７４】
出力作成部２２３は、対話ごとに、テキスト化された発話内容を、発話履歴記憶部２１２から発話者と、発話時刻と、に対応付けて読み出し、所定のデザインの出力画面情報を構成してスマートスピーカー１００あるいは３００等に送信する。ただし、スマートスピーカー１００あるいは３００等にディスプレイが設けられていない場合には、この限りではない。
【００７５】
利用者特定部２２４は、発話の特徴から声紋を抽出し、利用者声紋記憶部２１５を参照して声紋の一致度合いから推定して利用者を特定する。
【００７６】
治療制限特定部２２５は、患者から発話された言語および患者の身上情報に応じた治療制限を特定する。具体的には、治療制限特定部２２５は、言語識別子と、患者の身上情報すなわち身上情報記憶部２１６に格納された性別、年齢、信教、国籍の情報を用いて、医療行為制限記憶部２１３の制限に該当する属性２１３Ｂとの一致を判定し、一致する属性がある場合にはその制限される医療行為２１３Ｃを抽出し治療制限として特定する。
【００７７】
診療機関選定部２２６は、身上情報と、患者から発話された言語と、を用いて、診療可能な機関を選定する。具体的には、診療機関選定部２２６は、診療可能機関記憶部２１４を参照して、患者が診療可能属性（限定）２１４Ｂに該当する属性を有するか、診療不可能属性２１４Ｃに該当しないかのいずれかである場合に、当該診療機関を診療可能と選定する。そして、選定した診療機関が複数存在する場合には、診療機関選定部２２６は、その診療機関を搬送先の候補としてスマートスピーカー１００に出力させる。
【００７８】
通信部２３０は、ネットワーク５０を介して他の装置であるスマートスピーカー１００あるいは３００との通信を行う。
【００７９】
スマートスピーカー３００は、基本的にスマートスピーカー１００と同様の構成を備える。すなわち、スマートスピーカー３００は、記憶部３１０と、制御部３２０と、通信部３３０と、音声入力部３４０と、音声出力部３５０と、を備える。また、記憶部３１０には、対話ＩＤ記憶部３１１が含まれ、制御部３２０には、対話ＩＤ指定部３２１と、音声制御部３２２と、が含まれる。
【００８０】
図９は、スマートスピーカーのハードウェア構成例を示す図である。スマートスピーカー１００および３００は、いわゆる処理能力を備えたスピーカー装置、パーソナルコンピュータ、スマートフォンあるいはタブレット端末の筐体により実現されるハードウェア構成を備える。スマートスピーカー１００あるいは３００は、演算装置１０１と、主記憶装置１０２と、補助記憶装置１０３と、音声入力装置１０４と、音声出力装置１０５と、表示装置１０６と、通信装置１０７と、各装置をつなぐバス１０８と、を備える。また他に、スマートスピーカー１００あるいは３００は、タッチパネルやディスプレイ等の入出力装置を備えるものであってもよい。
【００８１】
演算装置１０１は、例えばＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）などの演算装置である。
【００８２】
主記憶装置１０２は、例えばＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）などのメモリ装置である。
【００８３】
補助記憶装置１０３は、デジタル情報を記憶可能な、いわゆるハードディスク（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）やＳＳＤ（Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｒｉｖｅ）あるいはフラッシュメモリなどの不揮発性記憶装置である。
【００８４】
音声入力装置１０４は、マイクロフォン等の集音装置である。音声出力装置１０５は、スピーカー等の発音装置である。表示装置１０６は、液晶や有機ＥＬ（Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ）等のディスプレイ装置である。通信装置１０７は、ネットワークインターフェースカード（ＮＩＣ）等である。
【００８５】
上記したスマートスピーカー１００あるいは３００の対話ＩＤ指定部１２１と、音声制御部１２２とは、演算装置１０１に処理を行わせるプログラムによって実現される。このプログラムは、主記憶装置１０２、補助記憶装置１０３または図示しないＲＯＭ装置内に記憶され、実行にあたって主記憶装置１０２上にロードされ、演算装置１０１により実行される。
【００８６】
また、スマートスピーカー１００あるいは３００の記憶部１１０は、主記憶装置１０２及び補助記憶装置１０３により実現される。また、通信部１３０、音声入力部１４０および音声出力部１５０は、通信装置１０７音声入力装置１０４、音声出力装置１０５のそれぞれにより実現される。以上が、スマートスピーカー１００あるいは３００のハードウェア構成例である。
【００８７】
スマートスピーカー１００あるいは３００の構成は、処理内容に応じて、さらに多くの構成要素に分類することもできる。また、１つの構成要素がさらに多くの処理を実行するように分類することもできる。
【００８８】
また、各制御部（対話ＩＤ指定部１２１と、音声制御部１２２）は、それぞれの機能を実現する専用のハードウェア（ＡＳＩＣ、ＧＰＵなど）により構築されてもよい。また、各制御部の処理が一つのハードウェアで実行されてもよいし、複数のハードウェアで実行されてもよい。
【００８９】
図１０は、緊急情報連携サーバー装置２００のハードウェア構成例を示す図である。緊急情報連携サーバー装置２００は、いわゆるワークステーション、パーソナルコンピュータ、スマートフォンあるいはタブレット端末の筐体により実現されるハードウェア構成を備える。緊急情報連携サーバー装置２００は、演算装置２０１と、主記憶装置２０２と、補助記憶装置２０３と、通信装置２０４と、各装置をつなぐバス２０５と、を備える。通信装置２０４は、ネットワーク５０を介して他の装置であるスマートスピーカー１００および３００と通信する。
【００９０】
演算装置２０１は、例えばＣＰＵなどの演算装置であり、主記憶装置２０２は、例えばＲＡＭなどのメモリ装置である。また、補助記憶装置２０３は、デジタル情報を記憶可能な、いわゆるハードディスクやＳＳＤあるいはフラッシュメモリなどの不揮発性記憶装置である。通信装置２０４は、ネットワークインターフェースカード（ＮＩＣ）等である。
【００９１】
上記した緊急情報連携サーバー装置２００の症状情報作成部２２１と、時系列会話処理部２２２と、出力作成部２２３と、利用者特定部２２４と、治療制限特定部２２５と、診療機関選定部２２６とは、演算装置２０１に処理を行わせるプログラムによって実現される。このプログラムは、主記憶装置２０２、補助記憶装置２０３または図示しないＲＯＭ装置内に記憶され、実行にあたって主記憶装置２０２上にロードされ、演算装置２０１により実行される。
【００９２】
また、緊急情報連携サーバー装置２００の記憶部２１０は、主記憶装置２０２及び補助記憶装置２０３により実現される。また、通信部２３０は、通信装置２０４により実現される。以上が、緊急情報連携サーバー装置２００のハードウェア構成例である。
【００９３】
緊急情報連携サーバー装置２００の構成は、処理内容に応じて、さらに多くの構成要素に分類することもできる。また、１つの構成要素がさらに多くの処理を実行するように分類することもできる。
【００９４】
次に、本実施形態における緊急情報連携システム１の動作を、図を用いて説明する。
【００９５】
図１１は、緊急搬送時処理（自動問診まで）のフローの例を示す図である。緊急搬送時処理（自動問診まで）は、緊急車両に搭載されたスマートスピーカー１００からの開始指示に応じて起動される。
【００９６】
まず、音声制御部１２２は、救急隊員等の職員の発声を受け付ける（ステップＳ００１）。そして、音声制御部１２２は、発声を受け付けながら、音声認識サーバー装置１０へ発話音声を随時送信する。
【００９７】
音声認識サーバー装置１０は、救急隊員等の職員の発話音声を受け付けると、言語を判別する（ステップＳ００２）。具体的には、音声認識サーバー装置１０は、発話音声を学習済みモデル等による既存のアルゴリズムにより解析し、言語を特定する。そして、言語を識別する言語識別子をスマートスピーカー１００に送信する。
【００９８】
そして、音声認識サーバー装置１０は、受け付けた発話音声を適時に認識し、テキスト化してスマートスピーカー１００へ送信する（ステップＳ００３）。この処理についても、音声認識サーバー装置１０は、発話音声を学習済みモデル等による既存のアルゴリズムにより解析して実現する。この処理において、音声認識サーバー装置１０は、声紋を用いて発話者を特定するようにしてもよい。
【００９９】
そして、スマートスピーカー１００は、救急隊員等の職員の発話が終了すると、自動問診を緊急情報連携サーバー装置２００に依頼する（ステップＳ００４）。この際、スマートスピーカー１００の音声制御部１２２は、ステップＳ００３にて受け取った発話のテキストと、ステップＳ００２にて受け取った言語識別子と、発話者の声紋を特定する情報とを、緊急情報連携サーバー装置２００に送信する。
【０１００】
緊急情報連携サーバー装置２００の時系列会話処理部２２２は、時系列に会話を記録する（ステップＳ００５）。具体的には、時系列会話処理部２２２は、ステップＳ００４で受信した発話テキストと、言語識別子とを、それぞれ発話履歴記憶部２１２の発話内容２１２Ｄに対応付けて記憶させる。また、時系列会話処理部２２２は、処理時点を特定する時刻情報を、発話時刻２１２Ｃに記憶させる。また、利用者特定部２２４は、声紋から発話者を特定する。
【０１０１】
そして、症状情報作成部２２１は、患者の身上情報を作成する（ステップＳ００６）。具体的には、症状情報作成部２２１は、ステップＳ００５で記録した発話テキストを、学習済みモデルを用いて解析して、身上情報記憶部２１６に設定された項目ごとにその値を特定して身上情報記憶部２１６に格納する。例えば、症状情報作成部２２１は、患者氏名、患者性別、患者年齢、脈拍、主訴、処置、信教、国籍等の情報を発話テキストから抽出して身上情報記憶部２１６に格納するとともに、対話ＩＤ２１６Ｊに対話ＩＤを格納する。
【０１０２】
そして、症状情報作成部２２１は、身上情報記憶部２１６に設定された項目のうち不足する項目について特定する（ステップＳ００７）。
【０１０３】
そして、症状情報作成部２２１は、不足する項目について問診を行う（ステップＳ００８）。具体的には、症状情報作成部２２１は、ステップＳ００７において特定した身上情報記憶部２１６に設定された項目のうち不足する項目を質問するために、多言語問診記憶部２１１を参照して、問診内容２１１Ｃが当該質問項目にあたる質問番号２１１Ｂを特定する。そして、ステップＳ００４で受信した言語識別子に応じた言語識別子２１１Ａを特定し、音声２１１Ｄを特定して問診音声としてスマートスピーカー１００へ送信する。
【０１０４】
そして、音声制御部１２２は、問診音声を出力する（ステップＳ００９）。すなわち、音声制御部１２２は、音声出力部１５０を介して問診音声を発音させる。
【０１０５】
その後、音声制御部１２２は、患者の発声を受け付ける（ステップＳ０１０）。そして、音声制御部１２２は、発声を受け付けながら、音声認識サーバー装置１０へ発話音声を随時送信する。
【０１０６】
音声認識サーバー装置１０は、患者の発話音声を受け付けると、言語を判別する（ステップＳ０１１）。この処理は、ステップＳ００２と同様である。
【０１０７】
そして、音声認識サーバー装置１０は、受け付けた発話音声を適時に認識し、テキスト化してスマートスピーカー１００へ送信する（ステップＳ０１２）。この処理についても、ステップＳ００３と同様である。
【０１０８】
そして、スマートスピーカー１００は、患者の発話が終了すると、回答を緊急情報連携サーバー装置２００に送信する（ステップＳ０１３）。この際、スマートスピーカー１００の音声制御部１２２は、ステップＳ０１２にて受け取った発話のテキストを、緊急情報連携サーバー装置２００に送信する。
【０１０９】
そして、緊急情報連携サーバー装置２００の時系列会話処理部２２２は、時系列に患者の会話を記録する（ステップＳ０１４）。具体的には、時系列会話処理部２２２は、ステップＳ０１３で受信した発話テキストを発話履歴記憶部２１２の発話内容２１２Ｄに対応付けて記憶させる。また、処理時点を特定する時刻情報を、発話時刻２１２Ｃに記憶させる。また、利用者特定部２２４は、患者の声紋から発話者を特定する。
【０１１０】
そして、症状情報作成部２２１は、身上情報を作成する（ステップＳ０１５）。具体的には、症状情報作成部２２１は、ステップＳ０１４で記録した発話テキストを、学習済みモデルを用いて解析して、身上情報記憶部２１６に設定された項目ごとにその値を特定して身上情報記憶部２１６に格納する。具体的には、症状情報作成部２２１は、患者氏名、患者性別、患者年齢、脈拍、主訴、処置、信教、国籍等の情報を発話テキストから抽出して身上情報記憶部２１６に格納するとともに、対話ＩＤ２１６Ｊに対話ＩＤを格納する。
【０１１１】
そして、症状情報作成部２２１は、身上情報記憶部２１６に設定された項目のうち不足する項目の有無を判定する（ステップＳ０１６）。不足する項目が無ければ（ステップＳ０１６にて「無」の場合）、症状情報作成部２２１は、緊急搬送時処理（自動問診まで）を終了させる。
【０１１２】
不足する項目があれば（ステップＳ０１６にて「有」の場合）、症状情報作成部２２１は、制御をステップＳ００７に戻す。、
【０１１３】
以上が、緊急搬送時処理（自動問診まで）のフローの例である。緊急搬送時処理（自動問診まで）のフローによれば、スマートスピーカー１００が音声入力を受け付けて、緊急情報連携サーバー装置２００上で対話履歴を作成し、発話内容から自動的に患者の身上情報を作成することができる。これにより、身上情報を自動収集し、不足する項目についてシステムが患者の言語に応じて問診を自動で行い、身上情報を収集することができる。
【０１１４】
図１２は、緊急搬送時処理（搬送先選定）のフローの例を示す図である。緊急搬送時処理（搬送先選定）は、緊急車両に搭載されたスマートスピーカー１００からの開始指示に応じて起動される。
【０１１５】
まず、音声制御部１２２は、発声を受け付ける（ステップＳ１０１）。そして、音声制御部１２２は、発声を受け付けながら、音声認識サーバー装置１０へ発話音声を随時送信する。
【０１１６】
音声認識サーバー装置１０は、発話音声を受け付けると、言語を判別する（ステップＳ１０２）。具体的には、音声認識サーバー装置１０は、発話音声を学習済みモデル等による既存のアルゴリズムにより解析し、言語を特定する。そして、言語を識別する言語識別子をスマートスピーカー１００に送信する。
【０１１７】
そして、音声認識サーバー装置１０は、受け付けた発話音声を適時に認識し、テキスト化してスマートスピーカー１００へ送信する（ステップＳ１０３）。この処理についても、音声認識サーバー装置１０は、発話音声を学習済みモデル等による既存のアルゴリズムにより解析して実現する。
【０１１８】
そして、スマートスピーカー１００は、発話が終了すると、搬送先選定依頼を緊急情報連携サーバー装置２００に依頼する（ステップＳ１０４）。この際、スマートスピーカー１００の音声制御部１２２は、ステップＳ１０３にて受け取った発話のテキストとステップＳ１０２にて受け取った言語識別子と、を、緊急情報連携サーバー装置２００に送信する。
【０１１９】
緊急情報連携サーバー装置２００の時系列会話処理部２２２は、時系列に会話を記録する（ステップＳ１０５）。具体的には、時系列会話処理部２２２は、ステップＳ１０４で受信した発話テキストと、言語識別子とを、それぞれ発話履歴記憶部２１２の発話内容２１２Ｄに対応付けて記憶させる。また、処理時点を特定する時刻情報を、発話時刻２１２Ｃに記憶させる。
【０１２０】
そして、症状情報作成部２２１は、身上情報を作成する（ステップＳ１０６）。具体的には、症状情報作成部２２１は、ステップＳ１０５で記録した発話テキストを、学習済みモデルを用いて解析して、身上情報記憶部２１６に設定された項目ごとにその値を特定して身上情報記憶部２１６に格納する。例えば、症状情報作成部２２１は、患者氏名、患者性別、患者年齢、脈拍、主訴、処置、信教、国籍等の情報を発話テキストから抽出して身上情報記憶部２１６に格納するとともに、対話ＩＤ２１６Ｊに対話ＩＤを格納する。
【０１２１】
そして、治療制限特定部２２５は、身上情報記憶部２１６に設定された項目およびステップＳ１０４にて受信した言語識別子を用いて、医療行為制限を特定する（ステップＳ１０７）。具体的には、治療制限特定部２２５は、言語識別子と、患者の身上情報すなわち身上情報記憶部２１６に格納された性別、年齢、信教、国籍の情報を用いて、医療行為制限記憶部２１３の制限に該当する属性２１３Ｂとの一致を判定し、一致する属性がある場合にはその制限される医療行為２１３Ｃを抽出し治療制限として特定する。そして、治療制限を制限注意音声としてスマートスピーカー１００へ送信する。
【０１２２】
そして、音声制御部１２２は、制限注意音声を出力する（ステップＳ１０８）。すなわち、音声制御部１２２は、音声出力部１５０を介して治療制限の行為を発音させる。この治療制限の行為の発音には、救急隊員等の職員が使用する言語を用いる。救急隊員等の職員が治療を行うため、治療制限を理解する必要があるためである。
【０１２３】
そして、診療機関選定部２２６は、診療可能機関記憶部２１４を参照して、患者が診療可能属性（限定）２１４Ｂに該当する属性を有するか、診療不可能属性２１４Ｃに該当しないかのいずれかである場合に、当該診療機関を診療可能と選定する（ステップＳ１０９）。そして、選定した診療機関が複数存在する場合には、診療機関選定部２２６は、その診療機関を搬送先の候補である診療機関名音声としてスマートスピーカー１００へ送信する。
【０１２４】
そして、音声制御部１２２は、診療機関名音声を出力する（ステップＳ１１０）。すなわち、音声制御部１２２は、音声出力部１５０を介して診療機関名の音声を発音させる。
【０１２５】
そして、音声制御部１２２は、発声を受け付ける（ステップＳ１１１）。そして、音声制御部１２２は、発声を受け付けながら、音声認識サーバー装置１０へ発話音声を随時送信する。
【０１２６】
音声認識サーバー装置１０は、発話音声を受け付けると、言語を判別する（ステップＳ１１２）。具体的には、音声認識サーバー装置１０は、発話音声を学習済みモデル等による既存のアルゴリズムにより解析し、言語を特定する。そして、言語を識別する言語識別子をスマートスピーカー１００に送信する。
【０１２７】
そして、音声認識サーバー装置１０は、受け付けた発話音声を適時に認識し、テキスト化してスマートスピーカー１００へ送信する（ステップＳ１１３）。この処理についても、音声認識サーバー装置１０は、発話音声を学習済みモデル等による既存のアルゴリズムにより解析して実現する。
【０１２８】
そして、スマートスピーカー１００は、発話が終了すると、希望機関を緊急情報連携サーバー装置２００に回答する（ステップＳ１１４）。この際、スマートスピーカー１００の音声制御部１２２は、ステップＳ１１３にて受け取った発話のテキストを、緊急情報連携サーバー装置２００に送信する。
【０１２９】
緊急情報連携サーバー装置２００の時系列会話処理部２２２は、時系列に会話を記録する（ステップＳ１１５）。具体的には、時系列会話処理部２２２は、ステップＳ１１４で受信した発話テキストを、それぞれ発話履歴記憶部２１２の発話内容２１２Ｄに対応付けて記憶させる。また、処理時点を特定する時刻情報を、発話時刻２１２Ｃに記憶させる。
【０１３０】
そして、時系列会話処理部２２２は、希望診療機関との通信を開始させる（ステップＳ１１６）。具体的には、ステップＳ１１５において受け付けた希望機関に配置されたスマートスピーカー３００に症状情報と対話ＩＤとを送信して通話応答の準備をさせる（ステップＳ１１７）。そして、通話応答の準備が完了すると、スマートスピーカー１００にスマートスピーカー３００との通話応答を開始させる。例えば、ＶｏＩＰ（Ｖｏｉｃｅ  ｏｖｅｒ  Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）による通話を開始させる。
【０１３１】
以上が、緊急搬送時処理（搬送先選定）のフローの例である。緊急搬送時処理（搬送先選定）のフローによれば、スマートスピーカー１００が音声入力を受け付けて、緊急情報連携サーバー装置２００上で対話履歴を作成し、医療行為の制限をスマートスピーカー１００から出力することができる。また、診療機関の候補を患者に応じてフィルタリングして候補をスマートスピーカー１００から出力させ、希望診療機関を受け付けることができる。さらには、希望診療機関のスマートスピーカー３００と通話を開始させることができる。
【０１３２】
図１３は、出力画面の例を示す図である。出力画面４００は、発話履歴記憶部２１２の情報が更新されると、更新された対話に属するスマートスピーカー１００および３００の全てに対して緊急情報連携サーバー装置２００から送信される。ただし、ディスプレイ装置を備えないスマートスピーカーについては、この限りではない。
【０１３３】
出力画面４００には、発話者を示すアイコン４０１と、発話内容のテキスト情報４０２と、発話時刻４０３と、が発話時刻４０３の時系列に垂直方向へ並べて表示される。すなわち、画面上方になるほど発話時刻が古い発言となるよう表示される。これにより、発話の経緯を対話ＩＤが共通する端末を用いて参照することができるようになり、誰が何をどういう順序や経緯で発言したのか、という履歴を知ることができるようになる。これは、例えば医療従事者が適切な指示を行ったか否か、あるいは救急隊員が必要な情報を適切に医療従事者へ伝えたか、また言語的不理解によりうまく解釈できなかった患者の属性について確認する客観的な情報となりうることを示す。
【０１３４】
なお、発話内容のテキスト情報４０２は、発話された言語識別子と、その翻訳テキスト（日本の場合は、日本語翻訳）と、が表示される。すなわち、患者が自動対話による問診音声に応じて中国語で身上情報を発話した場合、言語識別子である「ＣＮ」と、発話の日本語訳（正確には、中国語のテキストを日本語に訳したテキスト）が表示される。これにより、患者の発話を直接理解できなかった救急隊員であっても、その内容を理解することができるようになる。
【０１３５】
以上が、第一の実施形態に係る緊急情報連携システム１である。このシステムによれば、多様な言語・文化を持ちうる患者に対し、救急隊員を支援することができる。
【０１３６】
本発明は、上記の実施形態に制限されない。上記の実施形態は、本発明の技術的思想の範囲内で様々な変形が可能である。例えば、上記の実施形態においては、発話は音声認識サーバー装置１０を介してテキスト化されているが、これに限られない。例えば、緊急車両に搭載されたスマートスピーカー１００が発話を音声認識してテキスト化し、また発話者を特定するものであってもよい。このようにした場合、激甚災害時等、通信帯域が不足する地域での緊急出動の場面等においても、よりよい応答性を得ることができる。
【０１３７】
このような例を、第二の実施形態として図１４〜図１６を用いて説明する。第二の実施形態に係る緊急情報連携システム１´は、基本的に第一の実施形態に係る緊急情報連携システム１と略同様であるが、一部において異なる。この相違点を中心に、説明する。
【０１３８】
図１４は、緊急情報連携システムの構成図である。緊急情報連携システム１´では、緊急情報連携サーバー装置２００´の記憶部２１０´には、利用者声紋記憶部１１２が不要である。また、制御部２２０´には、利用者特定部２２４が不要である。
【０１３９】
スマートスピーカー１００´の記憶部１１０´には、利用者声紋記憶部１１２が含まれる。この利用者声紋記憶部１１２は、第一の実施形態に示した利用者声紋記憶部２１５と同様のデータ構造を備える。
【０１４０】
また、制御部１２０´には、音声認識部１２３と、利用者特定部１２４とが含まれる。音声認識部１２３は、発話音声を音声制御部１２２から受け付けて、発話音声の言語を識別する言語識別子を特定し、該言語として音声認識処理を行った結果得られるテキストデータを生成する。そして、音声認識部１２３は、言語識別子とテキストデータを音声制御部１２２へ出力する。利用者特定部１２４は、発話の特徴から声紋を抽出し、利用者声紋記憶部１１２を参照して声紋の一致度合いから推定して利用者を特定する。
【０１４１】
スマートスピーカー３００´についても、スマートスピーカー１００´と同様の構成を備える。
【０１４２】
図１５は、緊急搬送時処理（自動問診まで）のフローの例を示す図である。緊急搬送時処理（自動問診まで）は、基本的に第一の実施形態に係る緊急搬送処理（自動問診まで）と同様であるが、一部相違がある。相違点を中心に、以下に説明する。
【０１４３】
音声認識部１２３は、発話音声を受け付けると、言語を判別する（ステップＳ００２´）。具体的には、音声認識部１２３は、発話音声を学習済みモデル等による既存のアルゴリズムにより解析し、言語を特定する。
【０１４４】
そして、音声認識部１２３は、受け付けた発話音声を適時に認識し、テキスト化する（ステップＳ００３´）。この処理についても、音声認識部１２３は、発話音声を学習済みモデル等による既存のアルゴリズムにより解析して実現する。
【０１４５】
そして、その後、音声制御部１２２が、ステップＳ００９において問診音声を出力すると、音声制御部１２２が、発声を受け付け（ステップＳ０１０）、音声認識部１２３は、発話音声を受け付けると、言語を判別する（ステップＳ０１１´）。この処理は、ステップＳ００２´と同様である。
【０１４６】
そして、音声認識部１２３は、受け付けた発話音声を適時に認識し、テキスト化する（ステップＳ０１２´）。この処理についても、ステップＳ００３´と同様である。
【０１４７】
以上が、緊急搬送時処理（自動問診まで）のフローの例である。緊急搬送時処理（自動問診まで）のフローによれば、スマートスピーカー１００´が音声入力を受け付けて、緊急情報連携サーバー装置２００上で対話履歴を作成し、発話内容から自動的に身上情報を作成することができる。これにより、身上情報を自動収集し、不足する項目についてシステムが患者の言語に応じて問診を自動で行い、身上情報を収集することができる。
【０１４８】
図１６は、緊急搬送時処理（搬送先選定）のフローの例を示す図である。緊急搬送時処理（搬送先選定）は、基本的に第一の実施形態に係る緊急搬送時処理（搬送先選定）と同様であるが、一部相違がある。相違点を中心に、以下に説明する。
【０１４９】
音声認識部１２３は、発話音声を受け付けると、言語を判別する（ステップＳ１０２´）。具体的には、音声認識部１２３は、発話音声を学習済みモデル等による既存のアルゴリズムにより解析し、言語を特定する。
【０１５０】
そして、音声認識部１２３は、受け付けた発話音声を適時に認識し、テキスト化する（ステップＳ１０３´）。この処理についても、音声認識部１２３は、発話音声を学習済みモデル等による既存のアルゴリズムにより解析して実現する。
【０１５１】
そして、その後、音声制御部１２２が、ステップＳ１１０において診療機関名音声を出力すると、音声制御部１２２が、発声を受け付け（ステップＳ１１０）、音声認識部１２３は、発話音声を受け付けると、言語を判別する（ステップＳ１１２´）。この処理は、ステップＳ１０２と同様である。
【０１５２】
そして、音声認識部１２３は、受け付けた発話音声を適時に認識し、テキスト化する（ステップＳ１１３´）。この処理についても、ステップＳ１０３´と同様である。
【０１５３】
以上が、緊急搬送時処理（搬送先選定）のフローの例である。緊急搬送時処理（搬送先選定）のフローによれば、スマートスピーカー１００´が音声入力を受け付けて、緊急情報連携サーバー装置２００上で対話履歴を作成し、医療行為の制限をスマートスピーカー１００´から出力することができる。また、診療機関の候補を患者に応じてフィルタリングして候補をスマートスピーカー１００´から出力させ、希望診療機関を受け付けることができる。さらには、希望診療機関のスマートスピーカーと３００´と通話を開始させることができる。
【０１５４】
以上が、第二の実施形態に係る緊急情報連携システム１´である。このシステムによれば、音声認識の応答速度が速くなり、激甚災害時等、通信帯域が不足する地域での緊急出動の場面等においても、よりよい応答性を得ることができる。
【０１５５】
また、上記した実施形態の技術的要素は、単独で適用されてもよいし、プログラム部品とハードウェア部品のような複数の部分に分けられて適用されるようにしてもよい。
【０１５６】
また、上記したスマートスピーカー１００、１００´、３００、３００´については、これに限られず、ヘッドセットやハンズフリーマイク、スマートウォッチ等のウェアラブル端末あるいはスマートフォン、ドライブレコーダー、カーナビゲーション等の各種スマートデバイスにより実現するようにしてもよい。
【０１５７】
また、上記した発話の解析には、全て、学習済みモデルを適用してもよいし、キーワードの一致度合いに応じて尤度を算出することで意味を推定するようにしてもよいし、単に含まれる単語のルールベースで対応する項目の特定を行うようにしてもよい。または、上述のようにスマートスピーカー１００および３００が音声認識サーバー装置１０へネットワークを介して音声認識処理を委譲する場合、あるいはスマートスピーカー１００および３００が音声認識処理を行う場合、に限られず、緊急情報連携サーバー装置２００が音声認識サーバー装置１０へネットワークを介して音声認識処理を委譲するようにしてもよい。あるいは、緊急情報連携サーバー装置２００が音声認識処理を行うようにしてもよい。以上、本発明について、実施形態を中心に説明した。
【符号の説明】
【０１５８】
１・・・緊急情報連携システム、５０・・・ネットワーク、１００，３００・・・スマートスピーカー、１１０，３１０・・・記憶部、１１１，３１１・・・対話ＩＤ記憶部、１２０，３２０・・・制御部、１２１，３２１・・・対話ＩＤ指定部、１２２，３２２・・・音声制御部、１３０，３３０・・・通信部、１４０，３４０・・・音声入力部、１５０，３５０・・・音声出力部、２００・・・緊急情報連携サーバー装置、２１０・・・記憶部、２１１・・・多言語問診記憶部、２１２・・・発話履歴記憶部、２１３・・・医療行為制限記憶部、２１４・・・診療可能機関記憶部、２１５・・・利用者声紋記憶部、２１６・・・身上情報記憶部、２２０・・・制御部、２２１・・・症状情報作成部、２２２・・・時系列会話処理部、２２３・・・出力作成部、２２４・・・利用者特定部、２２５・・・治療制限特定部、２２６・・・診療機関選定部、２３０・・・通信部。
【図１】
2020144681.tif 000003
【図２】
2020144681.tif 000004
【図３】
2020144681.tif 000005
【図４】
2020144681.tif 000006
【図５】
2020144681.tif 000007
【図６】
2020144681.tif 000008
【図７】
2020144681.tif 000009
【図８】
2020144681.tif 000010
【図９】
2020144681.tif 000011
【図１０】
2020144681.tif 000012
【図１１】
2020144681.tif 000013
【図１２】
2020144681.tif 000014
【図１３】
2020144681.tif 000015
【図１４】
2020144681.tif 000016
【図１５】
2020144681.tif 000017
【図１６】
2020144681.tif 000018