(57)【要約】【課題】患者等の対象者の主訴に関する情報を確実に取得するとともに、対象者の身体の異常の兆候や症状の見落としを防止し、さらに、対象者の僅かな身体の異常や兆候でも見つけることを可能にする。【解決手段】会話記録システム６０の音声記録部６１は、複数の発話者の間で交わされる会話の音声情報を記録する。発話者特定部６４ａは、音声情報の分析等に基づいて個々の発話者を特定する。音声認識部６４ｂは、音声情報を、音声認識によって発話者ごとにテキストデータに変換する。対話文章作成部６４ｃは、発話者ごとのテキストデータを、複数の発話者による対話形式に並べ替えて、対話形式の文章データとする。データベース６２は、対話形式の文章データを、複数の発話者に含まれる診断等の対象者ごとの健康管理情報と対応付けて、外部からのアクセスに対して共有できるように保存する。【選択図】図６
2018206055.tif 000002
【特許請求の範囲】
【請求項１】
医療、介護または看護に従事する従事者と、医療による診断、介護または看護の対象となる対象者とを含む複数の発話者の間で交わされる会話の音声情報を記録する音声記録部と、
前記音声情報の分析または予め登録された発話者の音声データに基づいて、個々の発話者を特定する発話者特定部と、
前記音声情報を、音声認識によって個々の発話者ごとにテキストデータに変換する音声認識部と、
個々の発話者ごとの前記テキストデータを、複数の発話者による対話形式に並べ替えて、前記対話形式の文章データを作成する対話文章作成部と、
前記対話形式の文章データを、前記複数の発話者に含まれる前記対象者ごとの医療、介護または看護に関する健康管理情報と対応付けて、外部からのアクセスに対して共有できるように保存するデータベースとを備えていることを特徴とする会話記録システム。
【請求項２】
前記データベースは、前記対話形式の文章データを、前記会話の音声の記録日時の情報と併せて、前記記録日時が含まれる所定期間の前記健康管理情報と対応付けて保存することを特徴とする請求項１に記載の会話記録システム。
【請求項３】
前記データベースを管理するデータ管理部をさらに備え、
前記データベースは、前記対象者の診療に関する情報を電子的に記録した電子カルテをさらに保存しており、
前記データ管理部は、前記対話形式の文章データを、前記対象者の前記電子カルテの備考欄に貼り付けることを特徴とする請求項１または２に記載の会話記録システム。
【請求項４】
前記データ管理部は、前記対話形式の文章データのうち、前記対象者の文章データを、前記電子カルテの主訴欄に貼り付けることを特徴とする請求項３に記載の会話記録システム。
【請求項５】
前記データ管理部は、前記対象者の前記文章データに含まれる、予め登録された文言のデータを他と区別できるように強調して、前記対象者の文章データを前記主訴欄に貼り付けることを特徴とする請求項４に記載の会話記録システム。
【請求項６】
前記データ管理部は、前記対象者の前記文章データから、予め登録された文言のデータまたは前記文言を含む文章データを抽出して、前記対象者の前記文章データと併せて前記主訴欄に貼り付けることを特徴とする請求項４または５に記載の会話記録システム。
【請求項７】
前記予め登録された文言は、特定の症状を示す文言を含むことを特徴とする請求項５または６に記載の会話記録システム。
【請求項８】
前記データ管理部は、前記対象者の前記文章データに含まれる、体調に関して繰り返し登場する同じ言葉のデータを他と区別できるように強調して、前記対象者の文章データを前記主訴欄に貼り付けることを特徴とする請求項４から７のいずれかに記載の会話記録システム。
【請求項９】
前記データ管理部は、前記対象者の前記文章データから、体調に関して繰り返し登場する同じ言葉のデータを抽出して、前記対象者の前記文章データと併せて前記主訴欄に貼り付けることを特徴とする請求項４から８のいずれかに記載の会話記録システム。
【請求項１０】
前記データ管理部は、前記複数の発話者のいずれかの発話が終了してから、次に前記対象者の発話が開始するまでの時間、および前記対象者の発話時の声の調子のうち、少なくとも一方に関する情報を、前記主訴欄に貼り付けることを特徴とする請求項４から９のいずれかに記載の会話記録システム。
【請求項１１】
前記データ管理部は、前記対話形式の文章データのうち、前記従事者の文章データから、予め登録された文言のデータまたは前記文言を含む文章データを抽出して、前記電子カルテの評価欄に貼り付けることを特徴とする請求項３から１０のいずれかに記載の会話記録システム。
【請求項１２】
前記予め登録された文言は、病名または診断に関する文言を含むことを特徴とする請求項１１に記載の会話記録システム。
【請求項１３】
請求項１から１２のいずれかに記載の会話記録システムを含み、複数の前記対象者の生活を支援するケアサポートシステムであって、
各々の対象者の居室に設置されて、各々の対象者の状態を検知する検知ユニットと、
前記検知ユニットから出力される情報を管理する管理サーバーとを含み、
前記管理サーバーが、前記会話記録システムで構成されていることを特徴とするケアサポートシステム。
【請求項１４】
前記検知ユニットは、音声入力部をさらに備え、
前記音声記録部は、前記音声入力部にて入力された前記会話の音声を、前記音声情報として記録することを特徴とする請求項１３に記載のケアサポートシステム。
【請求項１５】
医療、介護または看護に従事する従事者と、医療による診断、介護または看護の対象となる対象者とを含む複数の発話者の間で交わされる会話の音声情報を記録する音声記録工程と、
前記音声情報の分析または予め登録された発話者の音声データに基づいて、個々の発話者を特定する発話者特定工程と、
前記音声情報を、音声認識によって個々の発話者ごとにテキストデータに変換するテキスト変換工程と、
個々の発話者ごとの前記テキストデータを、複数の発話者による対話形式に並べ替えて、前記対話形式の文章データを作成する対話文章作成工程と、
前記対話形式の文章データを、前記複数の発話者に含まれる前記対象者ごとの医療、介護または看護に関する健康管理情報と対応付けて、外部からのアクセスに対して共有できるようにデータベースに保存する保存工程とを含むことを特徴とする会話記録方法。
【請求項１６】
前記保存工程では、前記対話形式の文章データを、前記会話の音声の記録日時の情報と併せて、前記記録日時が含まれる所定期間の前記健康管理情報と対応付けて前記データベースに保存することを特徴とする請求項１５に記載の会話記録方法。
【請求項１７】
前記データベースが、前記対象者の診療に関する情報を電子的に記録した電子カルテをさらに保存している場合に、前記対話形式の文章データを、前記対象者の前記電子カルテの備考欄に貼り付ける対話文章貼付工程をさらに含むことを特徴とする請求項１５または１６に記載の会話記録方法。
【請求項１８】
前記対話形式の文章データのうち、前記対象者の文章データを、前記電子カルテの主訴欄に貼り付ける対象者文章貼付工程をさらに含むことを特徴とする請求項１７に記載の会話記録方法。
【請求項１９】
前記対象者文章貼付工程では、前記対象者の前記文章データに含まれる、予め登録された文言のデータを他と区別できるように強調して、前記対象者の文章データを前記主訴欄に貼り付けることを特徴とする請求項１８に記載の会話記録方法。
【請求項２０】
前記対象者文章貼付工程では、前記対象者の前記文章データから、予め登録された文言のデータまたは前記文言を含む文章データを抽出して、前記対象者の前記文章データと併せて前記主訴欄に貼り付けることを特徴とする請求項１８または１９に記載の会話記録方法。
【請求項２１】
前記予め登録された文言は、特定の症状を示す文言を含むことを特徴とする請求項１９または２０に記載の会話記録方法。
【請求項２２】
前記対象者文章貼付工程では、前記対象者の前記文章データに含まれる、体調に関して繰り返し登場する同じ言葉のデータを他と区別できるように強調して、前記対象者の文章データを前記主訴欄に貼り付けることを特徴とする請求項１８から２１のいずれかに記載の会話記録方法。
【請求項２３】
前記対象者文章貼付工程では、前記対象者の前記文章データから、体調に関して繰り返し登場する同じ言葉のデータを抽出して、前記対象者の前記文章データと併せて前記主訴欄に貼り付けることを特徴とする請求項１８から２２のいずれかに記載の会話記録方法。
【請求項２４】
前記対象者文章貼付工程では、前記複数の発話者のいずれかの発話が終了してから、次に前記対象者の発話が開始するまでの時間、および前記対象者の発話時の声の調子のうち、少なくとも一方に関する情報を、前記主訴欄に貼り付けることを特徴とする請求項１８から２３のいずれかに記載の会話記録方法。
【請求項２５】
前記対話形式の文章データのうち、前記従事者の文章データから、予め登録された文言のデータまたは前記文言を含む文章データを抽出して、前記電子カルテの評価欄に貼り付ける従事者文章貼付工程をさらに含むことを特徴とする請求項１７から２４のいずれかに記載の会話記録方法。
【請求項２６】
前記予め登録された文言は、病名または診断に関する文言を含むことを特徴とする請求項２５に記載の会話記録方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、医療、介護または看護に従事する従事者と、医療による診断、介護または看護の対象となる対象者との間で交わされる会話音声を記録する会話記録システムおよび会話記録方法と、上記会話記録システムを含むケアサポートシステムとに関するものである。
【背景技術】
【０００２】
従来から、患者の状態を把握するための問診を、音声認識技術を利用して行うシステムが提案されている。例えば特許文献１に開示されたシステムでは、「熱はありますか？」などの予め用意された質問項目と、「はい」、「いいえ」、「わかりません」などの予め用意された回答選択肢とを同時に表示手段（例えば液晶ディスプレイ）に表示し、患者が音声で発した回答選択肢を音声認識する。各回答選択肢を表示することで、患者を無意識のうちに、いずれかの回答選択肢を音声で発するように誘導できるため、上記回答選択肢にあるような特定の語彙に集中して音声認識を行うことが可能となる。これにより、認識対象の語彙の範囲が広い場合（例えば同音異義語が含まれる場合）に比べて、音声の認識率を向上させることが可能となる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−５４５６９号公報（請求項１、段落〔０００７〕〜〔００１３〕、〔００２５〕、〔００４８〕、図１〜図３等参照）
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところが、特許文献１のシステムでは、医療の問診における質問事項が予め決まっているため、予め用意された質問事項にない内容に関しては、何ら情報を取得することができない。したがって、例えば患者の主訴（訴える症状のうちで主要なもの）が、予め用意された質問事項にない場合、患者の主訴に関する情報を取得することができない（そもそも患者が症状を訴える機会がないのと同じ状態となる）。
【０００５】
また、例えば病院内や訪問医療では、医師が診療時に患者の主訴をその場で電子カルテに入力することが一般的に行われている。しかし、一日で多数の患者を診察する関係上、医師は患者が発する言葉全てを電子カルテに記録するわけではなく、優先順位の高い言葉や内容だけを電子カルテに記録する、いわゆる要約的な記録にならざるを得なかった。優先順位が低い言葉であっても、その言葉に病気の兆候や症状が現れている可能性があり、そのため、上記のような要約的な記録では、そのような病気の兆候や症状を見落とす可能性がある。
【０００６】
なお、以上では、患者の診察の現場を例に挙げて説明したが、介護や看護の現場においても、予め用意された質問事項や回答選択肢の表示によって発話を誘導したり、発話者（介護や看護の対象者）の発した言葉を要約的に記録する場合には、上記と同様の問題が起こり得る。
【０００７】
また、対象者が発した言葉を、他の情報（例えば日々の体温の情報を含む健康管理情報）を参照して注意深く（詳しく）分析したり、複数の担当者（例えば医師）で分析することにより、対象者の僅かな身体の異常の兆候や症状を捉えられる可能性がある。そのため、上記分析が可能となるシステムを構築することが望まれる。
【０００８】
本発明は、上記の問題点を解決するためになされたもので、その目的は、患者等の対象者の主訴に関する情報を確実に取得する（記録として残す）とともに、対象者の身体の異常の兆候や症状の見落としを防止し、さらに、対象者の僅かな身体の異常や兆候でも見つけることができる会話記録システム、会話記録方法およびケアサポートシステムに関するものである。
【課題を解決するための手段】
【０００９】
本発明の一側面に係る会話記録システムは、医療、介護または看護に従事する従事者と、医療による診断、介護または看護の対象となる対象者とを含む複数の発話者の間で交わされる会話の音声情報を記録する音声記録部と、前記音声情報の分析または予め登録された発話者の音声データに基づいて、個々の発話者を特定する発話者特定部と、前記音声情報を、音声認識によって個々の発話者ごとにテキストデータに変換する音声認識部と、個々の発話者ごとの前記テキストデータを、複数の発話者による対話形式に並べ替えて、前記対話形式の文章データを作成する対話文章作成部と、前記対話形式の文章データを、前記複数の発話者に含まれる前記対象者ごとの医療、介護または看護に関する健康管理情報と対応付けて、外部からのアクセスに対して共有できるように保存するデータベースとを備えている。
【００１０】
上記の構成によれば、医療等に従事する従事者と診断等の対象となる対象者とを含む複数の発話者の間で交わされる会話の音声情報（自由会話によるやりとり）が、最終的には対話形式の文章データに変換されて、データベースに保存されるため、会話の最初から最後までの情報をデータベースに残すことができる。これにより、会話音声に含まれる対象者の主訴の情報を、データベースの中に記録として確実に残すことができるとともに、要約的な記録を行う場合のように、情報の記録漏れがなく、対象者の身体の異常の兆候や症状の見落としを防止することができる。また、上記文章データは、対象者ごとの健康管理情報（対象者の健康を管理する上で必要な日々のバイタルデータ等の情報）と対応付けられて、外部からのアクセスに対して共有できるようにデータベースに保存されるため、従事者（例えば医師）が自分の端末からデータベースにアクセスして、上記文章データに含まれる言葉を、対象者の健康管理情報を参照して詳しく分析したり、複数の従事者が各自の端末からデータベースにアクセスして、複数人で分析することが可能となる。その結果、対象者の身体に僅かな異常の兆候や症状がある場合でも、それらを見つけることが可能となる。
【００１１】
本発明の他の側面に係る会話記録方法は、医療、介護または看護に従事する従事者と、医療による診断、介護または看護の対象となる対象者とを含む複数の発話者の間で交わされる会話の音声情報を記録する音声記録工程と、前記音声情報の分析または予め登録された発話者の音声データに基づいて、個々の発話者を特定する発話者特定工程と、前記音声情報を、音声認識によって個々の発話者ごとにテキストデータに変換するテキスト変換工程と、個々の発話者ごとの前記テキストデータを、複数の発話者による対話形式に並べ替えて、前記対話形式の文章データを作成する対話文章作成工程と、前記対話形式の文章データを、前記複数の発話者に含まれる前記対象者ごとの医療、介護または看護に関する健康管理情報と対応付けて、外部からのアクセスに対して共有できるようにデータベースに保存する保存工程とを含む。これにより、上記した会話記録システムの構成による効果と同様の効果を得ることができる。
【００１２】
上記会話記録システムにおいて、前記データベースは、前記対話形式の文章データを、前記会話の音声の記録日時の情報と併せて、前記記録日時が含まれる所定期間の前記健康管理情報と対応付けて保存してもよい。また、上記会話記録方法において、前記保存工程では、前記対話形式の文章データを、前記会話の音声の記録日時の情報と併せて、前記記録日時が含まれる所定期間の前記健康管理情報と対応付けて前記データベースに保存してもよい。この場合、医師などの従事者は、自分の所有する端末からデータベースにアクセスして、対象者が会話の中で訴えた症状と、その症状を訴えた時期の健康管理情報との相関を把握し、確認することが可能となり、その相関を参考にして診断を行ったり、対処方法を提示することが可能となる。
【００１３】
上記会話記録システムは、前記データベースを管理するデータ管理部をさらに備え、前記データベースは、前記対象者の診療に関する情報を電子的に記録した電子カルテをさらに保存しており、前記データ管理部は、前記対話形式の文章データを、前記対象者の前記電子カルテの備考欄に貼り付けてもよい。また、上記会話記録方法は、前記データベースが、前記対象者の診療に関する情報を電子的に記録した電子カルテをさらに保存している場合に、前記対話形式の文章データを、前記対象者の前記電子カルテの備考欄に貼り付ける対話文章貼付工程をさらに含んでいてもよい。上記した対話形式の文章データが対象者の電子カルテの備考欄に貼付されるため、例えば従事者としての医師は、自分の端末からデータベースにアクセスして電子カルテの備考欄を参照することにより、対象者と交わした会話の最初から最後までを確認し、会話の中の言葉から病状を診断することが可能となる。
【００１４】
上記会話記録システムにおいて、前記データ管理部は、前記対話形式の文章データのうち、前記対象者の文章データを、前記電子カルテの主訴欄に貼り付けてもよい。また、上記会話記録方法は、前記対話形式の文章データのうち、前記対象者の文章データを、前記電子カルテの主訴欄に貼り付ける対象者文章貼付工程をさらに含んでいてもよい。対象者の文章データが電子カルテの主訴欄に貼付されるため、例えば従事者としての医師は、自分の端末からデータベースにアクセスして電子カルテの主訴欄を参照することにより、対象者の発した言葉や文章を重点的に確認して、効率よく診断することが可能となる。
【００１５】
上記会話記録システムにおいて、前記データ管理部は、前記対象者の前記文章データに含まれる、予め登録された文言のデータを他と区別できるように強調して、前記対象者の文章データを前記主訴欄に貼り付けてもよい。また、上記会話記録方法において、前記対象者文章貼付工程では、前記対象者の前記文章データに含まれる、予め登録された文言のデータを他と区別できるように強調して、前記対象者の文章データを前記主訴欄に貼り付けてもよい。この場合、医師が端末上で電子カルテの主訴欄を参照したときに、対象者の発した言葉の中に、予め登録された文言があるか否かを把握することが容易となり、その文言に基づいてさらに効率よく診断することが可能となる。
【００１６】
上記会話記録システムにおいて、前記データ管理部は、前記対象者の前記文章データから、予め登録された文言のデータまたは前記文言を含む文章データを抽出して、前記対象者の前記文章データと併せて前記主訴欄に貼り付けてもよい。また、上記会話記録方法において、前記対象者文章貼付工程では、前記対象者の前記文章データから、予め登録された文言のデータまたは前記文言を含む文章データを抽出して、前記対象者の前記文章データと併せて前記主訴欄に貼り付けてもよい。この場合、医師が端末上で電子カルテの主訴欄を参照したときに、対象者の発した言葉の中に、予め登録された文言およびそれを含む文章があるか否かを確実に把握することが可能となり、その文言や文章に基づいてさらに効率よく診断することが可能となる。
【００１７】
上記会話記録システムおよび上記会話記録方法において、前記予め登録された文言は、特定の症状を示す文言を含んでいてもよい。例えば、「頭が痛い」、「寒気」などの特定の症状を示す文言を予め登録しておくことで、医師は端末上で電子カルテの主訴欄を参照したときに、その特定の症状を把握しやすくなり、特定の症状に基づく効率のよい診断が可能となる。
【００１８】
上記会話記録システムにおいて、前記データ管理部は、前記対象者の前記文章データに含まれる、体調に関して繰り返し登場する同じ言葉のデータを他と区別できるように強調して、前記対象者の文章データを前記主訴欄に貼り付けてもよい。また、上記会話記録方法において、前記対象者文章貼付工程では、前記対象者の前記文章データに含まれる、体調に関して繰り返し登場する同じ言葉のデータを他と区別できるように強調して、前記対象者の文章データを前記主訴欄に貼り付けてもよい。対象者が体調に関して同じ言葉を繰り返して発するとき、それは、その言葉が示す症状についての対象者のより深刻な訴えと考えることができる。電子カルテの主訴欄において、繰り返し登場する同じ言葉のデータを他と区別できるように強調することにより、医師が端末上で電子カルテの主訴欄を参照したときに、対象者がより深刻に訴えている症状を把握することが容易となり、把握した症状に基づいて適切な診断を行うことが可能となる。
【００１９】
上記会話記録システムにおいて、前記データ管理部は、前記対象者の前記文章データから、体調に関して繰り返し登場する同じ言葉のデータを抽出して、前記対象者の前記文章データと併せて前記主訴欄に貼り付けてもよい。また、上記会話記録方法において、前記対象者文章貼付工程では、前記対象者の前記文章データから、体調に関して繰り返し登場する同じ言葉のデータを抽出して、前記対象者の前記文章データと併せて前記主訴欄に貼り付けてもよい。対象者が体調に関して同じ言葉を繰り返して発するとき、それは、その言葉が示す症状についての対象者のより深刻な訴えと考えることができる。上記繰り返し登場する同じ言葉のデータを、対象者の文章データと併せて電子カルテの主訴欄に貼り付けることにより、医師が端末上で電子カルテの主訴欄を参照したときに、対象者がより深刻に訴えている症状を確実に把握することができ、把握した症状に基づいて適切な診断を行うことが可能となる。
【００２０】
上記会話記録システムにおいて、前記データ管理部は、前記複数の発話者のいずれかの発話が終了してから、次に前記対象者の発話が開始するまでの時間、および前記対象者の発話時の声の調子のうち、少なくとも一方に関する情報を、前記主訴欄に貼り付けてもよい。また、上記会話記録方法において、前記対象者文章貼付工程では、前記複数の発話者のいずれかの発話が終了してから、次に前記対象者の発話が開始するまでの時間、および前記対象者の発話時の声の調子のうち、少なくとも一方に関する情報を、前記主訴欄に貼り付けてもよい。前の発話者の発話が終了してから次に対象者が発話するまでの時間間隔や対象者の発話時の声の調子に関する情報も、対象者の状態を判断する際に有用な情報となる。このため、上記情報を電子カルテの主訴欄に貼り付けることで、医師は端末上で電子カルテの主訴欄を参照し、上記情報に基づく適切な診断が可能となる。
【００２１】
上記会話記録システムにおいて、前記データ管理部は、前記対話形式の文章データのうち、前記従事者の文章データから、予め登録された文言のデータまたは前記文言を含む文章データを抽出して、前記電子カルテの評価欄に貼り付けてもよい。また、上記会話記録方法は、前記対話形式の文章データのうち、前記従事者の文章データから、予め登録された文言のデータまたは前記文言を含む文章データを抽出して、前記電子カルテの評価欄に貼り付ける従事者文章貼付工程をさらに含んでいてもよい。この場合、例えば後日に同じ従事者（例えば医師）が、または別の従事者が、自分の端末からデータベースにアクセスして、対象者の電子カルテの評価欄を参照したときに、以前に診断した従事者の評価内容を容易にかつ明確に把握することができる。
【００２２】
上記会話記録システムおよび上記会話記録方法において、前記予め登録された文言は、病名または診断に関する文言を含んでいてもよい。この場合、対象者の電子カルテの評価欄を参照する医師は、以前に診断した医師の診断内容として、病名または診断に関する情報を容易にかつ明確に把握することが可能となる。
【００２３】
本発明のさらに他の側面に係るケアサポートシステムは、上述した会話記録システムを含み、複数の前記対象者の生活を支援するケアサポートシステムであって、各々の対象者の居室に設置されて、各々の対象者の状態を検知する検知ユニットと、前記検知ユニットから出力される情報を管理する管理サーバーとを含み、前記管理サーバーが、前記会話記録システムで構成されている。ケアサポートシステムの管理サーバーに会話記録システムを適用した構成において、上述の効果を得ることができる。
【００２４】
上記ケアサポートシステムにおいて、前記検知ユニットは、音声入力部をさらに備え、前記音声記録部は、前記音声入力部にて入力された前記会話の音声を、前記音声情報として記録してもよい。検知ユニットの音声入力部にて入力された会話の音声を、管理サーバーの音声記録部が音声情報として記録する構成において、上述の効果を得ることができる。
【発明の効果】
【００２５】
複数の発話者の間で交わされる会話音声が、最終的には対話形式の文章データに変換されて、データベースに保存されるため、会話音声に含まれる対象者の主訴の情報を、データベースの中に記録として確実に残すことができるとともに、要約的な記録を行う場合のように、情報の記録漏れがなく、対象者の身体の異常の兆候や症状の見落としを防止することができる。また、上記対話形式の文章データは、対象者ごとの健康管理情報と対応付けられて、外部からのアクセスに対して共有できるようにデータベースに保存されるため、医師等の従事者が、上記文章データに含まれる言葉を、対象者の健康管理情報を参照して詳しく分析したり、複数の従事者で分析することも可能となる。その結果、対象者の身体に僅かな異常の兆候や症状がある場合でも、それらを見つけることが可能となる。
【図面の簡単な説明】
【００２６】
【図１】本発明の実施の一形態に係る訪問型のケアサポートシステムの概略の構成を示す説明図である。
【図２】動体検知ユニットが設置された居室内の様子を模式的に示す説明図である。
【図３】上記動体検知ユニットの概略の構成を示すブロック図である。
【図４】上記動体検知ユニットが有する光学検出部の詳細な構成を示すブロック図である。
【図５】施設型のケアサポートシステムの概略の構成を示す説明図である。
【図６】上記訪問型および上記施設型のケアサポートシステムに適用可能な会話記録システムの概略の構成を示すブロック図である。
【図７】上記会話記録システムにおける処理の流れを示すフローチャートである。
【図８】利用者端末から上記会話記録システムのデータベースにアクセスして取得した情報を、上記利用者端末の表示部に表示させたときの表示画面の一例を示す説明図である。
【図９】図８において体温の項目が選択された場合における、体温の過去１週間の情報を示す説明図である。
【図１０】上記データベースに保存された会話記録の内容の一例を示す説明図である。
【図１１】会話音声が記録された日時が含まれる所定期間の体温の情報を、上記利用者端末の表示部に表示させたときの表示画面の一例を示す説明図である。
【図１２】上記データベースに保存された電子カルテの一例を示す説明図である。
【図１３】上記電子カルテの他の例を示す説明図である。
【発明を実施するための形態】
【００２７】
本発明の実施の一形態について、図面に基づいて説明すれば、以下の通りである。
【００２８】
本実施形態の会話記録システムは、例えば、被介護者や被看護者（患者）の生活を支援することを目的として構築されるケアサポートシステム（見守りシステム）に適用可能である。特に、上記会話記録システムは、医療、介護または看護に従事する従事者（医師、介護士、看護師など）が、医療による診断、介護または看護の対象となる対象者の自宅を訪問して、診断等を行いながら対象者の日々の生活を支援する、いわゆる訪問型（訪問医療型、訪問介護型、訪問看護型を含む）のケアサポートシステムに適用可能である。以下、本実施形態の会話記録システムについて説明する前に、まず、訪問型のケアサポートシステムについて説明する。
【００２９】
〔ケアサポートシステム（訪問型）〕
図１は、訪問型のケアサポートシステム１の概略の構成を示す説明図である。ケアサポートシステム１は、動体検知ユニット１０と、管理サーバー１００ａとを通信回線２００を介して通信可能に接続して構成されている。上記の動体検知ユニット１０は、各々の対象者の自宅（居室１０１とする）に設置されて、各々の対象者の状態（起床／入床、転倒有無、呼吸状態など、対象者の身体に関する状態）を検知するユニットである。通信回線２００は、例えば有線または無線のインターネット回線で構成される。
【００３０】
管理サーバー１００ａは、通信回線２００を介して、動体検知ユニット１０から送信される各種の情報（例えば居室１０１内の撮影画像や対象者の生体情報（例えば呼吸状態などのバイタルデータ）を受信して管理するとともに、受信した情報を表示部１００ｂ1に表示させる。これにより、システムの利用者（例えば上記した従事者）ＮＵは、表示部１００ｂ1に表示された情報を見て、管理対象となる対象者の状態を把握することができる。表示部１００ｂ1は、例えば管理サーバー１００ａと通信可能に接続されるパーソナルコンピュータ１００ｂのディスプレイで構成することができる。なお、管理サーバー１００ａは、パーソナルコンピュータ１００ｂと一体的に構成されてもよい。
【００３１】
また、利用者ＮＵは、管理サーバー１００ａと通信回線２００を介して無線通信可能な利用者端末３００を所有（携帯）している。これにより、利用者ＮＵは、利用者端末３００を操作して管理サーバー１００ａにアクセスすることで、種々の情報を取得することが可能である。なお、利用者端末３００としては、タブレットやスマートフォンなどの多機能型携帯端末や、ノート型パーソナルコンピュータなど、少なくとも表示部および操作部を有する端末を想定することができる。また、システムの利用者ＮＵが複数人である場合、各利用者ＮＵは、各自の利用者端末３００を操作することで、管理サーバー１００ａにアクセスすることが可能である。
【００３２】
〔動体検知ユニット〕
次に、上記した動体検知ユニット１０の詳細について説明する。図２は、動体検知ユニット１０が設置された居室１０１内の様子を模式的に示す説明図であり、図３は、動体検知ユニット１０の概略の構成を示すブロック図である。動体検知ユニット１０は、居室１０１内でベッド１０２と同じ数だけ設置されており、画像認識システム２０、電波検出部３０、音声入力部３５およびユニット制御部４０を備えている。動体検知ユニット１０は、電波検出部３０をはじめ、後述する光学検出部２３など、種々のセンサを備えていることから、センサボックスとも呼ばれる。このような動体検知ユニット１０は、図２に示すように、各居室１０１の天井部１０１ａに設置される。
【００３３】
電波検出部３０は、電波の放射および受信によって、居室１０１内での対象者の状態を検知するセンサである。電波検出部３０は、不図示の放射部および受信部を備えており、例えば２４ＧＨｚ帯のマイクロ波を放射し、対象者にて反射してドップラーシフトした反射波を受信するマイクロ波ドップラーセンサによって構成される。これにより、電波検出部３０は、受信した反射波から対象者の呼吸状態や睡眠状態、心拍数などを生体情報として検出することができる。
【００３４】
なお、対象者が呼吸しているとき（睡眠中も含む）、対象者の呼吸による体の微小な動き（微体動）が生じる。このため、対象者の呼吸状態や睡眠状態を検出することは、対象者の微体動を検出するのと同じである。このことから、電波検出部３０は、対象者の微体動を検出する微体動検出部として機能しているとも言うことができる。
【００３５】
音声入力部３５は、例えばマイクで構成され、居室１０１内で対象者と従事者との間で交わされる会話音声が入力される。音声入力部３５は、動体検知ユニット１０の外部に設けられていてもよいが、動体検知ユニット１０の内部に設けられることで、動体検知ユニット１０の既存の構成（例えばユニット制御部４０のインターフェース部４３）を利用して、音声入力部３５で入力された会話音声（音声情報）を管理サーバー１００ａに出力し、そこで記録、保存することができる。
【００３６】
なお、後述する光学検出部２３に、音声付き動画の撮影機能を持たせることにより、音声入力部３５の設置を省略することも可能である。この場合、得られた音声付き動画から音声情報のみを抽出し、利用することが可能である。ただし、動画との同録音声においては、音声の質の低下が懸念されるため、本実施形態のように、光学検出部２３とは別に、高品質な録音機能を有する音声入力部３５を設けることが望ましい。
【００３７】
ユニット制御部４０は、画像認識システム２０および電波検出部３０の動作を制御するとともに、画像認識システム２０および電波検出部３０から得た情報に対して画像処理や信号処理を行い、得られた結果を対象者の状態に関する情報として管理サーバー１００ａに出力する制御基板である。
【００３８】
ユニット制御部４０は、主制御部４１、情報処理部４２、インターフェース部４３、記憶部２４および画像認識部２５を備えている。記憶部２４および画像認識部２５は、ここではユニット制御部４０に設けられているが、ユニット制御部４０とは独立して設けられていてもよい。なお、記憶部２４および画像認識部２５の詳細については後述する。
【００３９】
主制御部４１は、動体検知ユニット１０内の各部の動作を制御する中央演算処理装置（ＣＰＵ；Central Processing Unit）で構成されている。情報処理部４２および画像認識部２５は、上記のＣＰＵで構成されてもよいし（主制御部４１と一体化されていてもよいし）、他の演算部や、特定の処理を行う回路で構成されてもよい。
【００４０】
情報処理部４２は、画像認識システム２０の後述する光学検出部２３から出力される情報（例えば画像データ）や、電波検出部３０から出力される情報（例えば呼吸状態に関するデータ）に対して、所定のアルゴリズムに基づいた信号処理を行う。信号処理によって得られた情報は、画像認識システム２０（特に画像認識部２５）での画像認識に利用される。
【００４１】
インターフェース部４３には、通信回線２００のネットワークケーブル（不図示）が電気的に接続される。画像やマイクロ波に基づいて動体検知ユニット１０が検出した対象者の状態に関する情報や、音声入力部３５にて入力された会話の音声情報は、インターフェース部４３および通信回線２００を介して管理サーバー１００ａに送信される。
【００４２】
画像認識システム２０は、照明部２１、照明制御部２２および光学検出部２３を備えている。
【００４３】
照明部２１は、暗闇での撮影を可能にすべく、赤外線（例えば近赤外光）を発光するＬＥＤ（Light Emitting Diode）を含んで構成されており、居室１０１の天井部１０１ａに位置して、居室１０１内を照明する。例えば、照明部２１は、複数のＬＥＤを有しており、居室１０１内の床面１０１ｂ（図２参照）や、天井部１０１ａと床面１０１ｂとをつなぐ壁を照明する。照明部２１による照明（赤外線の発光）の制御は、照明制御部２２によって行われる。
【００４４】
光学検出部２３は、照明部２１の照明のもとで居室１０１内を撮影して画像を取得する撮像部であり、例えばカメラで構成される。図４は、光学検出部２３の詳細な構成を示すブロック図である。光学検出部２３は、居室１０１の天井部１０１ａに、照明部２１と隣接して配置されており、撮影によって視野方向が直下である直上視点の画像を取得する。この光学検出部２３は、レンズ５１、撮像素子５２、ＡＤ（analog/digital）変換部５３、画像処理部５４および制御演算部５５を備えている。
【００４５】
レンズ５１は、例えば固定焦点レンズであり、一般的な超広角レンズや魚眼レンズで構成されている。超広角レンズとしては、対角画角が１５０°以上のレンズを用いることができる。これにより、天井部１０１ａから床面１０１ｂに向かって居室１０１内を撮影することが可能となる。
【００４６】
撮像素子５２は、例えばＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）といったイメージセンサで構成されている。撮像素子５２は、真っ暗な環境でも対象者の状態が画像として検出できるように、ＩＲカットフィルタを除去して構成されている。撮像素子５２からの出力信号は、ＡＤ変換部５３に入力される。
【００４７】
ＡＤ変換部５３は、撮像素子５２によって撮像された画像のアナログの画像信号を受信し、そのアナログの画像信号をデジタルの画像信号に変換する。ＡＤ変換部５３から出力されるデジタルの画像信号は、画像処理部５４に入力される。
【００４８】
画像処理部５４は、ＡＤ変換部５３から出力されるデジタルの画像信号を受信し、そのデジタルの画像信号に対して、例えば黒補正、ノイズ補正、色補間、ホワイトバランスなどの画像処理を実行する。画像処理部５４から出力される画像処理後の信号は、画像認識部２５に入力される。
【００４９】
制御演算部５５は、撮像素子５２の制御に関する例えばＡＥ（Automatic Exposure）などの演算を実行するとともに、撮像素子５２に対して露光時間やゲインなどの制御を実行する。また、制御演算部５５は、必要に応じて、照明部２１に対して好適な光量設定や配光設定などの演算を実行するとともに、制御を実行する。なお、制御演算部５５に、上述の照明制御部２２の機能を持たせるようにしてもよい。
【００５０】
上記した画像認識システム２０は、さらに、上述した記憶部２４および画像認識部２５を備えている。
【００５１】
記憶部２４は、ユニット制御部４０が実行する制御プログラムや各種の情報を記憶するメモリであり、例えばＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、不揮発性メモリなどで構成されている。
【００５２】
画像認識部２５は、光学検出部２３にて取得された画像の画像データに対して画像認識処理を行う。より具体的には、画像認識部２５は、光学検出部２３の画像処理部５４が画像処理を実行した後の信号を受信し、例えば対象物の輪郭を抽出してパターンマッチング等の手法で形状を認識する画像認識処理を実行する。これにより、画像認識部２５は、居室１０１内にいる対象者の状態を認識することができる。
【００５３】
ここで、居室１０１内にいる対象者の状態としては、起床、離床、入床（臥床）、転倒などが想定される。これらの対象者の状態は、対象者の体の大きさ動作（体動）を伴う点で、電波検出部３０で検出される微体動（呼吸等による体の微小な動き）と区別される。
【００５４】
〔ケアサポートシステム（施設型）〕
図５は、施設型のケアサポートシステム１の概略の構成を示す説明図である。本実施形態の会話記録システムは、施設型のケアサポートシステム１にも適用可能である。施設型のケアサポートシステム１は、介護施設Ｓ内の各居室１１１に設置した動体検知ユニット１０を、通信回線２００を介して管理サーバー１００ａと通信可能に接続して構成される。なお、管理サーバー１００ａは、介護施設Ｓ内のスタッフステーション１００に設置されている。１つの建物（介護施設Ｓ）内に複数の動体検知ユニット１０および管理サーバー１００ａを設置した点を除けば、施設型のケアサポートシステム１の基本的な構成は、訪問型のケアサポートシステム１と同じである。
【００５５】
〔会話記録システム〕
次に、上述したケアサポートシステム１に適用可能な会話記録システムについて説明する。図６は、本実施形態の会話記録システム６０の概略の構成を示すブロック図である。会話記録システム６０は、上述した訪問型または施設型のケアサポートシステム１の管理サーバー１００ａに適用可能なシステムであり、音声記録部６１と、データベース６２と、通信部６３と、制御部６４とを備えている。
【００５６】
音声記録部６１は、複数の発話者の間で交わされる会話の音声情報を記録するものであり、例えばボイスレコーダのような既存の録音機器で構成することができる。なお、上記複数の発話者には、ここでは、医療、介護または看護に従事する従事者と、医療による診断、介護または看護の対象となる対象者とが含まれているものとする。
【００５７】
データベース６２は、例えばハードディスクで構成されており、対象者ごとの医療、介護または看護に関する健康管理情報を保存するとともに、後述する文章データを、対象者ごとの健康管理情報と対応付けて、外部（例えば利用者端末３００）からのアクセスに対して共有できるように保存する記憶部（メモリ）である。
【００５８】
上記の健康管理情報は、対象者の健康を管理する上で必要な情報であり、例えば、対象者の日々の体温、呼吸数（微体動数）、血圧、睡眠状態などの情報（バイタルデータ）を含む。健康管理情報の中で、動体検知ユニット１０での検知対象である情報（例えば呼吸数、睡眠状態）については、動体検知ユニット１０から会話記録システム６０に出力される情報が、健康管理情報としてデータベース６２に記憶される。一方、動体検知ユニット１０での検知対象ではない情報（例えば体温、血圧など）については、例えば利用者端末３００（図１参照）や、管理サーバー１００ａと通信可能に接続されるパーソナルコンピュータ１００ｂの操作部によって入力され、対象者の健康管理情報としてデータベース６２に記憶される。
【００５９】
また、データベース６２は、電子カルテも保存している（図１２、図１３参照）。電子カルテとは、従事者としての医師が対象者の診療に関する情報を電子的に記録したカルテであり、対象者ごとに用意され、データベース６２に保存されている。
【００６０】
通信部６３は、会話記録システム６０と外部との間で情報の入出力を行うためのインターフェースであり、送信回路、受信回路、アンテナなどを含んで構成される。
【００６１】
制御部６４は、発話者特定部６４ａと、音声認識部６４ｂと、対話文章作成部６４ｃと、データ管理部６４ｄと、全体制御部６４ｅとを有している。全体制御部６４ｅは、会話記録システム６０の各部の動作を制御する。発話者特定部６４ａ、音声認識部６４ｂ、対話文章作成部６４ｃ、データ管理部６４ｄ、および全体制御部６４ｅは、別々のＣＰＵで構成されてもよいし、全体として１つのＣＰＵで構成されて、制御部６４全体が、発話者特定部６４ａ、音声認識部６４ｂ、対話文章作成部６４ｃ、データ管理部６４ｄ、全体制御部６４ｅの各機能を実行してもよい。
【００６２】
発話者特定部６４ａは、上記音声情報の分析または予め登録された発話者の音声データに基づいて、個々の発話者を特定する。音声認識部６４ｂは、音声記録部６１に記録された音声情報を、個々の発話者ごとに（従事者および対象者ごとに）テキストデータに変換する。
【００６３】
なお、発話者特定部６４ａでの音声情報に基づく発話者の特定や、音声認識部６４ｂでの音声情報からテキストデータへの変換は、既存の音声認識技術を利用して行うことができる（例えば「音声認識のしくみ」、ＮＥＣ社のホームページ、（http://jpn.nec.com/vsol/overview.html）参照）。
【００６４】
対話文章作成部６４ｃは、音声認識部６４ｂで得られた発話者ごとのテキストデータを、複数の発話者による対話形式に並べ替えて、対話形式の文章データを作成する。データ管理部６４ｄは、データベース６２を管理する。例えば、データベース６２に対する情報の書き込みや読み出しは、データ管理部６４ｄによって制御される。
【００６５】
〔会話記録システムでの処理の流れ〕
次に、上記構成の会話記録システム６０での処理について説明する。図７は、会話記録システム６０における処理の流れを示すフローチャートである。会話記録システム６０では、会話音声の記録（Ｓ１）、発話者の特定（Ｓ２）、テキストデータの作成（Ｓ３）、対話形式の文章データの作成（Ｓ４）、文章データの保存（Ｓ５）、文章データの備考欄への貼付（Ｓ６）、対象者の文章データの主訴欄への貼付（Ｓ７）、従事者（医者）の文章データの評価欄への貼付（Ｓ８）、の各処理が行われる。以下、順に説明する。なお、ここでは、会話記録システム６０が、訪問型のケアサポートシステム１（図１参照）の管理サーバー１００ａに適用された場合を例として説明する。
【００６６】
（Ｓ１；会話音声の記録）
対象者の居室１０１内で従事者と対象者との間で会話が交わされて、動体検知ユニット１０の音声入力部３５に会話音声が入力されると、その音声情報が管理サーバー１００ａに出力され、管理サーバー１００ａを構成する会話記録システム６０の音声記録部６１にて記録される（音声記録工程）。なお、上述したように、動体検知ユニット１０の光学検出部２３にて音声付き動画を撮影し、音声記録部６１が、上記音声付き動画から音声情報のみを抽出して記録してもよい。
【００６７】
なお、音声記録部６１における会話音声の記録の開始は、訪問時に従事者が対象者の居室１０１に入ったことを動体検知ユニット１０の光学検出部２３にて自動的に検知して、その検知信号を動体検知ユニット１０から会話記録システム６０に送信し、その検知信号の受信をトリガとして行ってもよい。また、従事者が別途リモコン操作によって手動で会話音声の記録開始指示を出し、その指示を動体検知ユニット１０が検知して会話記録システム６０に送信し、音声記録部６１にて記録を開始するようにしてもよい。
【００６８】
なお、光学検出部２３で撮影される動画についても、会話記録システム６０のデータベース６２または他の記録部に記録されることが望ましい。従事者としての医師が対象者としての患者を診察したときの診断内容（会話に現れない診断や処置も含む）の一部始終が記録として残るため、医師が電子カルテに対する診断内容の記録漏れがあったとしても、あとで動画を再生して診断内容を確認することができる。これにより、医師が患者に対して発行する請求書において請求漏れがなくなり、正しい額で請求書を発行することができる。このような目的で診断の際の動画を記録する場合、上述した会話音声の開始を指示するトリガは、動画記録の開始を指示するトリガも兼ねる。
【００６９】
（Ｓ２；発話者の特定）
Ｓ２では、発話者特定部６４ａが、上記音声情報の分析または予め登録された発話者の音声データに基づいて、上記音声情報を提供する個々の発話者を特定する（発話者特定工程）。例えば、発話者特定部６４ａは、上記音声情報を、音声の途切れ（例えば３〜５秒の無音部分）ごとに分割して複数のブロックに分け、ブロックごとの周波数および波形に基づいて、会話音声に含まれる単語を分析し、質問形式の語尾（例えば「〜ですか？」）があれば、その語尾を含む文章を従事者の発話と判断し、そのような語尾がない文章を対象者の発話と判断する。
【００７０】
また、従事者の音声データを予めデータベース６２等に登録しておけば、発話者特定部６４ａは、会話音声に含まれる従事者の発話を上記音声データに基づいて特定し、残りを対象者の発話と特定することができる。さらに、複数の対象者の個々の特定に関しては、動体検知ユニット１０と、対象者が生活する居室１０１（図１参照）とが１対１に対応していることから、発話者特定部６４ａは、音声記録部６１に記録された音声情報がどの動体検知ユニット１０（居室１０１）から出力されたものであるかを判別することにより、上記音声情報を提供する対象者を複数の対象者の中から特定することができる。
【００７１】
（Ｓ３；テキストデータの作成、Ｓ４；対話形式の文章データの作成）
Ｓ３では、音声認識部６４ｂは、Ｓ１で取得した音声情報を、Ｓ２で特定した個々の発話者ごとに（従事者および対象者ごとに）音声認識によってテキストデータに変換する（テキスト変換工程）。そして、Ｓ４では、対話文章作成部６４ｃが、Ｓ３で取得した個お子の発話者ごとのテキストデータを、複数の発話者による対話形式に並べ替えて、対話形式の文章データを作成する（対話文章作成工程）。
【００７２】
このとき、同じ発話者が連続して発話し、かつ、所定の途切れ（例えば５秒以上無音部分）までのデータを、同一話者の１フレーズとする。そして、各フレーズを時系列で並べ、同じ発話者が連続する各フレーズの全体（ひとかたまり）を、当該発話者の一発言とする。そして、同一発話者の一発言ごとに、交互に発話者の発言を並べて、対話形式の文章データを得る。
【００７３】
（Ｓ５；文章データの保存）
Ｓ５では、データ管理部６４ｄの制御により、Ｓ４で取得した対話形式の文章データを、対象者ごとの医療、介護または看護に関する健康管理情報と対応付けて、外部からのアクセスに対して共有できるようにデータベース６２に保存する（保存工程）。これにより、例えばシステムの利用者ＮＵは、利用者端末３００からデータベース６２にアクセスして、所定の対象者の健康管理情報および会話記録情報（対話形式の文章データ）を取得でき、また、取得した情報を利用者端末３００の表示部に表示させて確認することができる。
【００７４】
図８は、利用者端末３００からデータベース６２にアクセスして取得した情報を、利用者端末３００の表示部に表示させたときの表示画面の一例を示している。上記表示部に表示される情報には、対象者の健康管理情報および会話記録情報が含まれている。上記の健康管理情報には、対象者の体温、微体動数（呼吸数）、血圧、睡眠状態等の各項目に関する情報が含まれている。表示された健康管理情報の各項目を、利用者端末３００の操作部によってさらに選択することにより（操作部がマウスの場合はクリック、操作部がタッチパネルの場合は押圧することにより）、選択した項目について、さらに所定期間内の情報が表示される。例えば、図９は、図８において体温の項目が選択された場合における、体温の過去１週間の情報を示している。なお、上記所定期間の選択は、利用者端末３００の操作部によって自由に行うことができる。
【００７５】
一方、利用者端末３００の表示画面において、上記の会話記録の項目を操作部によって選択すると、図１０に示すように、医師と対象者（本人）との対話形式の文章が会話記録として表示される。
【００７６】
ここで、データベース６２は、データ管理部６４ｄの制御により、Ｓ４で取得した対話形式の文章データを、会話音声の記録日時の情報と併せて、上記記録日時が含まれる所定期間の健康管理情報と対応付けて保存している。例えば、図１０の例では、２０１７年３月１５日の１３時５０分に会話音声が記録されたことを示しているが、この記録日時の情報と、上記記録日時が含まれる所定期間の健康管理情報とを対応付けてデータベース６２に保存している。これにより、利用者端末３００では、会話音声の記録日時と連動して健康管理情報を表示させることができる。すなわち、図１０の会話記録情報の表示画面において、例えば体温の項目を利用者端末３００の操作部によって選択すると、利用者端末３００からデータベース６２へのアクセスによって、会話音声が記録された日時（２０１７年３月１５日）が含まれる１週間の体温の情報が取得され、図１１に示すように、利用者端末３００の表示部にて、取得した上記１週間の体温の情報が表示される。
【００７７】
（Ｓ６；文章データの備考欄への貼付）
データベース６２は、上記の健康管理情報に加えて、電子カルテをさらに保存している。図１２は、対象者の電子カルテの一例を示している。電子カルテには、対象者の識別情報（氏名、年齢、性別）、担当医および診療日時情報、主訴欄、検査欄、評価欄、方針欄、備考欄等が設けられている。Ｓ６では、データ管理部６４ｄは、図１０で示した対話形式の文章データを、対象者の電子カルテの備考欄に貼り付ける（対話文章貼付工程）。
【００７８】
ここで、電子カルテの各欄について説明を補足しておく。主訴欄は、患者の主訴などの主観的な情報を記入する欄であり、Ｓ（subject）欄とも呼ばれる。この主訴欄には、患者の主訴以外の話や病歴などを記入してもよい。検査欄は、患者に対する診察や検査によって得られた客観的な情報（例えば血圧、脈拍、体温の各測定値、尿検査の結果など）を記入する欄であり、Ｏ（object）欄とも呼ばれる。評価欄は、主訴欄および検査欄に記入された情報に基づいて評価（診断結果）を記入する欄であり、Ａ（assessment）欄とも呼ばれる。方針欄は、主訴欄、検査欄および評価欄に記入された情報に基づく治療方針を記入する欄であり、Ｐ（plan）欄とも呼ばれる。備考欄は、患者の治療の参考となる情報を記入する欄である。
【００７９】
（Ｓ７；対象者の文章データの主訴欄への貼付）
Ｓ７では、データ管理部６４ｄは、図１２に示すように、Ｓ６で備考欄に貼り付けた対話形式の文章データのうち、対象者（本人）の文章データを、電子カルテの主訴欄に貼り付ける（対象者文章貼付工程）。このとき、データ管理部６４ｄは、対象者の文章データに含まれる、予め登録された文言のデータを他と区別できるように強調して、対象者の文章データを主訴欄に貼り付ける。同図では、「頭が痛い」、「寒気」などの特定の症状を示す文言が予めデータベース６２に登録されており、これらの言葉を太字、大フォント、下線付きにして、対象者の文章データを主訴欄に貼り付けている。なお、予め登録された言葉に色を付したり、上記言葉を斜字体にしたり、背景にハッチングを付すなどして、他と区別できるように強調してもよい。
【００８０】
また、Ｓ７では、データ管理部６４ｄは、対象者の文章データから、予め登録された文言のデータを抽出し、これを対象者の文章データと併せて主訴欄に貼り付けてもよい。同図では、「頭が痛い」、「寒気」などの特定の症状を示す文言が予めデータベース６２に登録されている場合に、それらの文言を、対象者の文章データと併せて主訴欄に貼り付けている。なお、予め登録された文言（例えば「寒気」）を含む文章データそのもの（例えば「寒気がしますので、少し体温が高いかも知れません。」）を、対象者の複数の文章データの中から抽出し、上記複数の文章データと併せて主訴欄に貼り付けてもよい。
【００８１】
また、Ｓ７では、データ管理部６４ｄは、対象者の文章データに含まれる、体調に関して繰り返し登場する同じ言葉のデータを他と区別できるように強調して、対象者の文章データを主訴欄に貼り付けてもよい。同図では、対象者の文章データにおいて、「少し頭が痛いです。」の言葉が繰り返し登場しているため、主訴欄では、この言葉を太字、大フォント、下線付きで表現している。なお、上記言葉に色を付したり、上記言葉を斜字体にしたり、背景にハッチングを付すなどして、他と区別できるように強調してもよい。また、繰り返し言葉が体調に関する言葉であるか否かは、上記言葉が予め登録された文言（例えば「頭が痛い」）を含むか否かで判断することができる。
【００８２】
また、Ｓ７では、データ管理部６４ｄは、対象者の文章データから、体調に関して繰り返し登場する同じ言葉のデータを抽出し、これを対象者の文章データと併せて主訴欄に貼り付けてもよい。同図では、体調に関する「少し頭が痛いです。」の繰り返し言葉を、対象者の文章データと併せて主訴欄に貼り付けている。
【００８３】
（Ｓ８；従事者の文章データの評価欄への貼付）
Ｓ８では、データ管理部６４ｄは、従事者としての医師の文章データから、予め登録された文言のデータを抽出して、電子カルテの評価欄に貼り付ける（従事者文章貼付工程）。同図では、医師の文章データから、予め登録された「風邪」という診断に関する文言のデータを抽出して、評価欄の下段に貼り付けた例を示している。なお、医師の文章データに、具体的な病名（胃腸炎、糖尿病など）が含まれていれば、その病名の文言データを抽出して、評価欄に貼り付けてもよい。さらに、医師の文章データから、病名や診断に関する文言を含む文章データを抽出して、評価欄に貼り付けてもよい。なお、評価欄の上段には、主訴欄および検査欄の情報に基づいて医師が診断した病名（感冒）が書き込まれている。
【００８４】
〔効果〕
以上のように、本実施形態の会話記録システム６０では、医療等の従事者と診断等の対象者とを含む複数の発話者間での会話音声を対話形式の文章データに変換し、データベース６２に保存する（Ｓ１〜Ｓ５参照）。自由会話でなされた情報を対話形式でそのまま（会話の最初から最後まで）データベース６２に記録するため、会話のどこかに含まれる対象者の主訴の情報を、データベース６２に記録として確実に残すことができる。しかも、要約的な記録を行う場合のように、情報の記録漏れが起こる心配も全くない。したがって、データベース６２に保存された情報（特に対象者の主訴の情報）に基づいて、従事者は対象者の身体の異常の兆候や症状を確実に見つけることができる（対象者の身体の異常の兆候や症状の見落としを防止できる）。特に、会話の最初は世間話から始まることが多いが、その世間話の中にも身体の異常の原因を突き止めるヒントが隠されている場合がある。自由会話の情報をそのままデータベース６２に保存することで、そのような世間話に含まれる言葉（ヒント）も見逃さずに、対象者の身体の異常の兆候や症状を見つけることが可能となる。
【００８５】
また、上記文章データは、対象者ごとの健康管理情報と対応付けられて、外部からのアクセスに対して共有できるようにデータベース６２に保存されるため、医療等の従事者が利用者端末３００からデータベース６２にアクセスして、上記文章データに含まれる言葉を、対象者の健康管理情報を参照して詳しく分析したり、複数の従事者（医者等）が各自の利用者端末３００からデータベース６２にアクセスして複数人で分析することが可能となる。その結果、対象者の身体に僅かな異常の兆候や症状がある場合でも、それらを見つけることが可能となる。
【００８６】
つまり、上記した会話記録システム６０によれば、対象者と従事者との間の会話そのものをデータベース６２に記録することで、対象者の主訴を、要約的記録の場合のように取捨選択することなく簡単に、しかも、より詳しくデータベース６２に記録できるようになる。また、データベース６２に記録された内容から、対象者の身体の異常や症状などを、より詳しく、客観的に把握したり、上記内容を外部と簡単に共有して、身体の異常等の発見に貢献することができる。
【００８７】
また、データベース６２は、対話形式の文章データを、会話音声の記録日時の情報と併せて、記録日時が含まれる所定期間の健康管理情報と対応付けて保存する（Ｓ５参照）。このため、医師等の従事者は、利用者端末３００からデータベース６２にアクセスして、対象者が会話の中で訴えた症状と、その症状を訴えた時期の健康管理情報との相関を把握または確認でき（例えば過去にＡという症状を訴えた時期に、体温が上がっていたなど）、その相関を参考にして診断を行ったり、対処方法を提示することが可能となる。
【００８８】
また、データ管理部６４ｄは、対話形式の文章データを、対象者の電子カルテの備考欄に貼り付ける（Ｓ６参照）。このため、例えば従事者としての医師は、自分の利用者端末３００からデータベース６２にアクセスして電子カルテの備考欄を参照することにより、対象者と交わした会話の最初から最後までを確認し、会話の中の言葉から病状を診断することが可能となる。
【００８９】
また、データ管理部６４ｄは、対話形式の文章データのうち、対象者の文章データを、電子カルテの主訴欄に貼り付ける（Ｓ７参照）。このため、例えば従事者としての医師は、自分の利用者端末３００からデータベース６２にアクセスして電子カルテの主訴欄を参照することにより、（従事者以外の）対象者の発した言葉や文章を重点的に確認して、効率よく診断することが可能となる。
【００９０】
また、Ｓ７では、データ管理部６４ｄは、対象者の文章データに含まれる、予め登録された文言のデータを他と区別できるように強調して、対象者の文章データを電子カルテの主訴欄に貼り付ける。このため、医師が利用者端末３００上で電子カルテの主訴欄を参照したときに、対象者の発した言葉の中に、予め登録された文言があるか否かを把握することが容易となり、その文言に基づいてさらに効率よく診断することが可能となる。
【００９１】
また、Ｓ７では、データ管理部６４ｄは、対象者の文章データから、予め登録された文言のデータまたはその文言を含む文章データを抽出して、対象者の文章データと併せて電子カルテの主訴欄に貼り付けてもよい。この場合、医師が利用者端末３００上で電子カルテの主訴欄を参照したときに、対象者の発した言葉の中に、予め登録された文言およびそれを含む文章があるか否かを確実に把握することが可能となり、その文言や文章に基づいてさらに効率よく診断することが可能となる。
【００９２】
特に、上記予め登録された文言は、特定の症状（「頭が痛い」、「寒気」など）を示す文言であるため、医師は利用者端末３００上で電子カルテの主訴欄を参照したときに、その特定の症状を把握しやすくなり、特定の症状に基づく効率のよい診断が可能となる。
【００９３】
また、Ｓ７では、データ管理部６４ｄは、対象者の文章データに含まれる、体調に関して繰り返し登場する同じ言葉のデータを他と区別できるように強調して、対象者の文章データを主訴欄に貼り付けてもよい。この場合、医師が利用者端末３００上で電子カルテの主訴欄を参照したときに、言葉の繰り返しによって対象者がより深刻に訴えている症状を把握することが容易となり、把握した症状に基づいて適切な診断を行うことが可能となる。
【００９４】
また、Ｓ７では、データ管理部６４ｄは、対象者の文章データから、体調に関して繰り返し登場する同じ言葉のデータを抽出して、対象者の文章データと併せて主訴欄に貼り付けてもよい。この場合、医師が利用者端末３００上で電子カルテの主訴欄を参照したときに、言葉の繰り返しによって対象者がより深刻に訴えている症状を確実に把握することができ、把握した症状に基づいて適切な診断を行うことが可能となる。
【００９５】
また、データ管理部６４ｄは、従事者（例えば医師）の文章データから、予め登録された文言のデータまたはその文言を含む文章データを抽出して、電子カルテの評価欄に貼り付ける（Ｓ８参照）。これにより、例えば後日に同じ医師が、または別の医師が、自分の利用者端末３００からデータベース６２にアクセスして、対象者の電子カルテの評価欄を参照したときに、以前に診断した医師の評価内容を容易にかつ明確に把握することができる。
【００９６】
特に、上記予め登録された文言は、病名または診断に関する文言を含むため、対象者の電子カルテの評価欄を参照する医師は、以前に診断した医師の診断内容として、病名または診断に関する情報を容易にかつ明確に把握することが可能となる。
【００９７】
また、本実施形態のケアサポートシステム１では、動体検知ユニット１０からの情報を管理する管理サーバー１００ａが、上述した会話記録システム６０で構成されている。これにより、被介護者の生活を支援するケアサポートシステム１において、被介護者の主訴の情報をデータベース６２に記録として確実に残して、身体の異常の兆候や症状の見落としを防止できるなど、上述した本実施形態の効果を得ることができる。特に、動体検知ユニット１０内に設けられた音声入力部３５にて入力された会話の音声を、音声記録部６１に出力してそこで音声情報として記録する構成において、上述した本実施形態の効果を得ることができる。
【００９８】
なお、以上では、電子カルテにて、強調したり、文章データと並記する予め登録された文言として、「頭が痛い」などの特定の症状を示す文言を例に挙げて説明したが、その他、病名、薬名、処置内容等についても、内容の把握を容易にするために強調表示してもよい。
【００９９】
〔電子カルテへの他の貼付例〕
図１３は、対象者の電子カルテの他の例を示している。Ｓ７の対象者文章貼付工程において、データ管理部６４ｄは、複数の発話者のいずれか（従事者または対象者）の発話が終了してから、次に対象者の発話が開始するまでの時間、および対象者の発話時の声の調子のうち、少なくとも一方に関する情報を、電子カルテの主訴欄に貼り付けてもよい。例えば、医師からの「一朗さん、今日の調子はどうですか？」の質問に対して、対象者が「少し頭が痛いです。」と発話するまでに８秒の間隔があった場合に、電子カルテの主訴欄に「発話まで８秒」の情報を載せている。この場合、対象者が質問に対して「よく考えて答えた」というようなニュアンスが汲み取れる。また、例えば、対象者の「寒気がしますので、体温が少し高いかも知れません。」の発話時の声のトーンが通常よりも低い場合に、電子カルテの主訴欄にトーンの情報（「トーン低」）を載せている。この場合、対象者が倦怠感を抱いている可能性が高いことを把握できる。
【０１００】
このように、対象者が発話するときの間（前の発話者の発話終了から次の対象者の発話開始までの時間間隔）や、対象者の発話時の声の調子に関する情報も、対象者の病状を診断したり、体調を把握する際に有用な情報となる。このため、上記情報を電子カルテの主訴欄に載せることで、医師は利用者端末３００上で電子カルテの主訴欄を参照して、対象者の身体の状態をより正確に把握することが可能となり、上記情報に基づく適切な診断や措置が可能となる。
【０１０１】
なお、対象者の発話時の声の調子に関しては、音声入力部３５に入力される対象者の音声情報に基づいて、例えば以下のようにしてデータ管理部６４ｄが判断することができる。すなわち、音声入力部３５に入力される対象者の普段の会話データから、声の大きさ（波形の振幅）の平均値を求めておき、入力される対象者の声の大きさが平均値よりも所定量以上大きい場合には（例えば平均値の１．３倍である場合には）、声が大きいと判断する。この場合、対象者の機嫌がよい、あるいは体調が優れていると考えることができる。一方、入力される対象者の声の大きさが平均値よりも所定量以上小さい場合には（例えば平均値の０．７倍である場合には）、声が小さいと判断する。この場合、対象者の機嫌が悪い、あるいは元気がないと考えることができる。データ管理部６４ｄは、電子カルテの主訴欄において、対象者の該当する発話の文章データのフォントを、例えば前者の場合（声が大きい場合）は大きくし、後者の場合（声が小さい場合）は小さくして載せることで、主訴欄にて対象者の声の調子（大小）を表現することができる。
【０１０２】
また、音声入力部３５に入力される対象者の普段の会話データから、声の周波数の平均値を求めておき、入力される対象者の声の周波数が平均値よりも所定量以上大きい場合には（例えば平均値の１．３倍である場合には）、声のトーンが高いと判断する。この場合、対象者の気持ちが高揚しており、興奮状態にあると考えることができる。一方、入力される対象者の声の周波数が平均値よりも所定量以上小さい場合には（例えば平均値の０．７倍である場合には）、声のトーンが低いと判断する。この場合、対象者の機嫌が悪い、あるいは元気がないと考えることができる。データ管理部６４ｄは、電子カルテの主訴欄において、対象者の該当する発話の文章データのフォントを、例えば前者の場合（声のトーンが高い場合）は色付き斜体にし、後者の場合（声のトーンが小さい場合）は黒字斜体にして載せることで、主訴欄にて対象者の声の調子（トーン）を表現することができる。
【０１０３】
なお、以上では、本実施形態の会話記録システムを、ケアサポートシステム（訪問型、施設型）に適用した例について説明したが、それ以外にも、病院や診療所内の情報管理システムに適用することも可能である。例えば、病院等の診察室内に音声入力部（マイク）を設置しておき、音声入力部で得られた情報を、通信回線を介して管理サーバーに出力し、そこで管理するシステムにも、本実施形態の会話記録システムを適用することができ、これによって本実施形態と同様の効果を得ることができる。
【０１０４】
なお、患者と医師が同じ場所にいなくても、画面を介した（例えばＴＶ会議のような）診療も可能であり、そのような診療にも本実施形態の会話記録システムを適用することができる。
【０１０５】
以上、本発明の実施形態につき説明したが、本発明の範囲はこれに限定されるものではなく、発明の主旨を逸脱しない範囲で種々の変更を加えて実施することができる。
【産業上の利用可能性】
【０１０６】
本発明は、例えば医療等に従事する従事者と、診断等の対象となる対象者とを含む複数の発話者の間で交わされる会話の音声情報を記録するシステムに利用可能である。
【符号の説明】
【０１０７】
１      ケアサポートシステム
１０      動体検知ユニット（検知ユニット）
３５      音声入力部
６０      会話記録システム
６１      音声記録部
６２      データベース
６４ａ    発話者特定部
６４ｂ    音声認識部
６４ｃ    対話文章作成部
６４ｄ    データ管理部
１００ａ    管理サーバー
【図１】
2018206055.tif 000003
【図２】
2018206055.tif 000004
【図３】
2018206055.tif 000005
【図４】
2018206055.tif 000006
【図５】
2018206055.tif 000007
【図６】
2018206055.tif 000008
【図７】
2018206055.tif 000009
【図８】
2018206055.tif 000010
【図９】
2018206055.tif 000011
【図１０】
2018206055.tif 000012
【図１１】
2018206055.tif 000013
【図１２】
2018206055.tif 000014
【図１３】
2018206055.tif 000015