(57)【要約】【課題】  本発明では、ディクテーション機能で作成したテキストデータに無駄な情報が少なく、また他のデータと関連付けることができ、処置記録データとしての有用性の高いテキストデータを作成する事が可能なディクテーション機能を有する医療用システムを提供する。【解決手段】  複数の医療機器と、該医療機器と接続され該医療機器を制御する医療機器制御装置とから構成される医療用システムにおいて、音声が入力される音声入力手段と、前記音声入力手段により入力された前記音声を認識して、該音声を文字列化する音声文字列化手段と、医療に関する語彙である医療関連語彙が格納されている医療関連語彙格納手段と、前記医療関連語彙手段に格納されている前記医療関連語彙に基づいて、前記音声文字列化手段により文字列化された音声を示す音声文字から該医療関連語彙を抽出する医療語彙抽出手段とを備えることにより、上記課題の解決を図る。【選択図】      図１
2006218230.tif 000002
【特許請求の範囲】
【請求項１】
複数の医療機器と、該医療機器と接続され該医療機器を制御する医療機器制御装置とから構成される医療用システムにおいて、
音声が入力される音声入力手段と、
前記音声入力手段により入力された前記音声を認識して、該音声を文字列化する音声文字列化手段と、
医療に関する語彙である医療関連語彙が格納されている医療関連語彙格納手段と、
前記医療関連語彙手段に格納されている前記医療関連語彙に基づいて、前記音声文字列化手段により文字列化された音声を示す音声文字から該医療関連語彙を抽出する医療語彙抽出手段と、
を備えることを特徴とする医療用システム。
【請求項２】
前記音声文字列化手段は、前記音声入力手段により入力された前記音声を認識して、該音声を文字列化した文章から語彙を抽出することを特徴とする請求項１に記載の医療用システム。
【請求項３】
前記医療関連語彙格納手段は、前記医療機器の操作状況に関する語彙群、前記医療機器に関する語彙群、医療具に関する語彙群、及び手技に関する語彙群のうち少なくともいずれかの語彙群が格納されていることを特徴とする請求項１に記載の医療用システム。
【請求項４】
前記医療用システムは、さらに、
前記医療機器の操作履歴情報が格納される操作履歴格納手段と、
前記操作履歴情報と、前記医療関連語彙抽出手段により抽出した前記医療関連語彙とを関連付ける関連付け手段と、
を備えることを特徴とする請求項１に記載の医療用システム。
【請求項５】
前記複数の医療機器のうち少なくとも１つは内視鏡であり、
前記医療用システムは、内視鏡システムである
ことを特徴とする請求項１に記載の医療用システム。
【請求項６】
複数の医療機器を制御する医療機器制御装置において、
音声が入力される音声入力手段と、
前記音声入力手段により入力された前記音声を認識して、該音声を文字列化する音声文字列化手段と、
医療に関する語彙である医療関連語彙が格納されている医療関連語彙格納手段と、
前記医療関連語彙手段に格納されている前記医療関連語彙に基づいて、前記音声文字列化手段により文字列化された音声を示す音声文字から該医療関連語彙を抽出する医療語彙抽出手段と、
を備えることを特徴とする医療機器制御装置。
【請求項７】
前記音声文字列化手段は、前記音声入力手段により入力された前記音声を認識して、該音声を文字列化した文章から語彙を抽出することを特徴とする請求項６に記載の医療機器制御装置。
【請求項８】
前記医療関連語彙格納手段は、前記医療機器の操作状況に関する語彙群、前記医療機器に関する語彙群、医療具に関する語彙群、及び手技に関する語彙群のうち少なくともいずれかの語彙群が格納されていることを特徴とする請求項６に記載の医療機器制御装置。
【請求項９】
前記医療機器制御装置は、さらに、
前記医療機器の操作履歴情報が格納される操作履歴格納手段と、
前記操作履歴情報と、前記医療関連語彙抽出手段により抽出した前記医療関連語彙とを関連付ける関連付け手段と、
を備えることを特徴とする請求項６に記載の医療機器制御装置。
【請求項１０】
音声を入力し、
前記音声を認識して、該音声を文字列化し、
予め登録された医療に関する語彙である医療関連語彙に基づいて、前記文字列化された音声を示す音声文字から該医療関連語彙を抽出し、
前記医療関連語彙を記録する
ことを特徴とする医療情報管理方法。
【請求項１１】
さらに、前記医療機器の操作履歴情報と、前記抽出した前記医療関連語彙とを関連付けて記録する
ことを特徴とする請求項１０に記載の医療情報管理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ＴＶカメラ、気腹器、ソノサージ、電気メス、結石破砕装置、ＶＴＲ、プリンタ等の周辺機器を集中操作パネルやリモコンで集中制御することが可能で、またディクテーション機能により音声をテキストに変換して電子カルテ等に使用するコントローラーを持つ医療用システムに関する。
【背景技術】
【０００２】
近年では内視鏡を用いた外科手術が行われている。この内視鏡外科手術では、腹腔内を膨張させるために用いる気腹装置や手技を行うための処置装置等を用いて、ある生体組織の切除をしたり、または高周波焼灼装置を用いて止血をしたりする場合、内視鏡で観察しながらこれらの処置を行うことができる。
【０００３】
また、これら複数の各種機器を備えた内視鏡手術システムにおいて、複数の装置を容易に操作、制御することができ、またシステムの操作力性を向上させるため、例えば、表示パネル、遠隔操作装置、集中操作パネル、マイク等の機器を備えている（例えば、特許文献１、特許文献２。）。
【０００４】
表示パネルは、術者が滅菌域で各種機器の設定状態を確認するための表示手段であって、例えば液晶パネルなどである。遠隔操作装置は、術者が滅菌域で操作し各種機器の機能または設定値を変更するための遠隔操作手段であって、例えばリモコン（リモートコントローラ）である。集中操作パネルは、術者の指示に従って看護師等の補助者が非滅菌域で操作し各種機器の機能または設定値を変更するための各機器の操作スイッチをタッチパネルに設けた集ものである。マイクは、音声で各種機器を操作するために用いられる（例えば、特許文献２。）。
【０００５】
上記の通り、最近では、音声認識によりユーザの発音を認識し、接続機器の操作を行う機能（音声コマンド制御機能）や、術中・検査中に術者が発音した所見内容を音声認識しテキストデータに変換し電子カルテ等の作成に役立てるディクテーション（Ｄｉｃｔａｔｉｏｎ）機能を備える内視鏡システムが存在する。
【特許文献１】特開２００２−３３６１８４号公報
【特許文献２】特開２００１−３４４３４６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、従来用いられているディクテーション機能は、発話した言葉を全てテキスト変換してしまうため、不要な言葉（例えば、助手への指示の言葉等）等の無駄な情報が多くなってしまうという問題があった。
【０００７】
さて、図１１は、従来の内視鏡手術システムにより出力されるレポートの一例を示す。このレポートは、左側に日時が出力され、右側にその日時に対応してディクテーションされたテキストが出力されている。この場合、ディクテーションされたテキストは出力されても、実際にそのテキストの内容を行ったかどうかが明確でない。すなわち、従来、作成したテキストデータを他のデータと関連付ける事が出来ず、処置記録データとしての有用性が低かった。
【０００８】
上記課題に鑑み、本発明では、ディクテーション機能で作成したテキストデータに無駄な情報が少なく、また他のデータと関連付けることができ、処置記録データとしての有用性の高いテキストデータを作成する事が可能なディクテーション機能を有する医療用システムを提供する。
【課題を解決するための手段】
【０００９】
上記課題は、特許請求の範囲の請求項１に記載の発明によれば、複数の医療機器と、該医療機器と接続され該医療機器を制御する医療機器制御装置とから構成される医療用システムにおいて、音声が入力される音声入力手段と、前記音声入力手段により入力された前記音声を認識して、該音声を文字列化する音声文字列化手段と、医療に関する語彙である医療関連語彙が格納されている医療関連語彙格納手段と、前記医療関連語彙手段に格納されている前記医療関連語彙に基づいて、前記音声文字列化手段により文字列化された音声を示す音声文字から該医療関連語彙を抽出する医療語彙抽出手段と、を備えることを特徴とする医療用システムを提供することによって達成できる。
【００１０】
上記課題は、特許請求の範囲の請求項２に記載の発明によれば、前記音声文字列化手段は、前記音声入力手段により入力された前記音声を認識して、該音声を文字列化した文章から語彙を抽出することを特徴とする請求項１に記載の医療用システムを提供することによって達成できる。
【００１１】
上記課題は、特許請求の範囲の請求項３に記載の発明によれば、前記医療関連語彙格納手段は、前記医療機器の操作状況に関する語彙群、前記医療機器に関する語彙群、医療具に関する語彙群、及び手技に関する語彙群のうち少なくともいずれかの語彙群が格納されていることを特徴とする請求項１に記載の医療用システムを提供することによって達成できる。
【００１２】
上記課題は、特許請求の範囲の請求項４に記載の発明によれば、前記医療用システムは、さらに、前記医療機器の操作履歴情報が格納される操作履歴格納手段と、前記操作履歴情報と、前記医療関連語彙抽出手段により抽出した前記医療関連語彙とを関連付ける関連付け手段と、を備えることを特徴とする請求項１に記載の医療用システムを提供することによって達成できる。
【００１３】
上記課題は、特許請求の範囲の請求項５に記載の発明によれば、前記複数の医療機器のうち少なくとも１つは内視鏡であり、前記医療用システムは、内視鏡システムであることを特徴とする請求項１に記載の医療用システムを提供することによって達成できる。
【００１４】
上記課題は、特許請求の範囲の請求項６に記載の発明によれば、複数の医療機器を制御する医療機器制御装置において、音声が入力される音声入力手段と、前記音声入力手段により入力された前記音声を認識して、該音声を文字列化する音声文字列化手段と、医療に関する語彙である医療関連語彙が格納されている医療関連語彙格納手段と、前記医療関連語彙手段に格納されている前記医療関連語彙に基づいて、前記音声文字列化手段により文字列化された音声を示す音声文字から該医療関連語彙を抽出する医療語彙抽出手段と、を備えることを特徴とする医療機器制御装置を提供することによって達成できる。
【００１５】
上記課題は、特許請求の範囲の請求項７に記載の発明によれば、前記音声文字列化手段は、前記音声入力手段により入力された前記音声を認識して、該音声を文字列化した文章から語彙を抽出することを特徴とする請求項６に記載の医療機器制御装置を提供することによって達成できる。
【００１６】
上記課題は、特許請求の範囲の請求項８に記載の発明によれば、前記医療関連語彙格納手段は、前記医療機器の操作状況に関する語彙群、前記医療機器に関する語彙群、医療具に関する語彙群、及び手技に関する語彙群のうち少なくともいずれかの語彙群が格納されていることを特徴とする請求項６に記載の医療機器制御装置を提供することによって達成できる。
【００１７】
上記課題は、特許請求の範囲の請求項９に記載の発明によれば、前記医療機器制御装置は、さらに、前記医療機器の操作履歴情報が格納される操作履歴格納手段と、前記操作履歴情報と、前記医療関連語彙抽出手段により抽出した前記医療関連語彙とを関連付ける関連付け手段と、を備えることを特徴とする請求項６に記載の医療機器制御装置を提供することによって達成できる。
【００１８】
上記課題は、特許請求の範囲の請求項１０に記載の発明によれば、音声を入力し、前記音声を認識して、該音声を文字列化し、予め登録された医療に関する語彙である医療関連語彙に基づいて、前記文字列化された音声を示す音声文字から該医療関連語彙を抽出し、前記医療関連語彙を記録することを特徴とする医療情報管理方法を提供することによって達成できる。
【００１９】
上記課題は、特許請求の範囲の請求項１１に記載の発明によれば、さらに、前記医療機器の操作履歴情報と、前記抽出した前記医療関連語彙とを関連付けて記録することを特徴とする請求項１０に記載の医療情報管理方法を提供することによって達成できる。
【発明の効果】
【００２０】
本発明の医療用システムによれば、ディクテーション機能で作成したテキストデータに不要な語彙が無く、また、そのテキストデータを他の情報と連携させる事が出来る様になり、ディクテーション機能で作成したテキストデータの有用性が向上する。
【発明を実施するための最良の形態】
【００２１】
＜第１の実施形態＞
図１は、本実施形態における内視鏡手術システムの全体構成を示す。内視鏡手術システム１は、患者３０が横たわる患者ベッド１９の両側に、第１の内視鏡手術システム２及び第２の内視鏡手術システム３が配置されている。
【００２２】
これらの内視鏡手術システム２，３には、観察、検査、処置、記録などを行う複数の内視鏡周辺機器がそれぞれ第１の医療用トロリー１２及び第２の医療用トロリー２５に搭載されている。また、患者ベッド１９の周辺には、可動スタンドが配置され、その可動スタンドには内視鏡表示パネル２０が搭載されている。
【００２３】
第１の医療用トロリー１２には、最上段の天板のトロリートッププレート４１、中段に設けられたトロリー棚４０、最下段の底板部から構成されている。トロリートッププレート４１には、内視鏡表示パネル１１とシステムコントローラ２２が配置されている。トロリー棚４０にはＶＴＲ１７、ビデオプロセッサ１６、内視鏡光源装置１５が配置されている。底板部には、送気装置（気腹装置）１４、電気メス装置１３が配置されている。また、第１の医療用トロリー１２のアーム部には、集中操作パネル３３、集中表示パネル２１が配置されている。また、第１の医療用トロリー１２には、例えば不図示の超音波観測装置、またはプリンタ等を搭載しても良い。
【００２４】
集中操作パネル３３は、非滅菌域に配置され看護師等が各医療機器の操作を集中して行うものであって、図示しないマウスとタッチパネル等のポインティングデバイスを有したものであり、医療機器を集中管理・制御・操作するものである。
【００２５】
それぞれの医療機器は、図示しないシリアルインターフェイスケーブルを介してシステムコントローラ２２と接続され、双方向通信を行うことができる。また、システムコントローラ２２には、マイク５０を接続接続することができる。
【００２６】
システムコントローラ２２は、マイク５０から入力された音声を後述する音声認識回路４６及びＣＰＵ５５（図２参照）により認識する。そして、その音声を認識後にシステムコントローラ２２は、術者の音声により各機器を制御、もしくは認識結果をテキストとして表示したり、出力したりすることができる。
【００２７】
内視鏡光源装置１５は、照明光を伝送するライトガイドケーブルを介して第１の内視鏡３１に接続されている。内視鏡光源装置１５の照明光は、第１の内視鏡３１のライトガイドに供給されると、この第１の内視鏡３１の挿入部が刺入された患者３の腹部内の患部等を照明する。
【００２８】
この第１の内視鏡３１の接眼部には、撮像素子を備えた第１のカメラヘッド３１ａが装着されている。第１のカメラヘッド３１ａ内の撮像素子を用いて、第１の内視鏡３１の観察光学系による患部等の光学像が撮像される。そうすると、その撮像した光学像データがカメラケーブルを介してビデオプロセッサ１６に伝送される。その光学像データはビデオプロセッサ１６内の信号処理回路で信号処理されて、映像信号が生成される。そして、その映像信号がシステムコントローラ２２を介して内視鏡表示パネル１１に出力されて、内視鏡表示パネル１１に患部等の内視鏡画像が表示される。
【００２９】
システムコントローラ２２には、図示しないＭＯ等の外部媒体記録装置が内蔵されている。これにより、システムコントローラ２２は、外部記録媒体（ＭＯ）に記録された画像を読み出して、内視鏡表示パネル１１に出力して表示させることができる。また、システムコントコーラ２２には、図示しない病院内に設けられたネットワーク（院内ネット）と図示しないケーブルで接続されている。これにより、システムコントローラ２２は、院内ネット上の画像データ等を取得して第１の内視鏡表示パネル１１に出力して表示させることができる。
【００３０】
気腹装置１４には、例えばＣＯ2等のガスボンベ１８が接続されている。そして、この気腹装置１４から患者３０に延びた気腹チューブ１４ａを介して患者３０の腹部内にＣＯ2ガスを供給できる。
【００３１】
第２の医療用トロリー２５には、最上段の天板のトロリートッププレート４３、中段に設けられたトロリー棚４２、最下段の底板部から構成されている。トロリートッププレート４３には、内視鏡表示パネル３５と中継ユニット２８が配置されている。トロリー棚４２にはＶＴＲ６２、ビデオプロセッサ２７、内視鏡光源装置２６が配置されている。底板部には、その他の医療機器、例えば、超音波処置装置、砕石装置、ポンプ、シェーバ等が搭載されている。それぞれの機器は、図示しないケーブルで中継ユニット２８に接続され、双方向の通信が可能になっている。
【００３２】
内視鏡光源装置２６は、照明光を伝送するライトガイドケーブルを介して第２の内視鏡３２に接続されている。内視鏡光源装置２６の照明光が、第２の内視鏡３２のライトガイドに供給される。そうすると、この第２の内視鏡３２の挿入部が刺入された患者３０の腹部内の患部等を照明する。
【００３３】
この第２の内視鏡３２の接眼部には、撮像素子を備えた第２のカメラヘッド３２ａが装着されている。第２のカメラヘッド３２ａ内の撮像素子を用いて、第２の内視鏡３２の観察光学系による患部等の光学像が撮像される。そうすると、その撮像した光学像データがカメラケーブルを介してビデオプロセッサ２７に伝送される。その光学像データはビデオプロセッサ２７内の信号処理回路で信号処理されて、映像信号が生成される。そして、その映像信号がシステムコントローラ２２を介して内視鏡表示パネル３５に出力されて、内視鏡表示パネル３５に患部等の内視鏡画像が表示される。
【００３４】
システムコントローラ２２と中継ユニット２８は中継ケーブル２９で接続されている。
さらに、システムコントローラ２２は、術者が滅菌域から機器操作を行う術者用無線リモートコントローラ（以下、リモコンと記す）２４により制御することもできる。また、第１の医療用トロリー１２，第２の医療用トロリー２５には、その他の機器（例えば、プリンタ、超音波観測装置等）も搭載することができる。
【００３５】
図２は、図１の内視鏡手術システムを構成する各医療機器の接続関係を示すブロック図である。同図に示すように、集中操作パネル３３、リモコン２４、ＶＴＲ１７、ビデオプロセッサ１６、内視鏡光源装置１５、気腹装置１４、電気メス装置１３、プリンタ６０（図１では不図示）、及び超音波観察装置６１（図１では不図示）はそれぞれ通信ケーブル３８によりシステムコントローラ２２の通信インターフェース（以下、インターフェースをＩ／Ｆと称する）５１と接続されている。システムコントローラ２２とこれらの各装置間では、データの送受が行われる。
【００３６】
また、ＶＴＲ１７、内視鏡表示パネル１１、ビデオプロセッサ１６、プリンタ６０及び超音波観測装置６１は、映像ケーブル３９によりシステムコントローラ２２のディスプレイＩ／Ｆ５２と接続されており、映像信号を送受できるようになっている。
【００３７】
ＶＴＲ６２、ビデオプロセッサ２７、内視鏡光源装置２６、シェーバ６３（図１では不図示）、ポンプ６４（図１では不図示）、超音波処理装置６５（図１では不図示）は、通信ケーブル３８により中継ユニット２８に接続されている。中継ユニット２８とこれらの各装置間では、データの送受が行われる。また、内視鏡表示パネル３５、ビデオプロセッサ２７及びＶＴＲ６２は、映像ケーブル３９により中継ユニット２８と接続されており、映像信号を送受できるようになっている。
【００３８】
また、中継ユニット２８は、ケーブル２９（図１参照）によりシステムコントローラ２２と接続されている。中継ユニット２８は、ケーブル２９内の通信ケーブル３８を介してシステムコントローラ２２の通信Ｉ／Ｆ５１に接続されている。また、中継ユニット２８は、ケーブル２９内の映像ケーブル３９を介してシステムコントローラ２２のディスプレイＩ／Ｆ５２に接続されている。
【００３９】
システムコントローラ２２は、通信Ｉ／Ｆ５１、ディスプレイＩ／Ｆ５２の他に、集中操作パネルＩ／Ｆ５３、音声合成回路５７、ＣＰＵ５５、メモリ５９、スピーカ５８、音声認識回路５６、リモコンＩ／Ｆ５４を備えている。
【００４０】
音声認識回路５６は、マイク５０からの音声信号を認識するものである。音声認識回路５６は、Ａ／Ｄ変換器と、入力音声メモリと、ナビゲーションコマンドメモリ、ディクテーション用のメモリ等から構成される。Ａ／Ｄ変換器５１では、マイク５０からの音声信号をＡ／Ｄ変換する。入力音声メモリ５２では、Ａ／Ｄ変換器５１でＡ／Ｄ変換された入力音声データを記憶する。ナビゲーションコマンドメモリには、ＣＰＵ５５が入力音声メモリに記憶された音声データが所定のコマンドデータであるかどうかを比較するためのナビゲーションコマンドデータを格納している。ディクテーション用のメモリには、ＣＰＵ５５が入力音声メモリに記憶された音声データが所定のディクテーションテキストデータ（ディクテーションテキストデータ：音声をディクテーション機能により音声認識させてテキスト化したデータのことをいう。以下、同じ）と一致するかを比較するための音声文言テーブル（図４で詳述する）を格納している。
【００４１】
リモコンＩ／Ｆ５４は、リモコン２４とのデータの送受を行うものである。音声合成回路５７は、音声を合成しスピーカ５８より音声を発せさせるものである。集中操作パネルＩ／Ｆ５３は、集中操作パネル３３とのデータの送受を行うものである。これら各回路がＣＰＵ５５により制御されている。
【００４２】
また、システムコントローラ２２には外部記録媒体が接続可能となっており、ＣＰＵ５５より画像データを外部記録媒体（図示せず）に記録・再生できる。また、システムコントローラ２２は、不図示のネットワークＩ／Ｆを備えている。これにより、ＷＡＮ（ワールドエリアネットワーク）、ＬＡＮ（ローカルエリアネットワーク）、インターネット、イントラネット、エクストラネット等のネットワークにも接続することができ、これら外部のネットワークとの間でデータの送受ができる。
【００４３】
図３は、本実施形態におけるシステムコントローラ２２の内部構成の機能ブロック図を示す。制御部１０１は、ＣＰＵ５５に相当するものである。音声認識部１０２は、音声認識回路５６に相当するものである。音声文言テーブル格納部１０３は、音声認識回路５６に内蔵の記憶装置であり、上述したディクテーション用のメモリに相当する。記憶部１０４は、メモリ５９に相当するものである。これらは、バスによって接続されている。
【００４４】
音声認識部１０２では、マイク５０から入力された音声をテキスト化して、そのテキスト化された文字列から助詞、助動詞等を取り除き、文言（語彙）を抽出する。音声文言テーブル格納部１０３は、後述する図４のテキスト変換可能な音声文言テーブルが格納されている。制御部１０１では、音声認識部１０２で抽出された文言と音声文言テーブルに格納されている文言との比較処理を行う。記憶部１０４には、制御部１０１で比較処理された結果の情報が出力される。
【００４５】
図４は、本実施形態におけるテキスト変換可能な音声文言テーブル１１０の一例を示す。本実施形態では、音声文言のカテゴリの一例として、「日時」、「操作」、「所見」、「医療材料」、「手技」、「その他」を用いた。そして、各カテゴリには、テキスト変換の対象となる複数のテキスト化された文言が格納されている。
【００４６】
カテゴリ「日時」には、例えば、「年」、「月」、「日」、「時」、「分」、「秒」、月〜日曜日の各曜日（例えば、火等）、「曜日」、等の文言が格納されている。
カテゴリ「操作」には、例えば、「気腹」、「電気メス切開」、「電気メス凝固」、「ソノサージ切開」、「ソノサージ凝固」、等の文言が格納されている。
【００４７】
カテゴリ「所見」には、例えば、「出血量」、「血圧」、「心拍数」、等の文言が格納されている。
カテゴリ「医療材料」には、例えば、「トロッカー」、「麻酔」、「ラパロスコープ」、「鉗子」、「クリップ」、等の文言が格納されている。
【００４８】
カテゴリ「手技」には、例えば、「胆嚢摘出術」、「下結腸切除術」、等の文言が格納されている。
カテゴリ「その他」には、例えば、０〜９の数値、「多い」、「少ない」、「高い」、「低い」、「正常」、「開始」、「終了」、「挿入」、「個」、等の文言が格納されている。
【００４９】
これらは、あくまでも一例であり、様々な症例に対応する医療用語、処置の進行にかかわる文言、周辺環境に関する文言、または当該システムを使用している施設独自の用語等、用途に応じた文言を格納しても良い。また、ディクテーションテキストデータ共に、ディクテーションした時刻（例えば、システムコントローラ２２のシステム時刻等）を記録してもよい。
【００５０】
図５は、本実施形態におけるテキスト化した音声から所定の文言を抽出するフローを示す。まず、発話があるまで当該フローは待ち状態となっている（ステップ１で「Ｎｏ」へ進む。以下、ステップをＳと称する）。発話があると（Ｓ１で「Ｙｅｓ」へ進む。）、マイク５０を介して音声が音声認識部１０２に入力される。
【００５１】
音声認識部１０２では、入力された音声を文字列に変換する（以下、ディクテーションテキストという）（Ｓ２）。ここでは、マイク５０から入力された音声をテキスト化して、そのテキスト化された文字列（ディクテーションテキスト）から助詞、助動詞等を取り除いた文言（語彙）のみを抽出する。音声認識部１０２は、抽出した文言を制御部へ出力する。
【００５２】
次に、制御部１０１では、Ｓ２で抽出された文言と、音声文言テーブル１１０に登録されている文言を照合する（Ｓ３）。Ｓ３での比較の結果、一致する文言があれば（Ｓ４で「Ｙｅｓ」へ進む）、Ｓ２で抽出された文言を記憶部１０４に記憶する（Ｓ５）。Ｓ３での比較の結果、一致しなければ（Ｓ４で「Ｎｏ」へ進む）、そのＳ２で抽出した文言を破棄する（Ｓ６）。
【００５３】
なお、Ｓ２、Ｓ３において所定の文言を抽出する方法は、これに限定されず、例えば、抽出未処理のディクテーションテキストについて、音声文言テーブルに格納された各文言と文字列比較することにより、所定の文言を抽出しても良い。また、本フローは発話の度に実行してもよいし、または、連続する発話を音声入力メモリに一旦格納し、所定時間経過後にまとめて実行するようにしてもよい。
【００５４】
図６は、本実施形態における入力される音声に基づいて記憶部に記憶されたテキストデータを示す。図６（ａ）は、手術室内でのドクターの発話の一例である。この発話がマイク５０に入力される。図６（ｂ）は、図５のフローに基づいて、記憶部１０４にファイルとして出力されたテキストデータを示す。
【００５５】
図６（ａ）では、「えー、」、「現在」、「ただいまより、」、「を」、「します。」、「皆さん準備はよいですか？」等の不要な文言があるが、図６（ｂ）ではそれらが除去され、「２００４年９月８日９時３０分」、「胆嚢摘出術」、「開始」等の必要な文言のみ記録されている。
【００５６】
以上より、ディクテーション機能によりドクター等の発話した文字列から無駄な文言が無くなり（すなわち、必要な文字列のみ抽出される）、短いテキストデータとなる為、手術内容がわかり易く、修正等も容易に行え、有用性が向上する。
【００５７】
また、このテキストデータをプリントアウトする場合、テキストのフォントや色をカテゴリに基づいて変更することで、所定のカテゴリや文言を識別できるようにしても良い。例えば、「開始」という文言のみを赤色で表示したりしてもよい。
【００５８】
また、このテキストデータに基づいて、消耗品使用状況や、課金対象診察行為等を検索し、手術にかかったコストを自動計算するようにしてもよい。例えば、図６（ｂ）でいえば、「胆嚢摘出術」からこの課金対象診察行為に対するコストを算出することができ、また、「電気メス切開」、「トロッカー」、「気腹」、「鉗子」等の文言から機器や処置具の使用状況を把握することができる。
【００５９】
＜第２の実施形態＞
本実施形態では、第１の実施形態にて作成されたディクテーションテキストデータに操作ログを追記してレポート出力する場合について説明する。
【００６０】
図７は、本実施形態におけるシステムコントローラ２２の内部構成の機能ブロック図を示す。図７は、図３のシステムコントローラ２２にログ記録部１２０を追加したものである。ログ記録部１２０には、図１及び図２で説明した各種医療機器（例えば、気腹装置１４、電気メス装置１３等）の動作に関するログデータが逐次記録されている。ログデータの内容は、少なくとも医療機器がどのような動作をしたかという情報とその動作をした日時が含まれる。
【００６１】
制御部１０１では、第１の実施形態で抽出したディクテーションテキストデータとそのディクテーションした日時情報とを共に出力したファイルを生成し、さらに、その日時に対応する医療機器の操作ログをそのファイルに追加する処理を行う。
【００６２】
図８は、本実施形態において、出力されたレポートの一例を示す。レポート１３０の左側の列１３０ａには、日付及び時刻が出力される。レポート１３０の中央の列１３０ｂには、その日付及び時刻に対応するディクテーションテキスト（図５のフローによる処理後のディクテーションテキスト）が出力される。レポート１３０の右側の列１３０ｃには、その日付及び時刻に対応する操作ログ（医療機器を操作したときのログデータ）が出力される。
【００６３】
このレポート１３０を見てみると、例えば、日付／時刻「２００４／０７／２７  １１：３０ＡＭ」にディクテーションテキスト「電気メス切開」（ここでは、電気メスを用いて開腹することを意味する）が出力されている。さらに、操作ログとして、「電気メスモノポーラ出力」が出力されている。
【００６４】
日付／時刻とディクテーションテキストのみでは、実際にディクテーションテキストの内容通りの操作を行ったかどうかは不明であるが、本実施形態のように、その裏づけとなる医療機器の操作ログを日付／時刻に対応付けて同一ファイルに出力することができる。
【００６５】
図９は、本実施形態におけるテキスト化した音声から所定の文言を抽出し、さらに時刻情報と共に医療機器の操作ログも加えたレポート１３０を作成するフローを示す。まず、発話があると（Ｓ１１で「Ｙｅｓ」へ進む。）、マイク５０を介して音声が音声認識部１０２に入力される。発話がない場合（Ｓ１１で「Ｎｏ」へ進む。）、Ｓ１７の処理へ進む。
【００６６】
音声認識部１０２では、入力された音声を文字列に変換する（Ｓ１２）。ここでは、マイク５０から入力された音声をテキスト化して、そのテキスト化された文字列から助詞、助動詞等を取り除いた文言（語彙）のみを抽出する。
【００６７】
次に、制御部１０１では、Ｓ１２で抽出された文言と、音声文言テーブル１１０に登録されている文言を比較する（Ｓ１３）。Ｓ１３での比較の結果、一致する文言があれば（Ｓ１４で「Ｙｅｓ」へ進む）、Ｓ１２で抽出された文言を記憶部１０４に記憶する（Ｓ１５）。ここでは、記憶部１０４にある所定のファイル（レポートファイル）１３０にＳ１２で抽出された文言を日時情報（例えば、追記したときのシステム時刻等）とともに追記していく。
【００６８】
Ｓ１３での照合の結果、一致しなければ（Ｓ１４で「Ｎｏ」へ進む）、そのＳ１２で抽出した文言を破棄する（Ｓ１６）。
Ｓ１１で「Ｎｏ」へ進んだ場合、またはＳ１５もしくはＳ１６の処理が終了した場合、制御部１０１は医療機器の操作ログが逐次記録されたログファイルをログ記録部１２０から読み出して、その読み出した操作ログファイルの操作ログを記憶部１０４に作成されているレポートファイル１３０に書き込む（Ｓ１７）。このとき、既に書き込まれているＳ１２で抽出された文言が書き込まれている場合、この文言の時間軸と操作ログの時間軸とをあわせるようにして書き込むようにする。このようにすることにより、リアルタイムでレポート１３０を出力することができる。これを発話の度に繰り返す。
【００６９】
図９のフローでは、音声の有無に関わらず、操作ログは逐次レポートファイル１３０に追記される。例えば、図８のレポート１３０において、第１行目には、「２００４／０７／２７  １１：３０ＡＭ」、「電気メス切開」、「電気メスモノポーラ出力」というように、日付／時刻、ディクテーションテキスト、操作ログの全てが出力されている。この行は、Ｓ１１→Ｓ１２→Ｓ１３→Ｓ１４→Ｓ１５→Ｓ１７の経路で処理されて出力されたことを示している。また、２行目には、「２００４／０７／２７  １１：３１ＡＭ」、「電気メスモノポーラ出力停止」というように、日付／時刻、操作ログの全てが出力されて、ディクテーションテキストが出力されていない。この行は、Ｓ１１→Ｓ１７、またはＳ１１→Ｓ１２→Ｓ１３→Ｓ１４→Ｓ１６→Ｓ１７の経路で処理されて出力されたことを示している。
【００７０】
図１０は、図９のフローの変形例である。図９ではリアルタイムでレポート１３０を出力する場合のフローであるが、図１０ではディクテーションテキストファイルと操作ログとを別々に記憶しておき、所定の操作をした場合に、それらからレポート１３０を作成する場合のフローである。
【００７１】
まず、発話があると（Ｓ２１で「Ｙｅｓ」へ進む。）、マイク５０を介して音声が音声認識部１０２に入力される。発話がない場合（Ｓ２１で「Ｎｏ」へ進む。）、Ｓ２７の処理へ進む。
【００７２】
音声認識部１０２では、入力された音声を文字列に変換する（Ｓ２２）。ここでは、マイク５０から入力された音声をテキスト化して、そのテキスト化された文字列から助詞、助動詞等を取り除いた文言（語彙）のみを抽出する。
【００７３】
次に、制御部１０１では、Ｓ２２で抽出された文言と、音声文言テーブル１１０に登録されている文言を比較する（Ｓ２３）。Ｓ２３での比較の結果、一致する文言があれば（Ｓ２４で「Ｙｅｓ」へ進む）、Ｓ２２で抽出された文言を記憶部１０４に記憶する（Ｓ２５）。ここでは、記憶部１０４にある所定のファイル（レポートファイル）１３０にＳ２２で抽出された文言を日時情報（例えば、追記したときのシステム時刻等）とともに追記していく。
【００７４】
Ｓ２３での照合の結果、一致しなければ（Ｓ２４で「Ｎｏ」へ進む）、そのＳ２２で抽出した文言を破棄する（Ｓ２６）。
Ｓ２１で「Ｎｏ」へ進んだ場合、またはＳ２５もしくはＳ２６の処理が終了した場合、ＣＰＵは、集中操作パネル３３上のレポート出力ボタンが押下されたか否か判断する（Ｓ２７）。レポート出力ボタンが押下されるまで（Ｓ２７で「Ｎｏ」へ進む）、Ｓ２１〜Ｓ２７の処理が繰り返される。
【００７５】
そして、レポート出力ボタンが押下されると（Ｓ２７で「Ｙｅｓ」へ進む）、記憶部１０４に格納されているディクテーションテキストデータとログ記録部１２０に記録されているログデータとを結合したレポートデータを作成する（Ｓ２８）。
【００７６】
以上より、第１の実施形態にて作成されたテキストデータに操作ログを追記してレポート出力する事により、正確なレポートが作成できる。
【図面の簡単な説明】
【００７７】
【図１】第１の実施形態における内視鏡手術システムの全体構成を示す図である。
【図２】図１の内視鏡手術システムを構成する各医療機器の接続関係を示すブロック図である図である。
【図３】第１の実施形態におけるシステムコントローラ２２の内部構成の機能ブロック図を示す図である。
【図４】第１の実施形態におけるテキスト変換可能な音声文言テーブル１１０の一例を示す図である。
【図５】第１の実施形態におけるテキスト化した音声から所定の文言を抽出するフローを示す図である。
【図６】第１の実施形態における入力された音声に基づいて記憶部に記憶されるテキストデータを示す図である。
【図７】第２の実施形態におけるシステムコントローラ２２の内部構成の機能ブロック図を示す図である。
【図８】第２の実施形態において出力されたレポートの一例を示す図である。
【図９】第２の実施形態におけるテキスト化した音声から所定の文言を抽出し、さらに時刻情報と共に医療機器の操作ログも加えたレポートを作成するフローを示す図である。
【図１０】図９のフローの変形例を示す図である。
【図１１】従来の内視鏡手術システムにより出力されるレポートの一例を示す図である。
【符号の説明】
【００７８】
１      内視鏡手術システム
２      第１の内視鏡手術システム
３      第２の内視鏡手術システム
１１    内視鏡表示パネル
１２    第１の医療用トロリー
１３    電気メス装置
１４    送気装置（気腹装置）
１５    内視鏡光源装置
１６    ビデオプロセッサ
１７    ＶＴＲ
１８    ガスボンベ
１９    患者ベッド
２０    内視鏡表示パネル
２１    集中表示パネル
２２    システムコントローラ
２４    リモコン
２５    第２の医療用トロリー
２６    内視鏡光源装置
２７    ビデオプロセッサ
２８    中継ユニット
２９    ケーブル
３０    患者
３１    第１の内視鏡
３１ａ  第１のカメラヘッド
３２    第２の内視鏡
３２ａ  第２のカメラヘッド
３３    集中操作パネル
３５    内視鏡表示パネル
３８    通信ケーブル
３９    映像ケーブル
４０    トロリー棚
４１    トロリートッププレート
４２    トロリー棚
４３    トロリートッププレート
５０    マイク
５１    通信Ｉ／Ｆ
５２    ディスプレイＩ／Ｆ
５３    集中操作パネルＩ／Ｆ
５４    リモコンＩ／Ｆ
５５    ＣＰＵ
５６    音声認識回路
５７    音声合成回路
５８    スピーカ
５９    メモリ
６０    プリンタ
６１    超音波観察装置
６２    ＶＴＲ
６３    シェーバ
６４    ポンプ
６５    超音波処理装置
１０１  制御部
１０２  音声認識部
１０３  音声文言テーブル格納部
１０４  記憶部
１１０  音声文言テーブル
１２０  ログ記録部
【図１】
2006218230.tif 000003
【図２】
2006218230.tif 000004
【図３】
2006218230.tif 000005
【図４】
2006218230.tif 000006
【図５】
2006218230.tif 000007
【図６】
2006218230.tif 000008
【図７】
2006218230.tif 000009
【図８】
2006218230.tif 000010
【図９】
2006218230.tif 000011
【図１０】
2006218230.tif 000012
【図１１】
2006218230.tif 000013