(57)【要約】【課題】医師等のユーザが必要な情報を適切に表示することを目的とする。【解決手段】撮影手段により撮影された、患者の撮影画像に基づいて、患者の部位を特定する部位特定手段と、部位の現実空間における部位位置を特定する位置特定手段と、部位特定手段により特定された部位に関する患者情報を、表示手段と撮影手段の位置関係に基づいて、現実空間の部位位置に対応する表示手段の位置に関連付けて、表示手段に表示する表示処理手段とを有する。【選択図】図１
2017016347.tif 000002
【特許請求の範囲】
【請求項１】
撮影手段により撮影された、患者の撮影画像に基づいて、前記患者の部位を特定する部位特定手段と、
前記部位の現実空間における部位位置を特定する位置特定手段と、
前記部位特定手段により特定された部位に関する患者情報を、前記表示手段と前記撮影手段の位置関係に基づいて、前記現実空間の前記部位位置に対応する表示手段の位置に関連付けて、前記表示手段に表示する表示処理手段と
を有することを特徴とする情報処理装置。
【請求項２】
前記表示手段は、透過型であり、
前記表示処理手段は、前記患者情報を、前記表示手段を透過してユーザにより視認される前記現実空間の前記部位位置に関連付けて前記表示手段に表示することを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記表示処理手段は、前記患者情報と、前記患者情報と前記部位位置とを関連付ける関連情報と、を表示することにより、前記患者情報を前記部位位置に関連付けて表示することを特徴とする請求項１又は２に記載の情報処理装置。
【請求項４】
前記表示処理手段は、前記患者情報を前記部位位置を基準として定まる位置に表示することにより、前記患者情報を前記部位位置に関連付けて表示することを特徴とする請求項１又は２に記載の情報処理装置。
【請求項５】
前記表示処理手段は、前記部位位置と重ならない位置に前記患者情報を表示することを特徴とする請求項１乃至４何れか１項に記載の情報処理装置。
【請求項６】
前記表示処理手段は、前記部位特定手段により特定された部位に関する患者情報以外の患者情報を、前記部位位置に関連付けない形式で表示することを特徴とする請求項１乃至５何れか１項に記載の情報処理装置。
【請求項７】
医師の診療領域を特定する診療領域特定手段と、
前記患者の患者情報の中から、前記診療領域に関する患者情報を抽出する抽出手段と
をさらに有し、
前記表示処理手段は、前記抽出手段により抽出された前記患者情報を表示することを特徴とする請求項１乃至６何れか１項に記載の情報処理装置。
【請求項８】
前記患者の存在を確認し、かつ前記患者を識別する患者確認手段をさらに有し、
前記表示処理手段は、前記患者が確認されたことを条件として、前記患者情報を表示することを特徴とする請求項１乃至７何れか１項に記載の情報処理装置。
【請求項９】
前記患者確認手段は、前記撮影画像における画像認識により前記患者の存在を確認し、かつ前記患者を識別することを特徴とする請求項８に記載の情報処理装置。
【請求項１０】
ユーザからの患者の識別情報を受け付ける受付手段をさらに有し、
前記患者確認手段は、前記識別情報に基づいて、前記患者の存在を確認し、かつ前記患者を識別することを特徴とする請求項８に記載の情報処理装置。
【請求項１１】
前記患者と共に予め定められた機材の存在を確認する機材確認手段をさらに有し、
前記表示処理手段は、前記患者が確認され、かつ前記機材が確認されたことを条件として、前記患者情報を表示することを特徴とする請求項８乃至１０何れか１項に記載の情報処理装置。
【請求項１２】
予め定められたキーワードを認識するキーワード認識手段をさらに有し、
前記表示処理手段は、前記キーワードが認識されたことを条件として、前記患者情報を表示することを特徴とする請求項１乃至７何れか１項に記載の情報処理装置。
【請求項１３】
撮影手段により撮影された患者の撮影画像に基づいて、前記患者の部位を特定する部位特定手段と、
前記部位の撮影画像における部位位置を特定する位置特定手段と、
前記部位特定手段により特定された部位に関する患者情報を、前記撮影画像上の前記部位位置に関連付けて、前記撮影画像上に重畳して表示手段に表示する表示処理手段と
を有することを特徴とする情報処理装置。
【請求項１４】
撮影手段により撮影された、患者の撮影画像に基づいて、前記患者の部位を特定する部位特定手段と、
前記部位の現実空間における部位位置を特定する位置特定手段と、
前記部位特定手段により特定された部位に関する患者情報を、前記表示手段と前記撮影手段の位置関係に基づいて、前記現実空間の前記部位位置に対応する表示手段の位置に関連付けて、前記表示手段に表示する表示処理手段と
を有することを特徴とする情報処理システム。
【請求項１５】
撮影手段により撮影された患者の撮影画像に基づいて、前記患者の部位を特定する部位特定手段と、
前記部位の撮影画像における部位位置を特定する位置特定手段と、
前記部位特定手段により特定された部位に関する患者情報を、前記撮影画像上の前記部位位置に関連付けて、前記撮影画像上に重畳して表示手段に表示する表示処理手段と
を有することを特徴とする情報処理システム。
【請求項１６】
情報処理装置が実行する情報処理方法であって、
撮影手段により撮影された、患者の撮影画像に基づいて、前記患者の部位を特定する部位特定ステップと、
前記部位の現実空間における部位位置を特定する位置特定ステップと、
前記部位特定ステップにおいて特定された部位に関する患者情報を、前記表示手段と前記撮影手段の位置関係に基づいて、前記現実空間の前記部位位置に対応する表示手段の位置に関連付けて、前記表示手段に表示する表示処理ステップと
を含むことを特徴とする情報処理方法。
【請求項１７】
情報処理装置が実行する情報処理方法であって、
撮影手段により撮影された患者の撮影画像に基づいて、前記患者の部位を特定する部位特定ステップと、
前記部位の撮影画像における部位位置を特定する位置特定ステップと、
前記部位特定ステップにおいて特定された部位に関する患者情報を、前記撮影画像上の前記部位位置に関連付けて、前記撮影画像上に重畳して表示手段に表示する表示処理ステップと
を含むことを特徴とする情報処理方法。
【請求項１８】
コンピュータを、
撮影手段により撮影された、患者の撮影画像に基づいて、前記患者の部位を特定する部位特定手段と、
前記部位の現実空間における部位位置を特定する位置特定手段と、
前記部位特定手段により特定された部位に関する患者情報を、前記表示手段と前記撮影手段の位置関係に基づいて、前記現実空間の前記部位位置に対応する表示手段の位置に関連付けて、前記表示手段に表示する表示処理手段と
として機能させるためのプログラム。
【請求項１９】
コンピュータを、
撮影手段により撮影された患者の撮影画像に基づいて、前記患者の部位を特定する部位特定手段と、
前記部位の撮影画像における部位位置を特定する位置特定手段と、
前記部位特定手段により特定された部位に関する患者情報を、前記撮影画像上の前記部位位置に関連付けて、前記撮影画像上に重畳して表示手段に表示する表示処理手段と
として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置、情報処理方法及びプログラムに関する。
【背景技術】
【０００２】
従来、医療現場の電子化の普及により、患者に関する画像や文書等の大量な情報をＰＣ等のデバイスを使って管理できるようになった。例えば、診察室に設置されたディスプレイに患者の情報を表示し、医師は、表示を確認した上で、視線を再び患者に戻して処置にあたるといった、患者の情報の利用が考えられる。このとき、医師が視線を動かすモーションが発生し、さらに表示された情報と患者を対応付ける作業が発生する等の問題がある。これに対し、特許文献１には、医師が装着型ディスプレイを装着し、医師の視界に含まれていない機器の情報を装着型ディスプレイに表示する技術が開示されている。これにより、医師は視界を患者から逸らすことなく、その場では見えない機器の情報を見ることができる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１５−１９６７８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１の技術では、患者と同時に機器の情報を見ることができるが、機器に表示されている情報以外は表示することができないといった問題がある。また、例えば、同一の空間に複数の患者と測定機器が存在している場合、医師が担当する患者以外の患者について測定された情報が表示され得るといった問題がある。
【０００５】
本発明はこのような問題点に鑑みなされたもので、医師等のユーザが必要な情報を適切に表示することを目的とする。
【課題を解決するための手段】
【０００６】
そこで、本発明は、撮影手段により撮影された、患者の撮影画像に基づいて、前記患者の部位を特定する部位特定手段と、前記部位の現実空間における部位位置を特定する位置特定手段と、前記部位特定手段により特定された部位に関する患者情報を、前記表示手段と前記撮影手段の位置関係に基づいて、前記現実空間の前記部位位置に対応する表示手段の位置に関連付けて、前記表示手段に表示する表示処理手段とを有することを特徴とする。
【発明の効果】
【０００７】
本発明によれば、医師等のユーザが必要な情報を適切に表示することができる。
【図面の簡単な説明】
【０００８】
【図１】医療システムを示す図である。
【図２】表示処理を示すフローチャートである。
【図３】情報処理装置１００の利用形態の説明図である。
【図４】拡張現実の表示例を示す図である。
【図５】他の例に係る表示装置の表示例を示す図である。
【図６】第２の実施形態に係る表示処理を示すフローチャートである。
【図７】機器と患者の関係を示す図である。
【図８】第３の実施形態に係る表示処理を示すフローチャートである。
【発明を実施するための形態】
【０００９】
（第１の実施形態）
以下、本発明の実施形態について図面に基づいて説明する。図１は、第１の実施形態に係る情報処理システムとしての医療システムを示す図である。医療システムは、情報処理装置１００と、サーバ装置１１０とを備えている。情報処理装置１００及びサーバ装置１１０は、ネットワーク１２０を介して接続している。情報処理装置１００は、透過型の表示部を有する装着型の装置であり、装着者である医師等のユーザ（以下、単にユーザという場合がある）に、現実空間に情報を重畳した拡張現実を提供する装置である。なお、以下の実施形態においてはユーザが医師である場合を例に説明を行うが、ユーザは医師に限定されるものではなく、医療従事者であってもよい。情報処理装置１００としては、例えば眼鏡型の装置や、ヘッドマウントディスプレイのような頭部装着型の装置が挙げられる。ユーザは、表示部を透過して、表示部に表示された情報が現実空間に重畳された拡張現実を視認することができる。本実施形態においては、情報処理装置１００は、表示部に、診察中の患者に関する診療内容や検査結果等の患者情報を表示する。サーバ装置１１０は、患者情報を記憶、管理する。
【００１０】
なお、本実施形態においては、患者情報は、サーバ装置１１０に記憶されており、情報処理装置１００は、サーバ装置１１０から適宜患者情報を受信し、これを表示するものとする。ただし、患者情報は、医療システムのいずれかの装置が記憶していればよく、患者情報を記憶する装置は、サーバ装置１１０に限定されるものではない。他の例としては、情報処理装置１００が患者情報を記憶、管理していてもよい。また、他の例としては、医療システムは、患者情報の記憶、管理を複数の装置に分散してもよい。
【００１１】
情報処理装置１００は、ＣＰＵ１０１と、メモリ１０２と、記憶装置１０３と、表示装置１０５と、撮影部１０６と、マイク１０７と、通信Ｉ／Ｆ部１０８とを有している。これら各部は、バス１０９により相互に接続されている。ＣＰＵ１０１は、記憶装置１０３に記憶されているプログラム１０４を実行することにより、後述する各種機能を実行する。メモリ１０２は、ＣＰＵ１０１が記憶装置１０３から読み出したプログラムやデータを一時的に記憶する。また、メモリ１０２は、ＣＰＵ１０１が各種のプログラムを実行するための領域としても利用される。
【００１２】
記憶装置１０３は、オペレーティングシステム（ＯＳ）や各種プログラムや制御プログラム、データ等を記憶する。なお、制御用のプログラム１０４は記憶装置１０３の一部データとして格納されている。プログラムとしては、各種認識処理や患者情報の表示に係るプログラム等が挙げられる。データとしては、患者に関する画像や文書等が挙げられる。後述する情報処理装置１００の機能や処理は、ＣＰＵ１０１が記憶装置１０３に格納されているプログラムを読み出し、このプログラムを実行することにより実現されるものである。表示装置１０５は、各種情報を表示する。表示装置１０５は、シースルー型の視界を妨げない透過型の表示装置であるものとする。撮影部１０６は、画像を撮影する。マイク１０７は、音声を集音する。
【００１３】
情報処理装置１００は、撮影部１０６及びマイク１０７を介して、ユーザからの指示を受け付ける。すなわち、撮影部１０６及びマイク１０７は、入力部として機能する。具体的には、ユーザは、所定のジェスチャや発話により情報処理装置１００への指示入力を行う。これに対し、情報処理装置１００は、撮影部１０６により撮影された画像に基づいて、ジェスチャ認識により指示を受け付け、また、マイク１０７により集音された音声に対する音声認識により指示を受け付ける。なお、情報処理装置１００は、撮影部１０６及びマイク１０７以外にも、物理的なボタン等の入力装置を備えてもよい。
【００１４】
次に、情報処理装置１００が、現実空間に存在するオブジェクトに情報を重畳して表示するための構成及び処理について説明する。撮影部１０６は、情報処理装置１００を装着するユーザが、表示装置１０５を透過して現実空間を見る際の視線の方向と、撮影方向とが略一致するような、位置及び向きに設けられているものとする。これにより、撮影部１０６は、ユーザが見ている現実空間の画像を撮影することができる。なお、他の例としては、撮影部１０６は、撮影方向と装着者の視線方向とが一定の関係になるように設置されていてもよい。そして、撮影部１０６はオブジェクトを含む画像を撮影し、ＣＰＵ１０１は、撮影画像におけるオブジェクトの位置、情報処理装置１００の位置や情報処理装置１００の向き（ユーザの視線方向）に基づいて、オブジェクトの現実空間における位置を特定する。そして、ＣＰＵ１０１は、現実空間におけるオブジェクトの位置に基づいて、現実空間のオブジェクトの位置に対応する表示装置１０５上の位置を特定し、特定した表示装置１０５上の位置に情報が配置された表示情報を生成し、これを表示装置１０５に表示する。
【００１５】
図２は、情報処理装置１００による表示処理を示すフローチャートである。図３は、情報処理装置１００の利用形態の説明図である。図３に示すように、医師Ａは、患者Ｂの診察時、情報処理装置１００を装着する。そして、情報処理装置１００の表示装置１０５越しに、患者Ｂを見る。このとき、表示装置１０５には、患者Ｂの患者情報が表示される。したがって、医師Ａは、表示装置１０５越しに患者Ｂを見るのと同時に、患者Ｂの患者情報を確認することができる。以下、この時の情報処理装置１００の処理について説明する。
【００１６】
Ｓ２００において、情報処理装置１００のＣＰＵ１０１は、ユーザである医師が担当する診療領域を特定する（診療領域特定処理）。ここで、診療領域とは、医師が診察可能な診療科を示す情報である。なお、診療領域は、診療内容を特定する情報であればよくその分類方法は実施形態に限定されるものではない。例えば内科のうち特定の部位、特定の疾病、といったように、診療領域をさらに細分化してもよい。ＣＰＵ１０１は、具体的には、ユーザの発話から診療領域の入力指示を受け付け、入力指示に従い、診療領域を特定する。また、他の例としては、記憶装置１０３が予めユーザの識別情報に対応付けて診療領域を記憶しており、ＣＰＵ１０１は、生体認証等に基づいて、ユーザを識別し、識別したユーザに対応付けられている診療領域を特定してもよい。
【００１７】
次に、Ｓ２０１において、ＣＰＵ１０１は、患者の存在を確認し、かつ患者を識別するまで待機する。そして、ＣＰＵ１０１は、患者の存在を確認し、かつ患者を識別すると（Ｓ２０１でＹＥＳ）、処理をＳ２０２へ進める。ＣＰＵ１０１は、具体的には、入力部を介して患者の識別情報（患者ＩＤ）を受け付けた場合に（受付処理）、患者の存在を確認し、かつ患者を識別したと判断することとする。なお、他の例としては、ＣＰＵ１０１は、撮影部１０６により撮影された撮影画像における画像認識処理により、患者の存在を確認し、かつ画像特徴量等から患者を識別してもよい。ここで、Ｓ２０１の処理は、患者確認処理の一例である。
【００１８】
Ｓ２０２において、ＣＰＵ１０１は、サーバ装置１１０に記憶されている患者情報のうち、Ｓ２０１において識別された患者に対応する患者情報で、かつＳ２００において特定された診療領域に関する患者情報を優先的に抽出（抽出処理）、受信する。次に、Ｓ２０３において、ＣＰＵ１０１は、撮影画像に対する画像認識処理により患者の部位を特定する（部位特定処理）。本実施形態においては、ＣＰＵ１０１は、頭部、上半身、下半身の３つの部位を特定することとするが、特定対象の部位は、これに限定されるものではない。他の例としては、ＣＰＵ１０１は、腕、首といったように、さらに細かい単位で部位を特定してもよい。
【００１９】
次に、Ｓ２０４において、ＣＰＵ１０１は、撮影画像において、部位が特定された部位位置に基づいて、現実空間における部位位置を特定する（位置特定処理）。なお、ＣＰＵ１０１は、撮影方向、視線方向及び情報処理装置１００の位置等の情報から、撮影画像上の位置と、現実空間上の位置との対応関係に基づいて、撮影画像上の部位位置を、現実空間における部位位置に変換するものとする。例えば、ＣＰＵ１０１は、撮影方向の一例である撮影部１０６の位置と情報処理装置１００の位置の一例である表示装置１０５の位置との関係に基づいて、現実空間における部位位置を特定する。より具体的には、ＣＰＵ１０１は、撮影部１０６の位置と表示装置１０５の位置との関係に基づいて、現実空間における表示装置１０５上での部位位置を特定する。
【００２０】
次に、Ｓ２０５において、ＣＰＵ１０１は、Ｓ２０２において抽出された各患者情報が、いずれの部位に対応するものかを特定する。なお、患者情報は、部位を示す情報を含んでおり、ＣＰＵ１０１は、部位を示す情報から、患者情報がいずれの部位に関する情報であるかを特定することとする。なお、患者情報が含む部位の単位はＳ２０３において特定される部位の単位と一致しない場合もある。この場合も、ＣＰＵ１０１は、予め定められた対応関係に従い、例えば肺に関する患者情報であれば、部位として上半身を特定する。
【００２１】
そして、ＣＰＵ１０１は、各患者情報を、現実空間における部位位置に対応する表示装置１０５の位置に関連付けて表示する（表示処理）。なお、ＣＰＵ１０１は、表示装置１０５に表示する患者情報と、現実空間に存在する患者の部位との位置合わせには、表示装置１０５と撮影部１０６との間の位置関係を利用することができる。また、ＣＰＵ１０１は、いずれの部位とも関連しない患者情報については、部位に関連付けない形式で表示する。このように、ＣＰＵ１０１は、患者の存在を確認し、かつ患者を識別したことを条件とし、条件に合致したタイミングで、患者情報を現実空間に重畳して表示する。なお、撮影部１０６により動画が撮影される場合には、ステップＳ２０３−２０５が繰返し行われることとしてもよい。
【００２２】
図４は、表示装置１０５を介してユーザが視認する拡張現実の表示例を示す図である。表示装置１０５には、ユーザが表示装置１０５越しに視認する患者Ｂの各部位の部位位置に対応する表示装置１０５上の位置を基準に、吹き出し４００ａ，４００ｂが表示されている。さらに、各吹き出し４００ａ，４００ｂの中には、部位に対応する患者情報４０１ａ，４０１ｂが示されている。例えば、吹き出し４００ａは、患者Ｂの頭部の部位位置に対応する表示装置１０５上の位置を基点として表示されており、この吹き出し４００ａに示される患者情報４０１ａは、頭部に関する患者情報である。また、吹き出し４００ｂは、患者Ｂの上半身の部位位置に対応する表示装置１０５上の位置を基点として表示されており、この吹き出し４００ｂに示される患者情報４０１ｂは、例えば肺のレントゲン写真等、上半身に関する患者情報である。なお、吹き出し４００ａ，４００ｂは、患者情報と部位位置とを関連付ける関連情報の一例である。
【００２３】
また、枠４０２には、いずれの部位にも対応しない患者情報４０３が表示されている。このように、ＣＰＵ１０１は、いずれの部位にも対応しない患者情報については、吹き出し４００ａ，４００ｂと表示態様の異なる枠４０２に表示する。すなわち、ＣＰＵ１０１は、部位特定処理（Ｓ２０３）において特定された部位に関する患者情報以外の患者情報については、部位位置に関連付けない形式で表示する。これにより、ユーザは、枠４０２に表示されている内容は、部位に関連しない情報であることを把握することができる。
【００２４】
なお、ＣＰＵ１０１は、いずれの患者情報も、現実空間に存在する患者Ｂに重ならない位置に配置して表示することとする。すなわち、ＣＰＵ１０１は、現実空間における患者Ｂに対応する表示装置１０５の位置には重ならないように患者情報を表示する。また、ＣＰＵ１０１は、部位に関する患者情報については、対応する部位位置に対応する表示装置１０５の位置にできるだけ近い位置に配置することとする。すなわち、ＣＰＵ１０１は、部位位置を基準として定まる位置に、対応する患者情報を表示する。
【００２５】
以上のように、本実施形態に係る情報処理装置１００は、部位に関する患者情報を、患者の部位位置に関連付けて表示する。したがって、ユーザは、患者情報と、現実空間に存在する、診療対象の患者の部位との関係を容易に把握することができる。また、情報処理装置１００は、ユーザとしての医師の診療領域に基づいて、表示対象の患者情報を絞り込むことにより、ユーザが必要な情報を適切に表示することができる。例えば、整形外科を担当の診療領域とする医師にとって、歯科に関する患者情報は不要である。これに対し、情報処理装置１００は上述のように絞り込みにより歯科の情報を除き、整形外科の情報を優先的に表示することができる。
【００２６】
第１の実施形態の第１の変更例としては、情報処理装置１００は、拡張現実を提供する装置であり、ユーザの視界をすべて覆うような非透過型の表示部を有するものであってもよい。この場合には、情報処理装置１００は、表示装置１０５に撮影部１０６により撮影された撮影画像を表示する。そして、情報処理装置１００は、この撮影画像上において、患者の部位に関連付けて、対応する患者情報を表示する。この場合、情報処理装置１００は、撮影画像において、部位位置を特定し、この部位位置に関連付けて、患者情報を撮影画像上に重畳して表示すればよい。
【００２７】
第２の変更例としては、情報処理装置１００は、拡張現実を提供する装置に限定されるものではない。例えば、情報処理装置１００は、図５に示すように、患者と同程度のサイズの表示装置１０５を有してもよい。この場合、表示装置１０５は、診察時に患者が座る位置に隣接する位置、座る位置の後方の位置等、予め定められた位置に設置されるものとする。また、撮影部１０６は、患者の座る位置を含む領域を撮影できる位置に設置されているものとする。さらに、撮影部１０６と表示装置１０５の位置関係は既知であるものとする。そして、ＣＰＵ１０１は、この位置関係に応じて、撮影部１０６により撮影された患者の撮影画像から特定された、現実空間における部位位置に関連付けるように、表示装置１０５に患者情報を表示する。
【００２８】
第３の変更例としては、情報処理装置１００は、さらに、医師が患者を診る際に顔を動かして患部を注視すると、その時の動きを検知する検知装置をさらに有してもよい。この場合、ＣＰＵ１０１は、上方向の動きを検知した場合には、表示対象の部位を頭部、下方向への動きを検知した場合には、表示対象の部位を下半身に絞り込んでもよい。そして、ＣＰＵ１０１は、絞り込んだ部位についての患者情報を表示することとしてもよい。
【００２９】
（第２の実施形態）
第２の実施形態に係る医療システムにおいては、情報処理装置１００は、患者の存在を確認しただけでなく、患者と共に、特定の機器の存在を確認した場合に、患者情報を表示する。以下、第２の実施形態に係る医療システムの、第１の実施形態に係る医療システムと異なる点について説明する。
【００３０】
図６は、第２の実施形態に係る情報処理装置１００による表示処理を示すフローチャートである。なお、図６に示す各処理のうち、図２を参照しつつ説明した第１の実施形態に係る表示処理の各処理と同一の処理には、同一の番号を付している。第２の実施形態においては、ＣＰＵ１０１は、Ｓ２００の処理の後、処理をＳ６００へ進める。Ｓ６００において、ＣＰＵ１０１は、撮影画像に基づいて、患者の存在を確認し、患者を識別し、さらに患者と共に予め定められた特定の機材を認識するまで待機する（機材確認処理）。ここで、特定の機材としては、診察の際に利用される椅子やベッド等の診察台が挙げられる。
【００３１】
そして、ＣＰＵ１０１は、患者と共に機材の存在を認識した場合には（Ｓ６００でＹＥＳ）、処理をＳ２０２へ進める。このように、本実施形態に係る情報処理装置１００は、患者が確認され、かつ機材が確認されたことを、患者情報表示の条件とし、この条件に合致したタイミングにおいて、患者情報を表示することができる。すなわち、情報処理装置１００は、ユーザにとってより適切なタイミングにおいて、患者情報を表示することができる。
【００３２】
図７は、機器と患者の関係を示す図である。診察時には、患者は、図７（ａ）のように椅子７００に座っているか、または図７（ｂ）に示すように、ベッド７０１に横たわっている場合が多い。そこで、情報処理装置１００の患者情報の表示タイミングを、このような機器と同時に患者が確認された場合に限定することにより、不要なタイミングにおいて患者情報が表示されるのを防ぎつつ、診察時に患者情報を表示することができる。なお、第２の実施形態に係る医療システムのこれ以外の構成及び処理は、第１の実施形態に係る医療システムの構成及び処理と同様である。
【００３３】
第２の実施形態の第１の変更例としては、サーバ装置１１０は、例えば、心電図に係る患者情報に機器「ベッド」を対応付けるなど、患者情報と関連する機器情報とを対応付けて記憶していてもよい。この場合、情報処理装置１００は、Ｓ６００において確認された機材に基づいて、Ｓ２０２において抽出する患者情報を絞り込んでもよい。これにより、機材に対応する患者情報を優先的に表示することができる。
【００３４】
また、第２の変更例としては、情報処理装置１００は、患者の部位を画像認識する際に、例えば、椅子の位置の上部に頭部が認識される、といった部位と機材との位置関係を利用してもよい。これにより、より高精度に部位を特定することができる。
【００３５】
（第３の実施形態）
第３の実施形態に係る医用システムにおいては、情報処理装置１００は、患者を確認し、かつ予め定められたキーワードを認識した場合に、患者情報を表示する。以下、第３の実施形態に係る医療システムの、第１の実施形態に係る医療システムと異なる点について説明する。図８は、第３の実施形態に係る情報処理装置１００による表示処理を示すフローチャートである。なお、図８に示す各処理のうち、図２を参照しつつ説明した第１の実施形態に係る表示処理の各処理と同一の処理には、同一の番号を付している。第３の実施形態においては、ＣＰＵ１０１は、Ｓ２０１において、患者の存在を確認し、かつ患者を識別すると（Ｓ２０１でＹＥＳ）、処理をＳ８００へ進める。
【００３６】
Ｓ８００において、ＣＰＵ１０１は、患者の音声から、診療領域に関連するキーワードを認識するまで待機する（キーワード認識処理）。なお、キーワードは、診療領域毎に、記憶装置１０３に予め設定されているものとする。例えば、診療領域「内科」に対しては、「肺」、「胃」等がキーワードとして設定されている。また、他の例としては、患者情報に含まれる単語をキーワードとしてもよい。ＣＰＵ１０１は、キーワードを認識した場合には（Ｓ８００でＹＥＳ）、処理をＳ２０２へ進める。ＣＰＵ１０１は、キーワードを認識できなかった場合には（Ｓ８００でＮＯ）、処理をＳ２０１へ進める。このように、本実施形態に係る情報処理装置１００は、患者が確認され、かつキーワードが認識されたことを患者情報表示の条件とし、この条件に合致したタイミングにおいて、患者情報を表示することができる。すなわち、情報処理装置１００は、ユーザにとってより適切なタイミングにおいて、患者情報を表示することができる。なお、第３の実施形態に係る医療システムのこれ以外の構成及び処理は、他の実施形態に係る医療システムの構成及び処理と同様である。
【００３７】
第３の実施形態の変更例としては、ＣＰＵ１０１は、Ｓ２０２において、Ｓ７００において認識したキーワードに基づいて、抽出する患者情報を絞り込んでもよい。例えば、ＣＰＵ１０１は、診療領域として内科が特定され、かつ「肺が・・・」という患者の発話から「内科」に関連するキーワード「肺」を認識したとする。この場合、患者情報のうち、肺に関する患者情報を抽出し、これを優先的に表示する。これにより、不要な情報をさらに除外することができる。
【００３８】
以上、上述した各実施形態によれば、医師等のユーザが必要な情報を適切に表示することができる。
【００３９】
＜その他の実施形態＞
以上、実施形態例を詳述したが、本発明は例えば、システム、装置、方法、プログラム若しくは記録媒体(記憶媒体)等としての実施態様をとることが可能である。具体的には、複数の機器（例えば、ホストコンピュータ、インタフェース機器、撮像装置、Ｗｅｂアプリケーション等）から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。
【００４０】
また、本発明の目的は、以下のようにすることによって達成されることはいうまでもない。即ち、前述した実施形態の機能を実現するソフトウェアのプログラムコード（コンピュータプログラム）を記録した記録媒体（または記憶媒体）を、システムあるいは装置に供給する。係る記憶媒体は言うまでもなく、コンピュータ読み取り可能な記憶媒体である。そして、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記録媒体に格納されたプログラムコードを読み出し実行する。この場合、記録媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記録した記録媒体は本発明を構成することになる。
【００４１】
以上、本発明の好ましい実施形態について詳述したが、本発明は係る特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。
【符号の説明】
【００４２】
１００  情報処理装置
１０１  ＣＰＵ
１０５  表示装置
１１０  サーバ装置
【図１】
2017016347.tif 000003
【図２】
2017016347.tif 000004
【図６】
2017016347.tif 000005
【図８】
2017016347.tif 000006
【図３】
2017016347.tif 000007
【図４】
2017016347.tif 000008
【図５】
2017016347.tif 000009
【図７】
2017016347.tif 000010