(57)【要約】【課題】対象者に身体的な異変が生じた箇所の動画像データを容易に検索できるようにする。【解決手段】変化検知部３０３は、撮像された対象者の動画像データに基づいて、対象者に身体的な異変が生じたことを検知する。タグ情報付与部３０４は、対象者に身体的な異変が生じた箇所の画像データに対してタグを付与する。【選択図】図３
2014039079.tif 000002
【特許請求の範囲】
【請求項１】
撮像手段により撮像された対象者の動画像データに基づいて、前記対象者に身体的な異変が生じたことを検知する検知手段と、
前記検知手段により前記対象者に身体的な異変が生じたことが検知された箇所の前記動画像データに対して第１のタグを付与する第１の付与手段とを有することを特徴とする医療情報処理装置。
【請求項２】
前記動画像データに所定の変化が生じたことを検出する検出手段と、
前記検出手段により前記動画像データの所定の変化が生じたことが検出され、且つ、前記検知手段により前記対象者に身体的な異変が生じたことが検知されなかった場合、前記検出手段により前記所定の変化が生じたことが検出された箇所の前記動画像データに対して第２のタグを付与する第２の付与手段とを更に有することを特徴とする請求項１に記載の医療情報処理装置。
【請求項３】
前記動画像データに付与された前記第１のタグ又は前記第２のタグに基づいて、前記動画像データに対する検索処理を行う検索手段を更に有することを特徴とする請求項２に記載の医療情報処理装置。
【請求項４】
前記検索手段は、前記第１のタグが付与された箇所の前記動画像データを検索することを特徴とする請求項３に記載の医療情報処理装置。
【請求項５】
前記検索手段は、前記第１のタグが付与された箇所の直前の前記動画像データを検索することを特徴とする請求項３又は４に記載の医療情報処理装置。
【請求項６】
前記検索手段は、前記第２のタグが付与された箇所の前記動画像データを検索することを特徴とする請求項３乃至５の何れか１項に記載の医療情報処理装置。
【請求項７】
前記検索手段は、前記第２のタグが付与された箇所の前記動画像データのうち、ユーザにより指定されたタグが付与された箇所の前記動画像データを検索することを特徴とする請求項６に記載の医療情報処理装置。
【請求項８】
前記検索手段は、前記第２のタグが付与された箇所の前記動画像データのうち、ユーザにより指定された時間に該当する前記動画像データを検索することを特徴とする請求項６又は７に記載の医療情報処理装置。
【請求項９】
前記検索手段により検索された前記第２のタグが付与された箇所の前記動画像データ夫々について、前記動画像データに対応する原因候補が真の原因である可能性を算出する算出手段と、
前記算出手段により算出された可能性に基づいて、前記検索手段により検索された前記第２のタグが付与された箇所の前記動画像データを提示する提示手段とを更に有することを特徴とする請求項６乃至８の何れか１項に記載の医療情報処理装置。
【請求項１０】
前記算出手段は、前記検索手段により検索された前記第２のタグが付与された箇所の前記動画像データ夫々と、原因を特定するための学習データとを比較することにより、前記動画像データに対応する原因候補が真の原因である可能性を算出することを特徴とする請求項９に記載の医療情報処理装置。
【請求項１１】
医療情報処理装置によって実行される医療情報処理方法であって、
撮像手段により撮像された対象者の動画像データに基づいて、前記対象者に身体的な異変が生じたことを検知する検知ステップと、
前記検知ステップにより前記対象者に身体的な異変が生じたことが検知された箇所の前記動画像データに対してタグを付与する付与ステップとを有することを特徴とする医療情報処理方法。
【請求項１２】
医療情報処理装置によって実行される医療情報処理方法をコンピュータに実行させるためのプログラムであって、
撮像手段により撮像された対象者の動画像データに基づいて、前記対象者に身体的な異変が生じたことを検知する検知ステップと、
前記検知ステップにより前記対象者に身体的な異変が生じたことが検知された箇所の前記動画像データに対してタグを付与する付与ステップとをコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、患者等の対象者を撮像した動画像データを検索するための技術に関するものである。
【背景技術】
【０００２】
医療現場では、主に、医師による診察、患者からの説明、及び、各種の検査結果に基づいて診断が行われている。しかし、患者の抱えている症状が診察時に必ず現れるとは限らず、また、患者が自身の症状を医師の求める形で説明できるとは限らない。そのため、ビデオカメラで患者を撮影し、撮影により得られた画像データを診察及び診断に用いるといった対策が知られている。
【０００３】
特許文献１には、実施される治療行為を推定し、治療室内のカメラの配置を最適な条件に制御する技術が開示されている。また、特許文献２には、個人の生理情報を集める端末、行動情報を収集する端末、それらの情報を受け取る基地局、及び、ネットワークを用いて、対象者の情報を遠隔地から取得できるようにする技術が開示されている。さらに、特許文献３には、カメラを含む各種センサを用いて医療行為を記録し、また、記録情報に対して削除や解像度変更等を行うことにより、その記録容量を低減する技術が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００６−２７７４８６号公報
【特許文献２】特開２００２−１４９８２４号公報
【特許文献３】特開２００５−１３５３４４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ここで、患者を撮影する上で重要なポイントとして、どの場面が診察及び診断に有用であるのかといったことが挙げられる。例えば、患者が痛み等の身体の異常を訴えた場面がどこなのか、又は、その原因と推定されるのはどの場面なのかということである。この点が存在しないと、医師は記録されたデータを全て閲覧しなければならなくなってしまう。
【０００６】
この点について、上記従来技術で対応しようとした場合、以下の問題が生じる。即ち、特許文献１に開示される技術では、カメラの配置を決めるだけであり、重要な点を判別して記録するといったことを行うことはできない。特許文献２に開示される技術では、ビデオカメラだけではなく、ウェアラブルな生体情報端末が必要となっているため、その分の手間やコストがかかり、利用がしづらいものとなっている。特許文献３に開示される技術では、記録容量の低減が主な目的となっており、異常の原因と考えられる場面を抽出するといったことはできないものとなっている。
【０００７】
そこで、本発明の目的は、対象者に身体的な異変が生じた箇所の動画像データを容易に検索できるようにすることにある。
【課題を解決するための手段】
【０００８】
本発明の医療情報処理装置は、撮像手段により撮像された対象者の動画像データに基づいて、前記対象者に身体的な異変が生じたことを検知する検知手段と、前記検知手段により前記対象者に身体的な異変が生じたことが検知された箇所の前記動画像データに対して第１のタグを付与する第１の付与手段とを有することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、対象者に身体的な異変が生じた箇所の動画像データを容易に検索することが可能となる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施形態に係る医療情報記録システムの構成を示す図である。
【図２】情報処理装置の詳細な構成を示す図である。
【図３】本発明の実施形態に係る医療情報記録システムの機能的な構成を示す図である。
【図４】情報処理装置において動画像データに対してタグを付与する処理を示すフローチャートである。
【図５】患者の食事の種類を識別するためのタグを動画像データに付与する処理を示すフローチャートである。
【図６】記憶装置から動画像データを検索する処理を示すフローチャートである。
【図７】動画像表示部により表示される原因候補に該当する箇所の動画像データの例を示す図である。
【図８】検索された各動画像データに対応する原因候補が真因である可能性を算出する処理を示すフローチャートである。
【図９】患者と接触した人物の種類を識別するためのタグを動画像データに付与する処理を示すフローチャートである。
【発明を実施するための形態】
【００１１】
以下、本発明を適用した好適な実施形態を、添付図面を参照しながら詳細に説明する。
【００１２】
先ず、本発明の第１の実施形態について説明する。図１は、本発明の第１の実施形態に係る医療情報記録システムの構成を示す図である。図１に示すように、本発明の第１の実施形態に係る医療情報記録システムは、動画像撮影装置１０１、外部環境情報取得装置１０２、出力装置１０３及び情報処理装置１０４を備える。なお、情報処理装置１０４は、医療情報処理装置の適用例となる構成である。
【００１３】
動画像撮影装置１０１は、少なくとも１台のビデオカメラ等によって撮影された動画像データを取得する。動画像撮影装置１０１は、被写体である患者（対象者）が常に写るように固定されていることが望ましい。外部環境情報取得装置１０２は、動画像撮影装置１０１の近傍に設置され、患者がいる空間の気温や湿度、及び、時刻等の環境情報を取得する。出力装置１０３は、液晶パネル等の各種表示装置であり、検索された動画像データや当該動画像データに付随する情報を表示する。情報処理装置１０４は、動画像データの記録、動画像データにおいて発生した変化の検知処理、動画像データの検索処理、動画像データの撮影指示の入力等の各種処理を行うためのプログラムを格納している。
【００１４】
図２は、情報処理装置１０４の詳細な構成を示す図である。図２に示すように、情報処理装置１０４は、ＣＰＵ（Central Processing Unit）２０１、検索指示入力装置２０２、撮影指示入力装置２０３、記憶装置２０４、ＲＡＭ（Random  Access Memory）２０５、ＲＯＭ（Read Only Memory）２０６及びバス２０７を備える。
【００１５】
ＣＰＵ２０１は、各種データ処理のための論理演算及び判断等を行い、また、バス２０７を介して接続される各構成要素を制御する。検索指示入力装置２０２は、アルファベットキー、ひらがなキー、カタカナキー、句点等の文字記号入力キー、及び、カーソル移動を指示するカーソル移動キー等のような、各種の機能キーを備えたキーボードが接続される。また、ＧＵＩ（Graphical User Interface）上で画面の制御可能位置を指し示し、機能の選択指示等を行うポインティング機器、例えばマウスやスティックポインタ等も挙げられる。撮影指示入力装置２０３も、検索指示入力装置２０２と同様の機器から構成されている。なお、検索指示入力装置２０２及び撮影指示入力装置２０３は必ずしも別のものである必要はなく、状況に応じて同一の装置であってもよい。記憶装置２０４は、入出力データやプログラム等、各種情報を格納する。これらのデータ及びプログラムを格納する記憶媒体としては、ハードディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、フラッシュメモリ等を用いることができる。ＲＡＭ２０５は、各構成要素からの各種データを一時的に記憶する際に用いられる。ＲＯＭ２０６は、本実施形態で実行されるプログラム等を記憶する。これら全ての構成要素は、バス２０７を介して接続される。なお、ＣＰＵ２０１は、ＲＯＭ２０６から必要なプログラム及びデータをＲＡＭ２０５に読み出して実行することにより、後述する図４、図５、図６及び図８等に示す処理が実現する。
【００１６】
図３は、本発明の第１の実施形態に係る医療情報記録システムの機能的な構成を示す図である。図３に示すように、第１の実施形態に係る医療情報記録システムは、動画像撮影部３０１、外部環境情報取得部３０２、変化検知部３０３、タグ情報付与部３０４、因果関係推定部３０５、検索指示部３０６、撮影指示部３０７、動画像検索部３０８及び動画像表示部３０９を備える。
【００１７】
動画像撮影部３０１は、図１の動画像撮影装置１０１に対応する構成である。外部環境情報取得部３０２は、図１の外部環境情報取得装置１０２に対応する構成である。その他の構成３０３〜３０９は、情報処理装置１０４の機能的な構成である。なお、動画像撮影部３０１は、撮像手段の適用例となる構成である。また、動画像表示部３０９は、提示手段の適用例となる構成である。
【００１８】
次に、本実施形態に係る医療情報記録システムの処理について説明する。本実施形態に係る医療情報記録システムの概要としては、患者を被写体とした動画像データが撮影され、その中で患者に身体的な異変又は異変の原因になり得る変化が起きた場合、それを示すタグが動画像データに付与される。また、ユーザが動画像データを検索する際には、付与されたタグに基づいて動画像データが検索される。
【００１９】
先ず、図４を参照しながら、情報処理装置１０４において動画像データに対してタグを付与する処理について説明する。動画像撮影部３０１は、動画像データを撮影し、情報処理装置１０４に送信するとともに、外部環境情報取得部３０２は、外部環境情報を取得し、情報処理装置１０４に送信する。ステップＳ１０１において、情報処理装置１０４は、動画像撮影部３０１から動画像データを受信するとともに、外部環境情報取得部３０２から外部環境情報を受信し、それらを記憶装置２０４に保存する。ここで外部環境情報とは、患者の近傍の外部環境を示す情報であり、外部環境とは、患者の身体的な異変又は異変の原因となり得る変化を引き起こす可能性のある要因である。外部環境の例としては、気温、湿度、時間及び気圧等が挙げられる。また、動画像撮影部３０１による撮影タイミングや撮影範囲は、既存の検査結果等に基づいて指定してもよい。例えば、特定の時間帯、特定の振る舞い、及び、特定の部位等を重点的に撮影するように指定することが挙げられる。これらは、撮影指示部３０７から入力された命令に基づいて指定される。
【００２０】
ステップＳ１０２において、変化検知部３０３は、動画像撮影部３０１より受信した動画像データ中に何らかの変化が発生したか否かを判定する。動画像データ中に何らかの変化が発生した場合、処理はステップＳ１０３に移行する。一方、動画像データ中に何も変化が発生しなかった場合、処理はステップＳ１０１に戻る。ステップＳ１０３において、変化検知部３０３は、その変化が患者に身体的な異変が生じたことによる変化であるか否かを判定する。なお、身体的に異変が生じたことを検出する技術は、監視カメラを対象に数多く提案されており、ここでもそれらの技術を適用すればよい。また、患者の呼吸数や心拍数等の生体情報も患者に身体的な異変が生じたことを検知する上で重要な情報であるため、これらも動画像撮影部３０１によって撮影された動画像データから取得する。なお、本処理には、例えば、下記の非特許文献１に開示されている、ビデオカメラから心拍数等を測定できる技術を適用することができる。
【００２１】
［非特許文献１］
M.Z. Poh, D.J. McDuff and R.W. Picard, "Advancements in non-contact, multiparameter physiological measurements using a webcam,"IEEE Trans Biomed Eng, vol. 58, no. 1, pp. 7-11, 2011.
【００２２】
患者に身体的な異変が生じた場合、処理はステップＳ１０４に移行する。一方、患者に身体的な異変が生じていない場合、処理はステップＳ１０５に移行する。ステップＳ１０４において、タグ情報付与部３０４は、「異常状態である」という意味を示すタグを、変化が発生した箇所の動画像データに付して記憶装置２０４に保存する。ステップＳ１０６において、変化検知部３０３は、動画像データ中の変化が終了したか否かを判定する。変化が終了した場合、処理はステップＳ１０７に移行する。一方、変化が終了していない場合、処理はステップＳ１０３に戻る。ステップＳ１０７において、タグ情報付与部３０４は、動画像データに対するタグ付けを終了する。ステップＳ１０８において、撮影指示部３０７は、ユーザによる撮影を終了させるための操作を受け付けたか否かを判定する。撮影を終了させるための操作を受け付けた場合、処理は終了する。一方、撮影を終了させるための操作を受け付けていない場合、処理はステップＳ１０１に戻る。
【００２３】
ここで、ステップＳ１０３において、動画像データ中で発生した変化が患者の身体的な異変による変化ではないと判定された場合について説明する。この場合、動画像データ中で発生した変化が後の患者の身体的な異変の原因になる可能性があると判定される。従って、ステップＳ１０５において、タグ情報付与部３０４は、「原因候補である」という意味を示すタグを、変化が発生した箇所の動画像データに付して記憶装置２０４に保存する。なお、「異常状態である」という意味を示すタグは、第１のタグの例であり、「原因候補である」という意味を示すタグは、第２のタグの例である。また、ステップＳ１０４において「異常状態である」という意味を示すタグを動画像データに付与する処理は、第１の付与手段の処理例である。また、ステップＳ１０５において「原因候補である」という意味を示すタグを動画像データに付与する処理は、第２の付与手段の処理例である。
【００２４】
図５は、ステップＳ１０５と併せて実行される処理であり、患者の食事の種類を識別するためのタグを動画像データに付与する処理を示すフローチャートである。ステップＳ２０１において、変化検知部３０３は、ステップＳ１０２において変化が検出された箇所の動画像データから食べ物が検出されたか否かを判定する。なお、本判定処理には、例えば、下記の非特許文献２に開示される、画像データ中から食事を検出して記録する技術を適用することができる。
【００２５】
［非特許文献２］
相澤清晴、小川誠、"マルチメディア食事記録と画像処理による食事内容解析"、情報処理 52(11), 1382-1387, 2011-11
【００２６】
動画像データから食べ物が検出された場合、処理はステップＳ２０２に移行する。一方、動画像データから食べ物が検出されなかった場合、処理は終了する。ステップＳ２０２において、変化検知部３０３は、当該食べ物が病院の給食等、事前に食べることが決められていた食べ物であるか否かを判定する。これは、事前に決められているものでは患者の食べ物アレルギーが考慮されている可能性が高いため、原因となりにくいと推定されるからである。この判定は、事前に給食の献立を画像データ又はテキストデータで学習しておき、非特許文献２に示すような画像処理技術を用いてもよいし、給食時間をシステムに与えておき、その時間の食事は給食であると判定してもよい。
【００２７】
動画像データから検出された食べ物が事前に食べることが決められた食べ物である場合、処理はステップＳ２０３に移行する。一方、動画像データから検出された食べ物が事前に食べることが決められた食べ物ではない場合、処理はステップＳ２０４に移行する。ステップＳ２０３において、タグ情報付与部３０４は、「定型食事」という意味を示すタグを、変化が発生した箇所の動画像データに付して記憶装置２０４に保存する。この場合、当該変化が発生した箇所の動画像データには、「原因候補である」という意味を示すタグと、「定型食事」という意味を示すタグとが付されることになる。ステップＳ２０４において、タグ情報付与部３０４は、「定型外食事」という意味を示すタグを、変化が発生した箇所の動画像データに付して記憶装置２０４に保存する。この場合、当該変化が発生した箇所の動画像データには、「原因候補である」という意味を示すタグと、「定型外食事」という意味を示すタグとが付されることになる。以上の処理は、ステップＳ１０６において変化が終了したと判定されるまで繰り返し実行される処理である。
【００２８】
次に、図６を参照しながら、記憶装置２０４から動画像データを検索する処理について説明する。ユーザは、動画像データを検索する際において、「異常状態である」という意味を示すタグが付された動画像データと、「原因候補である」という意味を示すタグが付された動画像データとのどちらを閲覧するか、検索指示部３０６を用いて指示する。
【００２９】
ステップＳ３０１において、動画像検索部３０８は、「異常状態である」という意味を示すタグが付された箇所の動画像データを閲覧することが指定されたか否かを判定する。「異常状態である」という意味を示すタグが付された箇所の動画像データを閲覧することが指定された場合、処理はステップＳ３０２に移行する。一方、「原因候補である」という意味を示すタグが付された動画像データを閲覧することが指定された場合、処理はステップＳ３０３に移行する。
【００３０】
ステップＳ３０２において、動画像検索部３０８は、「異常状態である」という意味を示すタグが付された箇所の動画像データを記憶装置２０４から検索する。ステップＳ３０３において、動画像検索部３０８は、外傷等の直前の行動が原因と推定されることがユーザにより入力されたか否かを判定する。直前の行動が原因と推定されることが入力された場合、処理はステップＳ３０４に移行し、そうでない場合、処理はステップＳ３０５に移行する。ステップＳ３０４において、動画像検索部３０８は、「異常状態である」という意味を示すタグが付された箇所の直前の動画像データを記憶装置２０４から検索する。
【００３１】
ステップＳ３０５において、動画像検索部３０８は、異常の原因が推定できていることがユーザにより入力されたか否かを判定する。異常の原因が推定できていることが入力された場合、処理はステップＳ３０６に移行し、そうでない場合、処理はステップＳ３０７に移行する。ステップＳ３０６において、動画像検索部３０８は、「原因候補である」という意味を示すタグが付された箇所の動画像データを全て検索する。
【００３２】
ステップＳ３０７において、動画像検索部３０８は、動画像データを検索する際の検索キー情報の種類を判定する。検索キー情報の種類が時間である場合、即ち、異常の原因が発生した時間を推定できるような症状である場合、処理はステップＳ３０８に移行する。一方、検査キー情報の種類が異常の原因である場合、即ち、ユーザが異常の原因を推定できている場合、処理はステップＳ３１０に移行する。
【００３３】
ステップＳ３０８において、動画像検索部３０８は、ユーザの操作に応じて、時間を入力する。ステップＳ３０９において、動画像検索部３０８は、「原因候補である」という意味を示すタグが付された箇所の動画像データのうち、ステップＳ３０８にて入力した時間に該当する箇所の動画像データを記憶装置２０４から検索する。ステップＳ３１０において、動画像検索部３０８は、ユーザの操作に応じて、異常の原因に対応するタグ（例えば、「定型外食事」）を入力する。ステップＳ３１１において、動画像検索部３０８は、「原因候補である」という意味を示すタグが付された箇所の動画像データのうち、ステップＳ３１０にて入力したタグが付された箇所の動画像データを記憶装置２０４から検索する。
【００３４】
動画像表示部３０９は、以上のようにして検索された原因候補に該当する箇所の動画像データを表示する。図７は、動画像表示部３０９により表示される原因候補に該当する箇所の動画像データの例を示す図である。図７に示すように、動画像検索部３０８によって検索された原因候補に該当する箇所の動画像データ（原因候補１、・・・、原因候補ｎ）は、同時に閲覧できるように表示される。これにより、各動画像データの比較が容易に行えるようになり、わずかな違いの見落とし等を防止することができる。なお、同時に見ることのできる動画像データの数は、ユーザによって任意に設定することができる。例えば、検索された動画像データの数が少ない、動画像データの閲覧時間をできるだけ短くしたい場合には、検索された動画像データ全てを同時に見られるようにすればよい。これに対し、少数の動画像データを詳細に比較したい場合には、同時に表示する動画像データの数を制限すればよい。また、気になる動画像データがあった場合には、その動画像データのみを残しておき、他の動画像データと順次比較するといったことも可能である。さらには、原因候補に該当する箇所の動画像データと異常状態に該当する箇所の動画像データとを同時に表示し、診断の再確認や患者への説明に役立てることもできる。また、検索された各動画像データに対応する原因候補が真因（真の原因）である可能性を算出し、算出した可能性の降順に動画像データを並べる、又は、順次動画像データを表示するといった形態をとることもできる。
【００３５】
図８は、検索された各動画像データに対応する原因候補が真因である可能性を算出する処理を示すフローチャートである。ステップＳ８０１において、因果関係推定部３０５は、異常の原因が推定できていることがユーザにより入力されたか否かを判定する。異常の原因が推定できないことが入力された場合、処理はステップＳ８０２に移行する。一方、異常の原因が推定できていることが入力された場合、処理はステップＳ８０３に移行する。
【００３６】
ステップＳ８０２において、因果関係推定部３０５は、「異常状態である」という意味を示すタグが付された箇所の動画像データと、異常の種類を特定するための学習データとを比較する。そして、因果関係推定部３０５は、動画像データと一致度が最も高い学習データを特定し、特定した学習データに対応する異常の種類を、当該箇所の動画像データに対応する異常の種類として推定する。これは、異常の種類が判明していないと、真因の可能性を算出できないために行われる処理である。なお、比較するデータは、「異常状態である」という意味を示すタグが付された箇所の動画像データに限らず、同時に取得された外部環境情報やユーザによって入力されたテキストデータ等でもよい。
【００３７】
ステップＳ８０２にて異常の種類が推定された後、又は、異常の原因が推定できている場合、処理はステップＳ８０３に移行する。ステップＳ８０３において、因果関係推定部３０５は、「原因候補である」という意味を示すタグが付された箇所の動画像データと、原因を特定するための学習データとを比較する。ここでも、ステップＳ８０２における異常の種類の特定時と同様、比較するデータは、「原因候補である」という意味を示すタグが付された箇所の動画像データに限らない。ステップＳ８０４において、因果関係推定部３０５は、「原因候補である」という意味を示すタグが付された箇所の動画像データと、原因を特定するための学習データとの一致度を真因の可能性として算出し、算出した可能性を当該動画像データに対して添付する。ステップＳ８０５において、因果関係推定部３０５は、「原因候補である」という意味を示すタグが付された箇所の動画像データ全てについて真因の可能性を算出したか否かを判定する。全ての動画像データについて真因の可能性が算出済みである場合、処理は終了する。一方、真因の可能性を未だ算出していない動画像データが存在する場合、処理はステップＳ８０３に戻る。
【００３８】
以上のように、本実施形態においては、撮影された動画像データに変化があった箇所を、異常状態の場面又は原因候補の場面として記録し、後から医師が必要とする場面を容易に検索することができる。また、動画像データに変化があった場面を検出する際には、動画像データ中の患者の動きのほかに、脈拍、呼吸及び体温等といった生体情報も利用することにより、動画像データの変化の検出精度を高めることができる。
【００３９】
また、既存の診察情報に基づいて、どの期間、動き、生体情報を重視すればよいかを指定することができる。また、原因候補に該当する箇所の動画像データを閲覧する際には、真因の可能性が高い順に動画像データを表示する、又は、医師によって指定された順に動画像データを表示する等して、医師の診察を容易にし、医師の診断のサポートを行うことが可能となる。
【００４０】
次に、本発明の第２の実施形態について説明する。第２の実施形態は、図５に示すように、「原因候補である」という意味を示すタグが付された箇所の動画像データについて、食事の種類を識別するタグを付与する代わりに、患者と接触した人物の種類を識別するタグを付与するものである。以下では、第１の実施形態との上記相違点についてのみ説明を行うものとする。なお、第２の実施形態に係る医療情報記録システムの構成は、図１〜図３に示した構成と同様である。従って、以下の説明では、これらの図に示した符号を用いるものとする。
【００４１】
図９は、患者と接触した人物の種類を識別するためのタグを動画像データに付与する処理を示すフローチャートである。ステップＳ９０１において、変化検知部３０３は、患者以外の人物が動画像データ内に入ってきたか否かを検知する。この検知処理は、既存の顔認識及び顔認証技術により行われる。患者以外の人物が動画像データ内に入ってきた場合、処理はステップＳ９０２に移行する。一方、患者以外の人物が動画像データ内に入ってきていない場合、処理は終了する。
【００４２】
ステップＳ９０２において、変化検知部３０３は、動画像データ内に入ってきた人物が医師等の病院関係者であるか否かを判定する。これは、病院関係者との接触が異常発生の原因になる可能性が低いと考えられるため、動画像データに付与するタグを区別した方が後の検索時に絞り込みが容易となるためである。なお、ステップＳ９０２の具体的な処理は、予め医師や看護師等の病院関係者の顔データを登録しておき、この顔データと照合する形で行われる。
【００４３】
動画像データ内に入ってきた人物が病院関係者である場合、処理はステップＳ９０３に移行する。一方、動画像データ内に入ってきた人物が病院関係者以外の人物である場合、処理はステップＳ９０４に移行する。ステップＳ９０３において、タグ情報付与部３０４は、「病院関係者」という意味を示すタグを、変化が発生した箇所の動画像データに付して記憶装置２０４に保存する。この場合、当該変化が発生した箇所の動画像データには、「原因候補である」という意味を示すタグと、「病院関係者」という意味を示すタグとが付されることになる。ステップＳ９０４において、タグ情報付与部３０４は、「患者関係者」という意味を示すタグを、変化が発生した箇所の動画像データに付して記憶装置２０４に保存する。この場合、当該変化が発生した箇所の動画像データには、「原因候補である」という意味を示すタグと、「患者関係者」という意味を示すタグとが付されることになる。以上の処理は、動画像データから患者以外の人物がいなくなる、つまり、ステップＳ１０６において変化が終了したと判定されるまで繰り返し実行される。
【００４４】
以上により、患者と接触した人間が何かしらアレルギー源を持つことが推定される場合、それに該当する箇所の動画像データを容易に検索することが可能となる。
【００４５】
なお、上述した実施形態では、食事の種類を識別するタグや患者と接触した人物の種類を識別するタグを動画像データに付与しているが、これ以外の事象を識別するためのタグを動画像データに付与してもよい。即ち、動画像データや外部環境情報に基づいて検出できる事象であれば、食事の種類や人物の種類に限定されるものではない。また、第１の実施形態で説明した処理と第２の実施形態で説明した処理とを組み合わせて行うことも、本発明の範疇に含まれる。
【００４６】
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【符号の説明】
【００４７】
３０１：動画像撮影部、３０２：外部環境情報取得部、３０３：変化検知部、３０４：タグ情報付与部、３０５：因果関係推定部、３０６：検索指示部、３０７：撮影指示部、３０８：動画像検索部、３０９：動画像表示部
【図１】
2014039079.tif 000003
【図２】
2014039079.tif 000004
【図３】
2014039079.tif 000005
【図４】
2014039079.tif 000006
【図５】
2014039079.tif 000007
【図６】
2014039079.tif 000008
【図７】
2014039079.tif 000009
【図８】
2014039079.tif 000010
【図９】
2014039079.tif 000011