(57)【要約】本発明の実施形態による緊急対応環境内の対話追跡方法は、センサアレイの視界内からカラー画像及び奥行き情報を受け取るステップと、緊急事態遭遇記録を保持するステップと、センサアレイによって受け取られるカラー画像及び奥行き情報に基づいて緊急対応環境内の対象の位置及び対象の動きの一方又は両方をモニタするステップと、緊急事態遭遇記録内に状態の発生を記録するステップとを含み、状態は対象の位置及び対象の動きの一方又は両方に基づく。
2015533248.tif 000002
【特許請求の範囲】
【請求項１】
緊急対応環境内のジェスチャ認識のための方法であって、前記方法は、
少なくとも１つのセンサから人体の少なくとも一部に関する視覚情報を受け取るステップと、
緊急事態遭遇記録を保持するステップと、
前記視覚情報をモニタして前記人体の前記少なくとも一部の動きを求めるステップと、
前記人体の前記少なくとも一部の前記動きに基づいてジェスチャの発生を認識するステップと、
前記ジェスチャの前記発生に基づいて前記緊急事態遭遇記録内に項目を記録するステップと
を含む、方法。
【請求項２】
前記ジェスチャが作為的なジェスチャである、請求項１に記載の方法。
【請求項３】
前記ジェスチャが自然的なジェスチャである、請求項１に記載の方法。
【請求項４】
前記人体の前記少なくとも一部が前記人体の手である、請求項１に記載の方法。
【請求項５】
前記人体の前記少なくとも一部が前記人体の前記手の１本又は複数本の指を含む、請求項４に記載の方法。
【請求項６】
前記人体の前記少なくとも一部が前記人体の頭部である、請求項１に記載の方法。
【請求項７】
前記項目が前記ジェスチャの発生時刻を含む、請求項１に記載の方法。
【請求項８】
前記項目が前記ジェスチャの識別情報を更に含む、請求項７に記載の方法。
【請求項９】
前記項目が前記ジェスチャの前記発生の時刻に対応して受け取られた前記視覚情報を含む、請求項１に記載の方法。
【請求項１０】
音声情報を受け取るステップを更に含み、前記項目が前記ジェスチャの前記発生の時刻に対応して受け取られた前記音声情報を含む、請求項９に記載の方法。
【請求項１１】
前記ジェスチャ以外の状態の発生を突き止めるステップと、
前記状態の前記発生が前記ジェスチャの前記発生と同時に起きる場合にのみ、前記緊急事態遭遇記録内に前記項目を記録するステップと
を更に含む、請求項１に記載の方法。
【請求項１２】
前記ジェスチャが第１のジェスチャであり、前記状態が第２のジェスチャである、請求項１１に記載の方法。
【請求項１３】
前記状態が、前記緊急対応環境に対する前記人体の位置又は場所である、請求項１１に記載の方法。
【請求項１４】
前記人体の前記少なくとも一部が前記人体の第１の部分であり、前記ジェスチャが第１のジェスチャであり、前記方法が、
前記少なくとも１つのセンサから前記人体の第２の部分に関する視覚情報を受け取るステップと、
前記視覚情報をモニタして前記人体の前記第２の部分の動きを求めるステップと、
前記人体の前記第２の部分の前記動きに基づいて第２のジェスチャの発生を認識するステップと、
前記第１のジェスチャの前記発生及び前記第２のジェスチャの前記発生に基づいて前記緊急事態遭遇記録内に前記項目を記録するステップと
を更に含む、請求項１に記載の方法。
【請求項１５】
前記項目を記録するステップが、前記第１のジェスチャと前記第２のジェスチャとが同時に起きる場合にのみ前記緊急事態遭遇記録内に前記項目を記録するステップを含む、請求項１４に記載の方法。
【請求項１６】
前記人体の前記第１の部分が手であり、前記人体の前記第２の部分が頭部である、請求項１４に記載の方法。
【請求項１７】
前記人体の前記第１の部分が第１の手であり、前記人体の前記第２の部分が第２の手である、請求項１４に記載の方法。
【請求項１８】
前記人体が、前記緊急対応環境内で治療を受けている患者である、請求項１に記載の方法。
【請求項１９】
前記人体が、前記緊急対応環境内で患者を治療している介護者である、請求項１に記載の方法。
【請求項２０】
緊急対応環境内のジェスチャ認識システムであって、前記ジェスチャ認識システムは、
人体の少なくとも一部に関する視覚情報を受け取るように構成される少なくとも１つのセンサと、
前記少なくとも１つのセンサに通信可能に結合される制御システムと
を含み、前記制御システムは、
緊急事態遭遇記録を保持し、
前記視覚情報をモニタして前記人体の前記少なくとも一部の動きを求め、
前記人体の前記少なくとも一部の前記動きに基づいてジェスチャの発生を認識し、
前記ジェスチャの前記発生に基づいて前記緊急事態遭遇記録内に項目を記録する
ように構成される、ジェスチャ認識システム。
【請求項２１】
緊急対応環境内の対話追跡のための方法であって、前記方法は、
センサアレイの視界内からカラー画像及び奥行き情報を受け取るステップと、
緊急事態遭遇記録を保持するステップと、
前記センサアレイによって受け取られる前記カラー画像及び奥行き情報に基づいて前記緊急対応環境内の対象の位置及び前記対象の動きの一方又は両方をモニタするステップと、
前記緊急事態遭遇記録内に状態の発生を記録するステップと
を含み、前記状態は前記対象の前記位置及び前記対象の前記動きの一方又は両方に基づく、方法。
【請求項２２】
前記対象が人間であり、前記対象の前記位置及び前記対象の前記動きの一方又は両方をモニタするステップが、前記人間の前記位置及び前記人間の少なくとも部分的な骨格の概算の動きの一方又は両方をモニタするステップを含む、請求項２１に記載の方法。
【請求項２３】
前記人間が第１の対象であり、前記状態が、前記人間の前記少なくとも部分的な骨格の概算が第２の対象の一定の距離内に入ることを含む、請求項２２に記載の方法。
【請求項２４】
前記人間が第１の人間であり、前記第２の対象が第２の人間である、請求項２３に記載の方法。
【請求項２５】
前記状態は、前記第１の人間が前記第２の人間に接触することを含む、請求項２４に記載の方法。
【請求項２６】
前記第２の人間は、前記緊急対応環境内で前記第１の人間によって治療されている患者である、請求項２５に記載の方法。
【請求項２７】
前記状態の前記発生を記録するステップが、前記状態が発生する時刻を記録するステップを含む、請求項２１に記載の方法。
【請求項２８】
前記状態の前記発生を記録するステップが、前記状態の種類を記録するステップを更に含む、請求項２７に記載の方法。
【請求項２９】
前記状態の前記発生を記録するステップが、前記状態の前記発生中に受け取られる前記カラー画像をビデオ映像として記録するステップを更に含む、請求項２７に記載の方法。
【請求項３０】
患者に関するストリーミング臨床データを受け取るステップと、
前記緊急事態遭遇記録内の前記ストリーミング臨床データの少なくとも一部を前記状態の前記発生に相関させるステップと
を更に含む、請求項２１に記載の方法。
【請求項３１】
前記ストリーミング臨床データの前記少なくとも一部を相関させるステップが、前記状態の発生時刻に対応する前記ストリーミング臨床データの前記少なくとも一部にフラグを立てるステップを含む、請求項３０に記載の方法。
【請求項３２】
緊急対応環境内の対話追跡システムであって、前記対話追跡システムは、
自らの視界内のカラー画像及び奥行き情報を受け取るように構成されるセンサアレイと、
前記センサアレイに通信可能に結合される制御システムであって、
緊急事態遭遇記録を保持し、
前記センサアレイから受け取る前記カラー画像及び奥行き情報に基づいて前記緊急対応環境内の対象の位置及び動きの一方又は両方をモニタし、
前記緊急事態遭遇記録内に状態の発生を記録するように構成される、
制御システムと
を含み、前記状態は前記対象の位置及び動きの一方又は両方に基づく、対話追跡システム。
【請求項３３】
緊急対応環境内の在庫管理のための方法であって、前記方法は、
センサアレイによって前記緊急対応環境内の人体の三次元の動きを検出するステップであって、前記センサアレイは前記緊急対応環境に関する視覚情報及び奥行き情報を生成する、ステップと、
前記緊急対応環境内の対象の三次元の動きを検出するステップと、
前記人体と前記対象との間の接触の発生を判定するステップと、
前記接触の前記発生に基づいて緊急事態遭遇記録内に項目を記録するステップと
を含む、方法。
【請求項３４】
前記対象が前記緊急対応環境内の密閉箱の中に保管されている麻酔薬であり、前記方法は、
前記人体及び前記対象の前記三次元の動きを前記検出することに基づき、前記人体の前記密閉箱との交わりの発生を判定するステップと、
前記交わりの前記発生に基づいて前記緊急事態遭遇記録内に項目を記録するステップと
を更に含む、請求項３３に記載の方法。
【請求項３５】
前記対象が前記緊急対応環境内の密閉箱の中に保管されている麻酔薬であり、前記方法は、
前記対象の前記三次元の動きを前記検出することに基づき、前記密閉箱からの前記麻酔薬の移動の発生を判定するステップと、
前記移動の前記発生に基づいて前記緊急事態遭遇記録内に項目を記録するステップと
を更に含む、請求項３３に記載の方法。
【請求項３６】
前記麻酔薬が使用されており、在庫補充が必要であることを反映するために、前記移動の前記発生に基づいて在庫データベースを更新するステップを更に含む、請求項３５に記載の方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、概して救急医療サービス環境内でのジェスチャ認識及び三次元対話追跡に関する。
【背景技術】
【０００２】
救急医療サービス（「ＥＭＳ」：ｅｍｅｒｇｅｎｃｙ  ｍｅｄｉｃａｌ  ｓｅｒｖｉｃｅ）又は初期対応環境では、介護者が病院環境での同等の治療よりも短時間で、且つ多数の不確実性及び変動要因を伴って患者の治療に対してより鋭敏に集中しなければならないことが多い。しかしながら、ＥＭＳ介護者の患者との遭遇についての記録を作成することは相変わらず大切である。患者カルテ記入システムに情報を（例えばタイプ入力や書き込むことによって）手動入力することは、ときとして患者の治療から貴重な時間及び注意力を奪う場合があり、気を散らすことになる可能性があり、ＥＭＳの遭遇後に記憶から不正確に再現されることがしばしばあり得る。
【発明の概要】
【課題を解決するための手段】
【０００３】
本発明の実施形態による緊急対応環境内のジェスチャ認識のための方法は、少なくとも１つのセンサから人体の少なくとも一部に関する視覚情報を受け取るステップと、緊急事態遭遇記録を保持するステップと、視覚情報をモニタして人体の少なくとも一部の動きを求めるステップと、人体の少なくとも一部の動きに基づいてジェスチャの発生を認識するステップと、ジェスチャの発生に基づいて緊急事態遭遇記録内に項目を記録するステップとを含む。
【０００４】
ジェスチャが作為的なジェスチャである、段落［０００３］に記載の方法。
【０００５】
ジェスチャが自然的なジェスチャである、段落［０００３］及び［０００４］の何れかに記載の方法。
【０００６】
人体の少なくとも一部が人体の手である、段落［０００３］から［０００５］の何れに記載の方法。
【０００７】
人体の少なくとも一部が人体の手の１本又は複数本の指を含む、段落［０００３］から［０００６］の何れかに記載の方法。
【０００８】
人体の少なくとも一部が人体の頭部である、段落［０００３］から［０００７］の何れかに記載の方法。
【０００９】
項目がジェスチャの発生時刻を含む、段落［０００３］から［０００８］の何れかに記載の方法。
【００１０】
項目がジェスチャの識別情報を更に含む、段落［０００３］から［０００９］の何れかに記載の方法。
【００１１】
項目がジェスチャの発生の時刻に対応して受け取られた視覚情報を含む、段落［０００３］から［００１０］の何れかに記載の方法。
【００１２】
音声情報を受け取るステップを更に含み、項目がジェスチャの発生の時刻に対応して受け取られた音声情報を含む、段落［０００３］から［００１１］の何れかに記載の方法。
【００１３】
ジェスチャ以外の状態の発生を突き止めるステップと、状態の発生がジェスチャの発生と同時に起きる場合にのみ、緊急事態遭遇記録内に項目を記録するステップとを更に含む、段落［０００３］から［００１２］の何れかに記載の方法。
【００１４】
ジェスチャが第１のジェスチャであり、状態が第２のジェスチャである、段落［０００３］から［００１３］の何れかに記載の方法。
【００１５】
状態が、緊急対応環境に対する人体の位置又は場所である、段落［０００３］から［００１４］の何れかに記載の方法。
【００１６】
人体の少なくとも一部が人体の第１の部分であり、ジェスチャが第１のジェスチャであり、少なくとも１つのセンサから人体の第２の部分に関する視覚情報を受け取るステップと、視覚情報をモニタして人体の第２の部分の動きを求めるステップと、人体の第２の部分の動きに基づいて第２のジェスチャの発生を認識するステップと、第１のジェスチャの発生及び第２のジェスチャの発生に基づいて緊急事態遭遇記録内に項目を記録するステップとを更に含む、段落［０００３］から［００１５］の何れかに記載の方法。
【００１７】
項目を記録するステップが、第１のジェスチャと第２のジェスチャとが同時に起きる場合にのみ緊急事態遭遇記録内に項目を記録するステップを含む、段落［０００３］から［００１６］の何れかに記載の方法。
【００１８】
人体の第１の部分が手であり、人体の第２の部分が頭部である、段落［０００３］から［００１７］の何れかに記載の方法。
【００１９】
人体の第１の部分が第１の手であり、人体の第２の部分が第２の手である、段落［０００３］から［００１８］の何れかに記載の方法。
【００２０】
人体が、緊急対応環境内で治療を受けている患者である、段落［０００３］から［００１９］の何れかに記載の方法。
【００２１】
人体が、緊急対応環境内で患者を治療している介護者である、段落［０００３］から［００２０］の何れかに記載の方法。
【００２２】
本発明の実施形態による緊急対応環境内のジェスチャ認識システムは、人体の少なくとも一部に関する視覚情報を受け取るように構成される少なくとも１つのセンサと、少なくとも１つのセンサに通信可能に結合される制御システムとを含み、制御システムは、緊急事態遭遇記録を保持し、視覚情報をモニタして人体の少なくとも一部の動きを求め、人体の少なくとも一部の動きに基づいてジェスチャの発生を認識し、ジェスチャの発生に基づいて緊急事態遭遇記録内に項目を記録するように構成される。
【００２３】
本発明の実施形態による緊急対応環境内の対話追跡のための方法は、センサアレイの視界内からカラー画像及び奥行き情報を受け取るステップと、緊急事態遭遇記録を保持するステップと、センサアレイによって受け取られるカラー画像及び奥行き情報に基づいて緊急対応環境内の対象の位置及び対象の動きの一方又は両方をモニタするステップと、緊急事態遭遇記録内に状態の発生を記録するステップとを含み、状態は対象の位置及び対象の動きの一方又は両方に基づく。
【００２４】
対象が人間であり、対象の位置及び対象の動きの一方又は両方をモニタするステップが、人間の位置及び人間の少なくとも部分的な骨格の概算の動きの一方又は両方をモニタするステップを含む、段落［００２３］に記載の方法。
【００２５】
人間が第１の対象であり、状態は、人間の少なくとも部分的な骨格の概算が第２の対象の一定の距離内に入ることを含む、段落［００２３］及び［００２４］の何れかに記載の方法。
【００２６】
人間が第１の人間であり、第２の対象が第２の人間である、段落［００２３］から［００２５］の何れかに記載の方法。
【００２７】
状態は、第１の人間が第２の人間に接触することを含む、段落［００２３］から［００２６］の何れかに記載の方法。
【００２８】
第２の人間は、緊急対応環境内で第１の人間によって治療されている患者である、段落［００２３］から［００２７］の何れかに記載の方法。
【００２９】
状態の発生を記録するステップが、状態が発生する時刻を記録するステップを含む、段落［００２３］から［００２８］の何れかに記載の方法。
【００３０】
状態の発生を記録するステップが、状態の種類を記録するステップを更に含む、段落［００２３］から［００２９］の何れかに記載の方法。
【００３１】
状態の発生を記録するステップが、状態の発生中に受け取られるカラー画像をビデオ映像として記録するステップを更に含む、段落［００２３］から［００３０］の何れかに記載の方法。
【００３２】
患者に関するストリーミング臨床データを受け取るステップと、緊急事態遭遇記録内のストリーミング臨床データの少なくとも一部を状態の発生に相関させるステップとを更に含む、段落［００２３］から［００３１］の何れかに記載の方法。
【００３３】
ストリーミング臨床データの少なくとも一部を相関させるステップが、状態の発生時刻に対応するストリーミング臨床データの少なくとも一部にフラグを立てるステップを含む、段落［００２３］から［００３２］の何れかに記載の方法。
【００３４】
本発明の実施形態による緊急対応環境内の対話追跡システムは、自らの視界内のカラー画像及び奥行き情報を受け取るように構成されるセンサアレイと、センサアレイに通信可能に結合される制御システムであって、緊急事態遭遇記録を保持し、センサアレイから受け取るカラー画像及び奥行き情報に基づいて緊急対応環境内の対象の位置及び動きの一方又は両方をモニタし、緊急事態遭遇記録内に状態の発生を記録するように構成される、制御システムとを含み、状態は対象の位置及び動きの一方又は両方に基づく。
【００３５】
本発明の実施形態による緊急対応環境内の在庫管理のための方法は、センサアレイによって緊急対応環境内の人体の三次元の動きを検出するステップであって、センサアレイは緊急対応環境に関する視覚情報及び奥行き情報を生成する、ステップと、緊急対応環境内の対象の三次元の動きを検出するステップと、人体と対象との間の接触の発生を判定するステップと、接触の発生に基づいて緊急事態遭遇記録内に項目を記録するステップとを含む。
【００３６】
対象が緊急対応環境内の密閉箱の中に保管されている麻酔薬であり、方法が、人体及び対象の三次元の動きを検出することに基づき、人体の密閉箱との交わりの発生を判定するステップと、交わりの発生に基づいて緊急事態遭遇記録内に項目を記録するステップとを更に含む、段落［００３５］に記載の方法。
【００３７】
対象が緊急対応環境内の密閉箱の中に保管されている麻酔薬であり、方法が、対象の三次元の動きを検出することに基づき、密閉箱からの麻酔薬の移動の発生を判定するステップと、移動の発生に基づいて緊急事態遭遇記録内に項目を記録するステップとを更に含む、段落［００３５］及び［００３６］の何れかに記載の方法。
【００３８】
麻酔薬が使用されており、在庫補充が必要であることを反映するために、移動の発生に基づいて在庫データベースを更新するステップを更に含む、段落［００３５］から［００３７］の何れかに記載の方法。
【００３９】
複数の実施形態を開示するが、本発明の例示的実施形態を示し説明する以下の詳細な説明から、本発明の更に他の実施形態が当業者に明らかになる。従って、図面及び詳細な説明は、限定的ではなく本質的に例示的であると見なすべきである。
【図面の簡単な説明】
【００４０】
【図１】本発明の実施形態による、車両制御システムが他の装置に通信可能に結合されている緊急対応環境を示す。
【図２】本発明の実施形態による、コンピュータシステムを示す。
【図３】本発明の実施形態による、三次元対話（ｔｈｒｅｅ−ｄｉｍｅｎｓｉｏｎａｌ  ｉｎｔｅｒａｃｔｉｏｎ）をモニタするシステムを有する緊急対応環境を示す。
【図４】本発明の実施形態による、車両制御システム及びセンサアレイを含むシステムを示す。
【図５】本発明の実施形態による、図４のシステムによって認識され得る様々な手及び指のジェスチャを列挙する表を示す。
【図６】本発明の実施形態による、図４のシステムによって認識され得る様々な頭部及び顔のジェスチャを列挙する表を示す。
【図７】本発明の実施形態による、緊急対応環境内の三次元対話をモニタするための方法を示す流れ図を示す。
【図８】本発明の実施形態による、緊急対応環境内の介護者の患者との三次元対話をモニタするための方法を示す流れ図を示す。
【図９】本発明の実施形態による、在庫管理のために緊急対応環境内の三次元対話をモニタするための方法を示す流れ図を示す。
【図１０】本発明の実施形態による、緊急対応環境内のジェスチャ認識方法を示す流れ図を示す。
【発明を実施するための形態】
【００４１】
本発明には様々な修正形態及び代替形態の可能性があるが、特定の実施形態を例として図中に示し、以下で詳しく説明している。但し、その目的は本発明を記載の特定の実施形態に限定することではない。逆に、本発明は、添付の特許請求の範囲によって規定される本発明の範囲に含まれる全ての修正形態、均等物、及び代替形態を範囲に含むことを意図する。
【００４２】
図１に示すように、本発明の実施形態によるシステム１００は、複数の異なる装置からのＥＭＳデータの高度なデータ管理、統合、及び提示を行う。システム１００は、モバイル環境１０１、企業環境１０２、及び管理環境１０３を含む。様々な環境１０１、１０２、１０３内の装置は、例えばインターネット等のネットワーク１２０を介して通信可能に結合されても良い。システム１００については、参照によりその全体を本明細書において援用する、２０１１年１月２７日に公開された特許協力条約の出願公開番号国際公開第２０１１／０１１４５４号明細書の中で更に説明されている。
【００４３】
本明細書で使用するとき、「通信可能に結合される」という句は、情報を伝えることができる任意の結合を指すようにその最大限広範な意味で使用する。従って、例えば通信可能に結合されるとは、例えばワイヤによって電気的に結合されること、例えば光ケーブルによって光学的に結合されること、及び／又は例えば無線周波や他の伝送媒体によって無線で結合されることを含む。「通信可能に結合される」は、例えばネットワークを介した結合等の間接的な結合、又は直接的な結合も含む。
【００４４】
本発明の実施形態によれば、モバイル環境１０１は救急車や他のＥＭＳ車両、例えば車両のモバイル環境（ＶＭＥ：ｖｅｈｉｃｕｌａｒ  ｍｏｂｉｌｅ  ｅｎｖｉｒｏｎｍｅｎｔ）である。モバイル環境は、現場環境で患者の治療時に確立されるデータ入力装置並びに診断装置及び治療装置のローカルネットワーク−「現場患者モバイル環境」（ＡＳＰＭＥ：Ａｔ  Ｓｃｅｎｅ  Ｐａｔｉｅｎｔ  Ｍｏｂｉｌｅ  Ｅｎｖｉｒｏｎｍｅｎｔ）とすることもできる。モバイル環境は、ＶＭＥ及び／又はＡＳＰＭＥの１つ又は複数の組合せでも良い。本発明の実施形態によれば、モバイル環境は、モバイル環境の位置１０１を追跡し、モバイル環境１０１及び／又は緊急位置を特定し、搬送先の位置を特定するために、運転手１１２によって使用されるナビゲーション装置１１０を含み得る。ナビゲーション装置１１０は、例えば全地球測位システム（「ＧＰＳ」）を含み得る。ナビゲーション装置１１０は、車速、位置間の移動時間、及び推定到着時刻についての計算を実行するように構成することもできる。本発明の実施形態によれば、車両をナビゲートする際に運転手１１２を支援するために、ナビゲーション装置１１０を救急車の前部に配置する。ナビゲーション装置１１０は、例えばコロラド州ブルームフィールド（Ｂｒｏｏｍｆｉｅｌｄ，  Ｃｏｌｏｒａｄｏ）にあるゾールデータシステムズ（ＺＯＬＬ  Ｄａｔａ  Ｓｙｓｔｅｍｓ）から入手可能なレスキューネット（ＲｅｓｃｕｅＮｅｔ）（登録商標）ナビゲータ（Ｎａｖｉｇａｔｏｒ）車載電子データ通信システムであり得る。
【００４５】
図１に示すように、本発明の実施形態によれば、患者モニタ装置１０６及び患者カルテ記入装置１０８もモバイル環境１０１内で患者のケアに使用されることが多い。ＥＭＳ隊員１１４は、患者モニタ装置１０６を患者１１６に取り付けて患者１１６をモニタする。本発明の実施形態によれば、患者モニタ装置１０６は、例えば患者１１６に取り付けて心拍数をモニタし、且つ／又は心電図（「ＥＣＧ」）を生成するように構成される電極及び／又はセンサを有する除細動装置であり得る。患者モニタ装置１０６は、患者の他の状態を検出するためのセンサ又は患者の他の状態を導出し若しくは計算するためのプロセッサを含んでも良い。本発明の実施形態によれば、例えば患者モニタ装置１０６は、血圧、体温、呼吸数、血中酸素濃度、呼気終末二酸化炭素濃度、肺機能、血糖値、及び／又は体重のモニタ、検出、治療、及び／又は導出若しくは計算を行うことができる。本発明の実施形態によれば、患者モニタ装置１０６は、マサチューセッツ州チェルムスフォード（Ｃｈｅｌｍｓｆｏｒｄ，  Ｍａｓｓａｃｈｕｓｅｔｔｓ）にあるゾールメディカル株式会社（Ｚｏｌｌ  Ｍｅｄｉｃａｌ  Ｃｏｒｐｏｒａｔｉｏｎ）から入手可能なゾールＥシリーズ（Ｚｏｌｌ  Ｅ−Ｓｅｒｉｅｓ）（登録商標）やＸシリーズ（Ｘ−Ｓｅｒｉｅｓ）除細動器であり得る。本発明の実施形態によれば、患者モニタ装置は患者治療装置でも良く、又は患者モニタ機能及び／若しくは患者治療機能を含む別の種類の装置でも良い。
【００４６】
本発明の実施形態によれば、患者カルテ記入装置１０８は、ＥＭＳ隊員１１４が患者１１６の状態及び／又は患者に施した治療に関する記録及び／又はメモを生成するために使用する装置である。例えば、患者カルテ記入装置１０８は、特定の時刻に患者１１６に与えた薬剤の投与量をメモするために使用することができる。本発明の実施形態によれば、患者カルテ記入装置１０８及び／又は患者モニタ装置１０６は時計を有しても良く、その時計はネットワークや衛星等の外部時刻源と同期して、ＥＭＳ隊員が治療又は観察の時刻を手動入力する必要性（又は治療を施してから長い時間がたった後、カルテを記入するために治療時刻を推定しようとする必要性）を回避することができる。本発明の実施形態によれば、患者カルテ記入装置１０８は、患者についての略歴、人口学的情報、及び／又は既往情報、例えば患者の氏名、識別番号、身長、体重、既往歴を記録するために使用することもできる。本発明の実施形態によれば、患者カルテ記入装置１０８は、例えばコロラド州ブルームフィールドにあるゾールデータシステムズ（Ｚｏｌｌ  Ｄａｔａ  Ｓｙｓｔｅｍｓ）から入手可能なレスキューネット（ＲｅｓｃｕｅＮｅｔ）（登録商標）ｅＰＣＲスイート（ｅＰＣＲ  Ｓｕｉｔｅ）のタブレットＰＣＲ（ＴａｂｌｅｔＰＣＲ）コンポーネント等のタブレットＰＣである。本発明の一部の実施形態によれば、患者カルテ記入装置１０８は、ＶＣＳ１０４に通信可能に接続し、患者１１６に何が何時行われたのかを示すためにタップすることができるタッチスクリーンや音声認識データ入力等の対話型データ入力インターフェイスを有するアップル（Ａｐｐｌｅ）のアイフォーン（ｉＰｈｏｎｅ（登録商標））やアイパッド（ｉＰａｄ（登録商標））等のリストバンド又はスマートフォンである。
【００４７】
ナビゲーション装置１１０、カルテ記入装置１０８、及びモニタ装置１０６はそれぞれ、患者の搬送前、搬送中、及び搬送後にＥＭＳの運転手１１２及び隊員１１４にとって非常に別個に有用である。本発明の実施形態によれば、車両制御システム（「ＶＣＳ」：ｖｅｈｉｃｌｅ  ｃｏｎｔｒｏｌ  ｓｙｓｔｅｍ）１０４は、各装置１０８、１１０、１１２からデータを受信、編成、記憶、及び表示し、各装置１０８、１１０、１１２の有用性を更に強化すると共に、通常であればＥＭＳ隊員１１４が各装置１０８、１１０、１１２に視覚的注意及び手作業の注意を別個にそらす必要がある特定の作業をＥＭＳ隊員１１４が実行するのをはるかに容易にする。本発明の実施形態によれば、つまりＶＣＳは、通常であれば分散し、編成されない情報を集中させ編成する。
【００４８】
本発明の実施形態によれば、ＶＣＳ１０４は、患者モニタ装置１０６、患者カルテ記入装置１０８、及びナビゲーション装置１１０に通信可能に結合される。ＶＣＳ１０４は、記憶媒体１１８にも通信可能に結合される。本発明の実施形態によれば、ＶＣＳ１０４は、タッチスクリーン、フラットパネルＰＣとすることができ、記憶媒体１１８はＶＣＳ１０４の内部に又は外部に配置され得る。本発明の実施形態によれば、ＶＣＳ１０４は、グラフィカルユーザインターフェイスとして機能する表示テンプレートを含むことができ、表示テンプレートは、利用者（例えばＥＭＳ隊員１１４）が、装置１０６、１０８、１１０から集められる情報及び／又はそれらの装置に送られる情報の様々なサブセット及び／又は表示モードを選択できるようにする。
【００４９】
本発明の一部の実施形態は様々なステップを含み、その幾つかをハードウェアコンポーネントによって行うことができ、又は機械実行可能命令によって実施することができる。これらの機械実行可能命令は、命令でプログラムされた汎用プロセッサ又は専用プロセッサにステップを実行させるために使用することができる。或いは、これらのステップはハードウェア、ソフトウェア、及び／又はファームウェアの組合せによって実行することができる。更に、本発明の一部の実施形態は、１つ又は複数のコンピュータシステム、メインフレーム（例えばＩＢＭ  ｚシリーズ（ｚＳｅｒｉｅｓ（登録商標））等のＩＢＭメインフレーム、ユニシス（Ｕｎｉｓｙｓ）クリアパスメインフレーム（ＣｌｅａｒＰａｔｈ（登録商標）  Ｍａｉｎｆｒａｍｅ）、ＨＰインテグリティノンストップサーバ（ＨＰ  Ｉｎｔｅｇｒｉｔｙ  ＮｏｎＳｔｏｐ（登録商標）  ｓｅｒｖｅｒ）、ＮＥＣエクスプレスシリーズ（Ｅｘｐｒｅｓｓ  ｓｅｒｉｅｓ）等）、又はクライアント−サーバ型システム上で少なくとも部分的に（例えば１つ又は複数のモジュール）実行し又は実装することができる。加えて、本発明の実施形態の特定のハードウェアの側面が、これらのシステムの１つ若しくは複数又はその一部を組み入れても良い。
【００５０】
そのようなものとして、図２は、本発明の実施形態を利用することができるコンピュータシステム２００の一例である。この例によれば、このコンピュータシステムは、バス２０１、少なくとも１個のプロセッサ２０２、少なくとも１つの通信ポート２０３、メインメモリ２４、脱着可能な記憶媒体２０５、読取専用メモリ２０６、及び大容量記憶域２０７を含む。
【００５１】
プロセッサ２０２は、これだけに限定されないが、インテル（Ｉｎｔｅｌ（登録商標））アイテニアム（Ｉｔａｎｉｕｍ（登録商標））やアイテニアム２（Ｉｔａｎｉｕｍ２（登録商標））プロセッサ、ＡＭＤ（登録商標）オプテロン（Ｏｐｔｅｒｏｎ（登録商標））やアスロンＭＰ（Ａｔｈｌｏｎ  ＭＰ（登録商標））プロセッサ、又はモトローラ（Ｍｏｔｏｒｏｌａ（登録商標））ラインのプロセッサ等、知られている任意のプロセッサとすることができる。通信ポート２０３は、例えばモデムによるダイヤルアップ接続で使用するＲＳ−２３２ポート、１０／１００イーサネット（登録商標）ポート、又は銅若しくはファイバを使用するギガビットポートのどれでも良い。通信ポート２０３は、ローカルエリアネットワーク（ＬＡＮ）、広域ネットワーク（ＷＡＮ）、コンピュータシステム２００が接続する任意のネットワーク等、ネットワークに応じて選ぶことができる。メインメモリ２０４は、ランダムアクセスメモリ（ＲＡＭ）又は当業者に一般に知られている他の任意の動的記憶装置とすることができる。読取専用メモリ２０６は、例えばプログラム可能読取専用メモリ（ＰＲＯＭ）チップ等、プロセッサ２０２用の命令等の静的情報を記憶するための任意の静的記憶装置とすることができる。
【００５２】
大容量記憶域２０７は、情報及び命令を記憶するために使用することができる。例えば、アダプテック（Ａｄａｐｔｅｃ（登録商標））ファミリーのＳＣＳＩドライブ、光学ディスク、ＲＡＩＤ等のディスクアレイ（例えばアダプテック（Ａｄａｐｔｅｃ）ファミリーのＲＡＩＤドライブ）、又は他の任意の大容量記憶装置を使用することができる。バス２０１は、プロセッサ２０２を他のメモリ、記憶域、及び通信ブロックと通信可能に結合する。バス２０１は、使用する記憶装置にもよるが、例えばＰＣＩ／ＰＣＩ−ＸやＳＣＳＩベースのシステムバスとすることができる。脱着可能な記憶媒体２０５は、例えば任意の種類の外部ハードドライブ、フロッピー（登録商標）ドライブ、ＩＯＭＥＧＡ（登録商標）ジップドライブ、コンパクトディスク−読取専用メモリ（ＣＤ−ＲＯＭ）、コンパクトディスク−書換可能（ＣＤ−ＲＷ）、デジタルビデオディスク−読取専用メモリ（ＤＶＤ−ＲＯＭ）とすることができる。上記の構成要素は、一種の可能性を例示することを目的とする。前述の例は例示的実施形態に過ぎないので、前述の例が本発明の範囲を限定することは決してない。
【００５３】
図３は、本発明の実施形態による、三次元対話をモニタするシステム３００を有する緊急対応環境を示す。システム３００は、センサ又はセンサアレイ１を含む。センサ１は、カメラ、ビデオカメラ、又は視覚情報を集めることができる他の撮像装置とすることができる。本発明の一部の実施形態によれば、センサ１は、画像取込装置、例えばカラー画像取込装置、並びに奥行決定装置、例えば赤外線放射源及び赤外線奥行センサを含むセンサアレイである。センサ１は、音声取込装置も含むことができる。例えば、センサ１は、マイクロソフト社（Ｍｉｃｒｏｓｏｆｔ  Ｃｏｒｐｏｒａｔｉｏｎ）から入手可能なキネクト（Ｋｉｎｅｃｔ（登録商標））センサアレイ等のセンサアレイであり得る。更に、又は代わりに、センサ１はリープモーション社（Ｌｅａｐ  Ｍｏｔｉｏｎ  Ｉｎｃ．）から入手可能なリープ（ＬＥＡＰ（商標））デバイスとすることもできる。本発明の実施形態によれば、センサ１は、視覚情報、奥行情報、音声情報、色情報等を集めることを可能にする多岐にわたるハードウェアとすることができ、又はかかるハードウェアを含むことができる。
【００５４】
患者１１６及び／又は乗組員２、３の活動が少なくとも部分的にその視界に入るように、センサ１は緊急対応環境内に、例えば救急車１０１の後部１５２に配置することができる。例えばセンサ１は、救急車１０１の後部区画１５２の壁又は天井に装着することができる。センサ１は、患者１１６がその上に横たわり且つ／又は治療を受けるベッド、担送車、ストレッチャー等の患者支持器４も自らの視界内に含むことができる。救急車１０１の後部１５２は、薬、例えば麻酔薬６を備えておくことができる貯蔵棚５、例えば薬品戸棚や麻酔薬戸棚を更に含むことができる。
【００５５】
図４は、本発明の実施形態による、センサアレイ１に通信可能に結合されている車両制御システム１０４を含むシステムを示す。本発明の実施形態によれば、センサアレイ１は、撮像装置９、奥行センサシステム１０、及び／又は音声入力１１を含むことができる。ＶＣＳ１０４は、患者モニタ装置１０６、カルテ記入システム１０８、ナビゲーションシステム１１０、及び車両動作システム８にも通信可能に結合され得る。車両動作システム８は、製造業者が設置した装置及び車両購入後の装置の両方、例えば車速センサ、シートベルト検知器、加速度計を含む、車両の安全及び／又は動作に関係する車載センサやコントローラ、並びに参照によりその全体を本明細書において援用する、２０１２年６月７日に出願された米国仮特許出願第６１／６５６，５２７号明細書に記載されているものを限定することなしに含む他の車両関連装置及び安全関連装置を含み得る。
【００５６】
車両制御システム１０４は、遭遇記録７を作成し、保持し、且つ／又は更新するように構成されても良く、遭遇記録７は緊急対応環境内（例えばデータベース１１８内）にローカルに、及び／又は企業データベース１３０上にリモートに記憶することができる。遭遇記録７は、車両制御システム１０４及びＶＣＳ１０４が通信可能に結合される装置のそれぞれによって得られる情報を含み得る。遭遇記録７内の記録は、例えば特定の患者１１６との遭遇及び／又は車両１０１の特定の急送に固有であり得る。
【００５７】
ＶＣＳ１０４は、緊急対応環境内の対話、例えば介護者２、３、及び患者４、並びに／又は緊急対応環境内の対象による対話やそれらの者の間の対話を追跡するように構成することができる。ＶＣＳ１０４は、センサアレイ１の視界内からのカラー画像及び奥行き情報を受け取るように構成することができる。ＶＣＳ１０４は、緊急事態遭遇記録７をローカルに及び／又はリモートに保持するようにも構成することができる。ＶＣＳ１０４は、センサアレイ１が受け取ったカラー画像及び奥行き情報に基づき、緊急対応環境内の対象の位置及び／又は対象の動きをモニタする。例えば、センサアレイ１はキネクト（Ｋｉｎｅｃｔ（登録商標））センサアレイとすることができ、ＶＣＳ１０４は、人体及びそのそれぞれの連結（骨格関節及び骨）の三次元空間内での動き及び位置を検出し又は概算するために、センサアレイ１からデータを受け取るソフトウェアを含むことができる。
【００５８】
そのようなものとして、ＶＣＳ１０４はセンサ１の視界内の異なる人間を区別することができ、視界内のかかる人間の２人以上の動きをモニタし又は観察することができる。本発明の一部の実施形態によれば、ＶＣＳ１０４は、人間のうちのどちらが患者であり、どちらが介護者であるのかを認識するように構成される。例えば、ＶＣＳ１０４は、特定の人間が患者支持器４上で比較的安静に横たわっているのを観察することにより、その人間を患者として認識し得る一方、他の人間が救急車１０１の後部で立っている又は動き回っていることを理由にその別の人間がＥＭＳ隊員２であると認識し得る。ＶＣＳ１０４は、緊急対応環境内の１人又は複数の人間の三次元の動きを、それらの人間の基本的な骨格構造の要素を概算することによって追跡し又はモニタするように構成されても良く、それにより２人の人間が接触し又は近接するときを見極めることができる。本発明の実施形態によれば、例えばＶＣＳ１０４は、ＥＭＳ隊員２の手や肩が患者１１６の身体部位に伸び、触るときを見極めることができる。
【００５９】
ＶＣＳ１０４がセンサアレイ１から受け取る情報の何れか又は全て、並びにかかるセンサ情報から得られる任意の追加のデータ又は情報を遭遇記録７に記憶することができる。かかる情報は、遭遇記録７内の他の装置からの他のデータに相関させる方法で遭遇記録７に記憶することもでき、例えば遭遇記録７内の記録は時刻インデックス及び／又は患者識別情報を含み得る。
【００６０】
本発明の実施形態によれば、ＶＣＳ１０４は、緊急事態遭遇記録７内に状態の発生を記録するように構成される。かかる状態は、対象の位置及び／又は対象の動きに基づき得る。例えば、対象を人間とすることができ、ＶＣＳ１０４は、三次元空間内での人間の動き（又は人間の骨格の概算（ａｐｐｒｏｘｉｍａｔｉｏｎ））をモニタし、人間又は人間の一部が（例えば救急車１０１内の）或る位置に交わるとき、一定の期間にわたって特定の位置に留まるとき、又は別の対象と交わり若しくは近づくとき、遭遇記録７内に項目を作成することができる。ＶＣＳ１０４は、或る対象（例えば人間）が別の対象（例えば別の人間）の一定の距離内に入るとき、例えば第１の対象が第２の対象に接触しているゼロ距離又は最小距離に入るとき、遭遇記録７に項目を作成するように構成することができる。そのようなものとして、ＶＣＳ１０４は、介護者２又は３が患者１１６に近づいたとき及び／又は患者１１６に接触したとき、或いは対象が患者１１６に近づき又は接触したとき、遭遇記録７に記録を付けるように構成することができる。
【００６１】
ＶＣＳ１０４は、三次元の視覚データ及び位置データに基づく状態の観察に基づき、遭遇記録７を様々な方法で更新するように構成することができる。例えば、ＶＣＳ１０４は、状態が発生した時刻、発生した状態の識別情報若しくは種類、及び／又は状態の発生に一致する他のデータ、例えば状態が発生した時点又は時間範囲を含む映像データやカラー画像を遭遇記録７内に入力するように構成することができる。一部の事例では、ＶＣＳ１０４が、例えば患者に通信可能に結合される除細動器又は他の患者モニタ装置１０６から患者１１６に関するストリーミング臨床データを受け取り、緊急事態遭遇記録７内のストリーミング臨床データの少なくとも一部をセンサ１の視覚データに基づく状態の発生に相関させる。本発明の実施形態によれば、ストリーミング臨床データの一部又は全てを相関させることが、状態の発生時刻に対応するストリーミング臨床データの一部又は全てにフラグを立てることを含む。
【００６２】
図７は、本発明の実施形態による、三次元の位置及び形状の視覚データに基づき状態の発生を記録することを示す流れ図７００を示す。例えばＶＣＳ１０４及びセンサ１により、１つ又は複数の別個の対象が識別される（ブロック７０２）。１つ又は複数の対象の位置及び／又は動きが追跡され、さもなければモニタ又はモデル化され（ブロック７０４）、その追跡に基づいてＶＣＳ１０４が状態の発生を識別する（ブロック７０６）。状態の発生又は状態に関する情報が患者遭遇記録７内に記録される（ブロック７０８）。
【００６３】
図８は、本発明の実施形態による、同様の方法をより詳細に説明する流れ図８００を示す。緊急対応環境内、例えば救急車の後部で、１人の人間又は互いに異なる複数の人間が識別される（ブロック８０２）。人間の少なくとも１人が患者として識別される（ブロック８０４）。１人又は複数の人間の位置及び／又は動きが観察され、又は追跡され、さもなければモデル化され（ブロック８０６）、それに基づいてＶＣＳ１０４が状態の発生、例えば患者の治療の発生を識別する（ブロック８０８）。例えばその状態（例えば治療）が発生した時点又は時間範囲を記録することにより（ブロック８１２）、及び／又は発生した接触の種類（例えば治療）を記録することにより（ブロック８１４）、患者との接触に関する情報を遭遇記録７内に記録しても良い（ブロック８１０）。
【００６４】
例えば、ＶＣＳ１０４に供給されるセンサ１のデータが、介護者２の手が患者１１６の頭部又は口の領域に行くものとしてＶＣＳ１０４によって解釈された場合、ＶＣＳ１０４は、経口薬が患者１１６に投与された又は投与されている可能性があること、及び投与が発生した具体的時間を反映させるために遭遇記録７を更新することができる。或いは、又は加えて、ＶＣＳ１０４は、患者の遭遇記録７内に入力された把握済みの対話又は状態を確かめ若しくは検証するように、ＥＭＳ隊員２又は他の介護者を後で、例えば緊急事態の遭遇後に又は標準シフトの終了時に促すように構成することができる。例えば、ＶＣＳ１０４は、ＥＭＳ隊員２の手が患者１１６の顔に行くことの発生を観察し、経口薬の起こり得る投薬としてかかる発生にフラグを立てることができるが、後で確認するようにＥＭＳ隊員２に促す場合、その対話が投薬ではなく患者の頭部を回転させたことであったことを反映させるために、又は介護者２が患者１１６に接触した他の何らかの理由を反映させるために、観察を編集する能力をＥＭＳ隊員２に与えることができる。
【００６５】
図９は、本発明の実施形態による、在庫管理のために緊急対応環境内の三次元対話をモニタするための方法を示す流れ図９００を示す。ＶＣＳ１０４は、センサ１及び緊急対応環境に関する既知の情報を使用し、緊急対応環境内の特定の位置、例えば貯蔵棚５を識別することができる（ブロック９０２）。ＶＣＳ１０４は、緊急対応環境内の特定のアイテムの位置に関して個別調整を行うように構成することもできる。例えば、初期化及び／又は構成プロトコルの間、ＶＣＳ１０４は、貯蔵棚５の三次元位置の記録を取ることができるように、利用者を促して貯蔵棚５の外周及び／又は貯蔵棚５へのドアの周囲に利用者の指又は手を伸ばさせることができる。かかる棚５は、例えば安全及び危機管理上の理由から近づくことがしばしば管理される麻酔薬の棚５であり得る。
【００６６】
ＶＣＳ１０４は、緊急対応環境内、例えば救急車の後部にいる個々の人間を識別し（ブロック９０４）、その人間の位置及び／又は動きを追跡することができる（ブロック９０６）。本発明の実施形態によれば、これはセンサアレイ１から受け取られる視覚情報及び奥行き情報を用いて行われ得る。センサアレイ１から受け取られるかかる視覚情報及び奥行き情報に基づき、ＶＣＳ１０４は、緊急対応環境内の対象、例えば人間ではない対象の三次元の動きを検出し又は追跡することもできる。ＶＣＳ１０４は、人体と対象との間の接触の発生、例えば人体又は人体の一部が麻酔薬の棚５に近づくこと及び／又は交わることの発生を特定することができる（ブロック９０８）。ＶＣＳ１０４は、接触の発生に基づいて緊急事態遭遇記録７内に項目、例えば棚５に接近したというメモを、時刻（ブロック９１２）及び／又は棚５に近づいた人物の識別情報（ブロック９１４）と共に記録することもできる（ブロック９１０）。ＶＣＳ１０４は、注目すべき様々な異なる種類の状態の発生を観察するように構成することができる。例えばＶＣＳ１０４は、棚５へのドア又は開口部の領域に人間の形状が交わることを検出するように構成することができる。ＶＣＳ１０４は、麻酔薬６の形に相関する形状が、ドア又は棚の開口部のかかる領域の内側から、かかる領域の外側に出て行ったことを検出するように構成することができる。ＶＣＳ１０４は、人間がその手の中に対象を有しているかどうか、並びにその対象の形状及び／又は大きさをメモするように構成することもできる。ＶＣＳ１０４は、麻酔薬が使用されており、在庫補充が必要であることを反映するために、移動の発生に基づいて在庫データベースを更新するように更に構成することができる。本発明の実施形態によれば、他の対象の使用及びそれに関連する在庫を追跡するために、並びに対象の人間との交わり及び人間による使用を全般的に追跡するために、同様の過程を使用することができる。本発明の一部の実施形態によれば、特定の棚５に近づく事象が発生すると、他の情報収集が更に引き起こされる場合があり、例えば、かかる事象は棚５の内部のカメラ及び／又は車両１０１内の他の場所の別のビデオカメラを作動させる場合がある。本発明の実施形態によれば、棚５に近づく各乗組員の識別情報を遭遇記録７内に記録することができる。
【００６７】
図１０は、本発明の実施形態による、緊急対応環境内のジェスチャ認識方法を示す流れ図１０００を示す。ＶＣＳ１０４及びセンサ１を含むシステム４００は、上記のように人間及び対象の動き、位置、及び対話を追跡するように構成することができるが、システム４００並びにＶＣＳ１０４及びセンサ１は更に、又は代替的に、ジェスチャの発生についてかかる視覚情報をモニタするように構成することもできる。一部の事例では、ジェスチャをモニタするために三次元の位置情報及び視覚情報を使用することができ、他の事例では、（例えばパターン認識や他の視覚的刺激又はパターンに基づき）ジェスチャを検出するために単なる視覚情報を使用しても良い。そのようなものとして、センサ１は、幾つかの様々な種類のセンサ又はセンサアレイの１つとすることができる。
【００６８】
ジェスチャが行われたことを識別するために、例えば１つ若しくは複数の手及び／又は指によって、或いは頭部及び／又は首によってジェスチャが行われたことを識別するために（ブロック１００２）、ＶＣＳ１０４は、人体全体及び／又は人体の１つ若しくは複数の部分を追跡するように構成することができる。ＶＣＳ１０４は、少なくとも１つのセンサ１から人体の少なくとも一部に関する視覚情報を受け取り、遭遇記録７を保持する。ＶＣＳ１０４は、人体（例えば手や頭部）の少なくとも一部の動きを判定するために、及び人体の少なくとも一部の動きに基づいたジェスチャの発生を認識するために、視覚情報をモニタするように構成される。例えばＶＣＳ１０４は、センサ１によって受け取られる視覚情報及び／又は奥行き情報に基づいて１つ又は複数の手又は指のジェスチャ、例えば図５に列挙する１つ又は複数の手又は指のジェスチャを認識する。ＶＣＳ１０４は、センサ１によって受け取られる視覚情報及び／又は奥行き情報に基づいて１つ又は複数の頭部又は顔のジェスチャ、例えば図６に列挙する１つ又は複数の頭部又は顔のジェスチャを認識することもできる。
【００６９】
手又は指のジェスチャの例には、手又は指を振ること、拳を作ること、拳を上にあげること、拳を振ること、「サムズアップ（ｔｈｕｍｂｓ  ｕｐ）」の合図を作ること、指を広げること、数を示す（例えば０、１、２、３、４、５、６、７、８、９、又は１０本の指を伸ばす）こと、指さし、手を一緒に動かすこと、手を引き離すこと、及び／又は手首を軽くたたくことが含まれ得る。頭部又は顔のジェスチャの例には、頷くこと、頭部を上下に動かすこと、「いいえ」のジェスチャの場合に頭部を左右に振ること、「はい」のジェスチャの場合に頭部を上下に振ること、まばたき、口の開閉、舌を突き出すこと、眉を上げる若しくは下げること、及び／又は目を開く若しくは閉じることが含まれ得る。
【００７０】
ＶＣＳ１０４がジェスチャを認識すると、ＶＣＳ１０４は、ジェスチャの発生に基づいて緊急事態遭遇記録７内に項目を記録する（ブロック１００４）。かかるジェスチャは、作為的とすることができ、或いは自然的とすることができる。作為的なジェスチャとは、主に、ＶＣＳ１０４に対して状態を引き起こすために人間が行うジェスチャである。そのため、作為的なジェスチャは、緊急対応環境内で患者１１６を治療する自然の成り行きで通常なら行われることがないジェスチャであり得る。例えば、「サムズアップ」の合図を作ることは作為的なジェスチャの一例である。頭部が非自発的に上下に動いている患者は自然的なジェスチャ、即ちＶＣＳ１０４を作動させるためだけに行われるものではないジェスチャの一例である。
【００７１】
ＶＣＳ１０４がジェスチャの認識に基づいて患者遭遇記録７内に作成する項目は、行われたジェスチャの種類に関する情報（ブロック１００６）、ジェスチャが行われた時刻に関する情報（ブロック１００８）、及び／又はジェスチャが行われた時刻における他のデータ値に関する情報（ブロック１０１０）、例えば乗組員に関する情報（ブロック１０１２）、患者の臨床データ（ブロック１０１４）、及び車両の動作又は安全状態（ブロック１０１６）を含み得る。例えば、患者１１６に付き添っている介護者２が自分の左手首を右手又は右指で軽くたたく（腕時計を通常身につける位置を軽くたたく）ことを示す視覚情報及び／又は奥行き情報をＶＣＳ１０４がセンサ１から受け取る度に、ＶＣＳ１０４は、患者１１６の現在の血圧測定値を遭遇記録７に書き込むように構成することができる。ＶＣＳ１０４を様々な経路及び／又は治療プロトコルに導くために、又は前のジェスチャ若しくは前のジェスチャによって可能になった任意選択肢を確認するために、連続したジェスチャを使用することができる。例えばＶＣＳ１０４は、手首を軽くたたくジェスチャとその後に続く胸を軽くたたくジェスチャを識別するとき、遭遇記録７に血圧測定値を記録するように構成することができ、同じ手首を軽くたたくジェスチャとその後に続く後頸部を軽くたたくジェスチャを識別するとき、遭遇記録７にＥＣＧ波形信号を記録するように構成することができる。本発明の実施形態によれば、ＶＣＳ１０４は、ジェスチャ中に又はジェスチャの一定の時間範囲内に受け取られる視聴覚（例えば映像及び／又は音声）情報を遭遇記録７内に記録するように構成することもできる。
【００７２】
本発明の一部の実施形態によれば、ＶＣＳは、同時に発生するジェスチャ、例えば図５、図６、又は他の任意の自然的若しくは作為的なジェスチャから選択される２つ以上のジェスチャを識別するように構成される。本発明の一部の実施形態によれば、ＶＣＳ１０４は、人体全体又はその一部の位置情報及び／又は動き情報と共に、或いは救急車の進路に沿った車両位置、患者の生命徴候、及び／又は車速等の同時に発生する他の要素と共に、同時に発生するジェスチャを識別するように構成される。ＶＣＳ１０４は、同一人物による同時に発生するジェスチャ、例えばそれぞれの手又は手と頭とを使った異なる若しくは同様のジェスチャを識別するように構成することもできる。例えば、ＶＣＳ１０４は、手を振るジェスチャを認識し、遭遇記録７内に記録を作成し、車速が時速６０マイルを超えているときに手を振るジェスチャが受け取られる場合に救急車の運転手に減速するように知らせるように構成することができる。このようにして、更なる事象（遭遇記録７への書き込みや通知の作成、又は他の何らかのアクション）を引き起こす状態を作成する際、又は遭遇記録７自体への項目（例えば状態の発生時にフラグが立てられ、集められ、さもなければメモが取られるたぐいの情報）を作成する際、視覚的に認識されるジェスチャをＶＣＳ１０４が受け取る他の情報と対にして、相関させ、又は組み合わせることができる。
【００７３】
一部の実施形態によれば、ＶＣＳ１０４は、例えば人間の姿が患者支持器４上で座っている又は横たわっているかどうかを判定することにより、患者が車両１０１によって搬送されているかどうかを（遭遇記録７内で、又は他の装置のために）識別する。ＶＣＳ１０４は、患者又は乗組員の位置、例えば患者又は乗組員が座っているか立っているかを識別することもできる。ＶＣＳ１０４は、緊急作業員及び／又は被害者の探索を支援するために、通常の緊急対応環境の域を越えた構造体に関する情報、例えば建物の火災等の緊急事故のより広域的な奥行画像をセンサ１から受け取ることもできる。
【００７４】
センサ１を１つ図示して説明したが、同じ種類又は異なる種類の複数のセンサ１をＶＣＳ１０４に通信可能に結合しても良い。より多くの対象若しくは人間を観察するために、又は形状及び／若しくは動きに関するより詳細な情報を集めるために、複数のセンサ１を用いて視界又は視野の深さを広げ、又は様々な視野角から同様の情報を集めることができる。センサ１を車内に搭載するものとして説明したが、センサ１又は複数のセンサ１を代わりに装置（例えば緊急対応現場に持って行く除細動器）、及び／又は人間（例えば乗組員のヘルメット）に装着しても良い。
【００７５】
本発明の実施形態は、カルテ記入及び／又はカウント機能に使用することもできる。多くの場合、医者は患者の治療中に起こった過去の事象を再現しなければならない。本発明の実施形態は、正確さを改善し、様々な事象が起こった時刻を正確に記録に残すことを助ける。例えば、ＶＣＳ１０４は、救急車１０１内の複数の棚又は保管場所の境界を認識することができ、各保管場所に医者が近づいた時刻並びにその場所に近づいた医者の（例えば音声、身体、又は顔認識から得られる）識別情報のログを取ることができる。かかる「バウンディングボリューム（ｂｏｕｎｄｉｎｇ  ｖｏｌｕｍｅ）」は、ＶＣＳ１０４内に事前にプログラムすることができ、且つ／又はＶＣＳ１０４、センサ１、及び／又は新たな保管場所の導入時にカスタマイズし又は初期化することができる。ＶＣＳ１０４は、遭遇の際に使用されたアイテムの数を求めるために救急車の床の上にある箱の数を数え、それを、患者との遭遇に関してカルテに記入された薬剤及び他の耐久消費財と照合調整することができる。その後、ＶＣＳ１０４は、遭遇記録７の照合調整を助けるために医者を促して追加情報を得ることができる。
【００７６】
上記のように、システム４００は、患者が別の人間によって、又は別の人間が持つ道具によって接触されているときを判定することもできる。この情報は、患者との不適切な接触が生じたかどうかを判定するために、患者との遭遇中に又はその後で使用することができる。システム４００は、ＩＶが開始されているときを判定することができる。システム４００は、ジェスチャによるカルテ記入、例えば作為的なジェスチャによる素早いログ収集を使用し、かかる情報の手入力又はタイプ入力に比べて時間を節約することもできる。本発明の実施形態は、サイレンや道路の音を除去することができ、乗組員にフィードバックを与えることもできる音声認識を含んでも良い。本発明の実施形態は、例えば顔認識、パターン認識、名札の読み取り、骨格形成、癖や動きによって、又は乗組員のログインやＶＣＳ１０４に同じく通信可能に結合されるＲＦＩＤバッジ等の別のメカニズムによって乗組員を識別するように構成することもできる。本発明の一部の実施形態によれば、車両１０１内に身元未確認の又は不所望の侵入者がいることを検出するよう、セキュリティをモニタするためにシステム４００を使用することができる。
【００７７】
本発明の一部の実施形態によれば、システム４００は、或る人物がジェスチャを行い又は特定の活動を行うときにその人物の追跡を開始するために使用することができ、そのジェスチャ又は活動後も一定の期間にわたり若しくは別の事象、例えば別の視覚的事象が発生するまで同じ人物を追跡し続けることができる。一部の実施形態では、システム４００が視覚情報を使用して医療装置の操作者を識別し、例えば、除細動器等の患者モニタ装置１０６がカメラ又は他の種類のセンサアレイ１を含むことができ、人物を識別するために又はその人物の活動をモニタし若しくは解釈するために、装置１０６の使用時に、装置１０６は同装置１０６の真正面にいる人物の視覚的特性を観察することができる。システム４００は、医療関係者が使用する器具をその視界内で視覚的刺激又は別の方法によって認識し又は識別するように構成することもでき、カメラ又はセンサアレイ１が、使用されている装置内になくても又は使用されている装置の近くになくても、医療関係者の同様の識別又は視覚的モニタリングを行うことができる。本発明の実施形態によれば、様々な装置上で行われる活動及び関係者によって行われる活動を相関させ、手作業による注釈を必要とすることなしにより完璧な患者記録を得るために、医療関係者が使用するそのような複数の装置を、互いに及び／又はシステム４００と無線で又は他の方法で通信可能に結合することができる。システム４００は、救急車の後部等の車内にだけ搭載できるのではなく、システム４００及び／又はその一部は、除細動器等の携帯型医療装置を含む医療装置に組み込み又は搭載することもできる。
【００７８】
システム４００は、人物のジェスチャに基づいてその人物を「記憶する」ように構成することもでき、例えばシステム４００は、或る人物がシステム４００に自分の身分を明らかにした翌日に、その人物が行った特定のジェスチャを観察する場合があり、その人物が次の機会にシステム４００に自分の身分を明確に明らかにしなくても、同様のジェスチャを観察することに基づき次の日に同じ人物を視覚的に識別することができる。本発明の実施形態によれば、システム４００は、所与の領域内にいる別々の人間の数を数えるように構成することもできる。
【００７９】
システム４００は、特定の活動をモニタし、それらの活動の様々な側面を解釈し、更には活動の行為者に実時間で又はその後のレビュー内でフィードバックを与えるように構成することもできる。例えば、システム４００は、ＥＭＳ隊員による患者への十二誘導の装着をモニタすることができ、且つ／又は適応フィードバック、例えば心肺蘇生法を施している人物への適応フィードバックを提供することができる。システム４００は、体の特定の部分又は人物が持っている対象を識別し、その体の一部又は対象の動きを追跡し、追跡した動きをライティングとして記録するように構成することもできる。例えば、ＥＭＳ隊員は指を使って空中で数字、文字、又は言葉を書き、システム４００はその動きをライティングとして記録するように構成することができる。ＥＭＳ隊員は、ジェスチャ又は他の活性化によってそのような「空中ライティング」による記録モードを開始することができ、他の実施形態では、システム４００が、利用者の手又は指が交わっている可能性がある他の対象がないことに基づき、かかる「空中ライティング」を例えば一定の期間にわたって自動的に認識する。本発明の実施形態によれば、このような記録能力は、データを入力し又は患者のカルテを記入する際にＥＭＳ隊員の時間を節約することができ、医療専門家の手が汚れている場合又は医療専門家が手又は手袋を付けた手の無菌性を保つために物理的に装置に触りたくない場合にさえ、医療専門家がカルテ記入項目及び他のライティングを作ることを可能にする。
【００８０】
本発明の範囲から逸脱することなしに、様々な修正及び追加を論じた例示的実施形態に加えることができる。例えば上記の実施形態では特定の特徴に言及したが、本発明の範囲は様々な特徴の組合せを有する実施形態、及び記載した特徴の全ては含まない実施形態も含む。従って本発明の範囲は、特許請求の範囲に含まれるそのような全ての代替形態、修正形態、及び改変形態をその全ての均等物と共に包含することを意図する。
【図１】
2015533248.tif 000003
【図２】
2015533248.tif 000004
【図３】
2015533248.tif 000005
【図４】
2015533248.tif 000006
【図５】
2015533248.tif 000007
【図６】
2015533248.tif 000008
【図７】
2015533248.tif 000009
【図８】
2015533248.tif 000010
【図９】
2015533248.tif 000011
【図１０】
2015533248.tif 000012
【国際調査報告】
2015533248.tif 000013
2015533248.tif 000014
2015533248.tif 000015